L’ensemble de données d’apprentissage machine des universités de BristolToronto and Catania est une grande collection de vidéos à la première personne de tâches liées à la cuisine, dans le but de comprendre l’interaction et les buts des objets :

Qu’est-ce que EPIC-Kitchens ?
Le plus grand ensemble de données en vision à la première personne (égocentrique) ; des enregistrements non scénarisés à facettes multiples dans des environnements indigènes – c’est-à-dire les maisons des porteurs, capturant toutes les activités quotidiennes dans la cuisine pendant plusieurs jours. Les annotations sont recueillies à l’aide d’une nouvelle approche de commentaires audio en direct.

La vision à la première personne gagne en intérêt car elle offre un point de vue unique sur l’interaction des gens avec les objets, leur attention et même leur intention. Toutefois, les progrès dans ce domaine difficile ont été relativement lents en raison de l’absence d’ensembles de données suffisamment importants. Dans cet article, nous présentons EPIC-KITCHENS, une référence vidéo égocentrique à grande échelle enregistrée par 32 participants dans leur cuisine habituelle. Nos vidéos illustrent des activités quotidiennes non scénarisées : nous avons simplement demandé à chaque participant de commencer à enregistrer chaque fois qu’il entrait dans sa cuisine.

L’enregistrement a eu lieu dans 4 villes (en Amérique du Nord et en Europe) par des participants de 10 nationalités différentes, ce qui a donné lieu à des habitudes culinaires et des styles de cuisine très variés. Notre ensemble de données comprend 55 heures de vidéo composée de 11,5 millions d’images, que nous avons étiquetées de manière dense pour un total de 39,6K segments d’action et 454,2K boîtes de délimitation d’objets. Notre annotation est unique en ce sens que nous avons demandé aux participants de raconter leurs propres vidéos (après l’enregistrement), reflétant ainsi la véritable intention, et nous avons fait appel à une foule de vérités de terrain basées sur ces vérités.

 

Epic-Kitchen

https://epic-kitchens.github.io/2018

Laisser un commentaire

Ce site utilise Akismet pour réduire les indésirables. En savoir plus sur comment les données de vos commentaires sont utilisées.