Résumé

Cet article présente la construction et l’évaluation deux collections d’images et de vidéos d’oeuvres. Ces données proviennent de deux musées : le musée de Grenoble (majoritai- rement des peintures) et le Musée de Lyon-Fourvière (des objets pré-romains et romains). Ces collections contiennent au total 4674 images annotées, correspondant à 784 objets, et 3 heures 7 minutes de vidéos de visites annotées prises à la première personne par 5 visiteurs. Ces collections sont accessibles pour la communauté de recherche afin d’évaluer les systèmes d’an- notation et de recherche d’images et de vidéos. Les images de ces collections sont partionnées en deux sous-ensembles : 361 requêtes évaluées sur un corpus de 4313 images. De plus, 2132 images supplémentaires, extraites des vidéos de visite, permettent d’évaluer les systèmes pour des images issues d’un autre protocole de capture. Nous avons expérimenté trois approches de l’état de l’art (ORB+RANSAC, SIFT+Sac-de-mots, apprentissage profond) sur ces collections.

Abstract

This paper presents two datasets of annotated photos and videos from two museums. The data comes from two different museums : the Musée de Grenoble, with mainly paintings, and the Lyon-Fourvière museum, with Celtic and pre-Roman objects. In total, they contain 4674 annotated images, corresponding to 784 different artworks, and 3h07 of museum visit first- person videos shot by 5 persons. This dataset can be used as a challenge for image retrieval and video segmentation and annotation tasks. They are freely available to the research community. The images of these collections contain 361 queries on a corpus of 4313 documents. Moreover, 2132 additional images are extracted from the visit videos, allowing to test images from other sources. Three state of the art approaches are processed and tested on these collections.