Antoine COUTROT, soutient  sa thèse de Doctorat le 2 octobre 2014 au GIPSA-Lab (salle Mont-Blanc). Intitulée « Influence du son lors de l'exploration de scènes naturelles dynamiques - Prise en compte de l'information sonore dans un modèle d'attention visuelle », cette thèse a été préparée au sein des laboratoire Gipsa-Lab, sous la direction de Alice CAPLIER (directrice de thèse), et Nathalie GUYADER (co-directrice de thèse).

 

Résumé :
Nous étudions l'influence de différents attributs audiovisuels sur l'exploration visuelle de scènes naturelles dynamiques. Nous démontrons que si la façon dont nous explorons une scène dépend avant tout de son contenu visuel, dans certaines situations le son influence significativement les mouvements oculaires. La présence de son assure une meilleure cohérence entre les positions oculaires de différents observateurs, attirant leur attention et donc leur regard vers les mêmes régions. L'effet du son se retrouve tout particulièrement dans les scènes de conversation, où la présence du signal de parole associé augmente le nombre de fixations sur le visage des locuteurs, et donc la cohérence entre les scanpaths. Nous proposons un modèle de saillance audiovisuelle repérant automatiquement le visage des locuteurs afin d'en rehausser la saillance. Ces résultats s'appuient sur les mouvements oculaires de 148 participants enregistrés sur un total de plus de 75 400 frames (125 vidéos) dans 5 conditions expérimentales différentes.


Jury :
Alice CAPLIER, Grenoble INP, Directrice de thèse
Nathalie GUYADER, Université Joseph Fourier, co-directrice de thèse
Matei MANCAS, Université de Mons, Rapporteur
Patrick LE CALLET, université de Nantes, RApporteur
Olivier LE MEUR, université de Rennes, examinateur
Jean-Luc SCHWARTZ, CNRS, examinateur