Analyse du comportement multimodal des personnes autistes par traitement informatique de vidéos


Mémoire de DEA
Auteur(s) : GRYNSZPAN, Ouriel
Directeur(s) : Jean-Claude Martin
Date de soutenance : 2002
Intitulé de la formation : DEA de sciences cognitives (Orsay)
Format electronique :
Cote : DEA 0714
Résumé : Définition du besoin L'autisme se caractérise, entre autre, par des troubles sévères au niveau du comportement : mouvements répétitifs et stéréotypés, utilisation inappropriée des objets. Le langage, s'il existe, est souvent utilisé de manière inadéquate (Peeters, 1996). Le travail d'un thérapeute consiste à rentrer en contact avec la personne autiste. Il doit être extrêmement attentif au moindre signe d'interaction qu'il soit de nature gestuelle ou verbale. L'analyse comportementale est donc un facteur clef de la prise en charge. Une méthode d'analyse courante consiste à visionner les enregistrements avec un magnétoscope et à noter ses observations sur papier. Néanmoins, le magnétoscope n'est pas l'outil le plus adapté à un travail de minutie. Lorsque le corpus vidéo grossit, l'annotation devient trop fastidieuse. Il n'y a pas non plus de moyen pratique pour effectuer des analyses statistiques systématiques du comportement. Apport de l'informatique : l'annotation multimodale Dans le domaine de l'infomatique, les ressources linguistiques multimodales sont actuellement en plein développement (Maybury & Martin, 2002). Ces recherches concernent les différents modes de communication : les interactions verbales, la gestuelle, les mimiques, les expressions du regard. L'état actuel des logiciels de traitement automatique d'images ne permet pas d'envisager à moyen terme une reconnaissance et un codage automatique des comportements. En revanche, des systèmes de transcription ont été développés ainsi que des logiciels qui permettent de visionner et d'annoter des vidéos, comme par exemple ANVIL (Kipp, 2002). Ces annotations peuvent faire l'objet de traitements statistiques dont découlent des mesures comportementales (Martin, Grimard & Alexandri, 2001). Toutefois, il n'existe pas à notre connaissance de logiciel spécialement adapté à l'étude du comportement multimodal des autistes. Réalisations L'approche consiste à appliquer les avancées récentes des logiciels d'annotation multimodale à l'étude du comportement autistique. Durant le stage, l'analyse s'est limitée aux comportements stéréotypiques et imitatifs des personnes autistes. Elle a abouti à l'élaboration d'un système de codage des modalités du comportement, ainsi qu'à des algorithmes de traitements statistiques des annotations. Une coopération s'est établie avec une orthophoniste et de nombreux contacts ont été noués dans la communauté de la prise en charge de l'autisme, en particulier lors d'une étude des besoins. Les résultats obtenus montrent que l'annotation et les statistiques permettent de remarquer des corrélations difficilement percevables par simple observation des vidéos. Perspectives Nous appliquerons ce modèle théorique pour mettre à la disposition des thérapeutes une plateforme informatique d'étude du comportement. Elle serait dotée de logiciels d'analyse et d'une banque de données pour gérer le corpus vidéos. En outre, elle pourrait être utilisée ultérieurement pour l'évaluation et le développement d'interfaces homme-machine adaptées aux personnes autistes.
Mots clés :