Quelques orientations méthodologiques pour étudier la gestuelle dans des corpus spontanés et semi-contrôlés

Abstract

Cet article dresse un panorama méthodologique en vue de l’étude de la parole dans une perspective multimodale. Il ne s’agit donc pas de donner ici des résultats mais de montrer un peu les coulisses d’une étude multimodale en révélant les questionnements méthodologiques que tout chercheur doit se poser avant d’entreprendre une telle étude. Ainsi, cet article abordera la question du recueil des éléments constituant un corpus multimodal, de l’annotation \(et notamment de la conception d’un schéma d’annotation\) et enfin de la méthodologie du contre-codage en vue de valider les annotations. Il présentera donc diverses études et se fera le témoin de plusieurs expériences méthodologiques. L’accent sera mis en particulier sur les études de la gestuelle coverbale mais tout en envisageant le transfert de ces approches méthodologiques à d’autres modalités telles que les expressions faciales, le regard ou encore les postures.This paper establishes a methodological panorama for the study of speech in a multimodal perspective. Therefore, the aim is not to give results but to uncover what lies behind the scenes of a multimodal study by revealing methodological questions that any researcher should raise before undertaking such a study. Thus, this paper addresses the issue of the collection of a multimodal corpus, coding techniques \(including the development of an annotation scheme\) and finally the methodology to set up an inter-coder agreement to validate the annotations. Therefore, this paper presents several studies and relates several methodological experiences. The focus will be placed on studies about co-speech gestures but considering the transfer of these methodological approaches to other modalities such as facial expressions, gaze or postures.