프랑스어 MPA 다면자료 구축 연구

Abstract

En communication orale, on parle toujours avec une multitude de gestes. On rit ou on sourit, on bat ou on plisse les paupières, on hoche de la tête ou on agite la tête de droite à gauche, etc. Accompagnés à la parole, ces mouvements corporaux jouent une fonction importante pour élaborer la communication verbale. Mais c’est récemment que les gestes sont entrés dans le domaine des recherches en linguistique. La raison principale est qu’il manquait d’outils qui permettaient d’observer et d’analyser systématiquement les rapports entre la parole et les gestes. B. Pavelin, par exemple, a annoté la parole et les gestes de façon traditionnelle en utilisant des dessins et des textes, mais cette façon s’est avérée peu fiable car elle ne permettait pas d’annoter de manière satisfaisante les nombreuses données et d’établir des liens entre rapports temporels de la parole et des gestes. Nous avons donc adopté une nouvelle manière de faire nommé le corpus multimodal. Les corpus multimodaux consistent en données audiovisuelles (son et image), textuelles et d’annotation. Comme les données traitées sont ainsi hybrides, des outils informatiques comme ELAN sont utilisés pour construire les corpus multimodaux. Dans le présent travail, nous décrivons le déroulement de la construction du MPA corpus multimodal dont les données s’appuient sur « Mina, Pierre et les autres », le manuel complémentaire à la méthode Festival 1. Ce faisant, nous présentons nos catégories descriptives d’annotation des gestes par les mains. La première étape est de la construction du corpus multimodal et le choix des données à traiter. Nous avons opté pour « Mina, Pierre et les autres », car ce manuel montre bien dans les détails les manières de communiquer en français aux niveaux verbal et non verbal. La deuxième étape consiste à préparer des fichiers audiovisuels. Le type de fichier ELAN que nous avons employé comme outil informatique pour construire notre corpus MPA, requiert au moins trois fichiers : un fichier sonore, un fichier visuel et un fichier d’annotations associé aux deux premiers. La troisième étape vise à annoter les données verbales ou non verbales. Nous nous sommes intéressés surtout aux gestes par les mains parce qu’ils s’associent le plus souvent à l’énonciation du langage. Nous avons annoté ces gestes d’après les catégories descriptives suivantes : la symétrie/asymétrie du geste, l’aspect du geste, le type fonctionnel du geste. Ainsi construit, le MPA corpus multimodal s’utilisera tout au long de nos recherches futures comparant les gestes associés à la communication en français et ceux à la communication en coréen.