Gest-Art : étude préliminaire pour le développement d'un avatar pour nos recherches avec les enfants

Projet de spécialité FabLab Enimag 2A : Gest-art : un avatar pour l’apprentissage du langage via la gestualité. Dans le cadre de nos recherches chez l'enfant, nous souhaitons développer des outils ludiques pour permettre d'étudier le rôle de la gestualité manuelle dans l'apprentissage de la parole. Nous avons proposé un projet d'étude et de développement à des étudiants de deuxième année de l'école d'ingénieur ENSIMAG en collaboration avec le Fablab FabMSTIC . Pendant les 3 semaines allouées, les 4 étudiants ayant choisi ce projet ont pu : (1) Modéliser un personnage 3D dans le logiciel Blender et l'animer avec Nimate pour créer des vidéos de ce personnage reproduisant des gestes; (2) Intégrer une bibliothèque de reconnaissance de gestes et identifier des gestes simples suivis avec la Kinect; (3) Identifier des objets associés à un QRCode; (4) Implémenter un premier scénario d'interaction basé sur le travail de Maxime Barnier, étudiant du Pôle supérieur de Design de Villefontaine . Vous pouvez voir une vidéo de démonstration réalisée par les étudiants ici et leur rapport de projet ici . Les dessins et les gestes utilisés dans le projet ont été conçus en collaboration avec Estelle Gillet-Perret du Centre Référent des Troubles du Langage, CHUG.