Colloque

Des sons aux gestes : validation des modèles d'IA pour une synthèse naturelle du mouvement humain

Azzahrae El Khiati

Membre a labase

Azzahrae El Khiati : CDRIN

Résumé de la communication

Dans le cadre des jeux vidéo en ligne, l’immersion et la communication entre joueurs sont cruciales. Notre recherche explore la capacité de l’intelligence artificielle à générer en temps réel des mouvements corporels synchronisés avec la voix des utilisateurs. L’objectif est d’améliorer la naturalité et l’expressivité des avatars numériques en produisant des gestes cohérents avec les variations prosodiques du discours, renforçant ainsi l’interaction non verbale dans les environnements virtuels. Pour évaluer l’efficacité des modèles de synthèse audio-to-motion, une approche expérimentale a été adoptée. Un corpus multimodal a été constitué à partir d’enregistrements vocaux synchronisés avec des données de capture de mouvement issues de divers contextes et types de discours. L’évaluation s’est appuyée sur des critères quantitatifs (synchronisation et fluidité des mouvements) ainsi que qualitatifs (retours perceptifs par des joueurs). Les résultats indiquent que, si certains modèles reproduisent efficacement la cadence et l’amplitude des gestes, ils peinent à saisir la diversité et les subtilités de la voix. En revanche, des architectures intégrant des mécanismes de régularisation temporelle offrent une meilleure modélisation des transitions gestuelles, ouvrant ainsi des perspectives pour une synthèse plus réaliste du mouvement humain et une expérience de jeu enrichie.

Résumé du colloque

Pour nombre de chercheuses et de chercheurs du collégial, la recherche est un véritable levier pour l’action. Qu’il s’agisse d’en déployer les résultats sur le plan politique, social, technologique, pédagogique, entrepreneurial ou économique, par exemple, l’action demeure une force motrice, voire vitale, pour la recherche collégiale. Or, si l’on peut se réjouir de cet engagement de la part de ces personnes, il n’en demeure pas moins que l’adoption de pratiques moins conventionnelles que celles auxquelles renvoient les indicateurs traditionnels des retombées de la recherche en enseignement supérieur, soit la mesure du nombre et de la qualité des publications — surtout savantes —, de la taille du financement public et privé ainsi que des prix obtenus, soulève des enjeux importants. Ceux-ci seront au cœur du colloque que l’ARC et le Réseau des CCTT — Synchronex tiendront, de concert, dans le cadre du 92^e congrès de l’Acfas. Des praticiennes et praticiens de la recherche collégiale de la francophonie viendront en rendre compte afin d’inspirer les congressistes. De plus, les communicatrices et communicateurs qui y présenteront les résultats de leurs travaux de recherche sous la forme de communications orales brèves ou affichées seront interrogés à ce sujet en amont du colloque. Par ailleurs, les enjeux seront également abordés par des acteurs majeurs de la recherche et de l’innovation alors que l’ensemble de l’écosystème de la recherche et de l’innovation traverse une période ponctuée par l’évaluation de mi-parcours de la Stratégie québécoise de recherche et d’investissement en innovation, par la nouvelle planification stratégique du Fonds de recherche du Québec, par l’aboutissement du Chantier sur la recherche au collégial ainsi que par la publication d'un avis du Conseil supérieur de l’éducation sur la recherche collégiale. Le colloque sera un lieu d’échange incontournable au sujet de ces enjeux. Enfin, il présentera la finale de l’édition 2025 des Prix étudiants de l’ARC.