Seminar exceptional Language

Julien Diard, laboratory LPNC Grenoble (http://diard.wordpress.com)

Presentation in French

Titre : COSMO : une famille de modèles bayésiens perceptuo-moteurs de la perception et de la production de la parole

Auteurs : Julien Diard, Mamady Nabé et Jean-Luc Schwartz

Résumé : Nous avons développé un cadre de modélisation des processus de la communication parlée, COSMO (« Communicating Objects by Sensory-Motor Operations »). COSMO permet de formaliser conjointement des modèles de perception et de production de parole traduisant deux cadres théoriques majeurs des recherches sur la communication parlée, les théories auditives et motrices – mais aussi de les intégrer au sein de théories perceptuo-motrices. Les modèles COSMO ont par exemple permis d'étudier les régularités des systèmes phonologiques, les dynamiques et la complémentarité des apprentissages auditifs et moteurs, des apprentissages phonémiques et syllabiques, et l'émergence d'idiosyncrasies de production et de perception. Le dernier né de la famille COSMO, le modèle COSMO-Onset, s'intéresse aux mécanismes de détection d'événements temporels dans l'enveloppe acoustique du signal de parole, par exemple pour la détection des frontières syllabiques. Dans ce cadre, l'originalité de COSMO-Onset est l'intégration de connaissances lexicales "top-down" en complément des traitements "bottom-up" : nous montrons que leur fusion améliore la segmentation temporelle, et donc la reconnaissance de mots, en particulier pour les stimuli dégradés. Le modèle permet aussi de se confronter aux observations qui suggèrent que la reconnaissance est meilleure pour la parole naturelle quand elle est isochrone, que pour la parole rendue artificiellement isochrone, ou la parole naturelle en général.