en fr COSMO: a Bayesian model of sensorimotor interactions in speech perception COSMO : un modèle bayésien des interactions sensori-motrices dans la perception de la parole Reportar como inadecuado




en fr COSMO: a Bayesian model of sensorimotor interactions in speech perception COSMO : un modèle bayésien des interactions sensori-motrices dans la perception de la parole - Descarga este documento en PDF. Documentación en PDF para descargar gratis. Disponible también para leer online.

1 LIG - Laboratoire d-Informatique de Grenoble 2 GIPSA-PCMD - PCMD GIPSA-DPC - Département Parole et Cognition

Abstract : While speech communication is a faculty that seems natural, a lot remains to be understood about the nature of the cognitive representations and processes that are involved. Central to this PhD research is the study of interactions between perception and action during production or perception of syllables. We choose Bayesian Programming as a rigorous framework within which we provide a mathematical definition of the COSMO model -Communicating Objects using Sensori-Motor Operations-, which allows to formalize motor, auditory and perceptuo-motor theories of speech communication and to study them quantitatively. This approach first leads to a strong theoretical result: we prove an indistinguishability theorem, according to which, given some ideal learning conditions, motor and auditory theories make identical predictions for perception tasks, and therefore cannot be distinguished empirically. To depart from these conditions, we introduce an original -learning by accommodation- algorithm, which enables to adapt to the ambient acoustic environment as well as to develop idiosyncrasies. This algorithm, which learns by mimicking acoustic targets, allows to acquire motor skills from acoustic inputs only, with the remarkable property of focusing its learning on the adequate regions. We use syllables synthesized by a vocal tract model VLAM to analyse how the different models evolve through learning and how robust they are to degradations.

Résumé : Si la parole est une faculté dont l’usage nous semble parfaitement naturel, il reste toutefois beaucoup à comprendre sur la nature des représentations et des processus cognitifs qui la gouvernent. Au coeur de cette thèse se trouve la question des interactions entre perception et action dans la production et la perception de syllabes. Nous adoptons le cadre rigoureux de la programmation bayésienne au sein duquel nous définissons mathématiquement le modèle COSMO pour -Communicating Objects using Sensori-Motor Operations-, qui permet de formaliser les théories motrice, auditive et perceptuo-motrice de la communication parlée et de les étudier quantitativement. Cette approche conduit à un premier résultat théorique fort : nous démontrons un théorème d’indistinguabilité d’après lequel, lorsque l’on pose certaines hypothèses de conditions idéales d’apprentissage, les théories auditive et motrice font des prédictions identiques pour des tâches de perception, et sont de ce fait indistinguables. Pour s’éloigner de ces conditions, nous proposons un algorithme original d’apprentissage sensori-moteur -par accommodation-, qui permet de s’adapter au bain acoustique ambiant tout en développant des idiosyncrasies. Cet algorithme d’apprentissage par imitation de cibles acoustiques permet l’apprentissage de compétences motrices à partir d’entrées perceptives uniquement, avec la propriété remarquable de se focaliser sur les régions d’intérêt pour l’apprentissage. Nous utilisons des syllabes synthétisées grâce au modèle de conduit vocal VLAM pour analyser les dynamiques d’évolution des modèles appris ainsi que leur robustesse aux dégradations.

en fr

Keywords : learning. Speech perception cognition computational modeling sensori-motor interactions Bayesian programming

Mots-clés : Perception de la parole modélisation computationelle interactions sensori-motrices programmation bayésienne apprentissage.





Autor: Raphaël Laurent -

Fuente: https://hal.archives-ouvertes.fr/



DESCARGAR PDF




Documentos relacionados