Gestion de l'incertitude pour l'optimisation en ligne d'un gestionnaire de dialogues parlés à grande échelle basé sur les POMDP

Lucie Daubigney 1 Senthilkumar Chandramohan 1 Matthieu Geist 1 Olivier Pietquin 1
1 IMS - Equipe Information, Multimodalité et Signal
UMI2958 - Georgia Tech - CNRS [Metz], SUPELEC-Campus Metz
Résumé : L'utilisation de l'apprentissage par renforcement (AR) fait maintenant partie de l'état de l'art dans le domaine de l'optimisation de gestionnaires de dialogues parlés. Cependant avec cette méthode, entraîner un gestionnaire de dialogues requiert la génération de nombreuses données. C'est pourquoi beaucoup d'attention a été portée à la simulation d'utilisateurs ces dix dernières années. L'optimisation est donc faite avant de confronter le système à des utilisateurs réels et l'apprentissage est soit stoppé ou soit très lent durant l'utilisation pratique. Pendant ce temps-là, la recherche en AR a développé des algorithmes efficaces en termes d'échantillons. Par exemple les processus gaussiens pour l'AR ont récemment été appliqués aux gestionnaires de dialogues. Pour augmenter la vitesse d'apprentissage, l'incertitude sur les estimations calculées durant l'apprentissage est utilisée pour diriger l'exploration. Une comparaison entre différents schémas d'exploration montre que des améliorations significatives peuvent être apportées et qu'une optimisation en ligne rapide et sûre est possible, même sur une tâche complexe.
Document type :
Conference papers
Complete list of metadatas

Cited literature [17 references]  Display  Hide  Download
https://hal-supelec.archives-ouvertes.fr/hal-00652511
Contributor : Sébastien van Luchene <>
Submitted on : Thursday, December 15, 2011 - 5:25:01 PM
Last modification on : Wednesday, July 31, 2019 - 4:18:03 PM
Long-term archiving on : Friday, November 16, 2012 - 3:41:09 PM

File

JFPDA_2011_LDMGOP.pdf
Files produced by the author(s)

Identifiers

  • HAL Id : hal-00652511, version 1

Collections

SUPELEC | SUP_IMS | CNRS | UNIV-FCOMTE | UMI-GTL

Citation

Lucie Daubigney, Senthilkumar Chandramohan, Matthieu Geist, Olivier Pietquin. Gestion de l'incertitude pour l'optimisation en ligne d'un gestionnaire de dialogues parlés à grande échelle basé sur les POMDP. JFPDA 2011, Jun 2011, Rouen, France. pp.1-7. ⟨hal-00652511⟩

Export

BibTeX TEI DC DCterms EndNote

Share

Metrics

Record views

203

Files downloads

92

Contact

CCSD