Modelling and prototyping of a generation method integrating pragmatic, syntactic, and prosodic information

• Auteur / Autrice : Wenjie Cao
• Direction : Christian Boitet, Chengqing Zong
• Type : Thèse de doctorat
• Discipline(s) : Interaction, connaissance et inférence
• Date : Soutenance en 2007
• Etablissement(s) : Grenoble INPG en cotutelle avec Académie des sciences de Chine

Mots clés

Mots clés contrôlés

Synthèse de la voix

Résumé

Le thème de la thèse est l'amélioration de la synthèse de parole en partant de représentations décrivant le contenu propositionnel d'une part, et des informations pragmatiques d'autre part (affect, émotions, contexte dialogique éventuellement). La thèse montre qu'on peut améliorer le "naturel" d'une voix de synthèse non seulement en insérant dans le texte à prononcer des annotations (en SSML ou SABLE, instances de XML) contrôlant divers paramètres (énergie, type de voix, prosodie), mais aussi, si on peut partir d'une représentation abstraite du contenu, en paramétrant la génération (linguistique) de l'énoncé par certains des paramètres prosodiques (choix de la syntaxe, choix lexicaux).

The topic of the thesis is to ameliorate the speech synthesis by starting from abstract semantic representations, and pragmatic information (affect, emotions, and maybe dialogue context). The thesis shows that the naturalness of synthesized speech can be ameliorate by directly inserting annotations (in the format of SSML, SABLE or XML) into the text to be pronounced in order to control various parameters (energy, voice type, prosody); but also through parameterizing the procedure of natural language generation, starting from an abstract representation, integrating the selection of lexicon and of syntax, as well as the control of prosody.