Analyse, Modellierung und Synthese sichtbarer Sprechbewegungen bei unterschiedlichen Sprechgeschwindigkeiten

不同语速下可见语音动作的分析、建模和合成

• 批准号: 40177908
• 负责人: Dr. Sascha Fagel
• 金额: --
• 依托单位: Institut für Sprache und Kommunikation
• 依托单位国家: 德国
• 项目类别: Research Grants
• 财政年份: 2007
• 资助国家: 德国
• 起止时间: 2006-12-31 至 2009-12-31
• 项目状态: 已结题
• 来源: https://gepris.dfg.de/gepris/projekt/40177908?language=en
• 关键词: Analyse; Modellierung; und; Synthese; sichtbarer

Trotz intensiver Forschungs- und Entwicklungsarbeit im Bereich Mensch-Maschine- Interaktion bieten aktuelle Sprachvisualisierungssysteme nicht die Möglichkeit, unterschiedliche Sprechgeschwindigkeiten adäquat darzustellen. Da solche Systeme jedoch eingesetzt werden um sprech- und hörgestörten Menschen barrierefreien Zugang zu Informationssystemen zu ermöglichen, ist diese Funktionalität von großer Bedeutung. Auch in weiteren Anwendungen wie z.B. Animationsfilmen und Computerspielen werden immer realistischere Sprechbewegungen benötigt. Durch die exakte Modellierung der sichtbaren Sprechbewegungen leistet das Projekt hierzu einen wichtigen Beitrag. Im Rahmen des Vorhabens werden unterschiedlich schnell gesprochene Äußerungen optisch aufgezeichnet und mithilfe eines aktuellen gestischen Modellansatzes für gesprochene Sprache analysiert. So werden die sichtbaren Bewegungen hinsichtlich des Sprechtempos allgemein beschreibbar und es lassen sich neue Erkenntnisse über den Vorgang der Sprachproduktion ableiten. Anschließend wird das entwickelte Modell in aktuelle Systeme zur Sprachvisualisierung (zur Reproduktion aufgenommener Daten) und visuellen Sprachsynthese (zur Erzeugung beliebiger Sprachäußerungen) implementiert. Die Qualität der resultierenden synthetischen visuellen Sprache bezüglich der Sprechgeschwindigkeit wird mittels Wahrnehmungsexperimenten evaluiert. Die Ergebnisse können anschließend in kommerziellen Systemen zur Computeranimation eingesetzt werden. Eine Übertragung der entwickelten Modelle auf nonverbale Mimik ist ebenfalls möglich.

Trotz intensiver Forschungs- und Entwicklungsarbeit im Bereich Mensch-Maschine- Interaktion bieten aktuelle Sprachvisualisierungssysteme nicht die Möglichkeit，unterschedliche Sprechgeschwindigkeiten adäquat darzustellen. Da solche Systeme jedom eingeszt韦尔登um sprech- und hörgestörten Menschen barrierrefreien Zugang zu Informationssystemen zu ermöglichen，is diese Funktionalität von großer Bedeutung.在其他方面也是如此。动画电影和电脑游戏韦尔登immer realistischere Sprechbewegungen benötigt.这是一个非常重要的项目，因为它是一个非常重要的项目。Im Rahmen des Vorhabens韦尔登unterschedlich schnell gesprochene <$ußerungen optisch aufgezeichnet und mithilfe eines aktuellen gestischen Modellansatzes für gesprochene Sprache analysiert.因此，韦尔登认为，所有Sprechtempos的节奏都是非常缓慢的，因此，他认为新的语言产生机制是可行的。Anschließend将在aktuelle Systeme zur Sprachvisualisierung（zur Reproduktion aufgenommener Daten）和visuelen Sprachsynthese（zur Erzeugung beliebiger Sprachäußerungen）implementert中引入模型。Die Qualität der resultierenden synthetischen visuellen Sprache bezüglich der Sprechgeschwindigkeit wird mittels Wahrnehmungsexperimenten evaluiert.该Ergebnisse können anschließend in kommerziellen Systemen zur Computeranimation eingesetzt韦尔登.一个非普通的模拟模型的成功是非常重要的。