抑揚情報を利用した対話音声理解モデル構築のための基礎的研究

利用语调信息构建对话语音理解模型的基础研究

• 批准号: 05241202
• 负责人: 市川 熹
• 金额: $ 1.98万
• 依托单位: Chiba University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research on Priority Areas
• 财政年份: 1993
• 资助国家: 日本
• 起止时间: 1993 至 1995
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-05241202/
• 关键词: 対話型自然言語; 抑揚; ニュース音声; ピッチ周波数; ポーズ; ガーデンパス文; 手話; 協調分散処理

1.研究設備の整備ワークステーションを導入、音声の抑揚解析表示ソフトウェア等を開発・整備した。2.研究進捗状況(1)a:NHK・FM放送のニュース音声(約10分間、男性アナウンサー)の抑揚を解析した。聞き取り易い構成とするために、ニュースのテーマが変る時点や、談話内での話しの流れの転換点での接続詞の使い方に、抑揚の主要要素である声の間(ポーズ)の取り方やピッチ周波数に大きな特徴があることが観察された(当初計画)。b:袋小路文(ガーデンパス文)と呼ばれる非常に複雑な文章に対する理解能力について、文字表記からの読み取りによる理解と音声からの聞き取りによる理解の比較実験を行い、抑揚情報を持つ音声からの理解が圧倒的に優れていることを確認した(追加研究項目)。(2)話し言葉(音声)と同様に自然対話言語である手話に注目し、両者を比較することにより自然対話言語の特質を明確にすることを計画、自然音声対話言語の特徴としての抑揚の持つと予想される役割(単語などの接続関係情報として実時間での意味把握を容易にする、など)に相当する情報が手話にも存在することを確認した。対話型自然言語としての手話に、音声の抑揚に相当する情報が存在するという仮説の下での工学的研究は内外にその例が見あたらないユニークなアプローチと思われ、手話学会、学振委員会などから講演招請を受けている(追加研究項目)。(3)これらの結果は、対話型自然言語理解の処理を行うには、音韻認識等の分節的情報の認識処理と抑揚等の情報から文の構造等を推定する処理を並行して行い、対話の進展を予測する機能などと合わせて協調分散処理を行うエージェント方式とすることが、本質的に重要であることを示唆している。(4)以上の結果を踏まえ、来年度は対話音声における対話制御に対する抑揚の検討などに着手する。

1. Research on the development and maintenance of equipment, sound analysis and expression software 2. Research progress (1)a:NHK·FM broadcast of the sound (about 10 minutes, male) and the analysis of the voice The main elements of sound modulation are the selection of sound frequency, the frequency and the characteristics of sound frequency (original plan). b: Kurokoji text ( (2)Speech leaves (sounds) and natural speech leaves (sounds) are similar to each other. The characteristics of natural speech are clearly defined. The characteristics of natural speech leaves (sounds) and natural speech leaves (sounds) are similar to each other. The characteristics of natural speech leaves (sounds) and natural speech leaves (sounds) are different from each other. The characteristics of natural speech The research on natural speech, manual speech, sound modulation and corresponding information exists, and examples of internal and external engineering research on natural speech, manual speech society, and vibration learning committee (additional research project). (3)The result is that the processing of speech natural language understanding is parallel to the processing of speech natural language understanding, and the processing of speech natural language understanding is parallel to the processing of speech natural language understanding. (4)As a result, the next year, the voice control system will be improved.

项目成果

市川 熹: "音声認識・理解応用システムの分類" 情報処理学会 音声言語情報処理と音声入出力装置研究グループ資料. 93-SPL-2-15. 1-8 (1993)

Hiroshi Ichikawa：“语音识别和理解应用系统的分类”日本信息处理协会语音语言信息处理和语音输入/输出设备研究组资料93-SPL-2-15（1993）。

市川 熹: "日本語ガーデンパス文の聴・読理解比較" 日本音響学会平成6年度春季研究発表会研究論文集. 1-Q-17. 143-144 (1994)

Hiroshi Ichikawa：“日本花园路径句子的听力和阅读理解的比较”日本声学学会 1994 年春季研究会议记录 1-Q-144（1994）。

市川 熹: "ニュース文のポーズとピッチ" 日本音響学会平成6年度春季研究発表会研究論文集. 2-8-7. 219-220 (1994)

Hiroshi Ichikawa：“新闻句子中的停顿和音调”日本声学学会 1994 年春季会议记录 2-8-7 (1994)。

市川 熹: "音声と手話-対話型自然言語-" 自動制御学会 ヒューマン・インターフェース・シンポジューム. 9. 299-304 (1993)

Hiroshi Ichikawa：“语音和手语 - 交互式自然语言 -”自动控制工程师学会人机界面研讨会。9. 299-304 (1993)

市川 熹: "対話型自然言語としての手話" 情報処理学会 音声言語情報処理と音声入出力装置研究グループ資料. 93-SPL-3-10. 47-50 (1994)

Hiroshi Ichikawa：“手语作为一种交互式自然语言”日本信息处理学会语音语言信息处理和语音输入/输出设备研究组资料 93-SPL-3-10 (1994)。