非母国語話者のための韻律を包含する発音学習システムに関する研究

针对非母语人士的包含韵律的发音学习系统的研究

• 批准号: 12040101
• 负责人: 牧野 正三
• 金额: $ 54.53万
• 依托单位: Tohoku University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research on Priority Areas
• 财政年份: 2000
• 资助国家: 日本
• 起止时间: 2000 至 2002
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-12040101/
• 关键词: 外国語教育; 教育工学; CALL; 音声工学; インターネット; マルチモーダル

最新の情報処理技術と、日本語や外国語の教育学を融合することによって、韻律的特徴も包含する発音教育システムを構築することを研究目的としている。本研究グループの成果は大きく3つに分かれる。(1)音声認識技術を用いた発音学習システムの構築(牧野、白井、広瀬,サンダース):韻律を含む英語や日本語の発音学習システムでは、発音や韻律を評価する際には、学習者の発声した音声のどの部分がどの音素に対応しているかを学習者に示し、その部分を学習者がどのように発声したか、また教師とどのように異なるかを示す必要がある。本研究では、話者適応機能と非母国語話者の発音誤り規則を持つ音素ラベリングシステムを構築した。この結果、発音誤りを含む非母国語話者の発声を音素ごとに自動的に区切ることができ,その結果を用いて発音、イントネーションとリズムの評価を行うことが可能になった。(2)音声情報処理技術,インターネット技術とマルチメディア技術を用いた発音学習システムの構築(佐藤、才田、三輪,石塚):音声情報処理技術を用いて、基本周波数やホルマント周波数を抽出し、それを非母国語話者に図で示すことによって教育効果を高めるシステムを日本語発音教育と中国語発音教育で開発した。また、マルチメディア技術を利用して、例えばコロケーションが使用される状況を動画や音声で学習させ,社会的状況の違いによる日本語の使用法の違いを教えるシステムも開発した.また,擬人化エージェント技術とチャットの技術を用い,英会話学習を楽しく学習できるシステムを開発した.(3)自由度の高い発音学習システムのための韻律句生成規則及びパラ言語情報の分析(吉本、前川):(1)と(2)での教材はあらかじめ録音されたものを用いているが、任意に入力した漢字かな混じり文章に対して韻律句情報やパラ言語情報を付与することができれば、任意の文章に対する発音学習システムを構築することができる。そのための韻律句生成規則の研究と、パラ言語情報の分析を行った。

Latest の intelligence 処 technology と, Japanese foreign language の や pedagogy を fusion す る こ と に よ っ て, rhythmic 徴 も contains す る 発 sound education シ ス テ ム を build す る こ と を research purpose と し て い る. The results of this study, グ グ プ プ プ プ グ, are グ く and 3 に points プ れる. (1) sounds know technology を い た 発 sound learning シ ス テ ム の building (makino, white hole, hiroo neo-ichinose, サ ン ダ ー ス) : contains rhythm を む English や Japanese の 発 sound learning シ ス テ ム で は, 発 や rhythm を review 価 す る interstate に は, learners の 発 sound し た sounds の ど の part が ど の phonemes に 応 seaborne し て い る か を learners に し, そ の part を learn Practitioners が ど の よ う に 発 sound し た か, ま た teachers と ど の よ う に different な る か を shown す necessary が あ る. This study で で, speaker adaptation 応 function と, non-native speakers <s:1> error statement rules を holding <s:1> phonemes ラベリ グシステムを グシステムを construct た. こ の results, 発 mistakenly り を contain む of home country YuHua is の 発 sound を phonemes ご と に に area automatically cut る こ と が で き, そ の results を い て 発 sound, イ ン ト ネ ー シ ョ ン と リ ズ ム の review 価 を line う こ と が may に な っ た. (2) sounds intelligence 処 technology, イ ン タ ー ネ ッ ト technology と マ ル チ メ デ ィ を ア technology with い た 発 sound learning シ ス テ ム の building (sato, only field, three rounds, cairn) : sounds intelligence を 処 manage technology with い て, basic cycle for や ホ ル マ ン ト cycle for を spare し, そ れ を non motherland YuHua に 図 で す indicated こ と に よ っ て education services high を め る Youdaoplaceholder0 Japanese pronunciation education と Chinese pronunciation education で development た. ま た, マ ル チ メ デ ィ ア technology を use し て, example え ば コ ロ ケ ー シ ョ ン が use さ れ る condition を animation や sounds で learning さ せ, social conditions の violations い に よ る Japanese の use の violations い を teach え る シ ス テ ム も open 発 し た. ま た, anthropomorphic エ ー ジ ェ ン ト technology と チ ャ ッ ト を use い の technology, English conversation を joy し く learning で き る シ ス テ ム を open 発 し た. (3) the high degree of freedom の い 発 sound learning シ ス テ ム の た め の rhyme words of generating rules and び パ ラ verbal intelligence の analysis (gibbon, the maekawa) と : (1) (2) で の textbooks は あ ら か じ め recording さ れ た も の を with い て い る が, arbitrary に し into force た characters か な mixed じ り article に し seaborne て rhyme words of intelligence や パ ラ Verbal intelligence を give す る こ と が で き れ ば, arbitrary の article に す seaborne る 発 sound learning シ ス テ ム を build す る こ と が で き る. Youdaoplaceholder0 ため ため ため study the rules for generating prosodic sentences と and パラ verbal intelligence <e:1> analysis を line った.

项目成果

権五杓, 鈴木基之, 伊藤彰則, 牧野正三: "韓国人向け日本語発音教育システムの試作"日本音響学会2002年秋季研究発表会講演論文集. 1-6-6. 219-220 (2002)

Kongo、Motoyuki Suzuki、Akinori Ito、Shozo Makino：“韩国人日语发音教育系统的原型”日本声学学会 2002 年秋季研究会议记录 1-6-6（2002 年）。

S.Saeyor, H.Binda, M.Ishizuka: "Visual Authoring Tool for Presentation Agent Based on Multimodal Presentation Markup Language"Proc. Imformation Visualisation. 563-567 (2001)

S.Saeyor、H.Binda、M.Ishizuka：“基于多模态表示标记语言的表示代理可视化创作工具”Proc。

長沢忠郎, 鈴木基之, 牧野正三: "自動音韻ラベリングを用いた韻律評価システム"日本音響学会研究発表会講演論文集. I. 397-398 (2002)

Tadao Nagasawa、Motoyuki Suzuki、Shozo Makino：“使用自动语音标记的韵律评估系统”日本声学学会研究会议记录 I. 397-398 (2002)。

筒井,石塚: "キャラクタエージェント機能を有するマルチモーダル・プレゼンテーション記述言語MPML"情報処理学会論文誌. 41・4. 1124-1133 (2000)

Tsutsui，Ishizuka：“具有字符代理功能的多模态表示描述语言 MPML”，日本信息处理学会汇刊 41・4（2000 年）。

伊藤彰則, 牧野正三: "デコーダパラメータ設定の有意性の検証"日本音響学会2003年春季研究発表会講演論文集. 3-4-10. 147-148 (2003)

Akinori Ito、Shozo Makino：“解码器参数设置重要性的验证”日本声学学会 2003 年春季会议记录 3-4-10 (2003)。