Development of a tone adjustment self-study app with evaluation, including all the functions of Japanese intonation and elucidating their relationship

本研究は、日本語学習者が、語、句、発話における音調全般を身に付けられるようになるアプリを開発することが目的です。そのために、日本語の音調に①語彙、②語彙（オノマトペ）、③文の区切り、④文の区切り（係り受け）、⑤文の区切り（プロミネンス）の分類を設けました。2020年度は、④として「寝ている犬の子ども」、2021年度は②「フラフラだ」と「フラフラする」、⑤「山でそばを食べました」をとりあげました。④は、音調によって、寝ているのが「犬」なのか「犬の子ども」なのかが言い分けられ、②は品詞によって語アクセントが変わり、⑤は「どこで食べたか」「何を食べたか」「山でそばをどうしたか」といった質問に答える際に、プロミネンス、発話音調が変わります。④、②、⑤ともに、日本語話者42名分の音声採取が完了し、分析、推論モデルをPCに投入することができました。2022年度は、アプリをくみ上げました。スマホに搭載したアプリが録音音声を再生し、それを聞いて学習者が繰り返し、スマホでその音声を録音、録音した学習者の音声をhttps通信でサーバーに送信、サーバーにある推論モデルで分析、その結果をスマホ側に送信、表示します。その表示を参考に、学習者が発話練習を繰り返すシステムです。日本語学習者、および、日本語教師を対象に試用して、アンケートに答えてもらいました。アンケートの結果は、概ね、良好。学習者は、使いやすいし、イントネーションの上達に役立ったという回答が80%を超えました。教師からは、スマホで手軽に練習できる点が評価されましたが、AIによる評価判断が不安定だと指摘されました。スマホ側アプリとサーバー側推論モデルを同一のPC上に構築してあります。開発環境は、スマホアプリ側がUnity、言語C#、サーバー側はdockerで仮想環境を構築、言語はpython Flaskです。

本研究は、日本語学習者が、語、句、発話における音調全般を身に付けられるようになるアプリを開発することが目的です。そのために、日本語の音調に①語彙、②語彙（オノマトペ）、③文の区切り、④文の区切り（係り受け）、⑤文の区切り（プロミネンス）の分類を設けました。2020年度は、④として「寝ている犬の子ども」、2021年度は②「フラフラだ」と「フラフラする」、⑤「山でそばを食べました」をとりあげました。④は、音調によって、寝ているのが「犬」なのか「犬の子ども」なのかが言い分けられ、②は品詞によって語アクセントが変わり、⑤は「どこで食べたか」「何を食べたか」「山でそばをどうしたか」といった質問に答える際に、プロミネンス、発話音調が変わります。④、②、⑤ともに、日本語話者42名分の音声採取が完了し、分析、推論モデルをPCに投入することができました。2022年度は、アプリをくみ上げました。スマホに搭載したアプリが録音音声を再生し、それを聞いて学習者が繰り返し、スマホでその音声を録音、録音した学習者の音声をhttps通信でサーバーに送信、サーバーにある推論モデルで分析、その結果をスマホ側に送信、表示します。その表示を参考に、学習者が発話練習を繰り返すシステムです。日本語学習者、および、日本語教師を対象に試用して、アンケートに答えてもらいました。アンケートの結果は、概ね、良好。学習者は、使いやすいし、イントネーションの上達に役立ったという回答が80%を超えました。教師からは、スマホで手軽に練習できる点が評価されましたが、AIによる評価判断が不安定だと指摘されました。スマホ側アプリとサーバー側推論モデルを同一のPC上に構築してあります。開発環境は、スマホアプリ側がUnity、言語C#、サーバー側はdockerで仮想環境を構築、言語はpython Flaskです。