Realization of Universal Design Society: Artificial Intelligence Dialogue System that Reproduces People with Pragmatic Language Disorders

通用设计社会的实现：再现语用语言障碍者的人工智能对话系统

• 批准号: 19J23735
• 负责人: 矢吹 渓悟
• 金额: $ 1.79万
• 依托单位: Future University-Hakodate
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for JSPS Fellows
• 财政年份: 2019
• 资助国家: 日本
• 起止时间: 2019-04-25 至 2022-03-31
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-19J23735/
• 关键词: 語用障害; 定型発達者; 学習システム; 音声対話; Mixed Reality; 障がい者の適切な理解; 自閉症スペクトラム障害; 社会的（語用論的）コミュニケーション障害; コミュニケーション支援; 対話システム; 教育システム; 拡張現実（AR）

本研究では，語用障害をかかえる人（主に自閉症スペクトラム障害および社会的（語用論的）コミュニケーション障害の方）と定型発達者の円滑なコミュニケーションが，語用障害によって阻害される問題を解決するために，定型発達者に語用障害をかかえる人への適切な対話方法および適切な理解の学習を支援することが目的である．解決手法として，定型発達者がHoloLens 2を通して現実空間に投影された語用障害をかかえる人役の3D キャラクターとの音声対話を行いながら，定型発達者の発話に対する語用障害をかかえる人の思考内容を，定型発達者が必要とするタイミングで可視化し，適切な対話方法を学習するシステムを開発した．なお，語用障害をかかえる人の特徴は，Wizard of Oz 法を用いて再現した．また，現実の物体と仮想オブジェクトを組み合わせ，様々な会話状況を再現できる．実験として，公立はこだて未来大学の定型発達者14名を対象に有用性の検証を行った．検証方法として，事前事後テストからシステム使用前後の対話方法と語用障害をかかえる人への印象を比較し，評価を行った．結果として，まず対話方法については，14名中7名に改善が見られた．また，印象については，テキストマイニングの結果から事前テストでは「疎ましい」「閉じこもる」といったネガティブな意見が強く見られた．一方で，事後テストではネガティブな意見はほとんどなく，代わりに「指示語」「言い換える」など具体的な改善策が強く見られ，「しやすい」「なりやすい」といったポジティブな意見が事後テストのみに表出した．このことから本システムは，語用障害をかかえる人との適切な対話方法の実践に結び付けられるかどうかは個人差があるものの，具体的な改善策を想起でき，かつシステム実行前に抱いていた語用障害をかかえる人に対するネガティブなイメージを払拭できる効果について有用性が認められた．

This study aims at solving pragmatic barriers between people (mainly autistic) and social (pragmatic) and stereotyped developers, and at solving pragmatic barriers between stereotyped developers and people. The solution method is: HoloLens 2 is connected to the space projection, the pragmatic barrier is connected to the voice communication, the pragmatic barrier is connected to the voice communication, the content of the voice communication is connected to the user's thinking, the user needs to visualize, and the appropriate communication method is connected to the voice communication. The Wizard of Oz method is used to reproduce the characteristics of the person. The current session status is reproduced in the following way: The 14 candidates for the future university were identified and tested for usefulness. The method of identification and evaluation is to compare the impression of the person before and after the use of the method of communication and the pragmatic barrier. Results: 7 out of 14 students improved. Impression is the result of the event, and the event is the result of the event. On the one hand, after the event, the comment is not correct, instead, the "instruction","the change of words", the specific improvement policy is strong,"the","the comment is correct, the comment is correct, and the comment is correct. This article discusses the pragmatic barriers to the implementation of appropriate communication methods, and proposes specific ways to improve the pragmatic barriers.

项目成果

定型発達者のための語用障害をかかえる人との対話を学習するシステムの開発

开发一个系统，供典型发育者学习如何与患有语言障碍的人互动

• 发表时间: 2019
• 作者: Kamei;I.;Tomitaka;N.;Taichi;M.;Yamasaki;Y.;元田 多一;矢吹渓悟，橋本陽介，角薫
• 通讯作者: 矢吹渓悟，橋本陽介，角薫

WOZ 法を用いた語用障害をかかえる人の特徴を再現する対話システムの学習効果の検討

使用 WOZ 方法检查再现语言障碍者特征的对话系统的学习效果

• 发表时间: 2020
• 作者: 宮下 弓槻;山田 侑樹;橋浦 弘明;櫨山 淳雄;矢吹渓悟，角 薫
• 通讯作者: 矢吹渓悟，角 薫

Ambiguous Utterance Aware: Communication Learning System for Pragmatic Language Disorders Using a Humanoid Robot

歧义话语感知：使用人形机器人治疗语用语言障碍的交流学习系统

• 发表时间: 2019
• 作者: Yabuki K.;Sumi K.
• 通讯作者: Sumi K.

Learning System for Communication with Pragmatic Language Disorders Using a Humanoid Robot

使用人形机器人进行语用语言障碍交流的学习系统

• DOI: 10.11184/his.22.2_151
• 发表时间: 2020
• 期刊: The Transactions of Human Interface Society
• 作者: 矢吹 渓悟;角 薫
• 通讯作者: 角 薫

慣用表現における語用障害をかかえる人の特徴を再現する対話システムの研究

用惯用语再现语用障碍者特征的对话系统研究

• 发表时间: 2020
• 作者: Kotaro Tsuboyama;Shintaro Iwasaki;Yukihide Tomari;矢吹渓悟，角薫
• 通讯作者: 矢吹渓悟，角薫