仮想空間のチームスポーツを介したコミュニケーションスキルの知的学習支援

通过虚拟空间中的团队运动来智能学习支持沟通技巧

• 批准号: 15F15049
• 负责人: 河原 達也
• 金额: $ 1.47万
• 依托单位: Kyoto University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for JSPS Fellows
• 财政年份: 2015
• 资助国家: 日本
• 起止时间: 2015-04-24 至 2017-03-31
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-15F15049/
• 关键词: インタラクション; エージェント; ロボット; 音声対話; 非言語コミュニケーション

人間と自然なコミュニケーションが行えるような人工的なエージェント・ロボットの実現は、人工知能の分野において重要な課題の１つである。本研究では、仮想空間におけるチームスポーツなどの社会的な状況を設定して、言語・非言語コミュニケーションの分析・モデル化を行った上で、実際に仮想空間のエージェントや人間酷似型アンドロイドにおいてその機能を実装した。まず、チームスポーツにおいてリアルなコミュニケーションができるチームメートとしてのエージェントの実現に取り組んだ。大画面上に構築した複数エージェントとバスケットボールを行う環境において、Wizard-of-Oz方式を用いて、音声とジェスチャのやりとりを収録した。特にパスを行う際には、音声とジェスチャの両方が使われる可能性があるが、言語表現だけでなく韻律的なパターンにも着目して分析を行った。その結果、ゲームを通じてコミュニケーションが確立されるにつれて、振る舞いに変化が見られた。特に、ゲームの進行に応じて、単純な発話から複雑な発話が用いられるようになるとともに、励ましなどのタスク以外の発話の割合も増える傾向があることが明らかになった。また、音声とジェスチャを用いた共同行為のパターンも確認した。次に、受付・ガイドや傾聴（話し相手）などの社会的な役割を想定した上で、言語及び非言語によるコミュニケーションが行える自律型アンドロイドの実現に取り組んだ。受付・ガイドにおいては、複数の人が到来することを想定し、どのように視線配布を行い、対話を開始するのか検討を行った。

Human natural な と コ ミ ュ ニ ケ ー シ ョ ン が line え る よ う な artificial な エ ー ジ ェ ン ト · ロ ボ ッ ト の can be presently, artificial は の eset に お い て important topic な の 1 つ で あ る. This study で は, 仮 want to space に お け る チ ー ム ス ポ ー ツ な ど の social な situation を set し て, verbal, nonverbal コ ミ ュ ニ ケ ー シ ョ ン の analysis, モ デ ル change line を っ た で, be interstate に 仮 space の エ ー ジ ェ ン ト や resembles human type ア ン ド ロ イ ド に お い て そ の function を be loaded し た. ま ず, チ ー ム ス ポ ー ツ に お い て リ ア ル な コ ミ ュ ニ ケ ー シ ョ ン が で き る チ ー ム メ ー ト と し て の エ ー ジ ェ ン ト の be に now take り group ん だ. Big screen に build し た plural エ ー ジ ェ ン ト と バ ス ケ ッ ト ボ ー ル を line う environment に お い て, Wizard - of - way Oz を い て, sounds と ジ ェ ス チ ャ の や り と り を 収 recorded し た. Line, に パ ス を う interstate に は, sounds と ジ ェ ス チ ャ の struck party が make わ れ る possibility が あ る が, verbal expression だ け で な く rhythmic な パ タ ー ン に も with mesh し を line っ て analysis た. そ の results, ゲ ー ム を tong じ て コ ミ ュ ニ ケ ー シ ョ ン が establish さ れ る に つ れ て, vibration る dance い に variations change が see ら れ た. に, ゲ ー ム の for に 応 じ て, 単 pure な 発 words か ら complex 雑 な が 発 words with い ら れ る よ う に な る と と も に, excitation ま し な ど の タ ス ク outside の 発 words cut close も の raised え る tendency が あ る こ と が Ming ら か に な っ た. Youdaoplaceholder0 and the sound とジェスチャを confirm <s:1> た by the joint action of the また た action of the パタ action of the パタ action of the とジェスチャを action. Time に, by paying ガ イ ド や pour 聴 し (words) your hand な ど の cut social な battle を し scenarios on た で, verbal and nonverbal に び よ る コ ミ ュ ニ ケ ー シ ョ ン が line え る self-discipline type ア ン ド ロ イ ド の be に now take り group ん だ. By paying · ガ イ ド に お い て は arrival, plural の が す る こ と を し scenarios, ど の よ う に sight line with cloth を い, polices を began す る の か 検 line for を っ た.

项目成果

An imitation-based approach to represent common ground in a virtual basketball agent team mate

一种基于模仿的方法来代表虚拟篮球代理队友的共同点

• 发表时间: 2015
• 作者: D.Lala;P.Milhorat;K.Inoue;T.Zhao;and T.Kawahara;D.Lala and T.Kawahara;D. Lala and A. Nakazawa;D. Lala and T. Nishida
• 通讯作者: D. Lala and T. Nishida

Utterance behavior of users while playing basketball with a virtual teammate

用户与虚拟队友打篮球时的言语行为

• 发表时间: 2017
• 作者: D.Lala;Y.Li;and T.Kawahara
• 通讯作者: and T.Kawahara

A data-driven passing interaction model for embodied basketball agents

数据驱动的篮球代理传球交互模型

• DOI: 10.1007/s10844-015-0386-z
• 发表时间: 2015
• 期刊: Journal of Intelligent Information Systems
• 影响因子: 3.4
• 作者: Divesh Lala and Toyoaki Nishida

Multimodal interaction with the autonomous android ERICA

与自主机器人 ERICA 的多模式交互

• 发表时间: 2016
• 作者: D.Lala;P.Milhorat;K.Inoue;T.Zhao;and T.Kawahara
• 通讯作者: and T.Kawahara

Heat map visualization of multi-slice medical images through correspondence matching of video frames

通过视频帧的对应匹配实现多切片医学图像的热图可视化

• DOI: 10.1145/2857491.2857504
• 发表时间: 2016
• 期刊: Proc. of the Ninth Biennial ACM Symposium on Eye Tracking Research & Applications (ETRA)
• 作者: 池下裕紀;篠崎隆宏;Divesh Lala and Atsushi Nakazawa
• 通讯作者: Divesh Lala and Atsushi Nakazawa