Dialogue environment generation and control system based on embodied entrainment

基于具身夹带的对话环境生成与控制系统

• 批准号: 20H04232
• 负责人: 渡邉 富夫
• 金额: $ 11.15万
• 依托单位: Okayama Prefectural University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (B)
• 财政年份: 2020
• 资助国家: 日本
• 起止时间: 2020-04-01 至 2024-03-31
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-20H04232/
• 关键词: ヒューマンインタフェース; ヒューマンインタラクション; コミュニケーション; インタラクション; 引き込み; 対話

引き続き、コロナ禍でオンライン及び対面でのシステム評価法を再検討し、身体的引き込みと対話場の生成メカニズムの解明、およびその対話場生成・制御メカニズムのモデル化を達成するために、【研究1】これまでに開発してきた（Ⅰ）身体的コミュニケーションの合成的解析・理解のための身体的バーチャルコミュニケーションシステム、（Ⅱ）コミュニケーション支援のための音声に基づく身体的インタラクションシステム、（Ⅲ）コミュニケーション場の生成制御のための集団インタラクション・コミュニケーションシステムを研究開発展開し、各種の対話場の生成・制御システムを構築している。具体的には、多様なうなずき動作の印象評価に基づく身体引き込みシステムの展開、Web会議における積極的傾聴を促す身体引き込みシステム、うなずき反応振動提示によるコミュニケーション支援システム、発話抑制を目的とした聞き手ロボットの身体引き込み反応のタイミング制御システムなど、新たにオンラインを活用・併用してのシステム開発・評価を展開し、多様なうなずき動作など身体引き込み反応を制御することで、使用者の状況や感情に寄り添うコミュニケーションシステムの有効性を示した。また、【研究2】生体計測と脳科学に関する知見に基づく発話と心的状態の関連性の評価から、うなずきタイミングを遅延制御したロボットとのインタラクションにおける脳活動計測による情動評価等、対話を促す快適な対話場の実現に向けた対話場生成・制御メカニズムのモデル化を試行した。

The method of evaluation of the speech field is discussed again. The speech field is generated by the body. The speech field is controlled by the body.[Study 1] The development of this field (I) the analysis and understanding of the synthesis of the body's C. I. C. C.(III) The research and development of the system of generation and control of various kinds of communication fields and the construction of the system of generation and control of various kinds of communication fields. Specific, multiple-action, impression evaluation, basic body guidance, topic development, Web conferencing, active tilt, body guidance, internal vibration, support, topic suppression, goal, response, control, topic development, Web conferencing, positive tilt, body guidance, internal vibration, feedback, feedback The new system development, evaluation and utilization of the system development, multi-channel movement, body guidance, feedback control, user status and feelings, and the effectiveness of the system development. [Study 2] Biological measurement, scientific knowledge, evaluation of the relationship between the state of the voice and the state of the heart, delay control, evaluation of the state of the voice and the state of the activity measurement, evaluation of the state of the voice, promotion of the state of the voice and the state of the voice generation, control, and trial implementation.

项目成果

A body contact-driven pupil response pet-robot for enhancing affinity

• DOI: 10.1299/jamdsm.2021jamdsm0061
• 发表时间: 2021
• 期刊: Journal of Advanced Mechanical Design, Systems, and Manufacturing
• 作者: Yoshihiro Sejima;Yoichiro Sato;Tomio Watanabe

対面・画面越しの会話におけるうなずきの有無による身体的引き込み現象の脳賦活解析

根据面对面和屏幕对话期间点头的存在与否对身体吸引现象进行大脑激活分析

• 发表时间: 2020
• 作者: 菊池紗瑛子;白上新;下野昌宣;M. You，S. Shinohara，S. Sunada;坂田 智章，綿貫 啓一，楓 和憲，渡辺 富夫
• 通讯作者: 坂田 智章，綿貫 啓一，楓 和憲，渡辺 富夫

円滑なコミュニケーションとは？

什么叫沟通顺畅？

• 发表时间: 2021
• 作者: 李 宗岳;菅原俊治;渡辺富夫
• 通讯作者: 渡辺富夫

Web会議における聴講者の代役としての身体引き込みエージェントの開発

开发身体参与代理作为网络会议中观众的替代品

• 发表时间: 2022
• 作者: 山内智貴;宮下裕貴;菅原俊治;窪田 智之，櫻山 和浩，白松(磯口) 知世，高橋 宏知;片山 翔太，西山 悠，片岡 真吾，石井 裕，渡辺 富夫
• 通讯作者: 片山 翔太，西山 悠，片岡 真吾，石井 裕，渡辺 富夫

Effects of pupil area on impression formation in pupil expression media

瞳孔面积对瞳孔表达媒介印象形成的影响

• DOI: 10.1299/transjsme.21-00187
• 发表时间: 2021
• 期刊: Transactions of the JSME (in Japanese)
• 作者: SEJIMA Yoshihiro;KAWAMOTO Hiroki;SATO Yoichiro;WATANABE Tomio;瀬島吉裕，川本宙輝，佐藤洋一郎，渡辺富夫
• 通讯作者: 瀬島吉裕，川本宙輝，佐藤洋一郎，渡辺富夫