聴覚・視覚の複数レベル実時間情報統合の研究

点击翻译按钮获取中文摘要

平成14年度は、2本のマイクロフォンを用いた方向通過型フィルタ(Direction-Pass Filter)を提案し、この分離性能の音源方向依存性(「聴覚中心窩(auditory fovea)」と呼ぶ)を明らかにし、聴覚中心窩を積極的に活用したアクティブオーディションを実現した。さらに、大阪大学の石黒教授グループ作成の人間に似た外観を持つヒューマノイドReplieの上にも方向通過型フィルターを実装し、DPFの高移植性を確認するとともに、ヒューマノイドヒューマンインターラクションの実験環境を確立した。これらの成果は朝日新聞夕刊1面に報道されるとともに、IROS論文賞、船井情報科学振興賞などを受賞した。主な研究項目は以下の通りである。1.聴覚的中心窩-混合音から音声分離を行う方向通過型フィルタの方向依存性を評価し、正面方向と真横方向とでは4倍以上の精度の違いがあることを発見した。この現象は、人間の視覚で中心の解像度が高く、周辺は解像度が劣るという中心窩(fovea)に相当しており、「聴覚的中心窩(auditory fovea)」と名付けた。話者や音源に正対して聞く機能を実現するために、聴覚的中心窩を積極的に活用した注意制御システムをロボットに実装中である。2.注意制御部-実時間複数話者追跡システムを用いた注意制御部の設計に、タスク指向(task-oriented)とソーシャル性指向(socially-oriented)という2つの原理を適用した。タスク指向制御では、具体的なタスクである受付ロボットのために、音と顔が一致したストリームに注意を向けるように、一方、ソーシャル性指向制御では、インターラクションの相手の声にまず反応するように、ロボットの挙動選択を実現した。3.ロボットの個性-Interpersonal theoryに基づいた対人関係での個性をdominant/submissiveとfriendly/hostileという2軸で表現することにより、上記のタスク指向・ソーシャル性指向とを組合せた挙動プラニングの構想を提案し、プロトタイプを実装した。