発話情報を用いた仮想空間会話システムにおけるアバタの視線と表情の自律的制御

点击翻译按钮获取中文摘要

これまで画像や音声の認識などの技術や装置に依存せず,発話情報にもとづいたノンバーバル情報の制御法を提案し,本年度は,下記のとおり,研究計画に基づき,共有仮想空間マルチパーティ音声チャットシステムにおける会話促進を目的に,発話音声による人間の視線行動モデルにもとづく視線制御アルゴリズムの確立,および,本システムの効果に関して検証した.(1)実際の会話における人の視線行動は,発話者と受話者が互いに視線を向け合う発話中と,発声中に比較して他者を注視する時間が短く,周囲を伺う無言状態とでは,大きく異なる.本研究では,誰かが発話している「発話中状態」と,誰も発話していない「無言状態」に分割した.さらに,発話終了前後に視線を用いて会話権を委譲することが知られているため,会話を活性化することを目的に,発話中から無言状態に移行する前に,「発話終了直後状態」を定義した.この3状態に対して,各ユーザの音圧情報と時間成分から確率遷移モデルを定義し,視線を制御した.(2)発話中状態において,受話アバタからの断続的な視線交差は発話者に威圧感を与える一方,極端な視線そらしは,会話に対する関心の無さを伝達する恐れがある.そこで,実験により視線交差から5゜下方を見る注視行動として「あいまい注視」を定義し,確率遷移させた.(3)上記の制御アルゴリズムを多人数音声アバタチャットシステムに実装し,主観評価による評価実験を行い,本制御アルゴリズムにより自然で会話促進につながる可能性が示唆された.これらの研究成果の報告として,後述のとおり,国内2箇所で学会発表をおこない,表情・視線制御に関して1本ずつ,計2本の論文が掲載された.