3D発話放射特性の空間再現と臨場感

オンライン会議において，あたかも目の前で人が話しているかのような音の再現はリッチコミュニケーションの実現に向けて大変重要である。本研究課題では，人の3次元発話放射指向特性（どの方向に対してどれくらいの大きさで声を出しているか）を詳細に再現することで，臨場感の向上を目指している。本年度は，まず半径0.3mの頭部を囲むタイプの48ch球面マイクロホンアレーを用いて本学無響室内にて4名の発話指向特性を測定し，母音と子音による特性の差異について評価を行った。その結果，鼻母音においては他の子音よりも上向き方向に強く音が放射されるなど音韻によって指向特性が異なることが分かった。一方で，個人性も確認されたが，他人の指向性と入れ替えた実験を行った結果，特に差異が感じられなかったため，個人性はさほど大きくないと判断できた。また，分析方法として子音は継続発話が難しいため，区切りながらの発話を切り出し，平均することで分析を行う方法を考案するなど工夫を行った。さらに，スピーカ再生を用いて発話者が回転している様子を受聴者が知覚できるかを検証するため，球面スピーカアレーを用いた発話指向性再現を行い，周囲で聞いている人がどの程度識別できるかを主観評価実験により調査した。その結果，スピーカアレーの補正方法によって指向性再現と音色の再現にトレードオフの関係があることが分かった。このため，次年度以降の発話指向性再現においてはこの課題についても取り組むこととする。

オンライン会議において，あたかも目の前で人が話しているかのような音の再現はリッチコミュニケーションの実現に向けて大変重要である。本研究課題では，人の3次元発話放射指向特性（どの方向に対してどれくらいの大きさで声を出しているか）を詳細に再現することで，臨場感の向上を目指している。本年度は，まず半径0.3mの頭部を囲むタイプの48ch球面マイクロホンアレーを用いて本学無響室内にて4名の発話指向特性を測定し，母音と子音による特性の差異について評価を行った。その結果，鼻母音においては他の子音よりも上向き方向に強く音が放射されるなど音韻によって指向特性が異なることが分かった。一方で，個人性も確認されたが，他人の指向性と入れ替えた実験を行った結果，特に差異が感じられなかったため，個人性はさほど大きくないと判断できた。また，分析方法として子音は継続発話が難しいため，区切りながらの発話を切り出し，平均することで分析を行う方法を考案するなど工夫を行った。さらに，スピーカ再生を用いて発話者が回転している様子を受聴者が知覚できるかを検証するため，球面スピーカアレーを用いた発話指向性再現を行い，周囲で聞いている人がどの程度識別できるかを主観評価実験により調査した。その結果，スピーカアレーの補正方法によって指向性再現と音色の再現にトレードオフの関係があることが分かった。このため，次年度以降の発話指向性再現においてはこの課題についても取り組むこととする。