実世界サウンドユーザインタフェースにおけるリアルタイムインストラクション開発環境

点击翻译按钮获取中文摘要

今年度は「リアルタイムサウンドインストラクション（以下，RSI）のデザインと体系化」及び「RSI を作業状況・動作に同期させる機構」について重点的に研究を開始した．「RSI のデザインと体系化」については，今年度は既存の音楽の音量やテンポを加工する方法を検討し調査した．前者については，トレーニング中の姿勢の角度を音量と結びつけることで，その正しさ等の情報を伝えることを試みた．ユーザ実験を行ったところ，ユーザに姿勢情報を一定程度伝えることができたことが確認できた．また，伝達された情報がユーザに対するフィードバックとして作用し，ユーザのモチベーション向上につながる可能性を確認できた．後者については，複数人の平均動作リズムを動的に計算して提示する手法を実装し予備的評価を行った．実験結果は実験参加者のグループにより効果が異なっていたが，うまく用いるとやはり参加者のモチベーション向上につながる可能性が確認された．「RSI を作業状況・動作に同期させる機構」については，今年度は人間行動認識(HAR)の各種技術を調査を開始した．その中でも，行動や動作を元に少し先の姿勢を予測する方法に着目した．現在の姿勢認識に基づいてフィードバックを行う方法では必然的に遅れが発生する．適切なタイミングでフィードバックを行うためには，少し先の姿勢を予測し，その姿勢の評価に基づいてフィードバックを行う方法に利点があると期待できる．また，もう一つの研究項目である「RSI のシナリオベース開発環境」についても，これまでにビジュアルプログラミングの手法を用いて，認識結果と音出力を対応づける環境の試作を行うことができた．