Development and its evaluation of an ensemble performance system by fusing of melody morphing and body movements

点击翻译按钮获取中文摘要

演奏者たちの身体機能を制御することによる新たなアンサンブル演奏システムを実現するため，第一に，楽曲データから適切な電気刺激を生成するためのソフトウェアと，その電気刺激をユーザにフィードバックするためのハードウェアを開発した．具体的には，Arduino, 電気刺激回路，電源，電極というシステム構成によって，電気刺激を発生させる装置をプロトタイピングし，システム利用者の身体の一部を制御可能であることを確認した．また，複数の電気刺激発生装置を統合的に制御するための仕組みを試作するとともに，本プロトタイプシステムを用いて，多様な楽器を用いた効果的な演奏方法についての試行実験を実施した．第二に，演奏者をインタラクティブにコントロールする体験を提供するため，メロディモーフィングの分析結果をもとに，未来に演奏する楽曲やメロディを入力することができるユーザインタフェースを設計した．本設計では，プロトタイピングを重ね，より直感的かつ効果的に提示する方法を試行錯誤しながら検討した．第三に，ユーザスタディによる評価実験を実施した．具体的には，プロトタイプシステムを用いたフィージビリティスタディとして，計20名の被験者を対象としたアンサンブル演奏のケーススタディを実施し，その動作安定性についての評価を進めている．今後は，実験から得られたフィードバックを元に，ブラッシュアップを重ね，多角的な発展とその応用システムを模索する．