仮想音楽空間の構築に関する研究

本年度は、次のような研究を行なった。1.仮想共鳴管による音色変換入力された音響のスペクトル包絡を手の形で実時間で制御するために、仮想音響管をもちいた音色変換システムを構築した。システムは、マイク、データグローブユニット、スピーカ、パーソナルコンピュータから構成されている。仮想共鳴管は、10次のPARCOR合成フィルタによって・夕現されている。仮想共鳴管の断面積は、両手10指の第一、第二関節の曲げ角より実時間制御される。2.ジェスチャーデバイス GraspMIDIセンサ部(P-Unit)には、直径30[mm]に膨らませた風船に圧力センサ(FUJIKURA FPM-15PA)が取り付けられており、風船の内圧をブリッジ回路によって測定している。このP-Unit6個をシリコンボール内に埋め込むことによってハンドジェスチャーセンシングデバイスを構成している・Bハンドジェスチャーにともなう圧力値に従ってMIDIイベントを生成し、把持動作による音楽の演奏が可能である。3.音声認識を用いた歌声の自動伴奏歌声と楽譜データを照合しながらテンポ追従する伴奏システムを製作した。標準の“Sound-Input-Device"で歌声をAD変換し、それに対しケプストラム法を用いリアルタイムで母音認識とピッチ検出の両方を行う。得られた母音、ピッチの情報から歌唱の位置を判定し、歌い手のテン・|を割り出し、MIDI音源により伴奏を出力することで人のテンポに合わせた伴奏が可能になる。

本年度は、次のような研究を行なった。1.仮想共鳴管による音色変換入力された音響のスペクトル包絡を手の形で実時間で制御するために、仮想音響管をもちいた音色変換システムを構築した。システムは、マイク、データグローブユニット、スピーカ、パーソナルコンピュータから構成されている。仮想共鳴管は、10次のPARCOR合成フィルタによって・夕現されている。仮想共鳴管の断面積は、両手10指の第一、第二関節の曲げ角より実時間制御される。2.ジェスチャーデバイス GraspMIDIセンサ部(P-Unit)には、直径30[mm]に膨らませた風船に圧力センサ(FUJIKURA FPM-15PA)が取り付けられており、風船の内圧をブリッジ回路によって測定している。このP-Unit6個をシリコンボール内に埋め込むことによってハンドジェスチャーセンシングデバイスを構成している・Bハンドジェスチャーにともなう圧力値に従ってMIDIイベントを生成し、把持動作による音楽の演奏が可能である。3.音声認識を用いた歌声の自動伴奏歌声と楽譜データを照合しながらテンポ追従する伴奏システムを製作した。標準の“Sound-Input-Device"で歌声をAD変換し、それに対しケプストラム法を用いリアルタイムで母音認識とピッチ検出の両方を行う。得られた母音、ピッチの情報から歌唱の位置を判定し、歌い手のテン・|を割り出し、MIDI音源により伴奏を出力することで人のテンポに合わせた伴奏が可能になる。