权益分类	功能权益	普通用户	{{item.name}}会员
{{category.name}}	{{benefitItem.name}}

指示棒と音声を用いるマルチモーダルインターフェイスの認識処理高速化

使用指针杆和语音加速多模态界面的识别处理

基本信息

批准号：
07780369
负责人：
大橋健
金额：
$ 0.51万
依托单位：
Kyushu Institute of Technology
依托单位国家：
日本
项目类别：
Grant-in-Aid for Encouragement of Young Scientists (A)
财政年份：
1995
资助国家：
日本
起止时间：
1995 至无数据
项目状态：
已结题

项目摘要

本研究は,ユーザが指示棒を音声とを用いてコンピュータとインタラクションを行なうインターフェイス環境を構築するために行なわれた.指示棒の3次元座標は,テレビカメラの映像から画像処理を行い指示棒の画像領域を抽出し,3次元空間中の座標を推定することにより得られる.これらの座標を用いてポインティングバイスとして活用し,音声認識から得られる言語情報と組み合わせることにより使い易いインターフェイスを構築しようというものである.指示棒と音声を用いたマルチモーダルインターフェイスを構成するにあたり,画像処理による指示棒の認識と音声認識処理の速度と精度の向上が課題であった.画像処理速度の向上に関しては,入力画像をネット-ワークを経由した別の計算機に送付し認識処理を行なうことを試みた.しかしながら画像のデータ量が多く高速のネットワークでないと効果が得られないことが分った.また,画像サイズが小さければ十分ワークステーションでもリアルタイム(一秒間に10コマ程度)処理できるので実用になる範囲と考えられる.次に音声認識についてであるが,インタラクティブなシステムに活用するためには精度はもちろんレスポンスタイムが短いことが望ましい.このため,認識対象とする単語を限定しパワーをもとに単語に切り出しして認識させることによりソフトウェアのみでも十分許容できる時間内で認識処理できるようになった.また,音声の母音のもつ調波構造とホルマントの特徴を用いて他の背景雑音から抽出することができるようになった.今後はこれを用いて音声認識の評価を行ないたいと考えている.

In this study, the indicator rods and sound devices were used in the study. The indicator stick is marked with 3-dimensional seat, the image image is displayed, the drawing line is drawn, and the 3-dimensional space is presumed to be accurate. You can tell me how to use it. I don't know how to use it. I know how to use it. I don't know how to use it. I don't know how to use it. The sound of the indicator stick is used to make a sound, and the portrait is made of the speed, the accuracy, the speed, the accuracy, the accuracy. The speed of the portrait goes up and down, and the force of the portrait is sent to you by a separate computing machine. I don't know what to do with the portrait. I don't know how to do it. The portrait shows that the temperature is very high, and the temperature range of the image is very high. The infrasound does not know how to make a sound, so that it can be used properly. In the same way, it is very permissible that there is a lot of tolerance in terms of knowledge and knowledge within the time frame. Sound, sound, vowel, wave, sound, vowel, vowel, sound, sound, vowel, vowel, sound, sound, vowel, vowel, wave, sound, sound, vowel, sound, sound, vowel, vowel, wave, sound, vowel, sound, sound In the future, I will use the sound to know how to do the test.