权益分类	功能权益	普通用户	{{item.name}}会员
{{category.name}}	{{benefitItem.name}}

口話を併用する音声認識

使用口语进行语音识别

基本信息

批准号：
62608505
负责人：
田村進一
金额：
$ 0.64万
依托单位：
Osaka University
依托单位国家：
日本
项目类别：
Grant-in-Aid for Scientific Research on Priority Areas
财政年份：
1987
资助国家：
日本
起止时间：
1987 至无数据
项目状态：
已结题

来源：
https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-62608505/
关键词：
音声認識画像処理口形特徴 DPマッチング LPC係数 X-Yトラッカ口話

项目摘要

音声認識は実用化の域に達しつつあるが, 雑音の多い環境下での使用が困難であること, 類似音(とくに子音)の判別が依然難しいという問題がある. この問題を克服するため, 本研究では, 音声信号だけでなく唇の動きの情報も併用して音声認識を行なった.1.口形特徴の抽出単語を発生している時のビデノ画像から, 口の幅や高さなどの口形特徴が抽出された. このとき, 歯を含めた場合と含めない場合の2つに分けて処理を行なった.2.音声特徴・口形特徴併用による音声認識研究のステップの都合上, この場合の口形特徴は安定して求めることのできるX-Yトラッカを使用した.音声は4KH_2, 12ビットでサンプルされ, 12次までのLPCケプストラム係数およびLPC係数が各24次まで拡張され, 各0次を加えた50次元特徴と登録データ間の非線形時間伸縮を考慮した距離がDP法により計算された.一方, 話者の前方右約60度の位置に置いたX-Yトラッカ・カメラにより, 下唇の上下の動き, 前後の突き出し量が1/60秒毎に計測された. これらの特徴と登録データとの間の距離も同様に計算された.これらの二つの距離の重み和で単語の識別を行なった. 類似した10単語(KAMAやKANAなど)の認識率は, 音声特徴のみの場合84%, 音声特徴に口形特徴を加えた場合は90%に向上した.3.今後の課題口形特徴の効率的抽出法および音声特徴と口形特徴を合わせてDPマッチングを行なう方式を開発したい.

Sound recognition is difficult to use in many environments, and it is still difficult to distinguish similar sounds. This paper aims to overcome this problem by analyzing the information of lip motion and acoustic recognition. 1. Extraction of mouth features. 2. 2. Sound characteristics and mouth shape characteristics are used in sound recognition research. Sound is 4KH_2, 12 times, LPC coefficient is 24 times, LPC coefficient is 0 times, LPC coefficient is 0 times, LPC coefficient is On one side, the speaker's front position is about 60 degrees to the right, the lower lip moves up and down, and the front and rear projections are measured at 1/60 seconds. The distance between the characters and the entries is calculated in the same way.これらの二つの距离の重み和で単语の识别を行なった. The recognition rate of similar 10 words (KAMA and KANA) is 84% in the case of acoustic features, and 90% in the case of acoustic features with mouth features. 3. The extraction method of oral features efficiency and the combination of acoustic features with mouth features are open to future research.