Audio-visual speech corpus for evaluating speech recognition performance in noisy environments

用于评估噪声环境下语音识别性能的视听语音语料库

• 批准号: 19700163
• 负责人: MIYAJIMA Chiyomi
• 金额: $ 2.46万
• 依托单位: Nagoya University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Young Scientists (B)
• 财政年份: 2007
• 资助国家: 日本
• 起止时间: 2007 至 2009
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-19700163/
• 关键词: バイモーダル音声認識; データベース; 雑音環境; 車内雑音; 雑音下音声認識; 音声認識性能評価; 近赤外映像; 自動車内雑音; 主成分分析; オプティカルフロー

Audio-visual speech data are collected in a silent room and a vehicle for developing an audio-visual speech corpus which is used for evaluating speech recognition performance in noisy environments, especially in in-car environments. Acoustic noise and gamma values of images are used for simulating in-car environments over the recorded data in the silent room. Baseline audio and visual features and an integration method are calibrated in some experimental evaluations. The corpus will be open to the public along with database manuals for research purposes.

在安静的房间和车辆中收集视听语音数据，用于开发视听语音语料库，该语料库用于评估在噪声环境中，特别是在车内环境中的语音识别性能。声学噪声和伽马值的图像被用于模拟车内环境在无声的房间中记录的数据。在一些实验评估中校准了基线音频和视觉特征以及集成方法。该语料库将与数据库手册沿着向公众开放，以供研究之用。

项目成果

自動車運転コーパスにおける行動観測信号の統合と利用

汽车驾驶语料库中行为观察信号的整合与利用

• 发表时间: 2009
• 作者: 武田一哉;尾崎晃;マルタルーカス;西脇由博;宮島千代美;北岡教英
• 通讯作者: 北岡教英

CENSREC-1-AV:マルチモーダル音声認識コーパスの構築

CENSREC-1-AV：多模态语音识别语料库的构建

• 发表时间: 2010
• 作者: 田村哲嗣;宮島千代美;北岡教英;武田一哉;山田武志;滝口哲也;柘植覚;山本一公;西浦敬信;中山雅人;傳田遊亀;藤本雅清;松田繁樹小川哲司;黒岩眞吾;中村哲
• 通讯作者: 中村哲

Multimodal Speech Corpora for Robust Japanese Speech Recognition in Noisy Environments(S. Itahashi and C.Y. Tseng eds., Computer Processing ofAsian Spoken Languages, Section 4.9(3))

用于嘈杂环境中稳健日语语音识别的多模态语音语料库（S. Itahashi 和 C.Y. Tseng 编辑，亚洲口语计算机处理，第 4.9(3) 节）

• 发表时间: 2010
• 作者: S. Tamura;C. Miyajima
• 通讯作者: C. Miyajima

CENSREC-1-C: An evaluation framework for voice activity detection under noisy environments

CENSREC-1-C：噪声环境下语音活动检测的评估框架

• 发表时间: 2009
• 期刊: Acoustical Science and Technology
• 影响因子: 0.7
• 作者: N. Kitaoka;T. Yamada;S. Tsuge;C. Miyajima;K. Yamamoto;T. Nishiura;M. Nakayama;Y. Denda;M. Fujimoto;T. Takiguchi;S. Tamura;S. Matsuda;T. Ogawa;S. Kuroiwa;K. Takeda;S. Nakamura
• 通讯作者: S. Nakamura

動車運転コーパスにおける行動観測信号の統合と利用

车辆驾驶语料库中行为观察信号的整合与利用

• 发表时间: 2009
• 作者: 武田一哉;尾崎晃;マルタルーカス;西脇由博;宮島千代美;北岡教英
• 通讯作者: 北岡教英