On The Use of Non-Verbal Speech Sounds in Human Communication

论非语言语音在人类交流中的使用

• 批准号: 19300073
• 负责人: CAMPBELL Nick
• 金额: $ 11.98万
• 依托单位: National Institute of Information and Communications Technology
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (B)
• 财政年份: 2007
• 资助国家: 日本
• 起止时间: 2007 至 2010
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-19300073/
• 关键词: ノンバーバル; 音声発話; 情動情報; センシング; 技術; センシンク; 発話音声

This project focused on the relationships between "dialogue structure" and the processes of "active listening". The project did not result in specific new technology but gave us a better understanding of the nature of spoken language in a way that will allow us improve speech synthesis and recognition technology. Our research theme inspired the new European project on Social Signal Processing. Further- more, we collected a large multi-modal corpora cooperating with other universities in three countries, published the database on the website (http://www.speech-data.jp/nick/mmx/d64.html). We finally made a prototype of a robot "Herme" which employs image and speech processing modules developed in this study. The robot is currently in exhibition in Ireland where it is collecting a new corpus of interactive speech.

本研究的重点是探讨“对话结构”与“积极倾听”过程之间的关系。该项目并没有产生具体的新技术，但让我们更好地理解了口语的本质，从而使我们能够改进语音合成和识别技术。我们的研究主题启发了新的欧洲社会信号处理项目。此外，我们还与三个国家的大学合作，收集了大量的多模态语料库，并将数据库发布在网站（http：//www.speech-data.jp/nick/mmx/d64.html）上。最后，我们提出了一个原型的机器人“Herme”，采用图像和语音处理模块在这项研究中开发的。该机器人目前正在爱尔兰展出，在那里它正在收集一个新的互动语音语料库。

项目成果

波形接続型音声合成法を改良した高品質音声合成手法の提案

改进波形级联语音合成方法的高质量语音合成方法的提出

• 发表时间: 2011
• 作者: 宮崎和光;木村元;小林重信;豊川弘樹
• 通讯作者: 豊川弘樹

Comparing Measures of Synchrony and Alignment in Dialogue Speech Timing with respect to Turn-taking Activity

比较轮流活动对话语音计时的同步性和对齐性测量

• 发表时间: 2010
• 作者: Sakuma;J.;Kobayashi;S. and Wright,R;ニック・キャンベル
• 通讯作者: ニック・キャンベル

A software toolkit for viewing annotated mul-timodal data interactively over the web.

用于通过网络交互式查看带注释的多模态数据的软件工具包。

• 发表时间: 2010
• 作者: 池田心;和田智晃;喜多一;森江隆;ニック・キャンベル
• 通讯作者: ニック・キャンベル

Language Re-sources of the Future (a speech-based position paper)

未来的语言资源（基于语音的立场文件）

• 发表时间: 2010
• 作者: Yanase;T.;Hasegawa;Y.;Iba;H.;ニック・キャンベル
• 通讯作者: ニック・キャンベル

An Audio-Visual Approach to Measuring Discourse Synchrony in Multimodal Conversation Data

测量多模态对话数据中话语同步性的视听方法

• 发表时间: 2009
• 作者: R. Kubota;E. Uchino;N. Suetake;伊庭斉志;宮本 弘之;ニック・キャンベル
• 通讯作者: ニック・キャンベル