Development of high-definition audio-visual speech communication systems based on the knowledge of /kansei/ information processing
基于感性/信息处理知识的高清视听语音通信系统的开发
基本信息
- 批准号:23500252
- 负责人:
- 金额:$ 3.33万
- 依托单位:
- 依托单位国家:日本
- 项目类别:Grant-in-Aid for Scientific Research (C)
- 财政年份:2011
- 资助国家:日本
- 起止时间:2011 至 2013
- 项目状态:已结题
- 来源:
- 关键词:
项目摘要
It is important to transmit talker's mind including emotion for developing advanced communication system. Because not only speech signal itself but also moving image of talkers face includes rich information to understand what talker wants to tell, these information should be transmit accurately to the listeners. However, the relationship between the physical parameter extracted from audio-visual speech signal and /kansei/ information is unclear.The final goal of this study is to develop high-definition audio-visual speech communication systems. To do this, the effect of moving image of talker's face to speech understanding was investigated. The results of psychophysical experiments indicate that around the lips area is crucial to understand what talker says. Moreover, /kansei/ impression from audio-visual speech signal is also important for speech understanding.
传递说话者的思想和情感对于开发先进的通信系统是非常重要的。由于不仅语音信号本身,说话人面部的运动图像也包含着丰富的信息,以便理解说话人想说什么,所以这些信息必须准确地传递给听话人。然而,从视听语音信号中提取的物理参数与/感性/信息之间的关系尚不清楚,本研究的最终目标是开发高清晰度的视听语音通信系统。为此,研究了说话者人脸运动图像对语音理解的影响。心理物理实验结果表明,嘴唇周围区域对于理解说话者所说的话是至关重要的。此外,来自视听语音信号的/感性/印象对于语音理解也很重要。
项目成果
期刊论文数量(0)
专著数量(0)
科研奖励数量(0)
会议论文数量(0)
专利数量(0)
無意味 3連音節を用いた音素別明瞭度における視覚情報の寄与の分析
使用无意义的三音节分析视觉信息对音素特定可懂度的贡献
- DOI:
- 发表时间:2013
- 期刊:
- 影响因子:0
- 作者:長谷川玄;坂本修一;阿部亨;大谷智子;鈴木陽一;川瀬哲明
- 通讯作者:川瀬哲明
The contribution of the detailed parts around talker's mouth for speech intelligibility
说话者嘴部周围细节部分对语音清晰度的贡献
- DOI:
- 发表时间:2014
- 期刊:
- 影响因子:0
- 作者:S. Sakamoto;G. Hasegawa;T. Abe;T. Ohtani;Y. Suzuki and K. Kawase
- 通讯作者:Y. Suzuki and K. Kawase
The contribution of the detailed parts around talker's mouth for speech intelligibili
说话者嘴部周围的细节部分对语音清晰度的贡献
- DOI:
- 发表时间:2014
- 期刊:
- 影响因子:0
- 作者:Shuichi Sakamoto;Gen Hasegawa;Toru Abe;Tomoko Ohtani;Yo-iti Suzuki and Tetsuaki Kawase
- 通讯作者:Yo-iti Suzuki and Tetsuaki Kawase
無意味 3連音節を用いた音素別明瞭度における話者映像の寄与の分析
使用无意义的三音节分析说话者图像对每个音素清晰度的贡献
- DOI:
- 发表时间:2013
- 期刊:
- 影响因子:0
- 作者:長谷川玄;坂本修一;阿部亨;大谷智子;鈴木陽一;川瀬哲明
- 通讯作者:川瀬哲明
Effect of consonance between features and voice impression on the McGurk effect
特征与声音印象之间的一致性对麦格克效应的影响
- DOI:
- 发表时间:2012
- 期刊:
- 影响因子:0
- 作者:S.Sakamoto;H. Mishima and Y. Suzuki
- 通讯作者:H. Mishima and Y. Suzuki
{{
item.title }}
{{ item.translation_title }}
- DOI:
{{ item.doi }} - 发表时间:
{{ item.publish_year }} - 期刊:
- 影响因子:{{ item.factor }}
- 作者:
{{ item.authors }} - 通讯作者:
{{ item.author }}
数据更新时间:{{ journalArticles.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ monograph.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ sciAawards.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ conferencePapers.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ patent.updateTime }}
SAKAMOTO Shuichi其他文献
The effects of apparent moving sound images conflicted with vestibular information to self-motion perception
表观运动声像与前庭信息冲突对自运动知觉的影响
- DOI:
- 发表时间:
2004 - 期刊:
- 影响因子:0
- 作者:
Y.Horikoshi;村岡克紀;SAKAMOTO Shuichi - 通讯作者:
SAKAMOTO Shuichi
SAKAMOTO Shuichi的其他文献
{{
item.title }}
{{ item.translation_title }}
- DOI:
{{ item.doi }} - 发表时间:
{{ item.publish_year }} - 期刊:
- 影响因子:{{ item.factor }}
- 作者:
{{ item.authors }} - 通讯作者:
{{ item.author }}
{{ truncateString('SAKAMOTO Shuichi', 18)}}的其他基金
Analysis for the mechanism of distant metastasis in small cell lung cancer
小细胞肺癌远处转移机制分析
- 批准号:
17K08777 - 财政年份:2017
- 资助金额:
$ 3.33万 - 项目类别:
Grant-in-Aid for Scientific Research (C)
Experimental development of "Fun'iki (auditory ambience)" generator
“Funiki(听觉氛围)”发生器的实验开发
- 批准号:
16K12506 - 财政年份:2016
- 资助金额:
$ 3.33万 - 项目类别:
Grant-in-Aid for Challenging Exploratory Research
Preliminary study on how to induce laughing by controlling acoustical parameters of speech signal
控制语音信号声学参数诱发笑的初步研究
- 批准号:
26540138 - 财政年份:2014
- 资助金额:
$ 3.33万 - 项目类别:
Grant-in-Aid for Challenging Exploratory Research
Search for therapeutic targets for small cell lung cancer using a new orthotopic transplantation model.
使用新的原位移植模型寻找小细胞肺癌的治疗靶点。
- 批准号:
26460481 - 财政年份:2014
- 资助金额:
$ 3.33万 - 项目类别:
Grant-in-Aid for Scientific Research (C)
Study of sound absorbing materials using biomass
利用生物质的吸声材料的研究
- 批准号:
24560253 - 财政年份:2012
- 资助金额:
$ 3.33万 - 项目类别:
Grant-in-Aid for Scientific Research (C)
Development of a novel orthotopic transplantation model of human small cell lung cancer metastasis.
开发一种新型人小细胞肺癌转移原位移植模型。
- 批准号:
23790452 - 财政年份:2011
- 资助金额:
$ 3.33万 - 项目类别:
Grant-in-Aid for Young Scientists (B)
Development of advanced audio-visual speech communication system for transfer Kanseiinformation
开发用于传输感性信息的先进视听语音通信系统
- 批准号:
20700193 - 财政年份:2008
- 资助金额:
$ 3.33万 - 项目类别:
Grant-in-Aid for Young Scientists (B)
Chemical genetic study of the molecular mechanism for the regulation of osteoblast differentiation
成骨细胞分化调控分子机制的化学遗传学研究
- 批准号:
20790218 - 财政年份:2008
- 资助金额:
$ 3.33万 - 项目类别:
Grant-in-Aid for Young Scientists (B)
Study for Contactless Detection of Number of Thin Sheet Material by Sound
声音非接触检测薄片材料数量的研究
- 批准号:
16560205 - 财政年份:2004
- 资助金额:
$ 3.33万 - 项目类别:
Grant-in-Aid for Scientific Research (C)
Research for the role of endothelium-dependent relaxation in the change of maternal circulation during pregnancy
内皮依赖性舒张在孕期母体循环变化中作用的研究
- 批准号:
13671700 - 财政年份:2001
- 资助金额:
$ 3.33万 - 项目类别:
Grant-in-Aid for Scientific Research (C)
相似海外基金
自然公園の適正利用を支援するリアルタイム情報システム:LoRaを用いた汎用性の拡張
支持正确使用自然公园的实时信息系统:使用 LoRa 扩展多功能性
- 批准号:
24K15416 - 财政年份:2024
- 资助金额:
$ 3.33万 - 项目类别:
Grant-in-Aid for Scientific Research (C)
機械学習による高齢者施設の科学的介護情報システムの活用とWell-being規定因子の解明
利用机器学习在老年护理机构中利用科学护理信息系统并阐明健康决定因素
- 批准号:
24K14084 - 财政年份:2024
- 资助金额:
$ 3.33万 - 项目类别:
Grant-in-Aid for Scientific Research (C)
個人の志向性を考慮した情報システム:制御焦点理論を用いた検討
考虑个人取向的信息系统:利用控制焦点理论的研究
- 批准号:
24K15040 - 财政年份:2024
- 资助金额:
$ 3.33万 - 项目类别:
Grant-in-Aid for Scientific Research (C)
医療過疎地域での地理情報システムによる遠隔医療分析と新規ICT基盤医療体制の構築
利用地理信息系统对医疗人口稀少地区进行远程医疗分析,构建基于ICT的新型医疗系统
- 批准号:
24K20160 - 财政年份:2024
- 资助金额:
$ 3.33万 - 项目类别:
Grant-in-Aid for Early-Career Scientists
重度重複障害児(者)等の認知・社会性の発達支援を志向した情報システムの構築と活用
构建和利用旨在支持严重多重残疾儿童(人)的认知和社会发展等的信息系统。
- 批准号:
23K22313 - 财政年份:2024
- 资助金额:
$ 3.33万 - 项目类别:
Grant-in-Aid for Scientific Research (B)
学習者の社会的孤立を防ぐ働きかけを教育補助者に促す情報システムの開発と評価
开发和评估信息系统,鼓励教育助理努力防止学习者的社会孤立
- 批准号:
23K25696 - 财政年份:2024
- 资助金额:
$ 3.33万 - 项目类别:
Grant-in-Aid for Scientific Research (B)
科学的介護情報システムを用いた包括的介護サービス研究
利用科学护理信息系统进行综合护理服务研究
- 批准号:
23K24569 - 财政年份:2024
- 资助金额:
$ 3.33万 - 项目类别:
Grant-in-Aid for Scientific Research (B)
科学的介護情報システムを活用した長期ケア施設入居者の緊急入院予防ツールの開発
利用科学护理信息系统为长期护理机构居民开发紧急住院预防工具
- 批准号:
23K27912 - 财政年份:2024
- 资助金额:
$ 3.33万 - 项目类别:
Grant-in-Aid for Scientific Research (B)
企業情報システム開発プロジェクトにおけるリスク管理の実態と有効性に関する研究
企业信息系统开发项目风险管理现状及有效性研究
- 批准号:
24K00295 - 财政年份:2024
- 资助金额:
$ 3.33万 - 项目类别:
Grant-in-Aid for Scientific Research (B)
Collaborative Research: Frameworks: Automated Quality Assurance and Quality Control for the StraboSpot Geologic Information System and Observational Data
合作研究:框架:StraboSpot 地质信息系统和观测数据的自动化质量保证和质量控制
- 批准号:
2311822 - 财政年份:2023
- 资助金额:
$ 3.33万 - 项目类别:
Standard Grant