音声の情動判断に及ぼす視覚情報の影響と文化間の比較

视觉信息对言语情感判断和跨文化比较的影响

• 批准号: 09207218
• 负责人: 重野 純
• 金额: $ 0.83万
• 依托单位: Kitasato University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research on Priority Areas
• 财政年份: 1997
• 资助国家: 日本
• 起止时间: 1997 至 无数据
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-09207218/
• 关键词: 情動判断; 音声の情動; 視覚情報の影響; 文化間の影響; 話者条件

話者の情動を認知する場合、表情だけではなく音声情報や視覚と聴覚の相互作用も重要な役割を果たしていると考えられる。この点を調べるために、音声のみ条件、視覚のみ条件、視聴覚条件の3つの提示条件のもとで、日本人評定者が日本人話者とアメリカ人話者の情動をどのように認知するか(話者条件)、表情が音声の情動と一致する場合と矛盾する場合に音声の情動判断はどのような影響を受けるか(視覚情報の影響)について、実験を行った。実験結果から、特に情動が幸福、驚き、恐れの場合は聴覚に比べて視覚の情動の選択率が非常に高いことが認められた。これに対して、情動が怒り、嫌悪、悲しみの場合には、音声の情動の選択率は上がり、視覚の情動の選択率も他の情動に比べると低い傾向にある。この傾向は話者条件の間で比較するとアメリカ人話者よりも日本人話者の方に強く認められた。怒り、嫌悪、悲しみのいずれも日本においてはコミュニケーション行動の際に偽ったり隠そうとしたりすることの多い情動と考えられ、音声の情動が選択されやすくなるのではないかと考えられる。このように、情動認知に及ぼす視覚情報の影響についても聞き手の属する文化の影響少なからず関与することが示唆された。

The speaker's emotion, cognition, situation, expression, voice, sound, visual, and interaction are important to the study of the effects. Japanese raters are influenced by Japanese speakers and speakers 'emotion. Japanese raters are influenced by Japanese speakers' emotion. Japanese raters are influenced by Japanese speakers 'emotion. Japanese raters are influenced by Japanese speakers' emotion. Japanese raters are influenced by Japanese speakers 'emotion. The result is happiness, shock and fear. The selection rate of emotion is very high. In the case of emotion, emotion, anger, sadness, emotion, emotion. The tendency of the speaker to compare the conditions of the speaker is different from that of the Japanese speaker Anger, anger, sadness, anger, anger The influence of emotional cognition and visual information on the culture of communication

项目成果

重野 純: "音声の視聴覚判断に生じる係累効果" 日本心理学会第61回大会発表論文集. 650 (1997)

Jun Shigeno：“言语视听判断中的耦合效应”日本心理学会第 61 届年会记录 650（1997）。

重野 純: "音声の情動認知に及ぼす視覚情報の影響" 日本音響学会聴覚研究会資料. H-98-8. 1-7 (1998)

Jun Shigeno：“视觉信息对语音情感识别的影响”日本声学学会听觉研究小组的材料 H-98-8 (1998)。