視聴覚コンテンツにおける映像と音楽の適合性の効果の実験心理学的検討

视听内容中视频与音乐兼容性影响的实验心理检验

• 批准号: 22K03199
• 负责人: 浅野 倫子
• 金额: $ 2.66万
• 依托单位: The University of Tokyo
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (C)
• 财政年份: 2022
• 资助国家: 日本
• 起止时间: 2022-04-01 至 2025-03-31
• 项目状态: 未结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-22K03199/
• 关键词: 視聴覚統合; 映像; 音楽; 実験心理学; 適合性; 視聴覚コンテンツ; 認知心理学

本研究の目的は，短い映画のような視聴覚コンテンツにおいて映像と音楽が「適合している（適合していない）」と感じられる条件を特定し，そのように感じられる際の認知処理を実験心理学的手法により明らかにすることである。一般的な視聴覚統合では視覚と聴覚のタイミングや意味が不一致だと統合が促進されないが，映像と音楽の場合は，視聴覚情報の印象の不適合により，元の視覚情報や聴覚情報にはない印象（皮肉等）が創発される可能性が指摘されており，特殊な視聴覚統合として位置づけることができる。この着想に基づき，映像と音楽の適合性に寄与する情報の処理レベル（低次の知覚，中間的な感覚間協応，感情・意味等の高次処理）と，そのレベルが感性的な効果の生起のしかたに影響する可能性について，実験心理学的手法により明らかにする。1年目である2022年度は，短い視聴覚コンテンツにおける映像と音楽の感情（感情価（ポジティブ，ネガティブ）や覚醒度の高低）における適合性が，視聴覚コンテンツへの没入感の強さに与える影響を心理学実験により検討した。その結果，感情価と覚醒度が共に不適合であるときに没入感が最も低く，その条件に比べて，いずれか片方が適合でもう片方が不適合であるときのほうが有意に高まることが示された。しかし，そのような感情価や覚醒度における適合性の効果は，教示によって映像と音楽の関係に注目するように誘導するなどの操作の影響を受けやすいことを示唆する結果も得られた。映像と音楽の主観的調和感についても調べた。これらの研究成果の一部について，国内学会および国際学会で発表した。また，上記の実験的検討と並行して，映画など視聴覚コンテンツの鑑賞や読書における没入やその関連概念についての理論研究および実証研究の文献調査を行い，2年目以降の研究の理論的基盤を強化した。

Short い は の purpose, this study used の よ う な depending on hearing コ ン テ ン ツ に お い て image と sound joy が "fit し て い る (suitable for し て い な い)" と feeling じ ら れ を specific し る conditions, そ の よ う に feeling じ ら れ る interstate の cognitive 処 Richard を be 験 psychology methods に よ り Ming ら か に す る こ と で あ る. General な depending on hearing integrative で は visual 覚 と hearing の タ イ ミ ン グ や mean が inconsistent だ と integration が promote さ れ な い が, image と sound joy は の situations, depending on the hearing intelligence の impression の is not suitable for に よ り, yuan の visual 覚 intelligence や hearing intelligence に は な い impression (such as flesh) が gen 発 さ れ る possibility が blame さ れ て お り, Special な views 聴覚 integrate と て て positions づける とがで とがで る る る. Think こ の に base づ き, image と sound joy の fit に send す る intelligence の 処 Richard レ ベ ル (low times の 覚, in the middle of the association between な feeling 覚 応, feelings, mean の high 処 principle) と, そ の レ ベ ル が perceptual な unseen fruit の arise の し か た に influence す る possibility に つ い て, be 験 psychology methods に よ り Ming ら か に す る. 1 year で あ る は 2022 year, short い depending on hearing コ ン テ ン ツ に お け る image と sound joy の feelings (emotional 価 (ポ ジ テ ィ ブ, ネ ガ テ ィ ブ) や の degree 覚 wake) に お け る fit が, depending on the hearing コ ン テ ン ツ へ の strong sense of mergence の さ に and え る influence を psychology be 験 に よ り beg し 検 た. そ の results, emotional 価 と が altogether に 覚 wake degrees are not suitable for で あ る と き に low sense of mergence が most も く, そ に の conditions than べ て, い ず れ party が か pieces to suit で も う piece side が doesn't fit で あ る と き の ほ う が intentionally に high ま る こ と が shown さ れ た. し か し, そ の よ う な feelings 価 や 覚 wake degrees に お け る fit の unseen fruit は, teaching に よ っ て image と sound joy の masato is に attention す る よ う に induced す る な ど の operation の を by け や す い こ と を in stopping す る results ら も れ た. The harmonious feeling of the main 観 of the image と music is に て て べた. <s:1> れら <s:1> research achievements <s:1> one に に て て て て, domestic academic societies および international academic societies で issue reports た た. ま た, written の be 験 beg と 検 parallel し て, used な ど depending on hearing コ ン テ ン ツ の appreciation や 読 book に お け る mergence や そ の masato concept even に つ い て の theory research お よ び be research line を い の literature survey, 2 years in の の theory base plate を to strengthen し た.

项目成果

Influence of mood congruency of images and music on narrative engagement

图像和音乐的情绪一致性对叙事参与的影响

• 发表时间: 2022
• 作者: Zhang;X. & Asano;M.
• 通讯作者: M.

映像と音楽の印象的調和・不調和が没入感に及ぼす影響

图像和音乐之间令人印象深刻的和谐/不和谐对沉浸感的影响

• 发表时间: 2022
• 作者: Zhang;X. & Asano;M.;張馨月・浅野倫子
• 通讯作者: 張馨月・浅野倫子