体験映像が持つ「感情を動かす力」の数理的解明

点击翻译按钮获取中文摘要

本研究の目的は，(1)映像として記録された体験活動・(2)それを視聴したときの視聴者心理・(3)視聴者の属性，の関係を数理的な観点から明らかにすることである．そのためには(1)-(3)に関する適切な数理表現を得ることがまず必要である．研究計画の一年目にあたるR4年度では，(1)および(2)の数理表現を対象に研究を進めた．(1)に関しては２通りのアプローチを検討した．１つ目のアプローチでは，体験活動の各時刻における「場面」を様々な要素的なインタラクションの集まりとして捉え，それが時間方向に累積したデータを体験活動の記録とみなす．ただしそのままでは各場面を有効に特徴づけてはいないため，インタラクションの共起に基づいて体験活動を低次元表現する方法を開発した．これにより体験活動の時間変化や複数の体験活動間の比較などを容易に捉えられる数理表現を得た．２つ目のアプローチでは，インタラクションを行う人物間のやり取りを時間方向の連結の観点からモデル化した．お互いが相手の行動に応じた反応を連鎖させている度合いを，互いの意図を汲みとりを隠れ状態としたモデルで表現した．(2)に関しては，視聴者心理を表現する方法として，表情と心拍特徴を組み合わせるアプローチを検討した．ターン制の対戦型ゲーム（ジェンガ）を題材に，体験活動時および視聴時における表情変化・心拍特徴を計測するとともに，ゲームシーンやアンケート回答との相関や同期について分析を行った．