Estimation of listener's emotion curve from acoustic parameters

从声学参数估计听者的情绪曲线

• 批准号: 21J13539
• 负责人: 桶本 まどか
• 金额: $ 0.96万
• 依托单位: Kunitachi College of Music
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for JSPS Fellows
• 财政年份: 2021
• 资助国家: 日本
• 起止时间: 2021-04-28 至 2023-03-31
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-21J13539/
• 关键词: 音楽音響; 音楽知覚認知; MIR; 信号処理

本研究課題「音響特徴量に基づいた音楽聴取者の感動遷移モデルの推定」は，音楽聴取時における感動が時系列的にどのように遷移するのかを表したモデルを“楽曲の感動遷移モデル”と呼称し，このモデルを解明しコンピュータによる自動推定を行なうというものであった．本研究課題は，①聴取実験，②音響パラメータの設計，③コンピュータによる推定の3つの事項を行なう必要がある研究課題である．昨年度については，「①聴取実験，②音響パラメータの設計，③コンピュータによる推定という3つの項目を達成する必要がある．②の音響パラメータの設計等については，おおむね順調に進行しているものの，①の聴取実験がCOVID-19の流行もあり，遅延している．」と報告を行なった．本年度についても同様にCOVID-19の流行の影響のため，①の聴取実験を行なうことができなった．①の聴取実験は準備を進めていたものの，実施を行なうことができず，聴取者の感情遷移を取得することができなった．②の音響パラメータの設計については昨年度に引き続き音響パラメータの設計を行なうとともに，拍時刻に関する音響パラメータの取得法について，LSTM（Long Short-Term Memory）を用いて音の音圧レベルなどを説明変数，拍時刻を目的変数として，時系列を考慮した場合の推定方法について検討を行なった．③については，①の聴取実験ができた場合に向けてLSTMなどの手法を適用するための調査検討を行なっていたものの，実際のデータがないためなかなか検討が進まなかった．

The topic of this research is "Estimation of the Motion Transfer of Sound Characteristics", which indicates that the motion transfer of sound characteristics in sound acquisition time series is automatic. This research topic is: ① select the actual situation, ② sound quality design, ③ estimate the three important issues, conduct the necessary research topic. Last year, he said,"① Select the actual situation, ② Sound design, ③ Presumption, 3 Items necessary to achieve." 2. The design of the sound system is in progress, and the COVID-19 epidemic is in progress." Report to the meeting. This year, the impact of COVID-19 epidemic is the same. 1. To prepare for the future, to carry out the work, to obtain the feelings of the person who takes it. 2. The design of the sound system is based on the design of the sound system in the past year. The acquisition method of the sound system is based on the beat time. The LSTM (Long Short-Term Memory) is used to describe the sound system. The beat time is based on the target number. The time series is based on the estimation method of the occasion. 3. The investigation and discussion of LSTM should be carried out in order to improve the quality of LSTM.

项目成果

オンライン会議システムを介した演奏音に対する印象評価

通过在线会议系统进行演出声音印象评价

• 发表时间: 2022
• 作者: Aikawa Shu;Yumoto Masaki;Saitoh Tomohiko;Wada Satoshi;桶本まどか，三浦雅展
• 通讯作者: 桶本まどか，三浦雅展

拍時刻推定のためのオンセット時刻の知覚に対する検討～演奏音を構成する楽器数に関する調査～

通过对开始时间的感知来估计节拍时间的研究 - 对构成演奏声音的乐器数量的调查 -

• 发表时间: 2021
• 作者: Shimada Yutaro;Tokimatsu Koji;Asawa Takashi;Uchida Youhei;Tomigashi Akira;Kurishima Hideaki;桶本まどか，三浦雅展
• 通讯作者: 桶本まどか，三浦雅展

歌唱言語の違いが拍のタイミング知覚に与える影響～Let It Goの場合～

歌唱语言差异对节拍感知的影响～以Let It Go为例～

• 发表时间: 2022
• 作者: 野崎真衣;廣瀬大祐;西村達也;石井佐和;渡辺豪;前田勝浩;桶本まどか，三浦雅展
• 通讯作者: 桶本まどか，三浦雅展

なぜオンラインライブは感動が薄いのか？～心拍変動による音楽聴取時のストレス評価による検討～

为什么网络直播这么缺乏情感？

• 发表时间: 2021
• 作者: Kurisawa Naoaki;Iwasaki Arihiro;Teranuma Kazuya;Dan Shingo;Toyoshima Chikashi;Hashimoto Masaru;Suenaga Kiyotake;平田友花，桶本まどか，三浦雅展
• 通讯作者: 平田友花，桶本まどか，三浦雅展

演奏内容と演奏環境が演奏音の印象に与える影響に関する検証

验证表演内容和表演环境对表演声音印象的影响

• 发表时间: 2022
• 作者: Peizhi Zhang;Mitsuhiro Kamezaki;Zhuoyi He;Hiroyuki Sakamoto;Shigeki Sugano;桶本まどか，三浦雅展
• 通讯作者: 桶本まどか，三浦雅展