音楽文法と楽譜変換の階層ベイズモデルに基づく編曲技能の計算論的解明

基于音乐语法和乐谱转换的分层贝叶斯模型的编曲技巧的计算阐明

• 批准号: 16J05486
• 负责人: 中村 栄太
• 金额: $ 3.33万
• 依托单位: Kyoto University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for JSPS Fellows
• 财政年份: 2016
• 资助国家: 日本
• 起止时间: 2016-04-22 至 2019-03-31
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-16J05486/
• 关键词: 記号的音楽情報処理; 自動編曲; 音楽言語モデル; 音楽文法推論; 統計的音楽生成モデル; ピアノ編曲; 音楽スタイル変換; 自動採譜; 音楽情報処理; 統計音楽モデル

平成30年度は、これまで進めてきた音楽言語モデルの統合により、様式変換と楽器変換の両側面で編曲アルゴリズムの導出を行った。これにより本研究の主題である統計的音楽言語モデルと編集モデルの統合モデルに基づく編曲手法の枠組みを実例において実現して、その有効性を評価実験において確認した。多くの雑誌論文及び国際・国内学会発表にて成果発表を行った。楽器変換においては、合奏曲からのピアノ用編曲手法を調べた。運指を含む演奏モデルに基づき演奏難易度の定式化を行った。この尺度が演奏誤りの頻度の指標となることを確認し、単純に音符の密度を見るよりも精密な予測ができることを示した。また、編曲における音符の編集操作を表す編集モデルを統合することで編曲アルゴリズムの定式化を行った。編曲アルゴリズムの評価は、客観的な演奏難易度尺度の制御性能の測定と音楽専門家による演奏難易度と原曲に対する忠実度の採点評価と編曲結果の修正に基づく誤り解析により行った。これにより提案手法によって主観的な演奏難易度が制御可能なこと、運指モデルを組み込むことにより原曲に対する忠実度などがより高く、演奏不可能な音符がより少ない編曲が行えることなどを確認した。様式変換においては、メロディーを対象として音楽様式を変換する手法を調べた。潜在的に音楽文法を表す空間を用いた方法により翻訳モデルを構成し、音高空間での単純な距離尺度による類似性に基づくものと比較することにより、この効果を調べた。また、音符パターンとその変形を確率的に定式化したモデルを用いて、局所的モデルでは捉えにくい文法構造に現れる音楽文法規則および編曲の翻訳規則を調べた。研究に関連して収集したピアノ運指データを整備して一般公開した。編曲システムのデモページをWebにて公開した。開発した編曲システムは、入出力形式を整えた状態で今後、Webで利用できる形で一般公開する予定である。

30 annual は, pp.47-53 こ れ ま で into め て き た words sound joy モ デ ル の integration に よ り, others - in と joy device - in の struck side で arranger ア ル ゴ リ ズ ム の export line を っ た. こ れ に よ り の this research topic で あ る statistics of words sound joy モ デ ル compiling モ と デ ル の integration モ デ ル に base づ く arranger gimmick の 枠 group み を be example に お い て be presently し て, そ の have sharper sex を review 価 be 験 に お い て confirm し た. A large number of く 雑 journal papers and び international and domestic academic societies' published にて achievements published を った. The instruments are changed to にお, て,, ピアノ, and the ensemble pieces are tuned to べた with を arrangement techniques. The movement of fingers を contains む to play モデ に に base づ った the difficulty level of playing is fixed を lines った. こ の scale が play mistakenly り の frequency の index と な る こ と を confirm し, the density of pure に 単 notes の を see る よ り も precision な be が で き る こ と を shown し た. ま た, arranger に お け る compiling operating notes の を table compiling モ す デ ル を integration す る こ と で arranger ア ル ゴ リ ズ ム の demean を line っ た. Arranger ア ル ゴ リ ズ ム の review 価 は, degree of difficulty guest 観 な playing scales の の suppression performance measurement と sound joy 専 door home に よ る difficulty degrees と original songs に す seaborne る loyalty be degrees の mining review 価 と arranger the correction に base is の づ く mistakenly り parsing に よ り line っ た. こ れ に よ り proposal gimmick に よ っ て main 観 な playing difficulty level が suppression may な こ と, refers to モ デ ル を group み 込 む こ と に よ り original song に す seaborne る loyalty be degrees な ど が よ り high く, playing impossible な notes が よ り less な い arranger が line え る こ と な ど を confirm し た. Others type variations in に お い て は, メ ロ デ ィ ー を like と seaborne し て sound joy others type を variations in す る gimmick を adjustable べ た. Potential に sound joy grammar を table space す を い た method に よ り turn 訳 モ デ ル を し, pitch space で の 単 pure な distance scales に よ る similarity に base づ く も の と compare す る こ と に よ り, こ の unseen fruit を adjustable べ た. ま た, notes パ タ ー ン と そ の を - shape of probabilistic に demean し た モ デ ル を with い て, bureau モ デ ル で は catch え に く い grammar structure に now れ る sound joy grammar rules お よ び arranger の turn 訳 rules を adjustable べ た. Research: に Related: て collection: たピアノ operation index: デ タを タを preparation: て general public: た. Arrangement: システム デモペ デモペ ジを ジをWebにて public: た Open 発 し た arranger シ ス テ ム は, into the output form を whole え で た state in the future, Web で using で き る form で general public す る designated で あ る.

项目成果

Improved Metrical Alignment of Midi Performance Based on a Repetition-aware Online-adapted Grammar

• DOI: 10.1109/icassp.2019.8683808
• 发表时间: 2019-05
• 期刊: ICASSP 2019 - 2019 IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)
• 作者: Andrew Mcleod;Eita Nakamura;Kazuyoshi Yoshii

演奏者の楽譜の休止区間における自動伴奏のテンポ制御

演奏者乐谱暂停期间自动伴奏速度控制

• 发表时间: 2016
• 期刊: 情報処理学会 音楽情報科学研究会（夏のシンポジウム）
• 作者: 長野 亜美;齋藤 康之;中村 栄太;嵯峨山 茂樹
• 通讯作者: 嵯峨山 茂樹

Sequential Generation of Singing F0 Contours from Musical Note Sequences Based on WaveNet

• DOI: 10.23919/apsipa.2018.8659502
• 发表时间: 2018-11
• 期刊: 2018 Asia-Pacific Signal and Information Processing Association Annual Summit and Conference (APSIPA ASC)
• 作者: Yusuke Wada;Ryo Nishikimi;Eita Nakamura;Katsutoshi Itoyama;Kazuyoshi Yoshii

Generative Statistical Models with Self-Emergent Grammar of Chord Sequences

和弦序列自生语法的生成统计模型

• DOI: 10.1080/09298215.2018.1447584
• 发表时间: 2018
• 期刊: Journal of New Music Research
• 影响因子: 1.1
• 作者: Hiroaki Tsushima;Eita Nakamura;Katsutoshi Itoyama;Kazuyoshi Yoshii
• 通讯作者: Kazuyoshi Yoshii

Scale- and Rhythm-Aware Musical Note Estimation for Vocal F0 Trajectories Based on a Semi-Tatum-Synchronous Hierarchical Hidden Semi-Markov Model

基于半塔图同步分层隐半马尔可夫模型的声乐 F0 轨迹的音阶和节奏感知音符估计

• 发表时间: 2017
• 作者: Ryo Nishikimi;Eita Nakamura;Masataka Goto;Katsutoshi Itoyama;Kazuyoshi Yoshii
• 通讯作者: Kazuyoshi Yoshii