权益分类	功能权益	普通用户	{{item.name}}会员
{{category.name}}	{{benefitItem.name}}

Statistical Parametric Instrumental Sound Synthesis with Controllable Context of Performance

具有可控性能背景的统计参数乐器声音合成

基本信息

批准号：
22KJ2855
负责人：
小口純矢
金额：
$ 1.6万
依托单位：
Meiji University
依托单位国家：
日本
项目类别：
Grant-in-Aid for JSPS Fellows
财政年份：
2023
资助国家：
日本
起止时间：
2023-03-08 至 2025-03-31
项目状态：
未结题

项目摘要

今年度は，まず撥弦楽器における奏法と演奏信号の時間的な対応付けを高精度に推定する手法の開発に取り組んだ．演奏をパラメトリックに制御できる楽器音合成システムへの入力には，音高・音量・音価だけでなく奏法の情報を何らかのベクトル表現へと変換し，演奏音響信号と対応付ける必要がある．そこで，音声における音素表現と撥弦楽器音（特にエレキベース）における奏法表現の類似に着目した．アタックとサスティン区間をそれぞれ子音と母音のように捉えることで，音声信号に対応する音素のように演奏信号に対して奏法ラベルを設計した．また奏法ラベルとその演奏楽器音に対する時間的な対応（アライメント）を得る手法について，これまで音声合成において用いられてきた種々のアルゴリズムを適用した．その過程で，新たにエレキベースの音響信号とその楽譜情報を含む楽器音データベースを構築した．このデータベースを利用してアライメントアルゴリズムの比較実験を行った結果，音色変換と動的時間伸縮を組み合わせた手法が最も高精度であった．この内容は日本音響学会2022年秋季研究発表会において口頭発表を行った．さらに，発話スタイルの異なる音声データに対してその違いがどのような音響的性質に基づくのかを調査するための音響解析を行った．基本周波数や非周期性指標といったいくつかの音響特徴量において聴感上の印象に対応する差異が認められる結果となった．これらは楽器音の奏法や演奏表情の変化に対しても応用が期待される．この内容は日本音響学会2023年春季研究発表会において口頭発表を行った．

This year, the stringers play the music and the time of the playing signal are estimated with high accuracy. The sound composition of the instrument is based on the input force of the pitch, volume and sound method. The sound of the sound is similar to that of the sound of the sound. The sound signal is designed to match the phoneme and the performance signal. For example, if you want to play music, you can use the method of music synthesis to make music. In the process, new audio signals and spectral information are included in the construction of audio signals. The result of comparison is that the timbre changes and the time expansion and contraction are combined to achieve the highest accuracy. The contents of this paper are as follows: Japan Sound Society 2022 Autumn Research Conference In addition, the sound analysis of the sound transmission system is carried out according to the basic sound characteristics. Basic cycle number, aperiodic index, acoustic characteristics, sensory differences, recognition results. This is the first time I've ever played a musical instrument. The contents of this paper are as follows: Japan Sound Society 2023 Spring Research Conference