対話型AIエージェントの社会的存在感を強化する音楽的感情表現システムの開発

エージェントは社会的に接されにくいことが知られており，エージェントに話しかける際に抵抗感を覚える等，未だ「モノ」としての側面が強い（社会的存在感が低い）ことが伺える．エージェントが人と対等で親密な存在となることができれば，ユーザが自然に積極的に話しかけるようになり，ユーザ固有の情報を収集しやすくより個人に適したサービスを提供出来たり，孤独感の効果的な低減等感情面での支援が容易になったりといった利点が考えられる．社会的存在感の向上を目指すうえで，本研究では音声対話エージェントの感情表現の乏しさに着目した．既存の多くの音声対話エージェントの発話は人の音声と比べて平坦な合成音声が用いられており，エージェントの感情が伝わりにくく音声アシスタントへの話しかけに抵抗感が生じる一因となっていることが懸念される．本研究では，音声対話エージェントの合成音声に音楽を付与して感情を表現する音楽的感情表現を提案した．音楽的感情表現としてBackground music（BGM）,Sound effectを合成音声に加えて印象評価を行った結果，平坦な合成音声であっても感情を意図通りに伝達することができた．さらに，感情的な合成音声に加えた場合でも，その感情伝達の効果を高めることができた．また，ポジティブな感情表現においてはエージェントの人間らしさや話しかけやすさを向上させることができた．音楽的感情表現としてのBGMを自動生成するため，LSTMベースの音楽生成モデルを使用し感情に対応したBGMを生成するシステムを試作した．以上の成果をまとめて国際会議HAI2021で発表した．さらに，この音楽的感情表現を歴史的建築物の新たな保存・再生方法へと発展させた．これは，建築が感情を持ち表現することによって利用者が建築を生物のように感じ建築に対して愛着を持つことで保存・再生に積極的になることを期待したものである．

エージェントは社会的に接されにくいことが知られており，エージェントに話しかける際に抵抗感を覚える等，未だ「モノ」としての側面が強い（社会的存在感が低い）ことが伺える．エージェントが人と対等で親密な存在となることができれば，ユーザが自然に積極的に話しかけるようになり，ユーザ固有の情報を収集しやすくより個人に適したサービスを提供出来たり，孤独感の効果的な低減等感情面での支援が容易になったりといった利点が考えられる．社会的存在感の向上を目指すうえで，本研究では音声対話エージェントの感情表現の乏しさに着目した．既存の多くの音声対話エージェントの発話は人の音声と比べて平坦な合成音声が用いられており，エージェントの感情が伝わりにくく音声アシスタントへの話しかけに抵抗感が生じる一因となっていることが懸念される．本研究では，音声対話エージェントの合成音声に音楽を付与して感情を表現する音楽的感情表現を提案した．音楽的感情表現としてBackground music（BGM）,Sound effectを合成音声に加えて印象評価を行った結果，平坦な合成音声であっても感情を意図通りに伝達することができた．さらに，感情的な合成音声に加えた場合でも，その感情伝達の効果を高めることができた．また，ポジティブな感情表現においてはエージェントの人間らしさや話しかけやすさを向上させることができた．音楽的感情表現としてのBGMを自動生成するため，LSTMベースの音楽生成モデルを使用し感情に対応したBGMを生成するシステムを試作した．以上の成果をまとめて国際会議HAI2021で発表した．さらに，この音楽的感情表現を歴史的建築物の新たな保存・再生方法へと発展させた．これは，建築が感情を持ち表現することによって利用者が建築を生物のように感じ建築に対して愛着を持つことで保存・再生に積極的になることを期待したものである．