Can co-creation value in interpersonal services be measured from spoken nonverbal information?

研究を遂行するための基盤を以下のように整え，また得られた基礎的な知見に基づく実験の成果発表を行った。課題#A［小売店におけるバイタル付きVCCプロセスの収集］に関して，サービス提供者のサービス生産活動を計測するための実験室およびVR空間内に模擬店舗を用意した。そこでの実験を通して，熟練サービス提供者の特徴を計測・抽出を行った。その結果，相槌やジェスチャーなど非言語を使ったコミュニケーションにおいて特徴的な傾向が確認された。また，fNIRSを活用してサービス消費中の脳活動を計測するための手段を確認した。予備的な実験を通して価値共創プロセスに大きな影響を与える相手への信頼感を客観的に計測できる可能性が示唆された。課題#B［高ストレス時の音声・詳細バイタル付き価値共創データの収集］に関して，国立がんセンター東病棟にて仮設したマルチモーダルな計測を行うスマート診察室SCOUTERの動作確認を行い，模擬患者を対象に模擬診察を行った。この診察を通して，模擬診察中の映像，呼吸，脈波関連信号，体表面温度，深度画像，それぞれの音声を含む合計36施行の高ストレス時のデータの収集を行った。課題#C［音声の非言語情報から共創価値を推測するモデル］に関して，既存のデータセットを用いる感情推定モデルを作成した。また，診察中の不安・感情を振り返りながら保存ができるアノテーションソフトウェアを作成した。このソフトウェアを活用して，上記模擬診察中の感情のアノテーションを行った。

研究を遂行するための基盤を以下のように整え，また得られた基礎的な知見に基づく実験の成果発表を行った。課題#A［小売店におけるバイタル付きVCCプロセスの収集］に関して，サービス提供者のサービス生産活動を計測するための実験室およびVR空間内に模擬店舗を用意した。そこでの実験を通して，熟練サービス提供者の特徴を計測・抽出を行った。その結果，相槌やジェスチャーなど非言語を使ったコミュニケーションにおいて特徴的な傾向が確認された。また，fNIRSを活用してサービス消費中の脳活動を計測するための手段を確認した。予備的な実験を通して価値共創プロセスに大きな影響を与える相手への信頼感を客観的に計測できる可能性が示唆された。課題#B［高ストレス時の音声・詳細バイタル付き価値共創データの収集］に関して，国立がんセンター東病棟にて仮設したマルチモーダルな計測を行うスマート診察室SCOUTERの動作確認を行い，模擬患者を対象に模擬診察を行った。この診察を通して，模擬診察中の映像，呼吸，脈波関連信号，体表面温度，深度画像，それぞれの音声を含む合計36施行の高ストレス時のデータの収集を行った。課題#C［音声の非言語情報から共創価値を推測するモデル］に関して，既存のデータセットを用いる感情推定モデルを作成した。また，診察中の不安・感情を振り返りながら保存ができるアノテーションソフトウェアを作成した。このソフトウェアを活用して，上記模擬診察中の感情のアノテーションを行った。