The reconstruction framework of the imagined image using brain representation specific to imagination

点击翻译按钮获取中文摘要

本研究の目的は，ヒトの視覚情報処理における知覚と想起の脳活動の違いを明らかにし，想起に特異的な脳内表現を反映した脳情報デコーディングを行うことで，高精細な想起イメージを再構成する技術を開発することである．初年度である2022年度は，そのための想起脳活動データセット収集の実験プロトコル開発，および画像再構成技術の改良を行なった．まず想起脳活動データセット収集の実験プロトコルの開発においては，より効率的に想起イメージのトレーニングデータ収集を行うため，fMRI実験デザインの改良・検証を行なった．これにより収集されたデータセットは想起イメージの再構成においてクオリティ面で既存データセットをやや上回るものの，データ収集効率については未だ改善の余地がある．次に画像再構成技術の改良については，想起などにおいて得られる弱い脳活動信号が再構成画像に反映されにくい問題に取り組んだ．既存の画像再構成における再構成は知覚情報の再構成は比較的容易となっているが，想起などの弱いシグナルの再構成では似たような画像の再構成が多くなり，多様かつ十分なクオリティの再構成画像を得ることができていなかった．そのため手法の改良を行い，想起イメージにおいてもよりターゲットの特徴を反映した多様性のある画像の再構成が可能となるようにした．この改善手法は知覚イメージにおいても有効であったため，視覚情報のイメージ再構成自体の改善につながった．本技法を用いた幻覚の再構成について，所属研究室より出版準備中である．