The reconstruction framework of the imagined image using brain representation specific to imagination

使用特定于想象的大脑表征的想象图像的重建框架

• 批准号: 22K12746
• 负责人: 田中 美里
• 金额: $ 2.66万
• 依托单位: Kyoto University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (C)
• 财政年份: 2022
• 资助国家: 日本
• 起止时间: 2022-04-01 至 2026-03-31
• 项目状态: 未结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-22K12746/
• 关键词: 認知科学; fMRI; デコーディング; 想像・想起; 夢

本研究の目的は，ヒトの視覚情報処理における知覚と想起の脳活動の違いを明らかにし，想起に特異的な脳内表現を反映した脳情報デコーディングを行うことで，高精細な想起イメージを再構成する技術を開発することである．初年度である2022年度は，そのための想起脳活動データセット収集の実験プロトコル開発，および画像再構成技術の改良を行なった．まず想起脳活動データセット収集の実験プロトコルの開発においては，より効率的に想起イメージのトレーニングデータ収集を行うため，fMRI実験デザインの改良・検証を行なった．これにより収集されたデータセットは想起イメージの再構成においてクオリティ面で既存データセットをやや上回るものの，データ収集効率については未だ改善の余地がある．次に画像再構成技術の改良については，想起などにおいて得られる弱い脳活動信号が再構成画像に反映されにくい問題に取り組んだ．既存の画像再構成における再構成は知覚情報の再構成は比較的容易となっているが，想起などの弱いシグナルの再構成では似たような画像の再構成が多くなり，多様かつ十分なクオリティの再構成画像を得ることができていなかった．そのため手法の改良を行い，想起イメージにおいてもよりターゲットの特徴を反映した多様性のある画像の再構成が可能となるようにした．この改善手法は知覚イメージにおいても有効であったため，視覚情報のイメージ再構成自体の改善につながった．本技法を用いた幻覚の再構成について，所属研究室より出版準備中である．

The purpose of this study is to develop a new technology for visual information processing, which reflects the unique performance of visual information processing. In the first year of 2022, the company will continue to improve its image reconstruction technology. FMRI is an improved method for detecting and evaluating fMRI activity. This is the first time that we've had a chance to improve our collection efficiency. Second, the improvement of image reconstruction technology is to remember the weak activity signal and reconstruct the image to reflect the problem. The reconstruction of the existing portrait is easy to compare with the reconstruction of the information. The reconstruction of the existing portrait is easy to compare with the reconstruction of the information. The reconstruction of the existing portrait is easy to compare with the reconstruction of the existing portrait. The reconstruction of the existing portrait is easy to compare. In the process of improvement, it is possible to reconstruct the portrait by thinking of the characteristics of the portrait. This improvement method is to know the information and reconstitute the self improvement. This technique is used to reconstruct the illusion. It belongs to the research laboratory. It is in preparation for publication.