基于视觉信息编解码的深度学习的类脑机制研究

批准号:
91520202
项目类别:
重大研究计划
资助金额:
132.0 万元
负责人:
何晖光
依托单位:
学科分类:
F0609.认知与神经科学启发的人工智能
结题年份:
2017
批准年份:
2015
项目状态:
已结题
项目参与者:
张家才、缪倩文、方龙伟、文宏伟、从怀威、牛家鲁、陈智强、汪胜佩
国基评审专家1V1指导 中标率高出同行96.8%
结合最新热点,提供专业选题建议
深度指导申报书撰写,确保创新可行
指导项目中标800+,快速提高中标率
微信扫码咨询
中文摘要
视觉信息是人类感知和认识外部世界的最主要途径之一。人脑在复杂视觉信息处理方面具有高效、鲁棒、抗噪等特点,具有计算机视觉无法比拟的优越性。fMRI和EEG作为能够对大脑的功能活动进行无损和反复测量的最佳手段,已成为研究人脑视觉感知机制的主要途径。本项目拟基于fMRI/EEG信号,用先进的计算方法建立从人类视觉系统与外界视觉刺激信息之间的映射模型,探索大脑视觉信息处理的过程和机理,并利用机器智能实现对人类视觉感知功能的模拟,从而提升计算机处理视觉信息的能力。与此同时,我们还将研究利用深度学习所得到的视觉特征与大脑视觉信息处理的关系,理解各层特征在大脑皮层的神经表达,并利用深度学习建立视觉信息的神经编解码模型。该研究对脑科学和智能技术具有重要的理论和现实意义。
英文摘要
Visual information is one of the most important ways of human perception and understanding of the world. The human brain has the characteristics of high efficiency, robust and anti-noise in complex visual information processing, compared with computer vision. FMRI and EEG as the best means to measure the brain activity, become the main way to study the mechanism of human visual perception. This project intends to use advanced computing method to establish the mapping model between the visual system and the external visual stimulation information, explore the mechanism of brain visual information processing, and use machine intelligence to simulate human visual perception function, and thus enhance the ability of computer processing visual information. At the same time, we will study the relationship between deep learning and brain visual information processing, understanding the expression of each layer in the cerebral cortex, and the use of deep learning's visual signal for the brain to encode and decode. This study has important theoretical and practical significance for brain science and intelligent technology.
人脑具有极强的视觉信息加工能力,了解大脑的信息处理机制可以帮助我们设计更高效的计算机视觉方法,推动人工智能技术的发展。本项目基于正常人在视觉任务下的神经反应数据,研究神经信息抽取和解码技术,了解人脑视觉信息的表征机制,并将人脑与卷积神经网络(CNN)在视觉处理时的反应进行对比,考察两者间的功能相似性,为了解人脑信息加工机制和深度神经网络的功能组织提供新的研究视角。主要研究结果如下:利用多体素模式分析方法,我们首先通过分析不同脑区神经信号所含有的客体类别信息的差异,验证了视觉通路的层次化信息处理机制。鉴于CNN也具有类似的功能组织结构,我们进一步研究了人脑视觉皮层的功能活动与CNN各个表征层的对应关系,结果表明人脑初级视皮层与CNN前三层具有较强的功能对应性,而人脑较高级的视皮层则与卷积网络后三层具有较强的对应性,这些发现表明人脑的功能网络与CNN在处理机制上具有一定相似性,也启发我们可以通过人工神经网络对人脑进行建模,并用于神经信息的抽取和解码等应用。这里我们提出了一种基于贝叶斯深度学习技术的视觉刺激重建方法,该方法可自动提取与神经反应存在显著关联的视觉特征,利用这些特征可以根据脑活动重建被试看到的视觉刺激的内容。除了对视觉刺激中的客体类别等信息进行解码外,我们还研究了如何基于脑活动推断个体情绪状态等主观心理状态的方法,并在基于fMRI和EEG脑信号进行情绪类别分类的应用中得到验证。这些工作对于了解人脑的信息加工机制和研发神经解码技术具有重要的推动作用。.本项目共发表论文29篇,其中包括国际核心期刊论文19篇,国际主流会议论文10篇,其中SCI收录18篇,EI收录8篇。期间参加了国内外学术会议32次,先后有9名博士生、5名硕士生参与了本项目。项目期间,先后有2名博士和6名硕士获得学位,项目负责人获得教育部科技进步一等奖(排名第三),入选中科院青年创新促进会优秀会员。
期刊论文列表
专著列表
科研奖励列表
会议论文列表
专利列表
Altered Spontaneous Brain Activity in Children with Early Tourette Syndrome: a Resting-state fMRI Study.
早期抽动秽语综合征儿童自发大脑活动的改变:一项静息态功能磁共振成像研究
DOI:10.1038/s41598-017-04148-z
发表时间:2017-07-06
期刊:Scientific reports
影响因子:4.6
作者:Liu Y;Wang J;Zhang J;Wen H;Zhang Y;Kang H;Wang X;Li W;He H;Peng Y
通讯作者:Peng Y
Combining tract- and atlas-based analysis reveals microstructural abnormalities in early Tourette syndrome children
结合纤维束和图谱分析揭示早期抽动秽语综合征儿童的微观结构异常
DOI:10.1002/hbm.23146
发表时间:2016-05-01
期刊:HUMAN BRAIN MAPPING
影响因子:4.8
作者:Wen, Hongwei;Liu, Yue;He, Huiguang
通讯作者:He, Huiguang
Computer-Aided Prognosis: Accurate Prediction of Patients with Neurologic and Psychiatric Diseases via Multi-modal MRI Analysis
计算机辅助预后:通过多模态 MRI 分析准确预测神经和精神疾病患者
DOI:10.1007/978-3-319-68843-5_10
发表时间:2018
期刊:Artificial Intelligence in Decision Support Systems for Diagnosis in Medical Imaging
影响因子:--
作者:Huiguang He;Hongwei Wen;Dai Dai;Jieqiong Wang
通讯作者:Jieqiong Wang
Alteration of gray matter texture features over the whole brain in medication-overuse headache using a 3-dimentional texture analysis.
使用三维纹理分析改变药物过度使用性头痛中整个大脑的灰质纹理特征
DOI:10.1186/s10194-017-0820-4
发表时间:2017-11-28
期刊:The journal of headache and pain
影响因子:--
作者:Chen Z;Chen X;Chen Z;Liu M;He H;Ma L;Yu S
通讯作者:Yu S
Classifying four-category visual objects using multiple ERP components in single-trial ERP
在单次试验 ERP 中使用多个 ERP 组件对四类视觉对象进行分类
DOI:10.1007/s11571-016-9378-0
发表时间:2016
期刊:COGNITIVE NEURODYNAMICS
影响因子:3.7
作者:Qin Yu;Zhan Yu;Wang Changming;Zhang Jiacai;Yao Li;Guo Xiaojuan;Wu Xia;Hu Bin
通讯作者:Hu Bin
青光眼患者的脑网络调控及视觉修复研究
- 批准号:--
- 项目类别:国际(地区)合作与交流项目
- 资助金额:230万元
- 批准年份:2020
- 负责人:何晖光
- 依托单位:
基于自然场景刺激的脑活动语义解码及视觉重建
- 批准号:61976209
- 项目类别:面上项目
- 资助金额:61.0万元
- 批准年份:2019
- 负责人:何晖光
- 依托单位:
基于多模态影像的弱视患者脑结构及功能研究
- 批准号:61271151
- 项目类别:面上项目
- 资助金额:88.0万元
- 批准年份:2012
- 负责人:何晖光
- 依托单位:
多维神经元放电信号解析方法的研究及其在脑-机接口中的应用
- 批准号:60875079
- 项目类别:面上项目
- 资助金额:43.0万元
- 批准年份:2008
- 负责人:何晖光
- 依托单位:
缺血性脑卒中半暗带时空进化模型的研究
- 批准号:30670530
- 项目类别:面上项目
- 资助金额:23.0万元
- 批准年份:2006
- 负责人:何晖光
- 依托单位:
基于小波域马尔科夫随机场的核磁图像分割算法研究
- 批准号:60302016
- 项目类别:青年科学基金项目
- 资助金额:24.0万元
- 批准年份:2003
- 负责人:何晖光
- 依托单位:
国内基金
海外基金
