复杂室外环境下的大视场、大范围场景感知研究
批准号:
61573222
项目类别:
面上项目
资助金额:
66.0 万元
负责人:
张伟
依托单位:
学科分类:
F0306.自动化检测技术与装置
结题年份:
2019
批准年份:
2015
项目状态:
已结题
项目参与者:
马昕、杨阳、谯旭、丁超、邓立霞、张伟东、刘侃、张海峰、宫世杰
国基评审专家1V1指导 中标率高出同行96.8%
结合最新热点,提供专业选题建议
深度指导申报书撰写,确保创新可行
指导项目中标800+,快速提高中标率
微信扫码咨询
中文摘要
视觉传感器是移动机器人进行信息采集的重要手段。但室外环境景物多变、非结构化及无规律性明显,传统视觉感知由于采集视场小(窄视)、感知距离近(近视)、环境变化适应性差(弱视),无法满足室外机器人的应用需求,基于视觉的复杂室外环境场景感知已成为机器人领域一个亟需解决的关键问题。本项目打破传统方法的局限,另辟蹊径,将视觉采集模式改进与算法理论研究相结合,提出大视场、大范围感知体系。通过构建全向视觉采集系统及基于全向视觉的场景密集重建进行大视场信息获取和分析,通过深度网络基础上的迁移半监督学习进行场景特征的自适应提取,通过由近及远的自监督在线学习进行远距离大范围场景感知。本项目旨在建立一套针对复杂室外场景的大视场、大范围的机器人自主感知的基本理论和方法体系,并通过四足、轮式机器人移动平台验证相关理论和技术的可行性和有效性,为全面提高移动机器人在复杂环境下的自主性提供重要理论基础和关键技术支撑。
英文摘要
Vision sensor is an important means for scene capturing of mobile robots. However, in unstructured and uncontrolled outdoor enviroments with large amount of uncertainties and complexities, traditional vision-based approaches suffer from the limitations imposed by narrow field-of-view (FOV), short-range detection and low sensitivity to scene changes, and thus cannot meet the application demands of outdoor robots. Vision-based perception in complex outdoors is still a key and urgent problem to be solved. To overcome these limitations, a wide-FOV and long-range perception scheme is proposed in this proposal, where both the vision theory and acquisition manner will be investigated together. In specific, the omnidirectional visual acquisition and dense scene reconstruction are addressed to achieve wide-FOV acquisition and analysis. A deep network is built based on transfer learning and semi-supervised fashion to achieve adaptive feature extraction. A near-to-far self-supervised architecture is designed to achieve long-range perception. Fundamental theories and technical hierarchies for wide-FOV and long-range perception in complex outdoor scenes will be established in this project. Feasibility and effectiveness of the whole system will be verified with quadruped and wheeled robots. The project outcomes can provide sound theoretical foundations and key technical supports to significantly improve the autonomous capabilities of mobile robots in complex environments.
本项目组成员通力合作,依照项目计划书顺利完成了各项内容,并通过本项目的资助取得了一系列成果。具体地,本项目建立了多相机协同视觉采集系统并通过基于全向视觉的场景感知实现了大视场信息获取与分析,通过构建端到端学习的深度网络模型提取具有任务适应性的场景语义特征,通过由近及远的自监督学习进行远距离大范围场景感知,最终初步建立了针对复杂场景的大视场、大范围场景感知方法体系,并搭建了基于多相机协同的机器人感知验证平台,借助该移动平台验证了大视场、大范围场景感知技术的可行性和有效性,为全面提高移动机器人在复杂环境下的自主性提供了理论和技术支撑。相关成果在国内外知名学术期刊和会议发表SCI论文23篇,EI论文11篇,其中TPAMI、TIP、TNNLS、TCYB、TCSVT、TMM等IEEE汇刊14篇,ICCV、CVPR、IJCAI、AAAI、IROS等人工智能与机器人领域顶级会议论文8篇,另有8篇论文正在审稿过程中;相关论文得到国内外同行学者的引用和正面评价,其中2篇入选ESI高被引论文,1篇入选ESI热点论文;获发明专利授权4项,另有2项发明专利进入实质审查阶段;获国家自然科学基金联合基金重点项目资助1项、重大项目课题资助1项;获CVPR2016大规模场景理解挑战赛冠军、CVPR2018大规模行为识别挑战赛季军。
期刊论文列表
专著列表
科研奖励列表
会议论文列表
专利列表
DOI:10.1016/j.ins.2017.05.019
发表时间:2017-11
期刊:Inf. Sci.
影响因子:--
作者:Wei Zhang;Shengnan Hu;Kang Liu
通讯作者:Wei Zhang;Shengnan Hu;Kang Liu
DOI:10.1109/tsipn.2018.2889229
发表时间:2019
期刊:IEEE Transactions on Signal and Information Processing over Networks
影响因子:3.2
作者:Lu Weizhi;Li Weiyu;Zhang Wei;Xia Shu-Tao
通讯作者:Xia Shu-Tao
Coarse-to-Fine UAV Target Tracking With Deep Reinforcement Learning
通过深度强化学习进行从粗到细的无人机目标跟踪
DOI:10.1109/tase.2018.2877499
发表时间:2019-10-01
期刊:IEEE TRANSACTIONS ON AUTOMATION SCIENCE AND ENGINEERING
影响因子:5.6
作者:Zhang, Wei;Song, Ke;Li, Yibin
通讯作者:Li, Yibin
Feature Aggregation With Reinforcement Learning for Video-Based Person Re-Identification
基于视频的行人重新识别的强化学习特征聚合
DOI:10.1109/tnnls.2019.2899588
发表时间:2019-03
期刊:IEEE Transactions on Neural Networks and Learning Systems (TNNLS)
影响因子:--
作者:Zhang Wei;He Xuanyu;Lu Weizhi;Qiao Hong;Li Yibin
通讯作者:Li Yibin
Reversible data hiding for high dynamic range images using edge information
使用边缘信息的高动态范围图像的可逆数据隐藏
DOI:10.1007/s11042-018-6589-x
发表时间:2018-09
期刊:Multimedia Tools and Applications
影响因子:3.6
作者:He Xuanyu;Zhang Wei;Zhang Haifeng;Ma Lin;Li Yibin
通讯作者:Li Yibin
基于间歇计算的实时自供能嵌入式系统设计关键技术研究
- 批准号:62302270
- 项目类别:青年科学基金项目
- 资助金额:30万元
- 批准年份:2023
- 负责人:张伟
- 依托单位:
ITS2“分类阈值”的构建及其在混合中药材高通量鉴定中的应用基础
- 批准号:U2106227
- 项目类别:面上项目
- 资助金额:55万元
- 批准年份:2021
- 负责人:张伟
- 依托单位:
基于P450酶的深海放线菌抗肿瘤活性先导化合物发现、结构优化与作用机制研究
- 批准号:--
- 项目类别:--
- 资助金额:266万元
- 批准年份:2021
- 负责人:张伟
- 依托单位:
基于多模环境交互的自主安保机器人关键技术研究
- 批准号:U1913204
- 项目类别:联合基金项目
- 资助金额:244万元
- 批准年份:2019
- 负责人:张伟
- 依托单位:
混合所有制企业研发支持的公共政策选择研究
- 批准号:71773066
- 项目类别:面上项目
- 资助金额:45.0万元
- 批准年份:2017
- 负责人:张伟
- 依托单位:
ITS2二级结构的系统发育信息在药用植物DNA条形码中的应用价值研究
- 批准号:81673551
- 项目类别:面上项目
- 资助金额:57.0万元
- 批准年份:2016
- 负责人:张伟
- 依托单位:
海洋真菌喹唑啉酮生物碱中环丙烷结构单元的生物合成机制与合成生物学研究
- 批准号:31570030
- 项目类别:面上项目
- 资助金额:62.0万元
- 批准年份:2015
- 负责人:张伟
- 依托单位:
山茶科花瓣机械系统的生物力学特性及其适应性研究
- 批准号:31300194
- 项目类别:青年科学基金项目
- 资助金额:23.0万元
- 批准年份:2013
- 负责人:张伟
- 依托单位:
NF-kB信号通路在磨损颗粒诱导炎症性骨溶解中的作用研究
- 批准号:81201441
- 项目类别:青年科学基金项目
- 资助金额:23.0万元
- 批准年份:2012
- 负责人:张伟
- 依托单位:
国内基金
海外基金















{{item.name}}会员


