课题基金 / 基金详情

基于深度张量学习的三维重建关键技术及并行研究

批准号:
62062056
项目类别:
地区科学基金项目
资助金额:
35.0 万元
负责人:
吴素萍
依托单位:
学科分类:
计算机系统结构与硬件技术
结题年份:
2024
批准年份:
2020
项目状态:
已结题
项目参与者:
吴素萍

项目摘要

结项摘要

吴素萍的其他基金

相似基金

相关文献

中文摘要
图像三维重建通过二维几何信息和拓扑信息进行三维描述,因此,三维重建技术是机器视觉、机器人识别检测、自动驾驶和3D电影等领域的共性科学问题和核心技术。本项目围绕深度三维重建问题实现高效和精准三维重建估计,研究如何提高深度三维重建方法计算高效性,研究对于自然无约束条件下物体人脸和人体姿态三维重建和估计鲁棒性。本项目深入结合深度网络图像深度语义信息表达能力和张量精简高维表达能力及充分反映事物属性特性,以及注意力机制和非监督学习充分利用图像自身结构和特性信息学习能力,提出基于深度张量三维重建并行算法、基于形状结构学习的物体三维重建、基于多属性结构约束的人脸三维重建、基于多映射拟合的人体姿态三维估计。本项目所研究技术能够有效解决深度三维重建网络计算存储耗费大和低效率问题,有效对抗物体人脸和人体姿态在自然无约束环境下的变化,有效提升视觉领域问题处理效率,通过并行计算技术有效提升视觉领域解决问题能力。
英文摘要
Image 3D reconstruction is described by 2D geometric information and topological information. 3D reconstruction technology is a common scientific problem and core technology in many fields such as machine vision, robot recognition and detection, automatic driving and 3D movie. For the sake of improving both the efficiency and accuracy of 3D reconstruction in the natural unconstrained environment. Based on the deep network's deep semantic information expression ability, Tensor's simplified high-dimensional expression ability and fully reflecting the characteristics of things' attributes, as well as the attention mechanism and unsupervised learning which make full use of the image's structure and feature information learning ability, this project proposes the 3D reconstruction parallel algorithm based on deep tensor learning, the shape structure learning network for object 3D reconstruction, the multi-attribute structure constraints network for face 3D reconstruction,and the multi mapping fitting network for human pose 3D estimation. These methods can effectively solve the problem of large storage costs and low efficiency of deep 3D reconstruction networks computing, effectively against the changes of the face and human posture in wild conditions, effectively promote the processing efficiency of visual field problems, and effectively promote the ability to solving visual field problems through parallel computing technology.
三维重建技术是机器视觉、机器人、自动驾驶和3D动画电影等领域的共性科学问题和核心技术。本项目围绕深度三维重建高效计算和自然无约束条件下鲁棒三维重建,研究了基于深度张量的可用于三维人体重建、三维人脸重建和三维物体重建的通用学习网络、并行优化和深度学习方法,构建了基于深度张量的三维重建高效张量并行优化、通用学习网络和高质量深度学习体系。提出了一种轻量级分组低秩张量逼近网络和并行优化,用于视频三维人体网格重建、三维人脸重建和三维多视图物体重建,该方法可作为一种通用优化方法插入现有三维重建方法中,能有效提升重建性能和精度。提出了一种新的回放注意力机制,该机制通过自适应地重新校准权重响应来增强网络的表示能力,能够实现高精度的三维物体重建和三维人脸重建。提出了并行加速的三维物体重建、三维人脸重建和三维人体重建方法。提出了多粒度关系形状结构学习、多尺度边界引导结构学习、基于DDPG三维重建模糊概率点推理等三维物体重建方法,提出了动态边缘流结构学习和自监督边缘结构网络等学习多视图三维重建。提出了多属性几何法线一致性约束结构学习、多粒度特征交互学习、高质量人脸头部学习和高保真几何结构等学习人脸三维重建。提出了多映射多分支多混合提取学习人体姿态三维估计,提出了用于人体网格重建的时频感知网络,一种引入频域学习人类特征表示的新范式,提出了一种基于判别表示两阶段共分割网络学习三维人体重建及并行。所提算法在公开测评数据集上取得了超出已有先进方法性能。研发了三维重建实验系统。该项目的研究为基于深度学习的三维重建精准和高效算法提供了新的理论方法,构建了一套基于深度张量学习的三维重建的通用学习方法、并行优化方法以及自然无约束条件下三维重建鲁棒高效模型和方法。为培养高性能并行计算和机器视觉人才做出了贡献,对丰富和发展三维重建研究与应用提供了新的途径。
多视图三维重建关键技术优化及并行算法研究
  • 批准号:
    61662059
  • 项目类别:
    地区科学基金项目
  • 资助金额:
    38.0万元
  • 批准年份:
    2016
  • 负责人:
    吴素萍
  • 依托单位:
基于分布Maple系统下的吴方法的并行计算
  • 批准号:
    60963004
  • 项目类别:
    地区科学基金项目
  • 资助金额:
    22.0万元
  • 批准年份:
    2009
  • 负责人:
    吴素萍
  • 依托单位:
国内基金
海外基金