Full 3D Immersion: Capture and Visualization

全 3D 沉浸式体验:捕捉和可视化

基本信息

  • 批准号:
    RGPIN-2015-06812
  • 负责人:
  • 金额:
    $ 1.75万
  • 依托单位:
  • 依托单位国家:
    加拿大
  • 项目类别:
    Discovery Grants Program - Individual
  • 财政年份:
    2019
  • 资助国家:
    加拿大
  • 起止时间:
    2019-01-01 至 2020-12-31
  • 项目状态:
    已结题

项目摘要

This grant proposal is in the field of computer vision. Its primary focus is on developing new 3D immersion technologies, from the perspective of capturing reality accurately as well as visualization (large immersive projections, single virtual headset). The goals are simple. First, we intend to provide highly accurate, fast, and robust methods for capturing reality immersively (large field of view) and in 3D, without any constraint on the motion of camera or the scene observed. Second, we intend to provide highly efficient methods for large scale visualization of immersive 3D content (i.e. dome multi-projection, or other large surfaces), and for small scale visualization, such as virtual headsets (i.e. oculus rift).******3D Immersion is becoming more prevalent everyday, especially in the arts, entertainment, and video games. This is due mostly to recent advances in virtual headset technology such as the Oculus rift and to new interest toward 3D dome projection, where the screen is not only filling the observers fields of view, but also provides stereo images, so depth can be perceived accurately in all directions. Content creation for 3D immersion is mostly performed with 3D computer graphics, where it is easy to make stereo-immersive rendering. However, the accurate depiction of reality requires real world filming and has remained a challenge. Traditional "small field of view" stereo capture can not be used directly for immersion because it provides a single point of view while immersive capture requires capturing from all possible point of views simultaneously. The single person immersive 3D experience is also evolving rapidly in the form of new high performance virtual reality headsets. Software for viewing content has matured, especially with regards to 3D real-time graphics and video games. However, for immersive video, the large resolutions involved and geometry corrections (including parallax) still constitute a challenge. Our research program intends to explore 3D immersion, from the perspective of content creation and content presentation.******We will develop new cameras for 3D spherical capture of reality, so it can be observed somewhere else with accurate depth perception in any direction, and in real-time.******We will also develop better multi-projection, to simplify and automate its deployment while making it more perceptually accurate immersion with depth.***Our long term goal is the "ultimate immersive 3D" experience, where the observer not only controls his gaze, but also his location. This new freedom for the observer will have a profound impact on the creation of 3D immersive content and make it much more challenging, thereby opening new avenues of research. Overall, if this research program is successful, we will have contributed to achieving the ultimate goal of 3D immersion: giving full freedom of movement to the observer, giving him a true felling of omnipresence.
这项拨款提案属于计算机视觉领域。它的主要重点是开发新的3D沉浸技术,从准确捕捉现实和可视化的角度(大型沉浸式投影,单个虚拟耳机)。目标很简单。首先,我们打算提供高精度、快速和健壮的方法来在沉浸式(大视场)和3D中捕捉现实,而不会对相机或所观察到的场景的运动进行任何限制。其次,我们打算为沉浸式3D内容的大规模可视化(即圆顶多投影或其他大型表面)提供高效的方法,并提供小规模可视化方法,如虚拟耳机(即Oculus Rift)。*3D沉浸式正变得越来越普遍,特别是在艺术、娱乐和视频游戏中。这主要是由于虚拟耳机技术的最新进展,如Oculus Rift,以及对3D穹顶投影的新兴趣,其中屏幕不仅填满了观察者的视野,还提供了立体图像,因此可以在各个方向准确地感知深度。3D沉浸的内容创建主要是使用3D计算机图形来执行的,在3D计算机图形中很容易进行立体沉浸式渲染。然而,对现实的准确描绘需要真实世界的拍摄,这一直是一个挑战。传统的小视场立体捕捉不能直接用于沉浸,因为它提供了单一的视角,而沉浸式捕捉需要同时从所有可能的视点捕捉。单人身临其境的3D体验也在以新的高性能虚拟现实耳机的形式快速发展。观看内容的软件已经成熟,特别是在3D实时图形和视频游戏方面。然而,对于身临其境的视频,所涉及的大分辨率和几何校正(包括视差)仍然构成挑战。我们的研究项目旨在从内容创作和内容呈现的角度来探索3D沉浸。*我们将开发用于3D球面捕捉现实的新相机,这样它就可以在任何方向上以准确的深度感知被其他地方实时观察。*我们还将开发更好的多投影,以简化和自动化其部署,同时使其在感知上更精确地沉浸在深度中。*我们的长期目标是“终极沉浸式3D”体验,其中观察者不仅可以控制他的凝视,还可以控制他的位置。观察者的这种新的自由将对3D沉浸式内容的创作产生深远的影响,并使其更具挑战性,从而开辟新的研究途径。总体而言,如果这个研究项目成功,我们将为实现3D沉浸的最终目标做出贡献:给予观察者充分的行动自由,给他一种无所不在的真实感觉。

项目成果

期刊论文数量(0)
专著数量(0)
科研奖励数量(0)
会议论文数量(0)
专利数量(0)

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ monograph.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ sciAawards.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ conferencePapers.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ patent.updateTime }}

Roy, Sébastien其他文献

Roy, Sébastien的其他文献

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

{{ truncateString('Roy, Sébastien', 18)}}的其他基金

Alder-microbe interactions and adaptations in changing environments.
不断变化的环境中桤木微生物的相互作用和适应。
  • 批准号:
    RGPIN-2019-06927
  • 财政年份:
    2022
  • 资助金额:
    $ 1.75万
  • 项目类别:
    Discovery Grants Program - Individual
Practical large-scale antenna systems (LSAS) for high bit-rate communications based on antenna selection and spatial modulation
基于天线选择和空间调制的实用大规模天线系统(LSAS),用于高比特率通信
  • 批准号:
    RGPIN-2018-06124
  • 财政年份:
    2022
  • 资助金额:
    $ 1.75万
  • 项目类别:
    Discovery Grants Program - Individual
Alder-microbe interactions and adaptations in changing environments.
不断变化的环境中桤木微生物的相互作用和适应。
  • 批准号:
    RGPIN-2019-06927
  • 财政年份:
    2021
  • 资助金额:
    $ 1.75万
  • 项目类别:
    Discovery Grants Program - Individual
Practical large-scale antenna systems (LSAS) for high bit-rate communications based on antenna selection and spatial modulation
基于天线选择和空间调制的实用大规模天线系统(LSAS),用于高比特率通信
  • 批准号:
    RGPIN-2018-06124
  • 财政年份:
    2021
  • 资助金额:
    $ 1.75万
  • 项目类别:
    Discovery Grants Program - Individual
Alder-microbe interactions and adaptations in changing environments.
不断变化的环境中桤木微生物的相互作用和适应。
  • 批准号:
    RGPIN-2019-06927
  • 财政年份:
    2020
  • 资助金额:
    $ 1.75万
  • 项目类别:
    Discovery Grants Program - Individual
Practical large-scale antenna systems (LSAS) for high bit-rate communications based on antenna selection and spatial modulation
基于天线选择和空间调制的实用大规模天线系统(LSAS),用于高比特率通信
  • 批准号:
    RGPIN-2018-06124
  • 财政年份:
    2020
  • 资助金额:
    $ 1.75万
  • 项目类别:
    Discovery Grants Program - Individual
Practical large-scale antenna systems (LSAS) for high bit-rate communications based on antenna selection and spatial modulation
基于天线选择和空间调制的实用大规模天线系统(LSAS),用于高比特率通信
  • 批准号:
    RGPIN-2018-06124
  • 财政年份:
    2019
  • 资助金额:
    $ 1.75万
  • 项目类别:
    Discovery Grants Program - Individual
Practical MIMO channel sounding algorithm and prototype for record & playback RF platform
实用的 MIMO 信道探测算法和原型记录
  • 批准号:
    543487-2019
  • 财政年份:
    2019
  • 资助金额:
    $ 1.75万
  • 项目类别:
    Engage Grants Program
Alder-microbe interactions and adaptations in changing environments.
不断变化的环境中桤木微生物的相互作用和适应。
  • 批准号:
    RGPIN-2019-06927
  • 财政年份:
    2019
  • 资助金额:
    $ 1.75万
  • 项目类别:
    Discovery Grants Program - Individual
Geolocation of multiple noncooperative transmitters using array processing
使用阵列处理对多个非合作发射机进行地理定位
  • 批准号:
    534556-2018
  • 财政年份:
    2018
  • 资助金额:
    $ 1.75万
  • 项目类别:
    Engage Plus Grants Program

相似国自然基金

锰酸锂基复合气凝胶的3D打印构筑及其提锂机制研究
  • 批准号:
    JCZRLH202500778
  • 批准年份:
    2025
  • 资助金额:
    0.0 万元
  • 项目类别:
    省市级项目
智能3D超微血管成像联合实时剪切波弹性评估胎盘功能对高血压孕妇子痫前期的预测效能分析
  • 批准号:
  • 批准年份:
    2025
  • 资助金额:
    0.0 万元
  • 项目类别:
    省市级项目
3D打印楔形梯度多孔支架的优化构建及促进HTO术后骨再生修复的实验研究
  • 批准号:
  • 批准年份:
    2025
  • 资助金额:
    0.0 万元
  • 项目类别:
    省市级项目
基于3D Slicer的颅内动脉瘤破裂风险评估机器学习模型开发及临床推广应用
  • 批准号:
  • 批准年份:
    2025
  • 资助金额:
    0.0 万元
  • 项目类别:
    省市级项目
3D打印PH-GBS@CCP复合支架诱导骨肉瘤铜死亡及增效抗PD-1治疗的作用机制研究
  • 批准号:
  • 批准年份:
    2025
  • 资助金额:
    0.0 万元
  • 项目类别:
    省市级项目
双重固化3D打印连续纤维C/C复合材料成型与渗碳致密化机理研究
  • 批准号:
    2025JJ60269
  • 批准年份:
    2025
  • 资助金额:
    0.0 万元
  • 项目类别:
    省市级项目
载椎体骨髓干细胞外泌体3D打印n-HA/PA66生物支架的研制及促脊柱融合机制研究
  • 批准号:
    2025JJ80409
  • 批准年份:
    2025
  • 资助金额:
    0.0 万元
  • 项目类别:
    省市级项目
基于微流控技术的3D细胞培养体系构建及在乳腺癌耐药机制中应用研究
  • 批准号:
    2025JJ70487
  • 批准年份:
    2025
  • 资助金额:
    0.0 万元
  • 项目类别:
    省市级项目

相似海外基金

Developing a 3D printed skin model using a Dextran - Collagen hydrogel to analyse the cellular and epigenetic effects of interleukin-17 inhibitors in
使用右旋糖酐-胶原蛋白水凝胶开发 3D 打印皮肤模型,以分析白细胞介素 17 抑制剂的细胞和表观遗传效应
  • 批准号:
    2890513
  • 财政年份:
    2027
  • 资助金额:
    $ 1.75万
  • 项目类别:
    Studentship
Exploiting DNS in 3D Design
在 3D 设计中利用 DNS
  • 批准号:
    2777188
  • 财政年份:
    2026
  • 资助金额:
    $ 1.75万
  • 项目类别:
    Studentship
3D Printing Proteins for Continuous Flow Biocatalysis and Bioabsorbtion
用于连续流生物催化和生物吸收的 3D 打印蛋白质
  • 批准号:
    2753054
  • 财政年份:
    2026
  • 资助金额:
    $ 1.75万
  • 项目类别:
    Studentship
RII Track-4: NSF: Developing 3D Models of Live-Endothelial Cell Dynamics with Application Appropriate Validation
RII Track-4:NSF:开发活内皮细胞动力学的 3D 模型并进行适当的应用验证
  • 批准号:
    2327466
  • 财政年份:
    2024
  • 资助金额:
    $ 1.75万
  • 项目类别:
    Standard Grant
I-Corps: Translation potential of 3D electronics manufacturing by integrated 3D printing and freeform laser induction
I-Corps:通过集成 3D 打印和自由形式激光感应实现 3D 电子制造的转化潜力
  • 批准号:
    2412186
  • 财政年份:
    2024
  • 资助金额:
    $ 1.75万
  • 项目类别:
    Standard Grant
I-Corps: Translation potential of stereolithography 3D printing to create soft elastomers
I-Corps:立体光刻 3D 打印制造软弹性体的转化潜力
  • 批准号:
    2414710
  • 财政年份:
    2024
  • 资助金额:
    $ 1.75万
  • 项目类别:
    Standard Grant
STTR Phase II: Fabrication and Structural Testing of a 3D Concrete Printed Anchor for Floating Offshore Wind
STTR 第二阶段:用于浮动海上风电的 3D 混凝土打印锚的制造和结构测试
  • 批准号:
    2333306
  • 财政年份:
    2024
  • 资助金额:
    $ 1.75万
  • 项目类别:
    Cooperative Agreement
CAREER: From Underground to Space: An AI Infrastructure for Multiscale 3D Crop Modeling and Assessment
职业:从地下到太空:用于多尺度 3D 作物建模和评估的 AI 基础设施
  • 批准号:
    2340882
  • 财政年份:
    2024
  • 资助金额:
    $ 1.75万
  • 项目类别:
    Continuing Grant
Collaborative Research: Research Infrastructure: MorphoCloud: A Cloud Powered, Open-Source Platform For Research, Teaching And Collaboration In 3d Digital Morphology And Beyond
协作研究:研究基础设施:MorphoCloud:云驱动的开源平台,用于 3D 数字形态学及其他领域的研究、教学和协作
  • 批准号:
    2301410
  • 财政年份:
    2024
  • 资助金额:
    $ 1.75万
  • 项目类别:
    Standard Grant
皮下膵島移植の成績を向上する3D膵島細胞シートの開発
开发3D胰岛细胞片以改善皮下胰岛移植的效果
  • 批准号:
    24K11807
  • 财政年份:
    2024
  • 资助金额:
    $ 1.75万
  • 项目类别:
    Grant-in-Aid for Scientific Research (C)
{{ showInfoDetail.title }}

作者:{{ showInfoDetail.author }}

知道了