S3A: Future Spatial Audio for an Immersive Listener Experience at Home

S3A:未来的空间音频,为听众带来身临其境的家庭体验

基本信息

  • 批准号:
    EP/L000539/1
  • 负责人:
  • 金额:
    $ 690.01万
  • 依托单位:
  • 依托单位国家:
    英国
  • 项目类别:
    Research Grant
  • 财政年份:
    2013
  • 资助国家:
    英国
  • 起止时间:
    2013 至 无数据
  • 项目状态:
    已结题

项目摘要

3D sound can offer listeners the experience of "being there" at a live event, such as the Proms or Olympic 100m, butcurrently requires highly controlled listening spaces and loudspeaker setups. The goal of S3A is to realise practical 3D audio for the general public to enable immersive experiences at home or on the move.Virtually the whole of the UK population consume audio. S3A aims to unlock the creative potential of 3D sound and deliver to listeners a step change in immersive experiences. This requires a radical new listener centred approach to audio enabling 3D sound production to dynamically adapt to the listeners' environment. Achieving immersive audio experiences in uncontrolled living spaces presents a significant research challenge. This requires major advances in our understanding of the perception of spatial audio together with new representations of audio and the signal processing that allows content creation and perceptually accurate reproduction. Existing audio production formats (stereo, 5.1) and those proposed for future cinema spatial audio (24,128) are channel-based requiring specific controlled loudspeaker arrangements that are simply not practical for the majority of home listeners. S3A will pioneer a novel object-based methodology for audio signal processing that allows flexible production and reproduction in real spaces. The reproduction will be adaptive to loudspeaker configuration, room acoustics and listener locations. The fields of audio and visual 3D scene understanding will be brought together to identify and model audio-visual objects in complex real scenes. Audio-visual objects are sound sources or events with known spatial properties of shape and location over time, e.g. a football being kicked, a musical instrument being played or the crowd chanting at a football match. Object based representation will transform audio production from existing channel based signal mixing (stereo, 5.1, 22.2) to spatial control of isolated sound sources and events. This will realise the creative potential of 3D sound enabling intelligent user-centred content production, transmission and reproduction of 3D audio content in platform independent formats. Object-based audio will allow flexible delivery (broadcast, IP and mobile) and adaptive reproduction of 3D sound to existing and new digital devices.
3D声音可以给听众提供“身临其境”的现场活动体验,比如逍遥音乐会(Proms)或奥林匹克100米运动会(Olympic 100m),但目前需要高度控制的收听空间和扬声器设置。S3A的目标是为普通大众实现实用的3D音频,以便在家中或移动中实现身临其境的体验。几乎所有的英国人都在消费音频。S3A旨在释放3D声音的创造潜力,并为听众提供身临其境的体验。这需要一种全新的以听众为中心的音频方法,使3D声音制作能够动态地适应听众的环境。在不受控制的生活空间中实现沉浸式音频体验是一个重大的研究挑战。这需要我们对空间音频感知的理解取得重大进展,以及音频的新表示和信号处理,以允许内容创作和感知上准确的再现。现有的音频制作格式(立体声,5.1)和未来的电影空间音频(24,128)都是基于声道的,需要特定的控制扬声器安排,这对于大多数家庭听众来说根本不实用。S3A将开创一种新的基于对象的音频信号处理方法,允许在真实空间中灵活地生产和再现。复制将适应扬声器配置,房间声学和听众的位置。音频和视觉3D场景理解领域将汇集在一起,以识别和建模复杂真实场景中的视听对象。视听对象是具有已知形状和位置随时间变化的空间属性的声源或事件,例如正在踢的足球,正在演奏的乐器或足球比赛中的人群。基于对象的表示将把音频制作从现有的基于通道的信号混合(立体声,5.1,22.2)转变为对孤立声源和事件的空间控制。这将实现3D声音的创造潜力,实现以用户为中心的智能内容生产,以独立于平台的格式传输和复制3D音频内容。基于对象的音频将允许灵活的传输(广播、IP和移动),并将3D声音自适应地复制到现有和新的数字设备上。

项目成果

期刊论文数量(9)
专著数量(0)
科研奖励数量(0)
会议论文数量(0)
专利数量(0)
Leveraging Visual Supervision for Array-Based Active Speaker Detection and Localization
MODELLING EXPERTS' DECISIONS ON ASSIGNING NARRATIVE IMPORTANCES OF OBJECTS IN A RADIO DRAMA MIX
模拟专家关于分配广播剧组合中对象的叙事重要性的决策
  • DOI:
  • 发表时间:
    2019
  • 期刊:
  • 影响因子:
    0
  • 作者:
    CHOURDAKIS E
  • 通讯作者:
    CHOURDAKIS E
Joint Mixing Vector and Binaural Model Based Stereo Source Separation
The Relationship Between Target Quality and Interference in Sound Zone
目标质量与声区干扰之间的关系
Stereophonic personal audio reproduction using planarity control optimization
使用平面控制优化的立体声个人音频再现
  • DOI:
  • 发表时间:
    2014
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Coleman P
  • 通讯作者:
    Coleman P
{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ monograph.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ sciAawards.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ conferencePapers.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ patent.updateTime }}

Adrian Hilton其他文献

Localized Gaussian Point Management
局部高斯点管理
  • DOI:
  • 发表时间:
    2024
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Haosen Yang;Chenhao Zhang;Wenqing Wang;M. Volino;Adrian Hilton;Li Zhang;Xiatian Zhu
  • 通讯作者:
    Xiatian Zhu
Research & Development White Paper WHP 347
研究
  • DOI:
  • 发表时间:
    2019
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Graham Thomas Bbc;Rikke Gade;T. Moeslund;Adrian Hilton
  • 通讯作者:
    Adrian Hilton
Benchmarking Monocular 3D Dog Pose Estimation Using In-The-Wild Motion Capture Data
使用野外运动捕捉数据对单目 3D 狗姿势估计进行基准测试
  • DOI:
  • 发表时间:
    2024
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Moira Shooter;Charles Malleson;Adrian Hilton
  • 通讯作者:
    Adrian Hilton
Comparison of Skeleton and Non-Skeleton Shape Descriptors for 3D Video
3D 视频的骨架和非骨架形状描述符的比较
  • DOI:
  • 发表时间:
    2010
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Peng Huang;Tony Tung;S. Nobuhara;Adrian Hilton;T. Matsuyama
  • 通讯作者:
    T. Matsuyama
SyDog-Video: A Synthetic Dog Video Dataset for Temporal Pose Estimation
SyDog-Video:用于时间姿势估计的合成狗视频数据集

Adrian Hilton的其他文献

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

{{ truncateString('Adrian Hilton', 18)}}的其他基金

BBC Prosperity Partnership: Future Personalised Object-Based Media Experiences Delivered at Scale Anywhere
BBC Prosperity 合作伙伴关系:未来随处大规模提供基于对象的个性化媒体体验
  • 批准号:
    EP/V038087/1
  • 财政年份:
    2021
  • 资助金额:
    $ 690.01万
  • 项目类别:
    Research Grant
Audio-Visual Media Research Platform
视听媒体研究平台
  • 批准号:
    EP/P022529/1
  • 财政年份:
    2017
  • 资助金额:
    $ 690.01万
  • 项目类别:
    Research Grant
Fashion garment design, e-tailing and manufacturing with zero prototyping.
时尚服装设计、电子零售和零原型制造。
  • 批准号:
    EP/M506801/1
  • 财政年份:
    2014
  • 资助金额:
    $ 690.01万
  • 项目类别:
    Research Grant
Body Shape Recognition for Online Fashion
在线时尚体型识别
  • 批准号:
    EP/I031936/1
  • 财政年份:
    2011
  • 资助金额:
    $ 690.01万
  • 项目类别:
    Research Grant
i3Dlive: interactive 3D methods for live-action media
i3Dlive:实景媒体的交互式 3D 方法
  • 批准号:
    TS/G002800/1
  • 财政年份:
    2009
  • 资助金额:
    $ 690.01万
  • 项目类别:
    Research Grant
Visual Media Research Platform Grant
视觉媒体研究平台资助
  • 批准号:
    EP/F02827X/1
  • 财政年份:
    2009
  • 资助金额:
    $ 690.01万
  • 项目类别:
    Research Grant
Video-based animation of people
基于视频的人物动画
  • 批准号:
    EP/E001351/1
  • 财政年份:
    2007
  • 资助金额:
    $ 690.01万
  • 项目类别:
    Research Grant
Free-viewpoint Video for Interactive Entertainment Production
用于互动娱乐制作的自由视点视频
  • 批准号:
    EP/D033926/1
  • 财政年份:
    2006
  • 资助金额:
    $ 690.01万
  • 项目类别:
    Research Grant

相似海外基金

Interspecies cities: spatial governance practices, dilemmas and future
跨物种城市:空间治理实践、困境与未来
  • 批准号:
    2879910
  • 财政年份:
    2023
  • 资助金额:
    $ 690.01万
  • 项目类别:
    Studentship
Neuronal mechanisms of predicting future pathways in spatial navigation
预测空间导航未来路径的神经机制
  • 批准号:
    23K14231
  • 财政年份:
    2023
  • 资助金额:
    $ 690.01万
  • 项目类别:
    Grant-in-Aid for Early-Career Scientists
Assessing future climate risks for 11 major tree species using spatial modeling of adaptive genetic variations
使用适应性遗传变异的空间模型评估 11 种主要树种的未来气候风险
  • 批准号:
    21H02240
  • 财政年份:
    2021
  • 资助金额:
    $ 690.01万
  • 项目类别:
    Grant-in-Aid for Scientific Research (B)
FW-HTF-RM: Augmenting Spatial Cognition Capabilities of Future Workforce to Enhance Work Performance in Altered Environments Using Virtual Reality
FW-HTF-RM:利用虚拟现实增强未来劳动力的空间认知能力,以提高改变环境中的工作绩效
  • 批准号:
    1928695
  • 财政年份:
    2019
  • 资助金额:
    $ 690.01万
  • 项目类别:
    Standard Grant
Creatively Co-designing future spaces: An investigation to develop a new methodology in user engagement and spatial co-design with young people ages 8
创造性地共同设计未来空间:一项旨在开发用户参与和与 8 岁年轻人共同设计空间的新方法的调查
  • 批准号:
    2138032
  • 财政年份:
    2018
  • 资助金额:
    $ 690.01万
  • 项目类别:
    Studentship
Working in the public interest? Spatial planning and the future of public service professional labour
为公共利益而工作?
  • 批准号:
    ES/P011713/1
  • 财政年份:
    2017
  • 资助金额:
    $ 690.01万
  • 项目类别:
    Research Grant
Temporal and spatial patterns of shoreline change and exposure of coastal communities and ecosystems to future flood systems
海岸线变化的时空模式以及沿海社区和生态系统对未来洪水系统的暴露程度
  • 批准号:
    2073548
  • 财政年份:
    2016
  • 资助金额:
    $ 690.01万
  • 项目类别:
    Studentship
NESP MB Project D4 - Expanding our spatial knowledge of marine biodiversity to support future best-practice reviews
NESP MB 项目 D4 - 扩展我们对海洋生物多样性的空间知识,以支持未来的最佳实践审查
  • 批准号:
    global : 27a2ecfb-0d7d-4333-af4a-4fb0049be6b6
  • 财政年份:
    2015
  • 资助金额:
    $ 690.01万
  • 项目类别:
NESP MB Project D4 - Expanding our spatial knowledge of marine biodiversity to support future best-practice reviews
NESP MB 项目 D4 - 扩展我们对海洋生物多样性的空间知识,以支持未来的最佳实践审查
  • 批准号:
    global : 27a2ecfb-0d7d-4333-af4a-4fb0049be6b6
  • 财政年份:
    2015
  • 资助金额:
    $ 690.01万
  • 项目类别:
Spatial visualization and future prediction of land use changes in capital regions in Asia and Africa
亚洲和非洲首都地区土地利用变化的空间可视化和未来预测
  • 批准号:
    26284129
  • 财政年份:
    2014
  • 资助金额:
    $ 690.01万
  • 项目类别:
    Grant-in-Aid for Scientific Research (B)
{{ showInfoDetail.title }}

作者:{{ showInfoDetail.author }}

知道了