Monte Carlo Methods for Analysis of Large Spatial Data

用于分析大空间数据的蒙特卡罗方法

基本信息

  • 批准号:
    1106494
  • 负责人:
  • 金额:
    $ 19万
  • 依托单位:
  • 依托单位国家:
    美国
  • 项目类别:
    Standard Grant
  • 财政年份:
    2011
  • 资助国家:
    美国
  • 起止时间:
    2011-08-01 至 2015-06-30
  • 项目状态:
    已结题

项目摘要

Spatial data sets are analyzed in many scientific disciplines, such as ecology, geology, and environmental sciences. However, the classical approaches, such as Kriging and Bayesian hierarchical Gaussian modeling, often break down for large data sets due to expensive matrix inverse operations, whose computational complexity increases in cubic order with the number of spatial locations. To alleviate this difficulty, various approximation approaches, such as covariance tapering, lower-dimensional space spatial process approximation, likelihood approximation and Markov random field approximations, have been proposed under the general idea of approximating the original spatial model with a computationally convenient model. A general concern on these approaches is the adequacy of approximation. In this proposal, the investigators propose three new approaches, Bayesian auxiliary lattice approach, Bayesian site selection approach and marginal inference approach. The Bayesian auxiliary lattice approach introduces an auxiliary lattice to the space of observations and defines a hidden Gaussian Markov random field on the auxiliary lattice. By using some analytical results of Gaussian Markov random fields, the Bayesian auxiliary lattice approach completely avoids the problem of matrix inversion in likelihood evaluation. The Bayesian site selection approach reformulates the problem of spatial model estimation as a problem of Bayesian variable selection. It works with only a small proportion of the data at each iteration and thus significantly reduces the dimension of the data. The marginal inference approach is proposed based on the idea of bootstrap resampling. Like the Bayesian site selection approach, it works with only a small proportion of the data at each iteration and thus significantly reduces the dimension of the data. It is worth noting that the Bayesian site selection and marginal inference approaches are conceptually very different from the approximation approaches existing in the literature. The existing approximation approaches are to approximate the original model using a computationally convenient model. Instead, the Bayesian site selection and marginal inference approaches seek to reduce the dimension of the data, while not sacrificing the complexity of the original model. In this proposal, the investigators also extend the proposed approaches to spatio-temporal models with applications to satellite climate data. How to deal with missing data for spatio-temporal models are addressed.The intellectual merit of this project is to provide some computationally efficient or data dimension reduction approaches for statistical analysis of large spatial data. The new approaches address some core problems in spatial data analysis, such as large matrix inversion and missing data imputation. The new approaches are expected to play a major role in statistical analysis of geostatistical data, satellite climate data and other large spatial data. This project will have broader impacts in both communities of spatial statistics and computational atmospheric sciences. The research results will be disseminated to the communities via direct collaboration with researchers in other disciplines, conference presentations, books, and papers to be published in academic journals. The project will have also significant impacts on education through direct involvement of graduate students in the project and incorporation of results into undergraduate and graduate courses.
空间数据集在许多科学学科中进行分析,例如生态学,地质学和环境科学。 然而,经典的方法,如克里格和贝叶斯分层高斯建模,往往会因为昂贵的矩阵求逆运算而无法处理大数据集,其计算复杂度随着空间位置的数量呈立方级增加。为了缓解这一困难,各种近似方法,如协方差锥形,低维空间的空间过程近似,似然近似和马尔可夫随机场近似,已被提出的一般思想下,近似的原始空间模型与计算方便的模型。对这些方法的普遍关注是近似的充分性。在这个方案中,研究者提出了三种新的方法,贝叶斯辅助格方法,贝叶斯选址方法和边际推理方法。贝叶斯辅助格方法在观测空间中引入一个辅助格,并在辅助格上定义一个隐高斯马尔可夫随机场。 贝叶斯辅助格方法利用高斯马尔可夫随机场的一些分析结果,完全避免了似然估计中的矩阵求逆问题。贝叶斯选址方法将空间模型估计问题转化为贝叶斯变量选择问题。它在每次迭代中只处理一小部分数据,从而显著降低了数据的维度。基于Bootstrap响应的思想,提出了边缘推理方法。与贝叶斯站点选择方法一样,它在每次迭代中只处理一小部分数据,从而显著降低了数据的维度。值得注意的是,贝叶斯选址和边际推理方法在概念上与文献中存在的近似方法非常不同。现有的近似方法是使用计算方便的模型来近似原始模型。相反,贝叶斯选址和边际推理方法寻求减少数据的维度,同时不牺牲原始模型的复杂性。在这一建议中,研究人员还将所提出的方法扩展到时空模型,并将其应用于卫星气候数据。研究了时空模型中缺失数据的处理问题,为海量空间数据的统计分析提供了计算效率高或数据降维的方法。新方法解决了空间数据分析中的一些核心问题,如大矩阵求逆和缺失数据填补。预计新方法将在地质统计数据、卫星气候数据和其他大型空间数据的统计分析中发挥重要作用。该项目将在空间统计和计算大气科学领域产生更广泛的影响。研究成果将通过与其他学科研究人员的直接合作、会议报告、书籍和在学术期刊上发表的论文传播给社区。 该项目还将通过研究生直接参与项目并将成果纳入本科生和研究生课程,对教育产生重大影响。

项目成果

期刊论文数量(0)
专著数量(0)
科研奖励数量(0)
会议论文数量(0)
专利数量(0)

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ monograph.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ sciAawards.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ conferencePapers.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ patent.updateTime }}

Faming Liang其他文献

Bayesian phylogeny analysis via stochastic approximation Monte Carlo
  • DOI:
    10.1016/j.ympev.2009.06.019
  • 发表时间:
    2009-11-01
  • 期刊:
  • 影响因子:
  • 作者:
    Sooyoung Cheon;Faming Liang
  • 通讯作者:
    Faming Liang
Networks Involved in Coronary Collateral Formation
参与冠状动脉侧支形成的网络
  • DOI:
  • 发表时间:
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Jian Zhang;J. Regieli;M. Schipper;M. M. Entius;Faming Liang;J. Koerselman;H. J. Ruven;Yolanda van der Graaf;D. Grobbee;Pieter A. Doevendans;Pieter A. Doevendans
  • 通讯作者:
    Pieter A. Doevendans
A New Paradigm for Generative Adversarial Networks Based on Randomized Decision Rules
基于随机决策规则的生成对抗网络新范式
  • DOI:
  • 发表时间:
    2023
  • 期刊:
  • 影响因子:
    1.4
  • 作者:
    Sehwan Kim;Qifan Song;Faming Liang
  • 通讯作者:
    Faming Liang
An extended Langevinized ensemble Kalman filter for non-Gaussian dynamic systems
用于非高斯动态系统的扩展 Langevinized 系综卡尔曼滤波器
Fast Value Tracking for Deep Reinforcement Learning
深度强化学习的快速价值跟踪
  • DOI:
    10.48550/arxiv.2403.13178
  • 发表时间:
    2024
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Frank Shih;Faming Liang
  • 通讯作者:
    Faming Liang

Faming Liang的其他文献

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

{{ truncateString('Faming Liang', 18)}}的其他基金

A New Stochastic Neural Network: Statistical Perspectives and Applications
一种新的随机神经网络:统计视角和应用
  • 批准号:
    2210819
  • 财政年份:
    2022
  • 资助金额:
    $ 19万
  • 项目类别:
    Standard Grant
Scalable Algorithms for Bayesian On-Line Learning with Large-Scale Dynamic Data
用于大规模动态数据的贝叶斯在线学习的可扩展算法
  • 批准号:
    2015498
  • 财政年份:
    2020
  • 资助金额:
    $ 19万
  • 项目类别:
    Standard Grant
Statistical Inference for Biomedical Big Data: Theory, Methods, and Tools
生物医学大数据的统计推断:理论、方法和工具
  • 批准号:
    1703077
  • 财政年份:
    2017
  • 资助金额:
    $ 19万
  • 项目类别:
    Standard Grant
On Statistical Modeling and Parameter Estimation for High Dimensional Systems
高维系统的统计建模和参数估计
  • 批准号:
    1818674
  • 财政年份:
    2017
  • 资助金额:
    $ 19万
  • 项目类别:
    Standard Grant
On Statistical Modeling and Parameter Estimation for High Dimensional Systems
高维系统的统计建模和参数估计
  • 批准号:
    1612924
  • 财政年份:
    2016
  • 资助金额:
    $ 19万
  • 项目类别:
    Standard Grant
Monte Carlo Methods for Analysis of Large Spatial Data
用于分析大空间数据的蒙特卡罗方法
  • 批准号:
    1545738
  • 财政年份:
    2015
  • 资助金额:
    $ 19万
  • 项目类别:
    Standard Grant
Collaborative Research: Efficient Parallel Iterative Monte Carlo Methods for Statistical Analysis of Big Data
合作研究:用于大数据统计分析的高效并行迭代蒙特卡罗方法
  • 批准号:
    1545202
  • 财政年份:
    2015
  • 资助金额:
    $ 19万
  • 项目类别:
    Standard Grant
Collaborative Research: Efficient Parallel Iterative Monte Carlo Methods for Statistical Analysis of Big Data
合作研究:用于大数据统计分析的高效并行迭代蒙特卡罗方法
  • 批准号:
    1317131
  • 财政年份:
    2013
  • 资助金额:
    $ 19万
  • 项目类别:
    Standard Grant
Sampling from Distributions with Intractable Integrals
从具有棘手积分的分布中采样
  • 批准号:
    1007457
  • 财政年份:
    2010
  • 资助金额:
    $ 19万
  • 项目类别:
    Continuing Grant
Development of Stochastic Approximation Monte Carlo Methods
随机逼近蒙特卡罗方法的发展
  • 批准号:
    0706755
  • 财政年份:
    2007
  • 资助金额:
    $ 19万
  • 项目类别:
    Standard Grant

相似国自然基金

DDH头臼匹配性三维空间形态表征及PAO 手术髋臼重定向Monte Carlo随机最优控 制
  • 批准号:
  • 批准年份:
    2025
  • 资助金额:
    10.0 万元
  • 项目类别:
    省市级项目
基于鞘层Monte Carlo粒子仿真模型的非稳态真空弧等离子体羽流的内外流一体化数值模拟研究
  • 批准号:
    12372297
  • 批准年份:
    2023
  • 资助金额:
    53 万元
  • 项目类别:
    面上项目
复杂空间上具有特殊约束的Monte Carlo方法
  • 批准号:
    12371269
  • 批准年份:
    2023
  • 资助金额:
    43.5 万元
  • 项目类别:
    面上项目
基于格子Boltzmann和Monte Carlo方法的中子输运本构关系及低维控制方程研究
  • 批准号:
  • 批准年份:
    2022
  • 资助金额:
    30 万元
  • 项目类别:
    青年科学基金项目
在大数据和复杂模型背景下探究更有效的Markov chain Monte Carlo算法
  • 批准号:
    n/a
  • 批准年份:
    2022
  • 资助金额:
    10.0 万元
  • 项目类别:
    省市级项目
基于Monte Carlo模拟的铒基稀土高掺杂纳米材料上转换发光过程的机理研究
  • 批准号:
  • 批准年份:
    2021
  • 资助金额:
    30 万元
  • 项目类别:
    青年科学基金项目
嵌段共聚物在软硬壁组成的受限空间中的诱导自组装行为的Monte Carlo 研究
  • 批准号:
    21863010
  • 批准年份:
    2018
  • 资助金额:
    41.0 万元
  • 项目类别:
    地区科学基金项目
间接优化的高效Monte Carlo声传播研究
  • 批准号:
    61772458
  • 批准年份:
    2017
  • 资助金额:
    16.0 万元
  • 项目类别:
    面上项目
基于Monte Carlo法强化管表面颗粒-析晶垢形成机理及预测模型研究
  • 批准号:
    51606049
  • 批准年份:
    2016
  • 资助金额:
    21.0 万元
  • 项目类别:
    青年科学基金项目
任意各向异性三维直流电阻率巷道超前探测的并行Monte Carlo方法研究
  • 批准号:
    41674076
  • 批准年份:
    2016
  • 资助金额:
    70.0 万元
  • 项目类别:
    面上项目

相似海外基金

Transfer Learning for Monte Carlo Methods
蒙特卡罗方法的迁移学习
  • 批准号:
    EP/Y022300/1
  • 财政年份:
    2024
  • 资助金额:
    $ 19万
  • 项目类别:
    Research Grant
Innovating and Validating Scalable Monte Carlo Methods
创新和验证可扩展的蒙特卡罗方法
  • 批准号:
    DE240101190
  • 财政年份:
    2024
  • 资助金额:
    $ 19万
  • 项目类别:
    Discovery Early Career Researcher Award
New developments in quasi-Monte Carlo methods through applications of mathematical statistics
数理统计应用准蒙特卡罗方法的新发展
  • 批准号:
    23K03210
  • 财政年份:
    2023
  • 资助金额:
    $ 19万
  • 项目类别:
    Grant-in-Aid for Scientific Research (C)
Study of Surrogate model for improving efficiency of Monte Carlo methods
提高蒙特卡罗方法效率的代理模型研究
  • 批准号:
    23H01095
  • 财政年份:
    2023
  • 资助金额:
    $ 19万
  • 项目类别:
    Grant-in-Aid for Scientific Research (B)
Machine learning meets Monte Carlo methods
机器学习与蒙特卡罗方法的结合
  • 批准号:
    2872955
  • 财政年份:
    2023
  • 资助金额:
    $ 19万
  • 项目类别:
    Studentship
Quantum Monte Carlo methods beyond the fixed-node approximation: excitonic effects and hydrogen compounds
超越固定节点近似的量子蒙特卡罗方法:激子效应和氢化合物
  • 批准号:
    2316007
  • 财政年份:
    2023
  • 资助金额:
    $ 19万
  • 项目类别:
    Standard Grant
Advanced Monte Carlo methods for inference and model selection of dynamic systems
用于动态系统推理和模型选择的高级蒙特卡罗方法
  • 批准号:
    559741-2021
  • 财政年份:
    2022
  • 资助金额:
    $ 19万
  • 项目类别:
    Alexander Graham Bell Canada Graduate Scholarships - Doctoral
Using Monte Carlo Methods to Examine Solutions to Water Wave Problems
使用蒙特卡罗方法检查水波问题的解决方案
  • 批准号:
    574653-2022
  • 财政年份:
    2022
  • 资助金额:
    $ 19万
  • 项目类别:
    University Undergraduate Student Research Awards
Scalable Algorithm Design for Unbiased Estimation via Couplings of Markov Chain Monte Carlo Methods
通过马尔可夫链蒙特卡罗方法耦合进行无偏估计的可扩展算法设计
  • 批准号:
    2210849
  • 财政年份:
    2022
  • 资助金额:
    $ 19万
  • 项目类别:
    Continuing Grant
HCC: Medium: Grid-Free Monte Carlo Methods for Digital Geometry Processing
HCC:中:用于数字几何处理的无网格蒙特卡罗方法
  • 批准号:
    2212290
  • 财政年份:
    2022
  • 资助金额:
    $ 19万
  • 项目类别:
    Standard Grant
{{ showInfoDetail.title }}

作者:{{ showInfoDetail.author }}

知道了