Efficient machine learning techniques for hydrological data assimilation and forecast post-processing

用于水文数据同化和预报后处理的高效机器学习技术

基本信息

  • 批准号:
    RGPIN-2019-06455
  • 负责人:
  • 金额:
    $ 2.62万
  • 依托单位:
  • 依托单位国家:
    加拿大
  • 项目类别:
    Discovery Grants Program - Individual
  • 财政年份:
    2021
  • 资助国家:
    加拿大
  • 起止时间:
    2021-01-01 至 2022-12-31
  • 项目状态:
    已结题

项目摘要

My research program aims at developing new data assimilation and post-processing techniques that exploit machine learning (ML) to improve hydrological ensemble forecasts. ML techniques have been applied by researchers to solve hydrology-related problems for more than 25 years; the most common application, by far, is streamflow forecasting, where ML techniques (often neural networks) replace process-based hydrological models. Still, as noted in Abrahart et al. (2012), with very few exceptions, operational forecasting agencies do not use ML-based models for streamflow forecasting. Operational forecasters and water resource managers are held accountable for their decisions, and they must be able to support these decisions on sound reasoning based on hydrological processes. The black box nature of ML techniques may be one of the reasons for their lack of popularity among practitioners. Nevertheless, operational hydrological forecasting could benefit from the computing capabilities of ML techniques if they were used to improve portions of the forecasting chain that are strictly mathematical, where relationships with physical processes are not involved. Specifically, ML could improve (1) data assimilation as well as (2) bias correction, post-processing of meteorological forecasts and post-processing of streamflow forecasts. Neural networks (NN, a family of machine-learning techniques) can learn almost any non-linear relationship between inputs and outputs. It is assumed that they could learn the relationship between the simulated streamflow (from any hydrological model) and the corresponding state variables. Once learned, this relationship could be transposed to observed rather than simulated streamflow to obtain corrected state variables. This idea is at the core of the methodology developed for data assimilation in this proposal. Based on a similar principle, NN could also be used to correct bias and dispersion (post-processing) in forecasted streamflows. When fed with meteorological observations, a hydrological model produces streamflow simulations as outputs. When fed with meteorological forecasts, the hydrological model produces streamflow forecasts as outputs. If neural networks could be trained to learn the relationships between simulated and observed streamflow, then this relationship could be applied to forecasted streamflow for correcting model bias (post-processing). The proposed research will allow for more efficient data assimilation and post-processing to advance streamflow ensemble forecasting. The latter is increasingly important for society, as climate change is expected to modify the frequency and magnitude of extreme events.
我的研究项目旨在开发新的数据同化和后处理技术,利用机器学习(ML)来改善水文集合预测。机器学习技术已经被研究人员应用于解决水文相关问题超过25年;到目前为止,最常见的应用是流量预测,其中ML技术(通常是神经网络)取代了基于过程的水文模型。尽管如此,正如Abrahart等人(2012)所指出的,除了极少数例外,业务预测机构不使用基于ml的模型进行流量预测。业务预报员和水资源管理者对他们的决定负责,他们必须能够基于水文过程的合理推理来支持这些决定。机器学习技术的黑箱特性可能是其在从业者中不受欢迎的原因之一。然而,如果机器学习技术用于改进预测链中严格的数学部分(不涉及与物理过程的关系),则可从机器学习技术的计算能力中受益。具体来说,机器学习可以改善(1)数据同化和(2)偏差校正、气象预报后处理和径流预报后处理。神经网络(NN,一系列机器学习技术)几乎可以学习输入和输出之间的任何非线性关系。假设他们可以学习模拟的水流(从任何水文模型)与相应的状态变量之间的关系。一旦学会了,这种关系就可以转换为观察到的而不是模拟的流量,以获得修正的状态变量。这个想法是本提案中为数据同化而开发的方法的核心。基于类似的原理,神经网络也可以用于纠正预测流中的偏差和分散(后处理)。当与气象观测相结合时,水文模型产生的输出是水流模拟。当输入气象预报时,水文模型产生流量预报作为输出。如果神经网络可以被训练来学习模拟和观测流量之间的关系,那么这种关系可以应用于预测流量,以纠正模型偏差(后处理)。提出的研究将允许更有效的数据同化和后处理,以推进水流集合预报。后者对社会越来越重要,因为预计气候变化将改变极端事件的频率和规模。

项目成果

期刊论文数量(0)
专著数量(0)
科研奖励数量(0)
会议论文数量(0)
专利数量(0)

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ monograph.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ sciAawards.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ conferencePapers.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ patent.updateTime }}

Boucher, MarieAmélie其他文献

Boucher, MarieAmélie的其他文献

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

{{ truncateString('Boucher, MarieAmélie', 18)}}的其他基金

Efficient machine learning techniques for hydrological data assimilation and forecast post-processing
用于水文数据同化和预报后处理的高效机器学习技术
  • 批准号:
    RGPIN-2019-06455
  • 财政年份:
    2022
  • 资助金额:
    $ 2.62万
  • 项目类别:
    Discovery Grants Program - Individual
Efficient machine learning techniques for hydrological data assimilation and forecast post-processing
用于水文数据同化和预报后处理的高效机器学习技术
  • 批准号:
    RGPIN-2019-06455
  • 财政年份:
    2020
  • 资助金额:
    $ 2.62万
  • 项目类别:
    Discovery Grants Program - Individual
Efficient machine learning techniques for hydrological data assimilation and forecast post-processing
用于水文数据同化和预报后处理的高效机器学习技术
  • 批准号:
    RGPIN-2019-06455
  • 财政年份:
    2019
  • 资助金额:
    $ 2.62万
  • 项目类别:
    Discovery Grants Program - Individual
Élaboration d'un système couplé pour la gestion des réservoirs hydroélectriques de la rivière Shipshaw
河滨 Shipshaw 水库水力发电管理系统耦合研究
  • 批准号:
    530981-2018
  • 财政年份:
    2018
  • 资助金额:
    $ 2.62万
  • 项目类别:
    Engage Plus Grants Program
Répartition de l'incertitude dans la prévision probabiliste de la crue printanière et implications pour la gestion de la ressource.
重新划分真实印刷品的不确定性及其对资源管理的影响。
  • 批准号:
    418474-2013
  • 财政年份:
    2018
  • 资助金额:
    $ 2.62万
  • 项目类别:
    Discovery Grants Program - Individual
Répartition de l'incertitude dans la prévision probabiliste de la crue printanière et implications pour la gestion de la ressource.
重新划分真实印刷品的不确定性和对资源管理的影响。
  • 批准号:
    418474-2013
  • 财政年份:
    2017
  • 资助金额:
    $ 2.62万
  • 项目类别:
    Discovery Grants Program - Individual
Évaluation d'un système de prévision hydrologique d'ensemble pour la rivière Shipshaw
河岸 Shipshaw 水文预报系统评估
  • 批准号:
    508701-2017
  • 财政年份:
    2017
  • 资助金额:
    $ 2.62万
  • 项目类别:
    Engage Grants Program
Évaluation d'un système de prévision hydrologique d'ensemble pour la rivière Shipshaw
河岸 Shipshaw 水文预报系统评估
  • 批准号:
    508701-2017
  • 财政年份:
    2017
  • 资助金额:
    $ 2.62万
  • 项目类别:
    Engage Grants Program
Répartition de l'incertitude dans la prévision probabiliste de la crue printanière et implications pour la gestion de la ressource.
重新划分真实印刷品的不确定性和对资源管理的影响。
  • 批准号:
    418474-2013
  • 财政年份:
    2015
  • 资助金额:
    $ 2.62万
  • 项目类别:
    Discovery Grants Program - Individual
Répartition de l'incertitude dans la prévision probabiliste de la crue printanière et implications pour la gestion de la ressource.
重新划分真实印刷品的不确定性和对资源管理的影响。
  • 批准号:
    418474-2013
  • 财政年份:
    2014
  • 资助金额:
    $ 2.62万
  • 项目类别:
    Discovery Grants Program - Individual

相似国自然基金

Understanding structural evolution of galaxies with machine learning
  • 批准号:
    n/a
  • 批准年份:
    2022
  • 资助金额:
    10.0 万元
  • 项目类别:
    省市级项目
非标准随机调度模型的最优动态策略
  • 批准号:
    71071056
  • 批准年份:
    2010
  • 资助金额:
    28.0 万元
  • 项目类别:
    面上项目
微生物发酵过程的自组织建模与优化控制
  • 批准号:
    60704036
  • 批准年份:
    2007
  • 资助金额:
    21.0 万元
  • 项目类别:
    青年科学基金项目

相似海外基金

CAREER: Blessing of Nonconvexity in Machine Learning - Landscape Analysis and Efficient Algorithms
职业:机器学习中非凸性的祝福 - 景观分析和高效算法
  • 批准号:
    2337776
  • 财政年份:
    2024
  • 资助金额:
    $ 2.62万
  • 项目类别:
    Continuing Grant
CAREER: Intelligent Battery Management with Safe, Efficient, Fast-Adaption Reinforcement Learning and Physics-Inspired Machine Learning: From Cells to Packs
职业:具有安全、高效、快速适应的强化学习和物理启发机器学习的智能电池管理:从电池到电池组
  • 批准号:
    2340194
  • 财政年份:
    2024
  • 资助金额:
    $ 2.62万
  • 项目类别:
    Continuing Grant
CAREER: Algorithm-Hardware Co-design of Efficient Large Graph Machine Learning for Electronic Design Automation
职业:用于电子设计自动化的高效大图机器学习的算法-硬件协同设计
  • 批准号:
    2340273
  • 财政年份:
    2024
  • 资助金额:
    $ 2.62万
  • 项目类别:
    Continuing Grant
PFI-RP: Resilient and Energy-Efficient Memory Chips for Enhanced Mobile AI and Personalized Machine Learning
PFI-RP:用于增强移动人工智能和个性化机器学习的弹性和节能内存芯片
  • 批准号:
    2345655
  • 财政年份:
    2024
  • 资助金额:
    $ 2.62万
  • 项目类别:
    Standard Grant
Collaborative Research: SHF: Small: Quasi Weightless Neural Networks for Energy-Efficient Machine Learning on the Edge
合作研究:SHF:小型:用于边缘节能机器学习的准失重神经网络
  • 批准号:
    2326895
  • 财政年份:
    2023
  • 资助金额:
    $ 2.62万
  • 项目类别:
    Standard Grant
SHF: Core: Small: Real-time and Energy-Efficient Machine Learning for Robotics Applications
SHF:核心:小型:用于机器人应用的实时且节能的机器学习
  • 批准号:
    2341183
  • 财政年份:
    2023
  • 资助金额:
    $ 2.62万
  • 项目类别:
    Standard Grant
Development of an efficient method combining quantum chemistry and machine learning to evolve PCR technology and gene mutation analysis
开发一种结合量子化学和机器学习的有效方法来发展 PCR 技术和基因突变分析
  • 批准号:
    22KJ2450
  • 财政年份:
    2023
  • 资助金额:
    $ 2.62万
  • 项目类别:
    Grant-in-Aid for JSPS Fellows
A next-generation extendable simulation environment for affordable, accurate, and efficient free energy simulations
下一代可扩展模拟环境,可实现经济、准确且高效的自由能源模拟
  • 批准号:
    10638121
  • 财政年份:
    2023
  • 资助金额:
    $ 2.62万
  • 项目类别:
Efficient tuning of quantum devices using machine learning
使用机器学习有效调整量子器件
  • 批准号:
    2886876
  • 财政年份:
    2023
  • 资助金额:
    $ 2.62万
  • 项目类别:
    Studentship
Efficient Secure Multi-Party Computation Framework for Privacy-Preserving Machine Learning
用于保护隐私的机器学习的高效安全多方计算框架
  • 批准号:
    22KF0098
  • 财政年份:
    2023
  • 资助金额:
    $ 2.62万
  • 项目类别:
    Grant-in-Aid for JSPS Fellows
{{ showInfoDetail.title }}

作者:{{ showInfoDetail.author }}

知道了