全球数值天气预报谱模式的高效可扩展并行计算技术研究
结题报告
批准号:
41875121
项目类别:
面上项目
资助金额:
62.0 万元
负责人:
吴建平
学科分类:
D0511.大气数值模式发展
结题年份:
2022
批准年份:
2018
项目状态:
已结题
项目参与者:
赵军、刘柏年、银福康、杨锦辉、彭军、任小丽、邢翔、郭沛明、张雪妍
国基评审专家1V1指导 中标率高出同行96.8%
结合最新热点,提供专业选题建议
深度指导申报书撰写,确保创新可行
指导项目中标800+,快速提高中标率
客服二维码
微信扫码咨询
中文摘要
全球数值天气预报谱模式随分辨率的提高,计算复杂性大幅增长,同时通信开销也大幅增长,特别是随处理器的不断增加,通信开销的影响越来越大,导致无法在大规模并行计算机上进行高效执行,对数值天气预报的实时性要求形成严峻挑战,从而成为当前国际上的研究热点之一。本项目从存储访问、通信隐藏、算法改进等三个层面,以现有全球数值天气预报谱模式为依托,在国际上全球谱模式已有高性能并行计算技术的基础上,重点研究谱变换的高效可扩展单边通信、计算与通信的高效重叠优化、半Lagrange方案并行计算的自适应通信、水平导数从谱空间到格点空间的迁移等技术,以最大程度减少通信开销的影响,提高全球谱模式的计算效率与可扩展性,为我国未来在E级计算机系统上采用超高分辨率谱模式进行数值天气预报,从而进一步提高预报准确性奠定并行计算技术基础。
英文摘要
With the improvement of the resolution, the computation complexity of the global spectral numerical weather prediction model increases rapidly. At the same time, the communication overhead increases rapidly too. Especially, with more and more processors used, the influence of the communication overhead is more and more serious, which prohibits the highly efficient execution on large-scale parallel computers and becomes a serious challenge to real-time requirement. Thus, it has become one of the hot researches in the world.. In this project, we will investigate from three levels, including memory access, communication hiding, and algorithm improvement, based on the available global spectral model and the known advanced high-performance computational techniques in this area over the world. Four topics will be focused on, that is, the highly scalable one-sided communication for spectral transforms, the highly efficient overlapping of computation and communication and its optimization, the self-adaptive communication in the parallel computation of semi-Lagrange scheme, and the migration of horizontal derivatives from spectral space to grid point space. The objective is to reduce the influence of the communication overhead as largely as possible and improve the computation efficiency and the scalability of the global spectral model, which is the basis to run spectral numerical weather prediction with very high resolution on future exascale computer systems, and to improve the accuracy of the global numerical weather prediction.
在超大规模高性能并行计算系统上进行数值天气预报时,影响数值预报计算效率与可扩展性的因素主要是通信开销的大幅增长。本项目针对全球谱模式,主要从高效可扩展单边通信、计算与通信的高效重叠优化、半Lagrange方案并行计算的自适应通信、水平导数从谱空间到格点空间的迁移等方面进行了研究。1)在高效可扩展单边通信方面,将单边通信技术引入到半拉格朗日插值阶段中并进行了高效实现。实验结果表明,该技术不仅有效减少了通信次数和通信量,也有效减少了全球谱模式的并行执行时间。2)在计算与通信的高效重叠优化技术方面,进行了多项研究。其一是对采用三维数据重分布的全球谱模式,从整体框架上进行了计算通信重叠优化方案的设计,在此基础上,针对结构网格下Fourier变换前后的计算通信重叠进行了具体设计实现,并通过数值实验进行了有效性验证。其二是针对半拉格朗日插值,进行了基于物理量分组的计算通信重叠方案设计与实现,实验结果表明,该技术有效隐藏了通信开销,进而提高了并行计算可扩展性。其三是针对按物理量分组时存在分组数受限的问题,设计实现了基于垂直层分组的计算通信重叠方案,通过寻求最优组数与计算通信重叠相结合的方式最大程度缩减并行执行时间,并通过数值实验进行了测试验证。3)在半Lagrange方案并行计算的自适应通信方面,利用再分析数据对逐月最大风进行了统计分析,之后以逐月最大风代替原全局最大风,设计实现了基于逐月自适应最大风的半拉格朗日并行计算方案。实验结果表明,其能在几乎不改动程序代码的情况下,有效减少YHGSM的并行执行时间。4)在水平导数从谱空间到格点空间的迁移方面,对全球静力谱模式进行了水平导数计算从谱空间转换到格点空间时的推导与重整,并基于有限体积法进行了高效实现,通过数值实验验证了该方法能显著减少执行时间。之后,将该方法推广应用到全球非静力谱模式,实验结果表明,其对执行时间的减少更为显著。
期刊论文列表
专著列表
科研奖励列表
会议论文列表
专利列表
DOI:10.1002/cpe.5586
发表时间:2020
期刊:Concurrency and Computation: Practice and Experience (CCPE)
影响因子:--
作者:Jiang Tao;Guo Peiming;Wu Jianping
通讯作者:Wu Jianping
DOI:--
发表时间:2021
期刊:计算力学学报
影响因子:--
作者:吴建平;蒋涛;彭军;银福康;杨锦辉
通讯作者:杨锦辉
DOI:10.1002/qj.4023
发表时间:2021
期刊:Quarterly Journal of the Royal Meteorological Society
影响因子:8.9
作者:Jiang Tao;Wu Jianping;Liu Zhaoyang;Zhao Wenpeng;Zhang Yongshun
通讯作者:Zhang Yongshun
DOI:--
发表时间:2019
期刊:气象水文装备
影响因子:--
作者:吴建平;银福康;杨锦辉;郭沛明;蒋涛
通讯作者:蒋涛
PAGCM: A scalable parallel spectral‐based atmospheric general circulation model
PAGCM:基于可扩展的并行光谱的大气环流模型
DOI:10.1002/cpe.5290
发表时间:2019
期刊:Concurrency and Computation: Practice and Experience
影响因子:--
作者:Ren Xiaoli;Juan Zhao;Xiaoyong Li;Kaijun Ren;Junqiang Song;Difu Sun
通讯作者:Difu Sun
全球数值天气预报谱模式中地形效应描述优化技术研究
混凝土细观力学模拟的代数多重网格预条件及其并行算法研究
混凝土细观数值模拟中的高效并行预条件技术研究
国内基金
海外基金