Development of a network supercomputing environment with fine grain dynamic load distribution mechanism

具有细粒度动态负载分配机制的网络超级计算环境的开发

基本信息

  • 批准号:
    12558027
  • 负责人:
  • 金额:
    $ 8.06万
  • 依托单位:
  • 依托单位国家:
    日本
  • 项目类别:
    Grant-in-Aid for Scientific Research (B)
  • 财政年份:
    2000
  • 资助国家:
    日本
  • 起止时间:
    2000 至 2001
  • 项目状态:
    已结题

项目摘要

1. Load Balancing MechanismA fundamental protocol for work migration was developed. In this protocol, exactly the minimum amount of private information, like a stack, necessary to resume execution at the destination node is migrated, so that it could reduce the time until the work resumes execution. The rest of information is declared as temporary shared region between source and destination nodes of the migration and is kept not transferred until it is accessed. When it is accessed, a small amount of data close to the accessed address is transferred as a cached copy of shared data.Then, we proposed the implementation that the work migration mechanism maintains some amount of memory space for its own use and it immediately assigns only a constant amount of area out of this space to the immigrant without any negotiation with a memory management mechanism.In addition, we proposed the difference transportation method to reduce needless data transfer. When the work migration happens between two nodes in back and forth fashion, by using the past history, this method extracts the difference of the contexts between two nodes and applies a patch using the difference.2. Computer Colony Experimental EnvironmentAs a prototype environment, a simple shared memory environment where two workstations eauipped with SPARC version LINUX were connected by the originally developed network interface cards which efficiently support shared virtual memory. In order to realize user-level access to this card, we have modified the Linux kernel briefly.The result of the evaluation of the speed of a fine grain local shared memory access said that the user-level access is about eight times faster than the access through system call. It is also found that the average latency of remote memory access became 2.7 and 2.3 microseconds for Read and Write accesses respectively.
1.负载平衡机制是工作迁移的一个基本协议。在该协议中,迁移了在目的节点恢复执行所需的最小量的私有信息(如堆栈),以便减少工作恢复执行的时间。其余的信息被声明为迁移的源节点和目的节点之间的临时共享区域,并且保持不被传输,直到它被访问。当被访问时,靠近被访问地址的少量数据作为共享数据的缓存副本被传输。然后,我们提出了工作迁移机制的实现,即工作迁移机制维护一定量的内存空间供自己使用,它立即只将该空间中的恒定量的区域分配给移民,而不需要与内存管理机制进行任何协商。此外,提出了差分传输方法,减少了不必要的数据传输。当工作迁移在两个节点之间以来回的方式发生时,通过使用过去的历史,该方法提取两个节点之间的上下文差异,并使用差异应用补丁.计算机集群实验环境作为一个原型环境,一个简单的共享内存环境,其中两个工作站安装在Linux版本的Linux上,通过最初开发的网络接口卡连接,这些网络接口卡有效地支持共享虚拟内存。为了实现对该卡的用户级访问,我们对Linux内核进行了简单的修改,对细粒度本地共享内存访问的速度进行了评估,结果表明用户级访问比系统调用访问快8倍左右。它还发现,远程存储器访问的平均延迟成为2.7和2.3微秒的读和写访问分别。

项目成果

期刊论文数量(40)
专著数量(0)
科研奖励数量(0)
会议论文数量(0)
专利数量(0)
五島正裕: "超並列計算機JUMP-1の分散共有メモリ・システム"情報処理学会論文誌ハイパフォーマンスコンピューティングシステム. Vol.41・No.SIG8. 15-27 (2000)
Masahiro Goto:“大规模并行计算机JUMP-1的分布式共享内存系统”日本信息处理学会杂志高性能计算系统第41卷·No.SIG8(2000年)。
  • DOI:
  • 发表时间:
  • 期刊:
  • 影响因子:
    0
  • 作者:
  • 通讯作者:
小西将人: "超並列計算機JUMP-1における分散共有メモリ管理"情報処理学会論文誌. 42・4. 674-682 (2001)
Masato Konishi:“大规模并行计算机 JUMP-1 中的分布式共享内存管理”日本信息处理学会会刊 42・4(2001 年)。
  • DOI:
  • 发表时间:
  • 期刊:
  • 影响因子:
    0
  • 作者:
  • 通讯作者:
Masahi Hakariya, et al.: "Distributed Shared Memory System of the JUMP-1 Multiprocessor"Joint Symp. on Parallel Processing 2000. JSPP2000. 67-74 (2000)
Masahi Hakariya 等人:“JUMP-1 多处理器的分布式共享内存系统”联合症状。
  • DOI:
  • 发表时间:
  • 期刊:
  • 影响因子:
    0
  • 作者:
  • 通讯作者:
増田峰義: "Coloniaにおける並列アクティビティの高速移送"情報研報(2000-OS-85). 2000・75. 23-30 (2000)
增田峰吉:“科洛尼亚并行活动的高速运输”信息研究报告(2000-OS-85​​)23-30(2000)。
  • DOI:
  • 发表时间:
  • 期刊:
  • 影响因子:
    0
  • 作者:
  • 通讯作者:
小西将人: "超並列計算機JUMP-1の性能評価"情報処理学会研究報告. 01-ARC-144. 189-194 (2001)
Masato Konishi:“大规模并行计算机 JUMP-1 的性能评估”日本信息处理学会研究报告 01-ARC-144 (2001)。
  • DOI:
  • 发表时间:
  • 期刊:
  • 影响因子:
    0
  • 作者:
  • 通讯作者:
{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ monograph.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ sciAawards.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ conferencePapers.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ patent.updateTime }}

TOMITA Shinji其他文献

TOMITA Shinji的其他文献

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

{{ truncateString('TOMITA Shinji', 18)}}的其他基金

Real-Time Sensable Simulation Systems
实时传感仿真系统
  • 批准号:
    16100001
  • 财政年份:
    2004
  • 资助金额:
    $ 8.06万
  • 项目类别:
    Grant-in-Aid for Scientific Research (S)
A Research of Register-less Architecture for Next Generation High Performance Processors
下一代高性能处理器无寄存器体系结构的研究
  • 批准号:
    12480072
  • 财政年份:
    2000
  • 资助金额:
    $ 8.06万
  • 项目类别:
    Grant-in-Aid for Scientific Research (B)
The Architecture of a Next Gereration Hultimedia Server
下一代多媒体服务器的架构
  • 批准号:
    10558045
  • 财政年份:
    1998
  • 资助金额:
    $ 8.06万
  • 项目类别:
    Grant-in-Aid for Scientific Research (B)
The Architecture of A Flexible Supercomputer Integrating A Realtime Visualization Mechanism with 3-Dimensional Memories
集成实时可视化机制和 3 维存储器的灵活超级计算机的体系结构
  • 批准号:
    06402059
  • 财政年份:
    1994
  • 资助金额:
    $ 8.06万
  • 项目类别:
    Grant-in-Aid for General Scientific Research (A)
Prototype Development and Experimental Implementation of A Massively Parallel Computer
大规模并行计算机的原型开发和实验实现
  • 批准号:
    06508001
  • 财政年份:
    1994
  • 资助金额:
    $ 8.06万
  • 项目类别:
    Grant-in-Aid for Developmental Scientific Research (A)
Research on a Reconfigurable Parallel Computer
可重构并行计算机的研究
  • 批准号:
    02555071
  • 财政年份:
    1990
  • 资助金额:
    $ 8.06万
  • 项目类别:
    Grant-in-Aid for Developmental Scientific Research (B)
Performance Improvement by Exploiting Instruction-Level Parallelism
通过利用指令级并行性来提高性能
  • 批准号:
    02452166
  • 财政年份:
    1990
  • 资助金额:
    $ 8.06万
  • 项目类别:
    Grant-in-Aid for General Scientific Research (B)
Study of a Reconfigurable Parallel Processor
可重构并行处理器的研究
  • 批准号:
    62460129
  • 财政年份:
    1987
  • 资助金额:
    $ 8.06万
  • 项目类别:
    Grant-in-Aid for General Scientific Research (B)
Development of a High-Performance Workstation with a Very-Long-Instruction-Word (VLIW) Processor
开发具有超长指令字 (VLIW) 处理器的高性能工作站
  • 批准号:
    62850062
  • 财政年份:
    1987
  • 资助金额:
    $ 8.06万
  • 项目类别:
    Grant-in-Aid for Developmental Scientific Research

相似海外基金

Equipment: MRI: Track 1 Acquisition of a high-performance computer cluster for computational biology
设备: MRI:轨道 1 获取用于计算生物学的高性能计算机集群
  • 批准号:
    2320846
  • 财政年份:
    2023
  • 资助金额:
    $ 8.06万
  • 项目类别:
    Standard Grant
Acquisition of Unix Computer Cluster for Molecular Dynamics Simulation Calculations
购置 Unix 计算机集群用于分子动力学模拟计算
  • 批准号:
    10799081
  • 财政年份:
    2023
  • 资助金额:
    $ 8.06万
  • 项目类别:
High Memory High-Performance Computer Cluster for Biomedical Research
用于生物医学研究的高内存高性能计算机集群
  • 批准号:
    10414419
  • 财政年份:
    2022
  • 资助金额:
    $ 8.06万
  • 项目类别:
Computer cluster
计算机集群
  • 批准号:
    464531296
  • 财政年份:
    2021
  • 资助金额:
    $ 8.06万
  • 项目类别:
    Major Research Instrumentation
MRI: Acquisition of a High Performance Hybrid Computer Cluster for Computational Modeling
MRI:获取用于计算建模的高性能混合计算机集群
  • 批准号:
    2117247
  • 财政年份:
    2021
  • 资助金额:
    $ 8.06万
  • 项目类别:
    Standard Grant
Computer Cluster for Numerical Modelling and Simulation
用于数值建模和仿真的计算机集群
  • 批准号:
    431063325
  • 财政年份:
    2020
  • 资助金额:
    $ 8.06万
  • 项目类别:
    Major Research Instrumentation
Computer-Cluster
计算机集群
  • 批准号:
    415062803
  • 财政年份:
    2019
  • 资助金额:
    $ 8.06万
  • 项目类别:
    Major Research Instrumentation
MRI: Acquisition of a Computer Cluster for the Study of Fluids, Heliophysics, and Astrophysical Plasmas
MRI:购买用于研究流体、太阳物理学和天体物理等离子体的计算机集群
  • 批准号:
    1919310
  • 财政年份:
    2019
  • 资助金额:
    $ 8.06万
  • 项目类别:
    Standard Grant
MRI: Acquisition of a GPU-Enabled Computer Cluster for Molecular Modeling Applications
MRI:获取支持 GPU 的计算机集群用于分子建模应用
  • 批准号:
    1726332
  • 财政年份:
    2017
  • 资助金额:
    $ 8.06万
  • 项目类别:
    Standard Grant
Gridfähiges WLCG-Computer-Cluster
支持网格的 WLCG 计算机集群
  • 批准号:
    321073793
  • 财政年份:
    2016
  • 资助金额:
    $ 8.06万
  • 项目类别:
    Major Research Instrumentation
{{ showInfoDetail.title }}

作者:{{ showInfoDetail.author }}

知道了