インターネット上での分散データ解析システムに関する研究

互联网分布式数据分析系统研究

• 批准号: 11780165
• 负责人: 南 弘征
• 金额: $ 1.41万
• 依托单位: Hokkaido University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Encouragement of Young Scientists (A)
• 财政年份: 1999
• 资助国家: 日本
• 起止时间: 1999 至 2000
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-11780165/
• 关键词: データ解析; 並列計算; インターネット; GUI; Java言語; データ解析システム; 視覚的操作環境

交付申請書に記した通り、平成12年度は以下のような方針に則った形での、Java言語による既存システムの再構築を目標とした。1.解析作業の並列化を意図した複数プロセスの並行動作(スレッド)導入2.データ、解析手法、視覚的インタフェースのそれぞれに関する、オブジェクト指向に基づいたクラス構築3.解析部分のみ、あるいは視覚的環境のみを、流用可能な「部品」とするためのクラス構成、コーディングの調整うち、1および2,3の一部については成果を得、国際会議にて研究発表、意見交換を行なった。さらに、研究の進行過程において、主に項目1に関して子細に考察したところ、Java言語単独でのデータ解析システムの構築そのものは可能だが、Java仮想マシンの現状において実行速度の低下は不可避であり、例えば実習教材など、比較的軽微な解析を行なうには充分であるが、本格的な解析を行なうエンジンとしては適当ではない、との考察に至った。そこで、既存データ解析ソフトウェア以上のパフォーマンスを得るべく、また、Javaのスレッド機能を充分に活用することを視野に入れ、年度後半より、代表者所属先が有する1200台余のパーソナルコンピュータをTCP/IPネットワークにより仮想的に結合して並列計算機として動作させる、いわゆる「仮想並列計算機エンジン」を援用する形態のシステム開発にも取り組んだ。以上を要するに、(1)Javaによる比較的低負荷の「簡易」解析エンジンとGUI、(2)データ量や計算量の多い解析対象にも対応可能な「主」解析エンジンとしての仮想並列計算機、の2要素で構成される、柔軟なデータ解析システムの構築に関し、本研究によって一定の知見が得られた。

The application form was submitted for approval, and the following policies were implemented in 2012. The Java language was used to reconstruct the existing system. 1. Parallel operation of analysis operation 2. Data analysis, analysis method, visual field, visual field, 3. Research and exchange of views at international conferences In the process of research, the main project 1 is related to the detailed investigation, the Java language is independent of the structure of the data analysis system, the Java language is independent of the status quo, the speed of implementation is inevitable, the example is the study of teaching materials, the comparison of the micro-analysis, the implementation of this case is appropriate, The investigation was carried out to the end. For example, the existing data analysis software has more than 1200 data sets, and the Java server function has been fully utilized. For example, in the second half of the year, the representative has more than 1200 data sets, and the TCP/IP server has more than 1200 data sets."Want to Parallel Computer" is used in the development of the system. In this study, some knowledge was obtained from the above important aspects: (1)Java analysis system with low load and GUI;(2) multi-analysis system with high data volume and calculation volume;(3) parallel computer with high data volume;(4) soft analysis system with high data volume;(5)Java analysis system with low load and GUI;(6) Java analysis system with low load and GUI;

项目成果

Hiroyuki MINAMI & Masahiro MIZUTA: "Visual Statistical Software With Java"COMPSTAT 2000. (to appear). (2000)

南弘之

H.Minami, M.Mizuta: "Visual Statistical System with Java"Proceedings of COMPSTAT2000, Short Communications and Posters. 69-70 (2000)

H.Minami、M.Mizuta：“Java 可视化统计系统”COMPSTAT2000 会议记录、短通讯和海报。

南弘征,水田正弘: "仮想並列計算機によるデータ解析について"第68回日本統計学会講演報告集. 193-194 (2000)

Hiroyuki Minami、Masahiro Mizuta：“使用虚拟并行计算机进行数据分析”日本统计学会第 68 届年会记录 193-194 (2000)。

南弘征、水田正弘、垂水共之、馬場康雄、栗原考次、森裕一、山本義郎: "World Wide Webによる統計科学情報の活用"第67回日本統計学会講演報告集. 139-140 (1999)

Hiroyuki Minami、Masahiro Mizuta、Tomoyuki Tarumi、Yasuo Baba、Koji Kurihara、Yuichi Mori、Yoshiro Yamamoto：“通过万维网使用统计科学信息”第 67 届日本统计学会年会论文集（1999 年）。 ) )

H.Minami, M.Mizuta: "Empirical Study of Parallel Data Analysis"Proceedings of the 10th Japan and Korea Joint Conference of Statistics. 131-136 (2000)

H.Minami、M.Mizuta：《并行数据分析的实证研究》第十届日韩统计联合会议论文集。