マルコフ確率場にもとづくクラウドデータセンタの異常検知
基于马尔可夫随机场的云数据中心异常检测
基本信息
- 批准号:16K16047
- 负责人:
- 金额:$ 2.5万
- 依托单位:
- 依托单位国家:日本
- 项目类别:Grant-in-Aid for Young Scientists (B)
- 财政年份:2016
- 资助国家:日本
- 起止时间:2016-04-01 至 2018-03-31
- 项目状态:已结题
- 来源:
- 关键词:
项目摘要
本研究では,クラウドデータセンタにおいて観測可能なCPU使用率やメモリなどをマルコフ確率場としてモデル化し,異常を検知することを目的とした.初年度より,公開されているCPUのデータに対して,人工的な異常値を加えてデータセットを作成し,マルコフ性を仮定したモデル化を試みた.具体的には,時間の連続性やサーバ間の関係性を条件付き確率分布で表現し,観測済みのデータから確率分布のパラメータを推定した.確率分布の推定には確率的主成分分析を利用し,Graphical LASSOによって関係性を推定した.本手法は,単純な主成分分析による異常検知手法と比べて,良い性能を示していることを確認した.一方,確率分布の推定と関係性の推定が個別に行われていることから,これらを同時に行うことで性能を改善できる可能性がある.そこで近年活発に研究されているBayesian Graphical LASSOを用い,加えて,時系列データによくみられるトレンドや周期性を陽にモデルに組み込むことを検討した.しかし,多次元データにおいては,モデルのパラメータ推定が十分に収束しないことが確認され,大規模なデータセットにおいては十分な性能を確認できなかった.比較的小規模なデータセットに対しては有効性が確認できたことから,対象データを教師なし学習等によって複数のグループに分割して適用すれば良い結果を期待できる.今後は,パラメータ推定の収束性能の向上や,本手法の適用範囲に関する調査が課題として挙げられる.
This study aims at detecting possible CPU usage and identifying abnormal CPU usage. In the beginning of the year, the CPU's data was released. Specific to the time of continuity, the relationship between the conditions of the accuracy of the distribution of performance, the measurement of the accuracy of the distribution of the accuracy of the estimation. Principal component analysis of probability distribution and estimation of probability is used to estimate the relationship between probability distribution and probability. This method is based on pure principal component analysis (PCA) and anomaly detection. A party, the probability distribution of the estimation and the relationship between the estimation and individual line, the simultaneous line, the performance of the estimation and the possibility of improvement. In recent years, Bayesian Graphical LASSO has been developed and applied in the study of time series, time series and periodic time series. In addition, the multi-element data processing method is used to determine the performance of the multi-element data processing method. Compare small-scale data sets to confirm the effectiveness of data sets, to target data sets to teachers, to target data sets to learn, to target data sets to target data sets, to target data sets to target data sets, to target data sets, to target data sets In the future, the research on the application range of this method will focus on the improvement of the beam performance estimated by the method.
项目成果
期刊论文数量(2)
专著数量(0)
科研奖励数量(0)
会议论文数量(0)
专利数量(0)
マルコフ転換モデルによるクラウドサービスのリソース使用量分析
基于马尔可夫变换模型的云服务资源使用分析
- DOI:
- 发表时间:2016
- 期刊:
- 影响因子:0
- 作者:小泉成司;鮫島正樹;菅野裕介;松下康之;鮫島正樹
- 通讯作者:鮫島正樹
{{
item.title }}
{{ item.translation_title }}
- DOI:
{{ item.doi }} - 发表时间:
{{ item.publish_year }} - 期刊:
- 影响因子:{{ item.factor }}
- 作者:
{{ item.authors }} - 通讯作者:
{{ item.author }}
数据更新时间:{{ journalArticles.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ monograph.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ sciAawards.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ conferencePapers.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ patent.updateTime }}
鮫島 正樹其他文献
鮫島 正樹的其他文献
{{
item.title }}
{{ item.translation_title }}
- DOI:
{{ item.doi }} - 发表时间:
{{ item.publish_year }} - 期刊:
- 影响因子:{{ item.factor }}
- 作者:
{{ item.authors }} - 通讯作者:
{{ item.author }}
相似海外基金
Non-congestion datacenter networks based on the distributed rebalancing algorithm
基于分布式再平衡算法的无拥塞数据中心网络
- 批准号:
19K11928 - 财政年份:2019
- 资助金额:
$ 2.5万 - 项目类别:
Grant-in-Aid for Scientific Research (C)
Real-time video processing system based on edge and cloud computing
基于边缘计算和云计算的实时视频处理系统
- 批准号:
19H04102 - 财政年份:2019
- 资助金额:
$ 2.5万 - 项目类别:
Grant-in-Aid for Scientific Research (B)
A study on NFV Testbed for Wide-Area Virtual Computer Infrastructure
广域虚拟计算机基础设施NFV测试床研究
- 批准号:
18K11326 - 财政年份:2018
- 资助金额:
$ 2.5万 - 项目类别:
Grant-in-Aid for Scientific Research (C)
Research on Space Division Multiplexing Elastic Optical Network Control and Cooperative Application Infrastructure for Distributed Edge Nodes
分布式边缘节点空分复用弹性光网络控制与协同应用基础设施研究
- 批准号:
17H00734 - 财政年份:2017
- 资助金额:
$ 2.5万 - 项目类别:
Grant-in-Aid for Scientific Research (A)
A proposal of a method of securing cloud services based on secret sharing / secure computation and a proposal of safety performance evaluation method
基于秘密共享/安全计算的云服务安全方法的提出及安全性能评估方法的提出
- 批准号:
16H02813 - 财政年份:2016
- 资助金额:
$ 2.5万 - 项目类别:
Grant-in-Aid for Scientific Research (B)
A study on virtual network testbed for widely distributed computing environments
广泛分布计算环境下的虚拟网络测试平台研究
- 批准号:
15K00170 - 财政年份:2015
- 资助金额:
$ 2.5万 - 项目类别:
Grant-in-Aid for Scientific Research (C)
Network Control Infrastructure Technologies for Participating Fine-Grained and Distributed Cloud Computing
参与细粒度分布式云计算的网络控制基础设施技术
- 批准号:
26280033 - 财政年份:2014
- 资助金额:
$ 2.5万 - 项目类别:
Grant-in-Aid for Scientific Research (B)
A study on throughput-aware virtual network for widely distributed virtual clusters
分布式虚拟集群吞吐量感知虚拟网络研究
- 批准号:
25730075 - 财政年份:2013
- 资助金额:
$ 2.5万 - 项目类别:
Grant-in-Aid for Young Scientists (B)
Research on autonomous distributed contents delivery system extended contents delivery capacity
自主分布式内容交付系统扩展内容交付能力研究
- 批准号:
23800068 - 财政年份:2011
- 资助金额:
$ 2.5万 - 项目类别:
Grant-in-Aid for Research Activity Start-up
A Study of Ubiquitous Access with Confidentiality and Availability
具有保密性和可用性的普适接入研究
- 批准号:
23650031 - 财政年份:2011
- 资助金额:
$ 2.5万 - 项目类别:
Grant-in-Aid for Challenging Exploratory Research