权益分类	功能权益	普通用户	{{item.name}}会员
{{category.name}}	{{benefitItem.name}}

非正則な確率推論モデルのための最適学習アルゴリズム

不规则概率推理模型的最优学习算法

基本信息

批准号：
04J04637
负责人：
渡辺一帆
金额：
$ 1.6万
依托单位：
Tokyo Institute of Technology
依托单位国家：
日本
项目类别：
Grant-in-Aid for JSPS Fellows
财政年份：
2004
资助国家：
日本
起止时间：
2004 至 2006
项目状态：
已结题

项目摘要

パラメータが識別不能であるような非正則な学習モデルにおいてはベイズ法による学習が有効であることが知られている。ベイズ法を実現するためにはパラメータの事後分布を生成する必要があるが、事後分布の計算には高次元積分が必要となるために、様々な近似法が提案されてきた。その一つの方法として、変分ベイズ法があるが、その有用性にもかかわらず、変分ベイズ法の理論的な性質は明らかにされてこなかった。また、実際の変分ベイズ法の学習アルゴリズムは繰り返し法を用いているために、局所解への収束といった問題があり、その性質はあまり明らかにされてこなかった。ベイズ法においては確率的複雑さが重要な量であり、近年いくつかの非正則な学習モデルについてもベイズ法における確率的複雑さが理論的に明らかにされてきた。その結果、確率的複雑さを比較することで、変分ベイズ法を始めとした種々の近似法の精度について議論できるようになった。これまでの研究により、混合分布モデルの変分ベイズ法における確率的複雑さの理論的振る舞いが明らかにされている。混合分布モデルは一つの隠れ変数を持つベイジアンネットワークで表すことができる。本年度はこれまでの結果を、複数の隠れ変数を持つ一般のベイジアンネットワークの場合に拡張することで、変分ベイズ法の近似法としての精度や、変分ベイズ法における事前分布の影響などの性質が明らかにされた。変分ベイズ学習では近似分布から事後分布までのカルバック情報量最小化が行なわれる。本研究ではさらに、事後分布からみた近似分布までのカルバック情報量を最小にする近似法について考察し、二つの近似法の比較を行なった。非正則モデルのベイズ学習について、近似事後分布の広がりの大きさや近似精度の評価を行ない、この両者の相違を示した。

It is important that you do not have any information about non-policy information. Do not know how to do this. In this way, we can see that the distribution after the event generates the necessary information, the calculation of the distribution after the event, the necessary information for the calculation of the higher dimension, and the proposal for the approximate method. There is a clear understanding of the nature of the theory of method, method, usefulness, and so on. In this paper, we use the following methods: in this way, we will use the following methods: please do so. In recent years, there has been a general understanding of the complexity of the theory of accuracy in recent years. The results of the results, the accuracy of the replication comparison of the results, the accuracy and the accuracy of the approximate methods were compared. In the course of research, the method of mixed distribution, the method of determining the accuracy rate, the theoretical theory of vibration dance, and the theory of vibration dance. The number of mixed distributions is similar to that of the other two. In the current year, the results and the number of complex data are consistent with the results of the general method, the approximate method, the accuracy, the distribution in advance, the accuracy of the method, the accuracy of the approximate method, the accuracy of the method, and the distribution of information in advance. In order to minimize the amount of information, the amount of information should be minimized in terms of approximate distribution. In this study, post-event distribution, post-event distribution and post-event distribution. Non-regular data acquisition, post-mortem distribution, post-distribution, accuracy, accuracy, performance, and performance.