ベイズ最適な性能に迫る畳み込み近似的メッセージ伝播法の創出
ベイズ最適な性能に迫る畳み込み近似的メッセージ伝播法の創出
批准号:
21H01326
负责人:
竹内 啓悟
金额:
$10.82万
依托单位国家:
日本
项目类别:
Grant-in-Aid for Scientific Research (B)
财政年份:
2021
资助国家:
日本
项目状态:
未结题
起止时间:
2021-04-01 至 2026-03-31
中文摘要
メッセージ伝播法の収束性を証明するための一般的な方法論を提案した。具体的には、収束が立案時点で原理的に自明となる長期記憶メッセージ伝播法を構築することで、メッセージ伝播法の収束性を証明した。原理的に収束性を保証するための基本アイデアは、現在のメッセージを更新する際に、直前に計算したメッセージだけでなく、それまでに計算したメッセージをすべて利用することである。統計学の観点から、各メッセージは、観測信号が与えられたときに未知の信号を推定するための統計量とみなせる。それまでに得られたメッセージすべてを集めた統計量は、未知の信号を推定するための十分統計量となる。十分統計量をなすメッセージの集合は、反復に関する増大列であるため、各反復で適切な信号推定を行う限り、推定精度が劣化することはない。上記のアイデアを具現化するために、メッセージ伝播法を解析するための状態発展法の一般的枠組みを利用した。状態発展法とは、信号次元と観測次元とが同じ速度で無限大に発散する大システム極限において、メッセージ伝播法の動特性を厳密に解析するための方法である。この枠組みは、2021年度に樹立した理論で、現在のメッセージを更新する際に、それまでの全メッセージを利用する長期記憶メッセージ伝播法の漸近解析を可能にする。同枠組みに含まれるすべての長期記憶メッセージ伝播法において、信号の推定誤差が漸近的にガウス分布することが証明されている。この漸近ガウス性を利用することで、現在のメッセージをベイズ最適な方法で更新することができる。上記の枠組みを利用して従来の直交近似的メッセージ伝播法(OAMP)を拡張し、長期記憶OAMP(LM-OAMP)を提案した。各メッセージの更新にベイズ最適な方法を用いた場合に、LM-OAMPは、大システム極限で収束し、OAMPと等価であることを証明した。
英文摘要
メッセージ伝播法の収束性を証明するための一般的な方法論を提案した。具体的には、収束が立案時点で原理的に自明となる長期記憶メッセージ伝播法を構築することで、メッセージ伝播法の収束性を証明した。原理的に収束性を保証するための基本アイデアは、現在のメッセージを更新する際に、直前に計算したメッセージだけでなく、それまでに計算したメッセージをすべて利用することである。統計学の観点から、各メッセージは、観測信号が与えられたときに未知の信号を推定するための統計量とみなせる。それまでに得られたメッセージすべてを集めた統計量は、未知の信号を推定するための十分統計量となる。十分統計量をなすメッセージの集合は、反復に関する増大列であるため、各反復で適切な信号推定を行う限り、推定精度が劣化することはない。上記のアイデアを具現化するために、メッセージ伝播法を解析するための状態発展法の一般的枠組みを利用した。状態発展法とは、信号次元と観測次元とが同じ速度で無限大に発散する大システム極限において、メッセージ伝播法の動特性を厳密に解析するための方法である。この枠組みは、2021年度に樹立した理論で、現在のメッセージを更新する際に、それまでの全メッセージを利用する長期記憶メッセージ伝播法の漸近解析を可能にする。同枠組みに含まれるすべての長期記憶メッセージ伝播法において、信号の推定誤差が漸近的にガウス分布することが証明されている。この漸近ガウス性を利用することで、現在のメッセージをベイズ最適な方法で更新することができる。上記の枠組みを利用して従来の直交近似的メッセージ伝播法(OAMP)を拡張し、長期記憶OAMP(LM-OAMP)を提案した。各メッセージの更新にベイズ最適な方法を用いた場合に、LM-OAMPは、大システム極限で収束し、OAMPと等価であることを証明した。
期刊论文(14)
专著(0)
科研奖励(0)
会议论文
登录
查看更多内容
DOI:
10.1587/transfun.2020eap1073
发表时间:
2021-04-01
期刊:
IEICE TRANSACTIONS ON FUNDAMENTALS OF ELECTRONICS COMMUNICATIONS AND COMPUTER SCIENCES
影响因子:
0.5
作者:
[Tatsuno, Wataru, Takeuchi, Keigo]
通讯作者:
Takeuchi, Keigo
DOI:
10.1109/tit.2022.3194855
发表时间:
2022-12
期刊:
IEEE Transactions on Information Theory
影响因子:
2.5
作者:
[K. Takeuchi]
通讯作者:
K. Takeuchi
Bayes-Optimal Convolutional AMP
贝叶斯-最优卷积 AMP
DOI:
10.1109/tit.2021.3077471
发表时间:
2021
期刊:
IEEE Transactions on Information Theory
影响因子:
2.5
作者:
[Ken Tanizawa, and Fumio Futami, Takeuchi Keigo]
通讯作者:
Takeuchi Keigo
スパース重ね合わせ符号に対する深層AMP復号ネットのアニーリング学習
稀疏叠加码深度 AMP 解码网络的退火学习
DOI:
--
发表时间:
2021
期刊:
影响因子:
--
作者:
[T. Shimazaki, Y. Kawakubo, R. Iwai, M. Fukuhara, H. Ando,J. Mitsudo, Y. Hayashi, S. Ata, T. Yokoyama, D. Anzai, 広川二郎, 吉田俊宏,竹内啓悟]
通讯作者:
吉田俊宏,竹内啓悟
スパース重ね合わせ符号に対する近似的メッセージ伝播復号法の収束特性を改善するための初歩的深層学習
提高稀疏叠加码近似消息传播解码方法收敛性的基础深度学习
DOI:
--
发表时间:
2021
期刊:
影响因子:
--
作者:
[Yoshida Takumi, Shirase Daichi, Takahashi Takumi, Ibi Shinsuke, Sampei Seiichi, 吉田俊宏,竹内啓悟]
通讯作者:
吉田俊宏,竹内啓悟
共 10 条
ベイズ最適な性能に迫る畳み込み近似的メッセージ伝播法の創出
-
批准号:23K20932
-
项目类别:Grant-in-Aid for Scientific Research (B)
-
资助金额:$3.33万
-
财政年份:2024
-
负责人:竹内 啓悟
-
依托单位:
海外基金