非線形振動子を用いた神経回路網における情報処理能力の定量的評価

使用非线性振荡器定量评估神经网络中的信息处理能力

• 批准号: 08740317
• 负责人: 青柳 富誌生
• 金额: $ 0.64万
• 依托单位: Kyoto University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Encouragement of Young Scientists (A)
• 财政年份: 1996
• 资助国家: 日本
• 起止时间: 1996 至 无数据
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-08740317/
• 关键词: Neural Network; Oscillator; Temporal Coding

近年の神経生理学の実験がきっかけとなって、ニューロンの発火の相関(同期・非同期)などに情報をコードすることが、ネットワークの情報処理の能力を質的に高めることが出来るのではないかと、関心を集めている。一方、周期的に発火しているニューロンが互いに弱く相互作用している場合、そのダイナミクスは位相という発火のタイミングを表現する変数により記述できることが知られている。この点を踏まえて、本研究では振動子ニューラルネットの諸性質を以下に述べる2つの点から理論的に研究した。1.振動子ニューラルネットの結合を破壊したときの耐性主としてシナプス結合を一定の割合でランダムに結合の対称性を保ったまま切ったとき、その記憶容量や想起したパターンの質にどのような影響があるか、理論的に調べた。結果として、70%程結合を切っても連想記憶の能力はそれ程劣化しない事がわかった。また、簡単な数値実験はこの解析的な結果を支持している。最後にHopfieldモデルの場合を述べると、想起したパターンの質の変化は大差ないが、臨界記憶容量はほぼ直線的に0へ減少する。意外な事に、振動子の場合の方が結合を切ったときの想起能力の低下は少ない。また、非対称性を多少入れても、結果はそう変化しないことを数値実験により確認した。2.振動子ニューラルネットの想起過程のダイナミクス初期状態からパターンを想起する過程を、ある小数のマクロな量を用いて記述した。例えば、第一近似ではパターンのオーバーラップと膜電位に加わるノイズの分散の2変数で近似的にダイナミクスを記述した。これにより、パターンを想起することが可能な臨界初期オーバーラップを理論的に求めることに成功した。自己想起型の連想記憶では、記憶容量はレプリカ法の結果とほぼ一致し、引き込み領域もかなり広いことが判明した。ただし、この場合はノイズの時間的な相関がかなり重要であり、より高次の近似(4次のオーダー)が必要であった。相互想起型の連想記憶においては、記憶容量が0.189であり、引き込み領域も非常に広いことがわかった。特に、相互想起の方が自己想起よりも記憶容量が5倍近くになっている点が興味深い。(従来モデルは2倍)

Recent の 経 physiology の god be 験 が き っ か け と な っ て, ニ ュ ー ロ ン の 発 fire の phase masato (in the same period, not in the same period) な ど に intelligence を コ ー ド す る こ と が, ネ ッ ト ワ ー ク の intelligence 処 competency の を qualitative に high め る こ と が out る の で は な い か と, masato を set め て い る. Side, the cycle of に 発 fire し て い る ニ ュ ー ロ ン が mutual い に weak く interaction し て い る occasions, そ の ダ イ ナ ミ ク ス は phase と い う 発 fire の タ イ ミ ン グ を performance す る - several に よ り account で き る こ と が know ら れ て い る. Tread こ の point を ま え て, this study で は vibrator ニ ュ ー ラ ル ネ ッ ト の under the nature を に above べ る 2 つ の point か ら に research of the theory of し た. 1. The vibrator ニ ュ ー ラ ル ネ ッ ト の combining を broken 壊 し た と き の patience main と し て シ ナ プ ス combining を の cut mixing で ラ ン ダ ム に combining の said sexual を bartender っ seaborne た ま ま cut っ た と き, そ の memory capacity や remember し た パ タ ー ン の qualitative に ど の よ う な influence が あ る か, theory of に べ た. The result shows that と て, 70% of the ability to combine を, って and <s:1>, それ, deteriorates the ability of <s:1>, な, and がわ, った, った, った, った, った, った, った, った, った, った, った, った, った, った. The な results of the また and the simple 単な number empirical analysis of the な を support <s:1> て る る る. Finally に Hopfield モ デ ル の occasions を above べ る と, remind of し た パ タ ー ン の qualitative の variations change は big difference な い が memory capacity, critical は ほ ぼ linear に 0 へ reduce す る. Unexpected な events に, the situation of the vibrator <s:1>, the <s:1> party が combined with the を cut ったと な <s:1>, the <s:1> memory ability <s:1> is low and <s:1> rarely な ったと. Youdaoplaceholder0, non-symmetric を, how much is added to れて れて, the result of the そう variation, <s:1> な とを とを とを とを, is verified by the actual によ and た. 2. The vibrator ニ ュ ー ラ ル ネ ッ ト の of の ダ イ ナ ミ ク ス initial state か ら パ タ ー ン を remember す を る process, あ る decimal の マ ク ロ な quantity を with い て account し た. Example え ば, the first approximation で は パ タ ー ン の オ ー バ ー ラ ッ プ と membrane potential に plus わ る ノ イ ズ の scattered の number 2 - で approximate に ダ イ ナ ミ ク ス を account し た. こ れ に よ り, パ タ ー ン を remember す る こ と が could な critical early オ ー バ ー ラ ッ プ に を theory o め る こ と に successful し た. Type of の even think their memories で は, memory capacity は レ プ リ カ method の results と ほ ぼ consistent し, lead き 込 み field も か な り hiroo い こ と が.at し た. た だ し, こ の occasions は ノ イ ズ の time な phase masato が か な り important で あ り, よ り higher の approximation (4 times の オ ー ダ ー) が necessary で あ っ た. Each type of link to memory に の お い て は, memory capacity が 0.189 で あ り and き 込 も み field very に hiroo い こ と が わ か っ た. Special に, mutual remembrance が, self-remembrance よ, <s:1> memory capacity が five times closer to くになって, る る points が, deep interest に. (従 to モデ モデ twice as much)

项目成果

Toshio Aoyagi: "Network of Neural Oscillators for Retrieving Phase Information" Physical Review Letter. 74. 4075-4078 (1995)

Toshio Aoyagi：“用于检索相位信息的神经振荡器网络”物理评论信。

Toshio Aoyagi: "Effect of Random Synoptic Dilation in Oscillator Neural Networks" Physical Review Letter. (発表予定).

Toshio Aoyagi：“振荡器神经网络中随机天气扩张的影响”物理评论信（即将出版）。