強化学習にもとづく有限時間整定とフォーメーション制御への応用

基于强化学习的有限时间稳定和编队控制应用

• 批准号: 22KF0201
• 负责人: 加嶋 健司
• 金额: $ 0.96万
• 依托单位: Kyoto University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for JSPS Fellows
• 财政年份: 2023
• 资助国家: 日本
• 起止时间: 2023-03-08 至 2025-03-31
• 项目状态: 未结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-22KF0201/
• 关键词: 強化学習; 最適化

研究員のこれまでの研究を拡張する方向性として、受入研究者が分布ロバスト最適化、深層学習、最適輸送の３つを提示し、それぞれの基礎理論を教示しつつ、最新の論文を調査するために４ヶ月を費やした。その結果、分布ロバスト制御を取り入れた強化学習に関する研究に焦点を定め、定式化とその可解性を検討してきた。分布ロバスト最適化（DRO）は、不確実性の下で意思決定を行うという課題に取り組む数理最適化の研究分野である。多くの実用的な場面で、意思決定者は、意思決定に影響を与える不確実性を支配する確率分布に関する不完全な情報や曖昧な情報に直面する。DROは、このような不確実性に強い意思決定を最適化するためのフレームワークを提供する。DROでは、可能性のあるすべての不確実性に対応する確率分布の集合に対して意思決定が頑健であることを保証する。この特徴により、DROはサプライチェーンマネジメント、金融、エネルギー、輸送など、幅広い応用先に適用されてきた。こうした活発な研究は、モーメントベースのアプローチ、曖昧性集合、Wassersteinベースのアプローチなど、いくつかの理論的および計算的アプローチの開発につながった。申請者はこうした研究背景を適切に理解しつつ、ネットワーク化制御、強化学習に関連する形でいくつかの定式化をおこなった。残念ながら、事情により滞在は今年度で終了となったが、共同研究を継続するための問題意識の共有はおこなうことができた。

Researcher の こ れ ま で を の research company, zhang す る directional と し て, incoming researchers が ロ バ ス ト optimization, the deep study, the optimal transportation の 3 つ を し, そ れ ぞ れ の を basic theory teaching し つ つ, latest の thesis を survey す る た め に ヶ four months を fee や し た. そ の results, distribution ロ バ ス ト suppression を take り れ た reinforcement learning に masato す に る research focus を め, demean と そ の solvability を beg し 検 て き た. Distribution ロ バ ス ト optimization (droz) は, uncertain be の で meaning decided to line を う と い に う subject group take り む mathematical optimization の research eset で あ る. More く の be は decides with な scenes で, meaning, mean に influence を and え る uncertain be sex を dominate す る probabilistic distribution に masato す る incomplete な や ambiguity な intelligence に face す る. DRO する, <s:1> ような, uncertainty に, strong <s:1> will determination を, optimization するため, フレ, ムワ, ムワ and を provide する. Droz で は, possibility の あ る す べ て の uncertain be sex に 応 seaborne す る collection of probabilistic distribution の に し seaborne て mean decision が robust で あ る こ と を guarantee す る. こ の, 徴 に よ り, droz は サ プ ラ イ チ ェ ー ン マ ネ ジ メ ン ト, finance, エ ネ ル ギ ー, conveying な ど, hiroo picture い 応 with に first apply さ れ て き た. Live こ う し た 発 な research は, モ ー メ ン ト ベ ー ス の ア プ ロ ー チ, vague set, out ベ ー ス の ア プ ロ ー チ な ど, い く つ か の theory お よ び computing ア プ ロ ー チ の open 発 に つ な が っ た. Applicants は こ う し た background を appropriate に understand し つ つ, ネ ッ ト ワ ー ク suppression and reinforcement learning に masato even す る form で い く つ か の demean を お こ な っ た. Remnants read aloud な が ら, things に よ り lag in は "at the end of this year で と な っ た が and common research を 継 続 す る た め の problem consciousness の mutual は お こ な う こ と が で き た.