確率制御問題のアルゴリズムと計算量に関する研究

随机控制问题的算法和计算复杂度研究

• 批准号: 08740157
• 负责人: 田中 輝雄
• 金额: $ 0.64万
• 依托单位: Hiroshima City University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Encouragement of Young Scientists (A)
• 财政年份: 1996
• 资助国家: 日本
• 起止时间: 1996 至 无数据
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-08740157/
• 关键词: 確率制御問題; マルコフ決定過程; ベルマン方程式; 計算量

確率制御問題のうち、確率空間、状態空間等が複数個の確率空間、状態空間等の直積で定義される確率過程に対するマルコフ決定過程を取り上げた。定常、離散時間、割引型、無限期間、一般の状態空間、政策をマルコフ政策に制限した場合についての問題に対する最適値関数の計算量についての研究を行った。マルコフ決定過程の一般理論より、ある仮定の下では、最適値関数はベルマン方程式を満たし、又、逐次近似法により構成されることはよく知られたことである。本研究では、推移確率、利得関数、割引率、精度の4項目の組をインスタンス、インスタンスのクラスを問題、現時刻の確率過程の状態、次の時刻の確率過程の状態、アクションの3項目の組を質問とする計算モデルを設定した。そして、逐次近似法と関連させ、精度を決めたときsupノルムでの評価で最適値関数との誤差がその精度以下となる区分的に定数となる関数が存在するとき、そのアルゴリズムは正しいと定義し、オラクルとそのアルゴリズムによって実行される演算数の和でアルゴリズムの計算量を定義した。そこで、いくつかの数学的仮定の下で1 推移確率と利得関数がリプシッツ条件を満たし、消失状態を持たない場合2 1の条件の他に、マルコフ決定過程でよく知られているmixing条件を満たす場合3 推移確率と利得関数がリプシッツ条件を満たし、2でのmixing条件を満たし、消失状態をもつ場合の3通りの場合について考察した。評価の対象となるのは、それぞれ、各場合の条件を満たす設定の下で、その問題に対する正しいすべてのアルゴリズムに対して質問の最小値のオーダー評価(上界と下界)の考察を行った。

The accuracy control problem is defined as the direct product of a plurality of accuracy spaces, state spaces, etc., and the accuracy process is the decision process. Steady time, discrete time, cut-off type, infinite period, general state space, policy, policy, restriction, limit, occasion, problem, optimal value, calculation amount, research, and execution. The general theory of the malformation decision process, ある仮定の下では, and the optimum number of values ​​はベルマンsquare The program を満たし, and the successive approximation method により constitute the されることはよく知られたことである. In this study, the four items of this study are: transfer accuracy, profit margin, cutting rate, and accuracy. The status of the accuracy process at the time, the status of the accuracy process at the time, and the setting of the 3 project group question and calculation.そして、Successive approximation method and correlation させ、Precision をdetermination めたときsupノルムでのreview価でThe optimal value is the number of the error and the accuracy is less than the accuracy of the となるdifferentiation of the fixed number and the number of the となるkan number.するとき、そのアルゴリズムは正しいとDefinitionし、オラクルとそのアルゴリズムによって実行されるcalculus numberの和でアルゴリズムのcalculation quantityをDefinitionした.そこで、いくつかのMathematical 仮determinationの下で1 Transition accuracy and profit pass number がリプシッツ condition を満たし、Disappearing state をhold たない occasion 2 1のconditionsのに、マルコフdetermination processでよくknowられているmixingconditionsを満たす occasion 3 The moving accuracy rate and profit pass number are がリプシッツ condition を満たし, 2でのmixing conditions を満たし, disappearing state をもつ occasion の3 pass りの occasion について inspection した. Comments on the conditions of each occasion, such as the conditions for each occasion, and the problems of the problem.いすべてのアルゴリズムに対してquestionのMINIMUM値のオーダー Commentary価(上界と下界)のinvestigationを行った.

项目成果

Teruo Tanaka: "A matrix representation of fields and filtrations and its application to stochastic control problems" Journal of Information & Optimization Sciences. (1997)

Teruo Tanaka：“场和过滤的矩阵表示及其在随机控制问题中的应用”信息杂志