複数のシステムの間における競合解消戦略の協調的獲得機能の研究

多系统间冲突解决策略协同获取函数研究

• 批准号: 11750351
• 负责人: 吉田 哲也
• 金额: $ 1.34万
• 依托单位: Osaka University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Encouragement of Young Scientists (A)
• 财政年份: 1999
• 资助国家: 日本
• 起止时间: 1999 至 2000
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-11750351/
• 关键词: 競合解消戦略; マルチエージェントシステム; 協調設計; 強化学習; 人工衛星

本年度は,昨年度に提案したマルチエージェントシステムにおける強化学習手法を人工衛星の自動設計に関する評価実験を通じて検証した.機械学習の分野で研究が進められてきた強化学習の手法において,本研究ではエージェントの自己主張が部分問題の最適化を達成するととらえ,個々の解の評価に応じた報酬(これを解報酬と呼ぶ)を与え,また,エージェント相互の意見のすりあわせが解における部分問題間での不都合を解消しその間での適切なバランスを達成するととらえ,エージェント相互の譲歩に対する報酬(これを調和報酬と呼ぶ)を個々の解の間の差異の程度に応じて与えることで,エージェントに報酬に基づく強化学習を行わている.小型人工衛星の自動設計を構造設計,熱設計,通信設計のサブシステムに分解し,それぞれの部分設計をエージェントに行わせることにより衛星全体の設計を進めていくマルチエージェントシステムをDOS/Vマシン上にSmalltalk言語を用いてインプリメントし,人工衛星のミッション,重量,軌道等を変更して様々な種類の実験を行った.実験から,本研究で提案した2種類の報酬の相対的な大きさの関係をマルチエージェントシステムにおける新たなコントロールパラメーターとして利用し,個々の部分問題を最適化した解の生成を重視する場合には解報酬を相対的に大きく設定し,逆に部分問題間でのバランスのとれた解の生成を重視する場合には調和報酬を相対的に大きく設定することで,システム全体としての目的に応じた適切な競合解消戦略を報酬に基づく強化学習により協調的に獲得させることが可能になることの示唆を得られた.

This year's proposal is based on the evaluation and verification of reinforcement learning techniques related to the automatic design of artificial satellites. The research on the division of machine learning has been advanced. The method of reinforcement learning has been proposed in this study. The optimization of some problems has been achieved. The solution has been evaluated.(This solution is based on compensation). The solution is based on compensation. The solution is based on compensation. The solution is based on compensation. The difference between the two solutions can be explained in terms of salary and basic reinforcement learning. Automatic design of small satellites: structural design, thermal design, communication design, decomposition, partial design, operation, design of satellites as a whole, DOS/V system, Smalltalk speech, structure, weight, orbit, etc. In fact, this study proposes that the relationship between two types of compensation and their corresponding factors should be set up in order to optimize the solution to some problems. In the case of a partial problem, the solution is generated, and the compensation is set accordingly.

项目成果

Tetsuya Yoshida,Teruyuki Kondo,Shogo Nishida: "Evolving Granules for Classification for Discovering Difference in the Usage of Words"Computational Intelligence. (accepted).

Tetsuya Yoshida、Teruyuki Kondo、Shogo Nishida：“进化颗粒用于发现单词使用差异的分类”计算智能。

Yoshida T.,Hori K.,Nakasuka S.: "Learning the Balance between Exploration and Exploitation via Reward"電子情報通信学会論文誌 EA. 82・11. 2538-2545 (1999)

Yoshida T.、Hori K.、Nakasuka S.：“通过奖励学习探索与利用之间的平衡”IEICE Transactions EA 82・11（1999）。