強化学習で環境を別ソ​フトに置き換えた場合​にエピソード数がずれ​る問題

10 views (last 30 days)
Y. M
Y. M on 19 Nov 2020
Answered: Toshinobu Shintai on 19 Nov 2020
現在環境を別ソフトとしてMATLABと連成させて学習をさせようとしているのですが、
環境側が1エピソード進んだ後、MATLABのエージェント側を起動させようとすると、
MATLABが全エピソード分勧めようとしてしまい、エラーが発生してしまいます。
理想としては、環境側で1エピソード進んだ後、MATLAB側で1エピソード進む、そしてまた環境が...
という工程を繰り返し学習をしていってほしいのですが、
どのようにすればよろしいでしょうか。

Answers (1)

Toshinobu Shintai
Toshinobu Shintai on 19 Nov 2020
別ソフトとMATLABをどのように連携しているのか、分かりませんが、ROS Toolboxで通信し、同期を取る処理を構築してみてはいかがでしょうか。(別ソフトがROSに対応している必要がありますが)
学習の1エピソード内に1度、同期を取るためのメッセージを送り合うという方法が考えられます。

Products


Release

R2020b

Community Treasure Hunt

Find the treasures in MATLAB Central and discover how the community can help you!

Start Hunting!