RL agentによる学習の高速化

Question

katosato 2020-2-18

回答： Toshinobu Shintai 2020-2-20

RL Agentを利用した深層強化学習を行っているのですが，学習時において各エピソードが実時間でシミュレートされているように感じます．

学習に非常に時間がかかってしまうため，高速化させたいと考えています．

ペーシングオプション等を確認したのですが，シミュレーション速度に変化はありませんでした．

RL Agentは実時間で動く仕様になっているのでしょうか．

使用ツールボックス

・Reinforcement Learning Toolbox

Answer 1

Toshinobu Shintai 2020-2-20

学習が遅いという点に関しては申し訳ありません。弊社の方でも計算速度の改善に努めておりますので、新しいバージョンでは速くなっている場合があります。

Simulinkモデルの実行の実行時間がほとんどかからないのに学習が非常に時間がかかる、ということであれば、サンプリング時間を長くする（1シミュレーションの総ステップ数を減らす）と学習時間を短くすることができます。もし可能であれば試していただけますでしょうか。