easy-rl icon indicating copy to clipboard operation
easy-rl copied to clipboard

Published 20 hours ago • verified publisher icon datawhalechina

/chapter10/chapter10

Open qiwang067 opened this issue 4 years ago • 2 comments
trafficstars

https://datawhalechina.github.io/easy-rl/#/chapter10/chapter10

Description

qiwang067 avatar May 15 '21 05:05 qiwang067

我在实践HierarchicalDQN的过程中，发现了以下问题：

  • 在task0_train.py的train函数中，似乎agent.meta_memory.push(meta_state, goal, extrinsic_reward, state, done)代码缺一个缩进
  • 在task0_train.py的eval函数中，不应该出现agent.update()
  • 用原始代码会出现一个断崖式下跌的过程，很难达到示例的效果
  • 我修改缩进后，效果更差了。。

heiheiteng avatar Jul 15 '21 06:07 heiheiteng