Med bara några rader kod löste Fengs (@fengyao1909) föreslagna lösning – att tillämpa prioritetssampling på beteendepolicyn – träningsinstabiliteten i mitt fall (oat). Jag tror att resultatet kan generaliseras till andra RL-ramverk också. Bra jobbat, Feng!
43K