prioritized experience replay 思路 优先经验回放出自ICLR 2016的论文《prioritized experience replay》。 prioritized experience replay的作者们认为，按照一定的优先级来对经验回放池中的样本采样，相比于随机均匀的从经验回放池中采样的效率更高，可以让模型更快的收敛。其基本思想是RL agent在一些转移样