强化学习(RLAI)读书笔记第九章On-policy Prediction with Approximation

这一章学习使用on-policy的数据对状态值函数进行逼近,也就是在策略下估计值函数。这一章的重点在于估计的值函数不是使用表格来表示而是使用参数w的函数形式。一般来说权重参数的数量是远远比状态的数量要小的,而且改变一个权重的大小会影响到很多个状态值的估计。于是一个值函数的更新会带来很多其它值函数的改变。这种泛化能力非常有用但更难操作和理解。 而且把强化学习延伸到函数逼近的形式也使得它能够应用于部分
相关文章
相关标签/搜索