/chapter4/chapter4_questions&keywords

[qiwang067]

https://datawhalechina.github.io/easy-rl/#/chapter4/chapter4_questions&keywords

Description

[Sunnyzhr]

$\text { 因此 } \nabla \mathrm{p}{\theta}(\tau)=\nabla \log \mathrm{p}{\theta}\left(\mathrm{a}{\mathrm{t}}^{\mathrm{n}} \mid \mathrm{s}{\mathrm{t}}^{\mathrm{n}}\right)$

是不是写错了？

[yyysjz1997]

谢谢你的留言，应该是没有写错的，具体的公式推导可见教程 “第四章 策略梯度”。

[Strawberry47]

谢谢博主 Thanks♪(･ω･)ﾉ

[SaleJuice]

keywords里的“Reinforce”是不是写成全大写的“REINFORCE”更好些。与之前的笔记更衔接些。

[yyysjz1997]

是的是的，这里的REINFORCE表示一种基于策略梯度并使用回合更新的强化学习的经典算法，应该区别于Reinforce，谢谢你的建议，已经改正～

[SCurry-30]

Policy Gradient

[chensisi0730]

就我觉得符号体系混乱吗？策略一会是p 一会是π,并且和前三章体系也不同，

[qiwang067]

就我觉得符号体系混乱吗？策略一会是p 一会是π,并且和前三章体系也不同，

用 p 来表示策略是为了方便读者理解，后续会考虑统一符号（加上对应注解）；
关于体系的问题，其实是从不同的角度来讲解知识，后面会考虑统一风格