On-policy / Off-policy

定义：On-policy 只能用当前策略采的数据（PPO）；off-policy 可复用旧数据或他人数据（DQN、SAC）。

出处：算法地图。