【Bug已解决】Add Target Policy Optimization trainer 解决方案
【Bug已解决】Add Target Policy Optimization trainer 解决方案
一、现象长什么样
在 TRL 里做在线 RL(GRPO、PPO 等)时,我们想试一种叫 Target Policy Optimization(TPO) 的变体,但框架里没有现成的 TPOT…
2026/7/22 12:43:25