记录学习与思考，探索技术的边界
用 Next.js 自建的极简博客，展示 Markdown、公式与代码高亮。
GRPO 去掉 Critic，用组相对优势估计优势函数。
RLHF 场景下 PPO 的关键概念与 KL 约束。