Tag Archive
标签:OPSD
这里整理所有带有「OPSD」标签的文章,方便按主题快速回看。
首页
每日调研
论文精读
主题归档
实验分析
复现指南
OPSD
共 2 篇
论文精读 · 2026-10-10
OPSD 体检报告:给自己当老师的蒸馏,什么时候灵、什么时候崩
北大团队对 On-Policy Self-Distillation 做了一次系统性"体检":所谓特权信息带来的收益,主要来自前缀分布匹配而非语义;OPSD 是一个敏感算法,不是可靠的通用后训练方法。
OPSD
蒸馏
RLVR
后训练
推理模型
可验证奖励
主题归档 · 2026-05-04
从 OPD 到 OPSD / ExOPD:解读群聊里关于 On-Policy Distillation 的几篇论文
解读 Thinking Machines 的 On-Policy Distillation 博客,以及 arXiv:2604.13016、2603.25562、2601.18734、2602.12125 四篇工作,讲清 OPD、SFT 冷启动、teacher-supported region、OPSD、自蒸馏、多专家蒸馏和 log-prob shift 背后的技术逻辑。
OPD
distillation
reinforcement-learning
LLM-post-training
OPSD
ExOPD