全部
全部

选一篇,慢慢读

从左侧挑一篇,正文会在这里排成书页。

文章与公开阅读资产

DTCA:扩散语言模型强化学习中的去噪 Token 信用分配

Diffusion language models (DLMs) generate text through iterative denoising, enabling bidirectional context modeling and parallel token refinement. Recent studies have applied reinforcement learning (RL) to DLMs and improved their reasoning performance. However, the iterative denoising process makes credit assignment mo

阅读原文 · Hongze Chen, Miao Pan, Lizhou Liang, Qinfeng Li, Xinyin Ma, Yongliang Shen, Weishi Wang, Daniel Dahlmeier, Xuhong Zhang, Wenqi Zhang

乔木风格重写

向阳乔木 · opencode-go/deepseek-v4.1-flash

扩散语言模型做强化学习,卡点不在奖励设计,在信用分配。这篇论文就冲着这个来。 对 DLM 来说,一句话的生成是多次去噪迭代出来的。最后给一个对错奖励,模型很难知道是哪一步、哪个 token 的决策起了作用。这篇论文提出 DTCA,试图把奖励拆到 token 级别,再按词性分组,挑出有信息量的去噪时间步。 如果你在做 DLM 的后训练,尤其是想把 RL 用到推...

  • JK下一篇 / 上一篇
  • S收藏
  • A问 AI
  • I沉浸阅读
  • Esc退出