全部
全部

选一篇,慢慢读

从左侧挑一篇,正文会在这里排成书页。

文章与公开阅读资产

可操控多目标组相对偏好优化与联合训练低秩适配器

Language model deployment often requires different trade-offs between competing objectives as user preferences change, yet standard post-training methods typically produce a single policy for a fixed objective weighting. We introduce LambdaMix, a new parameter efficient method for learning a preference conditioned fami

阅读原文 · Constantinos Karouzos, Nikolaos Aletras

乔木风格重写

向阳乔木 · opencode-go/deepseek-v4.1-flash

多目标对齐这件事,工程上一直有个尴尬:用户偏好会变,模型却往往只学会一套固定权重下的折中。 LambdaMix 想解决的就是这个。它让一次训练产出 一族可调的策略 ,推理时改一个偏好向量就能换权衡,不用重新优化。对做产品的人来说,这比再训一个模型现实得多。 论文涉及三个任务场景:有用性与无害性的权衡、解题同时遵循指令、改写评论时保留措辞但减少个人属性线索。实...

  • JK下一篇 / 上一篇
  • S收藏
  • A问 AI
  • I沉浸阅读
  • Esc退出