正在加载陈远的个人网站

论文 · 精选

Goodfire 提出 mechanistic shaping 框架 用内部表征抑制模型走捷径

Goodfire Research(网页)

导读

Goodfire Research 发布论文提出 mechanistic shaping 框架,通过 reliance shaping 和 expression shaping 在训练中惩罚模型对特定内部概念的依赖或表达,使模型以正确方式解题而非仅答对。

推荐理由

论文提出用模型内部表征直接指定解题方式的训练框架,并系统评估了这么做之后监控探针如何退化与恢复。