可解释性研究进展:从特征可视化到回路分析
机械可解释性迎来分水岭之年,安全评估的新基础设施
作者 林晓彤 · 发布于 2026-09-12 · 标签:AI 安全
稀疏自编码器的规模化让机械可解释性迎来分水岭:十亿参数级模型上首次提取出数千万单义特征。可解释性五年来首次有望与能力进展赛跑。
可解释性曾被认为是大模型时代最「不工程」的研究方向,但过去一年机械可解释性(Mechanistic Interpretability)的进展正在改变这一定价。
从特征到回路:技术路线图
| 阶段 | 代表性方法 | 可解释粒度 | 工程化程度 |
|---|---|---|---|
| 特征可视化 | 激活最大化 | 神经元级 | 低 |
| 字典学习 | Sparse Autoencoder | 单义特征级 | 中 |
| 回路分析 | Attribution Patching | 注意力头/MLP 级 | 早期 |
| 行为干预 | Steering Vectors | 表征级 | 中 |
稀疏自编码器(SAE)的规模化是今年的分水岭:研究者首次在十亿参数级模型上提取出数千万个「单义特征」,其中相当比例具有清晰的人类可解读语义。
这对安全意味着什么
如果我们能在模型「想说谎」之前看到负责说谎的回路被激活,对齐就从哲学问题变成了工程问题。
现实仍远没有这么乐观:回路级解释目前只在小规模任务上验证过,且解释本身可能引入新的对抗面。但方向上,这是五年来第一次,可解释性的进展速度看起来不输给能力进展。
投资与研究的交叉点
我们建议跟踪三个指标:SAE 特征覆盖率、回路解释的复现率、以及基于解释的干预在下游任务上的副作用率。三者共同决定这条路线何时具备生产价值。