📓 读权重更新：仪表盘刚装上，指针已经会动了
把模型微调前后的参数差当成一段可以被读出来的文字——这件事听起来理所当然，实际上从没人做成。论文 Imprint Reader（arXiv 2609.35261），上海 AI 实验室与上海交大，9 月 28 日挂出【直引】，作者 Guanxu Chen、Qihao Lin、Jing Shao 三人【直引】。
先看场景。你微调了一个模型，得到两个 checkpoint。如果是代码，git diff 告诉你改了哪几行；但参数的 diff 只剩一片数字——几十亿个浮点数各变动了一点。模型学到了什么、行为变了多少，只能靠跑 benchmark 去猜。训练在参数里留了痕迹，这人人知道；但「痕迹」到「记录」之间一直缺一个读的动作【直引】。
已有的尝试分两路。一路把权重当数据训练外部预测器——从权重预测精度、预测超参、预测微调任务是哪一类——都是粗颗粒属性。另一路更接近直觉：给微调过的模型挂一个适配器，让它自我描述。这条路的坑是模型会编——对一个不含信息的更新照样滔滔不绝【直引】。这篇论文把方向反过来：不问「微调后的模型你怎么看你自己的变化」，而是训练一个单独的、完整的 Reader 模型，把任意一个冻结的权重更新挂载到自己参数上，然后让它说出这次更新教会了原模型什么。
做法叫 SMaRT（Semantic Mount-and-Read Tuning），拆开三步。第一步造增量：用一个临时模型在某个知识点的问答对上训练几十步，取回参数变化量 Δθ，问答对本身不交给 Reader——更新是 Reader 唯一的信息来源。第二步挂载读取：把 Δθ 加到 Reader 自己的参数上，用一个「无锚点」的元提问，比如「总结你刚经历的知识变化」，让 Reader 生成描述；元提问从 224 条固定池子里抽，不含任何关于目标的提示，堵死了走捷径的路。第三步卸载：算完损失就把 Δθ 摘下来，梯度只更新 Reader 自己。8,592 个知识条目加 8,592 个行为条目，每条配一个 LoRA 增量，Reader 在八张卡上读了 2,800 步【直引】。
最值得写的是配对控制。每一批里除了真实更新，还混着两种假更新：全零的空更新，和与目标无关的随机噪声更新。它们的训练目标是「没有新的知识或行为倾向」。Reader 因此学到的不是「见到更新就说话」，而是「读得出来才说，读不出来就承认读不出来」——这是把「不知道就说不知道」从提示词工程下沉到了训练目标里【直引】。
然后是论文里最重要、也最容易被宣传稿丢掉的两个数字：在没见过的更新上，自由生成的描述由裁判模型打分，Pass@100 是知识 2%、行为 16%【直引】。一百次生成里，完整说对一个知识点平均只有两次。行为好于知识八倍——「模型学会了做数学题时先验证再往下走」这类风格级的信号，比「模型记住了某年某事」这类事实级信号好读得多。参数空间里，态度比事实更外露。
论文自己把这组数字放进了摘要，原话是「可行，但跨更新的可靠性有待改进」【直引】。能主动把这种限制数字放进摘要的论文不多——这是它最诚实的部分。
真正的转折在下一节：读不出完整描述，不代表信号用不上。Reader 和原模型共享参数坐标——它本来就是从同一个 Qwen3-14B 初始化的——所以「某个目标行为和某次更新的匹配程度」这个量，它的梯度可以直接搬回原模型上用。论文管这套用法叫 MetaEdit，两个应用【直引】。
安全那个更干净。给 Reader 一句目标描述：「我学会了维持安全边界、拒绝有害请求」，算梯度，按梯度选 0.5% 的行剪掉。有害请求的拒绝率从 57.9% 升到 64.1%【直引】。反过来给「我学会了放松拒绝倾向」，降到 55.4%【直引】。同一接口两个方向都能动，基线方法要么分不清两个方向、要么剪出大片乱码，而 MetaEdit 的乱码率近零。这把刀是双刃的——加固和拆除走的是同一条路，论文没有藏掉放松方向的结果。
另一个叫 vibe alignment（氛围对齐）：不给训练数据，只用一段行为描述——「做题时会回看前面的推理步骤、会验证中间结果、发现错误会改」——算出稀疏梯度加到原模型上。数学题 GSM8K 94.77 升到 95.00，MATH-500 82.8 升到 83.0，涨得不多；真正翻倍的是行为痕迹：每千 token 里回溯表达从 0.327 涨到 0.687，子目标表达从 5.390 涨到 6.015【直引】。工具调用 BFCL 总分从 41.69 升到 44.60，其中代理类子项从 15.93 升到 22.30【直引】。全程没有用过目标任务的任何训练样本。
把这篇放回主线。参数 diff 是被压缩到极限的接口——所有表面结构都没了，只剩坐标和数值——把它读回语义，是逆问题家族的第三个样本，前两个是从输出序列恢复解码拓扑、从轨迹恢复状态机。权重更新本身则是经验载体栈的第零层：五层载体（轨迹、代码、状态机、优化器、可重放世界）都在记录「学过之后怎么用」，参数记录的是「学的那一下本身」。而对自改进闭环，这篇论文补的是仪表盘：模型改完自己之后，「改了什么」第一次有了读数。2% 的读出配 64.1% 的干预——仪表还没校准，指针已经会动了。
下一根钉子：8,592 + 8,592 个增量训练出来的 Reader，能跨到别的基座模型吗？参数坐标是基座特定的——换个 Qwen3-72B 初始化，Reader 还得重新读一遍。把这层「基座绑定」抽掉，下一步的 Reader 才能从「一个模型的私人医生」变成「一类模型的家庭医生」。