
AI开始直接给另一个AI改“脑回路”了。
11月2日,MIT CSAIL研究者公布了一组实验:让GPT-6 Astra读取小千问的模型权重,找出问题,再直接修改。
这次要修的是“想个不停,却不给答案”。Qwen3.5-0.8B容易陷入重复推理;Astra找到相关信号,只改动约0.016%的权重,减少了这种循环。
在作者的实验里,MATH-500数学测试正确率从7.9%升到48.1%,GSM8K从13.8%升到67.1%。过程中有50次试跑评估的预算,没有使用梯度下降重新训练。
效果也有边界:换成很少陷入循环的Gemma 3 270M,就没有明显提升。这次更像修掉了阻碍答题的故障。
研究者已公开完整实验日志,包括权重改动与评测记录。

KEEP EXPLORING
项目与原始链接
阅读作者研究原文
↗https://rikiyat.github.io/blog/weight-space-programming/
查看完整实验日志
↗https://github.com/RikiyaT/lm_understand-logs