TY - UNPB TI - Your Transformer Can Hold Two Thoughts at Once: Evidence of Linear Superposition in LLMs UR - https://arxiv.org/abs/2609.29845 DA - 2026-09-24 KW - Juju Radar KW - 模型架构 KW - 推理研究 KW - 补看 KW - 待阅读 N1 - 两段等长文本逐位置词向量平均后送入一个Transformer,原始模型仍保留两路预测信号,但常见词贡献大、内容词恢复差。Qwen2.5-3B内容词中位名次基础模型284、针对性微调后5。直接分离两路输出的吞吐与正常双请求批处理约相当;引导解码更慢、生成质量低于独立处理。9月24日14:12 UTC提交,作为9月27日期近期补看。 原文:https://arxiv.org/abs/2609.29845 本期资料页:https://www.asteronline.cn/juju-radar/2026-09-27/ AI辅助整理。 ER -