RecodeX 重构消息,字节跳动Seed团队发布研究,指出DeepSeek模型在长上下文场景下出现性能漂移的原因。研究认为,该现象与模型在超长输入下的注意力机制及位置编码处理有关,导致输出表现不稳定。这一发现为长上下文大模型的稳定性优化提供了参考。