IT之家·· 4 小时前AI 评分67
字节 Seed 团队研究分块 KV 缓存压缩引发的 DeepSeek 长上下文性能漂移
字节 Seed 团队发现 DeepSeek“抽风”原因,长上下文可能性能漂移
AI 导读
字节 Seed 团队在 9 月底提交论文,称分块 KV 缓存压缩会使 DeepSeek 模型出现相位敏感性,导致相同信息在不同阶段难以检索程度不同。研究评估 DeepSeek-V4-Flash、DeepSeek-V4-Pro 和后训练后的 DeepSeek-V4.1-Flash,长上下文检索准确度在不同阶段间可能相差最高 40 个百分点。
来源:IT之家 · ithome.com