字节论文发现 DeepSeek V4 分块 KV Cache 压缩的周期性盲区
字节团队论文《Periodic Weak Spots: Phase Sensitivity from Chunked KV-Cache Compression》指出,DeepSeek V4 系列采用的分块 KV Cache 压缩会带来相位敏感性:关键 Token 落在切块交界盲区时模型容易答错。
推荐理由:字节论文指出分块 KV Cache 压缩带来周期性相位盲区,并梳理动态分块等改进方向,可帮助理解长上下文压缩的结构性代价。