Equipe byte seed identifica a causa do 'freakout' do DeepSeek, destaca a sensibilidade à fase no processamento de contexto longo

Em 9 de outubro de 2026, a IT Home reportou que a equipe Byte Seed submeteu um artigo à plataforma arXiv preprint em 30 de setembro de 2026, discutindo a sensibilidade à fase causada pela compressão de cache KV em blocos. O estudo focou em DeepSeek-V4-Flash, DeepSeek-V4-Pro e DeepSeek-V4.1-Flash, analisando seu desempenho com e sem treinamento posterior. A equipe descobriu que a compressão de cache KV em blocos reduz os custos de memória e atenção para a inferência de contexto longo, mas introduz uma nova coordenada posicional chamada 'token phase', que afeta o desempenho de recuperação. Observaram uma assimetria sistemática na recuperação, onde as informações são facilmente acessíveis em uma fase, mas não em outra, levando a uma possível queda de 40 pontos percentuais na precisão em diferentes fases. Isso destaca uma fraqueza periódica que pode ser mascarada por benchmarks médios.