Reflection atualiza a tabela de benchmarks do Beam
Uma nota de October 8 na publicação de lançamento diz que os resultados do Beam foram revisados.
Três dias após o lançamento, Reflection acrescentou uma nota ao anúncio: “Atualizamos os resultados do Beam, e as tabelas acima refletem os números mais recentes. Todos os outros resultados permanecem inalterados.”
As pontuações deste site seguem a tabela revisada. Entre os destaques estão 80.9 no SWE-Bench Verified, 80.1 no Terminal-Bench v2.1, 90.5 no GPQA Diamond e 78.7 no MCP Atlas.
Destaque
Confira a data da revisão quando encontrar números do Beam citados em outros lugares.