Benchmarck Real-SWE Põe Modelos de IA à Prova em Codebases de Empresas Privadas
Um novo benchmarck chamado Real-SWE avalia o desempenho de modelos de IA de ponta em codebases de empresas privadas do mundo real. O benchmarck avalia a capacidade dos modelos de IA de concluir tarefas inspiradas no trabalho de engenharia real, com foco na complexidade específica da empresa e nas consequências comerciais. Ler mais
