O autoproclamado 'primeiro engenheiro de software de IA' falha miseravelmente em testes do mundo real
2025-01-26
Devin, anunciado como o primeiro engenheiro de software de IA, ficou aquém das expectativas em avaliações recentes. Apesar das alegações de construção e implantação de aplicativos de ponta a ponta e correção autônoma de bugs, Devin obteve sucesso em apenas 3 de 20 tarefas. Os testadores descobriram que Devin teve dificuldades com tarefas simples, ficando preso em becos sem saída técnicos e buscando soluções impossíveis. Embora ofereça uma experiência de usuário polida, seu sucesso pouco frequente e tendência a perder tempo com objetivos inatingíveis destacam as limitações da tecnologia de IA atual e levantam preocupações sobre o exagero em torno das ferramentas de IA.