Devin: O Engenheiro de Software IA Autônomo Que Não Era

A Answer.AI realizou uma avaliação de um mês do Devin, uma ferramenta de IA anunciada como capaz de realizar engenharia de software totalmente autônoma. Testes iniciais mostraram promessa, com o Devin lidando com sucesso tarefas simples, como migrar dados do Notion para o Google Sheets. No entanto, à medida que a complexidade das tarefas aumentava, as deficiências do Devin se tornaram aparentes. Ele teve dificuldades em criar novos projetos, conduzir pesquisas e modificar códigos existentes, muitas vezes ficando preso em becos sem saída técnicos ou produzindo soluções excessivamente complexas. De 20 tarefas, apenas 3 foram bem-sucedidas, 14 falharam e 3 foram inconclusivas. A equipe concluiu que a natureza autônoma do Devin se mostrou um passivo, prejudicando sua eficácia. Atualmente, fluxos de trabalho dirigidos por desenvolvedores complementados por assistência de IA oferecem uma abordagem mais confiável.