Limites dos LLMs: O Enigma de Einstein Expõe as Restrições da IA Baseada em Transformadores

2025-02-02
Limites dos LLMs: O Enigma de Einstein Expõe as Restrições da IA Baseada em Transformadores

Pesquisadores descobriram limitações fundamentais na capacidade dos atuais modelos de linguagem grandes (LLMs) baseados em transformadores para resolver tarefas de raciocínio composicional. Experimentos envolvendo o enigma lógico de Einstein e multiplicação de vários dígitos revelaram deficiências significativas, mesmo após extenso ajuste fino. Essas descobertas desafiam a adequação da arquitetura de transformadores para aprendizado universal e estão levando a investigações de abordagens alternativas, como dados de treinamento aprimorados e prompts de raciocínio em cadeia, para melhorar as capacidades de raciocínio do LLM.