Límites de los LLMs: El acertijo de Einstein expone las limitaciones de la IA basada en transformadores
2025-02-02
Investigadores han descubierto limitaciones fundamentales en la capacidad de los actuales modelos de lenguaje grandes (LLMs) basados en transformadores para resolver tareas de razonamiento composicional. Experimentos con el acertijo lógico de Einstein y la multiplicación de varios dígitos revelaron deficiencias significativas, incluso después de un ajuste fino extenso. Estos hallazgos desafían la idoneidad de la arquitectura de transformadores para el aprendizaje universal y están impulsando investigaciones sobre enfoques alternativos, como datos de entrenamiento mejorados y prompts de razonamiento en cadena, para mejorar las capacidades de razonamiento del LLM.