LLMs scheitern an einem einfachen Schach-Puzzle: Ein kurioser Test

Der Autor testet verschiedene neue LLMs mit einem einfachen Schach-Puzzle, das Unterpromotion und die 50-Züge-Regel beinhaltet. Trotz Anleitung schaffen es die meisten LLMs nicht, es zu lösen, was die Grenzen des logischen Denkens und domänenspezifischen Wissens aufzeigt. Dieser schnelle Test dient als Benchmark und regt Diskussionen darüber an, ob LLMs jemals Schach auf Meisterniveau spielen können, ohne speziell dafür trainiert zu werden. Die Einfachheit des Puzzles und der Fokus auf eine weniger verbreitete Technik machen es zu einer aufschlussreichen Untersuchung der LLM-Fähigkeiten.