Jouer à Pokémon FireRed avec GPT-4 : Une aventure IA

Ce projet détaille une tentative pour faire jouer Pokémon FireRed à GPT-4 de manière autonome en utilisant RetroArch. L'auteur a mis en place des méthodes pour lire la mémoire du jeu, utiliser l'OCR pour la reconnaissance de texte et créer une base de données de la mémoire du jeu pour permettre à l'IA d'explorer, de combattre et d'interagir avec les PNJ. Cependant, le contrôle d'entrée programmatique s'est avéré être un obstacle majeur ; le système d'entrée UDP de RetroArch était peu fiable et l'entrée basée sur le clavier nécessitait la mise au point de la fenêtre, limitant l'automatisation. Malgré cela, le projet montre le potentiel de l'IA dans les jeux et fournit des informations précieuses pour les futures applications de LLM dans ce domaine.