Vibe-Eyes: LLMs Einblicke in Browser-Spiele gewähren

Vibe-Eyes ist ein innovativer MCP-Server, der es großen Sprachmodellen (LLMs) ermöglicht, zu „sehen“, was in browserbasierten Spielen und Anwendungen geschieht. Es verwendet eine Client-Server-Architektur: Ein leichter Browser-Client erfasst Canvas-Inhalte und Debuginformationen und sendet diese über WebSockets an einen Node.js-Server. Der Server vektorisiert die Bilder in kompakte SVGs und stellt sie den LLMs über das Model Context Protocol (MCP) zur Verfügung. Dies ermöglicht es LLMs, die Anwendung zu „sehen“ und kontextreiche Debugging-Unterstützung zu bieten, was die Effizienz des „Vibe Coding“ deutlich verbessert.