llama.cpp WASM: Aumento de velocidad 2x gracias a SIMD optimizado

2025-01-28

El blog de Simon Willison destaca una mejora significativa en llama.cpp: un aumento de velocidad del 2x para la versión WASM, logrado mediante la optimización de instrucciones SIMD. Sorprendentemente, el 99% del código fue generado por la herramienta de programación asistida por IA DeepSeek R1. DeepSeek R1 tardó entre 3 y 5 minutos en 'pensar' en cada indicación, ayudando al desarrollador a mejorar el plugin llm_groq.py y a eliminar elegantemente el model_map, simplificando el código. Esto demuestra el inmenso potencial de la IA en la optimización y refactorización de código.