NixOS와 WSL을 사용한 편리한 가정용 LLM 환경 구축
2025-04-11
이 글에서는 Windows Subsystem for Linux(WSL)에서 NixOS를 사용하여 집에서 LLM을 손쉽게 실행하는 설정 방법을 설명합니다. 저자는 VRAM 잠금, WSL 자동 종료, Nvidia 드라이버 문제와 같은 어려움을 극복했습니다. Ollama, Nvidia Container Toolkit, 그리고 NixOS의 구성 관리를 활용하여 자동 업데이트와 쉬운 시스템 재구축을 달성했습니다. 이 가이드에서는 WSL 유지, NixOS 설치, Nvidia 드라이버 설정, Ollama 컨테이너 설정, 그리고 선택적 Tailscale 네트워킹에 대해 설명하며, 최종적으로 쉽게 접근할 수 있는 로컬 LLM 환경을 제공합니다.
개발