클라우드101(Cloud101)
/
소식 / 글 / 기사
/
Jamesob의 최신 수준 LLM 로컬 실행 가이드
Search
Share
Jamesob의 최신 수준 LLM 로컬 실행 가이드
URL
https://news.hada.io/topic?id=31121
날짜
2026/07/05
생성 일시
2026/07/04 16:20
태그
GeekNews
로컬에서 최신 수준 LLM과 음성-텍스트 변환을 돌리기 위한 하드웨어 구성, PCIe 스위치 설정, Docker 실행 구성을 한 저장소에 정리함 약 $2k 예산은 2× RTX 3090으로 48GB VRAM을 확보해 Qwen3.6-27B와 whisper-large-v3 기반 로컬 STT를 실행하는 ... ||