Open-LLM-VTuber란?
Open-LLM-VTuber는 음성으로 상호작용하는 AI 동반자입니다. 말을 걸면 언어 모델이 답하고, Live2D 캐릭터가 표정과 합성 음성으로 반응합니다. 저장소는 이를 핸즈프리 음성 상호작용과 음성 끼어들기로 어떤 LLM과도 대화할 수 있고 여러 플랫폼에서 로컬로 실행되는 도구라고 설명합니다. MIT 라이선스 코드는 LICENSE 파일에서 Yi-Ting Chiu의 저작권으로 표시되어 있으며, 프로젝트는 GitHub의 커뮤니티로 운영됩니다.
이름은 Windows 이외에서도 오프라인으로 돌아가는 오픈 구성 요소로 비공개 AI VTuber neuro-sama를 재현하겠다는 초기 목표에서 왔습니다. 지금은 범용 동반자나 캐릭터 채팅으로 쓰이며, 웹 인터페이스와 창 모드 및 데스크톱 펫 모드를 갖춘 Electron 데스크톱 클라이언트가 있습니다.
구하는 방법
Open-LLM-VTuber는 Windows, macOS, Linux에 백엔드 서버로 설치하며, 데스크톱 클라이언트와 브라우저 페이지가 여기에 접속합니다.
항목 | 구하는 방법 |
|---|---|
| 백엔드(모든 OS) | GitHub Releases의 Open-LLM-VTuber-v1.2.1-en.zip 또는 recursive 옵션을 붙인 git clone |
| 데스크톱 클라이언트, Windows | 클라이언트 릴리스의 .exe 설치 파일. 백엔드가 실행 중이어야 함 |
| 데스크톱 클라이언트, macOS | 클라이언트 릴리스의 .dmg. 백엔드가 실행 중이어야 함 |
| 웹사이트 | open-llm-vtuber.github.io |
| 개인정보 처리방침 | 웹사이트와 저장소 어디에서도 개인정보 처리방침 페이지를 찾지 못했습니다 |
| 소스 코드 | github.com/Open-LLM-VTuber/Open-LLM-VTuber, MIT 라이선스 |
검토한 버전은 1.2.1이며 GitHub Releases 페이지에 따르면 2025년 8월 26일에 공개되었습니다. 데스크톱 클라이언트 1.2.1은 2025년 8월 21일에 나왔습니다. 백엔드에는 터미널과 개발 도구(Git, FFmpeg, uv, Python 3.10~3.12)가 필요해 더블클릭으로 설치하는 방식이 아닙니다. 빠른 시작 문서는 서명되지 않은 데스크톱 클라이언트가 운영체제의 보안 경고를 띄울 수 있다고 안내합니다. 앱은 무료입니다.
요구 사항
프로젝트는 고정된 최소 사양을 제시하지 않으며, 필요한 사양은 어떤 구성 요소를 로컬에서 돌리고 어떤 것을 API로 호출하는지에 따라 달라집니다.
최소
- 출처의 설명:
- 무거운 구성 요소(음성 인식, 언어 모델, 음성)를 모두 API로 쓰면 빠른 시작 가이드에 따라 Raspberry Pi에서도 호스팅할 수 있음
로컬 사용
- 출처의 설명:
- 권장: Apple silicon Mac, Nvidia GPU, 최신 AMD GPU 또는 GPU를 대신할 만큼 강력한 CPU
도구
- 출처의 설명:
- Git, FFmpeg(필수), uv. Python 3.10 이상 3.13 미만. Nvidia GPU 사용에는 CUDA Toolkit과 cuDNN
브라우저
- 출처의 설명:
- Chrome만 권장하며 Edge와 Safari에는 알려진 문제가 있음
원격 접속
- 출처의 설명:
- 다른 기기에서 쓰려면 HTTPS가 필요함. 브라우저는 보안 컨텍스트에서만 마이크를 허용하기 때문
이는 프로젝트 자체의 설명이며, PromptQuorum은 어떤 하드웨어에서도 메모리 사용량이나 속도를 측정하지 않았습니다.
출처로 확인된 기능
아래 항목은 모두 웹사이트, 빠른 시작 가이드, README에서 가져온 것이며 독자적으로 테스트하지 않았습니다.
- 음성 대화. 실시간 음성 입력, 헤드폰 없는 음성 끼어들기, AI가 먼저 말을 거는 기능(선택), 소리 내어 읽지 않는 AI의 속마음 표시.
- Live2D 아바타. Cubism 3~5 모델, 백엔드에서 제어하는 표정 매핑, 터치 상호작용, 직접 가져온 모델.
- 시각 입력과 도구. 카메라, 화면, 스크린샷 입력, MCP 도구 호출, 웹사이트에 따르면 브라우저 제어.
- 교체 가능한 모델. 언어 모델은 Ollama, OpenAI 호환 API, Gemini, Claude, Mistral, DeepSeek, GGUF, LM Studio, vLLM 등. 인식은 sherpa-onnx, FunASR, Whisper 계열. 음성은 sherpa-onnx, Coqui-TTS, Bark, Fish Audio, Azure 등.
- 방송과 그룹. 내장 Bilibili 라이브 채팅 클라이언트, 여러 AI 캐릭터와의 그룹 채팅, 저장되는 채팅 기록.
로컬 또는 클라우드: 데이터 흐름
프로젝트는 로컬 모델을 쓰면 모든 것이 오프라인으로 실행되고 대화가 기기에 남는다고 밝히지만, 개인정보 처리방침은 공개하지 않았고 확인한 페이지에는 텔레메트리에 대한 언급도 없습니다. 완전히 로컬인 구성(예: 모델은 Ollama, 인식과 음성도 로컬)에서는 오디오와 텍스트가 내 컴퓨터에서 처리됩니다. 소프트웨어 자체가 오픈소스이므로 이 주장은 코드에서 확인할 수 있습니다.
클라우드 옵션으로 바꾼 구성 요소는 해당 제공업체로 데이터를 보냅니다. 지원되는 클라우드 옵션에는 OpenAI 호환 API, Gemini, Claude, Groq Whisper, Azure 등이 있으며, 빠른 시작 예시는 음성에 Edge TTS를 사용하므로 인터넷 연결이 필요합니다. 모델과 의존 파일은 설치 중에 내려받으므로 첫 설치는 온라인으로 진행됩니다.
📌참고: 이는 관리자들의 선언이지 감사 결과가 아닙니다. PromptQuorum은 코드를 읽거나 네트워크 트래픽을 점검하지 않았으며, 구성의 프라이버시는 가장 덜 사적인 구성 요소 수준을 넘지 못합니다.
이런 분께 적합합니다
- 개발 애호가와 개발자: 직접 고른 음성, 언어, 합성 구성 요소를 아바타에 연결하려는 분.
- 스트리머와 캐릭터 채팅 팬: 데스크톱 펫을 포함해 말하는 Live2D 캐릭터를 직접 관리하려는 분.
- 프라이버시를 중시하는 사용자: 모든 구성 요소를 로컬에서 돌리고 직접 검증할 의향이 있는 분.
확인하지 못한 내용
- 품질과 속도. PromptQuorum은 지연 시간, 인식 정확도, 음성 품질, 매끄러운 대화에 필요한 하드웨어를 측정하지 않았습니다.
- 유지 관리 전망. README는 v2.0 전면 재작성이 초기 기획 단계라고 하며 v1 기능 요청을 삼가 달라고 하지만, v1에 추가 수정이 있을지는 밝히지 않습니다.
- 장기 기억. 웹사이트는 Letta 기반 기억을 설명하고 README는 일시적으로 제거되었다고 합니다. 버전 1.2.1에서 어느 쪽이 맞는지는 확인하지 않았습니다.
- 아바타의 상업적 사용. README에 따르면 중견 이상 기업이 Live2D 샘플 모델을 쓰려면 Live2D Inc.의 추가 허가가 필요할 수 있으며, 다른 모델에는 각자의 라이선스가 있습니다.
- 데스크톱 클라이언트 서명. 문서는 클라이언트가 서명되지 않아 보안 경고가 뜰 수 있다고 합니다. 설치 파일이 그 밖의 면에서 안전한지는 확인하지 않았습니다.
경쟁 제품과 대안
SillyTavern
- 플랫폼:
- macOS, Windows, Linux, 웹
- 가격 / 라이선스:
- 무료 / AGPL 3.0
- 주요 차이점:
- 로어북과 페르소나 관리를 중심으로 한 텍스트 위주의 롤플레이 프런트엔드
SillyTavern 관련 문서 (9개)
- SillyTavern in 2026: The Free Frontend for AI Character Roleplay and Long-Form Chat업데이트 2026년 9월 5일
- Best Uncensored Local LLMs for Erotica & Creative Writing 2026: Hermes 3 vs Dolphin업데이트 2026년 10월 18일
- Agnai Review: Self-Hostable AI Roleplay Chat업데이트 2026년 9월 12일
- RisuAI Review: Open-Source Roleplay Chat Client업데이트 2026년 9월 12일
- text-generation-webui in 2026: How Oobabooga's Local LLM UI Became "TextGen"업데이트 2026년 9월 5일
- LibreChat Review: Self-Hosted ChatGPT Alternative for Local LLMs업데이트 2026년 9월 3일
- Backyard AI Review: Local AI Character Chat and Roleplay업데이트 2026년 9월 2일
- Open WebUI vs SillyTavern: Best Chat UI for Local LLMs업데이트 2026년 8월 30일
- SillyTavern vs Agnai vs RisuAI: Best Local Roleplay Frontend (2026)업데이트 2026년 8월 29일
기타 언급:
표시되지 않은 7개 더보기
RisuAI
- 플랫폼:
- 웹, macOS, Windows, Linux
- 가격 / 라이선스:
- 무료 / GPL 3.0
- 주요 차이점:
- 모바일 친화적인 롤플레이 프런트엔드로 데스크톱 빌드도 있음
RisuAI 관련 문서 (8개)
- RisuAI Review: Open-Source Roleplay Chat Client업데이트 2026년 9월 12일
- HiWaifu Review: Cloud AI Character Chat for iPhone and iPad업데이트 2026년 10월 18일
- Swerve Review: AI Story and Character Chat for iPhone업데이트 2026년 10월 17일
- Local Chat Apps & Assistants Compared (2026): Desktop, Mobile, Self-Hosted, Assistants and Roleplay업데이트 2026년 9월 20일
- SillyTavern in 2026: The Free Frontend for AI Character Roleplay and Long-Form Chat업데이트 2026년 9월 5일
- MetaGPT vs Agnai vs RisuAI: What Each AI Agent Tool Is Actually For업데이트 2026년 9월 5일
- Backyard AI Review: Local AI Character Chat and Roleplay업데이트 2026년 9월 2일
- SillyTavern vs Agnai vs RisuAI: Best Local Roleplay Frontend (2026)업데이트 2026년 8월 29일
기타 언급:
- Asiden Review: Windows 11 AI Desktop Companion With Local and Optional Cloud AI업데이트 2026년 10월 24일
- Run a Local LLM on Your Tablet: iPad Pro M5, Galaxy Tab S10, OnePlus Pad 2 (2026)업데이트 2026년 10월 23일
표시되지 않은 4개 더보기
Agnai
- 플랫폼:
- 웹
- 가격 / 라이선스:
- 무료 / AGPL-3.0
- 주요 차이점:
- 캐릭터 카드와 다중 사용자 그룹 대화를 지원하는 롤플레이 프런트엔드
Agnai 관련 문서 (6개)
- Agnai Review: Self-Hostable AI Roleplay Chat업데이트 2026년 9월 12일
- Best Uncensored Local LLMs for Erotica & Creative Writing 2026: Hermes 3 vs Dolphin업데이트 2026년 10월 18일
- Local Chat Apps & Assistants Compared (2026): Desktop, Mobile, Self-Hosted, Assistants and Roleplay업데이트 2026년 9월 20일
- MetaGPT vs Agnai vs RisuAI: What Each AI Agent Tool Is Actually For업데이트 2026년 9월 5일
- Backyard AI Review: Local AI Character Chat and Roleplay업데이트 2026년 9월 2일
- SillyTavern vs Agnai vs RisuAI: Best Local Roleplay Frontend (2026)업데이트 2026년 8월 29일
기타 언급:
- Best Local LLMs for Creative Writing (2026): Fiction, Dialogue & Worldbuilding업데이트 2026년 10월 17일
- Swerve Review: AI Story and Character Chat for iPhone업데이트 2026년 10월 17일
- RisuAI Review: Open-Source Roleplay Chat Client업데이트 2026년 9월 12일
- Chapper Review: AI & LM Studio Client for iPhone, iPad, and Mac업데이트 2026년 9월 6일
표시되지 않은 1개 더보기
Backyard AI
- 플랫폼:
- macOS, Windows
- 가격 / 라이선스:
- 프리미엄 / 비공개 소스
- 주요 차이점:
- Character Hub가 내장되고 설치 파일이 하나인 캐릭터 채팅 데스크톱 클라이언트
Backyard AI 관련 문서 (4개)
- Backyard AI Review: Local AI Character Chat and Roleplay업데이트 2026년 9월 2일
- Swerve Review: AI Story and Character Chat for iPhone업데이트 2026년 10월 17일
- Agnai Review: Self-Hostable AI Roleplay Chat업데이트 2026년 9월 12일
- SillyTavern in 2026: The Free Frontend for AI Character Roleplay and Long-Form Chat업데이트 2026년 9월 5일
기타 언급:
- Asiden Review: Windows 11 AI Desktop Companion With Local and Optional Cloud AI업데이트 2026년 10월 24일
- Local Chat Apps & Assistants Compared (2026): Desktop, Mobile, Self-Hosted, Assistants and Roleplay업데이트 2026년 9월 20일
- RisuAI Review: Open-Source Roleplay Chat Client업데이트 2026년 9월 12일
- Chapper Review: AI & LM Studio Client for iPhone, iPad, and Mac업데이트 2026년 9월 6일
모두 PromptQuorum 디렉터리의 같은 범주 앱입니다. 현재 가격, 라이선스, 플랫폼은 각 앱의 페이지에서 확인하십시오.
자주 묻는 질문
GPU 없이도 실행할 수 있습니까?
무거운 부분을 API에 맡기면 가능합니다. 빠른 시작 가이드에 따르면 각 구성 요소가 API를 쓸 수 있고, 가벼운 로컬 모델이나 CPU에 맞는 인식기도 선택할 수 있습니다. 로컬 사용에는 Apple silicon, Nvidia GPU, 최신 AMD GPU가 권장됩니다.
내 Live2D 모델을 쓸 수 있습니까?
가능합니다. 모델 폴더를 live2d-models에 두고 model_dict.json에 등록한 뒤 캐릭터 설정에서 선택합니다. Cubism 3~5 모델은 동작하고 Cubism 2는 동작하지 않으며, 모델 자체의 라이선스도 확인해야 합니다.
스마트폰으로 대화할 수 있습니까?
프로젝트에 따르면 서버를 한 컴퓨터에서 돌리고 다른 기기에서 열 수 있지만, 브라우저 마이크는 localhost나 HTTPS에서만 동작하므로 원격 사용에는 HTTPS 설정이 필요합니다.
라이브 방송에 참여할 수 있습니까?
시청자 메시지를 받는 Bilibili 라이브 채팅 클라이언트가 내장되어 있으며, 다른 플랫폼은 직접 인터페이스를 구현해야 합니다.
어떤 브라우저가 가장 좋습니까?
빠른 시작 가이드는 Chrome만 권장하며 Edge와 Safari에는 알려진 문제가 있다고 밝힙니다.
총평
Open-LLM-VTuber는 직접 고른 구성 요소로 음성으로 조작하는 Live2D 동반자를 만들 수 있는 무료 오픈소스 방법이며, 모든 것을 오프라인으로 돌리는 경로도 문서화되어 있습니다. 반면 설치는 개발자 방식이고, 예시 구성은 여전히 온라인 음성을 쓰며, 저장소에는 2026년 2월 11일 이후 기능 업데이트가 없고, 품질 관련 주장은 여기서 확인하지 못했습니다. 터미널을 다룰 수 있고 이미 관리되지 않을 수 있는 프로젝트로 받아들일 수 있는 개발 애호가에게 적합하며, 지원과 완성도가 필요한 분은 먼저 꼼꼼히 시험해 보셔야 합니다.
출처
- Open-LLM-VTuber 웹사이트 — 프로젝트 개요와 기능 목록, 2026년 10월 24일 확인.
- 빠른 시작 가이드 — 요구 사항, 설치 단계, 데스크톱 클라이언트 안내, 2026년 10월 24일 확인.
- GitHub의 Open-LLM-VTuber — README, MIT 라이선스, Live2D 고지, 커밋 기록, 2026년 10월 24일 확인.
- 백엔드 릴리스 — 버전 1.2.1과 다운로드 파일, 2026년 10월 24일 확인.
- 데스크톱 클라이언트 릴리스 — Windows와 macOS 설치 파일, 2026년 10월 24일 확인.
