[Naiya 0.1.7 আপডেট] আপনি কি জানেন, একটি অল-ইন-ওয়ান ওপেন সোর্স এআই যা রিয়েল-টাইম স্বর, ভিডিও অ্যাভাটার, ডকপামো সমর্থন, ছোট/দীর্ঘ মেমোরি, রেডিও DJ এবং মাল্টিটার্মিনাল পর্যন্ত সমৃদ্ধ?

হ্যালো, আমি লুক, আমার কম্পিউটারের ভেতরের এআই নায়াকে তৈরি করছি।

গত ৫ জুন v0.1.5 প্রকাশ করার পর দু মাসের বেশি সময় ধরে অনেক কিছু নতুন হয়েছে। তখন VRAM 24GB-এর কাছাকাছি গ্রাফিক্স কার্ডে naia-0.9-omni-24g পুরো সংস্থান চালানোর কথা ছিল এবং Naiya অ্যাকাউন্ট থেকে ক্লাউড মডেল নির্বাচন করার ক্ষেত্রে প্রকৃতপক্ষে জেমিনি শৃঙ্খলে ফোকাস করা হয়েছিল। কোডেক্সও টার্মিনালে সরাসরি চালাওয়ার সাথে Naiya-র মস্তিষ্কের সাথে সংযুক্ত ব্যবহারের মধ্যে আলাদা ছিল।

এই v0.1.7 থেকে VRAM 6GB PC-তে নায়ার স্বর তৈরি করা সম্ভব, অ্যাভাটার এবং সঙ্গীত একসাথে উপভোগ করা সম্ভব, এবং Naiya ভেতরে বিভিন্ন এআই এবং প্রকৃত ফাইল কাজ চালিয়ে যাওয়া সম্ভব।

এই ডিস্ট্রিবিউশনটি Windows 10/11-এর জন্য রান ফাইল (EXE) এবং ইন্সটল প্যাকেজ (MSI) প্রথমে বের করে দেওয়ার মাধ্যমে, লিনাক্স (Naiya OS) এবং ম্যাকওএস পরবর্তী ভার্সন থেকে ধাপে ধাপে যাচাই করব।

▎এই আপডেটে সরাসরি অনুভব করা যেতে পারে এমন কিছু

• 우리가 지난번 공유했던 Cascade 형식의 별도 24GB 모델이 아님에도 불구하고, 윈도우 앱 자체에서 그래픽 메모리 (VRAM) 6GB 부터 실시간으로 레퍼런스 음성을 사용할 수 있습니다.
• 나이아는 메모리와 RAG 를 추가하여 단기 기억과 장기 기억을 갖게 되었고, 단순 말하는 LLM 정도가 아닌 진정한 AI 에이전트로서의 구조를 갖추게 되었습니다.
• 나이아 공식 3D 아바타 파일 (VRM, 휴머노이드 3D 아바타 포맷) 2 종과 자체 개발한 GPU 없이 재생되는 비디오 아바타 6 종을 제공합니다.
• 라디오 DJ 모드가 추가되어 AI 가 스스로 유튜브 곡을 추천하고 계속 플레이할 수 있도록 했습니다.
• 나이아에서 제공하는 모델은 과거 Gemini 중심이던 모델 선택지가, 가성비가 뛰어난 DeepSeek V4 flash 와 Pro, 고성능 GPT 5.6, 업스테이지의 Solar Pro4 와 네이버의 하이퍼 클로바 모델까지 크게 확장되었습니다.
• Naia 내부에서 Codex 를 연결하고 Herdr 작업 공간의 여러 AI 세션을 볼 수 있어 Naia 에서 멀티 에이전트 코딩 작업을 할 수 있게 되었습니다. 아직 작업 공간과 Naia 의 연동은 진행 중입니다.

▎1. 실시간 레퍼런스 음성, 이제 VRAM 6GB 부터

v0.1.5 에서 소개된 naia-0.9-omni-24g는 음성 인식·언어 모델·음성 합성을 모두 로컬에서 실행하는 24GB 급 전체 구성입니다. 이번에 추가된 6GB 기준은 그 전체 구성이 아니라, 사용자의 레퍼런스 음성을 사용하여 말하는 로컬 음성 합성 기능에만 적용됩니다. 음성 설정에서 이 로컬 음성 기능을 별도로 켤 수 있습니다.

Windows PC 에서 NVIDIA GPU 의 VRAM 이 6GB 이상이면 음성 설정에서 로컬 음성을 켤 수 있습니다. RTX 4060 노트북, RTX 3080 Ti 노트북, RTX 2070 데스크톱에서 동작을 확인했습니다. 필요한 TensorRT 기반 음성 런타임은 Windows 설치본에 함께 포함되어 있어, 사용자가 TensorRT 나 별도 음성 서버를 따로 설치하는 과정을 생략할 수 있습니다.

목소리 파일을 선택하거나 직접 녹음한 뒤 미리 듣고 사용할 수 있습니다. 이 기능은 Naia 계정 로그인이나 비디오 아바타 선택과 별개이므로, 기존 3D VRM 을 그대로 둔 채 목소리만 로컬로 바꿀 수도 있습니다.

• 추후 계획으로는 제가 Claude 나 Codex 로 음성 모델을 이용하여 각종 작업물을 변환해서 활용하듯이, Naia 에서 CLI 나 Agent 레벨의 API 를 지원하여 유저들이 다양한 응용을 할 수 있게 하여 활용도를 크게 넓힐 예정입니다.

▎2. 나이아 공식 아바타와 NVA 비디오 아바타

나이아의 외형도 직접 제작했습니다. 기본형과 헤어형, 두 가지 공식 3D VRM 을 제공하며 표정과 발화 상태에 맞춰 반응합니다.

여기에 말할 수 있는 비디오 아바타 6 종을 함께 제공합니다. Minho, Jina, Naia 각각의 기본 스타일과 애니메이션 스타일을 선택하여 사용할 수 있습니다. 완성된 영상 클립은 경량 방식으로 재생되므로, 아바타를 보여주고 말하게 하는 데 GPU 가 필요하지 않습니다.

NVA (Naia Video Avatar) 포맷은 비디오의 높은 시각 품질과 VRM·Live2D 의 실시간성을 결합한 오픈소스 아바타 포맷입니다. 모델링이나 리깅 없이 저렴하고 즉시 제작할 수 있으며, 브라우저와 데스크톱에서 GPU 없이 실시간으로 말하고 반응합니다. 파일 포맷과 플레이어는 오픈소스로 공개합니다.

→ 비디오 아바타 6 종의 완성 예제 직접 보기

해당 내용은 추가적으로 별도 포스팅으로 한번 더 자세히 설명드리고, NVA 만들기 기능은 곧 공개하겠습니다.

▎3. 음악을 이어 가는 Radio DJ

나이아에게 "코딩할 때 들을 음악 틀어 줘"라고 말하면 한 곡만 재생하고 끝나는 대신, Radio DJ 가 조건에 맞는 곡을 고르고 소개하며 다음 곡으로 이어 갑니다. AI 가 스스로 발화를 이어가는 자동발화 기능으로 만들고 있는 것 중 하나입니다.

음악을 듣다가 사용자가 말을 걸면 대화가 우선입니다. 다시 음악으로 돌아갈 때에는 앞서 고른 분위기와 재생 흐름을 이어 갑니다. 날씨나 기분에 따라 추천해주려는데 아직 그렇게 기능이 잘 돌아가지는 않아서 여러 가지 테스트 중입니다.

▎4. 다양한 AI 모델과 코딩 에이전트 지원

Codex, Claude, DeepSeek V4 Pro, GPT-5.6, 국내 Solar Pro 4, HCX 모델을 지원합니다. 6 월 5 일 공개 버전에서는 Naia 계정으로 고를 수 있는 모델이 Gemini 계열에 집중되어 있었습니다. v0.1.7 버전에서는 선택지가 크게 늘었습니다. 또한 Codex 와 Claude 도 지원합니다. Codex 나 Claude 를 사용하시는 분들은 별도의 계정 없이도 바로 사용하실 수 있습니다.

Naia 계정으로 연결한 모델은 하나의 설정 화면에서 선택할 수 있습니다. 국내 모델의 가격은 동일한 화면에서 원화로 표시됩니다.

▎5. 나를 기억하는 naia-memory

naia-memory는 대화를 무작정 쌓아두는 대신 중요한 사실만 골라 저장합니다. 오랫동안 사용하지 않은 기억은 중요도를 낮추고, 다시 불러온 기억은 중요도를 높입니다. 새 사실이 과거 사실과 충돌하면 이전 내용을 그대로 섞어 답하지 않고, 새 사실로 갱신할 수 있습니다.

기본 설정에서는 사용자 PC 의 로컬 JSON 저장소에 기억을 보관하며, 앱이 실행되는 동안 의미·키워드·관계 검색을 함께 수행합니다. 임베딩과 사실 추출에 사용할 모델은 따로 선택할 수 있으며, 완전히 로컬로 구성하면 대화 내용을 외부 기억 서비스에 맡기지 않아도 됩니다.

현재 기본 설정은 데스크톱 및 개인 사용에 맞춘 로컬 저장 방식입니다. 10 만 건 이상의 데이터를 처리하는 SQLite 저장 방식은 아직 동일한 수준으로 완성되지 않았습니다. 아직 적용되지는 않았지만, 최근 벤치마킹 중인 Naia-memory 의 성능은 글로벌 최고 수준에 근접하고 있으며, 가장 큰 장점은 많은 것을 기억하는 것이 아니라, 기억이 쌓였을 때 변경된 내용을 업데이트하며 사람의 기억처럼 과거의 내용일수록 감쇄 (감소) 하는 특징을 가지고 있습니다. 이것도 나중에 포스팅으로 다루겠습니다.

▎6. naia-adk 와 Herdr: Naia 안에서 AI 들과 일하기

개발자에게 가장 큰 변화는 Naia 가 채팅창을 넘어 여러 AI 세션을 하나의 공간에서 볼 수 있는 작업 공간의 기반을 갖췄다는 점입니다.

Naia 는 개발자인 저의 사용 목적을 위해 설계되었습니다. 다중 작업을 수행할 때 터미널 지옥 문제를 해결하고, 다른 코딩 에이전트의 조정자 역할을 하는 AI, 드리프트 방지 해네스 (Hane), 토큰 비용 최적화, 그리고 원격 환경에서 Discord 봇 연결을 목표로 합니다. 구현체는 Naia 를 설치하면 자동으로 설정되는 Naia-adk 작업 환경입니다. 여기에는 제가 이전에 설명드린 Rezero 해네스북 서적의 모태가 되는 해네스 코드들이 포함되어 있습니다.

지난 주에 개발을 진행하여 어느 정도 성과를 거두었으나, 컨텍스트 간 관리가 잘못되어 비용이 폭주하거나, 해네스가 업무를 막아버리는 문제가 발생하여 이번 단계에서는 이를 제외하고 진행 중입니다.

최근 사용하게 된 Herdr의 기능이 제가 목표로 하는 터미널 지옥 문제를 해결하기에 적합한 오픈소스라고 판단되어, 이번에 Naia 에 내장하도록 결정했습니다. 따라서 자체 개발하려던 멀티 터미널 관리는 사양에서 제외되었습니다.

Herdr는 Naia 안에서 여러 AI 세션을 나란히 보고 관리하는 작업 화면입니다. 왼쪽 파일 트리에서 파일 목록을 확인하고 Spaces·Agents 탭 사이를 전환할 수 있으며, 오른쪽에서 어떤 에이전트가 어느 저장소에서 일하는지 확인한 뒤 해당 Herdr 세션으로 이동할 수 있습니다. 파일을 눌러 내용을 보는 뷰어는 아직 연결되지 않았습니다. Windows 설치본에는 Herdr 가 함께 포함되어 있어 별도로 설치하지 않아도 됩니다.

Naia 워크스페이스에 내장된 Herdr 화면

이번 버전에서는 File Tree·Spaces·Agents 탐색과 내장 Herdr 작업 화면을 제공합니다. 파일 클릭 뷰어와 Naia, Codex, Herdr 를 하나의 작업 흐름으로 잇는 기능은 아직 구현이 완료되지 않았으며, 다음 버전의 개발 범위입니다.

Naia 워크스페이스 뷰어 — Herdr 연동 예정

우선 홈페이지에서 배포하고, 곧 스팀 (Steam) 과 윈도우 스토어를 준비할 예정입니다.

그리고 중요한 사실은... 이 모든 것이 오픈소스라는 점입니다.

바로 오픈소스 오프라인 모임 한번 준비하겠습니다. 그 전에 디스코드에서 소식 나누고 함께 만들고 싶으신 분들은 언제든 연락주세요.

#Naia #NVA #RadioDJ #Codex #Herdr #오픈소스AI