AI-Vtuber

AI-Vtuber

整合多模型的开源AI虚拟主播项目

Luna AI是一个开源的AI虚拟主播项目,集成了多种大语言模型和外观技术。该系统支持Live2D、UE5等视觉呈现,使用文本转语音技术实现自然交流。Luna AI可在主流直播平台进行实时互动,并能与Stable Diffusion结合展示画作。这个免费开源项目为开发者和用户提供了全面的虚拟主播解决方案。

Luna AI虚拟主播人工智能直播平台自然语言处理Github开源项目

✨ Luna AI ✨

[![][FOSSA-状态]][FOSSA-状态] [![][python]][python] [![][github-发布-徽章]][github-发布-链接] [![][github-星标-徽章]][github-星标-链接] [![][github-分支-徽章]][github-分支-链接] [![][github-贡献者-徽章]][github-贡献者-链接] [![][github-问题-徽章]][github-问题-链接] [![][github-许可证-徽章]][github-许可证-链接]

Luna AI 是一款结合了最先进技术的虚拟AI主播。它的核心是一系列高效的人工智能模型和平台,包括 ChatterBot、GPT、Claude、langchain、chatglm、text-generation-webui、讯飞星火、智谱AI、谷歌Bard、通义星尘、阿里云百炼(通义千问、百川、月之暗面、零一万物、MiniMax)、千帆大模型(文心一言)、Gemini、Kimi Chat、QAnything、koboldcpp、FastGPT、Ollama、One-API、AnythingLLM、LLM_TPU、Dify。这些模型既可以在本地运行,也可以通过云端服务提供支持。当然,为了让对话照进现实,还结合了多模态模型,包括 Gemini、glm-4v 的图像识别能力,获取电脑画面进行分析讲解。

Luna AI 的外观由 Live2D、Vtube Studio、xuniren、UE5 结合 Audio2Face、EasyAIVtuber、数字人视频播放器(Easy-Wav2Lip、Sadtalker、GeneFace++、MuseTalk、AniTalker、本地视频)、metahuman-stream(ernerf、musetalk、wav2lip)、DH_live、live2d-TTS-LLM-GPT-SoVITS-Vtuber 技术打造,为用户提供了一个生动、互动的虚拟形象。这使得 Luna AI 能够在各大直播平台,如 Bilibili、抖音、快手、微信视频号、拼多多、1688、斗鱼、YouTube、Twitch 和 TikTok,进行实时互动直播。当然,它也可以在本地环境中与您进行个性化对话。

为了使交流更加自然,Luna AI 使用了先进的自然语言处理技术,结合文本转语音系统,如 Edge-TTS、VITS-Fast、elevenlabs、bark-gui、VALL-E-X、睿声AI、OpenVoice、GPT_SoVITS、clone-voice、Azure TTS、fish-speech、ChatTTS、CosyVoice。这不仅让它能够生成流畅的回答,还可以通过 so-vits-svc 和 DDSP-SVC 实现声音的变化,以适应不同的场景和角色。

此外,Luna AI 还能够通过特定指令与 Stable Diffusion 协作,展示画作。用户还可以自定义文案,让 Luna AI 循环播放,以满足不同场合的需求。

本项目完全免费,如有发现一模一样的套壳售卖程序,皆为盗版,请及时止损

<a href="//space.bilibili.com/3709626/channel/collectiondetail?sid=1422512" target="_blank">▶︎ 视频教程合集</span></a> <span> | </span> <a href="//ikaros521.eu.org/site">📄 在线文档</span></a> <span> | </span> <a href="//github.com/Ikaros-521/AI-Vtuber" target="_blank">🍉 GitHub</span></a> <span> | </span> <a href="//gitee.com/ikaros-521/AI-Vtuber" target="_blank">🍓 Gitee</span></a> <span> | </span> <a href="http://qm.qq.com/cgi-bin/qm/qr?_wv=1027&k=Q9vzZr7a2BUt3Nk0LDKZOVFaQ7lYUYEn&authKey=ze2sFJ7v5S6ffgpXoRh80H4c5%2FejPXc2OydSg%2FuAS4YZey6VuKxS%2FyUK0SuEHYjH&noverify=0&group_code=996470582" target="_blank">🐧 AI交流Q群</span></a>

思维导图

💡 提问的智慧

提交问题前请先阅读以下内容

https://lug.ustc.edu.cn/wiki/doc/smart-questions

🀅 开发&项目相关

可以使用 GitHub Codespaces 进行在线开发:

[![][github-codespace-徽章]][github-codespace-链接]

简易流程图

图片 图片

许可证

FOSSA 状态

⭐️ 星标历程

星标历史图表

🤝 贡献

🎉 鸣谢

感谢以下开发者对该项目做出的贡献:

<a href="https://github.com/Ikaros-521/AI-Vtuber/graphs/contributors"> <img src="https://contrib.rocks/image?repo=Ikaros-521/AI-Vtuber" /> </a>

💸 投资方

图片

🌏 合作伙伴

睿声AI:reecho.ai — 瞬时创建超级拟真的人工智能克隆语音 AIHubMix:aihubmix.com —— OpenAI、Google、通义千问等大语言模型API代理站

迅雷加速器:jsq.xunlei.com 新用户可以凭口令领取7x24小时的免费福利加速。兑换码口令:ikaros

🙌 赞助

<div> <img src="https://yellow-cdn.veclightyear.com/835a84d5/b9325a12-614f-42a2-aabc-7b915acd2337.jpg" style="width: 200px;"> <img src="https://yellow-cdn.veclightyear.com/835a84d5/ebc63110-c52b-4dea-bd14-22a31fb9ca54.jpg" style="width: 230px;"> </div>

🕳️ 黑名单

用户信息名人名言
QQ:750359376笑死,连点开源精神都没有
QQ:378198682【散播谣言】
QQ:1939834860【广告哥】

[FOSSA状态]:https://yellow-cdn.veclightyear.com/835a84d5/cf2e2902-6d32-48fc-8d87-16e55efc9ebd.svg?type=shield&labelColor=black&issueType=license [Python]:https://img.shields.io/badge/python-3.10+-blue.svg?labelColor=black [返回顶部]:https://img.shields.io/badge/-返回顶部-black?style=flat-square [GitHub Action发布链接]:https://github.com/actions/workflows/Ikaros-521/AI-Vtuber/release.yml [GitHub Action发布徽章]:https://img.shields.io/github/actions/workflow/status/Ikaros-521/AI-Vtuber/release.yml?label=release&labelColor=black&logo=githubactions&logoColor=white&style=flat-square [GitHub Action测试链接]:https://github.com/actions/workflows/Ikaros-521/AI-Vtuber/test.yml [GitHub Action测试徽章]:https://img.shields.io/github/actions/workflow/status/Ikaros-521/AI-Vtuber/test.yml?label=test&labelColor=black&logo=githubactions&logoColor=white&style=flat-square [GitHub Codespace链接]:https://codespaces.new/Ikaros-521/AI-Vtuber [GitHub Codespace徽章]:https://github.com/codespaces/badge.svg [GitHub贡献者链接]:https://github.com/Ikaros-521/AI-Vtuber/graphs/contributors [GitHub贡献者徽章]:https://img.shields.io/github/contributors/Ikaros-521/AI-Vtuber?color=c4f042&labelColor=black&style=flat-square [GitHub分支链接]:https://github.com/Ikaros-521/AI-Vtuber/network/members [GitHub分支徽章]:https://img.shields.io/github/forks/Ikaros-521/AI-Vtuber?color=8ae8ff&labelColor=black&style=flat-square [GitHub问题链接]:https://github.com/Ikaros-521/AI-Vtuber/issues [GitHub问题徽章]:https://img.shields.io/github/issues/Ikaros-521/AI-Vtuber?color=ff80eb&labelColor=black&style=flat-square [GitHub许可证链接]:https://github.com/Ikaros-521/AI-Vtuber/blob/main/LICENSE [GitHub许可证徽章]:https://img.shields.io/github/license/Ikaros-521/AI-Vtuber?color=white&labelColor=black&style=flat-square [GitHub发布链接]:https://github.com/Ikaros-521/AI-Vtuber/releases [GitHub发布徽章]:https://img.shields.io/github/v/release/Ikaros-521/AI-Vtuber?color=369eff&labelColor=black&logo=github&style=flat-square [GitHub发布日期链接]:https://github.com/Ikaros-521/AI-Vtuber/releases [GitHub发布日期徽章]:https://img.shields.io/github/release-date/Ikaros-521/AI-Vtuber?labelColor=black&style=flat-square [GitHub星标链接]:https://github.com/Ikaros-521/AI-Vtuber/network/stargazers [GitHub星标徽章]:https://img.shields.io/github/stars/Ikaros-521/AI-Vtuber?color=ffcb47&labelColor=black&style=flat-square [欢迎PR链接]:https://github.com/Ikaros-521/AI-Vtuber/pulls [欢迎PR徽章]:https://img.shields.io/badge/%F0%9F%A4%AF%20PR%20WELCOME-%E2%86%92-ffcb47?labelColor=black&style=for-the-badge [个人主页链接]:https://github.com/Ikaros-521

编辑推荐精选

QoderWork

QoderWork

阿里Qoder团队推出的桌面端AI智能体

QoderWork 是阿里推出的本地优先桌面 AI 智能体,适配 macOS14+/Windows10+,以自然语言交互实现文件管理、数据分析、AI 视觉生成、浏览器自动化等办公任务,自主拆解执行复杂工作流,数据本地运行零上传,技能市场可无限扩展,是高效的 Agentic 生产力办公助手。

音述AI

音述AI

全球首个AI音乐社区

音述AI是全球首个AI音乐社区,致力让每个人都能用音乐表达自我。音述AI提供零门槛AI创作工具,独创GETI法则帮助用户精准定义音乐风格,AI润色功能支持自动优化作品质感。音述AI支持交流讨论、二次创作与价值变现。针对中文用户的语言习惯与文化背景进行专门优化,支持国风融合、C-pop等本土音乐标签,让技术更好地承载人文表达。

lynote.ai

lynote.ai

一站式搞定所有学习需求

不再被海量信息淹没,开始真正理解知识。Lynote 可摘要 YouTube 视频、PDF、文章等内容。即时创建笔记,检测 AI 内容并下载资料,将您的学习效率提升 10 倍。

AniShort

AniShort

为AI短剧协作而生

专为AI短剧协作而生的AniShort正式发布,深度重构AI短剧全流程生产模式,整合创意策划、制作执行、实时协作、在线审片、资产复用等全链路功能,独创无限画布、双轨并行工业化工作流与Ani智能体助手,集成多款主流AI大模型,破解素材零散、版本混乱、沟通低效等行业痛点,助力3人团队效率提升800%,打造标准化、可追溯的AI短剧量产体系,是AI短剧团队协同创作、提升制作效率的核心工具。

seedancetwo2.0

seedancetwo2.0

能听懂你表达的视频模型

Seedance two是基于seedance2.0的中国大模型,支持图像、视频、音频、文本四种模态输入,表达方式更丰富,生成也更可控。

nano-banana纳米香蕉中文站

nano-banana纳米香蕉中文站

国内直接访问,限时3折

输入简单文字,生成想要的图片,纳米香蕉中文站基于 Google 模型的 AI 图片生成网站,支持文字生图、图生图。官网价格限时3折活动

扣子-AI办公

扣子-AI办公

职场AI,就用扣子

AI办公助手,复杂任务高效处理。办公效率低?扣子空间AI助手支持播客生成、PPT制作、网页开发及报告写作,覆盖科研、商业、舆情等领域的专家Agent 7x24小时响应,生活工作无缝切换,提升50%效率!

堆友

堆友

多风格AI绘画神器

堆友平台由阿里巴巴设计团队创建,作为一款AI驱动的设计工具,专为设计师提供一站式增长服务。功能覆盖海量3D素材、AI绘画、实时渲染以及专业抠图,显著提升设计品质和效率。平台不仅提供工具,还是一个促进创意交流和个人发展的空间,界面友好,适合所有级别的设计师和创意工作者。

图像生成AI工具AI反应堆AI工具箱AI绘画GOAI艺术字堆友相机AI图像热门
码上飞

码上飞

零代码AI应用开发平台

零代码AI应用开发平台,用户只需一句话简单描述需求,AI能自动生成小程序、APP或H5网页应用,无需编写代码。

Vora

Vora

免费创建高清无水印Sora视频

Vora是一个免费创建高清无水印Sora视频的AI工具

下拉加载更多