Ecosyste.ms: Awesome

An open API service indexing awesome lists of open source software.

Awesome Lists | Featured Topics | Projects

https://github.com/ikaros-521/ai-vtuber

AI Vtuber是一个由 【ChatterBot/ChatGPT/claude/langchain（本地/llm）/chatglm/text-generation-webui/闻达/千问/kimi】 驱动的虚拟主播【Live2D/UE/xuniren】，可以在 【Bilibili/抖音/快手/微信视频号/斗鱼/YouTube/twitch/TikTok】 直播中与观众实时互动 或 直接在本地进行聊天。它使用TTS技术【edge-tts/VITS/elevenlabs/bark/bert-vits2/睿声】生成回答并可以选择【so-vits-svc/DDSP-SVC】变声；指令协同SD画图。
https://github.com/ikaros-521/ai-vtuber

ai bilibili claude douyin gpt kuaishou langchain live2d llm python qanything stable-diffusion svc tiktok tts twitch ue vits youtube

Last synced: 4 months ago
JSON representation

AI Vtuber是一个由 【ChatterBot/ChatGPT/claude/langchain（本地/llm）/chatglm/text-generation-webui/闻达/千问/kimi】 驱动的虚拟主播【Live2D/UE/xuniren】，可以在 【Bilibili/抖音/快手/微信视频号/斗鱼/YouTube/twitch/TikTok】 直播中与观众实时互动 或 直接在本地进行聊天。它使用TTS技术【edge-tts/VITS/elevenlabs/bark/bert-vits2/睿声】生成回答并可以选择【so-vits-svc/DDSP-SVC】变声；指令协同SD画图。

Awesome Lists containing this project

README 

        
# ✨ Luna AI ✨



[![][FOSSA-Status]][FOSSA-Status]

[![][python]][python]

[![][github-release-shield]][github-release-link]

[![][github-stars-shield]][github-stars-link]

[![][github-forks-shield]][github-forks-link]

[![][github-contributors-shield]][github-contributors-link]

[![][github-issues-shield]][github-issues-link]

[![][github-license-shield]][github-license-link]



`Luna AI` 是一款结合了最先进技术的虚拟AI主播。它的核心是一系列高效的人工智能模型和平台，包括 `ChatterBot、GPT、Claude、langchain、chatglm、text-generation-webui、讯飞星火、智谱AI、谷歌Bard、通义星尘、阿里云百炼（通义千问、百川、月之暗面、零一万物、MiniMax）、千帆大模型（文心一言）、Gemini、Kimi Chat、QAnything、koboldcpp、FastGPT、Ollama、One-API、AnythingLLM、LLM_TPU、Dify、火山引擎（豆包）`。这些模型既可以在本地运行，也可以通过云端服务提供支持。当然，为了让对话照进现实，还结合了多模态模型，包括 `Gemini、glm-4v` 的图像识别能力，获取电脑画面进行分析讲解。  



`Luna AI` 的外观由 `Live2D、Vtube Studio、xuniren、UE5 结合 Audio2Face、EasyAIVtuber、数字人视频播放器（Easy-Wav2Lip、Sadtalker、GeneFace++、MuseTalk、AniTalker、本地视频）、metahuman-stream（ernerf、musetalk、wav2lip）、DH_live、live2d-TTS-LLM-GPT-SoVITS-Vtuber` 技术打造，为用户提供了一个生动、互动的虚拟形象。这使得 `Luna AI` 能够在各大直播平台，如 `Bilibili、抖音、快手、微信视频号、拼多多、1688、斗鱼、YouTube、Twitch 和 TikTok`，进行实时互动直播。当然，它也可以在本地环境中与您进行个性化对话。



为了使交流更加自然，`Luna AI` 使用了先进的自然语言处理技术，结合文本转语音系统，如 `Edge-TTS、VITS-Fast、elevenlabs、bark-gui、VALL-E-X、睿声AI、OpenVoice、GPT_SoVITS、clone-voice、Azure TTS、fish-speech、ChatTTS、CosyVoice`。这不仅让它能够生成流畅的回答，还可以通过 `so-vits-svc 和 DDSP-SVC` 实现声音的变化，以适应不同的场景和角色。



此外，`Luna AI` 还能够通过特定指令与 `Stable Diffusion` 协作，展示画作。用户还可以自定义文案，让 Luna AI 循环播放，以满足不同场合的需求。



```

本项目完全免费，如有发现一模一样的套壳售卖程序，皆为盗版，请及时止损

```



▶︎ 视频教程合集

 | 

📄 在线文档

 | 

🍉 GitHub

 | 

🍓 Gitee

 | 

🐧 AI交流Q群



![思维导图](./docs/xmind.png)



## 💡 提问的智慧



提交issues前请先阅读以下内容



https://lug.ustc.edu.cn/wiki/doc/smart-questions



## 🀅 开发&项目相关



可以使用 GitHub Codespaces 进行在线开发：



[![][github-codespace-shield]][github-codespace-link]  



### 简易流程图



![image](./docs/simple_flowchart.png)

![image](./docs/chart.jpg)



## License



[![FOSSA Status](https://app.fossa.com/api/projects/git%2Bgithub.com%2FIkaros-521%2FAI-Vtuber.svg?type=large&issueType=license)](https://app.fossa.com/projects/git%2Bgithub.com%2FIkaros-521%2FAI-Vtuber?ref=badge_large&issueType=license) 



## ⭐️ Star 经历



[![Star History Chart](https://api.star-history.com/svg?repos=Ikaros-521/AI-Vtuber&type=Date)](https://star-history.com/#Ikaros-521/AI-Vtuber&Date)



## 🤝 贡献



### 🎉 鸣谢



感谢以下开发者对该项目做出的贡献：





  




### 💸 投资方



![image](./docs/投资人/invest.png)



### 🌏 合作伙伴



睿声AI：[reecho.ai](https://www.reecho.ai/)  ———— 瞬时创建 超级拟真的 人工智能克隆语音  



AIHubMix: [aihubmix.com](https://aihubmix.com/register?aff=1BMI)  ———— OpenAI,Google,通义千问等大语言模型API代理站  



​迅雷加速器：[jsq.xunlei.com](https://jsq.xunlei.com/) 新用户可以凭口令领取7x24小时的免费福利加速。兑换码 口令：ikaros  



### 🙌 赞助





  

  




## 🕳️ 黑名单



| 用户信息 | 名人名言 |

|--------|------|

| QQ：750359376 | 笑死，连点开源精神都没有 |

| QQ：378198682 | 【散播谣言】 |

| QQ：1939834860 | 【广告哥】 |

| QQ：1687246688 | 【白嫖还嘴臭】 |



[FOSSA-Status]: https://app.fossa.com/api/projects/git%2Bgithub.com%2FIkaros-521%2FAI-Vtuber.svg?type=shield&labelColor=black&issueType=license

[python]: https://img.shields.io/badge/python-3.10+-blue.svg?labelColor=black

[back-to-top]: https://img.shields.io/badge/-BACK_TO_TOP-black?style=flat-square

[github-action-release-link]: https://github.com/actions/workflows/Ikaros-521/AI-Vtuber/release.yml

[github-action-release-shield]: https://img.shields.io/github/actions/workflow/status/Ikaros-521/AI-Vtuber/release.yml?label=release&labelColor=black&logo=githubactions&logoColor=white&style=flat-square

[github-action-test-link]: https://github.com/actions/workflows/Ikaros-521/AI-Vtuber/test.yml

[github-action-test-shield]: https://img.shields.io/github/actions/workflow/status/Ikaros-521/AI-Vtuber/test.yml?label=test&labelColor=black&logo=githubactions&logoColor=white&style=flat-square

[github-codespace-link]: https://codespaces.new/Ikaros-521/AI-Vtuber

[github-codespace-shield]: https://github.com/codespaces/badge.svg

[github-contributors-link]: https://github.com/Ikaros-521/AI-Vtuber/graphs/contributors

[github-contributors-shield]: https://img.shields.io/github/contributors/Ikaros-521/AI-Vtuber?color=c4f042&labelColor=black&style=flat-square

[github-forks-link]: https://github.com/Ikaros-521/AI-Vtuber/network/members

[github-forks-shield]: https://img.shields.io/github/forks/Ikaros-521/AI-Vtuber?color=8ae8ff&labelColor=black&style=flat-square

[github-issues-link]: https://github.com/Ikaros-521/AI-Vtuber/issues

[github-issues-shield]: https://img.shields.io/github/issues/Ikaros-521/AI-Vtuber?color=ff80eb&labelColor=black&style=flat-square

[github-license-link]: https://github.com/Ikaros-521/AI-Vtuber/blob/main/LICENSE

[github-license-shield]: https://img.shields.io/github/license/Ikaros-521/AI-Vtuber?color=white&labelColor=black&style=flat-square

[github-release-link]: https://github.com/Ikaros-521/AI-Vtuber/releases

[github-release-shield]: https://img.shields.io/github/v/release/Ikaros-521/AI-Vtuber?color=369eff&labelColor=black&logo=github&style=flat-square

[github-releasedate-link]: https://github.com/Ikaros-521/AI-Vtuber/releases

[github-releasedate-shield]: https://img.shields.io/github/release-date/Ikaros-521/AI-Vtuber?labelColor=black&style=flat-square

[github-stars-link]: https://github.com/Ikaros-521/AI-Vtuber/network/stargazers

[github-stars-shield]: https://img.shields.io/github/stars/Ikaros-521/AI-Vtuber?color=ffcb47&labelColor=black&style=flat-square

[pr-welcome-link]: https://github.com/Ikaros-521/AI-Vtuber/pulls

[pr-welcome-shield]: https://img.shields.io/badge/%F0%9F%A4%AF%20PR%20WELCOME-%E2%86%92-ffcb47?labelColor=black&style=for-the-badge

[profile-link]: https://github.com/Ikaros-521