Ecosyste.ms: Awesome
An open API service indexing awesome lists of open source software.
https://github.com/pixiv/ChatVRM
https://github.com/pixiv/ChatVRM
Last synced: 3 months ago
JSON representation
- Host: GitHub
- URL: https://github.com/pixiv/ChatVRM
- Owner: pixiv
- License: mit
- Created: 2023-04-21T07:44:19.000Z (about 1 year ago)
- Default Branch: main
- Last Pushed: 2024-01-10T08:16:50.000Z (6 months ago)
- Last Synced: 2024-03-26T11:18:33.249Z (3 months ago)
- Language: TypeScript
- Size: 14.1 MB
- Stars: 625
- Watchers: 16
- Forks: 163
- Open Issues: 7
-
Metadata Files:
- Readme: README.md
- License: LICENSE
Lists
- plurality - ChatVRM
- my-awesome - pixiv/ChatVRM - (TypeScript)
- my-awesome-stars - pixiv/ChatVRM - (TypeScript)
- awesome-llm-and-aigc - ChatVRM
README
# ChatVRM
ChatVRMはブラウザで簡単に3Dキャラクターと会話ができるデモアプリケーションです。
VRMファイルをインポートしてキャラクターに合わせた声の調整や、感情表現を含んだ返答文の生成などを行うことができます。
ChatVRMの各機能は主に以下の技術を使用しています。
- ユーザーの音声の認識
- [Web Speech API(SpeechRecognition)](https://developer.mozilla.org/ja/docs/Web/API/SpeechRecognition)
- 返答文の生成
- [ChatGPT API](https://platform.openai.com/docs/api-reference/chat)
- 読み上げ音声の生成
- [Koemotion/Koeiromap API](https://koemotion.rinna.co.jp/)
- 3Dキャラクターの表示
- [@pixiv/three-vrm](https://github.com/pixiv/three-vrm)
## デモ
Glitchでデモを公開しています。
[https://chatvrm.glitch.me](https://chatvrm.glitch.me)
## 実行
ローカル環境で実行する場合はこのリポジトリをクローンするか、ダウンロードしてください。
```bash
git clone [email protected]:pixiv/ChatVRM.git
```
必要なパッケージをインストールしてください。
```bash
npm install
```
パッケージのインストールが完了した後、以下のコマンドで開発用のWebサーバーを起動します。
```bash
npm run dev
```
実行後、以下のURLにアクセスして動作を確認して下さい。
[http://localhost:3000](http://localhost:3000)
---
## ChatGPT API
ChatVRMでは返答文の生成にChatGPT APIを使用しています。
ChatGPT APIの仕様や利用規約については以下のリンクや公式サイトをご確認ください。
- [https://platform.openai.com/docs/api-reference/chat](https://platform.openai.com/docs/api-reference/chat)
- [https://openai.com/policies/api-data-usage-policies](https://openai.com/policies/api-data-usage-policies)
## Koeiromap API
ChatVRMでは返答文の音声読み上げにKoemotionのKoeiromap APIを使用しています。
Koeiromap APIの仕様や利用規約については以下のリンクや公式サイトをご確認ください。
- [https://koemotion.rinna.co.jp/](https://koemotion.rinna.co.jp/)