https://github.com/shooontan/modelv
This web app allows us to become a virtual model with a webcam and a browser.
https://github.com/shooontan/modelv
mmd opencvjs virtual-model
Last synced: 11 months ago
JSON representation
This web app allows us to become a virtual model with a webcam and a browser.
- Host: GitHub
- URL: https://github.com/shooontan/modelv
- Owner: shooontan
- Created: 2020-04-30T07:37:15.000Z (about 6 years ago)
- Default Branch: master
- Last Pushed: 2020-05-15T17:52:41.000Z (about 6 years ago)
- Last Synced: 2025-04-01T09:47:15.473Z (about 1 year ago)
- Topics: mmd, opencvjs, virtual-model
- Language: TypeScript
- Homepage: https://modelv.mahoroi.com
- Size: 13.2 MB
- Stars: 7
- Watchers: 0
- Forks: 2
- Open Issues: 1
-
Metadata Files:
- Readme: README.md
Awesome Lists containing this project
README
# ModelV.
webカメラとブラウザでバーチャルモデルになれるwebアプリです。
このwebアプリでは2つのタブ(もしくはブラウザ)を使います。
1つ目のタブは、webカメラで撮影した映像からフェイストラッキングを行うために使われます。現在は顔の向きと口の開閉動作に対応しています。ここで取得・処理されたデータは2つ目のタブに送信されます。
2つ目のタブでは、1つ目のタブから送信されたトラッキングデータをもとにヴァーチャルモデルを描画するために使われます。
## Usage
1. モデルの読み込み
「モデル」ページに移動して、モデルデータを読み込みます。現在対応しているモデルはMMDのみです。
2. 接続設定
新規タブ(もしくは別ブラウザ)を開いて「操作パネル」ページに移動します。「コネクトキーを生成する」ボタンからコネクトキーを取得します。
取得したコネクトキーを「モデル」ページのフォームに入力すると、リターンキーが生成されます。このリターンキーは「操作パネル」ページのフォームに入力します。
「操作パネル」ページを開いているタブと「モデル」ページを開いているタブの接続が確立されると、接続ステータスが「接続中」になります。
3. webカメラ起動
「操作パネル」ページの「カメラ起動」ボタンからカメラを起動します。トラッキングデータに連動してモデルが動きます。
## Development
```bash
# clone this repository
git clone https://github.com/shooontan/modelv.git
cd modelv
```
### Download static files
```bash
bash scripts/dlfl.sh
```
### Build OpenCV.js
```bash
git clone https://github.com/opencv/opencv.git
# git rev-parse HEAD
# f19d0ae41d112de1e8aba11717462dd1b118342f
bash scripts/build-opencv.sh
```
### Develop app
```bash
# install
npm install
# develop localhost:3000
npm run dev
# production build
npm run build
# start localhost:3000
npm start
```