An open API service indexing awesome lists of open source software.

https://github.com/kazuhito00/minicpm-v2.6-colaboratory-sample

軽量VLMのMiniCPM-V2.6のColaboratoryサンプル
https://github.com/kazuhito00/minicpm-v2.6-colaboratory-sample

colaboratory minicpm-2-6 minicpm-v vlm

Last synced: 3 months ago
JSON representation

軽量VLMのMiniCPM-V2.6のColaboratoryサンプル

Awesome Lists containing this project

README

          

# MiniCPM-V2.6-Colaboratory-Sample
軽量VLMの[MiniCPM-V2.6](https://github.com/OpenBMB/MiniCPM-V)のColaboratoryサンプルです。

このノートブックでは以下のサンプルを実行できます。
* 画像認識でのマルチターンチャット
* 複数画像認識
* 動画認識
* コンテキスト内でのフューショット学習

![image](https://github.com/user-attachments/assets/8fe7fca9-ec48-42a8-8a9d-658be518cdf2)

# Usage
[![Open In Colab](https://colab.research.google.com/assets/colab-badge.svg)](https://colab.research.google.com/github/Kazuhito00/MiniCPM-V2.6-Colaboratory-Sample/blob/main/MiniCPM-V2.6-Colaboratory-Sample.ipynb)

Colaboratoryでノートブックを開き、上から順に実行してください。

※openbmb/MiniCPM-V-2_6 を使用する場合、L4 GPU以上のGPUが必要

 openbmb/MiniCPM-V-2_6-int4 を使用する場合、T4 GPU以上のGPUが必要

# Reference
* [OpenBMB/MiniCPM-V](https://github.com/OpenBMB/MiniCPM-V)

# Author
高橋かずひと(https://twitter.com/KzhtTkhs)

# License
MiniCPM-V2.6-Colaboratory-Sample is under [Apache 2.0 License](LICENSE).

# Note
サンプル画像は[ぱくたそ](https://www.pakutaso.com/)様の以下画像を使用しています。
* [テレビゲームで遊ぶ子どもたち](https://www.pakutaso.com/20190310081post-20065.html)
* [まったく盛り上がらない無反応パーティーをご覧ください](https://www.pakutaso.com/20240233033post-50462.html)
* [急な展開で思わず反応してしまう男女](https://www.pakutaso.com/20240245033post-50463.html)
* [「S」のアルファベット(人文字)](https://www.pakutaso.com/20161129320s-3.html)
* [「G」のアルファベット(人文字)](https://www.pakutaso.com/20161115320g.html)
* [「U」のアルファベット(人文字)](https://www.pakutaso.com/20161130320u.html)

サンプル動画は[NHKクリエイティブ・ライブラリー](https://www.nhk.or.jp/archives/creative/)様の以下動画を使用しています。
* [コアラ初来日](https://www2.nhk.or.jp/archives/movies/?id=D0002080144_00000)