https://github.com/connectai-e/feishu-vector-knowledge-management

🎒 私有知识库机器人，基于向量数据库和openai实现。
https://github.com/connectai-e/feishu-vector-knowledge-management

chatgpt chatgpt-api chatgpt-bot connect-ai feishu-bot go golang openai

Last synced: 2 months ago
JSON representation

🎒 私有知识库机器人，基于向量数据库和openai实现。

• Host: GitHub
• URL: https://github.com/connectai-e/feishu-vector-knowledge-management
• Owner: ConnectAI-E
• License: gpl-3.0
• Created: 2023-04-13T10:29:01.000Z (almost 2 years ago)
• Default Branch: main
• Last Pushed: 2023-05-28T02:40:33.000Z (over 1 year ago)
• Last Synced: 2024-11-09T10:33:31.869Z (3 months ago)
• Topics: chatgpt, chatgpt-api, chatgpt-bot, connect-ai, feishu-bot, go, golang, openai
• Language: Go
• Homepage: https://www.connectai-e.com
• Size: 7.27 MB
• Stars: 140
• Watchers: 6
• Forks: 26
• Open Issues: 4
• Metadata Files:
  • Readme: README.md
  • License: LICENSE

Awesome Lists containing this project

README

        




    





   Feishu-OpenAI × 私有知识库







    🚀 Feishu Vector Knowledge Management 🚀



## 👻 机器人功能

除了 [Feishu-OpenAI](https://github.com/ConnectAI-E/Feishu-OpenAI) 支持内功能外，

增加了知识库功能，其中具体有：

💬 知识库问答：使用 /faq 或 知识库 作为查询指令

🗣 知识库 CSV 导入：支持导入 CSV 格式向量数据

🎭 知识库 CSV 创建：支持重建 CSV 格式向量文件，降低 token 成本 

📝 知识库管理：支持导入 URL 网页、文件数据 🚧

🔒 知识库管理：支持查询数据库记录并增删改记录 🚧

🍊 缓存问题向量：降低 token 成本，减少重复查询

## 🌟 项目特点

- 🥒 基于 Embeddings + Qdrant 查询上下文

## 项目部署

### 项目初始化

```sh

git clone https://github.com/ConnectAI-E/Feishu-Vector-Knowledge-Management

cd Feishu-Vector-Knowledge-Management

```

### 导入数据

```sh

# 切割qa数据为csv文件 demo:raw.txt 

go run ./cmd - prepare split -f ./data/demo/raw.txt -o ./data/demo/raw.csv

# 将csv文件转换为向量数据(调用openai-embedding-api), raw.csv 必须包含title和content字段

go run ./cmd - prepare analyze -f ./data/demo/raw.csv -o ./data/demo/vector.csv

# 导入数据csv(向量)数据

go run ./cmd - prepare import -f ./data/demo/vector.csv

```

#### CSV 文件表头

```csv

id,url,title,content,title_vector,content_vector,vector_id

```

[样例数据下载](./data/demo/data.csv)

#### Qdrant 接口调试测试

在线swagger文档：https://ui.qdrant.tech/#/

#### 部署

    docker-compose 部署




编辑 docker-compose.yaml，通过 environment 配置相应环境变量（或者通过 volumes 挂载相应配置文件），然后运行下面的命令即可

```bash

# 构建镜像

docker compose build

# 启动服务

docker compose up -d

# 停止服务

docker compose down

```

事件回调地址: http://IP:9000/webhook/event

卡片回调地址: http://IP:9000/webhook/card

## 更多交流

更多结节请访问项目 [Feishu-OpenAI](https://github.com/ConnectAI-E/Feishu-OpenAI)

## 赞助感谢

友情感谢 'Find My Ai' 提供的部分经费赞助！