langchain4j-aideepin

入门指南

阅读英文版

LangChain4j-AIDeepin 基于 ChatGPT 等大语言模型与 Langchain4j 等应用框架实现，开源、可离线部署的检索增强生成(RAG)项目。

如果该项目对您有帮助，欢迎点赞

代码仓库地址：github gitee

前端项目：

用户端WEB：langchain4j-aideepin-web
- github
- gitee
管理端WEB：langchain4j-aideepin-admin
- github
- gitee

体验网址

http://www.aideepin.com

功能点

注册与登录
多会话（多角色）
图片生成（文生图、修图、图生图）
提示词
额度控制
基于大模型的知识库（RAG）
基于大模型的搜索（RAG）
多模型随意切换
多搜索引擎随意切换

接入的模型：

ChatGPT 3.5
通义千问
文心一言
ollama
DALL-E 2

接入的搜索引擎

谷歌

必应（待实现）

百度（待实现）

技术栈

该仓库为后端服务

技术栈：

jdk17
springboot3.0.5
langchain4j(LangChain的Java版本)
Postgresql(需要安装pgvector扩展)

前端技术栈：

vue3
vite
typescript
pnpm
pinia
naiveui

如何部署

初始化

a. 初始化数据库

创建数据库aideepin
执行docs/create.sql

配置模型(至少设置一个) 或者使用管理端在界面上配置

配置AI平台

-- openai的secretKey
update adi_sys_config set value = '{"secret_key":"my_openai_secret_key"}' where name = 'openai_setting';

-- 灵积大模型平台的apiKey
update adi_sys_config set value = '{"api_key":"my_dashcope_api_key"}' where name = 'dashscope_setting';

-- 千帆大模型平台的配置
update adi_sys_config set value = '{"api_key":"my_qianfan_api_key","secret_key":"my_qianfan_secret_key"}' where name = 'qianfan_setting';

-- ollama的配置
update adi_sys_config set value = '{"base_url":"my_ollama_base_url"}' where name = 'ollama_setting';

启用AI平台下的模型或新增模型

-- 启用模型
update adi_ai_model set is_enable = true where name = 'gpt-3.5-turbo';
update adi_ai_model set is_enable = true where name = 'dall-e-2';
update adi_ai_model set is_enable = true where name = 'qwen-turbo';
update adi_ai_model set is_enable = true where name = 'ernie_speed';
update adi_ai_model set is_enable = true where name = 'tinydolphin';

-- 添加新模型
INSERT INTO adi_ai_model (name, type, platform, is_enable) VALUES ('vicuna', 'text', 'ollama', true);

填充搜索引擎的配置

Google的配置

update adi_sys_config set value = '{"url":"https://www.googleapis.com/customsearch/v1","key":"从cloud.google.com获取的密钥","cx":"从programmablesearchengine.google.com获取的cx"}' where name = 'google_setting';

b. 修改配置文件

postgresql: 在application-[dev|prod].xml中修改spring.datasource
redis: 在application-[dev|prod].xml中修改spring.data.redis
mail: 在application.xml中修改spring.mail

编译及运行

进入项目
```
cd langchain4j-aideepin
```
打包：

mvn clean package -Dmaven.test.skip=true

运行

jar包启动：

cd adi-bootstrap/target
nohup java -jar -Xms768m -Xmx1024m -XX:+HeapDumpOnOutOfMemoryError adi-bootstrap-0.0.1-SNAPSHOT.jar --spring.profiles.active=[dev|prod] dev/null 2>&1 &

docker启动

cd adi-bootstrap
docker build . -t aideepin:0.0.1
docker run -d \
  --name=aideepin \
  -e APP_PROFILE=[dev|prod] \
  -v="/data/aideepin/logs:/data/logs" \
  aideepin:0.0.1

待办：

高级RAG
- 查询压缩 √
- 查询路由
- Re-rank：支持本地rerank模型
图片模型：
- DALL-E 2 / DALL-E 3 √
- 聊天视图 √
- 画廊视图 √
知识库：
- 可设置文档召回数量
  - 自动调整（根据LLM的上下文窗口大小） √
  - 手动调整 √
- 可设置文档召回最低分数 √
- 可设置切块时内容重叠数量 √
- 可设置请求模型时的temperature √
- 严格模式与非严格模式 √
- 答案来源 √
- 支持拉取在线文档
- FAQ
- 评论
多模态支持
工具
- FAQ提取
- 文档对话
- 翻译
搜索引擎
- Google √
- Bing
- 百度