embedchainjs

embedchainjs

帮助创建基于任意数据集的LLM聊天机器人的框架

EmbedchainJS框架让你能轻松创建基于任意数据集的LLM聊天机器人。框架涵盖数据嵌入、分块、存储等完整流程,支持多种数据格式。集成OpenAI嵌入模型和ChatGPT API,兼容OpenAI 3.X版本,并配备Chroma向量数据库,帮助开发者大幅缩短开发时间。

embedchainjsChromaOpenAINaval RavikantChatbotGithub开源项目

项目简介

embedchainjs 是一个用 JavaScript 编写的框架,专为简化创建基于大型语言模型(LLM)数据集的聊天机器人而设计。该框架的目标是使用户能够在任何数据集上轻松构建功能强大的机器人,利用高级智能技术来处理复杂的任务。embedchainjsembedchain 项目的 JavaScript 版本,而如果需要 Python 版本,可以访问 embedchain-python

项目工作原理

embedchainjs 抽象了加载数据集、分块、创建嵌入并在向量数据库中存储的整个过程。用户可以使用 .add.addLocal 函数添加单个或多个数据集,然后利用 .query 函数在所添加的数据集中查找答案。例如,如果用户想创建一个关于 Naval Ravikant 的机器人,只需提供他的两篇博客文章的链接以及一对问答对,embedchainjs 就能为用户创建一个相应的机器人。

快速开始

安装

  1. 确保已安装相应的软件包,通过以下命令进行安装:

    npm install embedchain && npm install -S openai@^3.3.0
  2. 当前版本只兼容 OpenAI 的 3.X 版本。如果使用 4.X 版本,将会遇到 ChromaDB 错误。

  3. 安装 dotenv 包,并在根目录的 .env 文件中配置 OPENAI_API_KEY

  4. 按照链接安装 Docker,用于运行 Chroma 向量数据库。

  5. 使用以下命令设置 Chroma 容器并在 Docker 中运行:

    git clone https://github.com/chroma-core/chroma.git cd chroma docker-compose up -d --build

使用方式

  • 使用 OpenAI 的嵌入模型创建数据块的嵌入,并使用 ChatGPT API 作为 LLM 来给出相关文档的答案。
  • 配置好 OpenAI 的 API 密钥后,利用 App 类的 .add 函数添加数据集,并通过 .query 函数获得查询的答案。

以下是示例代码:

const dotenv = require("dotenv"); dotenv.config(); const { App } = require("embedchain"); async function testApp() { const navalChatBot = await App(); // 添加在线资源 await navalChatBot.add("web_page", "https://nav.al/feedback"); await navalChatBot.add("web_page", "https://nav.al/agi"); await navalChatBot.add( "pdf_file", "https://navalmanack.s3.amazonaws.com/Eric-Jorgenson_The-Almanack-of-Naval-Ravikant_Final.pdf" ); // 添加本地资源 await navalChatBot.addLocal("qna_pair", [ "Who is Naval Ravikant?", "Naval Ravikant 是一位印度裔美国企业家和投资者。", ]); const result = await navalChatBot.query( "Naval 认为人类在理解解释或概念方面具有哪些独特的能力?" ); console.log(result); // 输出答案:Naval 认为人类在理解解释或概念时,具备在此物理现实中最大程度的理解能力。 } testApp();

支持格式

embedchainjs 支持以下数据类型:

  • PDF 文件pdf_file
  • 网页web_page
  • 问答对qna_pair

如果需要支持其他格式,可以在 GitHub 上创建问题,我们将考虑添加。

测试

在应用程序中嵌入数据之前,建议使用 dryRun 方法进行测试,以确保实现能够接收正确的文档,这样可以减少不必要的资源消耗。

底层技术

embedchain 用到的技术包括:

团队

作者

维护者

对于开发人员和技术爱好者而言,embedchainjs 提供了一种快速且高效的方式来构建在任何数据集上运行的聊天机器人,简化了复杂的过程,极大地降低了创建数据驱动机器人应用的技术门槛。

编辑推荐精选

Refly.AI

Refly.AI

最适合小白的AI自动化工作流平台

无需编码,轻松生成可复用、可变现的AI自动化工作流

酷表ChatExcel

酷表ChatExcel

大模型驱动的Excel数据处理工具

基于大模型交互的表格处理系统,允许用户通过对话方式完成数据整理和可视化分析。系统采用机器学习算法解析用户指令,自动执行排序、公式计算和数据透视等操作,支持多种文件格式导入导出。数据处理响应速度保持在0.8秒以内,支持超过100万行数据的即时分析。

AI工具酷表ChatExcelAI智能客服AI营销产品使用教程
TRAE编程

TRAE编程

AI辅助编程,代码自动修复

Trae是一种自适应的集成开发环境(IDE),通过自动化和多元协作改变开发流程。利用Trae,团队能够更快速、精确地编写和部署代码,从而提高编程效率和项目交付速度。Trae具备上下文感知和代码自动完成功能,是提升开发效率的理想工具。

AI工具TraeAI IDE协作生产力转型热门
AIWritePaper论文写作

AIWritePaper论文写作

AI论文写作指导平台

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

AI辅助写作AI工具AI论文工具论文写作智能生成大纲数据安全AI助手热门
博思AIPPT

博思AIPPT

AI一键生成PPT,就用博思AIPPT!

博思AIPPT,新一代的AI生成PPT平台,支持智能生成PPT、AI美化PPT、文本&链接生成PPT、导入Word/PDF/Markdown文档生成PPT等,内置海量精美PPT模板,涵盖商务、教育、科技等不同风格,同时针对每个页面提供多种版式,一键自适应切换,完美适配各种办公场景。

AI办公办公工具AI工具博思AIPPTAI生成PPT智能排版海量精品模板AI创作热门
潮际好麦

潮际好麦

AI赋能电商视觉革命,一站式智能商拍平台

潮际好麦深耕服装行业,是国内AI试衣效果最好的软件。使用先进AIGC能力为电商卖家批量提供优质的、低成本的商拍图。合作品牌有Shein、Lazada、安踏、百丽等65个国内外头部品牌,以及国内10万+淘宝、天猫、京东等主流平台的品牌商家,为卖家节省将近85%的出图成本,提升约3倍出图效率,让品牌能够快速上架。

iTerms

iTerms

企业专属的AI法律顾问

iTerms是法大大集团旗下法律子品牌,基于最先进的大语言模型(LLM)、专业的法律知识库和强大的智能体架构,帮助企业扫清合规障碍,筑牢风控防线,成为您企业专属的AI法律顾问。

SimilarWeb流量提升

SimilarWeb流量提升

稳定高效的流量提升解决方案,助力品牌曝光

稳定高效的流量提升解决方案,助力品牌曝光

Sora2视频免费生成

Sora2视频免费生成

最新版Sora2模型免费使用,一键生成无水印视频

最新版Sora2模型免费使用,一键生成无水印视频

Transly

Transly

实时语音翻译/同声传译工具

Transly是一个多场景的AI大语言模型驱动的同声传译、专业翻译助手,它拥有超精准的音频识别翻译能力,几乎零延迟的使用体验和支持多国语言可以让你带它走遍全球,无论你是留学生、商务人士、韩剧美剧爱好者,还是出国游玩、多国会议、跨国追星等等,都可以满足你所有需要同传的场景需求,线上线下通用,扫除语言障碍,让全世界的语言交流不再有国界。

下拉加载更多