最佳Github AI工具与开源项目集锦

NeumAI: 大规模向量嵌入管理的先进框架

NeumAI: 大规模向量嵌入管理的先进框架

NeumAI是一个创新的数据平台,旨在帮助开发者利用现有数据为大型语言模型提供上下文,实现检索增强生成(RAG)。它提供了全面的RAG解决方案,可以随应用程序规模扩展,并减少集成数据连接器、嵌入模型和向量数据库等服务所需的时间。

Neum AI大语言模型数据平台向量数据库RAGGithub开源项目
React Native AI:构建跨平台移动AI应用的��全栈框架

React Native AI:构建跨平台移动AI应用的全栈框架

React Native AI是一个强大的全栈框架,专为构建跨平台移动AI应用而设计。它支持实时流式文本和聊天UI、多模型图像服务和自然语言到图像转换,以及图像处理功能,为开发者提供了丰富的AI集成选项。

React Native AIOpenAIChatGPTAnthropic ClaudeFal.aiGithub开源项目
LLM安全:探索大型语言模型的安全挑战与防御策略

LLM安全:探索大型语言模型的安全挑战与防御策略

本文深入探讨了大型语言模型(LLM)安全领域的最新研究进展、工具和资源。文章涵盖了LLM面临的各种安全威胁,包括提示注入、后门攻击等,以及相应的防御方法。同时介绍了一些实用的LLM安全工具和资源,为研究人员和开发者提供参考。

LLM SecurityWhite-box attackBlack-box attackDefenseToolsGithub开源项目
LLaMA-MoE: 基于LLaMA的混合专家模型及其持续预训练

LLaMA-MoE: 基于LLaMA的混合专家模型及其持续预训练

本文介绍了一种新型的大规模语言模型LLaMA-MoE,它基于LLaMA模型构建了混合专家(Mixture-of-Experts)架构,通过持续预训练进一步提升了模型性能,在保持较小参数量的同时实现了优秀的语言理解和生成能力。

LLaMA-MoELLaMAMoESlimPajamaSheared LLaMAGithub开源项目
MindSearch: 革新人工智能搜索引擎的未来

MindSearch: 革新人工智能搜索引擎的未来

MindSearch是一个开源的人工智能搜索引擎框架,通过模仿人类思维过程来提供深度AI搜索能力。它结合了大语言模型和多智能体技术,为用户提供类似Perplexity.ai Pro的高性能搜索体验。

MindSearchAI搜索引擎知识发现人类偏好开源框架Github开源项目
LLM-Blender: 一个创新的大语言模型集成框架

LLM-Blender: 一个创新的大语言模型集成框架

LLM-Blender是一个创新的大语言模型集成框架,通过配对排序和生成式融合技术,有效利用多个开源大语言模型的优势,实现持续优越的性能表现。

LLM-BlenderPairRankerGenFuserMixInstructPairRMGithub开源项目
Safety-Prompts:评估和提升大语言模型安全性的中文提示集

Safety-Prompts:评估和提升大语言模型安全性的中文提示集

Safety-Prompts是一个由清华大学人工智能研究院开发的中文安全提示数据集,旨在评估和改进大型语言模型的安全性。该项目提供了一系列精心设计的提示,用于测试模型在各种潜在危险场景下的表现,为AI安全研究和开发提供了宝贵的资源。

Safety-PromptsShieldLMSafetyBench大模型安全评测平台Github开源项目
LangCorn: 轻松部署LangChain模型和管道的API服务器

LangCorn: 轻松部署LangChain模型和管道的API服务器

LangCorn是一个强大的API服务器,可以让你轻松部署和服务LangChain模型和管道。它利用FastAPI框架提供高性能的请求处理,为语言处理应用提供可扩展和稳健的解决方案。

LangCornLangChainFastAPIAPI服务器模型部署Github开源项目
BricksLLM: 企业级AI网关助力LLM生产部署

BricksLLM: 企业级AI网关助力LLM生产部署

BricksLLM是一款开源的企业级AI网关,专为大型语言模型(LLM)的生产环境部署而设计。它提供了细粒度的访问控制、成本监控和使用分析等功能,支持OpenAI、Azure OpenAI、Anthropic等多种LLM服务,帮助企业更安全、高效地管理和使用AI资源。

BricksLLMLLM生产API管理数据隐私成本控制Github开源项目
Dolma:开源大规模语言模型预训练数据集与工具包

Dolma:开源大规模语言模型预训练数据集与工具包

Dolma是一个包含3万亿个token的开放数据集,以及用于创建和检查大规模语言模型预训练数据的高性能工具包。

Dolma DatasetDolma ToolkitAI2语言模型数据集管理Github开源项目
llama-node: 为Node.js打造的大型语言模型库

llama-node: 为Node.js打造的大型语言模型库

llama-node是一个为Node.js环境设计的大型语言模型库,支持LLaMA、RWKV等多种模型,让开发者能够轻松地在本地CPU上运行强大的AI模型。

LLaMA NodeNode.js推理库模型支持安装Github开源项目
Punica: 高效服务多个LoRA微调大语言模型

Punica: 高效服务多个LoRA微调大语言模型

Punica是一个创新的系统,能够以运行单个模型的成本高效地服务多个LoRA微调的大语言模型。它通过巧妙的技术设计,实现了多模型服务的高吞吐量,相比现有系统提升了12倍的性能。

PunicaLoRA模型微调高效计算多租户服务Github开源项目
LLM.report: 开源的OpenAI日志和分析平台

LLM.report: 开源的OpenAI日志和分析平台

LLM.report是一个开源的OpenAI日志和分析平台,可以记录ChatGPT API请求、分析成本并改进提示。本文详细介绍了LLM.report的主要功能、安装方法和技术栈,以及如何为该项目做出贡献。

llm.reportOpenAI日志分析用户分析开源平台Github开源项目
ToRA: 革命性的工具集成推理智能体

ToRA: 革命性的工具集成推理智能体

探索微软开发的ToRA系列模型,这是一种创新的工具集成推理智能体,专门设计用于解决复杂的数学推理问题。本文深入介绍ToRA的核心特性、训练流程、性能表现以及其在人工智能领域的重要意义。

ToRA数学推理工具集成模型发布开源Github开源项目
在CPU上运行Llama 2和其他开源LLM:本地文档问答的高效解决方案

在CPU上运行Llama 2和其他开源LLM:本地文档问答的高效解决方案

本文详细介绍了如何使用Llama 2、C Transformers、GGML和LangChain在CPU上运行量化版开源大语言模型,实现高效的本地文档问答功能。文章深入探讨了技术细节、工具选择和实现步骤,为读者提供了一个全面的指南。

Llama-2CPU推理LangChainC TransformersGGMLGithub开源项目
ReplitLM: 开源代码生成模型的新突破

ReplitLM: 开源代码生成模型的新突破

探索Replit公司开发的ReplitLM模型系列,了解其在代码生成和自然语言处理方面的创新应用,以及如何使用和微调这些强大的开源模型。

ReplitLMreplit-code-v1-3bHugging FaceLLM FoundryComposerGithub开源项目
Code Interpreter: 为AI应用添加代码解释能力的强大工具

Code Interpreter: 为AI应用添加代码解释能力的强大工具

Code Interpreter SDK是一个开源工具,可以为AI应用添加代码解释和执行能力,支持多种编程语言,并在安全的沙箱环境中运行AI生成的代码。

Code Interpreter SDKE2BAI应用安全沙箱开源Github开源项目
Canopy:基于Pinecone的开源RAG框架和上下文引擎

Canopy:基于Pinecone的开源RAG框架和上下文引擎

Canopy是一个强大的开源检索增强生成(RAG)框架和上下文引擎,基于Pinecone向量数据库构建。它提供了从文本数据处理到上下文检索的全流程RAG解决方案,让开发者能够快速构建和部署基于RAG的智能应用。

CanopyPineconeRAG开源框架上下文引擎Github开源项目
AutoGPT.js: 在浏览器中运行的自主AI助手

AutoGPT.js: 在浏览器中运行的自主AI助手

AutoGPT.js是一个开源项目,旨在将AutoGPT的强大功能带到浏览器中。通过直接在浏览器中运行,AutoGPT.js提供了更好的可访问性和隐私保护。本文将深入探讨AutoGPT.js的特性、开发过程和未来展望。

AutoGPT.js开源项目浏览器Web File System Access APIGPT代理Github
Rebuff.ai: 保护AI应用免受提示注入攻击的多层防御系统

Rebuff.ai: 保护AI应用免受提示注入攻击的多层防御系统

Rebuff.ai是一个创新的开源项目,旨在为AI应用提供多层防御机制,以抵御提示注入攻击。本文深入探讨了Rebuff的核心功能、工作原理以及如何使用和部署这一强大的安全工具。

Rebuff.aiprompt injection多层防御攻击检测AI应用保护Github开源项目