最佳Github AI工具与开源项目集锦

AutoLLM: 简化大语言模型应用开发的强大工具

AutoLLM: 简化大语言模型应用开发的强大工具

AutoLLM是一个开源项目,旨在简化基于大语言模型的应用开发过程。它支持100多种LLM模型和20多种向量数据库,只需几行代码即可构建RAG应用和API。本文将详细介绍AutoLLM的主要特性、使用方法及其在AI应用开发中的优势。

AutoLLMLLMAPIFastAPIRAGGithub开源项目
Lunary: 开源LLM开发工具平台的全面解析

Lunary: 开源LLM开发工具平台的全面解析

Lunary是一个为大型语言模型(LLM)应用提供可观测性、提示管理和评估的开源工具包。本文深入介绍了Lunary的主要功能、集成方式、使用场景以及对LLM开发的重要价值。

lunaryLLM观察性提示管理数据集Github开源项目
PromptCraft-Robotics: 探索大语言模型在机器人领域的应用

PromptCraft-Robotics: 探索大语言模型在机器人领域的应用

PromptCraft-Robotics是一个由微软推出的开源项目,旨在探索大语言模型在机器人领域的应用。该项目为研究人员和开发者提供了一个共享和测试有趣提示示例的平台,同时还提供了一个集成ChatGPT的机器人模拟器。

PromptCraft-RoboticsChatGPTOpenAI机器人仿真器Github开源项目
SeaGOAT:AI时代的本地语义代码搜索引擎

SeaGOAT:AI时代的本地语义代码搜索引擎

SeaGOAT是一款创新的本地代码搜索工具,利用向量嵌入技术实现语义搜索,为开发者提供更智能、更精准的代码查找体验。本文深入介绍SeaGOAT的特性、使用方法及其在现代软件开发中的重要性。

SeaGOAT代码搜索引擎Python向量嵌入本地搜索Github开源项目
AWS GenAI LLM Chatbot: 多模型多RAG驱动的聊天机器人解决方案

AWS GenAI LLM Chatbot: 多模型多RAG驱动的聊天机器人解决方案

本文介绍了AWS GenAI LLM Chatbot项目,这是一个模块化、全面的解决方案,用于在AWS上部署多LLM和多RAG驱动的聊天机器人。该项目支持多种大型语言模型和多模态语言模型,提供了丰富的功能和工具,可帮助开发人员快速构建和定制自己的AI聊天应用。

AWS CDKAmazon BedrockAmazon SageMakerLarge Language Models多模态语言模型Github开源项目
NLUX: 强大的对话式AI JavaScript库

NLUX: 强大的对话式AI JavaScript库

NLUX是一个开源的React和JavaScript库,用于构建对话式AI界面。它使开发者能够轻松地构建由大型语言模型(LLMs)驱动的Web应用程序,只需几行代码就可以添加对话式AI功能并与您喜欢的AI模型进行交互。

NLUXReactJavaScript库对话式AI开源Github开源项目
xLSTM: 扩展长短期记忆网络的革新性突破

xLSTM: 扩展长短期记忆网络的革新性突破

xLSTM是一种新型递归神经网络架构,基于原始LSTM的思想,通过指数门控和矩阵记忆等创新设计,克服了LSTM的局限性,在语言建模等任务上展现出超越Transformer和状态空间模型的潜力。

xLSTMPyTorchsLSTMmLSTM语言模型Github开源项目
Axflow: 构建强大自然语言应用的TypeScript框架

Axflow: 构建强大自然语言应用的TypeScript框架

Axflow是一个用于开发AI应用的TypeScript框架,提供了一系列模块化工具,帮助开发者更轻松地构建基于大语言模型的应用程序。

AxflowTypeScriptAI应用开发自然语言处理框架Github开源项目
Chameleon: 大型语言模型的即插即用组合推理框架

Chameleon: 大型语言模型的即插即用组合推理框架

Chameleon是一个创新的组合推理框架,旨在增强大型语言模型的能力,克服其固有局限性。本文深入探讨了Chameleon的工作原理、应用场景及其在科学问答和表格数学问题上的卓越表现。

ChameleonGPT-4ScienceQATabMWPLarge Language ModelsGithub开源项目
LLM Guard: 为大型语言模型交互提供全面安全保护

LLM Guard: 为大型语言模型交互提供全面安全保护

LLM Guard是一款由Protect AI开发的综合性工具,旨在加强大型语言模型(LLMs)的安全性。通过提供输入净化、有害语言检测、数据泄露防护以及抵御提示注入攻击等功能,LLM Guard确保您与LLMs的交互安全可靠。

LLM GuardProtect AI安全大语言模型数据泄漏Github开源项目
Infinity: 高性能文本嵌入和重排序API

Infinity: 高性能文本嵌入和重排序API

Infinity是一个高吞吐量、低延迟的REST API,用于提供文本嵌入、重排序模型和CLIP服务。它支持部署任何来自HuggingFace的嵌入、重排序、CLIP和句子转换器模型,并提供快速推理后端和多模态、多模型支持。

Infinity高吞吐量低延迟向量嵌入REST APIGithub开源项目
spacy-llm: 集成大型语言模型到结构化NLP管道中

spacy-llm: 集成大型语言模型到结构化NLP管道中

spacy-llm是一个将大型语言模型(LLMs)集成到spaCy中的包,它提供了一个模块化系统,用于快速原型设计和提示工程,可以将非结构化的LLM响应转换为各种NLP任务的稳健输出,无需训练数据。

spacy-llmspaCyLarge Language ModelsNLPOpenAIGithub开源项目
大模型(LLMs)算法工程师面试题解析与准备指南

大模型(LLMs)算法工程师面试题解析与准备指南

本文深入解析了大模型(LLMs)算法工程师的常见面试题,并提供了全面的准备指南,帮助读者掌握核心知识点,提高面试成功率。

awesome_LLMs_interview_notes侵权Apache-2.0 license道歉付费观看Github开源项目
garak: 一个强大的大语言模型漏洞扫描工具

garak: 一个强大的大语言模型漏洞扫描工具

garak是一个开源的大语言模型漏洞扫描工具,可以检测模型的幻觉、数据泄露、提示注入等多种安全问题。本文详细介绍了garak的功能特性、使用方法和工作原理。

garakLLM漏洞扫描prompt injection数据泄露Github开源项目
Cradle框架:赋能基础智能体实现通用计算机控制

Cradle框架:赋能基础智能体实现通用计算机控制

Cradle框架是一种创新的人工智能技术,旨在使基础模型能够通过统一的人机交互界面执行复杂的计算机任务。本文深入探讨了Cradle的核心功能、应用场景及其在推动通用计算机控制方面的重要意义。

CradleAI计算机控制API密钥Python环境Github开源项目
fastRAG: 高效的检索增强生成框架

fastRAG: 高效的检索增强生成框架

fastRAG是一个由英特尔实验室开发的研究框架,旨在构建高效和优化的检索增强生成管道,集成了最先进的大语言模型和信息检索技术。它为研究人员和开发人员提供了一套全面的工具,用于推进检索增强生成技术的发展。

fastRAGHaystackLLMONNX RuntimeColBERTGithub开源项目
Distributed Llama: 在家庭设备上运行大型语言模型的革命性方案

Distributed Llama: 在家庭设备上运行大型语言模型的革命性方案

Distributed Llama是一个开源项目,通过张量并行化技术,实现了在多台普通设备上分布式运行大型语言模型。它让家用设备也能运行如Llama 3 405B这样的超大模型,为AI爱好者和研究者提供了一个经济实惠的解决方案。

Distributed LlamaLlama 3Tensor parallelismPython 3TCP socketsGithub开源项目
RWKV.cpp: 高效的CPU推理实现RWKV语言模型

RWKV.cpp: 高效的CPU推理实现RWKV语言模型

RWKV.cpp是一个专注于CPU推理的RWKV语言模型实现,支持INT4/INT5/INT8和FP16量化,大幅提升了RWKV模型在CPU上的推理效率。

RWKVggmlcuBLAShipBLASPythonGithub开源项目
TLM: 本地化的命令行智能助手,由 CodeLLaMa 驱动

TLM: 本地化的命令行智能助手,由 CodeLLaMa 驱动

TLM 是一款基于 CodeLLaMa 的本地化命令行智能助手,无需 API 密钥和网络连接,为用户提供高效的命令行建议和解释功能。本文深入介绍了 TLM 的特性、安装方法和使用方式,展示了其在提升命令行操作效率方面的优势。

tlmCodeLLaMa命令行助手离线模式跨平台支持Github开源项目
Gorilla CLI: 让命令行交互更智能、更简单

Gorilla CLI: 让命令行交互更智能、更简单

Gorilla CLI是一款由UC Berkeley开发的创新命令行工具,它利用大语言模型的能力,让用户可以用自然语言描述任务,自动生成相应的命令行指令。无需记忆复杂的命令参数,Gorilla CLI让命令行操作变得前所未有的简单直观。

Gorilla CLIUC Berkeley命令行工具API集成用户隐私Github开源项目