语言模型工具集锦:AI工具、网站、应用与开源项目精选

awesome-multi-modal-reinforcement-learning

awesome-multi-modal-reinforcement-learning

多模态强化学习视觉强化学习

多模态强化学习前沿论文与研究资源汇总

loft

loft

LOFT长上下文基准

探索百万级token长文本处理的前沿基准

CoT-Collection

CoT-Collection

CoT-Collection思维链

思维链微调数据集提升语言模型少样本学习能力

UltraFastBERT

UltraFastBERT

UltraFastBERT语言模型

指数级加速的BERT语言模型训练与推理方案

mamba-minimal

mamba-minimal

MambaPyTorch实现

单文件PyTorch实现的Mamba模型

direct-preference-optimization

direct-preference-optimization

DPO语言模型

DPO算法实现语言模型的偏好数据优化

ngram

ngram

n-gram语言模型

N元语言模型实践:机器学习基础与自然语言处理入门

crab

crab

开源项目CRAB

多模态语言模型代理基准测试框架

MiniChain

MiniChain

MiniChain语言模型

MiniChain 简化大语言模型编程的轻量级库

EasyContext

EasyContext

EasyContext长上下文模型

优化语言模型上下文长度至百万级的开源项目

open-instruct

open-instruct

模型微调语言模型

开源指令微调大语言模型的完整工具集

llama-zip

llama-zip

llama-zip压缩工具

利用大语言模型实现高效文本压缩的开源工具

TinyLlama

TinyLlama

TinyLlama语言模型

3万亿token训练的小型1.1B参数语言模型

openlogprobs

openlogprobs

openlogprobs语言模型

Python库实现语言模型API对数概率提取

dspy

dspy

DSPy语言模型

自优化语言模型程序框架

alpaca_farm

alpaca_farm

AlpacaFarm人工智能

仿真框架助力人类反馈学习研究

nanoGPT

nanoGPT

nanoGPTGPT训练

简洁高效的中型GPT模型训练框架

Llama3-Chinese-Chat

Llama3-Chinese-Chat

Llama3Chinese

基于Llama 3的中英双语优化大语言模型

MobileLLM

MobileLLM

MobileLLM语言模型

轻量高效的移动设备语言模型

aphrodite-engine

aphrodite-engine

Aphrodite语言模型

开源高性能语言模型推理引擎