最佳自然语言处理工具集合 - 实用AI工具推荐

自然语言处理

simple-hierarchical-transformer

simple-hierarchical-transformer

Transformer深度学习

分层Transformer模型探索多层次预测编码

label-sleuth

label-sleuth

Label Sleuth文本标注

无代码系统助力快速构建文本分类模型

infini-transformer

infini-transformer

Infini-Transformer自然语言处理

针对无限长度上下文设计的高效Transformer模型

recurrent-memory-transformer-pytorch

recurrent-memory-transformer-pytorch

Recurrent Memory TransformerPyTorch

Recurrent Memory Transformer的PyTorch实现助力超长序列处理

tuned-lens

tuned-lens

Tuned Lenstransformer

变压器模型分层预测机制的解析工具

llama_cpp.rb

llama_cpp.rb

llama.cppRuby

Ruby语言的LLaMA模型集成工具

llama

llama

LLaMA机器翻译

Facebook开源语言模型推进机器翻译研究

KoAlpaca

KoAlpaca

KoAlpaca自然语言处理

开源韩语大语言模型,支持多种规模和部署方式

LongWriter

LongWriter

LongWriter长文本生成

将长文本生成推向新高度 超越传统模型局限

LLM-Tool-Survey

LLM-Tool-Survey

大语言模型工具学习

大型语言模型工具学习调查研究

MachineLearning-QandAI-book

MachineLearning-QandAI-book

机器学习人工智能

深入探讨机器学习和人工智能领域的30个核心问题

embeddings

embeddings

词嵌入自然语言处理

高效加载和查询预训练词向量的Python库

3D-VisTA

3D-VisTA

3D-VisTA计算机视觉

简化3D视觉和文本对齐的新型预训练模型

Seq2SeqSharp

Seq2SeqSharp

Seq2SeqSharp深度神经网络

基于.NET的跨平台深度学习框架,支持多种神经网络任务

mgpt

mgpt

mGPT多语言模型

支持61种语言的多语言生成式预训练模型

amrlib

amrlib

AMR自然语言处理

将AMR解析、生成和可视化简化的Python库

OmniFusion

OmniFusion

OmniFusion多模态AI模型

整合多模态数据的先进人工智能系统

rust-tokenizers

rust-tokenizers

rust-tokenizers语言模型

Rust实现的高性能自然语言处理分词器

BERT-GPU

BERT-GPU

BERT多GPU预训练

单机多GPU加速BERT预训练的开源实现

transfomers-silicon-research

transfomers-silicon-research

TransformerBERT

Transformer模型硬件实现研究进展