最佳自然语言处理工具集合 - 实用AI工具推荐

自然语言处理

quote-model-BERTm-v1

quote-model-BERTm-v1

模型BERT

BERT多语言模型在引用识别任务上的高性能微调应用

opensearch-neural-sparse-encoding-doc-v2-distill

opensearch-neural-sparse-encoding-doc-v2-distill

模型OpenSearch

神经稀疏编码模型优化文档检索效率

gte-small

gte-small

模型Github

轻量级句子嵌入模型支持多种自然语言处理应用

Mixtral-8x7B-Instruct-v0.1

Mixtral-8x7B-Instruct-v0.1

Mixtral-8x7BHuggingface

多语言稀疏混合专家大规模语言模型

rubert-tiny2

rubert-tiny2

文本相似度Huggingface

优化的俄语自然语言处理模型

scibert_scivocab_uncased

scibert_scivocab_uncased

SciBERTGithub

为科学文本优化的预训练BERT语言模型

BLEURT-20-D12

BLEURT-20-D12

模型PyTorch

高效评估自然语言生成质量的深度学习模型

bert_uncased_L-2_H-128_A-2

bert_uncased_L-2_H-128_A-2

模型压缩知识蒸馏

BERT微型模型:适用于资源受限环境的NLP解决方案

other

other

模型Github

高性能开源自然语言处理框架

stella_en_400M_v5

stella_en_400M_v5

模型Github

性能卓越的英语句子相似度计算模型

Llama-3.2-1B

Llama-3.2-1B

模型Github

Meta推出多语言大规模语言模型 支持多种商业和研究场景

TinyLlama-1.1B-Chat-v1.0

TinyLlama-1.1B-Chat-v1.0

模型TinyLlama

基于Llama 2架构的轻量级对话模型

infoxlm-large

infoxlm-large

InfoXLM模型

信息论驱动的跨语言预训练模型

m2m100_418M

m2m100_418M

M2M100Huggingface

实现100种语言间9900种直接翻译的多语言模型

tiny-dummy-qwen2

tiny-dummy-qwen2

模型人工智能

基于Transformers的精简Qwen2模型

all-roberta-large-v1

all-roberta-large-v1

模型向量嵌入

基于RoBERTa的大规模句子嵌入模型

Llama-3.2-1B-Instruct

Llama-3.2-1B-Instruct

Huggingface模型

Meta开发的多语言大规模语言模型 适用于对话和检索任务

llava-v1.5-7b

llava-v1.5-7b

模型Github

融合视觉与语言的开源多模态AI模型

deid_roberta_i2b2

deid_roberta_i2b2

I2B2RoBERTa

RoBERTa模型用于医疗记录去标识化

ms-marco-MiniLM-L-12-v2

ms-marco-MiniLM-L-12-v2

Cross-Encoder模型

跨编码器模型实现高效信息检索与段落排序