最佳自然语言处理工具集合 - 实用AI工具推荐

自然语言处理

bert-base-dutch-cased

bert-base-dutch-cased

模型Github

BERTje 格罗宁根大学开发的荷兰语BERT模型

nli-distilroberta-base-v2

nli-distilroberta-base-v2

模型向量嵌入

sentence-transformers模型实现句子向量化和语义分析

gte-Qwen2-7B-instruct

gte-Qwen2-7B-instruct

模型Github

Qwen2架构驱动的多语言句子嵌入模型

sentence-t5-base

sentence-t5-base

模型sentence-t5-base

基于T5架构的句子编码模型用于文本相似度分析

pythia-6.9b

pythia-6.9b

Huggingface模型

促进大规模语言模型可解释性研究的开源工具

T5_Paraphrase_Paws

T5_Paraphrase_Paws

文本生成Huggingface

T5模型驱动的英语句子改写工具

madlad400-3b-mt

madlad400-3b-mt

模型开源项目

基于T5架构的多语言机器翻译模型

gte-large-zh

gte-large-zh

模型gte-large-zh

中文语义相似度与检索的卓越表现模型

vietnamese-embedding

vietnamese-embedding

模型PhoBERT

基于PhoBERT的越南语句嵌入模型提升多项NLP任务性能

deepset-mxbai-embed-de-large-v1

deepset-mxbai-embed-de-large-v1

模型嵌入模型

高性能德语句子嵌入模型

mbart-large-50-many-to-one-mmt

mbart-large-50-many-to-one-mmt

多语言机器翻译模型

支持50种语言直接互译的多语言机器翻译模型

Llama-2-7b-hf

Llama-2-7b-hf

模型Llama 2

Meta开发的开源语言模型 支持多种参数规模和商业应用

layoutlm-document-qa

layoutlm-document-qa

模型Github

LayoutLM文档智能问答模型

Meta-Llama-3-8B-Instruct-GGUF

Meta-Llama-3-8B-Instruct-GGUF

Llama 3模型

Llama 3系列8B指令模型性能超越前代70B版本

deberta-base-mnli

deberta-base-mnli

DeBERTa模型

DeBERTa模型在MNLI任务上的微调版本

distilbert-base-cased-finetuned-conll03-english

distilbert-base-cased-finetuned-conll03-english

Huggingface模型

基于DistilBERT的英语命名实体识别模型

compact-biobert

compact-biobert

CompactBioBERTHuggingface

压缩优化的生物医学BERT模型

mt5-tiny-random

mt5-tiny-random

模型Github

轻量级随机mt5模型用于多语言文本处理测试

BERT-Tiny_L-2_H-128_A-2

BERT-Tiny_L-2_H-128_A-2

模型BERT

Google开发的压缩版BERT模型 2层128隐藏单元2注意力头

Qwen2-Math-1.5B-Instruct

Qwen2-Math-1.5B-Instruct

模型数学推理

Qwen2系列专业数学推理大模型