最佳自然语言处理工具集合 - 实用AI工具推荐

自然语言处理

distilbert-base-multilingual-cased

distilbert-base-multilingual-cased

模型维基百科

提升效率的多语言轻量级BERT模型,支持104种语言

flan-t5-xxl

flan-t5-xxl

模型语言生成

多语言自然语言处理的先进模型

bert_cased_ner

bert_cased_ner

模型Github

BERT模型驱动的土耳其语命名实体识别工具

llama-68m

llama-68m

文本生成Huggingface

LLaMA类轻量级语言模型助力高效推理

ner-english-large

ner-english-large

Huggingface模型

基于FLERT技术的英语命名实体识别开源模型

optimized-gpt2-1b

optimized-gpt2-1b

transformersHuggingface

GPT-2架构优化模型 提供高效可扩展的自然语言处理功能

toxic-comment-model

toxic-comment-model

模型文本分类

DistilBERT微调的高性能在线评论毒性分类模型

xlm-roberta-large-ner-spanish

xlm-roberta-large-ner-spanish

模型西班牙语

基于XLM-Roberta-large的高性能西班牙语命名实体识别模型

indobert-base-p1

indobert-base-p1

模型IndoBERT

IndoBERT基于BERT架构的印尼语预训练模型

dpr-question_encoder-single-nq-base

dpr-question_encoder-single-nq-base

模型BERT

基于BERT的开放域问答问题编码器

msmarco-distilbert-base-v4

msmarco-distilbert-base-v4

嵌入向量特征提取

基于DistilBERT的高性能句子嵌入模型

nomic-embed-text-v1

nomic-embed-text-v1

模型Github

多语言文本嵌入模型 适用于多种NLP任务

chatglm2-6b

chatglm2-6b

模型对话模型

性能升级的开源中英双语对话模型

distilbart-cnn-12-6

distilbart-cnn-12-6

模型Github

BART模型压缩版本实现快速高效的文本摘要

faster-whisper-large-v3

faster-whisper-large-v3

WhisperHuggingface

多语言语音识别模型CTranslate2版Whisper large-v3

dragon-multiturn-query-encoder

dragon-multiturn-query-encoder

多轮对话模型

优化多轮对话检索的强大查询编码器

t5-v1_1-xxl

t5-v1_1-xxl

Huggingface模型

Google T5模型的改进版本 提升多种NLP任务性能

indonesian-roberta-base-posp-tagger

indonesian-roberta-base-posp-tagger

印尼语RoBERTa

基于RoBERTa的印尼语词性标注模型

faster-whisper-large-v2

faster-whisper-large-v2

WhisperHuggingface

基于Whisper large-v2的高效多语言语音转文本模型

gliner_medium_news-v2.1

gliner_medium_news-v2.1

模型人工智能

GLiNER新闻实体抽取模型提升多语言长文本准确率