最佳自然语言处理工具集合 - 实用AI工具推荐

自然语言处理

gemma-7b-it

gemma-7b-it

语言模型Huggingface

轻量级开源语言模型支持多种文本生成任务

politicalBiasBERT

politicalBiasBERT

Huggingface模型

BERT微调模型实现政治倾向文本自动分类

heBERT_sentiment_analysis

heBERT_sentiment_analysis

情绪识别模型

希伯来语预训练BERT模型实现情感分析和情绪识别

jina-embeddings-v2-base-code

jina-embeddings-v2-base-code

jina-embeddings-v2-base-codeHuggingface

多语言代码嵌入模型 支持长序列和高效推理

herbert-base-cased

herbert-base-cased

预训练语言模型模型

波兰语自然语言处理的新突破:HerBERT预训练模型

distilbert-base-uncased-go-emotions-onnx

distilbert-base-uncased-go-emotions-onnx

模型量化模型

优化为ONNX格式的轻量级情感分析模型

SmolLM-135M

SmolLM-135M

SmolLM语言模型

小型高效语言模型的新标杆,性能出色,尺寸便携

t5-v1_1-small

t5-v1_1-small

模型迁移学习

Google T5模型的改进版:通用文本处理框架

Meta-Llama-3.1-8B-Instruct-abliterated

Meta-Llama-3.1-8B-Instruct-abliterated

语言模型模型

Llama 3.1 8B指令模型的无限制版本优化语言生成能力

t5-small

t5-small

机器翻译Huggingface

T5架构的轻量级多语言文本转换模型

kobart

kobart

模型Github

优化长序列语义理解能力的韩语BART模型

codesage-large

codesage-large

CodeSageHuggingface

多语言源代码理解的大规模嵌入模型

FairBERTa

FairBERTa

语言模型模型

基于人口统计扰动的公平性增强语言模型

chatglm3-6b-base

chatglm3-6b-base

THUDMHuggingface

多语言支持的高性能开源基础语言模型

glm-4v-9b

glm-4v-9b

多模态模型Huggingface

开源多模态AI模型GLM-4V-9B展现卓越性能

CodeLlama-7b-Instruct-hf

CodeLlama-7b-Instruct-hf

模型模型训练

Meta开发的7B参数通用代码生成模型 支持代码补全和指令跟随

bertweet-base

bertweet-base

Huggingface模型

BERTweet为英文推文提供预训练大规模语言模型

gtr-t5-large

gtr-t5-large

T5模型模型

基于T5-large的语义搜索模型 实现句子到768维向量的映射

flan-t5-3b-summarizer

flan-t5-3b-summarizer

模型多任务学习

基于FLAN-T5的多领域文本摘要模型

Florence-2-large-ft

Florence-2-large-ft

图像识别计算机视觉

统一表示实现多种视觉任务的AI基础模型