模型训练必备工具推荐:精选AI软件与开源项目

transformers-code

transformers-code

TransformersNLP

对Transformers从入门到高效微调的全方位实战指南

Awesome-Backbones

Awesome-Backbones

Awesome-Backbones图像分类

图像分类的主干网络库及其使用教程

libai

libai

LiBaiOneFlow

支持多种并行训练的大规模模型训练工具

sacremoses

sacremoses

Sacremoses令牌化

简洁高效的Python自然语言处理工具包和命令行界面

lite-transformer

lite-transformer

Lite Transformer模型训练

现代高效的长短期注意力Transformer模型

JamSpell

JamSpell

JamSpell拼写检查

高效准确的多语言拼写检查库,兼容C++和Python

torchdistill

torchdistill

torchdistill知识蒸馏

模块化深度学习知识蒸馏框架

TextAttack

TextAttack

TextAttackNLP

为NLP模型生成对抗样本和进行数据增强的专业工具

text2vec

text2vec

Text2vec文本向量化

多模型文本向量化工具,支持多语言文本匹配分析

SmallLanguageModel-project

SmallLanguageModel-project

SmallLanguageModel数据处理

自主构建完整的语言模型,从数据采集到训练一步到位

EasyDeL

EasyDeL

EasyDeL机器学习

多模型训练优化框架

starcoder2-self-align

starcoder2-self-align

StarCoder2-Instruct代码生成

自我校准的代码生成大型语言模型

LESS

LESS

LESS数据选择

选择有影响力的数据进行有针对性的指令调整

xllm

xllm

X—LLM大语言模型

便捷微调大语言模型,集成最新优化技术

neptune-client

neptune-client

neptune.ai实验跟踪

可伸缩的实验跟踪工具,简化团队基础模型训练

One-Shot-Voice-Cloning

One-Shot-Voice-Cloning

Unet-TTS一键语音克隆

一站式语音克隆与风格转换技术

VoiceFlow-TTS

VoiceFlow-TTS

VoiceFlow文本转语音

结合最新流匹配算法的文本转语音技术

glow-tts

glow-tts

Glow-TTS文本转语音

通过单调对齐搜索进行文本转语音的生成流

vall-e

vall-e

VALL-E语音合成

零样本文本到语音神经编解码器语言模型

lingvo

lingvo

LingvoTensorflow

Tensorflow中高效的序列模型神经网络构建框架