自监督学习工具汇总:实用AI工具与开源项目一览

dinov2-small

dinov2-small

计算机视觉DINOv2

小型Vision Transformer模型用于无监督视觉特征学习

distilhubert

distilhubert

模型开源项目

高效轻量的语音表示学习模型

vit_base_patch14_reg4_dinov2.lvd142m

vit_base_patch14_reg4_dinov2.lvd142m

HuggingfaceDINOv2

基于寄存器的先进Vision Transformer图像特征模型

wav2vec2-base

wav2vec2-base

模型自监督学习

Facebook开发的语音表征学习模型实现低资源语音识别

wavlm-base-plus

wavlm-base-plus

模型预训练模型

Microsoft 全栈语音处理预训练模型

hubert-base-ls960

hubert-base-ls960

Huggingface模型

自监督语音表示学习模型HuBERT助力语音识别进步

wavlm-large

wavlm-large

模型预训练模型

微软WavLM:全栈语音处理的自监督预训练模型

hubert-large-ls960-ft

hubert-large-ls960-ft

Huggingface模型

Facebook开发的HuBERT大型语音识别模型实现低错误率转录

dinov2-base

dinov2-base

特征提取图像处理

基于Vision Transformer的自监督视觉特征学习模型

beit-base-patch16-224-pt22k-ft22k

beit-base-patch16-224-pt22k-ft22k

模型BEiT

BEiT 基于Transformer的自监督图像分类模型

all-distilroberta-v1

all-distilroberta-v1

模型Github

针对语义搜索和句子相似度优化的句子嵌入模型

bert-base-cased

bert-base-cased

掩码语言建模开源项目

使用预训练双向Transformer模型提升语言理解能力

Awesome-Pretraining-for-Graph-Neural-Networks

Awesome-Pretraining-for-Graph-Neural-Networks

图神经网络预训练

图神经网络预训练技术论文资源库

MultimodalRecSys

MultimodalRecSys

多模态推荐系统推荐算法

多模态推荐系统资源与研究进展汇总

TS-TCC

TS-TCC

时间序列对比学习

创新的时间序列无监督表示学习方法

Awesome-SSL4TS

Awesome-SSL4TS

自监督学习时间序列

自监督学习在时间序列分析中的应用资源

DenseCL

DenseCL

DenseCL自监督学习

改进密集预测任务的视觉预训练方法

control-flag

control-flag

ControlFlagGitHub

自监督系统检测代码控制结构异常

jepa

jepa

V-JEPA视频处理

先进的自监督视频表征学习方法

BCL

BCL

对比学习长尾识别

利用记忆效应的对比学习算法提升长尾数据表示