知识蒸馏工具合集:提升模型效率与性能的关键工具与资源

bert-mini

bert-mini

模型BERT

轻量级BERT模型为下游NLP任务提供高效解决方案

splade-cocondenser-selfdistil

splade-cocondenser-selfdistil

知识蒸馏稀疏模型

SPLADE模型在段落检索任务中的优化应用

bert_uncased_L-2_H-128_A-2

bert_uncased_L-2_H-128_A-2

模型压缩知识蒸馏

BERT微型模型:适用于资源受限环境的NLP解决方案

bert-tiny

bert-tiny

模型压缩知识蒸馏

轻量级预训练自然语言处理模型

distilgpt2

distilgpt2

模型DistilGPT2

基于GPT-2知识蒸馏的高效英语文本生成模型

bert-small

bert-small

模型BERT

轻量级BERT模型用于下游NLP任务优化

Efficient-Deep-Learning

Efficient-Deep-Learning

神经网络压缩模型加速

深度神经网络压缩和加速方法综述

LD

LD

目标检测知识蒸馏

高效提升目标检测模型性能的定位知识蒸馏方法

awesome-knowledge-distillation

awesome-knowledge-distillation

知识蒸馏深度学习

知识蒸馏技术研究论文资源集锦

BK-SDM

BK-SDM

Stable DiffusionAI绘图

高效轻量的Stable Diffusion压缩模型

smol-vision

smol-vision

Smol Vision视觉模型优化

前沿视觉模型优化与定制的实用技巧集锦

LLM4Annotation

LLM4Annotation

大语言模型数据标注

大型语言模型在数据标注中的应用及研究进展

Knowledge-Distillation-Toolkit

Knowledge-Distillation-Toolkit

知识蒸馏模型压缩

开源知识蒸馏工具包助力机器学习模型压缩

Awesome-Deep-Neural-Network-Compression

Awesome-Deep-Neural-Network-Compression

深度神经网络压缩量化

深度神经网络压缩技术资源库

VLM_survey

VLM_survey

Vision-Language Models视觉识别任务

用于视觉任务的 AWESOME 视觉语言模型集合

torchdistill

torchdistill

torchdistill知识蒸馏

模块化深度学习知识蒸馏框架

EasyNLP

EasyNLP

EasyNLPNLP工具包

综合性易用的NLP工具包,支持大规模预训练模型

nix-tts

nix-tts

Nix-TTS文本转语音

端到端文本转语音解决方案

Awesome-Efficient-LLM

Awesome-Efficient-LLM

Large Language Models模型剪枝

知识蒸馏、网络剪枝、量化和加速推理等针对大型语言模型优化的关键技术的汇总

CVPR2024-Papers-with-Code-Demo

CVPR2024-Papers-with-Code-Demo

CVPR 2024论文

最新CVPR论文及其代码全面解析