faster-whisper-large-v2

项目介绍

faster-whisper-large-v2是一个基于OpenAI Whisper large-v2模型转换而来的语音识别项目。该项目利用CTranslate2框架,将原始的Whisper模型转换为更快速、更高效的格式,以实现更快的语音转文字功能。

主要特点

多语言支持: 该模型支持超过90种语言的语音识别,涵盖了世界上大部分主要语言。
高效性能: 通过使用CTranslate2框架,该项目在保持原始Whisper模型精度的同时,大幅提升了运行速度。
易于使用: 项目提供了简洁的Python接口,使用者只需几行代码即可完成语音转文字任务。
灵活性: 模型权重以FP16格式保存,但用户可以在加载模型时根据需求更改计算类型。

使用方法

使用faster-whisper-large-v2非常简单。以下是一个基本的使用示例:

from faster_whisper import WhisperModel

model = WhisperModel("large-v2")

segments, info = model.transcribe("audio.mp3")
for segment in segments:
    print("[%.2fs -> %.2fs] %s" % (segment.start, segment.end, segment.text))

这段代码将加载模型,对指定的音频文件进行转录,并打印出每个语音片段的时间戳和对应的文本内容。

技术细节

该项目是通过以下命令将原始的Whisper large-v2模型转换而来:

ct2-transformers-converter --model openai/whisper-large-v2 --output_dir faster-whisper-large-v2 \
    --copy_files tokenizer.json --quantization float16

转换过程中,模型权重被保存为FP16格式,以平衡性能和精度。用户可以在加载模型时通过CTranslate2的compute_type选项来更改计算类型,以适应不同的硬件和性能需求。