深度学习系列56:使用whisper进行语音转文字

1. openai-whisper

这应该是最快的使用方式了。安装pip install -U openai-whisper,接着安装ffmpeg,随后就可以使用了。模型清单如下:
在这里插入图片描述

第一种方式,使用命令行:

whisper japanese.wav --language Japanese  --model medium

另一种方式,使用python调用:

import whisper
model = whisper.load_model("base")
result = model.transcribe("audio.mp3",initial_prompt='以下是普通话的句子。')
print(result["text"])

2. faster-whisper

安装也一样:pip install -U faster-whisper,速度对比:
在这里插入图片描述

3. whisper-jax

在GPU上的加速版本
首先安装库:
pip install jax jaxlib git+https://github.com/sanchit-gandhi/whisper-jax.git datasets soundfile librosa

调用代码为:

from whisper_jax import FlaxWhisperPipline
import jax.numpy as jnp
pipeline = FlaxWhisperPipline("openai/whisper-tiny", dtype=jnp.bfloat16, batch_size=16)
%time text = pipeline('test.mp3')

4. whisper-openvino

在intel系列的cpu上加速的版本:
安装库:pip install git+https://github.com/zhuzilin/whisper-openvino.git
调用方法:whisper carmack.mp3 --model tiny.en --beam_size 3

相关推荐

  1. 本地部署whisper模型(语音文字)

    2024-02-05 11:58:03       57 阅读
  2. Python使用whisper实现语音识别(ASR)

    2024-02-05 11:58:03       44 阅读
  3. 2023-12-27 语音文字的whisper应用部署

    2024-02-05 11:58:03       61 阅读

最近更新

  1. docker php8.1+nginx base 镜像 dockerfile 配置

    2024-02-05 11:58:03       94 阅读
  2. Could not load dynamic library ‘cudart64_100.dll‘

    2024-02-05 11:58:03       101 阅读
  3. 在Django里面运行非项目文件

    2024-02-05 11:58:03       82 阅读
  4. Python语言-面向对象

    2024-02-05 11:58:03       91 阅读

热门阅读

  1. RabbitMQ集群搭建

    2024-02-05 11:58:03       48 阅读
  2. Linux下对线程的理解(上)

    2024-02-05 11:58:03       52 阅读
  3. 深度学习环境指南【1】:Nvidia 驱动

    2024-02-05 11:58:03       53 阅读
  4. 可控概率抽奖算法

    2024-02-05 11:58:03       53 阅读
  5. PostgreSQL解决序列(自增id)自动增长冲突

    2024-02-05 11:58:03       50 阅读
  6. Python 处理小样本数据的文档分类问题

    2024-02-05 11:58:03       52 阅读
  7. 字符串工具类

    2024-02-05 11:58:03       40 阅读
  8. Chapter 8 - 6. Congestion Management in TCP Storage Networks

    2024-02-05 11:58:03       59 阅读
  9. 算法提升——LeetCode383场周赛总结

    2024-02-05 11:58:03       56 阅读
  10. 力扣_字符串3—通配符匹配

    2024-02-05 11:58:03       37 阅读