Whisper 语音识别模型是什么、怎么用:OpenAI 开源模型的本地安装、模型大小与显存要求

Whisper 是 OpenAI 以 MIT 许可开源的通用语音识别模型,支持多语言转写、语音翻译和语种识别,提供 tiny 到 large 以及 turbo 多种大小,可用一条 pip 命令安装后在本机离线转写音频。

NNathaniel bigo··原创首发·AI 辅助撰写
3 分钟读完
资料核对于 2026-10-11 · 依据官方文档与公开资料整理
本文根据 OpenAI 官方 GitHub 仓库 openai/whisper 的 README 整理,资料核对于 2026-10-11。开源项目变化快,以官方仓库为准。

是什么

Whisper 是 OpenAI 开源的通用语音识别模型,仓库 openai/whisper 约有 11 万星标,代码和模型权重以 MIT 许可发布。它能做三件事:多语言语音转文字、把其他语言的语音翻译成英文、识别音频是哪种语言。

它的意义在于,把接近商用水准的语音识别变成了任何人都能在自己电脑上免费运行的东西。现在市面上很多字幕工具、会议记录软件、桌面转写应用,底层用的就是 Whisper 或它的加速版本。

模型怎么选

README 给出的模型规格:

模型参数量大约需要的显存
tiny3,900 万1 GB
base7,400 万1 GB
small2.44 亿2 GB
medium7.69 亿5 GB
large15.5 亿10 GB
turbo8.09 亿6 GB

简单原则:模型越大越准、越慢。转写中文建议从 medium 或 turbo 起步;turbo 是 large 的加速优化版本,速度快很多,但 README 说明它不适合用于翻译任务。没有显卡也能用 CPU 跑,只是比较慢。

怎么上手

先安装 Python 和 ffmpeg,然后:

bash
pip install -U openai-whisper
whisper 录音.mp3 --model turbo

运行后会在当前目录生成文本和带时间轴的字幕文件。常用参数:

  • --language Chinese:指定语言,省掉自动检测,也能减少误判;
  • --task translate:把非英语语音直接翻译成英文文本;
  • --model medium:更换模型大小。

不想碰命令行的话,可以用基于 Whisper 的图形界面软件,例如开源的 Buzz。

免费与付费

开源版完全免费,在本机运行不产生调用费。OpenAI 另有按时长计费的语音转写 API,那是独立的云服务,价格以 OpenAI 官方定价为准;本文介绍的是本地运行的开源模型。

适合谁 / 不适合谁

适合:

  • 需要给视频加字幕、整理访谈和课程录音的创作者与学生;
  • 录音内容敏感、不想上传到云端的用户;
  • 要在自己的产品里集成离线语音识别的开发者。

不适合:

  • 需要实时同声字幕的场景——原版 Whisper 面向的是录音文件的离线转写;
  • 需要自动区分说话人的会议记录,原版不带这个功能;
  • 完全不想安装环境的用户,在线转写服务或成品软件更省事。

注意事项

  • 会出现「幻听」:在静音、音乐或噪音段落,模型可能生成原音频里没有的句子,重要内容要对照录音校对。
  • 不同语言的准确率差别很大,README 说明性能因语言而异;方言、口音重、多人同时说话时错误率明显上升。
  • 专有名词容易错:人名、术语可以用初始提示参数给模型一些上下文。
  • 录音要合法合规:转写前确认已获得被录音者的同意。

Nathaniel 的更多内容

  1. 01

    Mastra 是什么、怎么用:TypeScript 的 AI 智能体与工作流框架

    Mastra 自称「面向 AI 应用和智能体的现代 TypeScript 框架」,提供 40 多家模型的统一路由、自主智能体、图式工作流、人工审批暂停与恢复、记忆、评测和可观测性,核心框架采用 Apache-2.0 许可。

    其他 AI 工具0
  2. 02

    NextChat(ChatGPT-Next-Web)是什么、怎么部署:一键搭建自己的 AI 聊天网页,全平台客户端

    NextChat 即原来的 ChatGPT-Next-Web,是 MIT 许可的开源 AI 聊天客户端,主打零配置:填入自己的 API Key 就能用 GPT、Claude、Gemini、DeepSeek 等模型,可一键部署到 Vercel 或用 Docker 自托管。

    其他 AI 工具0
  3. 03

    Stable Diffusion WebUI(AUTOMATIC1111)是什么:下载安装、硬件要求与使用教程

    Stable Diffusion WebUI(AUTOMATIC1111)是最知名的开源本地 AI 绘图界面,免费在自己电脑上运行 Stable Diffusion 模型,支持文生图、图生图、局部重绘和海量扩展,需要独立显卡。

    其他 AI 工具0
  4. 04

    Wolfram Alpha 是什么、怎么用、Pro 版多少钱:给出分步解题过程的计算知识引擎

    Wolfram|Alpha 是 Wolfram 公司的计算知识引擎,直接计算数学、物理、化学、金融等问题的答案;Pro 版提供分步解答、带提示的练习题、文件上传分析和更长的计算时间。

    其他 AI 工具0
  5. 05

    Activepieces 是什么、怎么用:可自部署的开源自动化平台(Zapier 替代),AI 智能体与 MCP

    Activepieces 是开源的 AI 自动化平台,定位为 Zapier 的开源替代:可视化搭建工作流和 AI 智能体,集成(称为 pieces)用 TypeScript 编写,其中 280 多个可作为 MCP 服务器使用,社区版以 MIT 许可发布。

    其他 AI 工具0
  6. 06

    CodeGeeX 是什么、怎么样、怎么用:智谱的 AI 编程助手插件,支持 VS Code 与 JetBrains

    CodeGeeX 是智谱推出的 AI 编程助手,以 IDE 插件形式提供代码生成与补全、自动注释、代码翻译和智能问答,模型 CodeGeeX4-ALL-9B 已开源,另有可私有化的企业版。

    其他 AI 工具0

同主题

  1. 01

    Gemini CLI 安装与使用教程:现在还能免费用吗、怎么迁移

    Gemini CLI 是 Google 开源的终端 AI 编程智能体。2026-06-18 起个人免费档已换成 Antigravity CLI,目前主要面向付费 API Key 和企业用户。

    Gemini0
  2. 02

    GitHub Copilot 怎么用:订阅档位、学生认证与上手指南

    GitHub Copilot 是 GitHub(微软旗下)的 AI 编程助手,以插件形式进入 VS Code、JetBrains、Xcode 等常用 IDE,也有命令行、桌面 App 和云端智能体,可直接在 GitHub 上接 Issue 提 PR。

    GitHub Copilot0
  3. 03

    LanguageTool 是什么、怎么用、免费版够用吗:支持 30 多种语言的语法检查与 AI 改写

    LanguageTool 是多语言写作助手,检查语法、标点、拼写和文风,支持 30 多种语言,Premium 提供不限次数的 AI 句子改写和更长的文本上限,可装进浏览器、Word、Google Docs 和邮件客户端。

    其他 AI 工具0
  4. 04

    Descript 是什么、怎么用:像改文档一样剪视频的 AI 剪辑工具

    Descript 是 Descript 公司的 AI 音视频编辑器:录音录屏后自动转成文字稿,删字就等于剪视频;内置 AI 助剪 Underlord、Studio Sound 降噪、去口头禅、眼神校正和视频翻译,适合播客和口播创作者。

    其他 AI 工具0
  5. 05

    Exa 是什么、怎么用、怎么收费:为大模型设计的网络搜索与内容 API

    Exa 是面向 AI 应用的按量付费搜索 API,提供 Search、Contents、Answer、Monitors 和用于深度调研的异步 Agent,注册即有 10 美元免费额度。

    其他 AI 工具0
  6. 06

    Microsoft Foundry(原 Azure AI Foundry / Azure AI Studio)是什么:微软的 AI 应用与智能体开发平台

    Microsoft Foundry 是微软 Azure 上构建、接地和治理 AI 应用与智能体的统一平台,前身为 Azure AI Studio,可访问 11,000 多个模型,包含 Foundry Models、Agent Service、Foundry IQ 等组件。

    其他 AI 工具0

同产品的其他教程

  1. 01

    墨刀 AI 是什么、怎么用、会员多少钱:AI 生成原型、PRD 与产品设计协作

    墨刀是国内常用的在线原型设计与产研协作平台,墨刀 AI 可以用一句话生成原型、应用、PRD 和调研报告,并与白板、流程图、UI 设计、AIPPT 放在同一个工作台里。

    其他 AI 工具0
  2. 02

    创客贴 AI 怎么用:官网入口、一句话做设计与智能抠图

    创客贴是北京艺源酷科技的在线设计平台,主打模板改字换图出设计;AI 工具箱提供一句话做设计、AI 海报、AI 商品图、智能抠图、AI 消除、图片变清晰、文生图和 AI 文案。

    其他 AI 工具0
  3. 03

    Make 自动化平台是什么、怎么用:可视化工作流、AI Agents 与官网定价

    Make(原 Integromat)是可视化的自动化平台,用拖拽的方式把应用、API 和 AI 步骤连成流程。它提供 AI Agents、AI Toolkit 等功能,按积分计费,免费档每月 1,000 积分。

    其他 AI 工具0
  4. 04

    Ahrefs 是什么、怎么用、价格多少:外链与关键词数据平台,加上 Brand Radar 追踪 AI 可见度

    Ahrefs 是以自建爬虫数据著称的 SEO 与营销软件套件,除 Site Explorer、Keywords Explorer 等经典工具外,新增 Brand Radar、AI Content Helper、Ask Ahrefs 和 SEO MCP 等 AI 功能。

    其他 AI 工具0
  5. 05

    Hedra AI 是什么、怎么用:AI 视频创作平台的 Creative Studio、Hedra Agent 与官网定价

    Hedra 是 AI 视觉内容生成平台,提供 Creative Studio 创作台、能规划并执行多步骤图像视频音频任务的 Hedra Agent,以及开发者 API 和 MCP 服务;付费方案按月发放积分并含商用授权。

    其他 AI 工具0
  6. 06

    Recraft 官网入口与使用教程:AI 矢量图、图标与品牌设计(V4 模型)

    Recraft 是面向设计师的 AI 生图平台,能直接生成可编辑的 SVG 矢量图、图标和 Logo,支持自定义品牌风格和配色,有网页版、手机 App、Figma 插件和 API。

    其他 AI 工具0

0 条评论

登录 后参与评论

还没有评论,来抢沙发~