从任意 URL 下载音频,并使用 Faster-Whisper 将其转录为文本。当被要求执行以下操作时启用该功能:“transcribe this audio”(转录此音频)、“download and transcribe”(下载并转录)、“speech to text”(语音转文字)、“audio to text”(音频转文字)、“转录”、“语音转文字”、“音频转文字”,或任何涉及将音频/视频内容(如 YouTube、小宇宙 fm、播客等)转换为文本的任务。支持 YouTube、小宇宙 fm,以及 y
语音到文本
功能概述
语音到文本是一项面向实际任务的技能,主要用于从任何 URL 中下载音频, 并用 Surprise- Whisper 将其转换为文本.;Pipeline.;
核心要点
- One 命令完成所有工作 :.;
- Downloads audio by yt- dlp (支持 1000+ 站点).;
- Conversion to 16kH。
使用与执行
它将相关步骤、工具调用和结果整理方式集中到统一流程中,帮助使用者更快完成目标并减少重复操作。使用时应结合输入条件选择合适的执行方式,核对必要参数、依赖环境与输出内容,并按原始要求处理异常情况。从功能定位来看,该技能强调把分散的操作要求整理成清晰、可复用的处理流程,使用户能够围绕既定目标快速准备输入、选择执行方式并获得结构化结果。实际使用前应先确认任务范围、数据来源、运行环境、必要权限和关键参数,再依据技能说明逐步执行;
结果检查与注意事项
若输入条件不完整,应先补齐信息或采用保守配置,避免因错误假设导致结果偏离需求。执行过程中需要关注工具调用是否成功、接口或依赖是否可用、输出格式是否符合预期,并对异常提示、缺失字段和边界情况进行处理;涉及批量任务时,还应保存进度,避免中断后重复操作。该技能适合用于一次性任务,也可以接入自动化工作流,与其他技能或上层代理配合完成更完整的业务链路;在组合使用时,应明确每一步的输入输出关系,并避免不同步骤之间出现参数冲突。
语音转文字(Speech-to-Text)
从任意 URL 下载音频,并使用 Faster-Whisper 将其转录为文本。
处理流程
一条命令完成全部操作:
python scripts/transcribe.py "https://example.com/audio-url"
- 通过
yt-dlp下载音频(支持 1000+ 个网站) - 转换为 16kHz 单声道 WAV 格式,确保最佳质量
- 使用 Faster-Whisper(基于 CTranslate2 加速)进行转录
- 输出纯文本
可选参数
| 参数标志 | 默认值 | 说明 |
|---|---|---|
--model, -m |
base |
模型类型:tiny / base / small / medium / large |
--language, -l |
zh |
语言代码(zh、en 或 auto) |
--quantization, -q |
int8 |
量化方式:int8 / float16 / float32 |
--output, -o |
临时目录 | 用于保存已下载音频的目录 |
--download-only |
— | 仅下载音频,跳过转录步骤 |
使用示例
# 默认配置(base 模型,中文) python scripts/transcribe.py "https://www.xiaoyuzhoufm.com/episode/xxx" # 英文音频,使用 small 模型 python scripts/transcribe.py "https://youtube.com/watch?v=xxx" -l en -m small # 仅下载音频(保存音频文件) python scripts/transcribe.py "https://youtube.com/watch?v=xxx" --download-only -o "D:audio" # 高质量转录(medium 模型,GPU 上使用 float16 量化) python scripts/transcribe.py "https://example.com/podcast.mp3" -m medium -q float16
系统架构
URL → yt-dlp(下载) → ffmpeg(转为 16kHz 单声道 WAV) → Faster-Whisper(转录) → text
- 下载:使用
yt-dlp提取直链音频地址并完成下载 - 预处理:使用
ffmpeg将音频转换为 Whisper 所需格式(16kHz 单声道) - 模型:Faster-Whisper(基于 CTranslate2)——速度比 openai-whisper 快 2–4 倍,可在 CPU 上运行
- VAD:语音活动检测(Voice Activity Detection),自动过滤非语音片段
依赖项
首次运行时将自动安装:
faster-whisper— 转录引擎yt-dlp— 音频提取工具
如需手动预安装,请执行:
pip install faster-whisper yt-dlp
模型规格
| 模型 | 大小 | 速度 | 准确率 |
|---|---|---|---|
tiny |
约 75 MB | 最快 | 基础 |
base |
约 140 MB | 较快 | 良好(默认) |
small |
约 470 MB | 中等 | 更优 |
medium |
约 1.5 GB | 较慢 | 高 |
large |
约 2.9 GB | 最慢 | 最高 |
首次运行时将从 HuggingFace(中国用户使用 HF 镜像站)下载对应模型。
运行环境
- 自动选择 GPU/CPU 后端(若
torch.cuda.is_available()为真,则启用cuda) - HF 镜像地址:
https://hf-mirror.com(已为中国用户预配置) - 模型缓存路径:
.models/(位于 scripts 目录下;若已存在fast-whisper技能缓存,则复用该缓存) - ffmpeg 检查路径:系统 PATH 中的可执行文件,或固定路径
D:softffmpeg...binffmpeg.exe
离线环境 / 网络受限场景
若网络无法访问 HuggingFace,请参阅 references/install-offline.md,了解如何预先下载模型及在无互联网连接环境中部署使用。
热门AI工具
相关专题
本专题聚焦Go-Zero的API开发,拆解.api描述文件的语法结构、路由与分组定义、参数绑定与校验规则,说明统一响应体、JWT鉴权、跨域与接口文档生成的落地方式,并给出网关聚合与接口测试的实践建议。
0
2026.11.12
本专题围绕Go-Zero的安装与工具链配置展开,讲清Go版本要求、goctl安装方式、代理镜像、protoc依赖与环境变量设置,说明多版本共存、升级回退与CI流水线安装的做法,并整理安装阶段的常见报错与验证步骤。
0
2026.11.12
本专题整理Go-Zero的入门知识,从框架定位、环境准备到跑通第一个API服务,讲清目录分层、配置加载、日志与中间件的基本用法,并对比Gin、Kratos的差异,帮助Go开发者建立整体认知,判断它是否适合当前项目。
0
2026.11.12
本专题从实际API接口调试场景出发,讲解Postman身份认证的完整配置流程,包括常见认证协议介绍、授权参数设置、访问令牌填写、OAuth 2.0授权及认证失败排查,帮助用户正确完成接口授权与访问验证。
0
2026.11.06
围绕Postman HTTP请求头配置展开,讲解Headers选项的具体使用方式,包括Key和Value参数填写、请求头信息添加、常见Header字段设置及请求头修改方法,帮助用户解决接口调试过程中遇到的请求头配置问题。
0
2026.11.06
详细介绍Postman接口请求的创建与发送方法,涵盖GET和POST请求、URL配置、请求参数、Headers请求头、Body请求体设置以及响应结果查看,帮助用户掌握Postman接口请求的完整操作流程。
0
2026.11.06
DBeaver数据导入专题,整理Excel、CSV、SQL、TXT等常见文件的数据导入方法,涵盖目标数据库选择、数据表创建、字段映射、数据类型设置及导入参数配置等操作,帮助用户将本地文件中的数据写入数据库,并了解批量导入、重复数据处理和导入失败等常见问题的解决方法。
0
2026.11.05
DBeaver安全防护专题,围绕数据库连接安全、账号密码保护和访问权限管理展开,整理SSL/TLS加密连接、SSH隧道、数据库凭据保存及证书验证等配置方法,同时介绍敏感信息保护、远程连接风险和高权限账号使用等注意事项,帮助用户提高数据库日常管理的安全性。
0
2026.11.05
本专题聚焦DBeaver数据库连接配置与管理,覆盖从新建连接、选择数据库类型到填写连接参数和验证连接的完整流程。针对MySQL、PostgreSQL、SQL Server等常见数据库,整理相应的连接设置方法,并提供驱动缺失、认证失败和连接异常等问题的排查方向。
0
2026.11.04
热门下载
相关下载
精品课程
共6课时 | 12.1万人学习
共79课时 | 161.8万人学习
共6课时 | 54.7万人学习
最新文章