用于抓取抖音创作者内容、下载音频并使用Whisper进行转录
Douyin 内容跟踪器
功能概述
Douyin 内容跟踪器是一项面向实际任务的技能,主要用于Scrapes Douyin 创建者视频通过MediaCrawler, 下载带有ffmpeg的音频, 并用Whisper 翻译语音;查找技能基础目录;
核心要点
- 所有命令必须运行 f。
- 它将相关步骤、工具调用和结果整理方式集中到统一流程中,帮助使用者更快完成目标并减少重复操作。
- 使用时应结合输入条件选择合适的执行方式,核对必要参数、依赖环境与输出内容,并按原始要求处理异常情况。
使用与执行
该技能适合需要稳定复用相关能力的场景,可作为自动化工作流的一部分,也便于后续检查、调整和扩展。从功能定位来看,该技能强调把分散的操作要求整理成清晰、可复用的处理流程,使用户能够围绕既定目标快速准备输入、选择执行方式并获得结构化结果。实际使用前应先确认任务范围、数据来源、运行环境、必要权限和关键参数,再依据技能说明逐步执行;
结果检查与注意事项
若输入条件不完整,应先补齐信息或采用保守配置,避免因错误假设导致结果偏离需求。执行过程中需要关注工具调用是否成功、接口或依赖是否可用、输出格式是否符合预期,并对异常提示、缺失字段和边界情况进行处理;涉及批量任务时,还应保存进度,避免中断后重复操作。
抖音内容追踪器(Douyin Content Tracker)
通过 MediaCrawler 抓取抖音创作者视频,使用 ffmpeg 下载音频,并借助 Whisper 进行语音转录。
定位技能基目录(Skill Base Directory)
所有命令必须在本技能目录下执行。要定位该目录,请运行:
python -c "import pathlib; print([p for p in pathlib.Path.home().rglob('douyin-content-tracker-skill/SKILL.md')])"
或检查以下常见路径:
~/.claude/skills/douyin-content-tracker-skill/- 安装该技能时显示的路径
为便于使用,可将其设为环境变量:
SKILL_DIR="~/.claude/skills/douyin-content-tracker-skill" # 请根据实际路径调整 cd "$SKILL_DIR"
首次设置(First-Time Setup)
在新设备上仅需执行一次以下步骤。
1. 安装 Python 依赖
cd $SKILL_DIR pip install -r scripts/requirements.txt python -m playwright install chromium
2. 安装 MediaCrawler
# Windows git clone https://github.com/NanmiCoder/MediaCrawler D:/MediaCrawler cd D:/MediaCrawler && pip install -r requirements.txt # macOS/Linux git clone https://github.com/NanmiCoder/MediaCrawler ~/MediaCrawler cd ~/MediaCrawler && pip install -r requirements.txt
3. 配置 .env
cd $SKILL_DIR cp .env.template .env
编辑 .env 文件 — 必填字段如下:
MEDIACRAWLER_DIR=D:/MediaCrawler # 请替换为实际的 MediaCrawler 路径(macOS/Linux 使用 ~/MediaCrawler)
可选覆盖项:
# 数据/音频/字幕/模型的存储根目录(默认:macOS/Linux 为 ~/DouyinContentTracker,Windows 为 %USERPROFILE%DouyinContentTracker) OUTPUT_BASE_DIR=/Users/me/DouyinContentTracker # Whisper 模型大小(默认:medium) WHISPER_MODEL=small
4. 添加目标账号
编辑 accounts.txt 文件(或通过设置环境变量 TRACKER_ACCOUNTS_FILE,或在运行时传入 --accounts-file 参数指定):
博主名称 | https://www.douyin.com/user/MS4wLjABAAAA...
5. 首次登录(生成 Cookie)
cd $SKILL_DIR python scripts/scrape_profile.py
浏览器将自动打开 —— 扫描抖音二维码完成登录。Cookie 将保存至 .douyin_cookies.json。
日常使用(Daily Usage)
cd $SKILL_DIR # 默认追踪每个账号最新 3 条视频。main.py 功能与 track_latest.py 一致 python scripts/track_latest.py # 或 python scripts/main.py # 追踪每个账号最新 N 条视频 python scripts/track_latest.py --limit 5 # 使用自定义账号列表(亦可通过环境变量 TRACKER_ACCOUNTS_FILE 指定) python scripts/track_latest.py --accounts-file /path/to/accounts.txt # 跳过音频下载与语音转录(仅采集元数据) python scripts/track_latest.py --no-audio
Cookie 刷新
当抓取返回 0 条视频,或提示 “Cookie 已 N 天未更新” 时,请执行:
cd $SKILL_DIR python scripts/scrape_profile.py # 打开浏览器并扫码登录
处理流程(Pipeline Flow)
accounts.txt(或由 --accounts-file / TRACKER_ACCOUNTS_FILE 指向的账号列表)
↓
scripts/scrape_profile.py → MediaCrawler(CDP)→ OUTPUT_BASE_DIR/data/*.csv
↓
scripts/clean_data.py → 标准化后的 OUTPUT_BASE_DIR/data/cleaned_*.csv
↓
scripts/download_video.py → Playwright + ffmpeg → OUTPUT_BASE_DIR/audio/{blogger}/*.m4a
↓
scripts/extract_subtitle.py → Whisper → OUTPUT_BASE_DIR/subtitles/{blogger}/{video_id}.md
输出路径(Output Locations)
所有生成文件均位于 OUTPUT_BASE_DIR 目录下(macOS/Linux 默认为 ~/DouyinContentTracker,Windows 默认为 %USERPROFILE%DouyinContentTracker)。
| 子目录 | 内容说明 |
|---|---|
data/cleaned_*.csv |
抓取并标准化后的视频元数据 |
audio/{blogger}/{video_id}.m4a |
提取出的音频文件 |
subtitles/{blogger}/{video_id}.md |
Whisper 生成的字幕(标题作为首行) |
subtitles/{blogger}.md |
某一位博主全部字幕合并后的文件 |
执行日志规范(Execution Logging Guide)
运行流水线时,应在每一步完成后立即向用户汇报进度,**不得等待整个流水线全部完成后再统一反馈**。
分步汇报模板如下:
每次 Bash 工具调用返回后,立即告知用户:
| 步骤 | 需汇报内容 |
|---|---|
| 采集(scrape) | 博主名称、成功采集的视频条数;若失败,须明确注明原因 |
| 清洗(clean) | 清洗后保留的有效条数 |
| 音频下载(download) | 成功下载的音频数量 / 总数,以及跳过的条数 |
| 语音识别(whisper) | 生成的字幕文件数量及完整输出路径 |
| 完成 | 汇总信息:共处理博主数、视频总数、生成字幕数,以及最终输出目录路径 |
若任一环节失败,应立即中止流水线,原样输出错误信息,并引用 references/troubleshooting.md 中对应问题的修复方案,再询问用户是否继续执行。
示例输出格式:
[步骤 1/4 采集] 博主「某某」— 采集完成,共 10 条视频 [步骤 2/4 清洗] 有效数据 10 条 → data/cleaned_profile_xxx.csv [步骤 3/4 音频] 下载完成 8/10(2 条无音频流,已跳过) [步骤 4/4 字幕] 生成 8 个字幕文件 → subtitles/某某/ [完成] 1 位博主 · 10 条视频 · 8 个字幕,输出目录:~/DouyinContentTracker
参考资料(References)
调试或扩展流水线功能时,请将以下文件加载至上下文:
references/pipeline.md— 各脚本技术说明、数据结构定义、关键函数签名references/troubleshooting.md— 针对 Cookie、MediaCrawler、ffmpeg、Whisper 及数据异常等问题的解决方案
热门AI工具
相关专题
本专题从实际API接口调试场景出发,讲解Postman身份认证的完整配置流程,包括常见认证协议介绍、授权参数设置、访问令牌填写、OAuth 2.0授权及认证失败排查,帮助用户正确完成接口授权与访问验证。
0
2026.11.06
围绕Postman HTTP请求头配置展开,讲解Headers选项的具体使用方式,包括Key和Value参数填写、请求头信息添加、常见Header字段设置及请求头修改方法,帮助用户解决接口调试过程中遇到的请求头配置问题。
0
2026.11.06
详细介绍Postman接口请求的创建与发送方法,涵盖GET和POST请求、URL配置、请求参数、Headers请求头、Body请求体设置以及响应结果查看,帮助用户掌握Postman接口请求的完整操作流程。
0
2026.11.06
DBeaver数据导入专题,整理Excel、CSV、SQL、TXT等常见文件的数据导入方法,涵盖目标数据库选择、数据表创建、字段映射、数据类型设置及导入参数配置等操作,帮助用户将本地文件中的数据写入数据库,并了解批量导入、重复数据处理和导入失败等常见问题的解决方法。
0
2026.11.05
DBeaver安全防护专题,围绕数据库连接安全、账号密码保护和访问权限管理展开,整理SSL/TLS加密连接、SSH隧道、数据库凭据保存及证书验证等配置方法,同时介绍敏感信息保护、远程连接风险和高权限账号使用等注意事项,帮助用户提高数据库日常管理的安全性。
0
2026.11.05
本专题聚焦DBeaver数据库连接配置与管理,覆盖从新建连接、选择数据库类型到填写连接参数和验证连接的完整流程。针对MySQL、PostgreSQL、SQL Server等常见数据库,整理相应的连接设置方法,并提供驱动缺失、认证失败和连接异常等问题的排查方向。
0
2026.11.04
本专题围绕XORM框架的结构体映射展开,说明表名与字段的命名策略、xorm标签常用属性、主键自增与时间字段自动填充,并演示Sync2自动建表、增量字段升级、索引声明与反向生成结构体的完整流程。
0
2026.11.04
本专题聚焦XORM框架的配置与连接环节,拆解MySQL、PostgreSQL、SQLite、SQL Server的DSN写法与驱动选择,讲清连接池参数、多数据源拆分、读写分离与超时重连的处理方式,并补充容器与兼容数据库的适配经验。
0
2026.11.04
本专题聚焦XORM框架的配置与连接环节,拆解MySQL、PostgreSQL、SQLite、SQL Server的DSN写法与驱动选择,讲清连接池参数、多数据源拆分、读写分离与超时重连的处理方式,并补充容器与兼容数据库的适配经验。
0
2026.11.04
热门下载
相关下载
精品课程
共6课时 | 12.1万人学习
共79课时 | 161.8万人学习
共6课时 | 54.7万人学习
最新文章