FireRedASR2S是什么
fireredasr2s是由小红书super intelligence-audiolab推出的工业级端到端语音识别系统，由audiolab开源。该模型深度融合了语音识别（asr）、语音活动检测（vad）、语种识别（lid）与标点预测（punc）四大前沿模块，全部达到当前开源领域领先水平（sota）。支持中文普通话、20余种方言、英语、中英混合、代码语音及歌词识别等复杂场景；其中普通话字错率低至2.89%，方言平均字错率为11.55%，性能全面超越doubao-asr、qwen3-asr等同类模型。系统提供开箱即用的一键本地部署方案，无需依赖任何外部api服务，目前已在小红书语音评论、语音搜索等高并发真实业务场景中实现大规模落地应用。
☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜
小红书长文-谷歌浏览器
下载
在 Linux 上通过 Chrome 挂载/VNC 自动发布小红书长笔记。Agent 撰写标题和正文后执行 xhs_publish.sh --publish --submit，触发小红书发布。
FireRedASR2S的核心能力
- 语音识别（FireRedASR2）：覆盖中文普通话、20+地方口音与方言、英语、中英文混说、编程语音及歌曲演唱识别；提供LLM驱动与AED（Attention-based Encoder-Decoder）双架构版本，AED版额外支持逐字级时间戳与置信度输出。
- 语音活动检测（FireRedVAD）：可精准区分语音、人声演唱与背景音乐，兼容100余种语言输入；支持流式与非流式两种推理模式，F1指标达97.57%。
- 语种识别（FireRedLID）：支持100+国际语言及20+中文方言判别，整体准确率达97.18%，显著优于Whisper等主流开源模型。
- 标点预测（FireRedPunc）：自动为无标点转录文本添加中英文标点符号，综合F1分数为78.90%，显著提升文本自然度与阅读体验。
FireRedASR2S的技术实现
- 语音识别（FireRedASR2）：采用Encoder-Adapter-LLM与Attention-based Encoder-Decoder双路径设计。LLM版本借助大语言模型强大的语义理解能力实现语音到文本的深层映射；AED版本则在经典编解码结构基础上引入轻量适配器层，高效融合声学与语言特征，兼顾精度与实时性，并原生支持字级对齐与置信度估计。
- 语音活动检测（FireRedVAD）：基于DFSMN（Deep Feedforward Sequential Memory Networks）构建时序建模主干，结合滑动窗口平滑策略与动态阈值机制，精准定位语音起止边界，同时区分说话声、歌声与伴奏音乐，满足低延迟流式处理需求。
- 语种识别（FireRedLID）：复用FireRedASR2共享编码器提取通用语音表征，接轻量分类头完成语种/方言判别；依托海量多语种预训练数据，构建跨语言统一语义空间，保障多语种泛化能力与细粒度方言区分效果。
- 标点预测（FireRedPunc）：以BERT为基础架构，将原始ASR输出文本作为输入序列，对每个token位置预测对应标点类别（句号、逗号、问号等）；经中英文多领域语料联合微调，深度学习上下文语义与句法结构规律，实现高质量标点还原。
FireRedASR2S的官方资源
- GitHub项目主页：https://www.php.cn/link/bd55122154b37dd5297d29c7794bed19
- HuggingFace模型中心：https://www.php.cn/link/e3f37a80937016c28f4b687370f9783e
FireRedASR2S的典型应用场景
- 内容社区交互升级：已在小红书平台支撑语音评论、语音搜索等高频功能，使用户能以方言、唱歌、快板等形式自由表达，强化社区“真人感”与互动趣味性。
- 社交沟通体验优化：赋能语音私信、节日语音祝福等场景，实现边说边转、所听即所得的实时语音输入体验，降低表达门槛，增强情感传达效率。
- 多媒体内容生产提效：支持语音发布笔记、直播实时字幕、短视频自动生成字幕等功能，助力创作者快速完成音视频内容加工与传播。
- 企业级智能服务支撑：适用于会议纪要生成、智能语音客服、通话质量分析等B端业务，支持完全私有化部署，满足金融、政务、医疗等行业对数据主权与合规性的严苛要求。
