讲师中心 微信公众号

工具推荐

视频效率加速
AniShort
AniShort

AI短剧协同制作平台

Laper
Laper

剧本策划到成片协作

剧云
剧云

中文短剧剧本制作平台

Seko
Seko

AI短剧一键生成成片

豆包Seed-Realtime支持视频帧输入,每个会话最高2FPS

千墨酱_1762

千墨酱_1762

发布时间:2026-11-19 22:44:35

|

871人浏览过

|

来源于php中文网

原创

豆包实时音视频模型doubao-seed-realtime-1.0在全双工seeduplex基础上加入视频帧、图片输入与火山搜图能力。火山引擎公开接口文档显示,客户端可通过同一条websocket并行发送音频和画面,每个会话的视频帧率上限为2fps,超出频率的帧会被网关直接丢弃,不返回业务错误。

画面与音频在同一会话中输入

新增的input_image_buffer.append事件用于提交Base64编码的画面,图像格式须与创建会话时声明的PNG或JPEG一致。frame_id可由客户端递增提供,用于帧顺序追踪;未提供时由服务端补充。官方接入建议采用720p等适合实时传输的画面范围,并针对文档、会议等场景先处理敏感区域。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜

豆包Seed-Realtime视频帧事件和2FPS限制

官方接口说明列出图像格式、帧率与超频丢帧行为。

音频仍按实时节奏上传。对于16kHz、int16输入,官方建议每20毫秒发送一包,即640字节;视频按自身节奏独立上行。2FPS属于会话资源控制,文档明确它不是按帧数计费的规则,也不能将其理解为高帧率视频流转发能力。

模型名称与接口参数并不相同

产品名称为Doubao-Seed-Realtime-1.0,但当前接口的session.model要求填写1.3.0.0。连接路径为wss://openspeech.bytedance.com/api/v3/realtime,请求头使用X-Api-Key。接入应用需要先在火山引擎控制台取得相应API Key及服务权限,不能把豆包App中的体验入口直接当作开发接口资格。

火山引擎
火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

下载

豆包Seed-Realtime官方实时音视频交互时序

官方时序使用1.3.0.0会话并分别发送音频与图像。

64K是多部分共同使用的上下文额度

官方将系统提示词instructions、模型内部系统提示、历史对话和Function Calling结果的合计上限列为64K tokens。这个数字不是仅给用户系统提示词单独使用的额度。图片输入、实时音频与工具结果同时存在时,应用仍需控制历史和结果规模;文档中的能力说明也不代表任何画面识别准确率或响应延迟保证。

立即进入“豆包AI人工智官网入口”;

立即学习“豆包AI人工智能在线问答入口”;

热门AI工具

更多
WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

函子Zion

一款支持AI搭建、可视化编辑和多端发布的全栈无代码开发平台。

PixPix
PixPix Hot

PixPix是一款面向电商视觉生产的AI商品图生成工具。

VibeKnow
VibeKnow Hot

一款AI视频创作工具,主要用于全球首个AI知识视频创作平台,文档、文章、网页,一键生成视频,适合需要提升相关任务效率的用户。

火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

笔灵降AI

一款AI论文写作工具,主要用于论文降AI神器,适配知网及维普!一键降至安全线,100%保留原文格式;无口语化问题,文风更学术,降后字数控制最佳!,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

切问学术

切问学术是一款AI论文写作工具,复旦大学NLP团队推出的AI学术智能体。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

相关专题

更多
豆包App怎么下载和使用
豆包App怎么下载和使用

字节跳动推出的“豆包”是一款 ai 助手 app,提供文本创作和图像生成等功能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

4763

2024.12.17

豆包是干什么的怎么用
豆包是干什么的怎么用

豆包是一款功能强大的ai聊天智能对话问答助手,主要用于提供聊天机器人、写作助手、英语学习助手等功能,帮助用户获取信息、进行对话、辅助创作等‌‌。想了解更多相关的内容,请阅读专题下面的文章。

16877

2024.12.25

豆包是国产软件吗
豆包是国产软件吗

豆包是一款国产AI工具,由字节跳动公司基于云雀模型开发。它提供聊天机器人、写作助手和英语学习助手等功能,支持网页、iOS和安卓平台。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

28861

2025.02.05

豆包是什么软件有什么作用
豆包是什么软件有什么作用

豆包是一款跨平台文件传输工具,支持多种操作系统。其主要功能包括:快速传输:采用先进协议,实现高速文件传输。安全加密:端到端加密,确保数据安全。跨平台支持:支持各种操作系统和设备。大文件传输:轻松传输不受限的大文件。多设备互传:提高工作效率。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

4702

2025.02.08

豆包是哪个公司开发的软件
豆包是哪个公司开发的软件

豆包是字节跳动开发的软件。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

7576

2025.02.08

豆包是什么时候发布的
豆包是什么时候发布的

字节跳动的 AI 产品 “豆包” 第一次发布时间是 2023 年 8 月 17 日。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

5858

2025.02.12

豆包存在哪些风险
豆包存在哪些风险

豆包软件的风险主要在于其安全性、隐私性以及潜在的法律合规问题。想了解更多相关的内容,请阅读专题下面的文章。

31657

2025.02.17

抖音旗下的豆包是什么
抖音旗下的豆包是什么

抖音旗下的豆包是一款即时语音互动社交平台,定位于年轻群体。想了解更多相关内容,请阅读专题下面的文章。

6234

2025.03.27

GoFrame框架Web开发与路由中间件
GoFrame框架Web开发与路由中间件

本专题聚焦GoFrame框架的Web开发,拆解路由注册与匹配规则、请求参数获取、参数校验与中间件执行顺序,说明统一响应、JWT鉴权、文件上传与接口文档生成的落地方式,并补充优雅重启与测试实践。

20

2026.11.17

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
豆包AI手册
豆包AI手册

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn