讲师中心 微信公众号
AI工具推荐 视频效率加速

千问的多模态能力覆盖哪些输入类型?

梦雪小哥_1118

梦雪小哥_1118

发布时间:2026-05-28 07:35:19

|

407人浏览过

|

来源于php中文网

原创

千问大模型支持多模态输入,包括图文混合(PDF、JPG/PNG、多图)、音视频(长音频、720P视频、113种语种识别)、检测框标注、多模态重排序及语音合成驱动输入。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜

千问的多模态能力覆盖哪些输入类型?

如果您在使用千问大模型时希望输入非文本内容,则需明确其支持的多模态输入类型。以下是千问系列中具备多模态能力的模型所覆盖的输入类型说明:

一、图文混合输入

Qwen3.5-4B-AWQ、Qwen-VL、Qwen3.5-Omni等模型原生支持图像与文本联合输入。该能力基于视觉编码器(如ViT)与语言模型的深度耦合,可同步解析图像语义与文字描述,并进行跨模态对齐。

1、支持上传PDF文档,自动提取其中嵌入的文字与图片元素

2、支持JPG、PNG等常见静态图像格式,分辨率最高达448×448

3、支持多图交错输入,在单次对话中依次或并列提交多张图像并指定关联问题

二、音视频输入

Qwen3.5-Omni作为全模态模型,突破了传统图文限制,直接接入原始音视频流信号,通过端到端架构实现声画联合建模,无需预转录或帧抽取。

1、支持超过10小时的连续音频输入,适用于长会议录音、播客等场景

2、支持超过400秒的720P音视频输入(1 FPS采样),可处理带语音解说的演示视频

3、支持113种语种和方言的语音识别,覆盖普通话、粤语、闽南语、藏语、维吾尔语等国内主要语言变体

三、检测框与空间标注输入

Qwen-VL系列模型支持结构化视觉输入,允许用户以边界框(bounding box)形式指定图像中关注区域,实现细粒度定位理解。

1、输入格式为[x_min, y_min, x_max, y_max]坐标序列,可叠加于任意图像之上

Aliyun Qwen Tts Voice Clone
Aliyun Qwen Tts Voice Clone

用于在使用阿里云 Model Studio Qwen TTS VC 模型进行声音克隆,根据样例音频创建克隆声音并合成文本。

下载

2、支持中文开放域定位指令,例如“把穿红衣服站在左边的人框出来”

3、可在同一张图像中同时输入多个检测框,分别对应不同问答目标

四、多模态重排序专用输入

通义千问3-VL-Reranker-8B专用于检索后精排阶段,接受文本+图像/视频混合候选集作为输入,执行跨模态相关性打分。

1、输入包含用户查询文本与最多8个图文或音视频候选样本

2、每个候选样本可附带原始媒体文件及人工标注的alt文本或标题

3、模型内部执行cross-encoder式联合编码,不依赖独立embedding向量拼接

五、语音合成驱动输入

部分Qwen3.5-Omni Instruct版本支持语音生成反向驱动,即以目标语音特征参数(如音色ID、语速、韵律曲线)作为辅助输入条件,调控文本到语音的输出质量。

1、提供4种自然对话音色选项,包括青年女声、沉稳男声、亲切童声与专业播报声

2、支持音色迁移控制,可将同一段文本生成为不同角色语音风格

3、输入中可嵌入语音控制标记,例如[speed:0.9][tone:friendly],实时调节合成参数

热门AI工具

更多
超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

Lovart
Lovart Hot

一款面向视觉设计创作的AI设计平台,可通过智能体和画布工作流辅助制作海报、Logo、网页、PPT及其他视觉内容。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

Laper
Laper Hot

Laper是专为编剧、导演和制片人推出的 AI 原生剧本创作工具。

相关专题

更多
OpenJDK JVM参数怎么调优
OpenJDK JVM参数怎么调优

Java应用运行缓慢,如何调整JVM参数?本专题介绍OpenJDK JVM性能调优的基本流程,涵盖性能指标确认、运行数据采集、内存配置和垃圾回收分析,帮助你先定位瓶颈,再通过对照测试验证效果,避免直接套用参数而影响应用稳定性。

0

2026.10.16

OpenJDK怎么配置Java开发环境
OpenJDK怎么配置Java开发环境

怎样用OpenJDK搭建开发环境?本专题介绍版本选择、下载安装、环境变量配置和编译运行验证,帮助你理清JDK的作用及基本配置流程,并通过简单程序检查环境是否可用,为后续项目开发做好准备。

0

2026.10.16

OpenJDK怎么部署Java应用
OpenJDK怎么部署Java应用

Java项目开发完成后,怎样部署到目标环境并正常运行?本专题介绍OpenJDK应用部署流程,涵盖运行环境准备、版本兼容检查、应用打包、启动参数配置和日志查看,帮助你理清部署前后的操作顺序,减少环境差异造成的运行问题。

0

2026.10.16

Revel框架模板渲染与表单验证
Revel框架模板渲染与表单验证

本专题围绕Revel框架视图层开发,介绍模板语法、变量输出、布局复用、表单提交、参数绑定与验证规则,帮助开发者完成安全规范的页面交互。

0

2026.10.16

Revel框架MVC路由与控制器
Revel框架MVC路由与控制器

本专题聚焦Revel框架MVC核心机制,讲解路由定义、控制器Action、参数绑定、请求响应和反向路由,并结合常见场景梳理接口请求处理流程。

0

2026.10.16

Revel框架入门与安装配置
Revel框架入门与安装配置

本专题从Revel框架环境搭建讲起,系统介绍命令行工具安装、项目创建、目录结构、配置文件及热代码重载,帮助开发者快速完成首个Go Web应用。

0

2026.10.16

Linux 新手先学哪些命令
Linux 新手先学哪些命令

Linux新手命令专题汇集终端基础、文件目录操作、文本查看、软件安装和权限管理等入门文章,帮助按实际任务练习常用命令并建立命令行操作习惯。

0

2026.10.15

MySQL 忘记密码怎么办
MySQL 忘记密码怎么办

MySQL忘记密码专题汇集不同版本与系统下的root密码重置方法,覆盖MySQL 5.7、8.0、Mac、Linux及本地集成环境,并提示恢复权限与重新登录的检查步骤。

0

2026.10.15

Vue.js 中 ref 和 reactive 的区别
Vue.js 中 ref 和 reactive 的区别

Vue.js中ref和reactive的区别专题汇集两种响应式API的定义、访问方式、对象解构、侦听与性能取舍等文章,帮助结合实际状态类型选择合适写法。

0

2026.10.15

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
通义千问基本用法
通义千问基本用法

共1课时 | 232人学习

通义千问的提示词工程
通义千问的提示词工程

共1课时 | 268人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn