讲师中心 微信公众号
AI工具推荐 视频效率加速

怎样用Dify构建多模态AI内容生成工作台

陌静君_8250

陌静君_8250

发布时间:2026-07-27 15:53:26

|

790人浏览过

|

来源于php中文网

原创

Dify可视化工作流集成豆包插件可一站式实现文生图、文生视频、图生视频三模态串联。需部署Dify、配置豆包插件(开通多模态权限)、搭建含条件路由与合并输出的工作流,并通过API调用返回24小时有效URL。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜

怎样用dify构建多模态ai内容生成工作台

你需要一个能同时生成图片、视频甚至让静态图动起来的AI内容生产环境,而不是分别调用多个API拼凑流程。Dify可视化工作流配合豆包插件,能把文生图、文生视频、图生视频三类能力串成一条可复用、可调试、可对外提供服务的完整链路。

部署Dify并接入豆包插件

打开终端,执行以下命令拉取最新版Dify代码并启动服务:

git clone https://github.com/langgenius/dify.git → cd dify/docker → cp .env.example .env → 修改 .env 中 EXPOSE_NGINX_PORT=9060(避免与本地其他服务冲突)→ sudo docker compose up -d

等待容器启动完成(约90秒),浏览器访问 http://localhost:9060/install 完成管理员初始化。这一步必须做完,否则后续无法添加插件。

立即进入“豆包AI人工智官网入口”;

立即学习“豆包AI人工智能在线问答入口”;

登录后进入「设置 → 插件」页面,点击「添加插件」→ 选择「DouBao」→ 填写豆包开放平台获取的 【API Key 和 Base URL】 → 点击「测试连接」确认绿色对勾出现。注意:豆包插件需在开放平台开通「多模态生成」权限,否则文生视频节点会报错403。

搭建三模态串联工作流

进入「工作流」→ 「新建工作流」→ 命名为“多模态内容生成台”。拖入以下节点并按顺序连接:

① 用户输入节点 → 绑定变量 input_text(文本描述)和 input_image(可选上传图)

② 条件路由节点 → 设置判断逻辑:【if input_image != null then 走图生视频分支,else 走文生图+文生视频分支】

Dify
Dify

Dify AI应用开发平台指南。用于构建LLM应用、工作流、Agent和知识库。当用户需要(1)使用Dify创建AI应用 (2)设计LLM工作流 (3)配置知识库RAG (4)开发AI Agent (5)调用Dify API (6)自托管部署Dify时激活此技能。

下载

③ 文生图节点 → 选择豆包插件 → 模型选 doudou-v1 → 提示词字段填 {{input_text}} → 输出类型设为 image_url

④ 文生视频节点 → 同样选豆包插件 → 模型选 douyin-video-v2 → 输入字段填 {{input_text}} → 视频时长设为10秒 → 输出类型设为 video_url

⑤ 图生视频节点 → 插件同上 → 模型选 douyin-image2video-v1 → 输入字段填 {{input_image}} → 必须勾选「启用运动增强」,否则生成结果静止不动

⑥ 合并输出节点 → 将三个分支的 image_url / video_url / video_url 统一映射到 output 字段,格式为 JSON:
{"image": "{{node_3.output}}", "video": "{{node_4.output}}", "animated_video": "{{node_5.output}}"}

配置前端调用接口

工作流保存后,点击右上角「发布」按钮。系统自动生成唯一 API 地址,形如 https://your-domain.com/api/workflows/xxx/run

复制该地址,在 Postman 或 curl 中发起 POST 请求,Header 加入 Authorization: Bearer 【你的API Key】,Body 使用 raw → JSON 格式提交:

{"inputs": {"input_text": "一只穿宇航服的橘猫站在火星表面眺望地球", "input_image": ""}}

若需传图,input_image 字段值应为 base64 编码字符串(前端可用 FileReader.readAsDataURL() 获取),且总请求体不能超过 10MB。

成功响应返回包含三个 URL 的 JSON,每个链接有效期 24 小时,到期自动失效。

热门AI工具

更多
PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

SkildArt
SkildArt Hot

SkildArt是一款AI文本写作工具,一站式 AI 视觉创作平台。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

PixPix
PixPix Hot

PixPix是一款面向电商视觉生产的AI商品图生成工具。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

相关专题

更多
即梦AI视频生成实战教程
即梦AI视频生成实战教程

本专题全面讲解视频故事创作与风格化处理方法。通过实例操作,掌握即梦AI运镜控制、画质优化和创意特效技巧,轻松实现高质量视频制作。适合新手与专业创作者快速上手,提升视频内容创新力与制作效率。

944

2026.05.14

ape怎么转wav
ape怎么转wav

ape可以通过使用音频转换软件、使用在线转换工具和音频编辑软件的方法转wav格式。在转换完成后,可以使用音频播放器或编辑软件打开转换后的WAV文件,以确保转换质量和文件完整性。更多关于ape相关的文章,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

3078

2023.11.21

WorkBuddy核心功能与实操模式
WorkBuddy核心功能与实操模式

深入探索WorkBuddy的强大功能。本专题包含智能问答、文档处理、会议纪要生成、日程管理、任务协作等核心模块的操作指南与最佳实践。通过图文并茂的教程,助您快速上手,最大化发挥WorkBuddy的办公效能。

602

2026.04.09

Dify 本地部署与企业配置
Dify 本地部署与企业配置

本专题系统讲解 Dify 从零开始的本地部署方法与企业环境配置实践,涵盖 Docker 安装、依赖准备、数据库初始化、反向代理、参数调优、安全加固与多用户开通,帮助开发者与企业团队快速搭建稳定可用的 Dify 平台。

657

2026.06.05

Dify Agent智能体开发实战教程
Dify Agent智能体开发实战教程

本专题聚焦 Dify Agent 智能体的设计与开发,涵盖 Agent 模式选择、工具集成、提示词设计、多步推理、上下文记忆与多 Agent 协作,帮助开发者构建可执行复杂业务任务的智能体应用。

245

2026.06.05

Dify RAG知识库构建实战教程
Dify RAG知识库构建实战教程

本专题围绕 Dify RAG 知识库的全流程实践展开,从文档导入、分段切片、向量化到混合检索、重排优化与召回评估,帮助你打造高准确率、低幻觉的企业知识问答应用。

236

2026.06.05

PixTV官网入口地址合集
PixTV官网入口地址合集

本专题汇总了 PixTV AI 一站式视频创作平台的官方入口与使用教程。无需下载软件,浏览器直接访问即可使用。平台将剧本、图像、视频、声音与剪辑整合在“无限画布”中,接入 GPT Image 2.5、Seedance 2.5 等头部模型。本专题整理了从新建画布、角色锚定、分镜拆分到视频生成与导出的完整操作指南,助你快速上手 AI 短剧与漫剧创作。

80

2026.10.10

Kratos框架HTTP与gRPC服务开发教程
Kratos框架HTTP与gRPC服务开发教程

本专题围绕Kratos框架双协议服务开发,涵盖HTTP路由与处理器编写、参数获取、gRPC服务实现与客户端调用、metadata上下文传递、encoding编解码注册、统一响应封装、超时控制与流式响应实现方法。

40

2026.10.10

Kratos框架Protobuf接口定义与代码生成合集
Kratos框架Protobuf接口定义与代码生成合集

本专题讲解Kratos框架接口定义体系,涵盖proto编写规范、proto add/client/server生成命令、http注解路由、validate校验、OpenAPI文档生成、跨服务proto复用与兼容性设计。

20

2026.10.10

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Dify零基础教程
Dify零基础教程

共0课时 | 148人学习

学习Agent,从Dify开始
学习Agent,从Dify开始

共0课时 | 146人学习

Dify 部署与运维指南
Dify 部署与运维指南

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn