讲师中心 微信公众号
AI工具推荐 视频效率加速

如何在扣子中通过HTTP节点调用外部私有部署的本地大模型

胖静吖_4123

胖静吖_4123

发布时间:2026-06-21 08:21:18

|

371人浏览过

|

来源于php中文网

原创

要在扣子中调用本机或内网私有大模型,需将服务部署于可被访问的局域网/公网地址,通过HTTP节点构造请求并用代码块解析响应。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜

如何在扣子中通过http节点调用外部私有部署的本地大模型

要在扣子中让Bot实际调用你本机或内网部署的私有大模型(比如Ollama、vLLM、FastChat启动的服务),必须绕过官方模型节点限制,通过HTTP节点构造原始请求并正确解析流式或非流式响应。

确认本地模型服务已就绪

启动你的私有模型服务,确保它监听在可被扣子访问的地址上。若模型运行在你自己的电脑上,扣子无法直连127.0.0.1——【必须部署在能被公网或企业内网路由到达的服务器上】,例如 http://192.168.1.100:11434 或 http://model-api.internal.company:8000。

用浏览器或curl访问该地址的健康检查端点(如 /api/v1/health 或 /healthz),返回200才算真正就绪。

在扣子对话流中添加HTTP节点

进入Bot编辑器 → 工作流模式 → 点击「+ 添加节点」→ 选择「HTTP请求」节点。

点击右上角「导入cURL」,将你本地模型API文档中提供的完整curl命令粘贴进去(例如:curl -X POST "http://192.168.1.100:11434/api/v1/generate" -H "Content-Type: application/json" -d '{"prompt":"你好","max_new_tokens":64}')。

导入后自动填充URL、Method、Headers和Body;检查Headers中是否含 Content-Type: application/json,没有则手动添加。

配置请求体参数并绑定变量

在HTTP节点的「请求体」区域,把固定prompt替换成动态变量:把 "prompt":"你好" 改为 "prompt":"{{input}}",其中 input 是前序节点(如用户输入节点)输出的变量名。

根据你的模型API要求,补全必要字段:Ollama需加 "model":"llama3",vLLM需加 "temperature":0.7,"top_p":0.9,FastChat可能需要 "messages":[{"role":"user","content":"{{input}}"}]。

扣子Coze CLI工具
扣子Coze CLI工具

与 Coze CLI (@coze/cli) 交互——创建/部署 Coze 项目、管理空间和组织、向项目发送消息、生成图像/音频/视频等功能

下载

注意:如果模型返回SSE流(text/event-stream),扣子HTTP节点默认不解析,后续必须用代码块处理;若返回纯JSON,则可直接提取。

添加代码块解析响应内容

在HTTP节点下游连接一个「代码」节点,语言选Python,填入以下解析逻辑:

async def main(args: "Args"):  
    import json  
    params = getattr(args, "params", {}) or {}  
    body = params.get("body", "")  
    if isinstance(body, (bytes, bytearray)):  
        body = body.decode("utf-8", errors="ignore")  
    try:  
        resp = json.loads(body)  
        # Ollama格式:resp["response"]  
        # vLLM/FastChat格式:resp["choices"][0]["message"]["content"]  
        text = resp.get("response") or (resp.get("choices", [{}])[0].get("message", {}).get("content") or "")  
        return {"output": text.strip()}  
    except Exception as e:  
        return {"output": f"解析失败:{str(e)}"}

这段代码兼容常见私有模型返回结构,优先取 response 字段(Ollama), fallback 到 choices[0].message.content(OpenAI兼容接口)。

测试与调试关键步骤

第一步:在HTTP节点配置页点击「测试」,观察返回状态码是否为200;若报错404,检查URL路径是否漏掉 /api/v1/generate 等后缀;

第二步:若状态码正常但返回空,打开代码块的「日志」开关,运行后查看原始body内容,确认是JSON还是SSE流;

第三步:若body是SSE格式(以 data: {...} 开头),需改写代码块,用正则或逐行split提取最后一条非空data后的JSON;

第四步:将代码块输出的 output 字段连接到「回复」节点,保存并试运行。

热门AI工具

更多
立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

Laper
Laper Hot

Laper是专为编剧、导演和制片人推出的 AI 原生剧本创作工具。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

相关专题

更多
扣子智能体开发实操指南
扣子智能体开发实操指南

本专题面向开发者与产品同学,完整讲解扣子智能体Bot从零到一的搭建流程,包括Bot创建、提示词编写、插件接入、变量与记忆配置、调试与多渠道发布,帮助你打造属于自己的AI助手。

514

2026.06.05

扣子工作流全功能使用教程
扣子工作流全功能使用教程

本专题系统讲解扣子工作流的搭建逻辑与节点使用,覆盖LLM节点、代码节点、条件分支、循环节点与子工作流等核心能力,配合15个实战案例,帮助你用工作流把复杂业务流程自动化。

414

2026.06.05

扣子知识库零基础入门
扣子知识库零基础入门

本专题围绕扣子知识库与记忆系统,详细讲解知识库创建、文档上传、切片策略、向量召回、问答调优以及变量记忆与数据库的使用方法,帮助你打造高准确率的私有知识问答能力。

507

2026.06.05

剧云故事大纲与分场规划教程
剧云故事大纲与分场规划教程

本专题讲解剧云梗概与多级大纲功能,覆盖全局、分集、分场结构生成,以及主线冲突、剧情节点和场次顺序调整。

0

2026.10.22

VibeKnow PPT讲解视频教程汇总
VibeKnow PPT讲解视频教程汇总

本专题介绍VibeKnow PPT讲解模式的素材准备、旁白生成、页面节奏、画面呈现与导出设置,适合课程和培训场景。

0

2026.10.22

VibeKnow PDF转视频教程合集
VibeKnow PDF转视频教程合集

本专题围绕VibeKnow的PDF转视频功能,讲解文件准备、内容解析、脚本生成、重点可视化及配音字幕检查方法。

0

2026.10.22

二狗PPT模板与视觉设计
二狗PPT模板与视觉设计

本专题介绍二狗PPT的职场模板、主题风格与页面版式,覆盖模板切换、色彩选择、内容匹配和正式汇报场景下的视觉优化方法。

0

2026.10.22

php漏洞修复方法
php漏洞修复方法

PHP漏洞聚合专题,持续整理PHP最新高危漏洞、CVE安全预警、受影响版本、自查命令及修复方案,覆盖PHP-FPM、Docker、Ubuntu与Linux服务器环境,帮助开发者快速完成漏洞排查、版本升级和安全加固。

0

2026.10.22

二狗PPT入门与基础操作
二狗PPT入门与基础操作

本专题整理二狗PPT从官网进入、输入主题、生成大纲到制作成稿的基础操作,帮助新手掌握AI一键生成职场PPT的完整流程。

0

2026.10.22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
扣子入门级教程
扣子入门级教程

共0课时 | 281人学习

扣子官方文档
扣子官方文档

共0课时 | 0人学习

扣子官方文档
扣子官方文档

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn