讲师中心 微信公众号
AI工具推荐 视频效率加速

SQL如何实现将JSON数据解析并插入关系表_利用JSON_TABLE函数

轻浩酱_4539

轻浩酱_4539

发布时间:2026-04-08 15:07:31

|

863人浏览过

|

来源于php中文网

原创

JSON_TABLE函数在MySQL 8.0.24及以上版本可用,MariaDB不支持;PostgreSQL用jsonb_to_recordset,SQL Server用OPENJSON;需注意版本验证、路径写法、类型匹配及性能容错问题。

sql如何实现将json数据解析并插入关系表_利用json_table函数

JSON_TABLE函数在MySQL 8.0+中是否可用?

不可用。MySQL 直到 8.0.24 才引入 JSON_TABLE,且仅限于 MySQL(MariaDB 不支持,PostgreSQL 用 jsonb_to_recordset,SQL Server 用 OPENJSON)。如果你执行 SELECT * FROM JSON_TABLE(...) 报错 Unknown function 'JSON_TABLE',大概率是 MySQL 版本低于 8.0.24 或未启用组件。

验证方式:

SELECT VERSION();
并确认输出类似 8.0.24 或更高;再查组件状态:
SELECT * FROM INFORMATION_SCHEMA.INNODB_SYS_DATAFILES WHERE FILE_NAME LIKE '%json%';
(非必须,但可辅助判断 JSON 功能完整性)。

如何用JSON_TABLE把一行JSON字符串展开成多行关系数据?

核心是把嵌套 JSON 当作“虚拟表”来查询,需显式声明列名、类型和路径。常见错误是路径写错(比如漏掉 $ 或误用双引号),或类型不匹配导致字段为 NULL。

典型场景:有一张日志表 raw_logs,其中 payload 是 JSON 字符串:

{"user_id": 101, "events": [{"type":"click","ts":1712345678}, {"type":"submit","ts":1712345699}]}
想把每个 events 元素拆成一行,关联 user_id 插入 user_events 表。

实操写法:

INSERT INTO user_events (user_id, event_type, event_ts)
SELECT jt.user_id, jt.event_type, jt.event_ts
FROM raw_logs rl,
JSON_TABLE(
  rl.payload,
  '$.events[*]' COLUMNS (
    user_id INT PATH '$.user_id' ERROR ON ERROR,
    event_type VARCHAR(20) PATH '$.type',
    event_ts BIGINT PATH '$.ts'
  )
) AS jt;

注意点:

  • $.events[*] 是横向展开路径,必须指向数组;若写成 $ 会只取根对象,COLUMNS 中的 $.user_id 就找不到(因不在当前上下文)
  • ERROR ON ERROR 让解析失败时整行跳过,避免插入 NULL;换成 NULL ON ERROR 则字段填 NULL
  • 所有 PATH 都相对于 $.events[*] 的每个元素,所以 user_id 实际要从外层 JSON 提取,得用 NESTED PATH 或先 JOIN 原表字段——上面写法是“伪正确”,真实应改用:
    SELECT rl.user_id, jt.event_type, jt.event_ts
    FROM raw_logs rl,
    JSON_TABLE(rl.payload, '$.events[*]' COLUMNS (
      event_type VARCHAR(20) PATH '$.type',
      event_ts BIGINT PATH '$.ts'
    )) AS jt;
    (前提是 raw_logs 表本身已有 user_id 字段;否则需用 NESTED PATH 多级展开)

PostgreSQL或SQL Server用户该用什么替代?

别硬套 JSON_TABLE。PostgreSQL 应直接用 jsonb_to_recordset + LATERAL,SQL Server 用 OPENJSON 配合 WITH 子句。

PostgreSQL 示例(假设 payload 是 jsonb 类型):

INSERT INTO user_events (user_id, event_type, event_ts)
SELECT (j.*).user_id, (j.*).type, (j.*).ts
FROM raw_logs rl,
LATERAL jsonb_to_recordset(rl.payload->'events') AS j("type" text, "ts" bigint, "user_id" int);

SQL Server 示例:

INSERT INTO user_events (user_id, event_type, event_ts)
SELECT r.user_id, j.type, j.ts
FROM raw_logs r
CROSS APPLY OPENJSON(r.payload, '$.events')
  WITH (
    type VARCHAR(20) '$.type',
    ts BIGINT '$.ts',
    user_id INT '$.user_id' -- 注意:这里无法直接从外层取,需提前解析或改结构
  ) AS j;
如果 user_id 在外层,SQL Server 更稳妥的做法是先用 OPENJSON 解外层,再 CROSS APPLY 解 events 数组。

性能和数据一致性容易被忽略的点

JSON_TABLE 是运行时解析,无索引加速。如果 raw_logs 有百万行,每次查询都全表解析 JSON,I/O 和 CPU 开销明显。上线前务必在生产等效数据量下压测。

更关键的是容错边界:

  • JSON 格式非法(如多末尾逗号、单引号)→ 整行被跳过(ERROR ON ERROR)或字段为 NULL(NULL ON ERROR),但不会报错中断事务
  • 路径匹配零个元素(如 $.events 不存在)→ JSON_TABLE 返回空结果集,INSERT 插 0 行,极易被忽略
  • 数值溢出(如 INT PATH 匹配到 "9999999999")→ 按 MySQL 转换规则截断或变 0,不会报错

真正上线时,建议加一层校验:先用 JSON_VALID(rl.payload) 过滤,再用 JSON_LENGTH(rl.payload->'events') 确认数组非空,最后才进 JSON_TABLE。

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
Lovart
Lovart Hot

一款面向视觉设计创作的AI设计平台,可通过智能体和画布工作流辅助制作海报、Logo、网页、PPT及其他视觉内容。

PixTV
PixTV Hot

PixTV是一款面向AIGC内容创作的AI视频生成工具。

Loomy
Loomy Hot

一款AI工具,主要用于科大讯飞发布的桌面级 AI 助理,比 OpenClaw 更易用、更安全!,适合需要提升相关任务效率的用户。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

蛙蛙写作

一款AI论文写作工具,主要用于超级AI智能写作助手,适合需要提升相关任务效率的用户。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

4443

2023.10.12

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

931

2023.10.27

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

1169

2024.02.23

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

6381

2024.03.06

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

3183

2024.03.06

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

6360

2024.04.07

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

8661

2024.04.29

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

1170

2024.04.29

Gradle插件开发入门教程
Gradle插件开发入门教程

本专题介绍Gradle插件开发的基本流程,涵盖插件类编写、自定义任务注册、扩展参数设计和插件应用方法,帮助你理解插件如何组织构建逻辑,减少多个项目之间的重复配置。

0

2026.10.22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn