讲师中心 微信公众号
AI工具推荐 视频效率加速

将扁平JSON数据转换为MySQL分层结构教程

陌芳君_4119

陌芳君_4119

发布时间:2025-10-29 13:01:16

|

497人浏览过

|

来源于php中文网

原创

将扁平JSON数据转换为MySQL分层结构教程

本教程详细介绍了如何将包含分层信息的扁平json字符串(例如“clothes - pants - jeans”)导入mysql数据库,并构建出具有父子关系的层级结构。通过php脚本解析json、拆分字符串并巧妙管理父级id,确保数据正确地存储为可查询的树状结构,解决在创建层级关系时常见的父级id关联错误。

从扁平JSON构建MySQL分层结构

在数据处理和存储中,我们经常会遇到需要将某种格式的扁平数据转换为具有层级关系的结构。本教程将指导您如何使用PHP将包含以特定分隔符表示的层级信息的JSON数据导入MySQL数据库,并构建一个可查询的树状结构。

1. 问题背景与数据结构

假设我们有一个JSON文件,其中包含产品类别信息,但这些信息是以扁平的、通过分隔符连接的字符串形式存在的:

[
  {"productCategory":"Clothes - Pants - Jeans"},
  {"productCategory":"Clothes - Pants - Chinos"},
  {"productCategory":"Electronics - Laptops - Gaming"}
]

我们的目标是将这些类别导入到MySQL数据库中,并形成一个具有父子关系的层级结构。期望的数据库表结构如下:

taxonomy_id taxonomy_name taxonomy_parent taxonomy_type
1 Clothes 0 Category
2 Pants 1 Category
3 Jeans 2 Category
4 Chinos 2 Category
5 Electronics 0 Category
6 Laptops 5 Category
7 Gaming 6 Category

其中,taxonomy_id 是主键,taxonomy_name 是类别名称,taxonomy_parent 指向其父类别的 taxonomy_id(根类别为0),taxonomy_type 标识类别类型。

2. 核心思路与挑战

处理这种数据转换的核心思路是:

  1. 解析JSON: 读取JSON文件并将其解码为PHP数组。
  2. 拆分层级字符串: 使用分隔符(例如 '-')将每个 productCategory 字符串拆分成独立的层级名称数组。
  3. 迭代处理层级: 遍历拆分后的层级名称数组,为每个层级名称在数据库中创建或查找对应的条目。
  4. 管理父级ID: 这是最关键的一步。在处理每个子层级时,需要知道其直接父级的 taxonomy_id。

最初的尝试可能遇到的问题是,在处理子层级时,父级ID的跟踪逻辑可能出现偏差,导致某些子类别的 taxonomy_parent 字段未能正确关联到其父级。

3. PHP实现:逐步构建层级

我们将使用PHP来完成这一任务。为了简化数据库操作,我们假设存在一个 Insert_Taxonomy 类,它封装了与数据库交互的方法:

  • Exists_Taxonomy_Name($name): 检查给定名称的类别是否已存在。
  • Get_Taxonomy_Id($name): 根据类别名称获取其 taxonomy_id。如果名称为0,则返回0(表示根类别)。
  • create_taxonomy($args): 创建新的类别记录,$args 数组包含名称、父ID和类型。

完整解决方案代码:

<?php

// 引入数据库操作类,例如 Insert_Taxonomy
include_once('../../../products/categories.inc.php');

// 读取JSON文件内容
$string = file_get_contents("category.json");
// 将JSON字符串解码为PHP关联数组
$json_decode = json_decode($string, true);

// 实例化数据库操作对象
$taxonomy = new Insert_Taxonomy();

// 遍历JSON数据中的每个产品类别条目
foreach ( $json_decode as $keys ) {
    $category_full_path = $keys['productCategory'];

    // 使用 '-' 分隔符将完整路径拆分成各个层级名称
    $split_categories = explode( '-', $category_full_path );
    // 移除每个层级名称前后的空白字符
    $trimmed_categories = array_map('trim', $split_categories);

    // 初始化 previous_value,用于跟踪当前层级的父级名称。
    // 对于第一个层级(根类别),其父级名称为0。
    $previous_value = 0; 

    // 遍历当前产品类别路径中的每个层级名称
    foreach ( $trimmed_categories as $key => $current_category_name ) {
        // 1. 检查当前类别名称是否已存在于数据库中
        $exists_tax_name = $taxonomy->Exists_Taxonomy_Name($current_category_name);

        // 2. 获取当前类别的父级ID
        // $previous_value 存储的是父级“名称”(或0),需要通过 Get_Taxonomy_Id 转换为实际的ID
        $parent_id = $taxonomy->Get_Taxonomy_Id($previous_value);

        // 3. 如果当前类别不存在,则插入新记录
        if ( empty( $exists_tax_name ) ) {
            $args = array($current_category_name, $parent_id, 'category');
            $taxonomy->create_taxonomy($args);
        }

        // 4. 更新 previous_value 为当前类别名称,以便在下一次循环中作为子类别的父级
        // 这一步至关重要,确保了正确的父子关系链
        $previous_value = $current_category_name;
    }
}

?>

4. 代码解析与关键点

  1. 文件读取与解码:

    $string = file_get_contents("category.json");
    $json_decode = json_decode($string, true);

    这部分负责读取JSON文件并将其转换为PHP数组,true 参数确保解码为关联数组。

    Feishu calendar sync, local ics to json data for AI agent
    Feishu calendar sync, local ics to json data for AI agent

    将ICS日历文件转为JSON格式,用于飞书日历导入导出及数据集成。

    下载
  2. 实例化数据库操作类:

    $taxonomy = new Insert_Taxonomy();

    在循环外部实例化 Insert_Taxonomy 对象,避免在每次迭代中重复创建,提高效率。

  3. 拆分与清理:

    $split_categories = explode( '-', $category_full_path );
    $trimmed_categories = array_map('trim', $split_categories);

    explode 函数将字符串按 '-' 分隔符拆分为数组。array_map('trim', ...) 用于移除每个子字符串两端的空白,确保数据干净。

  4. 父级ID跟踪 ($previous_value):

    $previous_value = 0; // 初始化为0,表示根类别的父级
    // ...
    $parent_id = $taxonomy->Get_Taxonomy_Id($previous_value);
    // ...
    $previous_value = $current_category_name; // 更新为当前类别名称

    这是解决层级关系的关键。$previous_value 变量在每次内部循环中存储 前一个 已经处理过的类别名称(或0),这个名称随后被用来通过 Get_Taxonomy_Id 方法获取其对应的 taxonomy_id,作为当前类别的 taxonomy_parent。

  5. 操作顺序的重要性:

    $exists_tax_name = $taxonomy->Exists_Taxonomy_Name($current_category_name); // 1. 检查是否存在
    $parent_id = $taxonomy->Get_Taxonomy_Id($previous_value); // 2. 获取父ID
    if ( empty( $exists_tax_name ) ) { // 3. 如果不存在则插入
        $args = array($current_category_name, $parent_id, 'category');
        $taxonomy->create_taxonomy($args);
    }
    $previous_value = $current_category_name; // 4. 更新previous_value

    正确的执行顺序是:

    • 首先,检查当前类别是否已存在。
    • 然后,根据 previous_value 获取当前类别的父级ID。这一步必须在检查类别是否存在之前,因为即使类别已存在,我们也需要 previous_value 来更新它,或者在后续循环中作为下一个子类别的父级。
    • 如果类别不存在,则使用获取到的 parent_id 插入新记录。
    • 最后,将 current_category_name 赋值给 previous_value,为下一个层级的处理做好准备。这个顺序确保了无论是插入新类别还是仅仅更新 previous_value 以供后续使用,parent_id 都能正确地被计算。

5. Insert_Taxonomy 类(示例)

为了使上述代码能够运行,Insert_Taxonomy 类可能看起来像这样(仅为示例,实际实现需根据您的数据库连接和ORM库进行调整):

<?php

// 假设这是一个简化的数据库连接和操作类
class Insert_Taxonomy {
    private $pdo; // PDO数据库连接对象

    public function __construct() {
        // 实际应用中,这里会建立数据库连接
        // 例如:$this->pdo = new PDO("mysql:host=localhost;dbname=your_db", "user", "pass");
        // 为简化示例,我们假设连接已存在或通过其他方式获取
        // 这里只是一个占位符,实际需要您自己的数据库连接代码
        $this->pdo = null; // 实际应为有效的PDO对象
        error_log("Insert_Taxonomy class initialized. (Database connection assumed)");
    }

    /**
     * 检查分类名称是否存在
     * @param string $name 分类名称
     * @return bool 如果存在则返回true,否则返回false
     */
    public function Exists_Taxonomy_Name($name) {
        if ($name === 0) return true; // 根节点始终被认为“存在”
        // 实际查询数据库
        // $stmt = $this->pdo->prepare("SELECT COUNT(*) FROM taxonomy_table WHERE taxonomy_name = ?");
        // $stmt->execute([$name]);
        // return $stmt->fetchColumn() > 0;
        error_log("Checking if taxonomy name '{$name}' exists.");
        // 模拟返回
        return false; // 假设默认不存在,以便创建
    }

    /**
     * 根据分类名称获取ID
     * @param string|int $name 分类名称或0(表示根)
     * @return int 分类ID,如果不存在或为0则返回0
     */
    public function Get_Taxonomy_Id($name) {
        if ($name === 0) {
            return 0; // 根分类的ID为0
        }
        // 实际查询数据库
        // $stmt = $this->pdo->prepare("SELECT taxonomy_id FROM taxonomy_table WHERE taxonomy_name = ?");
        // $stmt->execute([$name]);
        // $result = $stmt->fetch(PDO::FETCH_ASSOC);
        // return $result ? $result['taxonomy_id'] : 0;
        error_log("Getting taxonomy ID for name '{$name}'.");
        // 模拟返回一个ID,实际应从数据库获取
        // 在实际运行中,如果名称不存在,这里应返回0或抛出错误
        return crc32($name); // 简单模拟一个ID
    }

    /**
     * 创建新的分类记录
     * @param array $args 包含 [name, parent_id, type]
     * @return bool 插入成功返回true,否则返回false
     */
    public function create_taxonomy($args) {
        list($name, $parent_id, $type) = $args;
        // 实际插入数据库
        // $stmt = $this->pdo->prepare("INSERT INTO taxonomy_table (taxonomy_name, taxonomy_parent, taxonomy_type) VALUES (?, ?, ?)");
        // return $stmt->execute([$name, $parent_id, $type]);
        error_log("Creating taxonomy: Name='{$name}', ParentID='{$parent_id}', Type='{$type}'.");
        return true; // 模拟成功
    }
}

?>

6. 注意事项与最佳实践

  • 幂等性: 确保您的脚本可以重复运行而不会创建重复的数据。本教程中的 Exists_Taxonomy_Name 方法正是为了实现这一点。
  • 错误处理: 在实际生产环境中,您应该为文件操作(file_get_contents)、JSON解码(json_decode)以及所有数据库操作添加适当的错误处理机制。
  • 数据库事务: 对于批量数据插入,考虑使用数据库事务。如果中间发生错误,可以回滚所有已执行的操作,保持数据一致性。
  • 性能优化: 对于非常大的JSON文件和大量类别,可以考虑批量插入或优化数据库查询,例如一次性获取所有现有类别的名称和ID,而不是在每次循环中都进行查询。
  • 灵活性: 如果分隔符可能变化,可以将其定义为配置项。

7. 总结

通过本教程,您应该已经掌握了如何将扁平的、分隔符连接的JSON数据转换为MySQL数据库中的分层结构。关键在于正确解析数据,并巧妙地管理父级ID的跟踪逻辑,确保每个子类别都能准确地关联到其直接父级。这种方法不仅适用于产品类别,也适用于任何需要构建树状或层级关系的数据导入场景。

热门AI工具

更多
火山引擎

火山引擎是一款面向企业的云计算与AI服务平台。

Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

PixPix
PixPix Hot

PixPix是一款面向电商视觉生产的AI商品图生成工具。

SkildArt
SkildArt Hot

SkildArt是一款AI文本写作工具,一站式 AI 视觉创作平台。

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

2133

2023.06.20

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

1319

2023.06.21

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

755

2023.07.18

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2892

2023.07.19

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

4828

2023.07.25

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

1099

2023.08.08

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

5091

2023.08.11

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

4502

2023.08.14

FrankenPHP集成Laravel详细教程
FrankenPHP集成Laravel详细教程

本专题提供FrankenPHP集成Laravel的详细配置指南,全面解析运行原理、开发环境搭建、Caddyfile配置、Octane工作模式、数据库连接、队列任务、定时任务和生产环境优化,解决部署过程中常见的报错与兼容性问题。

40

2026.10.08

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 181人学习

使用phpenv集成环境安装极致CMS
使用phpenv集成环境安装极致CMS

共2课时 | 289人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn