讲师中心 微信公众号
AI工具推荐 视频效率加速

如何在 PHP 中按内存大小(而非元素数量)动态分块数组

夜雪君_3771

夜雪君_3771

发布时间:2026-11-05 10:08:04

|

490人浏览过

|

来源于php中文网

原创

如何在 PHP 中按内存大小(而非元素数量)动态分块数组

本文介绍一种基于实时内存占用的 php 数组分块策略:不按固定元素个数切分,而是确保每个子数组序列化后占用内存不超过指定阈值(如 200kb),适用于处理大型 id 列表等场景。

本文介绍一种基于实时内存占用的 php 数组分块策略:不按固定元素个数切分,而是确保每个子数组序列化后占用内存不超过指定阈值(如 200kb),适用于处理大型 id 列表等场景。

在实际开发中,尤其是批量处理数据库查询、API 请求或队列任务时,我们常需将大数组(如包含数千个用户 ID 的 $profileIds)拆分为多个“安全尺寸”的子数组。但若仅按元素数量(如 array_chunk($arr, 100))分块,无法保证内存安全性——因为不同元素的数据结构、长度差异巨大(例如字符串 ID 与嵌套对象相差数十倍内存),可能导致某一块意外超出内存限制,触发 Allowed memory size exhausted 错误。

更稳健的做法是以运行时内存增量为依据动态分块。PHP 提供了 memory_get_usage() 函数,可精确获取脚本当前已分配的内存字节数。我们利用该函数,在逐个向临时块添加元素的过程中持续监测内存增长,一旦新增元素导致块内存增量超过目标阈值(如 200KB),立即回退并完成当前块。

以下是核心实现逻辑:

btpanel phpsite 宝塔面板PHP网站
btpanel phpsite 宝塔面板PHP网站

宝塔面板 PHP 网站管理:站点创建、删除、启停、PHP 版本切换、域名管理、SSL证书管理、伪静态管理、数据库管理

下载
<?php
function getChunk(array $arr, int &$currentIndex, int $maxChunkSizeKB = 200): array
{
    $maxBytes = $maxChunkSizeKB * 1024; // 转换为字节(更准确:1KB = 1024B)
    $baseMemory = memory_get_usage();
    $chunk = [];

    while ($currentIndex < count($arr)) {
        $chunk[] = $arr[$currentIndex];
        $currentUsage = memory_get_usage();

        // 若加入当前元素后,块内存增量超限,则移除并终止
        if ($currentUsage - $baseMemory > $maxBytes) {
            array_pop($chunk);
            break;
        }
        $currentIndex++;
    }

    return $chunk;
}

// 使用示例
$profileIds = range(1, 8000);
$idx = 0;
$chunks = [];

while ($idx < count($profileIds)) {
    $chunk = getChunk($profileIds, $idx, 200); // 每块 ≤ 200KB
    $chunks[] = $chunk;
    echo "Chunk #" . count($chunks) . " → " . count($chunk) . " items, estimated size: " 
         . round((memory_get_usage() - memory_get_usage(true)) / 1024, 1) . " KB\n";
}

⚠️ 重要注意事项:

立即学习“PHP免费学习笔记(深入)”;

  • memory_get_usage() 返回的是当前脚本总内存使用量,包含所有变量、内部结构开销。因此,该方法反映的是近似增量,非绝对精确的序列化后体积,但在实践中足够可靠;
  • 若需更高精度(如严格匹配 serialize() 后字节长度),可改用 strlen(serialize($chunk)) 动态计算,但性能开销显著增加(每次追加都需序列化整个块),不推荐高频调用;
  • 建议配合 memory_get_usage(true)(返回分配的内存总量)做基准校准,避免因 PHP 内存管理机制(如预分配)造成偏差;
  • 实际部署前,请在目标环境中压测验证——不同 PHP 版本、Zend 引擎配置、Xdebug 是否启用均会影响内存测量结果;
  • 对于超大规模数组(>10 万元素),考虑使用生成器(Generator)或流式处理,避免一次性加载全部数据到内存。

综上,该方案以轻量、实时、自适应的方式解决了「按内存而非数量分块」的核心诉求,兼顾准确性与执行效率,是构建健壮批量处理系统的实用基础组件。

相关文章

PHP速学教程(入门到精通)
PHP速学教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

php

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
码上飞
码上飞 Hot

一款基于自然语言的AI应用开发平台,可根据用户描述自动生成应用程序,帮助个人和团队快速完成应用原型与开发。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

Laper
Laper Hot

Laper是专为编剧、导演和制片人推出的 AI 原生剧本创作工具。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

Lovart
Lovart Hot

一款面向视觉设计创作的AI设计平台,可通过智能体和画布工作流辅助制作海报、Logo、网页、PPT及其他视觉内容。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

音述AI
音述AI Hot

一款AI音频处理工具,主要用于音述AI是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区,适合需要提升相关任务效率的用户。

相关专题

更多
php文件怎么打开
php文件怎么打开

打开php文件步骤:1、选择文本编辑器;2、在选择的文本编辑器中,创建一个新的文件,并将其保存为.php文件;3、在创建的PHP文件中,编写PHP代码;4、要在本地计算机上运行PHP文件,需要设置一个服务器环境;5、安装服务器环境后,需要将PHP文件放入服务器目录中;6、一旦将PHP文件放入服务器目录中,就可以通过浏览器来运行它。

12184

2023.09.01

php怎么取出数组的前几个元素
php怎么取出数组的前几个元素

取出php数组的前几个元素的方法有使用array_slice()函数、使用array_splice()函数、使用循环遍历、使用array_slice()函数和array_values()函数等。本专题为大家提供php数组相关的文章、下载、课程内容,供大家免费下载体验。

6961

2023.10.11

php反序列化失败怎么办
php反序列化失败怎么办

php反序列化失败的解决办法检查序列化数据。检查类定义、检查错误日志、更新PHP版本和应用安全措施等。本专题为大家提供php反序列化相关的文章、下载、课程内容,供大家免费下载体验。

2215

2023.10.11

php怎么连接mssql数据库
php怎么连接mssql数据库

连接方法:1、通过mssql_系列函数;2、通过sqlsrv_系列函数;3、通过odbc方式连接;4、通过PDO方式;5、通过COM方式连接。想了解php怎么连接mssql数据库的详细内容,可以访问下面的文章。

4428

2023.10.23

php连接mssql数据库的方法
php连接mssql数据库的方法

php连接mssql数据库的方法有使用PHP的MSSQL扩展、使用PDO等。想了解更多php连接mssql数据库相关内容,可以阅读本专题下面的文章。

5154

2023.10.23

html怎么上传
html怎么上传

html通过使用HTML表单、JavaScript和PHP上传。更多关于html的问题详细请看本专题下面的文章。php中文网欢迎大家前来学习。

4051

2023.11.03

PHP出现乱码怎么解决
PHP出现乱码怎么解决

PHP出现乱码可以通过修改PHP文件头部的字符编码设置、检查PHP文件的编码格式、检查数据库连接设置和检查HTML页面的字符编码设置来解决。更多关于php乱码的问题详情请看本专题下面的文章。php中文网欢迎大家前来学习。

5857

2023.11.09

php文件怎么在手机上打开
php文件怎么在手机上打开

php文件在手机上打开需要在手机上搭建一个能够运行php的服务器环境,并将php文件上传到服务器上。再在手机上的浏览器中输入服务器的IP地址或域名,加上php文件的路径,即可打开php文件并查看其内容。更多关于php相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

4582

2023.11.13

DBeaver怎么导入数据
DBeaver怎么导入数据

DBeaver数据导入专题,整理Excel、CSV、SQL、TXT等常见文件的数据导入方法,涵盖目标数据库选择、数据表创建、字段映射、数据类型设置及导入参数配置等操作,帮助用户将本地文件中的数据写入数据库,并了解批量导入、重复数据处理和导入失败等常见问题的解决方法。

0

2026.11.05

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
墨刀帮助中心
墨刀帮助中心

共0课时 | 0人学习

MyEclipse学习中心
MyEclipse学习中心

共0课时 | 0人学习

Apache Subversion 官方手册
Apache Subversion 官方手册

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn