讲师中心 微信公众号

工具推荐

视频效率加速
Seko
Seko

AI短剧一键生成成片

AniShort
AniShort

AI短剧协同制作平台

剧云
剧云

中文短剧剧本制作平台

updream

一键生成高质量推广成片

c++怎么通过内存映射修改大文件特定字节_避免全量加载【进阶】

云宇吖_5290

云宇吖_5290

发布时间:2026-04-04 23:27:04

|

994人浏览过

|

来源于php中文网

原创

C++无跨平台内存映射API,需系统调用:Linux/macOS用mmap,Windows用CreateFileMapping+MapViewOfFile;仅映射目标字节所在页对齐区域(如4KB),修改后msync/FlushViewOfFile刷盘,munmap/UnmapViewOfFile释放。

c++怎么通过内存映射修改大文件特定字节_避免全量加载【进阶】

用 mmap 修改大文件特定字节,不加载全部内容到内存

直接结论:C++ 本身没有跨平台内存映射 API,必须依赖系统调用——Linux/macOS 用 mmap,Windows 用 CreateFileMapping + MapViewOfFile。核心思路是只映射需要修改的页对齐区域(通常 4KB 对齐),而非整个文件。

常见错误是试图 mmap 整个几十 GB 的文件,结果进程因虚拟内存耗尽被 OOM killer 杀掉,或 mmap 返回 MAP_FAILED。正确做法是计算目标偏移所在的页边界,仅映射覆盖该偏移的一小段(比如 4KB~64KB),改完后 msync 刷盘、munmap 释放。

  • off_t offset = target_byte_pos & ~(sysconf(_SC_PAGESIZE) - 1); —— 向下对齐到页首
  • 映射长度至少为 target_byte_pos - offset + 1(保证能写到目标字节)
  • 必须用 PROT_READ | PROT_WRITE 和 MAP_SHARED,否则修改不会落盘
  • 注意 mmap 的 offset 参数必须是页对齐值,否则失败

Linux 下 mmap 修改单字节的最小可行示例

假设要将文件 /tmp/big.bin 的第 12345678 字节改为 0xFF:

int fd = open("/tmp/big.bin", O_RDWR);
if (fd == -1) { /* handle error */ }
<p>off_t target = 12345678;
long page_size = sysconf(_SC_PAGESIZE); // 通常是 4096
off_t map_off = target & ~(page_size - 1);
size_t map_len = page_size; // 足够覆盖 target</p><p>uint8_t<em> addr = (uint8_t</em>)mmap(nullptr, map_len, PROT_READ | PROT_WRITE,
MAP_SHARED, fd, map_off);
if (addr == MAP_FAILED) { /<em> handle error </em>/ }</p><p>addr[target - map_off] = 0xFF;</p><p><span>立即学习</span>“<a href="https://pan.quark.cn/s/6e7abc4abb9f" style="text-decoration: underline !important; color: blue; font-weight: bolder;" rel="nofollow" target="_blank">C++免费学习笔记(深入)</a>”;</p><div class="aritcle_card flexRow">
                                                        <div class="artcardd flexRow">
                                                                <a class="aritcle_card_img" href="/xiazai/gongju/2823" title="C++14"><img
                                                                                src="https://img.php.cn/upload/manual/001/431/639/6ac8b33c327c4749.png" alt="C++14" ></a>
                                                                <div class="aritcle_card_info flexColumn">
                                                                        <a href="/xiazai/gongju/2823" title="C++14">C++14</a>
                                                                        <p>C++14 对 C++11 的修正与增强版本,适合旧系统维护和较老工具链兼容。</p>
                                                                </div>
                                                                <a href="/xiazai/gongju/2823" title="C++14" class="aritcle_card_btn flexRow flexcenter"><b></b><span>下载</span> </a>
                                                        </div>
                                                </div><p>msync(addr, map_len, MS_SYNC); // 确保写入磁盘
munmap(addr, map_len);
close(fd);</p>

关键点:target - map_off 是映射区内的相对偏移,不是文件全局偏移;msync 不可省略,否则可能只在 page cache 中修改,断电即丢。

Windows 下等效操作需绕过 C++ 标准库限制

Windows 没有 mmap,但行为一致:用 CreateFile 打开文件(带 GENERIC_READ | GENERIC_WRITE),再用 CreateFileMapping 创建可写映射对象,最后 MapViewOfFile 获取指针。

  • 映射起始位置也必须是 64KB 对齐(Windows 的“allocation granularity”,非页大小)
  • 实际可读写范围仍由 MapViewOfFile 的 dwNumberOfBytesToMap 和偏移共同决定
  • 修改后调用 FlushViewOfFile(对应 msync),再 UnmapViewOfFile
  • C++ 标准库(如 std::fstream)完全不支持这种底层映射,必须用 Win32 API

容易忽略的陷阱和性能影响

最常踩的坑不是语法,而是语义误判:

  • 文件必须存在且有写权限;truncate 或 ftruncate 扩容后再 mmap,否则写越界会触发 SIGBUS
  • 多个进程同时映射同一文件并写不同区域——安全;但写重叠区域时无自动同步,需额外加锁(如 flock)
  • mmap 映射的是虚拟地址,不立即分配物理内存;首次访问才发生 page fault,所以“映射快”不等于“数据已加载”
  • 频繁小范围映射/解映射开销不小(涉及内核态切换),若需多次修改,应复用同一映射段,而非每次重新 mmap

页对齐计算、映射长度控制、刷盘时机这三点,漏掉任一个都可能导致静默失败或数据损坏。尤其在服务端长期运行程序中,msync 被注释掉或写成 MS_ASYNC 是典型线上事故源头。

相关文章

c++速学教程(入门到精通)
c++速学教程(入门到精通)

c++怎么学习?c++怎么入门?c++在哪学?c++怎么学才快?不用担心,这里为大家提供了c++速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

c++

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
函子Zion

一款支持AI搭建、可视化编辑和多端发布的全栈无代码开发平台。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

讯飞智文

一款面向学习和办公场景的AI文档创作工具,可辅助生成PPT与Word文档,提高资料整理和内容制作效率。

讯飞智作

讯飞智作是一款AI视频创作工具,AI文本配音工具,数字人课程、营销视频制作。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

超级麦吉

一款通过数字员工协作完成调研、数据分析与文档制作的AI办公平台。

相关专题

更多
C++ 智能指针与现代内存管理
C++ 智能指针与现代内存管理

深入讲解 C++ 现代内存管理的核心工具——智能指针,涵盖 unique_ptr 独占所有权语义、shared_ptr 引用计数机制与循环引用问题、weak_ptr 弱引用的应用场景、make_unique/make_shared 工厂函数的性能优势、自定义删除器的编写、RAII 资源管理思想的实践,以及从裸指针迁移到智能指针的重构策略,帮助开发者编写安全无泄漏的现代 C++ 代码。

399

2026.04.23

windows查看端口占用情况
windows查看端口占用情况

Windows端口可以认为是计算机与外界通讯交流的出入口。逻辑意义上的端口一般是指TCP/IP协议中的端口,端口号的范围从0到65535,比如用于浏览网页服务的80端口,用于FTP服务的21端口等等。怎么查看windows端口占用情况呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

3479

2023.07.26

查看端口占用情况windows
查看端口占用情况windows

端口占用是指与端口关联的软件占用端口而使得其他应用程序无法使用这些端口,端口占用问题是计算机系统编程领域的一个常见问题,端口占用的根本原因可能是操作系统的一些错误,服务器也可能会出现端口占用问题。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

3038

2023.07.27

windows照片无法显示
windows照片无法显示

当我们尝试打开一张图片时,可能会出现一个错误提示,提示说"Windows照片查看器无法显示此图片,因为计算机上的可用内存不足",本专题为大家提供windows照片无法显示相关的文章,帮助大家解决该问题。

1548

2023.08.01

windows查看端口被占用的情况
windows查看端口被占用的情况

windows查看端口被占用的情况的方法:1、使用Windows自带的资源监视器;2、使用命令提示符查看端口信息;3、使用任务管理器查看占用端口的进程。本专题为大家提供windows查看端口被占用的情况的相关的文章、下载、课程内容,供大家免费下载体验。

2739

2023.08.02

windows无法访问共享电脑
windows无法访问共享电脑

在现代社会中,共享电脑是办公室和家庭的重要组成部分。然而,有时我们可能会遇到Windows无法访问共享电脑的问题。这个问题可能会导致数据无法共享,影响工作和生活的正常进行。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

3370

2023.08.08

windows自动更新
windows自动更新

Windows操作系统的自动更新功能可以确保系统及时获取最新的补丁和安全更新,以提高系统的稳定性和安全性。然而,有时候我们可能希望暂时或永久地关闭Windows的自动更新功能。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

1737

2023.08.10

windows boot manager
windows boot manager

windows boot manager无法开机的解决方法:1、系统文件损坏,使用Windows安装光盘或USB启动盘进入恢复环境,选择修复计算机,然后选择自动修复;2、引导顺序错误,进入恢复环境,选择命令提示符,输入命令"bootrec /fixboot"和"bootrec /fixmbr",然后重新启动计算机;3、硬件问题,使用硬盘检测工具进行扫描和修复;4、重装操作系统。本专题还提供其他解决

2537

2023.08.28

Go-Zero API开发使用教程
Go-Zero API开发使用教程

本专题聚焦Go-Zero的API开发,拆解.api描述文件的语法结构、路由与分组定义、参数绑定与校验规则,说明统一响应体、JWT鉴权、跨域与接口文档生成的落地方式,并给出网关聚合与接口测试的实践建议。

20

2026.11.12

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
C++ Core Guidelines
C++ Core Guidelines

共0课时 | 0人学习

C++ Reference
C++ Reference

共0课时 | 0人学习

C++ 官方标准说明
C++ 官方标准说明

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn