讲师中心 微信公众号
AI工具推荐 视频效率加速

C++如何在网络恢复后自动将积压的历史数据打包顺序断点补发

风静同学_9259

风静同学_9259

发布时间:2026-10-23 12:52:37

|

930人浏览过

|

来源于php中文网

原创

断网时数据必须缓存到本地:检测send()失败后切换缓存模式,用deque+定期刷盘存储带seq_id和ts_ms的序列化数据;网络恢复需连续3次心跳成功;补发须保序防重放,每条封装固定帧头并等待ACK;新数据插入队列尾部;用epoll驱动非阻塞发送。

c++如何在网络恢复后自动将积压的历史数据打包顺序断点补发

断网时数据必须缓存到本地,不能丢

网络中断期间,send() 或 write() 会立即失败(返回 -1,errno 通常是 ECONNRESET、EPIPE 或 ENOTCONN),此时若直接丢弃待发数据,补发就无从谈起。关键动作是:检测失败 → 切换为缓存模式 → 把原始数据(含时间戳、序号、业务类型)序列化后写入本地临时存储。

推荐用轻量级方案:std::deque<:vector>></:vector> 做内存队列 + 定期刷盘到文件(如每 100 条或 500KB 写一次 fstream)。避免用 SQLite 等重型方案——补发逻辑本身要快,数据库 I/O 可能成瓶颈。

  • 每条缓存数据必须带唯一递增序号(seq_id)和生成时间(ts_ms),用于后续校验与去重
  • 缓存文件建议按日期分片(如 cache_20240520.bin),便于清理过期数据
  • 程序启动时需扫描缓存目录,按文件名时间排序加载,再按 seq_id 排序重入队列

如何可靠检测“网络已恢复”

靠 ping 或 connect() 成功一次就发包,极易误判——TCP 连接可能建连成功但中间链路仍抖动,导致后续 send() 又失败。真正可用的判断逻辑是:连续三次心跳包(小数据)成功发出且收到 ACK,并在 1s 内完成。

具体做法:维护一个独立的心跳 socket(非主业务 socket),每 2s 发一个 4 字节 "PING",超时设为 500ms;仅当连续 3 次 recv() 返回 4 且内容为 "PONG",才标记网络就绪。这个状态要全局共享,避免多个线程重复试探。

立即学习“C++免费学习笔记(深入)”;

C++14
C++14

C++14 对 C++11 的修正与增强版本,适合旧系统维护和较老工具链兼容。

下载
  • 不要复用业务 socket 做心跳——业务连接可能处于 TIME_WAIT 或半开状态,干扰判断
  • 心跳服务端必须有明确 PONG 回复,不能只靠 TCP ACK,否则无法区分“链路通”和“对端进程挂了”
  • 检测通过后,先清空发送缓冲区(setsockopt(..., SO_SNDBUF, ...) 不起作用,得用 shutdown(SHUT_WR) + 重连)

补发必须严格保序且防重放

补发不是把缓存一股脑 send() 出去——TCP 层不保证应用层消息边界,接收端若没做帧解析,会粘包错序。正确做法是:每条历史数据封装为固定头 + 变长体格式(头含 seq_id、len、crc32),每次只发一条,等对端确认(ACK 帧含已收最大 seq_id)后再发下一条。

ACK 机制可简化:接收端收到完整帧后,立刻回一个 8 字节 ACK(前 4 字节为 seq_id,后 4 字节为 0x00000000 表示成功)。发送端收到 ACK 后,从缓存队列 pop 前 N 条(N=已确认最大序号 - 当前最小序号 + 1),再推进补发指针。

  • 若某条发出去 3 秒没回 ACK,重发该条(不是重发整个队列),最多重试 3 次后丢弃并告警
  • 接收端必须检查 seq_id 是否 > 已处理最大序号,否则直接丢弃(防止网络延迟导致旧包晚到)
  • 补发过程中新产生的实时数据,插入到缓存队列尾部,不插队——保证历史数据优先发完

Linux 下用 epoll 实现非阻塞补发调度

补发是 I/O 密集型任务,若用 sleep(1) 轮询发包,既浪费 CPU 又不准时。更合理的是让 epoll 管理 socket 可写事件,只在 socket 真正 ready 时才取一条缓存发出去。

核心逻辑:初始化时 epoll_ctl(epfd, EPOLL_CTL_ADD, sockfd, &ev) 注册 EPOLLOUT;每次发包前检查缓存是否为空;发完或部分发送(send() 返回 bytes_sent )后,保持监听;若 <code>send() 返回 -1 且 errno == EAGAIN 或 EWOULDBLOCK,继续等待下一次 epoll_wait() 通知。

  • 务必把 socket 设为非阻塞(fcntl(sockfd, F_SETFL, O_NONBLOCK)),否则 send() 可能卡死
  • 不要在 epoll_wait() 返回后一次性发多条——TCP 发送窗口有限,强行多发反而触发 EAGAIN 更频繁
  • 补发线程和业务线程间共享缓存队列,需用 std::mutex + std::condition_variable 同步,但锁粒度要细(只锁 push/pop,不锁 send)

最易被忽略的是缓存持久化与程序崩溃的兼容性:如果进程在写缓存文件中途崩溃,会导致文件损坏、后续加载失败。必须用“写临时文件 + rename() 原子提交”模式,且每次写入前先 fseek() 到末尾,避免覆盖已有数据。

热门AI工具

更多
超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

二狗PPT
二狗PPT Hot

一款AI演示文稿工具,主要用于专为中式职场打造的AI PPT生成工具,适合需要提升相关任务效率的用户。

Atoms
Atoms Hot

Atoms是一款AI智能体工具,第一支自动构建真实业务的 AI 团队。

AionClaw
AionClaw Hot

AionClaw是一款面向办公、创作和编程任务的AI桌面智能体。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

Lovart
Lovart Hot

一款面向视觉设计创作的AI设计平台,可通过智能体和画布工作流辅助制作海报、Logo、网页、PPT及其他视觉内容。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

相关专题

更多
c++和c语言的区别有哪些
c++和c语言的区别有哪些

c++和c语言的区别:1、面向对象编程(OOP)支持不同;2、新增特性不同;3、标准库不同;4、编译方式不同;5、命名空间不同等等。想了解更多c++的相关内容,可以阅读本专题下面的文章。

2248

2024.03.14

c++和python学习顺序推荐
c++和python学习顺序推荐

一般建议先学习C++,再学习Python,因为这样可以逐步从较为底层的编程语言向更高级的语言过渡。想了解更多python的相关内容,可以阅读本专题下面的文章。

1019

2024.03.14

python和c++学习性价比分析
python和c++学习性价比分析

Python易于学习,广泛应用于Web开发、数据科学和人工智能等领域,但性能较低。C语言性能高,适用于对性能要求较高的场景,如游戏开发和系统编程,但学习曲线陡峭,错误处理复杂。想了解更多python的相关内容,可以阅读本专题下面的文章。

447

2024.03.14

c语言和c++一样吗
c语言和c++一样吗

c语言和c++是两种不同的编程语言,虽然有相似之处,但存在显著差异。c语言专注于过程式编程和系统级开发,以简洁、高效著称。c++作为c语言的超集,引入了面向对象编程,增强了代码组织和管理能力,但学习曲线也更陡峭。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

327

2024.03.14

c语言和c++先学哪个好
c语言和c++先学哪个好

初学者选择学习c语言还是c++语言,需要根据个人学习目标、背景以及编程兴趣和预期应用方向来决定。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

426

2024.03.14

c语言和c++的区别和联系
c语言和c++的区别和联系

c语言和c++是计算机科学领域应用广泛的编程语言。虽然它们有着相似的基础,但它们在语言类型、语法功能和内存管理方面存在着显著差异。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

580

2024.03.14

c++软件中文更改教程
c++软件中文更改教程

对于 ide,可通过打开设置,找到语言设置,选择中文,并保存更改。对于非 ide 应用程序,可查找设置或选项,选择语言设置,更改为中文,并保存更改。想了解更多c++的相关内容,可以阅读本专题下面的文章。

1409

2024.03.21

python和java和c++学习性价比分析
python和java和c++学习性价比分析

Python以其易学性、丰富的库和活跃的社区而著称,适合数据科学、人工智能和Web开发。Java以其跨平台性、企业级应用开发和Android应用开发而闻名。C++以其底层控制能力、高效性能和游戏开发而著称。选择哪种语言取决于个人兴趣、职业方向和特定需求。想了解更多python和java和c++的相关内容,可以阅读本专题下面的文章。

1217

2024.03.22

Gradle插件开发入门教程
Gradle插件开发入门教程

本专题介绍Gradle插件开发的基本流程,涵盖插件类编写、自定义任务注册、扩展参数设计和插件应用方法,帮助你理解插件如何组织构建逻辑,减少多个项目之间的重复配置。

0

2026.10.22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
linux嵌入式开发+驱动开发视频教程
linux嵌入式开发+驱动开发视频教程

共39课时 | 9.5万人学习

JavaScript OOP调试技巧视频教程
JavaScript OOP调试技巧视频教程

共5课时 | 1.1万人学习

C++ Core Guidelines
C++ Core Guidelines

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn