讲师中心 微信公众号

工具推荐

视频效率加速
Seko
Seko

AI短剧一键生成成片

AniShort
AniShort

AI短剧协同制作平台

立刻MV
立刻MV

低成本歌曲 MV、视频生成

Laper
Laper

剧本策划到成片协作

c++怎么在Linux下获取文件系统Inode号并实现文件去重逻辑【底层】

雨伟君_3735

雨伟君_3735

发布时间:2026-04-14 12:31:06

|

445人浏览过

|

来源于php中文网

原创

需调用 stat() 填充 struct stat 并检查返回值,st_ino 与 st_dev 组合唯一标识文件;用 lstat() 获取软链接自身 inode;包含 和 。

c++怎么在linux下获取文件系统inode号并实现文件去重逻辑【底层】

直接用 stat() 系统调用获取 st_ino,但仅靠它无法安全去重——必须搭配 st_dev 才构成跨文件系统唯一的标识对。

怎么用 C++ 调用 stat() 正确读取 inode 号

Linux 下没有“C++ 原生 inode API”,只能通过 POSIX 系统调用。核心是填满 struct stat,其中 st_ino 是你要的值,但前提是你得先确保调用成功且路径有效。

  • stat() 不跟随符号链接;若要获取软链接自身的 inode(不是目标),就该用 lstat()
  • 必须检查返回值:if (stat(path.c_str(), &sb) != 0),否则 sb.st_ino 是未初始化垃圾值
  • 常见失败原因:路径不存在、权限不足、路径是悬空符号链接(此时 errno == ENOENT 或某些环境下为 ELOOP)
  • 记得 #include <sys></sys> 和 #include <unistd.h></unistd.h>,否则编译不过

示例片段:

struct stat sb;
std::string path = "/tmp/test.txt";
if (stat(path.c_str(), &sb) == 0) {
    std::cout << "inode: " << sb.st_ino << ", dev: " << sb.st_dev << "\n";
} else {
    perror(("stat " + path).c_str()); // 自动打印 errno 对应错误
}

为什么不能只比 st_ino?必须组合 st_dev 才能去重

st_ino 在单个挂载点内唯一,但不同设备(比如 / 和 /home 可能是不同磁盘或 LVM 逻辑卷)上完全可能重复。拿两个 st_ino == 12345 的文件,一个在 SSD 上、一个在 NFS 挂载点上,它们毫无关系。

CMIC Skill Scanner (BCLinux 21 / 低版本 glibc Linux x64)
CMIC Skill Scanner (BCLinux 21 / 低版本 glibc Linux x64)

使用内置 Rust 引擎审计待安装的 skill 包或归档,可选桥接外部扫描器。

下载

立即学习“C++免费学习笔记(深入)”;

  • 真正唯一标识一个文件的是二元组 (st_dev, st_ino)
  • st_dev 是设备号(主+次号打包),可用 major(sb.st_dev) / minor(sb.st_dev) 拆解,但通常直接比较原始值更稳妥
  • NFS 场景下 st_dev 可能被服务端统一映射成伪设备号,此时 (st_dev, st_ino) 仍不跨客户端唯一——如果你在集群中做全局去重,得额外加主机标识
  • ext4/xfs 等本地文件系统中,st_ino 就是磁盘 inode 表的真实槽位索引,重启不变,但依然不能脱离 st_dev 单独使用

硬链接去重 vs 内容去重:两种场景对应不同逻辑

用 (st_dev, st_ino) 只能识别硬链接(同一份数据的多个入口)。如果文件名不同、路径不同、但内容一样(非硬链接),这个组合完全无效——它们的 st_ino 必然不同。

  • 硬链接去重:遍历目录,对每个文件调用 stat(),用 std::map<:pair ino_t>, std::vector<:string>></:string></:pair> 分组,同 key 的路径即为一组硬链接
  • 内容去重:必须计算哈希(如 SHA256),用哈希值作 key。注意大文件要流式计算,避免内存爆掉;小文件可直接 read() 全量
  • find . -samefile target 底层就是靠 stat() + (st_dev, st_ino) 实现的,但它只查硬链接,别误以为它能找内容重复文件
  • 性能上,stat() 比哈希快得多,但只能解决一类问题;混用时建议先做硬链接聚类(零成本),再对每组代表文件做哈希校验(减少哈希次数)

容易被忽略的路径与符号链接陷阱

相对路径、符号链接、当前工作目录(cwd)三者一搅和,stat() 结果就可能出人意料。

  • 传相对路径给 stat(),实际解析依赖调用时的 cwd——多线程或 chdir 后极易错乱;强烈建议转成绝对路径(realpath())再调用
  • 想判断两个路径是否指向同一文件(含软链接),用 stat();想判断是否是同一个链接文件自身(比如监控谁改了这个链接),用 lstat()
  • stat() 遇到深层嵌套的符号链接(如 a→b→c→d)会递归解析,可能触发多次 I/O,甚至卡住(某些 overlayfs 或旧内核);lstat() 则立刻返回,适合快速扫描
  • 容器环境里,/proc/mounts 显示的挂载点可能和宿主机不一致,st_dev 值不可跨容器直接比较

最麻烦的其实是 NFS + 符号链接 + 相对路径组合——这时 st_ino 和 st_dev 都可能失真,硬编码去重逻辑大概率失效。

相关文章

c++速学教程(入门到精通)
c++速学教程(入门到精通)

c++怎么学习?c++怎么入门?c++在哪学?c++怎么学才快?不用担心,这里为大家提供了c++速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热门AI工具

更多
讯飞智文

一款面向学习和办公场景的AI文档创作工具,可辅助生成PPT与Word文档,提高资料整理和内容制作效率。

超级麦吉

一款通过数字员工协作完成调研、数据分析与文档制作的AI办公平台。

豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

立刻MV
立刻MV Hot

立刻MV是一款AI文本写作工具,AI 音乐视频(MV)创作工具。

UP简历
UP简历 Hot

一款AI办公效率工具,主要用于基于AI技术的免费在线简历制作工具,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

小橡皮AI

一款AI工具,主要用于小橡皮一键去AI味,将机器味重的内容改得更有活人感,防止因为 AI 内容被平台打上 AI 标签,以及限流,适合需要提升相关任务效率的用户。

讯飞绘文

讯飞绘文是一款由科大讯飞推出的一站式 AIGC 内容运营平台。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

相关专题

更多
string转int
string转int

在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

7499

2023.08.02

线程和进程的区别
线程和进程的区别

线程和进程的区别:线程是进程的一部分,用于实现并发和并行操作,而线程共享进程的资源,通信更方便快捷,切换开销较小。本专题为大家提供线程和进程区别相关的各种文章、以及下载和课程。

4858

2023.08.10

Python 多线程与异步编程实战
Python 多线程与异步编程实战

本专题系统讲解 Python 多线程与异步编程的核心概念与实战技巧,包括 threading 模块基础、线程同步机制、GIL 原理、asyncio 异步任务管理、协程与事件循环、任务调度与异常处理。通过实战示例,帮助学习者掌握 如何构建高性能、多任务并发的 Python 应用。

1369

2025.12.24

java多线程相关教程合集
java多线程相关教程合集

本专题整合了java多线程相关教程,阅读专题下面的文章了解更多详细内容。

463

2026.01.21

C++多线程相关合集
C++多线程相关合集

本专题整合了C++多线程相关教程,阅读专题下面的的文章了解更多详细内容。

599

2026.01.21

C# 多线程与异步编程
C# 多线程与异步编程

本专题深入讲解 C# 中多线程与异步编程的核心概念与实战技巧,包括线程池管理、Task 类的使用、async/await 异步编程模式、并发控制与线程同步、死锁与竞态条件的解决方案。通过实际项目,帮助开发者掌握 如何在 C# 中构建高并发、低延迟的异步系统,提升应用性能和响应速度。

449

2026.02.06

C++多线程并发控制与线程安全设计实践
C++多线程并发控制与线程安全设计实践

本专题围绕 C++ 在高性能系统开发中的并发控制技术展开,系统讲解多线程编程模型与线程安全设计方法。内容包括互斥锁、读写锁、条件变量、原子操作以及线程池实现机制,同时结合实际案例分析并发竞争、死锁避免与性能优化策略。通过实践讲解,帮助开发者掌握构建稳定高效并发系统的关键技术。

273

2026.03.16

Java 多线程与并发编程实战
Java 多线程与并发编程实战

深入讲解 Java 并发编程体系,涵盖 Thread / Runnable / Callable 线程创建方式、线程生命周期与状态转换、synchronized 同步锁与 Lock/ReentrantLock 显式锁、volatile 可见性保证、ThreadPool 线程池配置与调优(核心参数/拒绝策略)、JUC 并发工具类(CountDownLatch/CyclicBarrier/Semaphore/ConcurrentHashMa

409

2026.04.17

Go-Zero API开发使用教程
Go-Zero API开发使用教程

本专题聚焦Go-Zero的API开发,拆解.api描述文件的语法结构、路由与分组定义、参数绑定与校验规则,说明统一响应体、JWT鉴权、跨域与接口文档生成的落地方式,并给出网关聚合与接口测试的实践建议。

20

2026.11.12

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习

Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn