讲师中心 微信公众号
AI工具推荐 视频效率加速

Python文件锁教程_并发写入安全实践

冬枫大大_4152

冬枫大大_4152

发布时间:2026-01-12 18:40:03

|

686人浏览过

|

来源于php中文网

原创

Python文件锁需用flock或portalocker等系统级机制,因open()和with不提供并发保护,多进程写入会导致覆盖或错乱;推荐portalocker跨平台加锁,或用临时文件+os.replace实现原子写入。

python文件锁教程_并发写入安全实践

Python中实现文件锁,核心是避免多个进程或线程同时写入同一文件导致数据错乱、覆盖或损坏。单线程内用普通变量或 threading.Lock 即可,但跨进程必须依赖操作系统级的锁机制,比如 flock(Unix/Linux/macOS)或 msvcrt.locking(Windows),更通用稳妥的做法是使用第三方库 portalocker 或标准库中的 threading.Lock + 进程间协调(如文件信号量)。

为什么不能只靠 open() 和 with 语句?

with open(..., 'w') 只保证当前 Python 对象在作用域内不被意外关闭,完全不提供任何并发保护。两个进程同时执行该语句,会各自打开文件并写入,后写入者大概率覆盖前者的全部内容——尤其当写入非原子(比如分多次 write())时,还可能出现内容交错、截断、乱码等现象。

推荐方案:用 portalocker 实现跨平台文件锁

portalocker 封装了底层系统调用,自动适配不同操作系统,API 简洁可靠,是生产环境首选。

  • 安装:pip install portalocker
  • 基本写入加锁示例:

import portalocker
import json
<p>def safe_write_json(filepath, data):
with open(filepath, 'w') as f:</p><h1>排他锁(LOCK_EX),阻塞直到获得锁</h1><pre class="brush:php;toolbar:false;">    portalocker.lock(f, portalocker.LOCK_EX)
    try:
        json.dump(data, f)
        f.flush()  # 确保内容真正写入磁盘
    finally:
        portalocker.unlock(f)  # 显式解锁更安全

arcgis-js
arcgis-js

提供 ArcGIS Maps SDK for JavaScript 开发辅助,涵盖 2D/3D 地图视图、图层管理、数据可视化、空间分析等功能模块的参考和示例指导。

下载

立即学习“Python免费学习笔记(深入)”;

进阶注意点:锁的粒度与生命周期

文件锁绑定在「文件描述符」上,不是文件路径。这意味着:

  • 同一个进程内重复 open 同一路径 → 得到不同 fd → 需分别加锁;
  • fork 子进程会继承父进程的 fd 和锁状态,子进程退出可能自动释放锁(行为因系统而异);
  • 程序崩溃未 unlock?多数系统会在 fd 关闭时自动释放,但为防万一,建议配合 try/finally 或上下文管理器(portalocker.Lock 类已支持);
  • 若只需防止并发写入,读操作通常无需加锁(除非你要求“读时文件不能被改”)。

替代方案对比:flock vs. 临时文件原子重命名

对于日志类追加写入,flock 足够;但对需要「全量替换」的场景(如保存配置、缓存),更健壮的做法是:

  • 写入临时文件(如 config.json.tmp);
  • 调用 os.replace()(Python 3.3+,原子性跨平台)重命名为目标名;
  • 即使无锁,也能避免写到一半被读取到脏数据。

这种方式本质是用「原子重命名」代替「文件锁」,适合写一次读多次、不要求实时强一致的场景。

热门AI工具

更多
豆包大模型

豆包大模型是一款由字节跳动推出的企业级大语言模型服务平台。

咔片AIPPT

一款在线AI演示文稿制作工具,可根据主题和内容需求辅助生成PPT结构与页面,提高演示材料制作效率。

切问学术

切问学术是一款AI论文写作工具,复旦大学NLP团队推出的AI学术智能体。

超级简历WonderCV

一款AI办公效率工具,主要用于免费求职简历模版下载制作,应届生职场人必备简历制作神器,适合需要提升相关任务效率的用户。

墨刀AI
墨刀AI Hot

一款AI图像与设计工具,主要用于产品经理的专属智能体,适合需要提升相关任务效率的用户。

WorkBuddy

一款AI办公效率工具,主要用于腾讯云推出的AI原生桌面智能体工作台,适合需要提升相关任务效率的用户。

DeepSeek

DeepSeek是一款面向对话、写作、编程和推理场景的AI大模型工具。

Seko
Seko Hot

一款AI视频创作工具,主要用于商汤科技推出的创编一体的AI短视频创作Agent,适合需要提升相关任务效率的用户。

UpDream
UpDream Hot

一款AI视频创作工具,主要用于哔哩哔哩推出的自研AI视频创作工具,适合需要提升相关任务效率的用户。

相关专题

更多
json数据格式
json数据格式

JSON是一种轻量级的数据交换格式。本专题为大家带来json数据格式相关文章,帮助大家解决问题。

2195

2023.08.07

json是什么
json是什么

JSON是一种轻量级的数据交换格式,具有简洁、易读、跨平台和语言的特点,JSON数据是通过键值对的方式进行组织,其中键是字符串,值可以是字符串、数值、布尔值、数组、对象或者null,在Web开发、数据交换和配置文件等方面得到广泛应用。本专题为大家提供json相关的文章、下载、课程内容,供大家免费下载体验。

3462

2023.08.23

jquery怎么操作json
jquery怎么操作json

操作的方法有:1、“$.parseJSON(jsonString)”2、“$.getJSON(url, data, success)”;3、“$.each(obj, callback)”;4、“$.ajax()”。更多jquery怎么操作json的详细内容,可以访问本专题下面的文章。

1156

2023.10.13

go语言处理json数据方法
go语言处理json数据方法

本专题整合了go语言中处理json数据方法,阅读专题下面的文章了解更多详细内容。

3979

2025.09.10

pip安装使用方法
pip安装使用方法

安装步骤:1、确保Python已经正确安装在您的计算机上;2、下载“get-pip.py”脚本;3、按下Win + R键,然后输入cmd并按下Enter键来打开命令行窗口;4、在命令行窗口中,使用cd命令切换到“get-pip.py”所在的目录;5、执行安装命令;6、验证安装结果即可。大家可以访问本专题下的文章,了解pip安装使用方法的更多内容。

3230

2023.10.09

更新pip版本
更新pip版本

更新pip版本方法有使用pip自身更新、使用操作系统自带的包管理工具、使用python包管理工具、手动安装最新版本。想了解更多相关的内容,请阅读专题下面的文章。

7343

2024.12.20

pip设置清华源
pip设置清华源

设置方法:1、打开终端或命令提示符窗口;2、运行“touch ~/.pip/pip.conf”命令创建一个名为pip的配置文件;3、打开pip.conf文件,然后添加“[global];index-url = https://pypi.tuna.tsinghua.edu.cn/simple”内容,这将把pip的镜像源设置为清华大学的镜像源;4、保存并关闭文件即可。

9002

2024.12.23

python升级pip
python升级pip

本专题整合了python升级pip相关教程,阅读下面的文章了解更多详细内容。

4647

2025.07.23

Vite 项目如何打包和部署
Vite 项目如何打包和部署

Vite项目打包部署专题汇集生产构建、产物预览、输出目录、资源路径、Nginx与GitHub Pages部署及常见白屏和路由404问题的已审核文章,帮助读者完成上线流程。

20

2026.10.28

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Python uv官方安装与入门文档
Python uv官方安装与入门文档

共0课时 | 0人学习

Buffalo框架快速入门指南
Buffalo框架快速入门指南

共0课时 | 0人学习

Valgrind支持平台说明
Valgrind支持平台说明

共0课时 | 0人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn