0

0

Python 文件锁机制的实现方法

冷漠man

冷漠man

发布时间:2025-11-21 23:24:05

|

852人浏览过

|

来源于php中文网

原创

文件锁用于防止多进程或线程同时读写同一文件导致数据冲突。1. fcntl模块在Unix/Linux下实现建议性锁,需所有进程遵守规则;2. portalocker库跨平台兼容,封装了fcntl和msvcrt,使用简单;3. 原子写入通过临时文件加os.rename()实现,适用于写操作频繁且读写不重叠的场景;4. 标志文件法通过创建.lock文件标记占用,轻量但需处理残留问题。生产环境推荐portalocker或fcntl方案,确保访问方遵循锁协议。

python 文件锁机制的实现方法

Python 中实现文件锁的主要目的是防止多个进程或线程同时读写同一文件,避免数据冲突或损坏。在多进程环境下尤其重要,因为不同进程无法通过线程锁(如 threading.Lock)进行同步。以下是几种常见的 Python 文件锁实现方式。

1. 使用 fcntl 模块(Unix/Linux)

fcntl 是 Unix/Linux 系统下的文件控制接口,可通过它实现建议性文件锁(advisory lock)。这种方式不会强制阻止其他未加锁的程序访问文件,因此需要所有访问方都遵循加锁规则。

示例代码:

import fcntl
import time

def write_with_lock(filename, content): with open(filename, 'a') as f: try: fcntl.flock(f.fileno(), fcntl.LOCK_EX) # 排他锁 f.write(content + '\n') f.flush() finally: fcntl.flock(f.fileno(), fcntl.LOCK_UN) # 释放锁

使用示例

write_with_lock('log.txt', 'Hello from process')

说明:LOCK_EX 表示排他锁,适用于写操作;LOCK_SH 表示共享锁,适用于读操作。LOCK_UN 用于释放锁。

2. 使用 portalocker 库(跨平台)

portalocker 是一个跨平台的文件锁封装库,底层在 Windows 上使用 msvcrt,在 Unix 上使用 fcntl,简化了多平台开发中的兼容问题。

立即学习Python免费学习笔记(深入)”;

安装方式:

pip install portalocker

示例代码:

import portalocker

with open('data.txt', 'w') as f: portalocker.lock(f, portalocker.LOCK_EX) f.write('Critical data')

自动解锁

支持 LOCK_EX(排他锁)、LOCK_SH(共享锁)和 LOCK_NB(非阻塞模式)。

极限网络办公Office Automation
极限网络办公Office Automation

专为中小型企业定制的网络办公软件,富有竞争力的十大特性: 1、独创 web服务器、数据库和应用程序全部自动傻瓜安装,建立企业信息中枢 只需3分钟。 2、客户机无需安装专用软件,使用浏览器即可实现全球办公。 3、集成Internet邮件管理组件,提供web方式的远程邮件服务。 4、集成语音会议组件,节省长途话费开支。 5、集成手机短信组件,重要信息可直接发送到员工手机。 6、集成网络硬

下载

3. 使用 tempfile 和原子写入(避免锁)

某些场景下可避免显式加锁,采用“原子写入”策略:先写入临时文件,再重命名为目标文件。在大多数文件系统中,rename 操作是原子的。

示例代码:

import os

def atomic_write(filename, content): temp_filename = filename + '.tmp' with open(temp_filename, 'w') as f: f.write(content) f.flush() os.fsync(f.fileno()) # 确保写入磁盘 os.rename(temp_filename, filename) # 原子操作

此方法适合写操作频繁但读写不同时发生的场景,简单且无需锁机制。

4. 使用文件锁标志文件(基于文件存在性)

通过创建一个“.lock”文件来标记资源正在被使用。虽然不够严谨,但在轻量级场景中可行。

示例代码:

import os
import time

lock_file = 'data.txt.lock'

def acquire_lock(): while os.path.exists(lock_file): time.sleep(0.1) with open(lock_file, 'w') as f: f.write(str(os.getpid()))

def release_lock(): if os.path.exists(lock_file): os.remove(lock_file)

注意:需处理异常和进程崩溃后残留锁文件的问题,可用 atexit 或信号捕获清理。

基本上就这些常见方法。选择哪种取决于你的运行环境、是否跨平台、以及对可靠性的要求。对于生产环境,推荐使用 portalocker 或基于 fcntl 的方案,并确保所有访问方都遵守锁协议。

相关专题

更多
python开发工具
python开发工具

php中文网为大家提供各种python开发工具,好的开发工具,可帮助开发者攻克编程学习中的基础障碍,理解每一行源代码在程序执行时在计算机中的过程。php中文网还为大家带来python相关课程以及相关文章等内容,供大家免费下载使用。

746

2023.06.15

python打包成可执行文件
python打包成可执行文件

本专题为大家带来python打包成可执行文件相关的文章,大家可以免费的下载体验。

634

2023.07.20

python能做什么
python能做什么

python能做的有:可用于开发基于控制台的应用程序、多媒体部分开发、用于开发基于Web的应用程序、使用python处理数据、系统编程等等。本专题为大家提供python相关的各种文章、以及下载和课程。

758

2023.07.25

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

617

2023.07.31

python教程
python教程

Python已成为一门网红语言,即使是在非编程开发者当中,也掀起了一股学习的热潮。本专题为大家带来python教程的相关文章,大家可以免费体验学习。

1260

2023.08.03

python环境变量的配置
python环境变量的配置

Python是一种流行的编程语言,被广泛用于软件开发、数据分析和科学计算等领域。在安装Python之后,我们需要配置环境变量,以便在任何位置都能够访问Python的可执行文件。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

547

2023.08.04

python eval
python eval

eval函数是Python中一个非常强大的函数,它可以将字符串作为Python代码进行执行,实现动态编程的效果。然而,由于其潜在的安全风险和性能问题,需要谨慎使用。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

577

2023.08.04

scratch和python区别
scratch和python区别

scratch和python的区别:1、scratch是一种专为初学者设计的图形化编程语言,python是一种文本编程语言;2、scratch使用的是基于积木的编程语法,python采用更加传统的文本编程语法等等。本专题为大家提供scratch和python相关的文章、下载、课程内容,供大家免费下载体验。

705

2023.08.11

Java 项目构建与依赖管理(Maven / Gradle)
Java 项目构建与依赖管理(Maven / Gradle)

本专题系统讲解 Java 项目构建与依赖管理的完整体系,重点覆盖 Maven 与 Gradle 的核心概念、项目生命周期、依赖冲突解决、多模块项目管理、构建加速与版本发布规范。通过真实项目结构示例,帮助学习者掌握 从零搭建、维护到发布 Java 工程的标准化流程,提升在实际团队开发中的工程能力与协作效率。

3

2026.01.12

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 0.6万人学习

Django 教程
Django 教程

共28课时 | 3万人学习

SciPy 教程
SciPy 教程

共10课时 | 1.1万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号