每天进步一点点——Linux文件锁编程flock

简介:

转载请注明出处:http://blog.csdn.net/cywosp/article/details/30083015


1. 场景概述
    在多线程开发中。相互排斥锁能够用于对临界资源的保护,防止数据的不一致。这是最为普遍的用法。那在多进程中怎样处理文件之间的同步呢?我们看看以下的图:
                                     
图中所看到的的是两个进程在无同步的情况下同一时候更新同一个文件的过程,其基本的操作是:
1. 从文件里读取序号。
2. 使用这个序号完毕应用程序定义的任务。

3. 递增这个序号并将其写回文件里。
从图中可得知两个进程读取分别添加了所读取到的序号,并写回到了文件里。可是假设有相互相互排斥的话,最后的值应该是1002,而不是所看到的的1001。

为了防止出现这样的情况,Linux提供了flock(对整个文件加锁)、fcntl(对整个文件区域加锁)两个函数来做进程间的文件同步。同一时候也可以使用信号量来完毕所需的同步。但通常使用文件锁会更好一些。由于内核可以自己主动将锁与文件关联起来。


2. flock()
    flock的声明例如以下
#include <sys/file.h>

// Returns 0 on success, or -1 on error
int flock (intfdint operation);
    fcntl()函数提供了比该函数更为强大的功能,而且所拥有的功能也覆盖了flock()所拥有的功能,可是在某些应用中任然使用着flock()函数,而且在继承和锁释放方面的一些语义 中flock()与fcntl()还是有所不同的。
    flock()系统调用是在整个文件里加锁。通过对传入的fd所指向的文件进行操作,然后在通过operation參数所设置的值来确定做什么样的操作。

operation能够赋例如以下值:

                
    在默认情况下,假设还有一个进程已经持有了文件上的一个不兼容的锁。那么flock()会堵塞。假设须要防止这样的情况的出现。能够在operation參数中对这些值取OR(|)。在这样的情况下,假设一个进程已经持有了文件上的一个不兼容锁。那么flock()就会堵塞,相反,它会返回-1,并将errno设置成EWOULDBLOCK。

    随意数量的进程可同一时候持有一个文件上的共享锁。但子随意时刻仅仅能有一个进程可以持有一个文件上的相互排斥锁,(这有点类似读写锁)。

下图是进程A先设置了锁,进程B后设置锁的支持情况:

                
不管程序以什么模式打开了文件(读、写或者读写),该文件上都能够放置一把共享锁或相互排斥锁。

在实际操作过程中,參数operation能够指定相应的值将共享锁转换成相互排斥锁(反之亦然)。

将一个共享锁转换成相互排斥锁,假设还有一个进程要获取该文件的共享锁则会堵塞。除非operation參数指定了LOCK_NB标记,即:(LOCK_SH | LOCK_NB)。锁的转换过程不是一个原子操作。在转换的过程中首先会删除既有的锁,然后创建新锁。


3. 锁继承与释放的语义
    flock()依据调用时operation參数传入LOCK_UN的值来释放一个文件锁。

此外。锁会在对应的文件描写叙述符被关闭之后自己主动释放。

同一时候,当一个文件描写叙述符被复制时(dup()、dup2()、或一个fcntl() F_DUPFD操作),新的文件描写叙述符会引用同一个文件锁。

flock(fd, LOCK_EX);
new_fd = dup(fd);
flock(new_fd, LOCK_UN);
这段代码先在fd上设置一个相互排斥锁。然后通过fd创建一个指向同样文件的新文件描写叙述符new_fd。最后通过new_fd来解锁。

从而我们能够得知新的文件描写叙述符指向了同一个锁。所以,假设通过一个特定的文件描写叙述符获取了一个锁而且创建了该描写叙述符的一个或多个副本,那么,假设不显示的调用一个解锁操作,仅仅有当文件描写叙述符副本都被关闭了之后锁才会被释放。

    由上我们能够推出。假设使用fork()创建一个子进程。子进程会复制父进程中的全部描写叙述符。从而使得它们也会指向同一个文件锁。比如以下的代码会导致一个子进程删除一个父进程的锁:
flock (fd, LOCK_EX);
if (0 == fork ()) {
    flock (fd, LOCK_UN);
}
所以,有时候能够利用这些语义来将一个文件锁从父进程传输到子进程:在fork()之后,父进程关闭其文件描写叙述符。然后锁就仅仅在子进程的控制之下了。

通过fork()创建的锁在exec()中会得以保留(除非在文件描写叙述符上设置了close-on-exec标记而且该文件描写叙述符是最后一个引用底层的打开文件描写叙述的描写叙述符)。

    假设程序中使用open()来获取第二个引用同一个文件的描写叙述符,那么。flock()会将其视为不同的文件描写叙述符。例如以下代码会在第二个flock()上堵塞。
fd1 = open ("test.txt", O_RDWD);
fd2 = open ("test.txt", O_RDWD);
flock (fd1, LOCK_EX);
flock (fd2, LOCK_EX);

4. flock()的限制
flock()放置的锁有例如以下限制
  • 仅仅能对整个文件进行加锁。这样的粗粒度的加锁会限制协作进程间的并发。假如存在多个进程,当中各个进程都想同一时候訪问同一个文件的不同部分。

  • 通过flock()仅仅能放置劝告式锁。
  • 非常多NFS实现不识别flock()放置的锁。

凝视:在默认情况下,文件锁是劝告式的,这表示一个进程可以简单地忽略还有一个进程在文件上放置的锁。要使得劝告式加锁模型可以正常工作。全部訪问文件的进程都必需要配合,即在运行文件IO之前先放置一把锁。




版权声明:本文博客原创文章,博客,未经同意,不得转载。








本文转自mfrbuaa博客园博客,原文链接:http://www.cnblogs.com/mfrbuaa/p/4748797.html,如需转载请自行联系原作者


相关文章
|
4月前
|
Shell Linux
Linux shell编程学习笔记30:打造彩色的选项菜单
Linux shell编程学习笔记30:打造彩色的选项菜单
|
17天前
|
存储 监控 Linux
嵌入式Linux系统编程 — 5.3 times、clock函数获取进程时间
在嵌入式Linux系统编程中,`times`和 `clock`函数是获取进程时间的两个重要工具。`times`函数提供了更详细的进程和子进程时间信息,而 `clock`函数则提供了更简单的处理器时间获取方法。根据具体需求选择合适的函数,可以更有效地进行性能分析和资源管理。通过本文的介绍,希望能帮助您更好地理解和使用这两个函数,提高嵌入式系统编程的效率和效果。
80 13
|
2月前
|
运维 监控 Shell
深入理解Linux系统下的Shell脚本编程
【10月更文挑战第24天】本文将深入浅出地介绍Linux系统中Shell脚本的基础知识和实用技巧,帮助读者从零开始学习编写Shell脚本。通过本文的学习,你将能够掌握Shell脚本的基本语法、变量使用、流程控制以及函数定义等核心概念,并学会如何将这些知识应用于实际问题解决中。文章还将展示几个实用的Shell脚本例子,以加深对知识点的理解和应用。无论你是运维人员还是软件开发者,这篇文章都将为你提供强大的Linux自动化工具。
|
4月前
|
Shell Linux
Linux shell编程学习笔记82:w命令——一览无余
Linux shell编程学习笔记82:w命令——一览无余
|
4月前
|
Linux Shell
Linux系统编程:掌握popen函数的使用
记得在使用完 `popen`打开的流后,总是使用 `pclose`来正确关闭它,并回收资源。这种做法符合良好的编程习惯,有助于保持程序的健壮性和稳定性。
175 6
|
4月前
|
Linux Shell
Linux系统编程:掌握popen函数的使用
记得在使用完 `popen`打开的流后,总是使用 `pclose`来正确关闭它,并回收资源。这种做法符合良好的编程习惯,有助于保持程序的健壮性和稳定性。
188 3
|
5月前
|
项目管理 敏捷开发 开发框架
敏捷与瀑布的对决:解析Xamarin项目管理中如何运用敏捷方法提升开发效率并应对市场变化
【8月更文挑战第31天】在数字化时代,项目管理对软件开发至关重要,尤其是在跨平台框架 Xamarin 中。本文《Xamarin 项目管理:敏捷方法的应用》通过对比传统瀑布方法与敏捷方法,揭示敏捷在 Xamarin 项目中的优势。瀑布方法按线性顺序推进,适用于需求固定的小型项目;而敏捷方法如 Scrum 则强调迭代和增量开发,更适合需求多变、竞争激烈的环境。通过详细分析两种方法在 Xamarin 项目中的实际应用,本文展示了敏捷方法如何提高灵活性、适应性和开发效率,使其成为 Xamarin 项目成功的利器。
59 1
|
5月前
|
安全 Linux 开发工具
探索Linux操作系统:从命令行到脚本编程
【8月更文挑战第31天】在这篇文章中,我们将一起潜入Linux操作系统的海洋,从最基础的命令行操作开始,逐步深入到编写实用的脚本。无论你是初学者还是有一定经验的开发者,这篇文章都将为你提供新的视角和实用技能。我们将通过实际代码示例,展示如何在日常工作中利用Linux的强大功能来简化任务和提高效率。准备好了吗?让我们一起开启这段旅程,探索Linux的奥秘吧!
|
5月前
|
Linux
揭秘Linux心脏:那些让你的编程事半功倍的主要系统调用
【8月更文挑战第31天】Linux中的系统调用是操作系统提供给应用程序的接口,用于请求内核服务,如文件操作、进程控制等。本文列举了22种主要系统调用,包括fork()、exec()、exit()、wait()、open()、close()、read()、write()等,并通过示例代码展示了如何使用fork()创建新进程及使用open()、write()、close()操作文件。这些系统调用是Linux中最基本的接口,帮助应用程序与内核交互。
70 1
|
4月前
|
Shell Linux Python
python执行linux系统命令的几种方法(python3经典编程案例)
文章介绍了多种使用Python执行Linux系统命令的方法,包括使用os模块的不同函数以及subprocess模块来调用shell命令并处理其输出。
101 0