flock

言之。于 2024-10-30 16:43:35 发布

在Linux中，flock是一个用于对文件加锁的实用程序，它可以帮助协调多个进程对同一个文件的访问，避免出现数据不一致或冲突等问题。

在使用crontab管理定时脚本时，如果设定的脚本执行时间间隔较短，例如5分钟执行一次，正常情况下，脚本执行耗时1分钟，在非正常情况下（如服务器压力较大的情况下，或数据量突然增大），脚本执行时间超过5分钟，这时就会造成多个脚本同时执行，严重时甚至拖垮服务器，影响服务器上的其它服务。这时就需要Linux的文件锁-flock！

以下是对flock的详细介绍：

基本原理

flock通过在文件上设置锁来控制多个进程对该文件的并发访问。当一个进程对文件加锁后，其他进程若也试图对同一文件进行不相容的加锁操作（取决于锁的类型），则会被阻塞，直到第一个进程释放锁为止。这样就确保了在同一时刻只有一个（或特定数量的，依据锁类型）进程能够以特定的方式访问文件。

命令格式

flock命令的基本格式如下：

flock [选项] <文件描述符或文件名> <要执行的命令>

Usage:
 flock [options] <file|directory> <command> [command args]
 flock [options] <file|directory> -c <command>
 flock [options] <file descriptor number>

Options:
-s, --shared:    获得一个共享锁
-x, --exclusive: 获得一个独占锁
-u, --unlock:    移除一个锁，通常是不需要的，脚本执行完会自动丢弃锁
-n, --nonblock:  如果没有立即获得锁，直接失败而不是等待
-w, --timeout:   如果没有立即获得锁，等待指定时间
-o, --close:     在运行命令前关闭文件的描述符号；用于如果命令产生子进程时会不受锁的管控
-c, --command:   在shell中运行一个单独的命令
-h, --help       显示帮助
-V, --version:   显示版本

例如：

flock -xn /tmp/myfile.txt echo "This is a test"

在这个例子中，-x是选项，表示排他锁（后面会详细介绍锁的类型），/tmp/myfile.txt是要加锁的文件名，echo "This is a test"是在获取锁之后要执行的命令。-n选项表示被进程占用时，别的进程就不会再重复执行命令。

锁的类型

• 排他锁（Exclusive Lock，简称 -x或–exclusive）：
  • 当一个进程对文件加上排他锁后，其他进程不能再对该文件加任何类型的锁（包括排他锁和共享锁），直到这个进程释放锁为止。
  • 排他锁用于确保在锁被持有时，只有加锁的这个进程能够对文件进行读写操作，常用于对文件进行独占性的修改操作，比如写入新数据、替换文件内容等。
• 共享锁（Shared Lock，简称 -s或–shared）：
  • 若一个进程对文件加上共享锁，其他进程可以继续对该文件加共享锁，但不能加排他锁。
  • 共享锁通常用于多个进程需要同时读取文件内容的情况，这样多个进程可以并发地获取共享锁并读取文件，而不会互相干扰，但当有进程要对文件进行修改（需要加排他锁）时，就必须等待所有持有共享锁的进程都释放锁之后才能进行。

常用选项

• -n或–nb（Non-blocking）：
  • 作用：以非阻塞方式尝试加锁。如果无法立即获得所需的锁（比如文件已经被其他进程加了不相容的锁），则不会等待，而是立即返回一个错误状态码，并且继续执行后续的操作（如果有）。
  • 示例：flock -n -x /tmp/myfile.txt echo "This is a test"，如果无法获得排他锁，echo命令将不会被执行，程序会继续往下进行处理，而不是一直等待锁的释放。
• -w或–wait <等待时间>：
  • 作用：指定等待锁的最长时间。如果在规定时间内无法获得锁，则返回一个错误状态码。
  • 示例：flock -w 10 -x /tmp/myfile.txt echo "This is a test"，表示最多等待10秒来获取排他锁，若10秒内未获取到，则echo命令不会被执行，程序继续后续处理。
• -u或–unlock：
  • 作用：用于手动释放锁。一般情况下，当加锁时指定的命令执行完毕后，flock会自动释放锁，但在某些特殊情况下，比如需要提前结束加锁状态，可以使用这个选项来手动释放锁。
  • 示例：假设已经通过flock -x /tmp/myfile.txt some_command加了排他锁，在some_command执行过程中，出于某种原因需要提前释放锁，可以执行flock -u /tmp/myfile.txt来实现。

应用场景

• 文件并发访问控制：
  • 当多个进程需要同时访问一个文件，如日志文件，一些进程可能只是读取文件内容用于分析或监控，而另一些进程可能需要写入新的日志记录。通过使用flock设置共享锁和排他锁，可以确保读取进程可以并发读取（使用共享锁），而写入进程在写入时能够独占文件（使用排他锁），避免了数据混乱。
• 资源协调：
  • 在一些脚本或程序中，可能需要协调多个子进程对某个资源（以文件形式存在，比如配置文件）的访问。flock可以用来确保每个子进程按照预期的方式访问资源，防止冲突，保证系统的稳定运行。
• 防止文件覆盖：
  • 当两个或多个进程可能同时尝试对同一个文件进行修改操作时，如替换文件内容或添加新内容，使用排他锁可以确保只有一个进程能够成功进行修改，避免文件被多个进程同时修改导致的数据丢失或混乱。

注意事项

• 文件描述符与文件名：可以使用文件描述符（如通过open函数打开文件后得到的描述符）或文件名来指定要加锁的对象。使用文件描述符时，要确保描述符对应的文件没有被关闭，否则可能导致锁无法正常释放或出现其他异常情况。
• 锁的继承性：在子进程中，如果父进程对某个文件加了锁，子进程一般会继承父进程的锁状态。但这也需要根据具体的编程语言和实现来确定，在某些情况下，可能需要在子进程中重新进行加锁操作，以确保锁的正确使用。
• 锁的释放：一般情况下，当加锁时指定的命令执行完毕后，flock会自动释放锁，但如果在执行过程中出现异常情况（如进程被杀死、命令执行中断等），可能需要手动释放锁（使用-u选项），以避免文件被后续进程无法正常获取锁的情况。

flock是Linux中一个很有用的工具，用于协调多个进程对文件的访问，通过合理设置锁的类型、选项等来满足不同的应用场景需求，保障文件访问的有序性和数据的一致性。