2

我有一个分布式应用程序;也就是说,我有一个在多台计算机上运行的同构进程与中央数据库通信并访问网络文件共享。

此过程从网络文件共享中获取集合文件(通过 CIFS),对这些文件运行转换算法并将输出复制回网络文件共享。

我需要锁定输入文件,以便其他服务器——运行相同的进程——不能处理相同的文件。为了争论,假设我的描述过于简单化并且锁是绝对必须的。

这是我提出的解决方案,以及一些想法。

1)使用机会锁(oplocks)。此解决方案仅使用文件系统来锁定文件。这里的问题是我们必须尝试获取锁才能确定锁是否存在。由于网络重定向器协商锁定,这似乎很昂贵。这样做的好处是,可以以这样一种方式创建 oplock,当出现错误时它们会自动删除。

2) 使用数据库应用锁(通过 sp_getapplock)。这似乎会快得多,但现在我们使用数据库来锁定文件系统。此外,数据库应用程序锁可以通过事务或会话来限定范围,这意味着如果我想保持——然后释放——应用程序锁,我必须保持连接。目前,我们正在使用连接池,这将不得不改变,这本身可能是一个更大的对话。这种方法的好处是,如果我们失去与服务器的连接,锁将被清除。当然,这意味着如果我们失去了与数据库的连接,而不是网络文件共享,那么当我们仍在处理输入文件时,锁就会消失。

3)创建一个数据库表和存储过程来表示我想锁定的项目。这个过程很简单。这当然是潜在的网络错误。如果由于某种原因,数据库变得不可访问,锁将保持有效。然后我们需要派生一些算法来在以后清理它。

什么是最好的解决方案,为什么?答案不限于上面提到的那些。

4

1 回答 1

1

对于您的情况,您应该使用共享模式锁。这正是他们的目的。

Oplocks 不会达到您想要的效果 - oplock 不是锁,并且不会阻止任何人做任何事情。这是一种通知机制,让客户端机器知道是否有人访问了该文件。这是通过“打破”你的 oplock 与机器通信的,但这不是进入应用程序层(即你的代码)的东西 - 它只是向客户端操作系统生成一条消息,告诉它使其缓存无效从服务器复制并再次获取。

请参阅此处的 MSDN:

当另一个进程打开一个你持有 oplock 的文件时会发生什么的解释在这里:

然而重要的一点是 oplocks 不会阻止其他进程打开文件,它们只是允许客户端计算机之间的协调。因此,oplocks 不会在应用程序级别锁定文件——它们是网络文件系统堆栈用来实现缓存的网络协议的一个特性。它们并不是真正供应用程序使用的。


由于您在 Windows 上编程,因此适当的解决方案似乎是共享模式锁定,即使用SHARE_DENY_READ|SHARE_DENY_WRITE|SHARE_DENY_DELETE.

如果 CIFS 服务器不支持共享模式锁,您可以考虑flock()使用类型锁。(以传统的 Unix 技术命名)。

如果您正在处理xyz.xml创建一个名为的文件xyz.xml.lock(使用该CREATE_NEW模式,因此您不会破坏现有文件)。完成后,将其删除。如果由于文件已经存在而无法创建文件,则意味着另一个进程正在处理它。将信息写入对调试有用的锁定文件可能很有用,例如服务器名和 PID。您还必须有某种方法来清理废弃的锁定文件,因为这不会自动发生。

例如,如果 CIFS 是一个复制系统,那么数据库锁可能是合适的,这样flock()锁就不会在整个系统中自动发生。否则我会坚持使用文件系统,因为只有一件事会出错。

于 2013-10-07T16:55:57.987 回答