3

我们有一个集群应用程序,其核心有一个缓存。缓存基于计算数据,从底层数据库(也被复制)构建。它用于快速查找流数据,即时做出路由决策。

由于计算缓存的数据可以从集群中的任何节点更改,我们正在考虑使缓存也被复制,这样我们就不必监听来自系统中其他节点的复制更改,以数据库特定的方式。

我们已经确定了 ehcache(infinispan / hazelcast,nearcache 是其他竞争者)作为可能的缓存实现。到目前为止,一切都很好。

我需要知道的是,当单个节点或整个应用程序重新启动时,如何重新填充此缓存。节点所需的所有数据都存在于底层数据库中。那么每个节点是否可以简单地从其数据库中加载数据并在重启后填充缓存?缓存如何将集群节点带入单一状态?

我知道有磁盘持久缓存 - 这是使用 ehcache 的方式吗?我不想将其用作第一个选项,因为所有数据的单一点是数据库,这是决定哪些数据是正确数据的中央权威。

有没有一种方法可以让应用程序在重新启动时重新加载所有数据的缓存,并让所有缓存都执行相同的操作并同步增量?我有点认为这是一件很难做的事情,并且可能不可行,因为所有节点都不会来回发送所有密钥。但想确定并想知道是否有其他策略来处理这种情况。

4

1 回答 1

3

我将尝试从 Infinispan 的角度提出可能的解决方案。

在您的用例中,我建议使用配置了底层缓存存储的 Infinispan 独立节点集群(客户端-服务器访问,例如通过 HotRod)。

https://docs.jboss.org/author/display/ISPN/Infinispan+Server & https://docs.jboss.org/author/display/ISPN/Using+Hot+Rod+Server

现在更具体地回答您的问题:

我需要知道的是,当单个节点或整个应用程序重新启动时,如何重新填充此缓存。

这就是为什么我建议您使用具有远程客户端-服务器访问权限的“独立”集群。您的缓存层不直接依赖于您的应用程序。当应用程序重新启动、崩溃、重新部署......您仍然在 Infinispan 集群中缓存数据,一旦您的应用程序再次运行,只需连接到它。

节点所需的所有数据都存在于底层数据库中。那么每个节点是否可以简单地从其数据库中加载数据并在重启后填充缓存?

在英菲尼斯潘,是的。节点能够从缓存存储中加载数据。请参阅本节:https ://docs.jboss.org/author/display/ISPN/Cache+Loaders+and+Stores ,尤其是预加载配置元素,用于在缓存启动后将数据从存储预加载到缓存。

缓存如何将集群节点带入单一状态?

Infinispan中存在状态转移。这个新的实现(https://community.jboss.org/wiki/Non-BlockingStateTransferV2)甚至在新节点加入期间不再阻塞您的集群。状态转移只是关心你在加入/离开更改后在集群中的数据分布。

有没有一种方法可以让应用程序在重新启动时重新加载所有数据的缓存,并让所有缓存都执行相同的操作并同步增量?

是的,根据上述所有。您可以简单地使用复制,以便将条目复制到所有节点并且状态是一致的。但是,这种情况更适合重读场景。在您的情况下,我想,具有相应 numberOfOwner 的分发模式应该就足够了。

于 2013-06-26T07:00:05.490 回答