1

我正在使用dynamodb来存储一个应用程序的配置,这个配置很可能一天改几次,会在几十行的量级。我的应用程序将部署到多个 EC2 实例。我最终将编写另一个应用程序来允许管理配置,同时通过直接在 AWS 控制台中对表进行更改来管理配置。

我正在尝试使用发电机流来监视配置的更改,当应用程序接收到要处理的记录时,它只是重新读取整个发电机表。

这在本地和部署到一个实例时有效,但是当我将它部署到三个实例时,它永远不会初始化 IRecordProcessor,并且不会对表进行任何更改。

我怀疑这是因为该表只有一个分片,并且 实例数不应超过分片数(至少对于 kinesis 流,我知道 kinesis 和 dynamo 流实际上是不同的)。

我知道如何在 kinesis 流中拆分碎片,但似乎无法找到一种方法来为 dynamo 流执行此操作。我读到,实际上,发电机流中的分片数等于发电机表中的分区数,您可以通过增加读/写容量来增加分区数。我不想增加吞吐量,因为这会很昂贵。

  1. 分片数应大于实例数的条件是否也适用于 dyanmo 流?如果是这样,是否有另一种方法来增加分片的数量,如果没有,是否有已知原因导致小型表上的发电机流在被多个实例读取时失败?
  2. 是否有更好的方法来存储和查看此类配置(最好使用 AWS 基础设施)?我要调查触发器。
4

1 回答 1

0

我最终通过在设置 时将实例 ID ( EC2MetadataUtils.getInstanceId) 添加到流名称来解决这个问题KinesisClientLibConfiguration,因此为每个实例设置了一个新流。这确实会导致为每个实例设置一个单独的发电机表,当我在新实例上重新启动应用程序时,我现在需要删除旧表。

我还联系了 AWS 支持,并收到了回复。

于 2016-12-15T14:04:39.100 回答