amazon-kinesis - 在 kinesis 上运行 presto 查询时出错

Question

在 kinesis 上运行 presto 查询时出现以下错误。

查询 20151031_142753_00003_xxxxx 失败：帐户 xxxxxx 下的流 xxxxx 超出速率。（服务：AmazonKinesis；状态代码：400；错误代码：ProvisionedThroughputExceededException；请求 ID：94fb720d-7fdb-11e5-994c-83dc0xxxxxx）

我正在使用 qubole 的 presto-kinesis 连接器。

任何想法，如何解决

Answer 1

当客户端尝试以高于 Kinesis 分片限制 (2mb/s) 的速度读取数据时，会发生此错误。在对分片的 getRecords 调用上添加重试逻辑。