问题是
哪个 azure service 对 beam 的 runner 有好处？
“好”一词的意思是“类似于谷歌云平台数据流”。
事实上，我们是从 google cloud platfrom 开始的。dataproc spark 和 dataflow beam 都是批处理的候选对象，最后我们选择了 dataflow，因为
- Beam 易于编写且抽象良好
- 数据流对于我们的稀疏执行模式来说是具有成本效益的。
- Dataproc 需要操作。
我们计划将系统扩展到其他云供应商，我们必须寻找数据流的替代服务。使用 flink runner 进行 Kinesis 数据分析应该是 AWS 中的一个很好的解决方案。但是我们仍然试图找到像服务一样的数据流。
谢谢。