4

我正在使用使用 Java 的 Flink Table API,我想将 DataSet 转换为 DataStream .... 以下是我的代码:

TableEnvironment tableEnvironment=new TableEnvironment();
Table tab1=table.where("related_value < 2014").select("related_value,ref_id");
DataSet<MyClass>ds2=tableEnvironment.toDataSet(tab1, MyClass.class);
DataStream<MyClass> d=tableEnvironment.toDataStream(tab1, MyClass.class);

但是当我尝试执行这个程序时,它会抛出以下异常:

org.apache.flink.api.table.ExpressionException:JavaStreamingTranslator 的无效根:根(ArraySeq((related_value,Double),(ref_id,String)))。您是否尝试将基于 DataSet 的 Table 转换为 DataStream,反之亦然? 我想知道我们如何使用 Flink Table API 将 DataSet 转换为 DataStream ?

我想知道的另一件事是,对于模式匹配,有可用的 Flink CEP 库。但是使用 Flink Table API 进行模式匹配是否可行?

4

2 回答 2

3

Flink 的 Table API 并非旨在将 a 转换DataSet为 a DataStream,反之亦然。Table API 无法做到这一点,目前 Flink 也没有其他方法可以做到这一点。

统一DataStreamDataSetAPI(将批处理作为流的特殊情况,即作为有界流处理)是 Flink 的长期路线图。

于 2016-05-13T07:40:33.550 回答
0

使用时无法转换为 DataStream API TableEnvironment,您必须创建一个StreamTableEnvironment从表转换为 DataStream 的方法,如下所示:

final EnvironmentSettings fsSettings = EnvironmentSettings.newInstance().useBlinkPlanner().inStreamingMode().build();
final StreamTableEnvironment fsTableEnv = StreamTableEnvironment.create(configuration, fsSettings);
DataStream<String> finalRes = fsTableEnv.toAppendStream(tableNameHere, MyClass.class);

希望能以某种方式帮助你。

亲切的问候!

于 2020-08-27T23:49:00.903 回答