0

我正在使用 spark 2.4.4 和 hive 2.3 ...

使用 spark,我使用 DF.insertInto(hiveTable) 将数据框加载为 Hive 表

如果在运行期间创建新表(当然是在通过 spark.sql 插入插入之前)或由 spark 2.4.4 创建的现有表 - 一切正常。

问题是,如果我尝试加载一些现有表(创建 spark 2.2 或更早版本的旧表) - 面临 COUNT 条记录的问题。通过直线与 spark sql 完成目标配置单元表的计数时的差异计数。

请协助。

4

0 回答 0