1

我正在尝试将表的位置移动到新目录。假设原始位置是/data/dir。例如,我正在尝试这样的事情:

hadoop fs -mkdir /data/dir_bkp
hadoop fs -mv /data/dir/* /data/dir_bkp

然后我执行配置单元命令,例如:

ALTER TABLE db.mytable RENAME TO db.mytable_bkp;
ALTER TABLE db.mytable_bkp SET LOCATION /data/dir_bkp;

在更改表的位置之前移动目录文件可以吗?运行这些命令后,表格mytable_bkp是否会像以前一样填充?

4

1 回答 1

1

执行mv命令后,您的原始表将变为空。因为 mv 删除了数据文件。

重命名表后,它是空的,因为它的位置是空的。

执行后ALTER TABLE SET LOCATION- 表为空,因为分区已安装到旧位置(现在为空)。很抱歉之前在此步骤中误导了您。重命名表后,分区保持重命名前的状态。每个分区通常可以在表位置之外拥有自己的位置。

如果表是 MANAGED,则将其设为 EXTERNAL:

alter table table_name SET TBLPROPERTIES('EXTERNAL'='TRUE'); 

现在 drop table + create table with new location 并运行 MSCK 来创建分区:

MSCK [REPAIR] TABLE tablename;

如果您在 Amazon EMR 上,请运行 ALTER TABLE tablename RECOVER PARTITIONS;而不是 MSCK

于 2021-02-10T16:15:23.750 回答