如果在移动表之前移动配置单元表数据文件会发生什么?

xt0899hw  于 2021-07-15  发布在  Hadoop
关注(0)|答案(1)|浏览(368)

我正在尝试将表的位置移动到新目录。假设原始位置是 /data/dir . 例如,我正在尝试这样的方法:

hadoop fs -mkdir /data/dir_bkp
hadoop fs -mv /data/dir/* /data/dir_bkp

然后执行配置单元命令,例如:

ALTER TABLE db.mytable RENAME TO db.mytable_bkp;
ALTER TABLE db.mytable_bkp SET LOCATION /data/dir_bkp;

在更改表的位置之前移动目录文件可以吗?在我运行这些命令之后,表 mytable_bkp 像以前一样被填满?

ecbunoof

ecbunoof1#

在你被处决之后 mv 命令,原始表将变为空。因为mv删除了数据文件。
重命名表后,它是空的,因为它的位置是空的。
在你被处决之后 ALTER TABLE SET LOCATION -表是空的,因为分区装载到旧位置(现在是空的)。很抱歉之前在这一步中误导了您。重命名表后,分区保持重命名前的状态。每个分区通常可以在表位置之外有自己的位置。
如果表是托管的,则将其设为外部:

alter table table_name SET TBLPROPERTIES('EXTERNAL'='TRUE');

现在drop table+create table with new location并运行msck创建分区:

MSCK [REPAIR] TABLE tablename;

如果你在亚马逊电子病历,快跑 ALTER TABLE tablename RECOVER PARTITIONS; 而不是msck

相关问题