我在azurehdinsight wasb上有一个配置单元表,想要从生产环境迁移/复制到qa环境,看起来我只能通过导出/导入来完成。1) 将表从parquet导出到文件(包括元数据)2)从prod存储复制到qa存储3)导入表
1wnzp6jl1#
azure hdinsight仅支持导出/导入配置单元元存储。如果要在删除hdinsight集群后保留配置单元表,请使用自定义元存储。然后可以将metastore附加到另一个hdinsight集群。注意:为一个hdinsight群集版本创建的hdinsight元存储不能在不同的hdinsight群集版本之间共享。参考文献:如何导出配置单元元存储并将其导入另一个集群?配置单元元存储最佳实践
1条答案
按热度按时间1wnzp6jl1#
azure hdinsight仅支持导出/导入配置单元元存储。
如果要在删除hdinsight集群后保留配置单元表,请使用自定义元存储。然后可以将metastore附加到另一个hdinsight集群。
注意:为一个hdinsight群集版本创建的hdinsight元存储不能在不同的hdinsight群集版本之间共享。
参考文献:
如何导出配置单元元存储并将其导入另一个集群?
配置单元元存储最佳实践