Azure Data Factory V2复制活动在将数据复制到目标后未清理/删除暂存文件/容器(例如: snowflake )

lndjwyie  于 2023-06-07  发布在  其他
关注(0)|答案(1)|浏览(135)

Azure Data Factory V2复制活动在将数据复制到目标后未清理/删除暂存文件/容器(例如:Snowflake)。
这是一个bug吗?在我的ADF中,容器级别是为临时区域设置的,我最终得到了多个GUID容器。一些容器甚至有元数据文件。
根据微软的说法,Azure Data Factory在暂存区域中创建的所有临时文件/文件夹/容器都应该在复制成功后由ADF自动删除。
请引导。

6l7fqoea

6l7fqoea1#

根据微软的说法,Azure Data Factory在暂存区域中创建的所有临时文件/文件夹/容器都应该在复制成功后由ADF自动删除。

对于交错,我们有2个链接服务选项:

  1. Azure Blob存储。
  2. Azure数据湖服务。

*Azure Blob存储。-如果您选择Blob存储进行转移,它将删除或清除转移时创建的所有文件夹。--因为blob存储不能在其中保留空文件夹。
**暂存后Blob存储:**x1c 0d1x
*Azure Data Lake Service。-如果您选择ADLS进行暂存,它将只删除或清理在暂存时创建的数据文件。--因为您可以在ADLS中保留空文件夹。
错开后ADLS:

两个存储帐户中的容器均未被删除。

相关问题