我已经尝试过展平层次结构,合并文件和保留层次结构,在我尝试追加或合并文件与数据工厂,但它既不会追加或合并
接收器看起来如下所示:
有人能告诉我如何配置数据工厂合并文件吗
svmlkihl1#
要合并文件,请在ForEach循环后使用复制活动。
首先使用上述循环将单个文件从REST复制到ADLS文件夹。然后使用另一个带有源的复制活动(给予数据集文件夹路径)。
使用通配符路径。这里我使用csv作为示例。
现在在Flume,使用合并选项。
将REST API中具有相同结构的文件复制到ADLS文件夹。
合并后的最终csv文件。
1条答案
按热度按时间svmlkihl1#
要合并文件,请在ForEach循环后使用复制活动。
首先使用上述循环将单个文件从REST复制到ADLS文件夹。然后使用另一个带有源的复制活动(给予数据集文件夹路径)。
使用通配符路径。这里我使用csv作为示例。
现在在Flume,使用合并选项。
将REST API中具有相同结构的文件复制到ADLS文件夹。
合并后的最终csv文件。