增量负载有问题,我想创建增量负载从Oracle内部部署服务器到Azure数据湖的(增量加载)管道(blob存储)我没有Azure SQL。我只想将blob存储作为CSV文件推送。在我的情况下,我很困惑,我怎么能做到这一点?。有人告诉我,在你的情况下,你必须使用 parquet 三角洲。请帮助我与此我卡住了很多天。
首先,我加载了满载(复制活动),现在我想只加载新的数据从oracle服务器与触发器每周星期日。
请在这个问题上提供帮助!提前感谢瓦利斯
我需要在管道方面获得帮助,以便从Oracle服务器到Azure数据湖构建仅增量加载的新行
1条答案
按热度按时间xdnvmnnf1#
在复制活动中,您可以选择Query,而不是在源中选择表选项,然后在其中编写select语句,并在任意时间戳列上使用where子句(例如:
loadtimestamp >= getdate()-7
),用于增量数据加载。copy activity