如何使用springxd从oracle和sqlserver向hawq加载数据

qnyhuwrf  于 2021-05-30  发布在  Hadoop
关注(0)|答案(3)|浏览(349)

嗨,我有oracle和sql server中的表。我需要使用springxd将数据从oracle和sqlserver加载到hawq中。在文档中找不到。

j5fpnvbx

j5fpnvbx1#

outsourcer是另一个开源解决方案,最初设计用于将oracle和sql server中的数据加载到greenplum中,但不久前进行了增强,以支持hawq。
所有文档和下载都在http://www.pivotalguru.com/
如果您对源代码感兴趣,请看:https://github.com/pivotalguru/outsourcer

tag5nh1u

tag5nh1u2#

您需要将sqoop作业与springxd集成。有关使用springxd的sqoop作业,请参见下面的链接
https://github.com/tzolov/spring-xd-sqoop-job

yjghlzjz

yjghlzjz3#

您可以使用jdbchdfs作业以csv或任何pxf支持的格式加载hdfs中的数据。然后可以使用pxf外部表支持将加载的数据Map到hawq表。如果需要将此数据加载到本机hawq表,则可以从那里执行select insert,或者将select insert配置为另一个批处理作业,将数据从pxf外部表加载到hawq本机。

相关问题