目前我正在尝试用sqoop导入sap hana表。在这里,我遇到了表名和列名都包含正斜杠“/”的问题。
对于表名,我可以使用query选项和转义表名作为解决方法。但是如果我想导入具有不同Map器的表,我想结合使用-m选项和--split by。在这里,我不能在列名中指定“/”而不得到以下错误。
20/06/26 08:05:02 ERROR tool.ImportTool: Encountered IOException running import job: java.io.IOException: com.sap.db.jdbc.exceptions.JDBCDriverException: SAP DBTech JDBC: [257] (at 12): sql syntax error: incorrect syntax near "/": line 1 col 12 (at pos 12)
sqoop生成的查询如下
SELECT MIN(/SOMETHING/KEY_COLUMN), MAX(/SOMETHING/KEY_COLUMN) FROM (select * from SCHEMA."/SOMETHING/TABLE_NAME") AS t1
声明:
sqoop import -D org.apache.sqoop.splitter.allow_text_splitter=true \
--driver com.sap.db.jdbc.Driver \
--connect jdbc:sap://alias:port/ \
--split-by "/SOMETHING/KEY_COLUMN" \
--target-dir /target-dir \
--delete-target-dir \
--query "select * from SCHEMA.\"/SOMETHING/TABLE_NAME\" where 1=1 AND \$CONDITIONS" \
--as-parquetfile \
--username username \
--password pw \
--num-mappers 4 \
--verbose
如何正确地避开--split by column?
1条答案
按热度按时间g0czyy6m1#
它与使用
--按“(”/something/key\u column“)拆分\