我可以访问pig中的本地文件吗?

juud5qan  于 2021-06-25  发布在  Pig
关注(0)|答案(1)|浏览(378)

我有一个名为blacklist.xml的文件,这个文件的每一行都包含一个绝对路径,多个路径在这个文件中。此文件存储在/users//
我是否可以从本地目录(/users//)加载这个文件,但不能从hdfs加载?谢谢!!

toiithl6

toiithl61#

您可以使用命令行选项在本地模式下运行pig -x local . pig一次只能处理一个文件系统——如果您希望使用hadoop示例,将临时数据和输出数据存储到hdfs,那么您的所有输入文件也需要在hdfs上。
例外情况是,如果您使用本地文件作为参数集合,则应该查找如何从文件中读取参数。

相关问题