如何将目录数据加载到配置单元

lsmepo6l 于 2021-06-29 发布在 Hive

关注(0)|答案(1)|浏览(306)

如何将hdfs文件加载到配置单元中。在我的项目中，它需要将hdfs文件加载到hive中。我的hdfs文件结构类似于/flume/topic/date/hour/file.hdfs，问题是如何自动加载目录数据。

Hive hdfs File Load

来源：https://stackoverflow.com/questions/37203415/how-to-load-directory-data-into-hive

1条答案

按热度按时间

kyks70gy1#

1) Directory contains three files

     -rw-r--r--   1 hadoop supergroup        125 2017-05-15 17:53/hallfolder/hall.csv
     -rw-r--r--   1 hadoop supergroup        125 2017-05-15 17:53/hallfolder/hall1.csv
     -rw-r--r--   1 hadoop supergroup        125 2017-05-15 17:54/hallfolder/hall2.csv
2) Enable this command

     hive > SET mapred.input.dir.recursive=true;
3) hive>

     hive>load data  inpath '/hallfolder/*' into table alltable;

赞(0）回复(0）举报 2021-06-29

我来回答

如何将目录数据加载到配置单元

1条答案

相关问题

热门标签

最新问答