从hadoop hdfs数据中搜索

vhipe2zx 于 2021-06-02 发布在 Hadoop

关注(0)|答案(1)|浏览(302)

我以json格式从在线源代码中提取数据，并通过apacheflume将其存储到hdfs中。现在它像hadoop那样创建多个文件。现在我想从这些数据（从所有这些文件）中搜索一些东西，并获得与之相关的完整信息。解决办法是什么？

hadoop hdfs

来源：https://stackoverflow.com/questions/46599676/search-from-hadoop-hdfs-data

1条答案

按热度按时间

w80xi6nr1#

您可以开发自己的脚本，用mapreduce或spark在hdfs中搜索。你有另一个解决办法，你可以用Hive或Pig。清管器指南：http://archive.cloudera.com/cdh/3/pig/tutorial.html Hive指南：https://cwiki.apache.org/confluence/display/hive/languagemanual

赞(0）回复(0）举报 2021-06-02

我来回答

从hadoop hdfs数据中搜索

1条答案

相关问题

热门标签

最新问答