webhdfsrestapi和httpfs有什么区别?如果我理解正确:httpfs是在hdfs之上公开restapi的独立服务webhdfs是hdfs中内置的restapi。它不需要任何进一步的安装我说的对吗?什么时候最好用一个代替另一个?
vvppvyoh1#
我读了一篇与你的问题有关的文章。下面是链接。https://www.linkedin.com/today/post/article/20140717115238-176301000-accessing-hdfs-using-the-webhdfs-rest-api-vs-httpfswebhdfs与httpfs webhdfs与httpfs之间的主要区别:webhdfs需要访问集群的所有节点,当读取一些数据时,数据直接从该节点传输,而在httpfs中,单个节点的行为类似于“网关”,是向客户机节点传输数据的单点。因此,httpfs在大文件传输过程中可能会被阻塞,但好在我们正在最小化访问hdfs所需的占用空间。
1条答案
按热度按时间vvppvyoh1#
我读了一篇与你的问题有关的文章。下面是链接。
https://www.linkedin.com/today/post/article/20140717115238-176301000-accessing-hdfs-using-the-webhdfs-rest-api-vs-httpfs
webhdfs与httpfs webhdfs与httpfs之间的主要区别:webhdfs需要访问集群的所有节点,当读取一些数据时,数据直接从该节点传输,而在httpfs中,单个节点的行为类似于“网关”,是向客户机节点传输数据的单点。因此,httpfs在大文件传输过程中可能会被阻塞,但好在我们正在最小化访问hdfs所需的占用空间。