通过hue更新hdfs中的文件

ilmyapht  于 2021-06-04  发布在  Hadoop
关注(0)|答案(1)|浏览(378)

我知道hdfs是关于一次写多次读的类型。据我所知,在hdfs中更新文件(随机)是不可能的,因为文件存储在分布式环境中(作为块),每个块都复制到其他节点上,数据节点甚至很难更新这些复制的块。
但是,我的问题是,是否可以使用色调工具更新hdfs中的文件?。因为,我已经用hue工具更新了很多文件(存储在hdfs中),并在上面运行了map reduce作业。那么,hue如何更新hdfs中的文件呢。色调在背景中起作用吗?通过hue进行的更新是否真的更新到了同一个文件?或者删除文件并重新写入整个文件(包括我们要更新的新数据)?

gc0ot86w

gc0ot86w1#

hue删除并重新写入整个文件,因为hdfs不支持版本。您可以注意到,hue现在只将版本限制为小文件。
下面是一篇博文,了解有关hdfs文件浏览器的更多信息。

相关问题