hadoop中的hdfs节点标签

col17t5w  于 2021-05-29  发布在  Hadoop
关注(0)|答案(1)|浏览(441)

只是想了解节点标签如何与hdfs相关。我了解使用节点标签下定义的有限节点集的Yarn进行加工。如何在hdfs级别进行管理?假设我有40个节点,为一个节点标签分配20个节点。
数据是否会从一个节点复制到另一个节点进行处理?
数据将只驻留在节点标签下的那些节点中。
努力获取有关上述主题的资料。

wvyml7n5

wvyml7n51#

嗯,节点标签只用于Yarn加工。一个数据处理可能有也可能没有本地可用的数据。在这种情况下,数据将从另一个节点流式传输。处理时间会受到影响。基于用例,标签可能有用,也可能无用。

相关问题