只是想了解节点标签如何与hdfs相关。我了解使用节点标签下定义的有限节点集的Yarn进行加工。如何在hdfs级别进行管理?假设我有40个节点,为一个节点标签分配20个节点。数据是否会从一个节点复制到另一个节点进行处理?数据将只驻留在节点标签下的那些节点中。努力获取有关上述主题的资料。
wvyml7n51#
嗯,节点标签只用于Yarn加工。一个数据处理可能有也可能没有本地可用的数据。在这种情况下,数据将从另一个节点流式传输。处理时间会受到影响。基于用例,标签可能有用,也可能无用。
1条答案
按热度按时间wvyml7n51#
嗯,节点标签只用于Yarn加工。一个数据处理可能有也可能没有本地可用的数据。在这种情况下,数据将从另一个节点流式传输。处理时间会受到影响。基于用例,标签可能有用,也可能无用。