我们可以为cdh4中的dfs.data.dir指定两个不同的分区吗？

cld4siwp 于 2021-06-04 发布在 Hadoop

关注(0)|答案(1)|浏览(360)

因为cdh4遵循jbod模式，为n个节点创建一个从1到n的目录。我可以在两个不同的分区中为data dir设置两个同名的目录吗。我有100gb的/mnt/disk1和/mnt/disk2分区，我想把它们都用于hdfs。下面的配置能用吗

<property>
<name>dfs.datanode.data.dir</name>
<value>/mnt/disk1/1/dfs/dn,mnt/disk2/1/dfs/dn,mnt/disk1/2/dfs/dn,mnt/disk2/2/dfs/dn</value>
</property>

1条答案

对。就配置而言，它只是将这些视为不同的目录。如果每一个都是不同的设备，您将有更高的效率，因为这将有助于克服io限制。