hadoop提供了用于测试目的的小型集群cli。但是,在需要两个集群进行测试的情况下,是否可以在一台机器上运行这个小型集群的多个示例?或者我需要使用虚拟机或其他机器?
oyjwcjzk1#
根据hadoop使用cli minicluster,用户只需使用一个命令即可启动和停止单节点hadoop集群,而无需设置任何环境变量或管理配置文件。cli微型集群启动yarn/mapreduce和hdfs集群。由于minicluster对datanode、namenode等使用默认端口,因此建议使用其他计算机或在不同的虚拟机上运行。但是,如果您更改第二个迷你集群的bin目录和所有默认端口,则可以在一台计算机上运行多个迷你集群,这非常混乱,不建议这样做。
1条答案
按热度按时间oyjwcjzk1#
根据hadoop
使用cli minicluster,用户只需使用一个命令即可启动和停止单节点hadoop集群,而无需设置任何环境变量或管理配置文件。cli微型集群启动yarn/mapreduce和hdfs集群。
由于minicluster对datanode、namenode等使用默认端口,因此建议使用其他计算机或在不同的虚拟机上运行。但是,如果您更改第二个迷你集群的bin目录和所有默认端口,则可以在一台计算机上运行多个迷你集群,这非常混乱,不建议这样做。