我正在尝试使用hadoop和map reduce进行工作和实验。为此,我在yahoo提供的虚拟机上的单节点集群上运行hadoop,并通过eclipse编写代码。我只想知道在虚拟机上运行hadoop有哪些限制或缺点,或者建议从一开始就使用独立的hadoop安装。谢谢曼尼什语
dxxyhpgq1#
您可以在虚拟机上运行hadoop以供学习,但不建议用于生产或性能测试,因为hadoop在机群上运行,它利用了多个节点的硬件,hadoop用于处理大量数据,为此,我们需要更多的计算单元(cpu)和内存(ram),这在虚拟机上是没有效率的。但是如果你想学习hadoop并进行测试,你可以使用虚拟机
1条答案
按热度按时间dxxyhpgq1#
您可以在虚拟机上运行hadoop以供学习,但不建议用于生产或性能测试,因为hadoop在机群上运行,它利用了多个节点的硬件,hadoop用于处理大量数据,为此,我们需要更多的计算单元(cpu)和内存(ram),这在虚拟机上是没有效率的。
但是如果你想学习hadoop并进行测试,你可以使用虚拟机