你有使用电脑的经验吗https://github.com/jetoile/hadoop-unit 以及https://github.com/sakserv/hadoop-mini-clusters 我正在使用 sakserv 但我看到 jetoile 现在我只需要用基本的hadoop和spark来模拟一个集群,没什么特别的
sakserv
jetoile
dy1byipe1#
我还没用过hadoop单元。。。。但是我使用了hadoop微型集群,它非常适合于单元测试和集成测试。我对我们的测试套件进行了建模,将test/resources中的资源文件复制到junit安装阶段的迷你集群中。。。然后可用于单元/集成测试这个是Apache的。https://mvnrepository.com/artifact/org.apache.hadoop/hadoop-minicluster/2.7.1
1条答案
按热度按时间dy1byipe1#
我还没用过hadoop单元。。。。但是我使用了hadoop微型集群,它非常适合于单元测试和集成测试。
我对我们的测试套件进行了建模,将test/resources中的资源文件复制到junit安装阶段的迷你集群中。。。然后可用于单元/集成测试
这个是Apache的。https://mvnrepository.com/artifact/org.apache.hadoop/hadoop-minicluster/2.7.1