带有本地hadoop集群的amazons3

kknvjkwl  于 2021-06-03  发布在  Hadoop
关注(0)|答案(1)|浏览(285)

我在amazons3中有大约40tb的数据,我需要使用map-reduce进行分析。我们当前的it策略没有提供amazonemr帐户,因此我必须依赖本地管理的hadoop集群。我想得到一个建议,当我们的数据实际存储在s3上时,使用本地hadoop集群是否明智?

rmbxnbpk

rmbxnbpk1#

请退房https://wiki.apache.org/hadoop/amazons3 关于如何使用s3替代hdfs。您可以选择s3本机文件系统或s3块文件系统。

相关问题