hadoop分布式缓存大小的限制是什么?

e0uiprwp  于 2021-06-03  发布在  Hadoop
关注(0)|答案(1)|浏览(398)

我是hadoop新手,听说分布式缓存的最大容量是10gb。是这样吗?如果我的大小超过10GB,有没有更好的解决方案?

ohfgkhjo

ohfgkhjo1#

默认情况下,缓存大小为10gb。如果需要更多内存,请配置 local.cache.sizemapred-site.xml 为了更大的价值。
不这样做的理由:最好在分布式缓存中保留几MB的数据。否则会影响应用程序的性能。

相关问题