我是hadoop新手,听说分布式缓存的最大容量是10gb。是这样吗?如果我的大小超过10GB,有没有更好的解决方案?
ohfgkhjo1#
默认情况下,缓存大小为10gb。如果需要更多内存,请配置 local.cache.size 在 mapred-site.xml 为了更大的价值。不这样做的理由:最好在分布式缓存中保留几MB的数据。否则会影响应用程序的性能。
local.cache.size
mapred-site.xml
1条答案
按热度按时间ohfgkhjo1#
默认情况下,缓存大小为10gb。如果需要更多内存,请配置
local.cache.size
在mapred-site.xml
为了更大的价值。不这样做的理由:最好在分布式缓存中保留几MB的数据。否则会影响应用程序的性能。