hadoop配置默认值(core-site.xml、yarn-site.xml等)是否由amazon发布?我看到了select参数的发布,但没有看到全部默认配置。
xmjla07d1#
您可以在下面链接的amazonemr文档页面找到默认配置http://docs.aws.amazon.com/elasticmapreduce/latest/developerguide/taskconfiguration_h2.html有一种方法可以为触发的作业找到配置。您可以访问保存日志的s3位置。在那里您可以找到j-yourjoblogsfilelocation/jobs/job\u 1403597560615\u 0001\u conf.xml。xml包含传递给作业的所有配置。它们是默认配置,除非我们覆盖它们。因此,这将是不同的根据我们选择的框配置。e、 g内存配置可能不同
1条答案
按热度按时间xmjla07d1#
您可以在下面链接的amazonemr文档页面找到默认配置http://docs.aws.amazon.com/elasticmapreduce/latest/developerguide/taskconfiguration_h2.html
有一种方法可以为触发的作业找到配置。您可以访问保存日志的s3位置。在那里您可以找到j-yourjoblogsfilelocation/jobs/job\u 1403597560615\u 0001\u conf.xml。xml包含传递给作业的所有配置。它们是默认配置,除非我们覆盖它们。因此,这将是不同的根据我们选择的框配置。e、 g内存配置可能不同