配置单元中的获取错误:由于root\u input\u init\u失败,vertex失败,使用tez时可以增加多少内存?

p4tfgftt  于 2021-06-25  发布在  Hive
关注(0)|答案(1)|浏览(284)

在配置单元中获取错误:顶点失败#某些顶点名称#由于根输入#初始化#失败而被杀死/失败

snz8szmq

snz8szmq1#

我不确定这是不是记忆问题;参数是tez.am.resource.memory.mb,它是容器的大小。容器的数量是数据源的计算大小的函数。对于crypto,一个常见的解决方法是(顶点由于map和reduce之间格式的改变而崩溃)

set hive.auto.convert.join=false;

相关问题