一个语句中包含多个count()和collect_set() 是不是会容易导致java heap space

0
已邀请:
0

MarsJ - 大数据玩家~DS 2016-07-22 回答

是否跟集群的设置有关系,例如YARN的内存大小。
这个问题很容易导致Java heap space
0

yadianxk 2016-07-22 回答

hive中,我碰到过多个的没关系(数组不大的时候)。
但是其中有一个collect_set()在一条记录中元素个数达到上千万,就怎么都跑不过去了。

要回复问题请先登录注册