阅读背景:

spark的accumulator值保存在哪里?

来源:互联网 

 答案:保存在driver端。因此需要对收集的信息的规模要加以控制,不宜过大。避免 driver端的outofmemory问题!!! 答案:保存在driver端。因此需要对收集的信息的规模要加以控制,不宜过大。避免 drive




你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: