阅读背景:

Spark缓存策略_HarvardFly的博客

来源:互联网 

Spark缓存策略

当对同一个rdd多次执行action时,如果在磁盘上则每次执行action都会从磁盘将数据加载,如果将其缓存到内存中会提高再次action的读取速度,Spark缓存主要有cache()和persist()两种,当缓存一个rdd时,每一个节点上都会存放这个rdd的partition,当要使用rdd的时候可以直接从内存读出。当对同一个rdd多次执行a



你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: