spark中有partition的概念，每个partition都会对应一个task，task越多，在处理大规模数据的时候，就会越有效率。不过task并不是越多越好，如果平时测试，或者数据量没有那么大，则没有必要task数量太多。 spark中有partition的概念，每个partition都会对应一个task，task越多，在
阅读背景：
spark中tasks数量的设置
来源：互联网
分享到：
