合规国际互联网加速 OSASE为企业客户提供高速稳定SD-WAN国际加速解决方案。 广告
* 分区大小限制为2GB * 分区太少 * 不利于并发。 * 更容易受数据倾斜影响。 * groupBy、reduceByKey、sortByKey等内存压力增大。 * 分区过多 * Shuffle开销越大。 * 创建任务开销越大。 * 经验 * 每个分区大约128MB。 * 如果分区小于但接近2000,则设置为大于2000。