用户登录
用户注册

分享至

spark 分区

  • 作者: 爸爸说我不省心--
  • 来源: 51数据库
  • 2020-09-25
rdd作为一个分布式的数据集,是分布在多个worker节点上的。如下图所示,RDD1有五个分区(partition),他们分布在了四个worker nodes 上面,RDD2有三个分区,分布在了三个worker nodes上面。



  我。。知。。道
加。。我。。私。。聊
软件
前端设计
程序设计
Java相关