spark 任务调度
- 作者: 我了个来
- 来源: 51数据库
- 2020-09-22
1. 通过操作系统的计划任务调度,如windows的计划和任务,linux与unix的crontab任务调度机制
2. 有些数据库本身的任务调度,如oracle的job任务调度机制
spark有两种分配模式, 一种是集中分配, 就是尽量用最少的机器上的资源, 另一种是平均, 就是每个机器都会均匀的分到一些任务, spark默认就是平均分配任务的。
2. 有些数据库本身的任务调度,如oracle的job任务调度机制
spark有两种分配模式, 一种是集中分配, 就是尽量用最少的机器上的资源, 另一种是平均, 就是每个机器都会均匀的分到一些任务, spark默认就是平均分配任务的。
推荐阅读
