spark 运行模式
- 作者: 花开凌乱谁的侧脸
- 来源: 51数据库
- 2020-09-23
spark集群中是按照slaves文件中的主机名,去启动worker节点。 你写了几个不同的主机名,启动spark环境时就是几个worker节点。
想请教一个问题,按这种方式启动,是否已经脱离了yarn的控制。不用7077实际的意思是,管理者认为如果用spark://ip:7077这种方式启动,脱离了yarn的管理,换个端口好像不能说服他
想请教一个问题,按这种方式启动,是否已经脱离了yarn的控制。不用7077实际的意思是,管理者认为如果用spark://ip:7077这种方式启动,脱离了yarn的管理,换个端口好像不能说服他
推荐阅读
