用户登录
用户注册

分享至

spark运行模式

  • 作者: 凉城不暖少男心
  • 来源: 51数据库
  • 2020-09-23
spark集群中是按照slaves文件中的主机名,去启动worker节点。 你写了几个不同的主机名,启动spark环境时就是几个worker节点。



  想请教一个问题,按这种方式启动,是否已经脱离了yarn的控制。不用7077实际的意思是,管理者认为如果用spark://ip:7077这种方式启动,脱离了yarn的管理,换个端口好像不能说服他
软件
前端设计
程序设计
Java相关