用户登录
用户注册

分享至

spark ui

  • 作者: 其实我不懂內涵
  • 来源: 51数据库
  • 2020-09-27
Spark的Web监控页面在SparkContext中可以看到如下代码:首先是创建一个Spark Application的Web监控实例对象:然后bind方法会绑定一个web服务器:可以看出我们使用Jetty服务器来监控程序的运行和显示Spark集群的信息的。



  话说不需要吧,spark不是提供java的api吗,直接在web后台引入spark的包然后调用api就能提交东西吧 如果东西多本地放不下,在hdfs上的话,也可以调用得到的,没必要非得打成包。我说的不是本地模式,是吧本地也看成是一个节点,虽然没干过,不过本地压力应该不小。
软件
前端设计
程序设计
Java相关