spark环境
- 作者: 阿东的小蝴蝶
- 来源: 51数据库
- 2020-09-28
indows下spark开发环境配置 特注:windows下开发spark不需要在本地安装hadoop,但是需要winutils.exe、hadoop.dll等文件,前提是你已经安装了eclipse、maven、jdk等软件 spark支持jdk版本建议是1.8及以上,如果开发spark建议将jdk编译版本设置为...
spark的web监控页面 在sparkcontext中可以看到如下代码: 首先是创建一个spark application的web监控实例对象: 然后bind方法会绑定一个web服务器: 可以看出我们使用jetty服务器来监控程序的运行和显示spark集群的信息的。
spark的web监控页面 在sparkcontext中可以看到如下代码: 首先是创建一个spark application的web监控实例对象: 然后bind方法会绑定一个web服务器: 可以看出我们使用jetty服务器来监控程序的运行和显示spark集群的信息的。
推荐阅读