indows下spark开发环境配置 特注:windows下开发spark不需要在本地安装hadoop,但是需要winutils.exe、hadoop.dll等文件,前提是你已经安装了eclipse、maven、jdk等软件 spark支持jdk版本建议是1.8及以上,如果开发spark建议将jdk编译版本设置为...
spark的web监控页面 在sparkcontext中可以看到如下代码: 首先是创建一个spark application的web监控实例对象: 然后bind方法会绑定一个web服务器: 可以看出我们使用jetty服务器来监控程序的运行和显示spark集群的信息的。
用户登录
还没有账号?立即注册
用户注册
投稿取消
文章分类: |
|
还能输入300字
上传中....