如果你的答案是否,好吧,你可以关闭此页了。
首先,有一个新人经常遇到的问题:
Spark集群是否一定需要Hadoop集群呢?
答案是否。 Spark的集群一共分3种:
Standalone
Hadoop-Yarn
Mesos
今天我们主要涉及的就是Standalone这种模式。在这种模式之下,我们完全可以使用NFS来代替Hadoop / HDFS. 并且在很多场景之下,Standalone 完全可以满足我们的需
1.
安装环境简介
硬件环境:两台四核cpu、4g内存、500g硬盘的虚拟机。
软件环境:64位ubuntu12.04
lts;主机名分别为spark1、spark2,ip地址分别为1**.1*.**.***/***。jdk版本为1.7。集群上已经成功部署了hadoop2.2,详细的部署过程可以参见另一篇文档yarn的安装与部署。
2. ?安装scala2.9.3
用户登录
还没有账号?立即注册
用户注册
投稿取消
文章分类: |
|
还能输入300字
上传中....