CDH集群中,安装的spark
1、1、安装前的准备
所需软件:

2、Parcels 包地址

3、2、安装过程
1)创建csd目录

4、܉上传文件SPARK2_ON_YARN-2.1.0.cloudera1.jar 到 /opt/cloudera/csd/下面
5、܉上传文件SPARK2-2.1.0.cloudera1-1.cdh5.7.0.p0.120904-el6.parcel和SPARK2-2.1.0.cloudera1-1.cdh5.7.0.p0.120904-el6.parcel.sha1 到/opt/cloudera/parcel-repo/
6、܉修改所属用户及用户组:

7、܉将SPARK2-2.1.0.cloudera1-1.cdh5.7.0.p0.120904-el6.parcel.sha1重命名为SPARK2-2.1.0.cloudera1-1.cdh5.7.0.p0.120904-el6.parcel.sha

8、3、页面操作
1)在cm首页点击Parcel,再点击检查新Parcel

9、܉点击分配

10、܉点击激活

11、܉回到首页点击添加服务

12、܉点击spark2继续

13、܉选择一组依赖关系

14、܉角色分配

15、)部署并启动

16、错误解决
如果报错:客户端配置 (id=12) 已使用 1 退出,而预期值为 0
因为cm安装spark不会去环境变量去找java,需要将java路径添加到cm配置文件
解决方法:

17、܉命令行查看命令

声明:本网站引用、摘录或转载内容仅供网站访问者交流或参考,不代表本站立场,如存在版权或非法内容,请联系站长删除,联系邮箱:site.kefu@qq.com。
阅读量:128
阅读量:49
阅读量:108
阅读量:162
阅读量:115