CDH5.16.2安装Spark2.4

安装了好几次才成功,做做笔记
CDH安装时,用的离线安装,下载parcel包进行操作
在这里插入图片描述
上面的这四个都得下载下来,manifest.json和parcel的可以在一起下载

Spark2.4.0下载地址:https://archive.cloudera.com/spark2/parcels/2.4.0.cloudera2/
在这里插入图片描述
Yarn的下载地址:http://archive.cloudera.com/spark2/csd/
在这里插入图片描述
选择对应版本的进行下载
下载完毕进行上传

安装过程

将下面的三个文件上传到/opt/cloudera/parcel-repo目录下
在这里插入图片描述
将.parcel.sha1改成.parcel.sha

mv SPARK2-2.4.0.cloudera2-1.cdh5.13.3.p0.1041012-el7.parcel.sha1 SPARK2-2.4.0.cloudera2-1.cdh5.13.3.p0.1041012-el7.parcel.sha

将下面的jar包上传到/opt/cloudera/csd目录下
在这里插入图片描述
打开7180监控页面,点击右上角
在这里插入图片描述
点击检查新的Parcel,出来Spark2,然后进行分配,分配完成后再点一下进行激活,这是单独的两个步骤
选择Spark2,
在这里插入图片描述

激活成功之后,进行Spark的安装
在这里插入图片描述
在这里插入图片描述
安装完就好了


版权声明:本文为weixin_44675844原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接和本声明。