CDH集群中,安装的spark

 时间:2025-01-05 10:54:08

1、安装前的准备所需软件:

CDH集群中,安装的spark

2、Parcels 包地址

CDH集群中,安装的spark

3、安装过程1)创建csd目录

CDH集群中,安装的spark

4、2)上传文件SPARK2_ON_YARN-2.1.0.cloudera1.jar 到 /opt/cloudera/csd/下面

5、3)上传文件SPARK2-2.1.0.cloudera1-1.cdh5.7.0.p0.120904-el6.parcel和SPARK2-2.1.0.cloudera1-1.cdh5.7.0.p0.120904-el6.parcel.sha1 到/opt/cloudera/parcel-repo/

6、4)修改所属用户及用户组:

CDH集群中,安装的spark

7、5)将SPARK2-2.1.0.cloudera1-1.cdh5.7.0.p0.120904-el6.parcel.sha1重命名为SPARK2-2.1.0.cloudera1-1.cdh5.7.0.p0.120904-el6.parcel.sha

CDH集群中,安装的spark

8、页面操作1)在cm首页点击Parcel,再点击检查新Parcel

CDH集群中,安装的spark

9、2)点击分配

CDH集群中,安装的spark

10、3)点击激活

CDH集群中,安装的spark

11、4)回到首页点击添加服务

CDH集群中,安装的spark

12、5)点击spark2继续

CDH集群中,安装的spark

13、6)选择一组依赖关系

CDH集群中,安装的spark

14、7)角色分配

CDH集群中,安装的spark

15、8 )部署并启动

CDH集群中,安装的spark

16、9 错误解决如果报错:客户端配置 (id=12) 已使用 1 退出,而预期值为 0因为cm安装spark不会去环境变量去找java,需要将java路径添加到cm配置文件解决方法:

CDH集群中,安装的spark

17、10)命令行查看命令

CDH集群中,安装的spark
  • 使用Excel怎么生成批量删除、新增数据库语句
  • weblogic增加线程
  • DB2的安装方法与步骤
  • Apache Http Server 反向代理配置
  • 表格制作软件FineReport教程:[22]插入删除行
  • 热门搜索
    o型血和a型血生的孩子是什么血型 如何治打呼噜 杨光的快乐生活5 开车是什么意思 如何看相 山东管理学院怎么样 不言而喻是什么意思 失恋了很痛苦怎么办 如何输入繁体字 向往的生活4全集免费