百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 编程文章 > 正文

0723-6.2.0-如何在RedHat7.2使用rpm安装CDH(有CM)

qiyuwang 2024-10-19 08:58 19 浏览 0 评论

文档编写目的

在之前的文档《0722-6.2.0-如何在RedHat7.2使用rpm安装CDH(无CM)》和《0722-6.2.0-如何在RedHat7.2使用rpm安装CDH(无CM)-2》中介绍了如何在CM上使用rpm的方式安装CDH6.2.0集群,本文档将介绍如何在CM上使用rpm的方式安装CDH6.2.0集群。

环境介绍:

  • 安装部署使用root用户进行操作
  • 安装的CDH和CM版本为6.2.0
  • OS为RedHat7.2
  • CDH集群的三个节点信息如下:



安装前置准备

2.1 服务器相关设置


安装CDH集群时需要做一些前置的准备,本次安装使用的环境已经做好前置准备,需要做的准备如下:

1.hosts以及hostname配置正确

2.服务器没有启用IPv6且配置了静态IP

3.禁用SELinux

4.关闭防火墙

5.设置swappiness为1

6.关闭透明大页面

7.配置NTP时钟同步

8.安装元数据库MySQL并创建好需要的数据库和用户




2.2 配置本地yum源


1.在官网下载好安装CDH集群需要的rpm包,地址如下:

https://archive.cloudera.com/cdh6/6.2.0/redhat7/yum/RPMS/




将上面所有的rpm包下载到服务器,如下:




在浏览器进行验证




2.执行createrepo命令

createrepo .





3.创建repo文件

创建cdh的repo

[cdhrepo]
name = cdh_repo
baseurl = http://192.168.0.178/cdh6_rpm/
enable = true
gpgcheck = false





创建cm的repo

[cm6.2.0]
name=cm_repo
baseurl=http://192.168.0.178/cm6.2.0/
enabled=1
gpgcheck=0





4.执行yum命令,查看本地yum源是否配置成功

yum clean all
yum repolist





安装Cloudera Manager

1.yum安装Cloudera Manager Server

yum -y install cloudera-manager-server





2.初始化数据库

/opt/cloudera/cm/schema/scm_prepare_database.sh mysql cm cm password





3.启动Cloudera Manager Server

systemctl start cloudera-scm-server
systemctl status cloudera-scm-server





4.访问CM




安装CDH

1.登陆CM,admin/admin,进入欢迎页




2.同意许可




3.选择试用版




4.CDH安装欢迎页




5.集群名称




6.指定要安装的主机




7.选择存储库

CDH选择数据包的方式





指定CM的自定义存储库




8.JDK的安装




9.输入主机密码




10.集群安装需要的包



11.检测CDH版本




12.检查主机正确性




13.选择服务




14.为服务分配角色




15.设置数据库




16.集群设置




17.首次运行集群




18.集群安装完成




19.CM主页如下图




CDH组件测试


1.HDFS

[root@cdh178 ~]# sudo -u hdfs hdfs dfs -mkdir /user/root
[root@cdh178 ~]# sudo -u hdfs hdfs dfs -chown root:root /user/root
[root@cdh178 ~]# hadoop fs -put data.txt /user/root
[root@cdh178 ~]# hadoop fs -cat /user/root/data.txt





2.Hive

建表




插入数据




查询




3.Impala




4.MapReduce







总结

1.用CM以rpm安装与parcel安装在步骤上没有太大的区别,只是在指定存储库的那一步,rpm安装需要指定自己制作的存储库地址,而parcel安装只需要指定parcel包所在目录。

2.与rpm安装CDH6.2相比,除了CM界面上有些许不同之外,在步骤上也没有太大的差异,只是C6与C5的cm初始化脚本那一步不一样,需要注意。

相关推荐

你真的会用Word画线吗?(word画线技巧)

【你真的会用Word画线吗?】①输入三个“=”回车,是一条双直线;②输入三个“”,回车,就是一条波浪线;③输入三个“”回车,就是一条虚线;④输入三个“-”,回车,就是一条细直线.....新技能get√...

「干货」Word技巧知识——进阶篇(2)

Hello,大家好,我是无拘无束的分享知识,每天跟大家分享点有用的知识,话不多说。感兴趣的朋友可以点赞、关注、收藏哦。1.将word文档中的硬回车全部消除从事来稿阅读、编辑的工作者,最头痛的事就是打...

办公室人员必备! Word快捷键大全(办公中常用的快捷键)

【Word里超简单的画线方法!】简历、总结里文字太多怎么办?用线条分隔!Word画线秘籍:①输三个"="回车,是一条双直线②输三个"~"回车,是一条波浪线③输三个"-"回车,就是一条细直线。(来源...

Word笔记大全(详细步骤)(word怎么写笔记)

字处理一、文档的基本操作1.打开/新建2.快速新建ctrl+n3.利用模板创建文件--新建--选择模板officeplus4.保存5.保护文件--信息--保护文档--限制编辑--对话框:勾选每一项...

如何删除word文档空白页?(怎么删除word里的空白页?)

在日常办公或学习中,我们经常会遇到Word文档中出现空白页的情况,这不仅影响文档的美观,还可能造成打印浪费。下面,我将为大家详细介绍如何在Office和WPS中的Word里轻松删除这些恼人的空白页。...

Win11学院:如何在Windows 11装机时禁用BitLocker磁盘加密

IT之家5月7日消息,微软计划在Windows1124H2装机过程默认启用BitLocker加密,对于用户来说有两方面的影响:其一是影响硬盘的性能,其二是用户如果没有解密密钥,可能...

办公小技巧:Word“安全模式”用通透

大家都知道Windows的安全模式。其实,Word也有安全模式。那么,Word的安全模式又是什么?何时使用这种模式?使用这种模式有何限制?当Word运行中遇到问题需要启用安全模式运行时,如何按照软件给...

段落结束敲回车,下一段格式变样了怎么处理#每天学习一点点

段落换行后的格式发生变化。段落结束敲回车键,下一段格式变样了怎么处理?大家有时候遇到文章敲回车键,在下一段打字之后会发现这一段的样子就会和之前的段落不一样,当然可以调整一下或者用格式刷刷一下,但是稍微...

硬回车、软回车等介绍(硬回车键和软回车键)

1.硬回车:硬回车占两个字节,在word中敲击Enter键即可输入硬回车,硬回车是真正的段落标记,在两个硬回车之间的文字自成一个段落。代码是^p(小写)。2.软回车:用Shift+Enter产...

Word里超简单的画线方法!(word中如何画线条)

小厅分享【Word里超简单的画线方法!】简历、总结里文字太多怎么办?用线条分隔!Word画线秘籍:①输三个"="回车,是一条双直线②输三个"~"回车,是一条波浪线③输三个"-"回车,就是一条细直线...

Word 如何更改图片、删除与删除背景,勾选图片等问题

  如果插入到Word文档中的图片想另外换一张,更换方法有两种,一种是把原图删除另外插入一张,另一种是直接更换图片。Word2016提供了更改图片的功能,用此功能更换图片会自动把原图删除,就像...

Word中批量删除空行(多种方案)(批量删除word中的空行)

如下图,在Word文档中存在大量空行(回车),为了文档整洁,需要批量取消这些回车;方法一Ctrl+h,在查找内容中输入”^p^p”,在替换为输入”^p”,单击全部替换即可(^符号在英文输入法下按Shi...

Word文档如何取消自动编号?(word文档如何取消自动编号功能)

在word文档中,当我们编辑有序号的文本内容时,word会自动识别给文本编号,如果直接删除序号再按回车键,序号又会自动填充。但有时候我们并不需要它自动编号或不喜欢它的编号格式,如何才能取消word自动...

最全的Word知识点,抓紧时间收藏起来

Word知识点1.1word工作界面Word2010的窗口组成∶窗口分标题栏、菜单栏、常用工具栏、格式工具栏、标尺、编辑区滚动条、状态栏、任务窗格。1.标题栏∶显示所编辑的文档名和程序名称。单击标题...

Word中的页眉横线就是删不掉?其实按下这个键,1秒就能去除

不知道大家在用Word的同时,有没有遇到过难删除的页眉横线呢?以前小编就是遇到这条横线,不得已将里面的文字复制到一个新的文档中,如今终于知道该怎样删除这条横线了,下面我们就来看看删除方法。一、删除页眉...

取消回复欢迎 发表评论: