使用Cloudera Manager搭建HDFS完全分布式集群
作者:尹正杰
版权声明:原创作品,谢绝转载!否则将追究法律责任。
关于Cloudera Manager的搭建我这里就不再赘述了,可以参考我之前的笔记:离线方式部署Cloudera Manager5.15.1。
一.基于CM界面搭建HDFS完全分布式集群
1>.CM的webUI界面默认的用户名/密码都是小写的admin,我们输入用户名和密码进行登录。操作如下:
2>.同意CM的协议,点击继续
3>.选择CM的免费版本
4>.点击继续
5>.为 CDH 群集安装指定的Agent主机
6>.选择CDH本地版本(即我们自己下载好的版本)
7>.等待CDH集群安装
8>.当CDH安装完毕后,点击继续
9>.等待检查主机完成
10>.主机检查完毕无异常后,点击继续
11>.自定义安装服务,我们这里选择HDFS即可
12>.分配角色
13>.配置数据库链接
14>.配置集群存放目录(如果你是个老手,应该知道这个步骤顺带是可以配置邮箱信息的,用于CM告警,此处不做配置,后面会单独抽出章节进行配置,需要注意的是/home/yinzhengjie目录服务器的用户家目录,默认权限是700,需要配置为755权限,否则就各种报错你懂的,哈哈哈~)
15>.等待安装完成
如果报错有JDK_HOME相关报错,你也可以更换openjdk进行测试,“[root@node102.yinzhengjie.org.cn ~]# yum -y install java-1.8.0-openjdk-devel”
16>.集群安装完成
17>.进入CM管理界面
二.基于CM访问HDFS的web UI界面
1>.点击HDFS服务
2>.查看NameNode的WebUI
3>.查看NameNode节点的信息
4>.查看DataNode节点信息