• 使用Cloudera Manager搭建HDFS完全分布式集群


                使用Cloudera Manager搭建HDFS完全分布式集群

                                           作者:尹正杰

    版权声明:原创作品,谢绝转载!否则将追究法律责任。

      关于Cloudera Manager的搭建我这里就不再赘述了,可以参考我之前的笔记:离线方式部署Cloudera Manager5.15.1

    一.基于CM界面搭建HDFS完全分布式集群

    1>.CM的webUI界面默认的用户名/密码都是小写的admin,我们输入用户名和密码进行登录。操作如下:

    2>.同意CM的协议,点击继续 

    3>.选择CM的免费版本

    4>.点击继续 

    5>.为 CDH 群集安装指定的Agent主机

     

    6>.选择CDH本地版本(即我们自己下载好的版本) 

    7>.等待CDH集群安装

    8>.当CDH安装完毕后,点击继续

     

    9>.等待检查主机完成 

    10>.主机检查完毕无异常后,点击继续

    11>.自定义安装服务,我们这里选择HDFS即可 

    12>.分配角色

    13>.配置数据库链接

    14>.配置集群存放目录(如果你是个老手,应该知道这个步骤顺带是可以配置邮箱信息的,用于CM告警,此处不做配置,后面会单独抽出章节进行配置,需要注意的是/home/yinzhengjie目录服务器的用户家目录,默认权限是700,需要配置为755权限,否则就各种报错你懂的,哈哈哈~ 

    15>.等待安装完成

      如果报错有JDK_HOME相关报错,你也可以更换openjdk进行测试,“[root@node102.yinzhengjie.org.cn ~]# yum -y install java-1.8.0-openjdk-devel”

    16>.集群安装完成

    17>.进入CM管理界面

     二.基于CM访问HDFS的web UI界面

    1>.点击HDFS服务

    2>.查看NameNode的WebUI

    3>.查看NameNode节点的信息

    4>.查看DataNode节点信息

     

  • 相关阅读:
    跨域请求携带cookie
    vue单文件组件实例1:简单单文件组件
    vue单文件组件实例2:简单单文件组件
    vue路由1:基本使用
    项目中常用的javascript/jquery操作
    vue计算属性和侦听器
    专题8:javascript中事件
    普通文件的上传(表单上传和ajax文件异步上传)
    python导入包出错:ImportError: No module named XXXXX

  • 原文地址:https://www.cnblogs.com/yinzhengjie/p/10887356.html
Copyright © 2020-2023  润新知