• 使用Cloudera Manager搭建HDFS完全分布式集群


                使用Cloudera Manager搭建HDFS完全分布式集群

                                           作者:尹正杰

    版权声明:原创作品,谢绝转载!否则将追究法律责任。

      关于Cloudera Manager的搭建我这里就不再赘述了,可以参考我之前的笔记:离线方式部署Cloudera Manager5.15.1

    一.基于CM界面搭建HDFS完全分布式集群

    1>.CM的webUI界面默认的用户名/密码都是小写的admin,我们输入用户名和密码进行登录。操作如下:

    2>.同意CM的协议,点击继续 

    3>.选择CM的免费版本

    4>.点击继续 

    5>.为 CDH 群集安装指定的Agent主机

     

    6>.选择CDH本地版本(即我们自己下载好的版本) 

    7>.等待CDH集群安装

    8>.当CDH安装完毕后,点击继续

     

    9>.等待检查主机完成 

    10>.主机检查完毕无异常后,点击继续

    11>.自定义安装服务,我们这里选择HDFS即可 

    12>.分配角色

    13>.配置数据库链接

    14>.配置集群存放目录(如果你是个老手,应该知道这个步骤顺带是可以配置邮箱信息的,用于CM告警,此处不做配置,后面会单独抽出章节进行配置,需要注意的是/home/yinzhengjie目录服务器的用户家目录,默认权限是700,需要配置为755权限,否则就各种报错你懂的,哈哈哈~ 

    15>.等待安装完成

      如果报错有JDK_HOME相关报错,你也可以更换openjdk进行测试,“[root@node102.yinzhengjie.org.cn ~]# yum -y install java-1.8.0-openjdk-devel”

    16>.集群安装完成

    17>.进入CM管理界面

     二.基于CM访问HDFS的web UI界面

    1>.点击HDFS服务

    2>.查看NameNode的WebUI

    3>.查看NameNode节点的信息

    4>.查看DataNode节点信息

     

  • 相关阅读:
    Neo4j电影关系图Cypher
    Neo4j电影关系图
    Neo4j配置文件neo4j.conf
    SpringBoot实现多数据源(实战源码)
    Maven添加Oracle驱动及依赖
    HttpClient发送Json数据到指定接口
    java手动分页处理
    设计模式之模板方法模式
    JDBC插入性能优化对比
    Oracle数据库常用监控语句
  • 原文地址:https://www.cnblogs.com/yinzhengjie/p/10887356.html
Copyright © 2020-2023  润新知