• Ambari管理的大数据集群主节点内存扩容操作步骤说明


    1、 关闭主机添加内存

    登录指定主机系统(按表二依次操作),切换至root用户,输入poweroff命令关闭系统,待系统关闭后,由IT负责人进行内存扩容。

    2、 开机检查内存信息

    由IT负责人检查扩容主机的内存信息,确定内存扩容完成后再进入系统。

    3、 登录系统启动服务

    登录系统,切换至root用户进行如下操作。

    注意:启动每个主机节点的服务顺序,依次是Ambari、Zookeeper、YARN、HDFS,HIVE(如下)。

    3.1、检查PID文件

        PID目录为/var/run/服务名称,检查对应服务的PID文件是否存在,如果存在则删除(rm –r 文件名)。

    3.2、启动ambari-agent(所有节点)

             输入命令:service --status-all检查服务是否运行,主要是检查ambari-agent和ambari-server

             如果ambari-agent没有运行,则执行下面启动步骤

                  输入命令:service ambari-agent start

    3.2、启动ambari-server(22节点)

    输入命令:service ambari-server start(服务停止时)

    检查日志:tail -200 /var/log/ambari-server/ambari-server.out

    3.3、启动Zookeeper

    登录到ambari-server管理页面,手动启动Zookeeper服务。

    3.4、启动YARN相关服务

    登录到ambari-server YARN管理页面,手动启动Yarn服务。

    3.5、启动HDFS相关服务 

    登录到ambari管理主页,按照上表一中列举的主要运行服务,按顺序启动服务:

    A、 ZKFailoverController (ZKF负责Namenode HA,优先启动)

    B、 JournalNodes

    C、 Namenode

    3.6、启动HIVE相关服务 

    登录到ambari管理主页,按照上表一中列举的主要运行服务,按顺序启动服务:

    A、 MySQL (MySQL启动后检查数据库是否可用,因为Metastore依赖MYSQL服务)

    B、 Hive Metastore

    C、 HiveServer2

    D、 WebHCat Server

    3.7、启动其他服务  

    登录到ambari管理主页,按照上表一中列举的主要运行服务,依次启动。

    4、 检查各个节点主要服务

    4.1、Zookeeper检查

    登录到目标主机节点,使用Zkcli.sh切换到Zookeeper命令行,检查根目录是否能正常查询;

    检查Zookeeper启动日志,根据日志查看服务是否正常运行。

    4.2、Namenode检查

                      登录到ambari-server HDFS管理页面,检查Namenode HA状态;

             检查主从Namenode节点日志,根据日志输出观察服务是否正常运行。

    5、 故障排除

    上述步骤的3描述的服务遇到启动失败等异常,首先检查日志输出,根据日志描述排查问题。

    可能出现的异常

    Q:PID文件未删除导致服务启动失败。

    A:删除PID文件重新启动服务;

    Q:Namenode HA状态异常。

    A:检查ZKFailoverController服务是否正常启动;

    Q:Mysql服务启动失败。

    A:删除mysql.sock、mysqld.pid文件,重新启动服务。

  • 相关阅读:
    c#修改config中的AppSettings属性
    C​#​小​实​例​之​-​-​-​C​#​判​断​网​络
    走过2013,走进2014
    前端工程师常去的网站
    正则表达式中文匹配
    浅谈 -webkit-tap-highlight-color 属性
    JS前端开发判断是否是手机端并跳转操作(小结)(转)
    swf文件加密基础(转)
    Object与Dictionary的区别
    关于事件机制的理解
  • 原文地址:https://www.cnblogs.com/riyueyuzhuzhu/p/5584815.html
Copyright © 2020-2023  润新知