• 命令行启动虚拟机和hadoop集群


    我们在学习使用hadoop时一般都是在虚拟机上搭建几个节点,
    然后逐一启动,
    为了方便,
    我们可以使用批处理一键启动。

    1.1 使用命令行启动虚拟机

    使用命令行启动虚拟机需要用到vmrun命令(vmrun命令参考文档),该命令位于vmware workstation安装路径下,
    所以需要将该命令的地址配置到环境变量中。

    然后新建一个批处理文件(新建文本文档改后缀名为cmd或bat),在里面写入启动命令:

    vmrun start d:/sInstallation/vmware/guestHost/hadoop102/hadoop102.vmx nogui
    vmrun start d:/sInstallation/vmware/guestHost/hadoop103/hadoop103.vmx nogui
    vmrun start d:/sInstallation/vmware/guestHost/hadoop104/hadoop104.vmx nogui
    

    【注意】此处的地址应该是你虚拟机的vmx文件地址,你的是什么就写什么,后面的nogui参数是不显示workstation界面,
    你可以改为gui,也可以不写(默认gui)。

    1.2 使用命令启动集群

    我们可以使用ssh远程命令启动集群
    我们在上面的批处理文件中加上启动命令:

    vmrun start d:/sInstallation/vmware/guestHost/hadoop102/hadoop102.vmx nogui
    vmrun start d:/sInstallation/vmware/guestHost/hadoop103/hadoop103.vmx nogui
    vmrun start d:/sInstallation/vmware/guestHost/hadoop104/hadoop104.vmx nogui
    ssh amnotgcs@hadoop102 "start-dfs.sh;exit"
    ssh amnotgcs@hadoop103 "start-yarn.sh;exit"
    

    【注意】这里的amnotgcs@hadoop102应该是你的虚拟机登录用户名和虚拟机地址,后面的;exit可以不写。

    1.3 使用命令启动xshell和网页

    如果我们还需要使用其他软件,或者需要打开集群web端界面,
    可以在上面的批处理文件中加上以下命令:

    start D:\sInstallation\xshell\xshell.exe
    start http://hadoop102:9870/explorer.html
    

    【注意】这里的xshell是我xshell软件的安装地址,你应该改成你的,
    同理可以用此方法启动其他软件,包括网页。

    1.4 使用命令关闭集群和虚拟机

    taskkill /f /t /im xshell.exe
    ssh amnotgcs@hadoop103 "stop-yarn.sh;exit"
    ssh amnotgcs@hadoop102 "stop-dfs.sh;exit"
    vmrun stop d:/sInstallation/vmware/guestHost/hadoop102/hadoop102.vmx
    vmrun stop d:/sInstallation/vmware/guestHost/hadoop103/hadoop103.vmx
    vmrun stop d:/sInstallation/vmware/guestHost/hadoop104/hadoop104.vmx
    

    同理,这里的各种地址需要改成你自己的。

    有了计划记得推动,不要原地踏步。
  • 相关阅读:
    Python常用代码: 获取本机ip;统一十进制和日期;日期计算
    gogs安装(docker)
    【转载】os.environ模块环境变量详解
    。。
    IDEA配置Scala
    jupyter 安装
    docker基本操作
    2021秋季加分项
    docker安装
    spark Windows环境的部署
  • 原文地址:https://www.cnblogs.com/amnotgcs/p/15538266.html
Copyright © 2020-2023  润新知