• hadoop2.6.2分布式环境搭建


    1、准备三台机器,机器名是:master、slave01、slave02

      1.1 最小化安装centos6.5

      1.2 安装ssh,yum -y install openssh-clients(这一步安装是因为系统最小化安装时,这个组件是没有的)

      1.3 修改主机名

        vi /etc/sysconfig/network    

      1.4 修改hosts文件,三台机器的内容一样  

        vim /etc/hosts   

        192.168.137.56 master
        192.168.137.61 slave01
        192.168.137.62 slave02

    2、免密码登录 

      http://www.cnblogs.com/bookwed/p/4809390.html  

      由于是自己测试,使用root用户,设置免密码登录;在生产环境,可以自己新建用户。

    3、安装好jdk环境(jdk1.8)

      http://www.cnblogs.com/bookwed/p/4807356.html

    4、hadoop相关

      4.1 下载

        http://hadoop.apache.org/releases.html,选择 2.6.2版本,binary,下载。

      4.2 上传、解压

        通过xftp上传到服务器,可以先只上传到mater机器,完全设置好配置文件后,再拷贝到另外两台机器。

        这里我把文件放到/app/programs/目录下

      4.3 修改hadoop配置文件

        http://www.cnblogs.com/bookwed/p/4816521.html

        从 “附上几个配置文件的信息:”这里开始看,主要关注这几个配置文件。

        把这几个配置文件修改后,通过scp 拷贝到slave01、slave02的相同目录。

          scp /app/programs/hadoop-2.6.2 root@slave01:/app/programs/

          scp /app/programs/hadoop-2.6.2 root@slave02:/app/programs/

      4.4 测试

        在master机器上操作:

        cd hadoop-2.6.2

        ./bin/hadoop namenode -format 格式化

        ./sbin/start-all.sh   启动      

        jps  查看

        

        

        访问:http://192.168.137.56:50070/,master机器的ip。

           http://192.168.137.56:8088/

      

  • 相关阅读:
    PHP rsort() 函数
    PHP shuffle() 函数
    PHP sizeof() 函数
    PHP sort() 函数
    导入Orabbix_export_full.xml模板报错:主机群组 "Templates" 已存在.
    要让CLR挂掉的话……
    要让CLR挂掉的话……
    Windows 10 快捷键汇总表格
    Windows 10 快捷键汇总表格
    VisualStudio 合并代码文件
  • 原文地址:https://www.cnblogs.com/bookwed/p/5251393.html
Copyright © 2020-2023  润新知