• 高效5步走,高速搭建Hadoop2伪分布环境


           前两天将Hadoop2的全然分布式搭建文档整理公布于网上(http://blog.csdn.net/aaronhadoop/article/details/24859369)。朋友相邀。就再将Hadoop2的伪分布式文档整理一下,搭建过Hadoop2全然分布式后,就笑对伪分布式”说声 呵呵吧。

           前期的jdk环境、SSH免密钥登录配置在此就不再赘述了。直接进入hadoop2的配置。

    本文Hadoop2配置文件路径:/usr/local/hadoop/etc/hadoop。

           开启Hadoop2模式,start now

    一、改动hadoop-env.sh
    export JAVA_HOME=/usr/local/jdk1.7.0_45/

    二、改动core-site.xml
    <property>
    <name>fs.default.name</name>
    <value>hdfs://hadoop0:9000</value>
    </property>
    <property>
    <name>hadoop.tmp.dir</name>
    <value>/usr/local/hadoop/HadoopTmpDir</value>
    </property>

    手动创建文件夹
    mkdir /usr/local/hadoop/HadoopTmpDir

    三、改动hdfs-site.xml
    <property>
    <name>dfs.replication</name>
    <value>1</value>
    </property>

    四、改动mapred-site.xml
    cp mapred-site.xml.template  mapred-site.xml
    <property>
    <name>mapred.job.tracker</name>
    <value>hadoop0:9001</value>
    </property>

    五、运行命令
    hdfs namenode -format

    start-dfs.sh
    stop-dfs.sh

    start-yarn.sh
    stop-yarn.sh

    验证
    验证方式一,查看java守护进程

    验证方式二。web端




    对于Hadoop2的配置及使用,建议当然还是全然分布式了。Hadoop VS Hadoop2,当中妙处。要体会,更要多言。哈哈。欢迎交流哟
    OK,搞定!


  • 相关阅读:
    多项式回归学习笔记
    线性回归学习笔记
    CentOS6.9下安装python notebook
    CentOS 6.9下安装PostgreSQL
    区块链共识机制及其迭代
    比特币的区块结构解析
    区块链学习路线
    应用缓存的常见问题及解决
    阿里巴巴开源技术体系
    工程师进阶推荐十本书
  • 原文地址:https://www.cnblogs.com/claireyuancy/p/6816187.html
Copyright © 2020-2023  润新知