• Hadoop伪分布式模式安装


        《Hadoop权威指南(第2版)》来讲,伪分布式(pseude-distributed model)是指Hadoop守护进程运行在本地机器上,模拟一个小规模的集群。

        这种模式也是在一台单机上运行,但用不同的Java进程模仿分布式运行中的各类结点(NameNode,DataNode,JobTracker,TaskTracker,SecondaryNameNode)

        Hadoop安装

        

        参考: http://www.cnblogs.com/xs104/p/4484268.html

        配置Hadoop

        1/opt/hadoop2.6/etc/hadoop/core-site.xml(这里是hadoop2.6是因为我之前把hadoop解压到这里)

    <property>
        <name>fs.default.name</name>
        <value>hdfs://localhost:9000</value>
    </property>
    <property>
        <name>dfs.replication</name>
        <value>1</value>
    </property>
    <property>
        <name>hadoop.tmp.dir</name>
        <value>/home/hadoop/tmp</value> (这里是hadoop,是因为我使用hadoop账户)
    </property>

        

        2/opt/hadoop2.6/etc/hadoop/mapred-site.xml

        目录下有一个mapred-site.xml.template文件,重命名为mapred-site.xml即可  

    <configuration>
        <property>
            <name>mapred.job.tracker</name>
            <value>localhost:9001</value>
        </property>
    </configuration>        

        格式化hadoop文件系统   

     bin/hadoop  namenode -format

        启动hadoop    

    sbin/start-all.sh

       

     查看Hadoop

      1、使用jps查看

          

      

      2、WEB页面查看

      http://192.168.1.114:50070  (192.168.1.114为我安装hadoop的机器)

     更多:http://xiaoluobo6666.iteye.com/blog/1338676       

  • 相关阅读:
    安装xcache3.0.3/3.2,为php加速
    编译安装lamp环境
    使用rpm包安装lamp环境
    centos6下通用二进制安装mysql5.5.33
    centos中进程管理工具
    centos6下的lvm逻辑卷的管理
    centos6中创建软raid方法
    解决vmware虚拟机克隆后启动centos报错device eth0 does not seem to be present, delaying initialization
    centos下常用文件管理命令
    centos下httpd-2.4的编译安装
  • 原文地址:https://www.cnblogs.com/xs104/p/4485358.html
Copyright © 2020-2023  润新知