• 毕设随笔2 hadoop安装与配置(伪分布式)


    1、 apache下载hadoop  source与binary的区别:binary是编译好的,source未编译。选择binary

    2、解压安装单机版:

    3、配置伪分布式:

    需要修改两个配置文件 core-site.xml 与 hdfs-site.xml (/usr/local/hadoop/etc/hadoop/下)

    3.1 core-site.xml:

    第一项:指定保存临时文件的目录

    第二项:指定HDFS的访问地址,端口号可以是9000或者其他数字

    3.2 hdfs-site.xml

    第一项:制定数据副本的数量

    第二项:名称节点元数据的保存目录

    第三项:数据节点的数据保存目录

    ps:hadopp的运行方式由配置文件决定 默认为单机模式,删除core-site中的配置项可以恢复为单机模式

    4、执行名称节点的格式化

    4、启动hadoop

    http://localhost:50070/dfshealth.html#tab-overview 查看节点信息

    5、关闭:

  • 相关阅读:
    SVM的新理解
    特征提取,特征选择
    条件随机场
    分类、检测、识别
    matlab fgetl()
    matlab fopen()
    rar ubuntu
    makefile for opencv
    [洛谷P1231] 教辅的组成
    [洛谷P1514]引水入城
  • 原文地址:https://www.cnblogs.com/luiyuying/p/12669708.html
Copyright © 2020-2023  润新知