• (初学者)安装hadoop集群注意事项


    1.关闭防火墙

    2.所有的hadoop操作都是hadoop用户下面的,同时需要用hadoop用户登录之后,对于其他的机器的hadoop用户可以免密登录

    3.hadoop用户在root组下面,不是附加组!

    4.配置hadoop-env 中的Java_home 是因为hadoop只运行时需要ssh 启动 其他的机器,ssh启动其他机器上的hadoop时,在会话中时没有加载到机器上的javahome的(shh手动启动其他机器上也是不行的,必须将source /etc/profile;写在启动haoop命令前面 ),所以需要配置层绝对路径

    5.在yarn-site.xml文件中要制定yarn.resourcemanager.hostname在那台机器上(现在是没有指定,但是没有指定的时候默认是0.0.0.0<来自hadoopAPI>)

    6.hadoop-daemon.sh start namenode 只启动namenode,

    只要启动namenode就可以通过http://mini2:50070去页面查看(minni2是namenode节点的主机)

    7../sbin/hadoop-daemon.sh start datanode 启动一台机器上的datanode 在页面上就能看到活着的节点是1,挂掉的节点是0

  • 相关阅读:
    Kafka常用操作备忘
    Spark执行流程(转)
    Spark性能优化总结
    Kafka学习笔记
    vue-简单例子初始化
    解析字符串模板函数
    js的apply 和 call区别
    水平垂直居中
    IE8 div旋转 Matrix,模拟轮播前后翻页按钮
    jsp 自定义标签-SimpleTagSupport 使用笔记
  • 原文地址:https://www.cnblogs.com/rocky-AGE-24/p/6866231.html
Copyright © 2020-2023  润新知