• hadoop安全模式


    safemode模式
    NameNode在启动的时候首先进入安全模式,如果datanode丢失的block达到一定的比例(1-dfs.safemode.threshold.pct),则系统会一直处于安全模式状态即只读状态。
    dfs.safemode.threshold.pct(缺省值0.999f)表示HDFS启动的时候,如果DataNode上报的block个数达到了元数据记录的block个数的0.999倍才可以离开安全模式,否则一直是这种只读模式。如果设为1则HDFS永远是处于SafeMode。
    下面这行摘录自NameNode启动时的日志(block上报比例1达到了阀值0.9990)
    The ratio of reported blocks 1.0000 has reached the threshold 0.9990. Safe mode will be turned off automatically in 18 seconds.
    hadoop dfsadmin -safemode leave
    有两个方法离开这种安全模式
    1. 修改dfs.safemode.threshold.pct为一个比较小的值,缺省是0.999。
    2. hadoop dfsadmin -safemode leave命令强制离开
    http://bbs.hadoopor.com/viewthread.php?tid=61&extra=page%3D1
  • 相关阅读:
    Blender基础操作
    反汇编及linux下edb的下载
    混淆矩阵(confusion_matrix)含义
    Python大数据第三次的作业
    Python的DataFrame基础使用
    Python数据标准化
    爬虫之xpath
    luffy项目上线
    爬虫之selenium
    celery
  • 原文地址:https://www.cnblogs.com/dandandeyoushangnan/p/4701662.html
Copyright © 2020-2023  润新知