• 03_Hadoop简单介绍以及版本信息


    一、海量数据:

    量:大、数目多,数据量到达PB、ZB级别,条目数到达几十亿条、百亿条

    1)存储:分布式,集群的概念,管理(主节点、从节点),HDFS(HadoopDistributedFileSystem)

    2)分析:分布式,并行,离线计算框架,管理(主节点、从节点),MapReduce

    ApacheHadoopLogo,一只会飞的大象

    二、Hadoop与Google的关系

      HDFS–>GFS开源文件系统

      HadoopMapReduce:核心就是对数据的排序优化

       GoogleMapReduce–>HadoopMapReduce开源的分布式并行计算框架

       BigTable-->    HBase开源的分布式数据库

      

    二、ApacheHadoop版本

    经典版本:0.20.2、1.0.0(第一个1.0.0正式版本)à1.0.3或者1.0.4(应用最多的版本)à1.1.2、1.2.1(截止2014年4月份)。

    0.23.0(跨越版本,YARN框架,第二代MapReduce框架,资源管理和任务调度的框架)。

    023.10版本,最新的,与2.x系列版本区别在于,没有HDFS的HA和Federation特性。

    2.X版本:(将1.x系列版本与0.23.0系列版本的合并)

    1)2.0.x版本:属于2.x系列版本的alpha版本

    2)2.1.x版本:属于2.x系列版本的beta版本

    3)2.2.0、2.3.0、2.4.0正式版本,可用于实际生产环境中。

  • 相关阅读:
    单一职责原则
    算法的设计与分析 -----图 (1)
    交换机
    子网掩码
    IP地址分类+网络号
    网络参考模型与5G协议
    什么是5G
    RxJAVA
    EventBus3.0的学习
    ButterKnife+Zelezny插件
  • 原文地址:https://www.cnblogs.com/xiangyangzhu/p/5242260.html
Copyright © 2020-2023  润新知