• Hadoop生态圈-hbase介绍-伪分布式安装


                  Hadoop生态圈-hbase介绍-伪分布式安装

                                        作者:尹正杰

    版权声明:原创作品,谢绝转载!否则将追究法律责任。

    一.HBase简介

      HBase是一个分布式的,持久的,强一致性的存储系统,具有近似最优的写性能(能使I/O利用率达到饱和)进而出色的读性能,它充分利用了磁盘空间,支持特定列族切换可选压缩算法。

      HBase继承自谷歌公司的 BigTable模型,只考虑单一的索引,类似于RDBMS的主键,提供了服务器端钩子,可以实施灵活的辅助索引解决方案。此外,它还提供了过滤器功能,减少了网络传输的数据量。

      HBase并未将说明性查询语言作为核心实现的一部分,对事物的支持也有限。但行原子性和“读-修改-写”操作在实现中弥补了这个缺陷,它们覆盖了大部分的使用场景并消除了在其他系统中经历过的死锁,等待问题。

      HBase在进行负载均衡和故障恢复时对客户端时透明的。在生产环境中,系统的可扩展性体现在系统自动伸缩的过程中。更改数据并不涉及重新全量负载均衡和数据重分区,但整个处理过程完全是自动化的。

    二.HBase伪分布式搭建

    1>.下载HBase安装包(本次搭建版本是hbase-1.2.6)

       官网下载地址:http://archive.apache.org/dist/hbase/

    2>.解压

    [yinzhengjie@s101 data]$ tar -zxf hbase-1.2.6-bin.tar.gz -C /soft/
    [yinzhengjie@s101 data]$ 

    3>.创建符号链接

    [yinzhengjie@s101 data]$ ln -s /soft/hbase-1.2.6/ /soft/hbase
    [yinzhengjie@s101 data]$

    4>.配置环境变量并使其生效

    [yinzhengjie@s101 data]$ tail -3 /etc/profile
    #ADD HBASE
    HBASE_HOME=/soft/hbase
    PATH=$PATH:$HBASE_HOME/bin
    [yinzhengjie@s101 data]
    [yinzhengjie@s101 data]$ source /etc/profile
    [yinzhengjie@s101 data]

    5>.修改hbase环境变量脚本

    [yinzhengjie@s101 data]$ grep -v ^# /soft/hbase/conf/hbase-env.sh | grep JAVA_HOME
    export JAVA_HOME=/soft/jdk/
    [yinzhengjie@s101 data]$ grep -v ^# /soft/hbase/conf/hbase-env.sh | grep HBASE_MANAGES_ZK
    export HBASE_MANAGES_ZK=flase
    [yinzhengjie@s101 data]$ 

    6>.修改hbase-site.xml

    [yinzhengjie@s101 data]$ more /soft/hbase/conf/hbase-site.xml 
    <?xml version="1.0"?>
    <configuration>
    <property>
    <name>hbase.cluster.distributed</name>
    <value>true</value>
    </property>
    <property>
    <name>hbase.rootdir</name>
    <value>hdfs://mycluster/user/hbase</value>
    </property>
    <property>
    <name>hbase.zookeeper.property.dataDir</name>
    <value>/home/yinzhengjie/zookeeper</value>
    </property>
    <property>
    <name>hbase.zookeeper.quorum</name>
    <value>s102:2181,s103:2181,s104:2181</value>
    </property>
    </configuration>
    [yinzhengjie@s101 data]$ 

    7>.启动hbase

    [yinzhengjie@s101 data]$ start-hbase.sh 
    starting master, logging to /soft/hbase/bin/../logs/hbase-yinzhengjie-master-s101.out
    Java HotSpot(TM) 64-Bit Server VM warning: ignoring option PermSize=128m; support was removed in 8.0
    Java HotSpot(TM) 64-Bit Server VM warning: ignoring option MaxPermSize=128m; support was removed in 8.0
    starting regionserver, logging to /soft/hbase/bin/../logs/hbase-yinzhengjie-1-regionserver-s101.out
    [yinzhengjie@s101 data]

    8>.查看进程是否启动

    [yinzhengjie@s101 data]$ jps
    6689 HMaster ------->
    2678 NameNode
    6920 Jps
    6811 HRegionServer ------->
    2988 DFSZKFailoverController
    3135 ResourceManager
    [yinzhengjie@s101 data]$ 

    9>.WEB UI查看

  • 相关阅读:
    数据卷中的容器操作,整体来说还是非常简单的
    Docker 的另外两个话题: DockerHub 和 容器网络
    Docker——理解好镜像和容器的关系
    MapReduce 运行全过程解析
    MySQL 之 Explain 输出分析
    关于新手数组:样题:陶陶摘苹果
    VirtualBox安装Ubuntu-18.04-Server笔记
    做一个不复制粘贴的程序员[1]: 使用模板方法模式(2)- 对象更新比较器实例
    做一个不复制粘贴的程序员[1]: 使用模板方法模式(1)- 分页查询实例
    做一个不复制粘贴的程序员[0]: 概述
  • 原文地址:https://www.cnblogs.com/yinzhengjie/p/9154461.html
Copyright © 2020-2023  润新知