ICode9

精准搜索请尝试: 精确搜索
首页 > 其他分享> 文章详细

HBase详解(02) - HBase-2.0.5安装

2022-01-22 17:02:34  阅读:286  来源: 互联网

标签:02 2.0 hadoop student HBase main hadoop102 hbase


HBase详解(02) - HBase-2.0.5安装

HBase安装环境准备

  • Zookeeper安装

Zookeeper安装参考《Zookeeper详解(02) - zookeeper安装部署-单机模式-集群模式》

启动Zookeeper集群

bin/zkServer.sh start

  • Hadoop安装

Hadoop安装参考《Hadoop详解(02) - Hadoop3.1.3集群运行环境搭建》

启动Hadoop集群

sbin/start-dfs.sh

sbin/start-yarn.sh

Hbase安装

  • 安装包下载

HBase官网:https://hbase.apache.org/

Hbase安装包历史版本下载地址:https://archive.apache.org/dist/hbase/

hbase-2.0.5下载地址:https://archive.apache.org/dist/hbase/2.0.5/hbase-2.0.5-bin.tar.gz

  • 上传解压

将Hbase安装包hbase-2.0.5-bin.tar.gz上传到服务器的/opt/software目录

解压:

[hadoop@hadoop102 software]$ tar -zxvf hbase-2.0.5-bin.tar.gz -C /opt/module/

重命名

[hadoop@hadoop102 software]$ cd /opt/module/

[hadoop@hadoop102 module]$ mv hbase-2.0.5/ hbase

  • 修改配置文件hbase-env.sh

[hadoop@hadoop102 module]$ cd hbase/conf/

[hadoop@hadoop102 conf]$ vi hbase-env.sh

修改内容:

#使用独立的Zookeeper集群,找到如下内容,放开注释,将值修改为false

export HBASE_MANAGES_ZK=false

  • 修改配置文件hbase-site.xml

[hadoop@hadoop102 conf]$ vi hbase-site.xml

添加如下内容:

<configuration>

<property>

<name>hbase.rootdir</name>

<value>hdfs://hadoop102:9820/hbase</value>

</property>

<property>

<name>hbase.cluster.distributed</name>

<value>true</value>

</property>

<property>

<name>hbase.zookeeper.quorum</name>

<value>hadoop102,hadoop103,hadoop104</value>

</property>

</configuration>

注意:hbase.rootdir配置的端口为Hadoop namenode端口,即与hadoop中core-site.xml的fs.defaultFS值配置的端口一致

  • 修改regionservers

[hadoop@hadoop102 conf]$ vi regionservers

删除原来的内容,添加如下内容,表示需要启动的Region Server节点

hadoop102

hadoop103

hadoop104

  • 分发安装包

将HBase安装包分发到其他集群

[hadoop@hadoop102 module]$ scp -r hbase/ hadoop103:/opt/module/

[hadoop@hadoop102 module]$ scp -r hbase/ hadoop104:/opt/module/

  • 配置环境变量

[hadoop@hadoop102 module]$ sudo vi /etc/profile

在文件末尾添加如下内容

#HBASE_HOME

export HBASE_HOME=/opt/module/hbase

export PATH=$PATH:$HBASE_HOME/bin

注意:在hadoop103,hadoop104上也需要配置HBase的环境变量

  • 启动Hbase集群

[hadoop@hadoop102 hbase]$ cd /opt/module/hbase/

[hadoop@hadoop102 hbase]$ bin/start-hbase.sh

停止服务:

[hadoop@hadoop102 hbase]$ bin/stop-hbase.sh

  • 查看Hbase UI页面

浏览器中访问http://hadoop102:16010

提示:如果集群之间的节点时间不同步,会导致regionserver无法启动,抛出ClockOutOfSyncException异常。

解决方法:

方法一:同步时间服务

方法二:设置属性:hbase.master.maxclockskew设置更大的值

<property>

    <name>hbase.master.maxclockskew</name>

    <value>180000</value>

    <description>Time difference of regionserver from master</description>

</property>

bin/hbase-daemon.sh start master

bin/hbase-daemon.sh start regionserver

 

HMaster高可用(可选)

在HBase中HMaster负责监控HRegionServer的生命周期,均衡RegionServer的负载,如果HMaster挂掉了,那么整个HBase集群将陷入不健康的状态,并且此时的工作状态并不会维持太久。所以HBase支持对HMaster的高可用配置。

[hadoop@hadoop102 hbase]$ bin/stop-hbase.sh

[hadoop@hadoop102 hbase]$ touch conf/backup-masters

[hadoop@hadoop102 hbase]$ echo hadoop103 > conf/backup-masters

[hadoop@hadoop102 hbase]$ scp -r conf/ hadoop103:/opt/module/hbase/

[hadoop@hadoop102 hbase]$ scp -r conf/ hadoop104:/opt/module/hbase/

[hadoop@hadoop102 hbase]$ bin/start-hbase.sh

http://hadooo102:16010

访问备份节点的HMaster:http://hadoop103:16010

HBase Shell操作

基本操作

1.进入HBase客户端命令行

[atguigu@hadoop102 hbase]$ bin/hbase shell

2.查看帮助命令

hbase(main):001:0> help

namespace的操作

1.查看当前Hbase中有哪些namespace

hbase(main):002:0> list_namespace

NAMESPACE

default(创建表时未指定命名空间的话默认在default下)

hbase(系统使用的,用来存放系统相关的元数据信息等,勿随便操作)

2.创建namespace

hbase(main):010:0> create_namespace "test"

 

hbase(main):010:0> create_namespace "test01", {"author"=>"wyh", "create_time"=>"2020-03-10 08:08:08"}

3.查看namespace

hbase(main):010:0> describe_namespace "test01"

4.修改namespace的信息(添加或者修改属性)

hbase(main):010:0> alter_namespace "test01", {METHOD => 'set', 'author' => 'weiyunhui'}

添加或者修改属性:

alter_namespace 'ns1', {METHOD => 'set', 'PROPERTY_NAME' => 'PROPERTY_VALUE'}

删除属性:

alter_namespace 'ns1', {METHOD => 'unset', NAME => ' PROPERTY_NAME '}

5.删除namespace

hbase(main):010:0> drop_namespace "test01"

注意: 要删除的namespace必须是空的,其下没有表。

表的操作

0.查看当前数据库中有哪些表

hbase(main):002:0> list

1.创建表

hbase(main):002:0> create 'student','info'

2.插入数据到表

hbase(main):003:0> put 'student','1001','info:sex','male'

hbase(main):004:0> put 'student','1001','info:age','18'

hbase(main):005:0> put 'student','1002','info:name','Janna'

hbase(main):006:0> put 'student','1002','info:sex','female'

hbase(main):007:0> put 'student','1002','info:age','20'

3.扫描查看表数据

hbase(main):008:0> scan 'student'

hbase(main):009:0> scan 'student',{STARTROW => '1001', STOPROW => '1001'}

hbase(main):010:0> scan 'student',{STARTROW => '1001'}

4.查看表结构

hbase(main):011:0> describe 'student'

5.更新指定字段的数据

hbase(main):012:0> put 'student','1001','info:name','Nick'

hbase(main):013:0> put 'student','1001','info:age','100'

6.查看"指定行"或"指定列族:列"的数据

hbase(main):014:0> get 'student','1001'

hbase(main):015:0> get 'student','1001','info:name'

7.统计表数据行数

hbase(main):021:0> count 'student'

8.删除数据

删除某rowkey的全部数据:

hbase(main):016:0> deleteall 'student','1001'

删除某rowkey的某一列数据:

hbase(main):017:0> delete 'student','1002','info:sex'

9.清空表数据

hbase(main):018:0> truncate 'student'

提示:清空表的操作顺序为先disable,然后再truncate。

10.删除表

首先需要先让该表为disable状态:

hbase(main):019:0> disable 'student'

然后才能drop这个表:

hbase(main):020:0> drop 'student'

提示:如果直接drop表,会报错:ERROR: Table student is enabled. Disable it first.

11.变更表信息

将info列族中的数据存放3个版本:

hbase(main):022:0> alter 'student',{NAME=>'info',VERSIONS=>3}

hbase(main):022:0> get 'student','1001',{COLUMN=>'info:name',VERSIONS=>3}

标签:02,2.0,hadoop,student,HBase,main,hadoop102,hbase
来源: https://www.cnblogs.com/meanshift/p/15834415.html

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有