5.3 HBase数据库-伪-完全分布式搭建

妖狐艹你老母 2022-05-23 07:47 199阅读 0赞

HBase – Hadoop Database，是一个高可靠性、高性能、面向列、可伸缩、 实时读写的分布式数据库

利用Hadoop HDFS作为其文件存储系统,利用Hadoop MapReduce来处理 HBase中的海量数据,利用Zookeeper作为其分布式协同服务

主要用来存储非结构化和半结构化的松散数据

![20180605083107993][]

ROW KEY：

决定一行数据，按照字典顺序排序的，只能存储64k的字节数据

Column Family列族 & qualifier列：

CF1,CF2,CF3就是列族 q1,q2,q4就是列

权限控制、存储以及调优都是在列族层面进行的，HBase把同一列族里面的数据存储在同一目录下，由几个文件保存

Timestamp时间戳：

在HBase每个cell存储单元对同一份数据有多个版本，根据唯一的时间 戳来区分每个版本之间的差异，不同版本的数据按照时间倒序排序， 最新的数据版本排在最前面。

Cell单元格：

由行和列的坐标交叉决定，单元格是有版本的，单元格的内容是未解析的字节数组

由\{row key， column( = +)， version\} 唯一确定的单元。cell中的数据是没 有类型的，全部是字节码形式存贮。

HLog：

记录的不仅仅是操作，而且还记录数据

--------------------

HBase伪分布式搭建，使用的是HBase内置的zookeeper:

所以为了不端口冲突，伪分布式不要部署在zookeeper服务器上

解压HBase包：注意配置环境变量

conf/hbase-env.sh：

JAVA\_HOME=实际安装jdk路径

conf/hbase-site.xml:

<property>

<name>hbase.rootdir</name>

<value>file:///opt/testuser/hbase</value>

</property>

<property>

<name>hbase.zookeeper.property.dataDir</name>

<value>/opt/testuser/zookeeper</value>

</property>

bin/ start-hbase.sh 启动

stop-hbase.sh 停止

hbase shell 进入hbase

quit 退出

node1:60010 访问端口

--------------------

--------------------

完全分布式：

准备几台服务器，解压，配置环境变量

conf/hbase-env.sh：

export HBASE\_MANAGES\_ZK=false 是否使用自带默认的zookeeper

conf/hbase-site.xml：

<property>

<name>hbase.rootdir</name>

<value>hdfs://yuntian/hbase</value>

</property>

<property>

<name>hbase.cluster.distributed</name>

<value>true</value>

</property>

<property>

<name>hbase.zookeeper.quorum</name>

<value>node2:4180,node3:4180,node4:4180</value>

</property>

conf/regionservers： //设置Region

node2

node3

node4

conf/backup-masters: //设置备master(RegionServer)

node2

注意：复制hadoop的etc/hadoop/ hdfs-site.xml复制到Hbase的conf下

几台服务器HBase配置文件要一样

bin/start-hbase.sh 启动

hbase shell 进入hbase

node1:60010 访问

主master和其他几台服务器要做免密码

ssh-copy-id node2 做免密

[20180605083107993]: /images/20220523/075a267c89e54c2e96e4ec83e874db84.png

发表评论取消回复

表情：

评论列表（有 0 条评论，199人围观）

还没有评论，来说两句吧...

相关阅读

相关 Hbase伪分布式及高可用集群搭建

HBase Hbase的引言什么是HBase NoSQL特点 NoSQL分类 Hbase存储的逻辑结构 Hba

不念不忘少年蓝@/ 2023年06月11日 07:28/ 0 赞/ 3 阅读

相关 HBase - 完全分布式搭建

1 Zookeeper 正常部署启动Zookeeper 2 Hadoop 正常部署启动Hadoop 3 HBase 解压 [hadoop@hadoop10

不念不忘少年蓝@/ 2023年05月31日 02:25/ 0 赞/ 6 阅读

相关 educoder--HBase 伪分布式环境搭建第1关：伪分布式环境搭建答案

第1关：伪分布式环境搭建任务描述相关知识配置与启动伪分布式HBase 在HDFS中验证编程要求测试说明任务描述本关任务：安装伪分

快来打我*/ 2022年10月06日 01:57/ 0 赞/ 197 阅读

相关 Hadoop完全伪分布式搭建

(比较简单在这里就不逐步截图了) Hadoop单机以及伪分布式和完全分布式的环境搭建详细步骤一、首先确保网络,确保虚拟机能ping通本机电脑。以下为IP配置文件

怼烎@/ 2022年06月10日 05:12/ 0 赞/ 260 阅读

相关 HBase 伪分布式搭建

环境变量写入.bash\_profile export HBASE_HOME=/home/hadoop/hbase-1.2.6 export PATH=$PA

悠悠/ 2022年06月08日 12:13/ 0 赞/ 291 阅读

相关 Hadoop伪分布式，分布式搭建

树状目录结构： ![Center][] 以下是对这些目录的解释： /bin： bin是Binary的缩写, 这个目录存放着最经常使用的命令。 /boot：

桃扇骨/ 2022年06月07日 11:37/ 0 赞/ 303 阅读

相关搭建hbase伪分布

1.下载 http://archive.cloudera.com/cdh5/cdh/5/hbase-1.2.0-cdh5.7.5.tar.gz 2.解压 tar

我不是女神ヾ/ 2022年06月06日 01:09/ 0 赞/ 298 阅读

相关 Hbase分布式搭建之Hbase搭建

在安装之前先介绍下Hbase，Hadoop生态系统中HBase所处位置，实现的功能，解决的问题。 HBase – Hadoop Database，是一个高可靠性、高性能、面向

刺骨的言语ヽ痛彻心扉/ 2022年05月29日 02:30/ 0 赞/ 427 阅读

相关 5.3 HBase数据库-伪-完全分布式搭建

HBase – Hadoop Database，是一个高可靠性、高性能、面向列、可伸缩、实时读写的分布式数据库利用Hadoop HDFS作为其文件存储系统,利用Hadoo

妖狐艹你老母/ 2022年05月23日 07:47/ 0 赞/ 200 阅读

相关 Hadoop-HDFS的伪分布式和完全分布式集群搭建

转自： [https://blog.csdn.net/mhw666/article/details/91610598][https_blog.csdn.net_mhw666_

逃离我推掉我的手/ 2021年12月14日 09:37/ 0 赞/ 374 阅读