基于hadoop-2.7.7简单搭建hbase-1.4.13
一、概述
HBase是一个开源的、分布式的、版本化的非关系型数据库,它利用 Hadoop 分布式文件系统(Hadoop Distributed File System,HDFS)提供分布式数据存储。
HBase 是一个可以进行随机访问的存取和检索数据的存储平台,存储结构化和半结构化的数据,因此一般的网站可以将网页内容和日志信息都存在 HBase 里。
如果数据量不是非常庞大,HBase 甚至可以存储非结构化的数据。它不要求数据有预定义的模式,允许动态和灵活的数据模型,也不限制存储数据的类型。
HBase 是非关系型数据库,它不具备关系型数据库的一些特点,例如,它不支持 SQL 的跨行事务,也不要求数据之间有严格的关系,同时它允许在同一列的不同行中存储不同类型的数据。
HBase 作为 Hadoop 框架下的数据库,是被设计成在一个服务器集群上运行的。
二、下载安装
前提准备 需要提前配置好hadoop集群,zookeeper集群。 这里的环境: hadoop-2.7.7 jdk1.8.0_321 zookeeper-3.6.3 下载 地址:https://archive.apache.org/dist/hbase/ 这里下载的为 hbase-1.4.13-bin.tar.gz 安装 上传到Linux服务器上。解压 tar -zxvf /opt/export/software/hbase-1.4.13-bin.tar.gz -C /opt/export/servers/
环境变量 sudo vim /etc/profile
export HBASE_HOME=/opt/export/servers/hbase-1.4.13
export PATH=${PATH}:${HBASE_HOME}/bin
source /etc/profile
三、配置
修改配置文件
cd /opt/export/servers/hbase-1.4.13/conf
hbase-env.sh vim hbase-env.sh
#java环境
export JAVA_HOME=/opt/export/servers/jdk1.8.0_321/
#hadoop 配置文件地址
export HBASE_CLASSPATH=/opt/export/servers/hadoop-2.7.7/etc/hadoop
#使用外部的zookeeper
export HBASE_MANAGES_ZK=false
#日志存放路径
export HBASE_LOG_DIR=/opt/export/data/hbase/logs
hbase-site.xml vim hbase-site.xml
regionservers hbase的子节点 vim regionservers
hadoop02
hadoop03
backup-masters 这个文件在配置文件中是没有的,新建。该文件是指定备用节点 touch backup-masters
vim backup-masters
hadoop02
log4j.properties 修改日志存储路径 vim log4j.properties
hbase.log.dir=/opt/export/data/hbase/logs
创建目录 mkdir -p /opt/export/data/hbase/{logs,tmp}
分发文件 scp -r /opt/export/servers/hbase-1.4.13 hadoop02:/opt/export/servers/
scp -r /opt/export/servers/hbase-1.4.13 hadoop03:/opt/export/servers/
scp -r /opt/export/data/hbase/ hadoop02:/opt/export/data/
scp -r /opt/export/data/hbase/ hadoop03:/opt/export/data/
scp -r /etc/profile hadoop02:/etc/profile
scp -r /etc/profile hadoop03:/etc/profile
#分别刷新配置文件 hadoop02, hadoop03
source /etc/profile
四、启动
因为hbase依赖与hadoop集群的HDFS文件系统,与zookeeper。所有在启动hbase之前要先启动它们
#在hadoop01,hadoop02,hadoop03上分别启动zookeeper
zkServer.sh start
#在hadoop01启动hdfs
start-dfs.sh
#然后再在hadoop01上启动hbase
start-hbase.sh
查看网页端: https://192.168.121.134:60010
参考文章
发表评论