(csdn内转载)hbase完全分布式环境搭建

本文主要是介绍(csdn内转载)hbase完全分布式环境搭建，希望对大家解决编程问题提供一定的参考价值，需要的开发者们随着小编来一起学习吧！

HBase是一个分布式的、面向列的开源数据库，该技术来源于Chang et al所撰写的Google论文“Bigtable：一个结构化数据的分布式存储系统”。就像Bigtable利用了Google文件系统（File System）所提供的分布式数据存储一样，HBase在Hadoop之上提供了类似于Bigtable的能力。HBase是Apache的Hadoop项目的子项目。HBase不同于一般的关系数据库，它是一个适合于非结构化数据存储的数据库。另一个不同的是HBase基于列的而不是基于行的模式。

HBase – Hadoop Database，是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。

HBase有三种模式：单机模式，伪分布式模式，完全分布式模式。下面介绍完全分布式安装。

HBase安装前需要安装Hadoop，安装Hadoop请参照：http://blog.csdn.net/chabale/article/details/8808109

HBase安装步骤如下:

第一步：下载HBase包 tar -zxvf Hbase*.tar.gz 解压HBase

第二步修改conf目录下的配置文件：

a）hbase-env.sh

修改内容：

              #java安装目录export JAVA_HOME=/usr/java/jdk1.6.0_24#Hbase日志目录export HBASE_LOG_DIR=/root/hadoop/hbase-0.94.6.1/logs#如果使用HBase自带的Zookeeper值设成true 如果使用自己安装的Zookeeper需要将该值设为falseexport HBASE_MANAGES_ZK=true

b）hbase-site.xml

                 <configuration><property><name>hbase.rootdir</name><value>hdfs://master:9000/hbase</value></property><property><name>hbase.cluster.distributed</name><value>true</value></property><property><name>hbase.master</name><value>hdfs://master:60000</value></property><property><name>hbase.zookeeper.quorum</name><value>master,slave,slave1</value></property></configuration>

hbase.rootdir指定Hbase数据存储目录

hbase.cluster.distributed 指定是否是完全分布式模式，单机模式和伪分布式模式需要将该值设为false

hbase.master指定Master的位置

hbase.zookeeper.quorum 指定zooke的集群，多台机器以逗号分隔

c）修改conf下的regionservers文件

                    master
                    slave
                    slave1

d）再修改Hadoop hdfs-site.xml下的一个属性值。（记得其他的datanode也要进行修改）

                <property> 
                     <name>dfs.datanode.max.xcievers</name> 
                     <value>4096</value> 
                </property>

该参数限制了datanode所允许同时执行的发送和接受任务的数量，缺省为256，hadoop-defaults.xml中通常不设置这个参数。这个限制看来实际有些偏小，高负载

e）拷贝hbase到所有的节点

tar zcvf hbase-0.92.1.tar.gz hbase-0.92.1

scp hbase-0.92.1.tar.gz hadoop@192.168.0.3:~/

scp hdfs-site.xml hadoop@192.168.0.3:~/

然后进行相应的解压、替换即可。

其他datanode节点按照相同的操作即可。

f）启动顺序：先启动Hadoop-》hbase，如果使用自己安装的zookeeper启动顺序是：Hadoop-》zookeeper-》hbase

停止顺序：hbase->zookeeper->hadoop

按照上面的顺序启动：

master主机上jps：

                 1145 SecondaryNameNode
                 1248 JobTracker
                  2025 Jps
                  1756 HMaster
                  1931 HRegionServer
                   965 NameNode

节点上jps：

                 1434 DataNode
                 1557 TaskTracker
                 1694 HQuorumPeer
                  1857 Jps

主机进到hbase的bin目录

运行./hbase shell

                HBase Shell; enter 'help<RETURN>' for list of supported commands.
                Type "exit<RETURN>" to leave the HBase Shell
                 Version 0.94.6.1, r1464658, Thu Apr 4 10:58:50 PDT 2013

                  hbase(main):001:0>

这就说明hbase已经成功安装

该博文转载自http://blog.csdn.net/chabale/article/details/8808620

这篇关于(csdn内转载)hbase完全分布式环境搭建的文章就介绍到这儿，希望我们推荐的文章对编程师们有所帮助！