CentOS 6.4下HBase集群安装

环境:CentOS 6.4,Hadoop 2.6.0,ZooKeeper 3.4.6,HBase 1.0.1.1 

集群角色规划:

HostName HBase Role ZooKeeper Hadoop Role
HDP1 MasterYESSlave
HDP2 Backup Master & RegionServer YES Master
HDP3 RegionServer YES Slave
HDP4 RegionServer YES Slave

 
1. 任意Master(HDP1)节点解压HBase   sudo tar zxvf hbase-1.0.1.1-bin.tar.gz -C /usr/local/   sudo mv hbase-1.0.1.1 hbase   sudo chown -R hdp:hdp hbase  
2. 修改hbase-env.sh     vim conf/hbase-env.sh,出掉JAVA_HOME的注释,并修改为本地的JAVA_HOME    export JAVA_HOME=/usr/lib/jdk7    修改HBASE_MANAGES_ZK为false,默认为true,表示HBase托管zookeeper实例,如果是HBase独占的zookeeper,可以设定为true。     export HBASE_MANAGES_ZK=false  
3. 修改hbase-site.xml     以下只配置几个必需要修改的项,其它的项使用默认值。hbase-site.xml的默认配置可以从帮助文档(Default Configuration)获得。  <configuration>   <property>     <name>hbase.rootdir</name>     <value>hdfs://HDP2:9000/hbase</value>   </property>   <property>      <name>hbase.cluster.distributed</name>      <value>true</value>   </property>   <property>      <name>hbase.master.port</name>      <value>16000</value>   </property>    <property>     <name>hbase.zookeeper.property.dataDir</name>     <value>/usr/local/zookeeper/data</value>   </property>   <property>     <name>hbase.zookeeper.quorum</name>     <value>HDP1,HDP2,HDP3,HDP4</value>   </property>   <property>     <name>hbase.zookeeper.property.clientPort</name>     <value>2181</value>   </property> </configuration>   hbase.rootdir:Region Servers共享的HBase持久化数据的存储地址。需要使用包含文件系统scheme的完全限定地址。 hbase.cluster.distributed:指定Hbase集群是否以分布式方式运行。 hbase.master.port:Master绑定的端口,包括backup-master. hbase.zookeeper.property.dataDir:这个是ZooKeeper配置文件zoo.cfg中的dataDir。zookeeper存储数据库快照的位置。 hbase.zookeeper.quorum:ZooKeeper的所有成员服务器列表,服务器名之间用逗号分隔。 hbase.zookeeper.property.clientPort:这个是ZooKeeper配置文件zoo.cfg中的clientPort。ZooKeeper提供给客户端连接的端口,默认是2181。  
4. 修改regionservers,将RegionServers写入。 vim conf/regionservers HDP2,HDP3,HDP4  
5. 修改backup-masters,将Backup Master写入。 vim conf/backup-masters   HDP2  
6. 添加环境变量方便调用HBase   vim /etc/profile   #HBase Env   export HBASE_HOME=/usr/local/hbase   export PATH=$PATH:$HBASE_HOME/bin:$HBASE_HOME/conf  
7. 将修改好的安装目录分发到所有节点,一并修改环境变量。  
8. 启动HBase    在HDP1上调用start-hbase即可。  
9.通过jps查看进程。 HDP1上有HMaster,HDP2上有HMaster和HRegionServer,HDP3和HDP4上是HRegionServer。  
总结:     1. hbase.master.port需要指定,不然启动backup-master时会报Already in use的错误。     2. HMaster(包括backup-master)需要能够passwordless ssh到其它服务器     3. 我这里的ZooKeeper使用是偶数个节点,其实是不合理的,应该用奇数个节点。

文章来源网络,作者:运维,如若转载,请注明出处:https://shuyeidc.com/wp/211574.html<

(0)
运维的头像运维
上一篇2025-04-10 11:18
下一篇 2025-04-10 11:19

相关推荐

  • 个人主题怎么制作?

    制作个人主题是一个将个人风格、兴趣或专业领域转化为视觉化或结构化内容的过程,无论是用于个人博客、作品集、社交媒体账号还是品牌形象,核心都是围绕“个人特色”展开,以下从定位、内容规划、视觉设计、技术实现四个维度,详细拆解制作个人主题的完整流程,明确主题定位:找到个人特色的核心主题定位是所有工作的起点,需要先回答……

    2025-11-20
    0
  • 社群营销管理关键是什么?

    社群营销的核心在于通过建立有温度、有价值、有归属感的社群,实现用户留存、转化和品牌传播,其管理需贯穿“目标定位-内容运营-用户互动-数据驱动-风险控制”全流程,以下从五个维度展开详细说明:明确社群定位与目标社群管理的首要任务是精准定位,需明确社群的核心价值(如行业交流、产品使用指导、兴趣分享等)、目标用户画像……

    2025-11-20
    0
  • 香港公司网站备案需要什么材料?

    香港公司进行网站备案是一个涉及多部门协调、流程相对严谨的过程,尤其需兼顾中国内地与香港两地的监管要求,由于香港公司注册地与中国内地不同,其网站若主要服务内地用户或使用内地服务器,需根据服务器位置、网站内容性质等,选择对应的备案路径(如工信部ICP备案或公安备案),以下从备案主体资格、流程步骤、材料准备、注意事项……

    2025-11-20
    0
  • 如何企业上云推广

    企业上云已成为数字化转型的核心战略,但推广过程中需结合行业特性、企业痛点与市场需求,构建系统性、多维度的推广体系,以下从市场定位、策略设计、执行落地及效果优化四个维度,详细拆解企业上云推广的实践路径,精准定位:明确目标企业与核心价值企业上云并非“一刀切”的方案,需先锁定目标客户群体,提炼差异化价值主张,客户分层……

    2025-11-20
    0
  • PS设计搜索框的实用技巧有哪些?

    在PS中设计一个美观且功能性的搜索框需要结合创意构思、视觉设计和用户体验考量,以下从设计思路、制作步骤、细节优化及交互预览等方面详细说明,帮助打造符合需求的搜索框,设计前的规划明确使用场景:根据网站或APP的整体风格确定搜索框的调性,例如极简风适合细线条和纯色,科技感适合渐变和发光效果,电商类则可能需要突出搜索……

    2025-11-20
    0

发表回复

您的邮箱地址不会被公开。必填项已用 * 标注