一、问题: 在启动HBase replication功能后,有一个regionServer在启动时报错提示: 2018-01-16 14:07:43,308 INFO [RS_OPEN_REGION-dashuju172…
标签:region
##为什么Hbase能实现快速的查询
为什么Hbase能实现快速的查询-CSDN论坛-CSDN.NET-中国最大的IT技术社区 http://bbs.csdn.net/topics/390845816 你的快速是指什么? 是根据亿级的记录中快速查询,还是说以…
hbase的列(family:column) 的个数是否有数量限制?
没有限制,但是需要考虑一些问题: 锁力度 当你操作一行数据的时候,这个regionserver 会对这个行进行暂时锁定,来进行操作, 从好的方面看,我们可以并发的进行原子读操作,或者压根不能修改操作。除非可以可以容忍误差…
HBase-拆分&合并
1 Region拆分 一个Region代表一个表的一段Rowkey的数据集合,当Region太大,Master会将其拆分。Region太大会导致读取效率太低,遍历时间太长,通过将大数据拆分到不同机器上,分别查询再聚合,H…
HBase 常见错误修复方法
在重启HBase Region Server后经常会使用hbase hbck 命令进行检测,有时会检测出一些错误,以下是对于一些常见的错误的处理方法。 1. Found lingering reference file …
HBase分裂策略
在Hbase中split是一个很重要的功能,Hbase是通过把数据分配到一定数量的region来达到负载均衡的。一个table会被分配到一个或多个region中,这些region会被分配到一个或者多个regionServ…
hbase-region个数
hbase-region数量 单个regionserver配置region个数的两种方案: 根据官方推荐配置(硬盘容量);根据内存配置 一:官方推荐配置(硬盘容量): 官方文档给出的推荐: regionserver上的r…
Hbase 之 某Region长期处于 RIT 状态 ( 空洞 )
速记: Hbase web UI 发现某Region长期处于如下状态: app_user_isnew,02,1517807389209.3eb41df715cdd0f9a2b0ce6550b586b3. state=PE…
HBase Region故障修复
当HBase 集群down 了重启后,可能会出现有些region 没有上线成功,导致MapReduce 任务在处理时找不到该region。针对这样情况,可以使用hbck 工具进行检测和恢复。 检测 在HBase Gate…
HBase学习 - HRegion Split
本文基于hbase-1.3.0源码 1. 前言 本文主要介绍在cluster模式下(并且使用zookeeper协调)region发生split的整个过程。这其中会涉及到HMaster和HRegionSever。 2. s…
hbase meta表数据存储
hbase meta表数据存储 1.meta表存储了在系统上的一系列的region信息。以及meta表的信息存储在zookeeper上。 2.meta表结构如下(默认列族为info) : Key: Region key …
HBase-原理总结
先放一张自己总结的图 [图片上传失败…(image-619f9f-1540812453635)] 数据模型 一个RegionServer会管理多个Region,一个表的一段键值会生成一个Region,个别情况…