[TOC] 摘录一 hbase.rootdir 这个目录是region server的共享目录,用来持久化HBase。URL需要是’完全正确’的,还要包含文件系统的scheme。例如,要表示hdf…
分类:HBase
HugeGraph入门
一、HugeGraph简介 最近在搞好友推荐方便的工作,选择了图数据的方法,使用并学习了HugeGraph,再次记录一下。 HugeGraph是百度在2018年中旬开源的一款图数据库(Graph Database)系统,…
Hbase Scan 主要流程分析.md
Hbase Scan 流程分析 公司在集群在从0.94.6升到0.98.6-cdh5.2.0后, 原来执行的hbase scan 任务出现很多问题. 表现在: setBatch() 与filter 不兼容, 导致代码需要…
sqoop导入多表,hbase存es的数据串表解决
1.问题 有多个表需要导入HBase及es中,在HBase中创建多个表没有问题,但是通过HBase Observer同步数据到es中,多个索引/类型的映射,ElasticSearch会串数据,以最后的table-att为…
Hbase 修改表名
hbase中没有rename命令,需要通过hbase的快照功能重命名。 1.停止表继续插入 disable ‘tableName’ 2。…
python thrift hbase安装连接
默认已装好 hbase,我的版本是hbase-0.98.24,并运行 python 2.7.x 步骤: sudo apt-get install automake bison flex g++ git libboost-…
尚硅谷大数据技术之HBase第3章 HBase数据结构
3.1 Row Key 与nosql数据库们一样,row key是用来检索记录的主键。访问HBASE table中的行,只有三种方式: 1.通过单个row key访问 2.通过row key的range(正则) 3.全表…
hadoop/hbase/spark安装
安装母机linux 下载CentOS-6.5-x86_64-bin-minimal.iso进行U盘安装 安装KVM虚拟化软件 yum install kvm libvirt python-virtinst qemu-kv…
WARN util.NativeCodeLoader
1、错误描述 当在Hadoop sbin目录下执行start-dfs.sh脚本的时候,出现报错17:52:29 WARN util.NativeCodeLoader: Unable to load native-hado…
一次HBase集群崩溃的修复历程
【前言】最近部门因为数据安全问题需要迁移线上生产环境HBase集群的网段,在集群重启后发生如下两个错误,导致HBase集群无法正常恢复:(1)HMaster节点自动失败;(2)部分Region出现offline和RIT。…
HBase优化四——HTable优化
HTable是HBase客户端与HBase服务端通讯的Java API对象,客户端可以通过HTable对象与服务端进行CRUD操作(增删改查)。它的创建很简单: Configuration conf = HBaseCon…
HBase 命令行操作
1. 进入命令行 # hbase shell 2. 数据表管理 2.1 列出所有表 hbase(main):018:0> list 2.2 创建数据表 hbase(main):023:0> create …