扩展:Spark:DataFrame生成HFile 批量导入Hbase 在上一篇博文中遗留了一个问题,就是只能处理DataFrame 的一行一列,虽然给出一个折中的办法处理多个列,但是对于字段多的DataFrame却略显…
标签:hfile
HBase-原理总结
先放一张自己总结的图 [图片上传失败…(image-619f9f-1540812453635)] 数据模型 一个RegionServer会管理多个Region,一个表的一段键值会生成一个Region,个别情况…
Hbase 的小合并大合并
compaction从store上面,选取一些HFile进行合并。把key-value按顺序排列写入到新的文件下面,取代之前的文件提供数据。分为minorcompaction和majorcompaction。 1.min…