yl-hbase-rep
hbase快照,复制实现机制,源码解析
复制对等方的实现代码
批量加载代码示例
1个快照/复制实现机制
快照实现机制,快照文件生成过程,请参考快照内容
复制实现机制,源码解析,请参考
2复制对等体的实现
参考lily二级索引的实现机制,重新实现了一个简化版本的复制对等体
复制对等服务器从源hbase同步同步接收WAL编辑,并写入目标存储(例如:solr / kafka等)
最初的复制对等节点某个区域服务器角色
3 bulkload示例
bulkload方式从hive import hbase有现成的sql可以使用
如果输入是CSV文件或parquet文件,当然也可以先建立一个hive外部表,再从hive import到hbase
也可以通过编码的方式,通过bulkload生成hfile然后再合并到hbase
致谢
yl-hbase-rep实现机制参考了lily
2021-03-24 21:07:19
1.05MB
系统开源
1