专利名称:一种基于远程日志备份的HBase数据可用性及持久
性的方法
专利类型:发明专利
发明人:杨峰,陈宁昕,孙晓燕,周学海,唐长城,谢飞,赵伟,李政申请号:CN201410095611.9申请日:20140314公开号:CN103870570A公开日:20140618
摘要:本发明公开了一种基于远程日志备份的HBase数据可用性及持久性的方法,HBase的数据节点写入时,首先通过分布式系统封装日志记录,并通过网络把日志备份到预先指定的远程节点,保证数据的可用性和持久性,并以此为基础,把大量用户数据和日志记录暂存在内存中,减少数据处理过程中的数据持久化进程;当HBase的数据节点处于空闲的时候,主动把内存中的数据持久化到文件系统,减轻内存存储压力,减少写操作过程中发生持久化进程的频率,提高数据写入的时间性能。这种基于远程日志备份的HBase数据可用性及持久性的方法保证了数据的可用性、持久性,大大提高数据写入速度、提高系统性能。
申请人:广州携智信息科技有限公司
地址:510000 广东省广州市天河区黄埔大道西路33号23楼BCD1房
国籍:CN
代理机构:广州圣理华知识产权代理有限公司
更多信息请下载全文后查看
因篇幅问题不能全部显示,请点此查看更多更全内容