黄显霞
- 作品数:6 被引量:1H指数:1
- 供职机构:北京大学深圳研究生院更多>>
- 发文基金:国家自然科学基金国家重点基础研究发展计划广东省自然科学基金更多>>
- 相关领域:自动化与计算机技术更多>>
- 基于二元再生码的大数据存储系统研究被引量:1
- 2013年
- 随着信息数据量越来越大,大数据存储的可靠性变得尤为重要,因而需要在存储系统中引入冗余.基于复制的传统策略虽然简单,但其存储效率和系统可靠性均不高.纠删码提供了一种不同于复制策略的有效存储方式,然而,当系统中有文件丢失时,纠删码(如Reed-Solomon,RS)需要较高的通信负载来进行文件修复,而且编解码效率不高.针对RS码的不足,在分布式系统中引入一种新颖的再生码,称为二元再生码(binary regenerating codes,BRGC).在Hadoop分布式存储系统中部署和实施了二元再生码和RS码.实验结果表明,BRGC在编解码效率和修复带宽上均优于RS码.
- 黄显霞李挥张宇蒙张宇蒙周泰侯韩旭张华宇
- 关键词:大数据纠删码RS码HADOOP
- 基于同态的自修复码的编码、解码和数据修复方法及其存储系统
- 本发明涉及一种分布式数据存储中数据同态编码的方法,包括如下步骤:将数据量为M的数据O用正整数k分为k份,每份的数据量为M/k,即<Image file="DDA0000450317940000011.GIF" he="2...
- 李挥黄显霞侯韩旭
- 文献传递
- 基于二元再生码的大数据存储系统研究
- 随着信息数据量越来越大,大数据存储的可靠性变得尤为重要,因而需要在存储系统中引入冗余.基于复制的传统策略虽然简单,但其存储效率和系统可靠性均不高.纠删码提供了一种不同于负制策略的有效存储方式,然而,当系统中有文件丢失时,...
- 黄显霞李挥张宇蒙侯韩旭周泰郭涵张华宇
- 关键词:性能评价
- 文献传递
- 基于二元再生码的Hadoop分布式存储系统研发
- 随着信息数据量越来越大,海量信息存储的可靠性变得尤为重要。分布式存储系统中通过副本策略来提供可靠性,基于副本策略的方法虽然简单,但其存储效率不高。纠删码提供了一种不同于复制策略的有效存储方式,然而,当系统中有文件丢失时,...
- 黄显霞
- 关键词:纠删码副本策略可靠性
- 基于同态的自修复码的编码、解码和数据修复方法及其存储系统
- 本发明涉及一种分布式数据存储中数据同态编码的方法,包括如下步骤:将数据量为M的数据O用正整数k分为k份,每份的数据量为M/k,即<Image file="DDA0000450317940000011.GIF" he="7...
- 李挥黄显霞侯韩旭
- 文献传递
- 云灾备的数据修复技术
- 2012年
- 基于纠错码的云灾备系统的关于降低修复带宽的最新研究成果,文章讨论了云灾备系统中存储节点失效的修复问题。文章指出数据修复问题有3种模型:精确修复、功能修复和系统部分精确修复。在精确修复中,失效的模块需要修复精确的丢失编码包;在功能修复中,新产生的编码包可以包含不同于丢失节点的数据,只要修复的云灾备系统支持最大可分离距离(MDS)码属性。系统部分精确修复是精确修复和部分修复的之间的一个混合的修复模型。
- 李挥侯韩旭黄显霞
- 关键词:纠错码网络编码数据修复