您的位置: 专家智库 > >

李文杰

作品数:1 被引量:10H指数:1
供职机构:中国科学院成都计算机应用研究所更多>>
发文基金:国家高技术研究发展计划更多>>
相关领域:自动化与计算机技术更多>>

文献类型

  • 1篇中文期刊文章

领域

  • 1篇自动化与计算...

主题

  • 1篇动态副本
  • 1篇容灾
  • 1篇数据容灾
  • 1篇纠删码
  • 1篇分布式
  • 1篇分布式存储
  • 1篇分布式文件
  • 1篇分布式文件系...
  • 1篇副本
  • 1篇HADOOP...
  • 1篇HDFS

机构

  • 1篇中国科学院成...
  • 1篇中国科学院研...

作者

  • 1篇李文杰
  • 1篇崔喆
  • 1篇李晓恺
  • 1篇代翔

传媒

  • 1篇计算机应用

年份

  • 1篇2012
1 条 记 录,以下是 1-1
排序方式:
基于纠删码和动态副本策略的HDFS改进系统被引量:10
2012年
为了让Hadoop分布式文件系统(HDFS)达到更高的存储效率以及更加优化的负载均衡能力,针对HDFS的多副本存储技术提出了改进方案——Noah。Noah引入了编码和译码模块,对HDFS中的block进行编码分解,生成更多数量的数据分片(section),并随机地分散保存到集群当中,替代原有系统的多副本容灾策略;在集群出现节点失效的情况下,通过收集与失效block相关的任意70%左右的section进行原始数据的恢复;同时根据分布式集群运行情况以及对副本数目需求的不同采用动态副本策略。通过相关的集群实验,表明Noah在容灾效率、负载均衡、存储成本以及安全性上对HDFS作了相应的优化。
李晓恺代翔李文杰崔喆
关键词:HADOOP分布式文件系统分布式存储数据容灾动态副本
共1页<1>
聚类工具0