吉林省自然科学基金(201215016)
- 作品数:2 被引量:21H指数:2
- 相关作者:付园李玲麻晓珍张海蓉任青更多>>
- 相关机构:吉林大学更多>>
- 发文基金:吉林省自然科学基金更多>>
- 相关领域:电子电信更多>>
- 云存储系统中数据冗余策略优化问题被引量:14
- 2013年
- 针对云存储系统现有冗余策略及其改进策略的不足,提出一种将完全备份与改进的RS(Reed-Solomon)纠删码结合的自适应数据冗余策略RIRS(Replication Improved RS)。该策略能根据具体应用环境调整参数以最大限度地优化系统性能。在参数调整使其退化成纯粹的完全备份方法条件下,提出一个动态副本管理优化模型DRMO(Dynamic Replication Management Optimized)对其进行改进。实现副本数和副本位置的动态调整。分析表明,RIRS充分融合了完全备份和纠删码冗余的优势,能节省存储空间,降低访问时延并提高系统的可靠性和稳定性。在此基础上提出的DRMO能在满足数据有效性要求的同时,进一步节省存储空间并实现负载均衡。
- 李玲付园麻晓珍张海蓉
- 关键词:冗余策略纠删码分布式文件系统
- 基于Hadoop的社交网络服务推荐算法被引量:7
- 2013年
- 为高效处理社交网络产生的海量数据,并保证社交网的可扩展性,将TF-IDF(Term Frequency-InverseDocument Frequency)算法进行MapReduce化设计,并在Hadoop云平台上实现分布式的TF-IDF算法。利用该算法提取用户微博中的关键词,再根据关键词发现用户的兴趣,并对用户做相应的推荐。为验证分布式TF-IDF算法的有效性和可扩展性,与TextRank算法的结果做对比。实验结果表明,分布式TF-IDF算法提取的关键词能更准确地描述用户的特性,同时具有良好的可扩展性。
- 李玲任青付园陈鹤梅圣民
- 关键词:MAPREDUCE模型