您的位置： 专家智库 > >

熊倩

作品数：1 被引量：5H指数：1
供职机构：湖北大学计算机与信息工程学院更多>>
发文基金：湖北省自然科学基金国家自然科学基金更多>>
相关领域：自动化与计算机技术更多>>

合作作者

文献类型

  • 1篇中文期刊文章

领域

  • 1篇自动化与计算...

主题

  • 1篇HADOOP
  • 1篇MAPRED...
  • 1篇SHUFFL...

机构

  • 1篇湖北大学

作者

  • 1篇郭明
  • 1篇徐婕
  • 1篇熊倩

传媒

  • 1篇计算机应用

年份

  • 1篇2017
共 1 条 记 录，以下是 1-1
全选 清除 导出
排序方式：
MapReduce Shuffle性能改进被引量：5
2017年
针对Reduce端从Map端拷贝大量结果数据耗时长的问题,提出一种新方案即对Map节点上同一个作业的多个Map任务所产生的大量临时结果数据进行合并,以取代原有Map Reduce架构对单个Map任务的结果数据作合并的机制。该方案减少了Map节点的输出结果数据量,能减少整个集群的网络传输数据量,节省Reduce端拷贝Map端输出数据的时间,从而减少了Map Reduce作业执行时间,提升了Map Reduce的执行性能。
熊倩张郭明徐婕
关键词：HADOOPMAPREDUCESHUFFLE
全选 清除 导出
共1页<1>
聚类工具0