国家自然科学基金(61170013) 作品数:5 被引量:12 H指数:3 相关作者: 覃雄派 周晓云 陈红 陈跃国 焦敏 更多>> 相关机构: 中国人民大学 徐州师范大学 江苏师范大学 更多>> 发文基金: 国家自然科学基金 中央高校基本科研业务费专项资金 国家社会科学基金 更多>> 相关领域: 自动化与计算机技术 自然科学总论 更多>>
银行数据大集中环境下大规模固定报表生成 被引量:1 2012年 为了在有限的时间窗口内完成大批量报表的生成,提出ROLAP&SQL、共享扫描、Hadoop以及MOLAP&Cube Sharding等4个技术方案,其中的共享扫描技术方案通过所设计的算法实现.实验结果显示:除ROLAP&SQL技术方案不能满足时间窗口要求外,其他3种技术方案都能满足,其中Hadoop技术方案以高度的扩展性体现出很好的应用前景.综合考虑技术成熟度和性能,选择MOLAP&Cube Sharding技术方案应用于项目实践中. 覃雄派 周晓云 吴忠信 杨宏志 王玮关键词:数据大集中 大型银行 ROLAP MOLAP 基于网络内存的内存数据库高效恢复技术 被引量:3 2011年 提出了利用网络工作站(通过高速局域网络连接)内存加速内存数据库日志记录持久化的技术方案,在日志写入网络工作站的内存以后,事务即可提交,从而大大加快事务的提交过程.该方案综合运用了日志过滤、日志并行写入、检查点的日志应用等技术,提高日志写入和系统失败恢复的效率.试验证明,该技术方案在保证数据库系统可靠性的前提下,提高了恢复效率,而且提供恢复过程中的系统可用性. 周晓云 覃雄派关键词:内存数据库 内存OLAP多核并行查询优化技术研究 被引量:3 2014年 随着以大内存和多核为代表的计算机硬件技术的发展,以cache-conscious算法为中心的查询优化技术逐渐转向以multicore-conscious为中心的查询优化技术,来提高多核处理器的并行处理性能.该文的研究目标是具备复杂星型连接特点的联机分析处理OLAP技术,以查询执行代价最大的星型连接为研究对象,提出同时满足cache-conscious和multicore-conscious的多核并行连接算法DDTA-MPJ.该算法包括基于事实表水平分片和维属性列共享访问模式的查询内多核并行算法IntraDDTA-MPJ、基于QuerySlots的查询间多核并行算法InterDDTAMPJ以及中位数多核并行算法Median-MPJ.实验结果表明该算法具有良好且稳定的并行查询处理性能,线性查询处理模型能够更好地利用多核处理器的先进性能. 焦敏 张延松 王珊 陈红关键词:多核并行 数据库物理自调优研究技术综述 被引量:2 2012年 数据库物理自调优是自管理自调优数据库中一项重要的内容,为厘清这一领域的重要研究工作,需要对关系数据库物理自调优的背景、问题界定、经典技术和研究的新问题等方面进行综述。总结了数据库物理自调优的经典技术,并从优化程度、可扩展性、可用性可管理性及测试基准四个角度重点阐述了现今数据库物理自调优的关键技术和作为研究开发热点的一些问题,指出不同的物理自调优工具在技术上的共同基础,分析评价了这些关键技术及其方法的各自特点。最后还总结了该领域近几年出现的新的研究问题,并展望了未来的研究方向。 曹巍关键词:查询优化器 WHAT-IF分析 大数据与OLAP系统 被引量:3 2015年 OLAP(online analytical processing,在线联机分析处理)是关系数据基础上实现商业智能的核心技术。在大数据时代,人们迫切希望在由普通机器组成的大规模集群上能实现高性能的OLAP,然而系统性能的挑战巨大。可喜的是,近年来进展迅速,涌现了很多以Hadoop上的数据进行OLAP的所谓SQL on Hadoop系统,并且系统性能不断提升。在综述OLAP技术发展的基础上,重点对几个有代表性的SQL on Hadoop系统进行了测试分析,并展示了这类系统的性能特点。可以预见,未来在低成本的大数据OLAP市场,这类系统会占有重要位置。 杜小勇 陈跃国 覃雄派关键词:大数据 OLAP SQL HADOOP