深部探测技术与实验研究专项(SiProbe-09-01)
- 作品数:9 被引量:22H指数:3
- 相关作者:魏晓辉李洪亮庄园李翔李聪更多>>
- 相关机构:吉林大学中国石油天然气集团公司更多>>
- 发文基金:深部探测技术与实验研究专项国家自然科学基金吉林省科技发展计划基金更多>>
- 相关领域:自动化与计算机技术天文地球更多>>
- 支持大规模流数据在线处理的自适应检查点机制被引量:1
- 2017年
- 提出了一种支持流数据处理、在线动态调节周期的检查点机制。首先,面向突发性流场景,建立恢复时间计算模型,机制为节点故障提供最大恢复时间保障。其次,针对数据流实时变化的特点,提出检查点实时性代价量化模型。最后,设计流量高峰避让协议,基于检查点实时性代价判断,动态选取最佳检查点时机。对比实验结果表明:与传统检查点方法相比,该机制在灵活性和实时性方面具有明显优势,能够满足流数据处理高可靠性和实时性容错的要求。
- 魏晓辉刘智亮庄园李洪亮李翔
- 关键词:计算机系统结构流数据处理检查点
- 改进的局部波数法及其在磁场数据解释中的应用被引量:3
- 2012年
- 局部波数法是一种进行磁场数据解释的常用方法。现有的局部波数法在进行反演时往往需要计算局部波数的导数,会明显地增大噪声的干扰,为解释结果带来误差。提出3种利用磁异常在不同位置或不同高度上局部波数的简单组合来进行场源体深度及构造指数的计算方法,不需要计算局部波数的导数,降低了噪声的干扰,增强了反演结果的稳定性。通过理论模型试验,证明改过的局部波数法在有无噪声的情况下均能很好地完成异常的反演,其反演结果与理论值之间的差距小于理论值的5%。将其应用于四川某地区磁异常的反演中,其结果与解析信号的欧拉反褶积法的反演结果吻合。
- 李丽丽杜晓娟马国庆
- 关键词:磁场导数
- 支持大规模流数据处理的弹性在线MapReduce模型及拓扑协议
- 2016年
- 针对现阶段大规模流数据在线处理的广泛需求,本文提出了弹性在线MapReduce流数据处理模型及相关的动态拓扑结构协议。该模型兼容现有MapReduce模型,采用内存计算模式,并具有动态的作业拓扑结构,支持大规模流数据处理作业在运行过程中的弹性调整,从而满足流数据的时效性、动态性和突发性等特殊要求。在弹性在线MapReduce模型的基础上建立了流数据处理作业动态拓扑结构管理机制,设计了作业在线初始化协议和在线调整协议。为进一步提高系统灵活性和整合资源,提出了作业间的操作共享概念,设计了作业共享协议。通过协议分析,本文提出的在线初始化协议、在线动态调整协议及作业共享协议的最大复杂度均为O(n);在数据流量发生突发性变化时,系统具有良好的可伸缩性。
- 魏晓辉李翔李洪亮李聪庄园于洪梅
- 关键词:计算机系统结构流数据处理MAPREDUCE拓扑结构
- 基于虚拟集群在线迁移的虚拟化资源整合算法被引量:2
- 2016年
- 针对虚拟集群内部关联性和并行作业的运行特点,基于虚拟集群在线迁移机制,提出一种虚拟化资源整合算法.先对系统建模,描述云计算环境下的虚拟化资源整合问题;再使用区域划分法对异构资源分类,从而初步降低问题的规模和求解难度;最后提出在同构子域中进行虚拟集群迁移的FFD_grp算法.采用同种负载和多种资源分配方法模拟多种资源使用情况,并对该方法进行验证.实验结果表明,FFD_grp算法能显著提高资源整合效果,有利于抑制资源碎片的产生.
- 魏晓辉沈晓茹李洪亮
- 关键词:云计算虚拟集群资源整合
- 俄罗斯贝加尔湖—日本仙台断面地震波速结构及其地质意义被引量:5
- 2012年
- 本文以中俄、俄日学者合作所得到的地球物理资料为主,结合其它相关地质-地球物理数据,组构了俄罗斯贝加尔湖—日本仙台(BS)4000km长断面,用于区域性大尺度地研究东北亚洲地壳结构和一系列地质构造问题.研究BS断面地震波速结果表明:(1)西伯利亚板块和黑龙江板块地壳结构变化较大,并可分为上、中、下部地壳,欧亚板块东部陆缘带地壳结构较简单,基本两分.贝加尔裂谷带下部地壳厚度比松辽盆地的薄约7km,而上部地壳则相反,前者的比后者的厚约9km.两个裂谷带在Moho界面之下的波速分布差异也较大.(2)结合前人认识,综合分析认为,贝加尔裂谷带属主动式裂谷,松辽盆地属于混合型裂谷.贝加尔裂谷形成动力主要来自地球构造圈B″层物质上涌所形成的地幔热柱的垂向作用,由BLV带佐证,松辽盆地形成动力主要来自太平洋板块斜向俯冲的中远程效应.(3)日本国所位于的西太平洋岛弧带是多地震带,除了太平洋板块俯冲产生的浅部效应、地壳中断裂与流体的直接作用等因素,本文指出仙台等速块的物性条件是岛弧带的主要不稳定因素.同时指出需要关注日本东海岸深约30~40km的大级次地震的发生.
- 于平关晓坤赵震宇杨宝俊丁见焕冯晅刘万崧
- 基于优化的同构子图搜索的虚拟网络映射算法被引量:7
- 2013年
- 针对现有虚拟网络映射算法的不足,首先提出了一个综合考虑网络中节点资源需求(能力)和拓扑属性的节点资源能力评价方法,合理地评价节点资源能力,优化了虚拟节点的映射顺序;其次改进了虚拟节点映射时备选物理节点的选择过程,提高了虚拟链路映射质量;最后通过考虑物理网络子区域内的资源总量,优化了算法中初始资源分配区域的选择。实验结果表明:与已有的算法相比,本文映射算法在映射质量、长期平均收益、长期平均接收率、算法执行时间等方面均有明显提高。
- 魏晓辉邹磊李洪亮
- 关键词:计算机应用虚拟网络映射算法网络拓扑结构
- 支持大规模流数据处理的在线MapReduce数据传输机制被引量:4
- 2015年
- 针对流数据规模参差不齐、流量动态变化且突发性较强的特点,提出一种可伸缩的动态MapReduce计算模型,支持大规模动/静态数据在线处理.基于Event推送方式,利用Netty底层异步通信方式等技术,建立在线MapReduce数据传输机制,进一步实现其原型程序,解决了大规模分布式计算程序的快速在线传输和数据分发等问题,支持流数据动态分发机制,为动态MapReduce模型提供支撑.与HadoopOnline系统的传统Socket管道传送方式相比,该方法能有效提高作业之间数据的传送效率,从而提高大规模流数据处理的实时性.
- 魏晓辉李聪李洪亮李翔刘圆圆李丽娜庄园
- 关键词:大数据流数据处理MAPREDUCE模型数据传输机制
- 动态在线Map/Reduce流数据处理模型及作业拓扑管理协议
- 2015年
- 针对海量流数据的在线处理需求,提出一种不同于传统Map/Reduce流数据处理的系统模型Flexible workflow.该模型对workflow处理单元进行在线Map/Reduce并行化,实现了SPATE系统;同时为该系统定义一组关于作业的建立、管理和维护的通信规程,即拓扑管理协议.SPATE系统解决了在线Map/Reduce流数据处理过程中要求实时性及可扩展性的问题.实验验证了拓扑管理协议的有效性,拓扑管理协议能有效管理Flexible workflow流数据处理模型.
- 魏晓辉李翔李洪亮李聪庄园
- 关键词:流数据处理FLEXIBLEMAP/REDUCE拓扑管理
- 分布式流处理系统中基于位置感知的操作共享优化算法
- 2016年
- 针对流数据规模大、基本数据处理操作有重叠等特点,提出一种基于位置感知的操作共享优化算法.假设操作预先分配了计算节点资源,在保证流处理实时性和动态性的基础上,利用多个流数据作业间拓扑结构和操作功能的相似性,基于DAG图匹配方法建立操作共享备选集;以输出带宽为约束条件,建立一个操作共享收益优化问题模型,解决了流处理过程中传统操作共享方法对集群的输出带宽影响考虑不充分的问题.仿真实验结果表明,该方法较原有算法更充分地考虑了计算节点制约因素,并提高了共享收益,从而可有效地节省系统计算资源.
- 魏晓辉刘晓斐李洪亮李兰馨李丽娜崔浩龙李想
- 关键词:流数据