周薇
- 作品数:6 被引量:15H指数:1
- 供职机构:中国科学院计算技术研究所更多>>
- 发文基金:国家电网公司科技项目国家重点基础研究发展计划国家自然科学基金更多>>
- 相关领域:自动化与计算机技术电气工程天文地球更多>>
- 最近邻查询方法及系统
- 本发明提供一种最近邻查询方法,用于为基础数据集中的至少一个待查找对象在参考数据集中查找与所述待查找对象距离最近的对象;该方法包括:对基础数据集进行分割,得到多个分片;对参考数据集进行分割,得到多个分片;在与所述待查找对象...
- 戴娇韩冀中周薇
- 基于分布式键值对存储技术的EMS数据库平台被引量:15
- 2012年
- 为解决智能电网系统中能量管理系统(energy management system,EMS)数据指数级增长带来的海量数据存储和快速访问问题,提出一种基于分布式键值对存储EMS数据的方法,将结构化与非结构化数据统一按照键值对形式进行表达,并分布存储于集群中。以该方法为基础,设计并实现了一种新的EMS数据库平台,该平台是混合数据库平台,支持关系库与非关系型数据库一体化访问,同时针对EMS的查询特征进行了系统优化,采用混合索引策略提升多维与高维数据的查询性能。实验结果表明:与传统EMS数据库管理系统相比,新的EMS数据库平台能够满足EMS海量多业务数据的一体化存储需求,支持高效并发访问,具有良好的扩展性和容错能力。另外,该系统可以在商用计算机上运行,能够有效地降低系统成本。
- 闫湖周薇李立新戴娇韩冀中狄方春
- 关键词:EMS智能电网分布式存储
- 用MapReduce框架构建虚拟天文台数据节点
- 2012年
- MapReduce是一种大规模分布式并行处理框架,最初被用于互联网服务中的海量数据处理,并逐渐扩展到各个行业领域。目前,虚拟天文台面临着越来越多的地面及空间望远镜观测到的海量天文数据。为了提高中国虚拟天文台数据节点处理海量天文数据的能力,首次提出基于MapReduce框架构建中国虚拟天文台数据节点的方法,并以批量星表交叉认证为例描述了具体实现过程,性能评估结果证明基于MapReduce框架构建虚拟天文台数据节点,可以在性能、扩展性与成本等多方面获得收益。
- 宋烜周薇韩冀中崔辰州
- 关键词:中国虚拟天文台
- 一种分布式文件系统及其访问方法
- 本发明公开了一种HDFS及其访问方法和系统。所述方法,包括下列步骤:分布式文件系统接收客户端发来的访问请求,根据实际情况设置packet的大小;获取所述访问请求的数据的起始偏移值,以及请求数据的长度,计算需要chunk的...
- 廖浩均韩冀中戴娇周薇路远征
- 最近邻查询方法及系统
- 本发明提供一种最近邻查询方法,用于为基础数据集中的至少一个待查找对象在参考数据集中查找与所述待查找对象距离最近的对象;该方法包括:对基础数据集进行分割,得到多个分片;对参考数据集进行分割,得到多个分片;在与所述待查找对象...
- 戴娇韩冀中周薇
- 文献传递
- 一种分布式文件系统及其访问方法
- 本发明公开了一种HDFS及其访问方法和系统。所述方法,包括下列步骤:分布式文件系统接收客户端发来的访问请求,根据实际情况设置packet的大小;获取所述访问请求的数据的起始偏移值,以及请求数据的长度,计算需要chunk的...
- 廖浩均韩冀中戴娇周薇路远征
- 文献传递