王远
- 作品数:3 被引量:54H指数:3
- 供职机构:国网电力科学研究院更多>>
- 发文基金:国家电网公司科技项目国家高技术研究发展计划更多>>
- 相关领域:自动化与计算机技术更多>>
- 一种基于HBase的智能电网时序大数据处理方法被引量:17
- 2016年
- 随着物联网关键技术与理论的发展,物联网应用受到了越来越多的关注。智能电网是一类典型的物联网应用,遍布全网的传感器收集及产生了大量反映关键设备运行状态的时序数据。如何利用时序数据确保智能电网的安全以及稳定运行是当前的研究热点之一。针对智能电网时序数据设备多、数据规模大、产生速度快等特点,提出了一种基于HBase的海量时序数据存储处理方法,着重介绍了如何利用策略驱动技术实现时序数据的灵活存储与处理。通过构建HBase集群,验证了该方法的有效性。
- 王远陶烨袁军何卫
- 关键词:大数据物联网HBASE时序数据
- 智能电网时序大数据实时处理系统被引量:29
- 2015年
- 针对智能电网时序数据设备多、数据规模大、产生速度快等特点,设计并实现了一个面向智能电网的时序大数据实时处理系统。针对电网领域"批量"与"快照"两类典型场景,提出面向场景的时序数据采集技术,实现了时序数据的高速、可靠采集;基于流计算技术,实现了各类时序数据的高速预处理;设计了面向时序数据的混合存储模型,综合应用键值模型与关系模型,实现了时序数据的可靠存储和高效访问。通过模拟某省用电信息采集应用场景,验证了系统性能:单节点数据采集能力超过1 000万/秒,查询可达到秒级甚至微秒级响应。
- 王远陶烨蒋英明陈波陈立宇
- 关键词:大数据智能电网流计算
- 基于数据流转发的实时数据交换系统设计被引量:10
- 2016年
- 针对传统的基于全量转发机制的消息中间件应用于电力信息系统大规模数据交换时效率低的问题,设计并实现了基于数据流转发的实时数据交换中间件。基于队列缓冲技术,实现了消息型数据的异步发送与批量确认;设计了流式数据转发机制,消除数据在传输节点上的缓存延迟与缓存资源代价,提高了数据传输的及时性与并发性;结合分布式与数据路由思想,实现了对第三方系统透明的节点组网与数据路由功能。通过模拟某省电力信息系统数据交换场景,验证了系统性能,数据交换能力达3 000并发,千兆带宽环境下系统传输速度达980 MB/s,交换延迟在毫秒级。
- 曹健刘琼王远
- 关键词:消息中间件数据交换数据流异步传输