常建龙
- 作品数：5 被引量：82H指数：3
- 供职机构：复旦大学信息科学与工程学院计算机科学系更多>>
- 发文基金：国家自然科学基金更多>>
- 相关领域：自动化与计算机技术更多>>
- 数据流处理技术在电信网管系统中的应用被引量：6
- 2008年
- 网络流量监测技术是电信运营商所关注的重点之一。随着网络传输带宽的不断增加,传统的基于磁盘的处理技术已经不能够满足运营管理的需要,数据流处理技术的出现为网络流量监测应用提供了一种新的解决方案。SMART[1,2]和RealMon[3]是将数据流处理技术应用于网络流量监测的两个应用系统。文中结合上海电信在骨干网流量监测上的应用需求,对这两个系统的设计与应用进行了介绍。SMART系统以数据流上的频繁项挖掘算法为基础,支持NetFlow数据流上长时间滑动窗口内的Top-K查询,实现了对网络流量分布的实时监测。RealMon系统采用数据流上的降维分析算法对SNMP数据流进行分析,通过监测网络链路上不同流量数据的相关性变化来发现异常流量。实验和在真实环境中的应用表明,SMART和RealMon系统能够满足骨干网流量监测应用的需要,并且极大地提高了监测系统的性能。
- 宫学庆闫莺常建龙张晨周傲英
- 关键词：数据流网络流量监测TOP-K查询异常检测
- 数据流上的综合性突变检测算法
- 研究了数据流上突变检测的问题,首先分析了现有突变检测算法存在的问题,为突变检测提出了新的定义并提出了一个精确、高效的突变检测算法,保证用户以很高的准确率以及较小的时间开销检测数据流上的综合突变.该算法既能检测单调函数,又...
- 秦首科常建龙谷姗姗周傲英
- 关键词：数据流单调函数
- 数据流聚类及电信数据流管理
- 随着芯片技术、互联网技术、视频技术等的飞速发展，IT世界的计算能力、传输能力都大大提高，随之而来的是数据的极大丰富，以前难以想象的海量存储甚至可以移植到桌面的PC中。如此海量的数据，带来新的难题是如何快速处理这些数据。特...
- 常建龙
- 关键词：数据流网络流量监控异常检测数据清洗
- 文献传递
- SMART:基于数据流技术的电信网络流量监控系统被引量：3
- 2007年
- 大多数国内电信运营商现有的网络流量监控系统的分析都是基于数据文件的操作模式,处理速度远跟不上大量数据到达的速度。基于这种情况,提出了基于数据流技术来实现在线网络流量监控系统SMART。SMART收集多个路由器发送的NetflowV5或者V9格式的数据,并将其转换成用户定义的监控流;以滑动窗口的方式查询输出流量构成中Top-k频繁数据信息;监测网络流量突变;以可视化的图形和报表形式显示结果。SMART先进的数据流算法技术基础和完整的系统框架设计使得它在上海电信高效稳定的7*24h运行。
- 常建龙闫莺宫学庆戴岱周傲英
- 关键词：数据流系统网络流量监控电信
- 基于滑动窗口的进化数据流聚类被引量：73
- 2007年
- 提出了纳伪(false positive)和拒真(false negative)两种聚类特征指数直方图分别来支持纳伪误差和拒真误差窗口的聚类分析;然后,提出一种基于滑动窗口的数据流聚类方法.该方法在占用窗口大小的次线性内存空间前提下,及时保存最近数据记录的分布状况,从而实现对滑动窗口内的数据进行聚类.此外,它还可被扩展用于N-n窗口(滑动窗口的扩展模型)的数据聚类.实验采用KDD-CUP’99和KDD-CUP’98真实数据集以及变换高斯分布的人工数据集构造进化数据流.理论分析和实验结果表明,该方法具有良好的聚类质量、较小的内存开销和快速的数据处理能力.
- 常建龙曹锋周傲英
- 关键词：聚类
