众核与Spark结合的高速流量监测系统

作者:周小宇; 雒江涛; 罗林; 唐刚
来源:计算机系统应用, 2017, 26(06): 112-117.
DOI:10.15888/j.cnki.csa.005884

摘要

互联网应用的广泛普及导致了互联网流量的高速增长,这给网络运营商运营带来了巨大挑战,传统的流量监测系统的性能和可扩展性已经无法满足运营商的需求.本文尝试将众核技术与Spark相结合,基于校园网流量,提出了众核与Spark结合的高速流量监测系统.其中,众核处理器负责高速的流量采集、处理以及流量日志生成;Spark平台负责存储流量日志数据,并对其进行高速并行分析;Web Server负责数据的可视化.本文以校园网DNS流量为监测对象充分验证了该方案的可行性与扩展性.

全文