某证券公司网络流量采集平台项目
某证券公司已成立三十余年，业务覆盖全国，经营规模排名全国证券业前二十。随着业务的发展和技术的进步，其主要应用业务绝大部分已经部署在云计算环境下的虚拟机平台。近年来，为了应对网络维护方面的新需求和网络安全方面的新挑战，在网络性能监测、业务运行分析和网络安全防护方面先后部署上线了一系列的网络流量可视化分析工具。
网络流量可视化分析工具的基础数据来源自生产网的实时业务报文，通过部署分层架构的分流器产品，用户构建了统一管理和统一调度的流量采集平台。通过交换机端口镜像方式采集的旁路实时报文由流量采集平台统一汇集、过滤、预处理之后，根据分析工具的需求复制输出给后端各个分析工具。由于绝大多数业务都部署在虚拟机平台上，交换机镜像方式采集的旁路业务报文通常只能覆盖“南北向”业务流量，对于宿主机内部虚拟机之间的“东西向”业务流量则无能为力，这部分流量也就成为了可视化分析的盲点。如何解决这部分监控盲区，并与通用流量采集相结合成为用户的重要诉求。在项目建设中，我公司采用自主研发的VMware软采探针结合分流器产品的隧道终结功能实现了传统镜像方式采集报文与云环境软采报文的统一处理和统一调度，全面覆盖了南北向业务流量和东西向业务流量的实时监控。
云环境下的流量采集前端是由软采探针实现的，其实时监听vSwitch流量，按预设的规则对采集报文进行报文过滤、打标签、打时间戳、切片截短等预处理操作，并将处理后的数据通过VxLAN隧道传输至分流器设备的隧道终端，进而通过流量采集平台统一调度。采用这一方式弥补了传统流量监控的不足，覆盖了监控盲区，并与既有的流量采集平台高度融合，形成整体流量采集解决方案。
