Spark环境下网络数据安全监测技术  

作　　者：林丽星[1] 

机构地区：[1]闽西职业技术学院信息与制造学院,福建龙岩364021

出　　处：《安阳师范学院学报》2021年第5期37-40,共4页Journal of Anyang Normal University

基　　金：2018年度福建省中青年教师科研项目(信息化专项)(项目编号JZ180191)。

摘　　要：Spark集群环境中的数据构成复杂、规模庞大,为此基于K-mean聚类算法设计一种并行式网络数据安全监测方法。首先设计Spark集群网络数据采集拓扑结构,使用Netsniff-ng抓包工具采集网络数据包;其次布局并行化K-mean聚类算法执行流程,对网络数据流量实施信息熵量化处理,使用K-mean聚类算法划分数据类别,判别其属于安全数据还是异常数据,最终完成Spark环境下网络数据安全监测。测试结果显示,该方法监测网络数据安全的准确度较高、CPU占用率较低,满足当前Spark集群环境对安全监测方法的需求。

关 键 词：Spark环境 网络数据 并行式 K-mean聚类 安全监测 

分 类 号：TP393.08[自动化与计算机技术—计算机应用技术]