Web网络大数据分类系统的设计与改进  

Design and improvement of big data classification system for Web network

作　　者：孟丽丽 宋锋[2] 

机构地区：[1]华北理工大学机械工程学院,河北唐山063009 [2]滨州学院信息工程系,山东滨州256600

出　　处：《现代电子技术》2016年第22期36-40,共5页Modern Electronics Technique

基　　金：河北省"三三三人才工程"人才培养资助项目(A201300216)

摘　　要：Web网络中的数据量巨大,传统系统只采用软件或只采用硬件实现Web网络大数据分类系统的设计,所需消耗的系统资源较多,处理时间长,配置与管理不灵活,无法满足实时性的要求。为此,设计一种新的Web网络大数据分类系统,采用软硬件相结合的形式对Web网络大数据分类系统的总体结构进行设计,分析了的系统硬件结构,主要包括数据采集器、Web网络处理器、网络接口和存储模块,并详细介绍了各硬件结构。软件设计中,给出数据采集和大数据分类的部分代码,对大数据分类的实现进行了改进。实验结果表明,采用所设计系统对Web网络大数据进行分类,不仅分类精度高,而且能耗较低、效率较高,具有好的分类性能。A new big data classification system for Web network was designed, in which a form combining hardware and software was adopted to design the overall structure of the big data classification system for Web network. The structures of the system hardwares are analyzed and introduced, mainly including data collector, Web network processor, network interface and storage module. Some codes of big data acquisition and data classification are given. The realization of big data classification was improved. The experimental results show that the designed system has high accuracy, high efficiency, low energy consumption and high classification performance for Web network big data classification.

关 键 词：WEB网络 数据采集 数据分类系统 系统设计 

分 类 号：TN926.34[电子电信—通信与信息系统] TP311[电子电信—信息与通信工程]