基于大数据的数据清洗技术及运用  

作　　者：钱余发 张玲 

机构地区：[1]中国电子科技集团公司第五十四研究所

出　　处：《数字技术与应用》2023年第3期84-86,113,共4页Digital Technology & Application

摘　　要：近年来,随着大数据时代的来临,对海量信息进行处理分析是一个必然趋势。在这个过程中需要大量的数据来支持,需要使用和管理好这些有效数据。但是目前大多数企业还没有建立起完善、高效的模型去分析与挖掘出有价值的信息。因此本文将以国内外已有研究为基础并结合我国实际情况提出了一些关于构建体系以及运用大数据技术的方法 ,促使更好地利用大数据库进行海量信息处理。1数据清洗技术概述1.1大数据的数据清洗技术定义大数据清洗技术是指通过对海量数据的分析和整理,从中抽取有价值信息,从而降低处理成本、提高效率。

关 键 词：数据清洗 大数据 海量信息处理 数据库 构建体系 有效数据 海量数据 处理成本 

分 类 号：TP31[自动化与计算机技术—计算机软件与理论]