基于Hadoop集群下的数据分块与加密研究  

作　　者：常颖 常大俊[2] 刁一凡 

机构地区：[1]吉林建筑科技学院 [2]长春建筑学院

出　　处：《计算机产品与流通》2020年第9期111-111,210,共2页

基　　金：大学生创新创业训练计划项目吉教高字[2019]4275;校级科研扶持项目(项目编号:CJKJ202007)

摘　　要：随着数据量增加,单一存储模式下无法实现对海量数据信息存储,因此采用集群方式来实现海量数据进行有效存储,从而解决单一存储模式所带来的问题。但是,由于集群框架下每个DataNote节点由于其自身存储容量限制等问题,对数据进行分块来实现不同DataNode节点存储,提高了存储数据效率。当Client要访问集群框架下不同节点数据信息的时候,就要通过机架内或不同机架间进行数据传输,这样就会带来数据安全性问题。本文研究内容就是以Hadoop集群作为平台,对数据分块操作以及数据加密相关问题和算法进行研究,通过研究得到有效分块策略和加密算法改进,提高数据分块有效性和数据安全性。

关 键 词：HADOOP 集群框架 数据分块 加密算法 

分 类 号：TP311.13[自动化与计算机技术—计算机软件与理论] TP309.7[自动化与计算机技术—计算机科学与技术]