基于大数据技术的用户小数据管理  

Small Data Management of Users Based on Large Data Technology

作　　者：杨晓刚 姜毅[2] 张璠 王伟军[3] 

机构地区：[1]浙江理工大学科学技术研究院,浙江杭州310018 [2]浙江理工大学经济管理学院,浙江杭州310018 [3]华中师范大学信息管理学院,湖北武汉430079

出　　处：《情报理论与实践》2018年第3期29-33,15,共6页Information Studies:Theory & Application

基　　金：教育部人文社会科学研究项目"移动互联网环境下个性化信息服务研究--基于情景感知和本体的方法"(项目编号:14YJC870010);浙江省软科学一般研究项目"社会化媒体环境下科技人才的知识共享机制及对策研究"(项目编号:2015C35024);浙江省自然科学基金项目"基于技术挖掘的创新路径预测研究:以电子商务领域为例"(项目编号:LY14G030022)的研究成果

摘　　要：[目的/意义]小数据以用户个体为中心,其计算、分析和应用具有更强的针对性。为解决用户小数据的管理问题,提出了一种基于大数据技术的小数据管理模式。[方法/过程]分析了小数据的基本概念和来源、小数据和大数据的异同和融合等问题,从用户小数据的采集、存储和使用3个方面讨论了用户小数据的管理方法,给出了基于MongoDB+Spark大数据技术的用户小数据管理实例。[结果 /结论]通过大数据技术和传统数据管理技术的结合,能够更加高效和方便地管理用户小数据,从而推动面向用户个体的信息服务质量的提升。[Purpose/significance] Small data focus on users,so the calculation,analysis and application of small data are more targeted. In order to solve the management problem of small data of users,a new management model of small data based on large data technology is proposed. [Method/process] The paper analyzes the basic concepts and sources of small data and the differences and integration between small data and big data,and discusses the small data management from small data acquisition,storage and application. An example of small data management based on MongoDB ＋ Spark large data technology is given. [Result/conclusion]Through the combination of big data technology and traditional data management technology,the small data of users can be managed more efficiently and conveniently,so as to promote the quality of information service for individual users.

关 键 词：用户 小数据 大数据 个性化服务 数据管理 

分 类 号：TP311.13[自动化与计算机技术—计算机软件与理论]