面向生产制造的大数据分析功能模块设计与实现  

作　　者：赵鹏 张青 胡刚 师玉玲 胡宁 

机构地区：[1]中国运载火箭技术研究院,北京100076

出　　处：《科技创新与应用》2024年第31期130-132,137,共4页Technology Innovation and Application

摘　　要：该文探究一种面向生产制造的大数据分析平台的设计要点及其功能实现方式。该平台可以与分析数据库、企业数据库之间实现数据共享,通过收集、分析企业数据,在产品质量监督和生产工艺改进等方面发挥重要作用。在数据导入模块应用SQOOP技术,提高数据导入导出速率;数据分析模块应用KNN分布式并行算法,通过批量化计算提高数据处理效率;基于Spark功能栈开发大数据集群功能模块,基于Spring框架和MCV技术构建平台可视化模块。通过数据快速分析和结果可视化呈现,为用户加强生成制造管理提供帮助。This paper explores the design points and functional implementation methods of a big data analysis platform for manufacturing.The platform can realize data sharing with analytical databases and enterprise databases.By collecting and analyzing enterprise data,it plays an important role in product quality supervision and production process improvement.SQOOP technology is applied to the data import module to improve the data import and export rate;the data analysis module applies the KNN distributed parallel algorithm to improve data processing efficiency through batch calculation;the big data cluster functional module is developed based on the Spark function stack,and the platform visualization module is built based on the Spring framework and MCV technology.Through rapid data analysis and visual presentation of results,users are helped to strengthen production manufacturing management.

关 键 词：大数据分析 可视化 SQOOP技术 大数据集群 生产工艺 

分 类 号：TP311.13[自动化与计算机技术—计算机软件与理论]