分布式数据流

作品数:70被引量:214H指数:6
导出分析报告
相关领域:自动化与计算机技术更多>>
相关作者:毛国君王伟平陈世平张冬冬任家东更多>>
相关机构:北京工业大学中央财经大学燕山大学东北大学更多>>
相关期刊:《计算机应用》《应用科学学报》《计算机技术与发展》《武汉理工大学学报》更多>>
相关基金:国家自然科学基金国家高技术研究发展计划国家重点基础研究发展计划国家教育部博士点基金更多>>
-

检索结果分析

结果分析中...
条 记 录,以下是1-10
视图:
排序:
基于分布式数据流聚类的成绩层次化评估方法
《保定学院学报》2024年第4期105-110,共6页陈海英 陈华 
湖北省高等教育学会教育科研课题立项“数字化转型背景下高职教师信息化教学能力提升路径研究”(2023XD120)。
为提高成绩评估结果的准确率,针对成绩数据具有的多元化、容量大、分布式的特点,引入分布式数据流聚类算法,优化数据聚类精度和时效性,实现成绩层次化评价.首先,通过聚类特征指数直方图建立分布式数据流挖掘矩阵,提高成绩数据的聚类性能...
关键词:分布式数据流 聚类算法 成绩评估 直方图 挖掘矩阵 层次分析法 全局聚簇模型 
面向分布式在线学习的共享数据方法被引量:2
《控制与决策》2021年第8期1871-1880,共10页张宇 刘威 邵良杉 
辽宁省教育厅项目(LJ2019QL016);国家自然科学基金项目(71771111)。
分布式数据流已成为现代数据驱动应用产生数据的主要形式,而局部节点的数据虽然独立存储,但彼此之间是相互关联的,因此如何高效地共享局部节点数据来构建全局学习器是分布式在线学习的关键问题.针对此问题,提出一种分布式在线学习的数...
关键词:分布式数据流 全局学习器 在线学习 数据共享 半监督聚类 数据集重构 
分布式数据流处理系统管理中负载均衡问题建模与求解被引量:4
《运筹与管理》2021年第4期155-162,共8页唐颖峰 陈世平 
国家自然科学基金资助项目(61170277,61472256);上海市教委科研创新重点项目(12zz137);上海市一流学科建设项目(S1201YLXK)。
对分布式数据流处理系统管理中,处理节点负载均衡问题进行了研究。阐述了分布式数据流处理系统的运行机理以及节点负载不均衡的成因,并提出了对系统负载均衡调整的优化方案;对提出的优化方案建立模型,并对模型的适用条件进行理论分析;...
关键词:系统管理 分布式数据流处理系统 负载均衡 组合优化问题 蚁群算法 
基于分布式数据流的大数据信息安全评估平台研究被引量:1
《蚌埠学院学报》2021年第2期84-87,共4页潘锦锋 胡小琴 
福建省中青年教师教育科研项目(JAT190931)。
为了提升高效频繁集大数据的信息安全性,提出了基于分布式数据流的大数据信息安全评估平台。首先构建数据结构融合模型,采用闭频繁项特征融合的方法,实现对分布式数据流的频繁集挖掘;结合关联规则挖掘和结构化数据检测的方法,实现了对...
关键词:分布式数据流 大数据 信息安全 频繁项集 
分布式数据流数据倾斜均衡方法研究被引量:4
《长春大学学报》2020年第10期11-20,共10页侯震梅 杨玉莹 
对数据倾斜现象的诱发因素进行了研究,针对分布式数据流的数据倾斜问题提出一种具有实时监控节点负载,及时建立、更新数据迁移路由表的实时的、动态负载均衡方法,通过数据迁移与数据回迁策略保证实现最小迁移代价以及高效的负载均衡。...
关键词:分布式系统 流处理 数据倾斜 负载平衡 数据迁移 
分布式数据流计算系统的数据缓存技术综述被引量:6
《大数据》2020年第3期101-116,共16页袁旭初 付国 毕继泽 张岩峰 聂铁铮 谷峪 鲍玉斌 于戈 
国家重点研发计划基金资助项目(No.2018YFB1003404);国家自然科学基金资助项目(No.61672141);中央高校基本科研业务费专项资金资助项目(No.N181605017,No.N181604016)。
数据流编程模型以其高度并行计算、支持流水线处理、支持函数式编程等优点被许多主流的计算系统采用。在分布式数据流系统和异构数据流系统中,算子之间数据生产和数据消化的速度不一致可能会导致数据堆积或者算子闲置等问题。为支持高...
关键词:数据流 缓存 分布式系统 消息队列 
大数据分析下分布式数据流处理技术研究被引量:3
《电子元器件与信息技术》2020年第2期92-93,共2页龚芳海 
在大数据的影响下,实时的数据流处理已经成为迫切需要解决的问题,因此数据流处理技术已经成为新的研究热点.分布式数据流处理技术能够对当下的数据处理问题进行合理解决,它对于数据计算的要求持续性和可靠性都是比较高的,本文就是对这...
关键词:大数据分析 分布式数据流 处理技术 
大数据分析下分布式数据流处理技术研究被引量:6
《软件工程》2019年第12期44-46,共3页刘琴 
由于数据流的不稳定性,将数据流查询安排在固定节点上就会造成分布式数据流处理技术很难对计算资源实现较高的处理效率,基于此,提出大数据分析下分布式数据流处理技术研究。具体流程是数据收集、历史数据的存储和查询、Storm实时处理、...
关键词:大数据 分布式 数据流处理技术 处理效率 
基于分布式数据流的大数据分类算法
《饮食科学》2019年第4期135-135,共1页李恒波 
大数据是需求驱动的概念,大数据根据主要技术特征分为分布式和流动式,随着数据库系统的升级和扩张,现有的数据处理技术已经难以满足企业对大数据应用的要求。通过对算法整体流程的设计、数据分类形成数据集再对算法的步骤进行描述,最后...
关键词:大数据 分类算法 分布式数据 
大数据环境下的分布式数据流实时处理技术研究(英文)被引量:4
《机床与液压》2019年第6期150-155,共6页梁肖 孙丽 
Research topic of Hebei Department of human resources and social security in 2016-Research on the transfer of employment channel based on large data in rural labor force(JRS-2014-1106);Research project of Hebei Professional College of Political Science and Low in 2016 "Research on the problems and Countermeasures of students’Entrepreneurship in E-commerce Major"(ZF20160613)~~
大数据背景下的海量分布式数据流处理技术要求较高的实时性和成功率。为了提高分布式环境下数据流实时处理的实时性,采用Hadoop分布式系统平台,提出了一种Map Reduce工作流实时调度优化方法。该方法采用2个相关参数来动态调整每个作业...
关键词:大数据 MAP REDUCE 工作流 分布式 调度方法 
检索报告 对象比较 聚类工具 使用帮助 返回顶部