数据局部性

作品数:32被引量:110H指数:7
导出分析报告
相关领域:自动化与计算机技术更多>>
相关作者:杨学军张纪林范东睿李东升万健更多>>
相关机构:国防科学技术大学中国科学院蒂普爱可斯有限公司杭州电子科技大学更多>>
相关期刊:《计算机研究与发展》《合肥工业大学学报(自然科学版)》《软件学报》《计算机工程》更多>>
相关基金:国家自然科学基金国家高技术研究发展计划国家重点基础研究发展计划国家杰出青年科学基金更多>>
-

检索结果分析

结果分析中...
条 记 录,以下是1-10
视图:
排序:
基于数据局部性的循环分块选择算法
《计算机科学》2024年第12期100-109,共10页廖启华 聂凯 韩林 陈梦尧 谢汶兵 
2022年河南省重大科技专项(221100210600);2022求是科研启动(自)(32213247)。
现有的多面体编译框架(如Pluto,LLVM/Polly和GCC/Graphite)在进行循环分块时,都采用了固定分块大小,无法充分发挥不同硬件的缓存特性,导致存在较大的性能差异。针对这一问题,涌现了许多基于多级缓存和数据局部性的循环分块算法,但这些...
关键词:数据局部性 多面体模型 循环分块 分块大小 负载均衡 
天气预报模型WRF中复杂Stencil性能优化
《计算机科学》2024年第4期56-66,共11页邸健强 袁良 张云泉 张思佳 
国家自然科学基金(61972376,62072431,62032023);华为项目(TC20220914048)。
天气研究与预报模式(WRF)是一种应用广泛的中尺度数值天气预报系统,在大气研究和业务预报领域发挥着重要作用。Stencil计算是科学工程应用中一类常见的嵌套循环计算模式,WRF中对大气动力学和热力学方程的数值求解引出了大量空间网格上...
关键词:WRF Stencil计算 中间变量 优化方案 数据局部性 热点函数 性能加速 
基于数据重用分析的多面体循环合并策略
《计算机科学》2021年第12期49-58,共10页胡伟方 陈云 李颖颖 商建东 
现有多面体编译工具往往使用一些简单的启发式策略来寻找最优的语句合并,对于不同的待优化程序,需要手工调整循环合并策略以获得最佳性能。针对这一问题,面向多核CPU目标平台,文中提出了一种基于数据重用分析的循环合并策略。该策略避...
关键词:编译优化 多面体模型 LLVM编译框架 循环合并 数据局部性 
图计算加速架构综述被引量:5
《计算机研究与发展》2021年第4期862-887,共26页严明玉 李涵 邓磊 胡杏 叶笑春 张志敏 范东睿 谢源 
国家重点研发计划项目(2018YFB1003501);国家自然科学基金项目(61732018,61872335,61802367,61672499);中国科学院战略性先导科技专项(C类)(XDC05000000);数学工程与先进计算国家重点实验室开放基金(2019A07)。
在大数据时代,图被用于各种领域表示具有复杂联系的数据.图计算应用被广泛用于各种领域,以挖掘图数据中潜在的价值.图计算应用特有的不规则执行行为,引发了不规则负载、密集读改写更新操作、不规则访存和不规则通信等挑战.现有通用架构...
关键词:图计算 图神经网络 加速架构 不规则访存 数据局部性 动态访存调度 负载均衡 
云环境下大规模分布式计算数据感知的调度系统被引量:10
《大数据》2020年第1期81-98,共18页刘汪根 郑淮城 荣国平 
介绍了新的调度系统,包括资源调度、应用编排、配置标签中心、云网络和云存储服务等子系统。系统通过数据拓扑感知能力保证了计算和数据的局部性,节约网络I/O开销;通过优化点对点大数据量读取的资源调度,解决网络风暴造成的影响;通过网...
关键词:云计算 调度系统 大数据 AI平台 数据局部性 分布式计算 抢占 
基于EMD距离的数据流分布式相似性连接技术被引量:4
《计算机学报》2019年第8期1779-1796,共18页许嘉 宋超 吕品 李陶深 
国家自然科学基金(61402494);广西自然科学基金青年基金(2015GXNSFBA139243);“广西八桂学者”专项经费;广西大学科研基金资助项目(XGZ141182,XGZ150322);广西高等教育本科教学改革工程项目重点项目(2017JGZ103)资助~~
随着数据获取设备的不断进步和数据获取技术的快速发展,如何分析和挖掘应用中快速产生的数据流成为亟待解决的问题.数据流的相似性连接返回两个数据流上相似的数据对,是分析和挖掘数据流的重要操作.相比于Lp范式距离,例如曼哈顿距离和...
关键词:EMD距离 相似性连接 数据流 APACHE Storm框架 数据局部性 
减少任务完成时间和数据局部性的数据复制及副本放置算法被引量:1
《电子测量与仪器学报》2018年第2期146-152,共7页廖仲夏 宋雨欣 廖启明 
国家自然科学基金(40501058,40401052);河南省重点科技公关项目(132102310003);河南省科技厅项目(142102310398,142106000059,210203088)资助
针对Hadoop框架下map任务阶段的任务完成时间和数据局部性问题,提出了一种基于拉格朗日插值多项式的数据复制和数据副本放置算法.具体实现是通过使用拉格朗日插值多项式来预测数据文件的访问计数,从而优化每个数据文件的复制因子,自适...
关键词:HADOOP 数据局部性 任务完成时间 访问计数预测 数据复制 副本 
基于PUSH机制的任务调度方法
《中南大学学报(自然科学版)》2016年第7期2334-2340,共7页张霄宏 孙江峰 赵文涛 
国家自然科学基金面上资助项目(51274088);河南省教育厅项目(ITE12103);河南理工大学矿山信息化省级重点实验室项目(KY2012-05);河南理工大学博士基金资助项目(B2012-099);河南省科技攻关项目(142102210435)~~
为降低Hadoop Map Reduce环境中任务的数据访问延时进而提高系统性能,提出一种基于PUSH机制的任务调度方法。该方法根据输入数据分布,主动将任务推送到存储其输入数据的节点。当任务在这些节点执行时,可以直接从本地磁盘读取数据,从而...
关键词:数据局部性 性能优化 任务调度 MAPREDUCE 
用户感知的重复数据删除算法被引量:7
《软件学报》2015年第10期2581-2595,共15页张沪寅 周景才 陈毅波 查文亮 
国家自然科学基金(61272454);高等学校博士学科点专项科研基金(20130141110022)
通过大量的实验分析发现:在云桌面场景下,数据拥有者之间的工作相关度越大,则该用户之间存在重复数据的概率越大.基于该实验结果,提出了用户感知的重复数据删除算法.该算法打破了数据空间局部性特征的限制,实现了以用户为单位的更粗粒...
关键词:重复数据删除 云计算 虚拟桌面云 I/O性能瓶颈 数据局部性 
针对Hadoop异构集群节点性能的数据分配策略被引量:10
《小型微型计算机系统》2015年第1期83-88,共6页林常航 郭文忠 陈煌宁 
国家自然科学基金项目(61103175)资助;教育部科学技术研究重点项目(212086)资助;福建省科技创新平台项目(2009J1007)资助;福建省教育厅科技重点项目(JA11011)资助;福建省高校杰出青年人才计划项目(JA12016)资助
当前Hadoop的实现主要针对同构集群,假设任务处理的数据基本是本地的.然而,实际应用中集群多为异构.这暴露出现有的数据分配策略对数据局部性考虑的不足,其产生的不必要数据传输耗费了大量的带宽资源和传输时间.通过结合Hadoop中数据放...
关键词:HADOOP 数据分配 数据局部性 异构集群 
检索报告 对象比较 聚类工具 使用帮助 返回顶部