数据并行

作品数:223被引量:754H指数:14
导出分析报告
相关领域:自动化与计算机技术更多>>
相关作者:张发存沈绪榜王忠赵晓红赵明宇更多>>
相关机构:国防科学技术大学哈尔滨工业大学北京大学中国科学院更多>>
相关期刊:更多>>
相关基金:国家自然科学基金国家高技术研究发展计划国防科技技术预先研究基金中央高校基本科研业务费专项资金更多>>
-

检索结果分析

结果分析中...
条 记 录,以下是1-10
视图:
排序:
基于MapReduce的拷贝数变异测序数据并行处理方案
《计算机工程》2025年第5期177-187,共11页何亨 程凯莉 张葵 成淑君 
国家自然科学基金(62372343,61602351)。
拷贝数变异(CNV)作为一种遗传变异,广泛存在于人类基因组的基因分布中。CNV检测效率的提升不仅可以为更多的病患提供更加快速精确的CNV检测结果,大幅降低医疗成本,同时又有利于药物的研发和临床应用。基于读段深度(RD)的方法是目前最为...
关键词:拷贝数变异检测 MapReduce作业 测序数据处理 读段深度 全基因组 
基于多级实体关联的光栅断点故障数据并行挖掘方法
《激光杂志》2025年第4期180-185,共6页陈思 赵鹏 杨潞霞 
山西省重点研发计划(No.202102010101008)。
在光栅断点故障数据中,存在多种类型的实体,这些实体具有多个层级,导致关联分析变得复杂,加大了故障数据挖掘的难度。多级实体关联分析考虑了故障数据的多层次特性,通过关联相似性能够对故障数据进行更为全面的捕捉。因此,提出基于多级...
关键词:多级实体关联 关联相似度 光栅断点 故障数据 并行挖掘 
面向杂凑密码算法的专用指令加速器的设计与实现
《计算机工程与应用》2025年第2期363-371,共9页王轩 刘勤让 陈磊 魏帅 范旺 杨恒 
国家重点研发计划重点专项(2022YFB4401401);嵩山实验室项目(纳入河南省重大科技专项管理系(221100211100-01))。
物联网的快速发展对嵌入式设备的系统性能和数据安全性的要求越来越高,传统的通用嵌入式处理器对密码算法的实现效率不高,不能很好满足性能需要,此外嵌入式设备还有着低功耗的场景需求。为解决以上问题,在Xilinx ZYNQ ZC706嵌入式开发...
关键词:嵌入式应用 加速器设计 专用指令 高层次综合 数据并行 
面向深度神经网络大规模分布式数据并行训练的MC^(2)能耗模型
《计算机研究与发展》2024年第12期2985-3004,共20页魏嘉 张兴军 王龙翔 赵明强 董小社 
国家自然科学基金项目(62172327)。
深度神经网络(deep neural network,DNN)在许多现代人工智能(artificial intelligence,AI)任务中取得了最高的精度.近年来,使用高性能计算平台进行大规模分布式并行训练DNN越来越普遍.能耗模型在设计和优化DNN大规模并行训练和抑制高性...
关键词:深度神经网络 能耗模型 大规模分布式训练 数据并行 超级计算机 
利用统计数据并行蒙特卡罗树搜索算法的中国象棋博弈
《计算机工程与应用》2024年第23期340-348,共9页朱舟 闵华松 
国家重点研发计划(2022YFB4700400);国家自然科学基金(62073249);湖北省重点研发计划(2023BBB011)。
针对蒙特卡洛树搜索算法(Monte Carlo tree search,MCTS)收敛速度过慢,且在博弈过程中关键节点会出现信息丢失等问题,以中国象棋为载体,构建适用于中国象棋博弈系统的策略价值网络,提出了一种基于统计数据的并行蒙特卡洛树搜索算法(para...
关键词:蒙特卡洛树搜索 中国象棋 博弈系统 策略价值网络 并行化 统计数据 
深度神经网络动态分层梯度稀疏化及梯度合并优化方法
《西安交通大学学报》2024年第9期105-116,共12页巨涛 康贺廷 刘帅 火久元 
国家自然科学基金资助项目(61862037,62262038);甘肃省科技计划资助项目(23CXGA0028)。
针对数据并行方法加速大规模深度神经网络时易出现的通信开销大、训练耗时长、资源利用率不高的问题,提出了一种深度神经网络动态分层梯度稀疏化及梯度合并优化方法。首先,将梯度稀疏化压缩与流水线并行技术相结合,提出动态分层梯度稀...
关键词:深度神经网络 分布式训练 同步数据并行 梯度压缩 层梯度合并 
基于MapReduce和OpenMP混合编程的高分三号数据并行转换算法
《测绘与空间地理信息》2024年第8期35-36,41,共3页邱祥峰 
2021年福建省科技项目(中科院STS项目)——基于时空智能的应急风险评估与指挥系统(2021T3065)资助。
高分三号03与02、01卫星一起成功组网形成我国第一个海陆三星雷达卫星星座。针对PolSARpro软件存在高分三号数据转换较慢的问题,提出了一种按照该软件的数据格式要求对高分三号数据进行高效并行转换的算法。该算法基于MapReduce和Open M...
关键词:高分三号 合成孔径雷达 复数散射矩阵 OPENMP MAPREDUCE KingMap 
面向数据湖存取性能优化的数据并行处理技术研究
《北方工业大学学报》2024年第3期1-10,共10页赵卓峰 陈元 梅宇生 
国家自然科学基金国际合作与交流项目(62061136006)
本文围绕数据湖应用背景下海量数据的高性能存取需求,以新型数据存储模型和分布式存储及缓存机制为目标,通过对数据湖存储结构、数据访问模式和数据处理方法进行分析,开展数据湖存取性能优化问题研究。首先,结合数据湖系统中的文件系统...
关键词:数据湖 存取性能 数据分区 并行计算 索引优化 
基于流计算和大数据平台的实时交通流预测被引量:1
《计算机工程与设计》2024年第2期553-561,共9页李星辉 曾碧 魏鹏飞 
国家自然科学基金项目(62172111);广东省自然科学基金项目(2019A1515011056)。
目前交通流预测实时性差,很难满足在线分析和预测任务的需求,基于此提出一种Flink流计算框架和大数据平台结合的实时交通流预测方法。基于流计算框架实时捕捉和预处理数据,包括采用Flink的transform算子对数据进行校验和处理,将处理后...
关键词:大数据 数据并行 流计算框架 实时处理 交通流预测 分布式系统 实时性分析 
基于BS架构的分布式文件数据并行访问方法
《中国新通信》2024年第3期21-23,共3页刘春伟 
当前的分布式文件数据并行访问矩阵多为单结构,且访问的识别范围较小,导致访问耗时延长。为此,本文对基于BS架构的分布式文件数据并行访问方法进行设计与分析,根据实际的访问需求和标准,进行基础并行访问数据预处理;采用多阶的形式,扩...
关键词:BS架构 分布式文件 文件数据处理 并行访问 访问方法 文件识别 
检索报告 对象比较 聚类工具 使用帮助 返回顶部