LUSTRE文件系统

作品数：24被引量：66H指数：5
导出分析报告
相关领域：自动化与计算机技术更多>>
相关作者：钱迎进周恩强吴庆波张钰森谭郁松更多>>
相关机构：国防科学技术大学华南师范大学华中科技大学浪潮电子信息产业股份有限公司更多>>
相关期刊：《地理空间信息》《计算机研究与发展》《软件学报》《计算机工程》更多>>
相关基金：国家自然科学基金国家高技术研究发展计划中国下一代互联网示范工程国家重点基础研究发展计划更多>>
-
在结果中检索

检索结果分析

结果分析中...
共 条 记 录，以下是1-10
全选清除导出
参考文献引证文献引用追踪
视图：
排序：
面向Lustre集群存储的错误日志分析及系统优化
《计算机科学》2022年第10期1-9,共9页程稳 李焱 曾令仿 王芳 唐士程 杨力平 冯丹 曾文君 
国家自然科学基金重点项目(61832020);国家自然科学基金创新研究群体项目(61821003);之江实验室中心自设科研项目(2021DA0AM01)。
集群存储系统的错误日志信息有助于优化存储系统的可用性和稳定性。现有存储系统错误探究主要针对单机存储系统或集群存储系统的部分功能进行分析评估,缺乏在实际应用场景下,同一生产环境中,长时间、多视角的探究工作。新型功能模块的...
关键词：LUSTRE文件系统 日志分析 系统优化 错误 可靠性 
面向Lustre集群存储的应用日志分析及系统自动优化框架被引量：2
《计算机工程与科学》2022年第4期594-604,共11页程稳 李焱 曾令仿 王芳 唐士程 杨力平 冯丹 曾文君 
国家自然科学基金(61832020);创新研究群体项目(61821003);浙江省“万人计划”(2021R2007);之江实验室自设科研项目(2021DA0AM01)。
在科学计算、大数据处理和人工智能等领域,对相关应用负载进行研究,分析负载I/O模式,揭示应用负载变迁规律等,对指导集群存储系统性能优化十分重要。当前应用种类繁多并且应用快速迭代更新,复杂的环境使得对应用负载的特性挖掘充满挑战...
关键词：LUSTRE文件系统 日志分析 系统优化 服务质量 资源管理 
面向天河二号Lustre文件系统优化实践
《计算机科学与应用》2021年第11期2609-2618,共10页曾凌波 杜云飞 万文 颜辉 钟英 
近年来,随着高性能计算技术的飞速发展,Lustre文件系统作为高性能计算重要组成部分越来越受到重视,对于Lustre文件系统元数据服务的高可靠性一直是研究的重点,针对Lustre文件系统元数据高可靠性的研究,本文设计了一种双MDT冗余的架构保...
关键词：文件系统 元数据 高可靠 优化 
面向大规模集群的并行I/O用户层配置优化策略被引量：5
《国防科技大学学报》2020年第2期23-30,共8页田鸿运 武林平 董勇 景翠萍 罗红兵 莫则尧 
国家重点研发计划资助项目(2018YFB0204003)。
影响应用I/O性能的关键因素主要有三个层次:包括应用的I/O接口实现、体系结构和文件系统组件的性能以及应用的I/O参数配置。从应用I/O配置优化的视角,分析了大规模集群并行I/O的配置调优空间,在此基础上,给出了一套大规模集群并行I/O性...
关键词：并行I/O优化策略 LUSTRE文件系统 大规模集群 传输数据量 条带数 
基于强化学习的Lustre文件系统的性能调优被引量：2
《计算机研究与发展》2019年第7期1578-1586,共9页张文韬 汪璐 程耀东 
国家重点研发计划项目(2017YFB0203203);国家自然科学基金项目(11575223)~~
高能物理计算是典型的数据密集型计算.分布式存储系统的吞吐率和响应时间是最关键的性能指标,往往也是重点关注的性能优化目标.存储系统中存在大量可供调节的参数,这些参数的设置对系统的性能有着很大的影响.目前,这些参数被直接设置为...
关键词：分布式存储 强化学习 性能调优 深度学习 参数调节 
一种改进的基于缓存池机制的小文件I/O策略被引量：2
《计算机工程与应用》2016年第16期210-215,共6页聂瑞华 谢文君 梁军 
教育部-中移动基金项目(No.MCM20130651);广州市科技和信息化局基金项目(No.2014Y2-00006);华南师范大学青年教师科研培育基金(No.2012KJ006)
Lustre文件系统对大文件的I/O性能较好,但对小文件不佳。针对这个问题,提出建立一个基于MDS节点的小文件缓存池机制,在缓存池里缓存经常被访问的小文件。在该机制中,小文件缓存池与OST使用全相联映射方式对应,并且使用贯穿读出式和直写...
关键词：LUSTRE文件系统 全相联映射 近期最少使用算法(LRU) I/O性能 
Lustre文件系统元数据服务恢复机制的改进被引量：1
《计算机科学》2015年第9期177-182,共6页钱迎进 李永刚 汪毅 周琳琦 
国家973计划资助项目(2009CB723803);国家自然科学基金资助项目(60873120)资助
Lustre的重启恢复算法需要集群中所有客户端在指定的恢复时间窗口内与服务器重新建立连接,客户端重传未提交的事务请求,服务器严格按照事务序列号重放所有未提交的事务,要求过于严格。针对Lustre可恢复性不强的缺点,提出了基于版本的恢...
关键词：LUSTRE 高性能计算 可恢复性 可用性 
基于Lustre文件系统的海量暂存COMTRADE数据分布存储模式被引量：2
《电力系统自动化》2015年第18期75-80,共6页陈永艳 束洪春 董俊 曹璞璘 戴伟 卫守林 
国家自然科学基金资助项目(51267009)~~
研究了一种基于Lustre分布式并行文件系统的高性能I/O流式数据存储模式,能够满足当前行波暂态采集装置海量暂态数据的高速并发读写访问的需求。通过采用多客户端工作模式,并且将多个暂态数据文件聚合成大文件,可以进一步提高访问带宽和...
关键词：海量数据存储 LUSTRE文件系统 聚合COMTRADE数据 
可扩展的分布式元数据管理系统设计被引量：6
《计算机工程》2015年第5期26-32,37,共8页黄秋兰 程耀东 杜然 陈刚 
国家自然科学基金资助项目(11305192;11205179)
为解决高能物理海量存储系统由于存储规模不断扩大所面临的问题,设计一种分布式元数据管理系统,包括元数据管理、元数据服务、缓存服务以及监控信息采集4个部分,在此基础上提出自适应目录子树划分算法,以目录为粒度进行元数据划分,根据...
关键词：元数据管理 动态 可扩展 元数据分布 Ceph文件系统 Gluster文件系统 LUSTRE文件系统 
基于Lustre文件系统的分布式地理环境构建
《地理空间信息》2015年第2期73-75,12,共3页宋龙 李延杰 韩锦宁 
通过分析分布式地理环境的特点,将Lustre文件系统与分布式地理环境相结合,设计了一种基于Lustre的分布式战场仿真系统结构,总结了该结构在平台扩展、安全性、稳定性等方面的优势。
关键词：虚拟地理环境 LUSTRE 分布式 
全选清除导出
共3页<123>
检索报告 对象比较 聚类工具 使用帮助 返回顶部