基于广域存储系统的副本技术研究  

Research on Data Replication in Wide-Area Storage System

作　　者：闫鹏飞[1,2] 吴雪丽 蔡杰明 马留英[1,2] 刘振军[1] 

机构地区：[1]中国科学院计算技术研究所,北京100190 [2]中国科学院大学,北京100049 [3]中软信息系统工程有限公司,北京100081

出　　处：《网络新媒体技术》2015年第3期19-27,64,共10页Network New Media Technology

基　　金：国家"八六三"高技术研究发展计划基金项目(编号:2011AA01A102;2013AA013205);国家"九七三"重点基础研究发展计划基金项目(编号:2011CB302304);中国科学院先导专项基金项目(编号:XDA06010401);中国科学院重点部署基金项目(编号:KGZD-EW-103-5(7))

摘　　要：针对广域网高延迟、低带宽的特性给广域文件系统访问带来的性能影响问题,提出了一种不依赖于底层文件系统、能够加速广域文件系统读写访问的缓存策略。该策略支持基于区间粒度的文件数据缓存及访问,并支持元数据本地缓存;并提供基于阈值的容量管理功能,采用超时与最终一致相结合的方式维护缓存的一致性。最后使用典型的文件I/O基准测试工具和元数据性能测试工具对该缓存策略进行了评测,实验结果表明:该缓存策略减少了客户端与服务器的交互次数,给广域文件系统的数据访问带来了明显的性能提升,当缓存命中时其数据的读写性能与本地文件系统相近。To address the performance issues over high latency, low bandwidth wide - area links, we propose a caching strategy which is independent of the underlying local file systems and can speed up data access in wide - area file systems. In our approach, files are cached and accessed at the granularity of extents and can be eliminated on a threshold - based policy ; metadata is also cached locally. With regard to consistency model, it is achieved based on timeout and eventual consistency. We use file I/O benchmark and metadata benchmark programs to validate our approach. Evaluation results demonstrate that our approach reduces interactions between client and server, therefore dramatically increases the overall performance of data access in wide - area environment. The tests also show that if there is a cache hit, it can offer a comparable performance to local file systems.

关 键 词：广域网 文件系统 数据中心 副本 并行TCP 

分 类 号：TP333[自动化与计算机技术—计算机系统结构] TP393.2[自动化与计算机技术—计算机科学与技术]