检索规则说明:AND代表“并且”;OR代表“或者”;NOT代表“不包含”;(注意必须大写,运算符两边需空一格)
检 索 范 例 :范例一: (K=图书馆学 OR K=情报学) AND A=范并思 范例二:J=计算机应用与软件 AND (U=C++ OR U=Basic) NOT M=Visual
作 者:梁栋[1] 臧冬松[1] 霍菁[1] 孙功星[1] Valentin Kuznetsov
机构地区:[1]中国科学院高能物理研究所,北京100049 [2]康奈尔大学,美国纽约14850
出 处:《计算机工程》2014年第4期57-63,70,共8页Computer Engineering
基 金:国家自然科学基金A3前瞻性计划基金资助项目(6116140454);国家自然科学基金资助面上项目(11179020;11375223)
摘 要:在大型强子对撞机上的紧凑繆子螺线管探测器实验,具有数据量大(PB级规模)、数据类型复杂与数据地理上全球分布的特点。记录上述数据的元数据达到TB级的规模,并且以不同的格式保存在不同的关系和非关系数据源中,通过在这些异构数据源上添加一个缓存层的方法,实现一个提供精确的关键词查询的数据聚集系统。根据多重映射和聚集的方式支持用户的查询,并利用有效的缓存管理策略来提升查询的命中率。实验结果表明,该系统能够通过缓存的方式响应超过70%的用户查询,具有良好的查询性能。The Compact Muon Solenoid(CMS) experiment on the Large Hadron Collider(LHC) produces PBs of physics data. Those data not only are huge on volume, but also have complex types and being distributed all over the world. Therefore the recta-data about how to organize those physics data reach TB in size. Those meta-data are kept in different relational or non-relational data sources in different format. In order to meet the data discovery requirement, it is important to provide a unified query interface. By adding a caching layer upon those data sources, this paper implements a data aggregation system, which provides precise keyword style search interface. It demonstrates how to support user queries by multiple mapping and aggregation, and how to manage the cache efficiently. Experimental result shows that more than 70% user queries can be answered by the cache system, and it has well queries performance.
关 键 词:关键词查询 数据聚集 元数据发现 缓存管理 映射 异构数据源
分 类 号:TP311[自动化与计算机技术—计算机软件与理论]
正在载入数据...
正在载入数据...
正在载入数据...
正在载入数据...
正在载入数据...
正在载入数据...
正在载入数据...
正在链接到云南高校图书馆文献保障联盟下载...
云南高校图书馆联盟文献共享服务平台 版权所有©
您的IP:3.12.198.162