基于深层网络爬虫的Web地图服务发现方法  

A Web Map Service Discovery Method Based on Deep Web Crawler

作　　者：侯东阳[1,2] 武昊[2] 王军锋 王明山 

机构地区：[1]中国矿业大学环境与测绘学院,江苏徐州221116 [2]国家基础地理信息中心,北京100830 [3]中科九度(北京)空间信息技术有限责任公司,北京100190 [4]中国移动通信集团湖北有限公司襄阳分公司,湖北襄阳441003

出　　处：《地理与地理信息科学》2015年第5期10-13,19,共5页Geography and Geo-Information Science

基　　金：国家自然科学基金项目(41301412)

摘　　要：传统Web地图服务(Web Map Service,WMS)发现方法只能检索表层网络中的地图服务,无法发现深层网络中日益增加的地图服务。针对这一现象,该文提出了一种利用深层网络爬虫的WMS发现方法。首先,从WMS的应用角度出发,总结了两条WMS应用规则,并利用正则表达式对它们进行了形式化描述;然后,针对每条应用规则制定了相应的使用流程;最后以传统地图服务爬虫为基础,通过新增脚本解析引擎和应用规则构建了深层网络爬虫。实验表明,该方法可以同时发现位于表层网络和深层网络中的Web地图服务。Traditional Web Map Service（WMS）discovery methods can discover WMS from the surface web.However,they can′t discover WMS from the deep Web.To solve the problem,this paper proposes a WMS discovery method based on deep web crawler.First,two rules are summarized from the WMS applications and are formalized by using the regular expressions.Then,their use flows are designed in this proposed method.Finally,a JavaScript parsing engine and the two application rules are added to construct the deep web crawler based on the traditional crawler.Experiments show that the proposed method is able to discover WMSs from the surface web and deep web at the same time.

关 键 词：WEB地图服务 服务发现 爬虫 深层网络 

分 类 号：P208[天文地球—地图制图学与地理信息工程]