面向主题搜索的网络爬虫信息采集策略研究  

作　　者：万文兵 

机构地区：[1]仪征技师学院电子信息系

出　　处：《软件导刊》2015年第11期68-70,共3页Software Guide

摘　　要：基于主题搜索的主题网络爬虫,只抓取与用户主题相关的页面。在深入分析主题页面分布特征和主题相关性判别算法的基础上,提出了一个面向主题搜索的网络爬虫模型,它很好地克服了通用搜索引擎准确率偏低、信息内容相对陈旧、信息分布范围不均衡等不足。实验结果表明,尽管基于主题爬虫的搜索增加了内存使用率,但也成倍提升了搜索的准确性,提高了抓取效率以及抓取结果的利用率。

关 键 词：搜索引擎 主题爬虫 信息采集 

分 类 号：TP312[自动化与计算机技术—计算机软件与理论]