一种分布架构的网站全文搜索引擎设计与实现  

作　　者：张雯 盛颖怡 卢宣 叶正杰 沈健[1] 

机构地区：[1]常熟理工学院计算机科学与工程学院,江苏常熟215500

出　　处：《电脑编程技巧与维护》2023年第6期44-46,共3页Computer Programming Skills & Maintenance

摘　　要：随着智慧校园的建设,各种校内网站平台纷纷涌现,复杂的网络环境使用户难以快速准确地找到所需信息。为此设计并实现了一种分布式架构的网站全文搜索引擎系统。该系统模块采用Docker进行部署,通过Scrapy、ElasticSearch、Redis、Java POI等技术,实现网站正文和附件的采集、内容提取、全文索引及检索功能,具有部署简单、扩展灵活的特点,弥补了多数私有搜索引擎只能检索HTML页面的缺点。

关 键 词：分布式架构 搜索引擎 ElasticSearch技术 Docker技术 

分 类 号：TP391.3[自动化与计算机技术—计算机应用技术]