开放网络环境下的反爬虫技术研究  

作　　者：刘晓魁[1] 肖树鹏 

机构地区：[1]安阳师范学院甲骨文信息处理教育部重点实验室,河南455000 [2]安阳师范学院网络与教育技术中心,河南455000

出　　处：《网络安全技术与应用》2024年第7期19-22,共4页Network Security Technology & Application

基　　金：国家自然科学基金项目(62106007,61806007);古文字与中华文明传承发展工程资助项目(G1807,G2821,G3028,G1806);河南省科技攻关项目(232102321067,232102320162,232102320169);中国高校产学研创新基金(2021RYA05002)。

摘　　要：在反爬虫和爬虫技术的不断博弈中,爬虫技术随着开放式大语言模型和人工智能等技术的快速发展而迅猛成长。而反爬虫技术的研究相对滞后,远没有爬虫的使用和研究成熟。本文以爬虫攻击所带来的危害为切入点,介绍了常用的服务器端和前端反爬虫技术,并提出了一种结合大数据分析的反爬虫网络安全防护技术,为反爬虫防护提供了新的思路。在此基础上,对基于大数据分析的爬虫识别技术的优势进行了分析,并展望了该技术的应用前景,以更好地实现网络和信息的防护与安全。

关 键 词：反爬虫 网络安全 大数据分析 

分 类 号：TP393.08[自动化与计算机技术—计算机应用技术] TP18[自动化与计算机技术—计算机科学与技术]