招聘网站职位需求的WebMagic主题爬虫技术分析  

作　　者：屈莉莉[1] 李雪峰[1] 翟军[1] 

机构地区：[1]大连海事大学

出　　处：《信息系统工程》2019年第2期79-81,共3页

基　　金：教育部人文社会科学研究规划基金(项目名称:国家大数据战略下的政府开放数据的目录体系构建研究;项目编号:17YJAZH115);大连海事大学教学改革立项(项目名称:创新创业教育导向的信息管理课程设计改革与探索;项目编号:2018Y43)

摘　　要：互联网招聘是人才招聘不可或缺的核心途径。论文为自动抓取招聘网站信息并精准分析职位需求,基于WebMagic框架研发面向招聘网站职位信息分析的主题网络爬虫关键技术,对数据下载、信息抽取、筛选与管理、存储分析与可视化等系统开发环节均提出有效的解决方法。并以互联网行业为例挖掘互联网行业对人才的真正要求,对有效利用招聘网站数据和指导职业生涯规划具有重要的借鉴意义。

关 键 词：网络爬虫 WebMagic框架 招聘网站 互联网行业 职位需求分析 

分 类 号：TP391.3[自动化与计算机技术—计算机应用技术] TP393.092[自动化与计算机技术—计算机科学与技术]