基于R软件的网络数据搜集方法  

作　　者：金林[1] 李研 陈晋泰 

机构地区：[1]中南财经政法大学统计与数学学院,武汉430073

出　　处：《统计与决策》2019年第2期83-87,共5页Statistics & Decision

基　　金：国家社会科学基金青年项目(14CTJ011)

摘　　要：文章介绍了R软件数据搜集工作的基本流程,HTTP、HTML、XML、JSON网络文档的基本知识及其数据搜集方法,重点讨论了HTTP协议下,对访问网页、网页数据搜集及其策略,包括文件批量下载、URL访问多页面、采集列表表格常用方式、静态网页表单处理、动态网页和使用API的处理方法等,分析了网页提取策略,包括正则表达式,Xpath和不同函数包的特点,还进一步讨论了处理网页过程中的中文乱码问题和爬虫过程中的规范和注意事项,最后通过一个实例进行数据搜集方法进行具体展示。

关 键 词：网络数据 搜集 爬虫 R 

分 类 号：C811[社会学—统计学]