数据收集
2017-03-10 23:59:04 3 举报
数据搜集方法
作者其他创作
大纲/内容
是
列表、表格或链接
通用化设计
R软件网络数据搜集
文件下载链接
动态网页
URL变化
否
OAuth身份验证
搜集网页URL
搜集API数据
需要翻页
批量构建URL
API
结束
获取网页数据
远程调用浏览器JavaScript翻页
网页结构完整
按照文档类型选用相应的提取方式
需要调用JavaScript
使用R平台远程调用浏览器
申请应用&使用者者密钥
下载可阅文件
网页
API或网页
XPath定位
正则表达式清洗数据
readHTMLTable等函数提取
职业：学生
0 条评论
回复 删除
下一页
