网站爬取分析流程-2021年8月10日版
2021-08-10 15:45:42 9 举报爬取网站的分析流程
作者其他创作
大纲/内容
右键查看网页源代码
增加页面的头信息
不能
动态页面
找到要爬取的版块
能找到
复制url到检测程序
仅用url、头信息即可获取到要爬取的页面元素
复制url、post参数到检测程序
能
仅用url即可获取到要爬取的页面元素
获取网站url
进入动态爬取分析
输入url\\post参数等获取到要爬取的数据
Post访问
Get
开始
F12或右键检查查看页面访问方式
检索要爬取的元素
静态页面
F12或右键检查查找带有想要爬取的数据的请求
找不到
Post
进入静态爬取分析
Get访问
爬取失败
爬取结束
进行动态爬取
仅用url、post参数即可获取到要爬取的页面元素
仅用url、post参数、头信息即可获取到要爬取的页面元素
爬取成功
收藏
0 条评论
下一页
