某宝抓取流程
2017-11-07 18:05:04 5 举报
花了一个流程图,做抓取的自己领悟吧,只能帮你们到这里了。
作者其他创作
大纲/内容
把采集页面传递给客户端
android去读取下载的压缩包
下载对应当前页
是
提示文案“少等片刻加载中”
不是标准版
拦截form表单的会掉event事件,进行复写抓取逻辑
获取当前页数以及总页数
html页面抓取准备
客户端进行上传
检测是否为标准版
隐藏协议某宝用户协议
压缩包模拟隐藏域securityIdrdsToken_xboxrdsUariskackcode
js模拟点击
\t\t\t\t\t\t 二维码出错\t\t\t\t\t\t 二维码失效 \t\t\t\t\t\t 扫码成功 \t\t\t\t已确认
抓取结束
html抓取结果
跳转交易页面
不是
采集成功,首页于当前页进行对比
尝试切换变标准版,如果切换失败、只抓取第一页
更改下载UI、文案
下载失败
下载成功,更新成功文案
下载是否成功
循环采集、翻页
登录成功成功后
登录阶段
客户端提示用户认证成功
跳转到个人交易页面
是否为商户页面
js触发下载,模拟form表单形式
是否出现二维码
某宝抓取策略
否
是标准版
展示二维码截屏让用户扫码继续采集
准备抓取相关数据
保存出现二维码让用户扫码(代码有逻辑,但是未出现现象,待定)
压缩包下载结果
压缩包下载准备
如果出现二维码保存在本地进行扫描
打开压缩包模拟弹层
如果出现短信二维码直接展示webview让用户输入
采集过程中出现二维码
0 条评论
下一页