java爬虫
2019-03-07 11:22:32 0 举报AI智能生成
java爬虫知识点
作者其他创作
大纲/内容
基本技术
http/https
httpclient
框架
webmagic
zookeeper
nginx
消息中间件
rabbitMq
数据库
redis
memcached
日志平台
ELK
流程与方法
抓取请求
网页
请求参数
明文
get
post
密文
常见加密方法
破解方法
找到js加密代码
抓取工具
chrome浏览器控制台
app
请求参数
明文
get
post
密文
破解方法
反编译
工具
jadx
dex2jar+jd-gui
加固
脱壳
xposed框架hook加密方法等
学习网站
http://www.wjdiankong.cn/
https://bbs.pediy.com/
常见加密方法
AES
DES
MD5
RSA
base64
抓取工具
burpsuite
charles
模拟请求
登录
cookies获取，保存
非登录
header拼接
代理
获取结果
状态码
302跳转
返回类型
json
纯文本
html
异常处理
超时重试
0 条评论
下一页
