系统流程
2019-05-08 10:28:30 0 举报
爬虫及内容展示系统流程图
作者其他创作
大纲/内容
数据层
前端展示
DB
IP代理服务商
B3.取数据
IP池
爬虫框架
C1.爬虫关键字管理
A2.保存代理IP
A5.原始数据
数据处理
搜索引擎
B1.请求数据
注：A：数据采集系统。B：数据展示系统。C：数据采集管理系统
A4.爬取数据
A6.清洗后的数据
http://www.hywise.cn
关键字管理
MongoDB
B2.请求数据
第三方接口
后端应用
数据展示
A3.读取代理IP
前端组件
A1. 调用代理接口、获取IP
0 条评论
回复 删除
下一页
