数据流图
2016-11-08 21:23:39 0 举报
数据流图是一种图形化表示系统内数据流动和处理过程的工具。它由一系列节点和箭头组成，节点表示系统中的功能模块，箭头表示数据在模块之间的流动方向。数据流图可以帮助我们理解系统的输入、输出和处理过程，以及模块之间的关系。通过数据流图，我们可以更好地分析和设计系统，提高系统的效率和可靠性。
作者其他创作
大纲/内容
调度器
Downloader
shanghai白名单
chengdu爬虫
私密代理
爬虫自身持有的代理池（内存）
自建代理
random choice
无效IP
爬虫
代理服务器
Used IP pool
普通代理
代理管理软件
将爬虫反回的IP写入到待处理队列
http post 参数（上报所持有IP的状态）
baidu过滤
shanghai黑名单
beijing爬虫
beijing黑名单
shanghai爬虫
beijing白名单
有效IP
chengdu白名单
http post 请求的新一批IP
chengdu黑名单
0 条评论
回复 删除
下一页
