爬虫系统架构图
2017-04-20 16:08:10 109 举报
craweler系统架构图
作者其他创作
大纲/内容
其他
调度系统
ETL系统
接口接入
letv
android
mysql(master)
外部数据源
ios
增量爬取
批量爬取
mysql(slave)
web
数据缓冲层
solr
数据整合层
mongodb(master)
爬虫系统
mongodb(slave)
搜索引擎
收藏
0 条评论
回复 删除
下一页