品牌搜索系统架构图
2021-08-20 15:48:08 4 举报
登录查看完整内容
商场品牌爬虫整体架构
作者其他创作
大纲/内容
定时调度每30秒拉一次
品牌内容搜索/详情/统计
java-api用户终端
人工后台修正品牌信息
java-scheduler
read/write
mysql业务库
start()
java-数据管理后台
业务数据清洗/写入搜索引擎
jenkins手动触发
爬虫元数据临时存储
elastic搜索引擎
爬虫元数据落地/清洗
爬虫
spark-job
Mongodb
职业：架构师
0 条评论
回复 删除
下一页
