采集流程
2017-02-20 16:08:36 0 举报
采集流程通常包括以下几个步骤:首先,确定采集目标和需求,明确需要采集的数据类型和范围。其次,选择合适的采集工具和技术,如爬虫、API接口等。然后,编写采集程序或脚本,根据需求进行数据采集。在采集过程中,需要注意遵守网站的使用协议,避免对目标网站造成过大的访问压力。采集完成后,对数据进行清洗和整理,去除无效数据和重复数据,确保数据的准确性和完整性。最后,将整理好的数据存储到合适的数据库或文件中,以便于后续的分析和处理。整个采集流程需要根据实际情况进行调整和优化,以提高采集效率和质量。
作者其他创作
大纲/内容
PH区
不是
待上传列表图片直接保存至服务器端
外部采集信息系统
运行补录批量
是
是否是在途申请
点击上传
网银DMZ区
成功
跳转至公积金或社保网站
失败
点击“采集”按钮
是否成功补录
外网设备
是否成功上传
批次状态更新为“已录入信管”
结束
登录系统
弹屏提示批次上传失败
信用管理系统
调用图片上传方法
填写客户基本信息并进行截图
调用影像件补录接口
每晚定期跑补录批量
查看已维护的采集网站
登录影像平台
批次状态更新为“待批量补录”
是否超过14天
Internet
影像平台
正式上传截图
否
选中待上传截图
批次状态更新为“过期失效”
将影像件补录至信管系统
0 条评论
回复 删除
下一页