舆情系统ETL流程图
2016-08-29 14:04:39 0 举报
ETL是英文Extract-Transform-Load的缩写,用来描述将数据从来源端经过抽取(extract)、转换(transform)、加载(load)至目的端的过程。在舆情系统中,这个过程通常包括以下几个步骤:首先,通过各种方式收集网络舆情数据;然后,对收集到的数据进行清洗和预处理,去除噪声和无用信息;接着,对数据进行转换,提取出有用的特征;最后,将处理后的数据加载到数据库中,供后续分析和使用。整个过程自动化程度高,能够快速、准确地完成大量数据的处理工作。
作者其他创作
大纲/内容
加载关基事件
加载安全事件
加载重点资产
业务数据存储系统
任务执行引擎
任务执行状态
加载关基数据
重点监控事件入库
关基事件存储
任务调度器
大数据中心
非重点监控事件存储
启动任务
数据发送
数据分析
加载FTP服务器列表
文件存储系统
数据归并
0 条评论
下一页