xdr数据处理流程图
2020-02-17 15:53:47 0 举报
通信结合大数据数据处理流程图
作者其他创作
大纲/内容
MLib(machine learning)
HIVE
dataload
IMPALA
spark
YARN
XDR数据写入hdfs,impala和hive都可查询
APP
数据分析层
Spark Streaming
加载机
数据存储层
热库
资源调度层
软总线
输出数据到clickhouse,供iaap进行快速查询
HDFS
HBASE
输出到impala,供iaap查询
Spark整合hive,读取XDR数据进行事后SDR生成
clickhouse
数据接入层
DIMS
Spark SQL
Spark on Yarn
收藏
0 条评论
下一页