大数据中台

redis

  基础工具层

数据源02

mr

可视化大屏

FTP/HTTP

统一数仓

用户画像

底座

云主机

调度以及组件管理CM

数据源05

数据运营体系

HDFS

DATAX

数据源03

智能检索

数据源04

yarn

离线计算

CANAL

决策支撑

元数据管理atlas

实时计算

数据源

标签数据层TDM

5G网络

Olap报表

应用数据ADS层(kylin/impala)

日志行为

数据运营

mysql/Tidb

spark

SQOOP

dim

Kudu

······················································

算法

spark ml

spark streaming

数据中台

数据共享

数据源06

flink

本地机房

第三方系统

数据采集

数据处理分析

数据源01

数据应用

质量管理

hive

数据分析

业务数据

oozie/Azkban

tensorflow

精准推荐

ods

数据安全管理Kerbors+Sentry

消息队列Kafka

dwd

dw

ES

Hbase

FLUME

                                                                                                                                                                                                                                                                                                                                                                                                                  

网络