技术架构图
2020-12-07 13:50:54 5 举报
大数据平台技术架构
作者其他创作
大纲/内容
HTML5
数仓:Kafka
gRPC
离线计算:hive-sql
Hbase
AI: Alink/Skleam/Tens orflow
信用三清单
前端
RDBMS
数据规则校验
数据血缘追溯
接口
Logstash
配置管理与服务注册中心
SSE
App
文件采集
FTP
信用智慧大脑
CSS
信用元数据管理
Kafka
WS
元数据管理
前置机
媒体文件
查找服务信息
数据归集清洗
信用数据治理
AJAX
实时计算:Flink
通信接口
SPI 服务
服务限流降级
Sping
数据结构管理
持久化存储
大数据计算
数仓:Hive
API Gateway
注册API接口
Nginx
Flume
……
HTTP/WebSocket REST JSON
系统监控
服务间通信
数据体系、数据资产管理体系
数据转移
Sqoop
数据智能标签
Alibaba Nacos
平板
非结构化数据
客户端日志
移动
微信
JavaScript
日志数据管理
Elasticsearch
Thrift
REST
HDFS
数据质量监控
grafana prometheus
信用业务中台
Log4J/Self4J
数据抽取
flink流etl
信用服务门户
消息队列
RabbitMQ
采集与交换
数据维护管理
日志采集
Flume
RPC
数据生命周期
API 服务
REST API
Alibaba Sentinel
日志收集
信息资源目录
结构化数据
服务层
WEB
数据源
生态:Hadoop
API
Android/IOS
MQ
服务器日志
调用服务
离线计算:Spark
注册服务信息
0 条评论
下一页