日志分析-Flink方案
2019-09-12 10:16:16 9 举报
大数据日志分析平台架构方案-Flink
作者其他创作
大纲/内容
存储服务
Producer->Consumer
实时处理
展示系统
技术、运维、运营、商户...
Kafka
源数据
Filebeat 源数据抽取
数据抽取层
数据关注者
视频数据处理后数据
DB
Kibana
监控系统
负载均衡 SLB Nginx 等
IOS/Android/小程序 移动应用数据
Source->Map->Window->Sink
监控矩阵
Flink / Spark
接口耗时分布图、接口请求量走势图、耗时对比图、QPS、耗时多日对比图...
nginx/apache/tomcat/jetty 日志数据
Filebeat 源数据抽取
硬件监控(云服务商:阿里云、腾讯云、百度云、华为云、亚马逊云...)
消息服务
数据展示系统
系统及应用监控(zabbix、Nagios、Cacti、NetDisco...)
Elastc Search
0 条评论
下一页