服务器架构设计
2020-07-21 10:17:04 1 举报
日志服务架构设计
作者其他创作
大纲/内容
Topic区分
Show Data
file log
大数据计算
Topic：log（Partition-2L）
Hive/Presto
K
Broker1
ES3
Api Server
HDFS分布式文件系统
Filter
Log4J Appender
Job
Kibana
Web Admin System
L
output
负载均衡器
input
业务日志处理
数据埋点
App-Producers
HDFS
Service-Producers
Logstash-Conllector
Web UI
Msg-Producers
Broker2
query index
HadoopMapReduce
ElasticSearch Cluster
Topic：log（Partition-0F）
ES1
程序级运行日志
消费
Storm/Spark
导入HDFS
程序运行日志处理
大数据分析引擎
Broker3
Kafka消息队列
ES2
收藏
职业：本科
0 条评论
回复 删除
下一页
