clog运行流程图
2024-03-06 12:05:11 0 举报Clog运行流程图 用户交互流程、日志写入解析流程
作者其他创作
大纲/内容
6
7
当前磁盘存在
结束
kafka
N
结果是否存在
8.2http reponse
按appCode + 时间间隙+存储时间聚合成块
按位解析字节码为二进制字段对象
3.
查询结果是否存在
openrestry负载均衡
从磁盘加载文件
clog-instance1
5.1http request
clog实例
根据文件名、position、seconds查询HDFS
load-blance
clog-intance3
5.2http request
4
ES
返回结果
1
开始
8.1.http response
Y
数据块写入本地磁盘文件文件名:ip+datetime+position
索引块写入文件队列
根据文件名中的ip是否为当前主机
2
HDFS
根据blockinfo信息中的文件名及seconds
clog-Instance2
将文件名数据块写入的offset作为索引条件写入索引块
判断参数是否存在blockPosition
clog实例查询ES索引
根据文件名中的IP发起远程HTTP请求
10
拆分块为索引块和数据块
0 条评论
下一页
