logstream通路
2017-01-17 00:28:18 0 举报
logstream通路是一个用于处理和分析日志数据的高效工具。它通过将日志数据流式传输到处理引擎，实现了实时的日志收集、过滤、分析和可视化。logstream通路具有高性能、低延迟和可扩展性等优点，能够有效地应对大规模日志数据的处理需求。此外，它还支持多种日志格式和输出方式，方便用户根据实际需求进行定制。总之，logstream通路为日志管理提供了一种简单而强大的解决方案。
作者其他创作
大纲/内容
YES
NO
TSDB
覆盖原值返回原值
聚合计算
报警通路
Redis
table[i]是链表？
配置分发
计算key的hash值
Table
SWAP采集
有容器监控项 || 起止时间都在124天前
开始
NamingServer
META数据管理
AppTree
site-agent
Instance集群
自定义采集
topicRoutingConfig
end
本地客户端
数据提取转换
saver-proxy-HD
proxy
数据收集
数据下发
saver
数组是否为空？
StatusExposer
Table集群
adaptor
数据发送
api
遍历树
zookeeper
sia趋势图
Astream，二次汇聚，API
存储
创建Node并插入
group.arguspaas-table-query-engine-routing.docker.bdblbce
可视化
DISK采集
机器数据采集
API Service
table[i]为空？
conf-server
遍历链表
链表已有？
NET采集
argus趋势图
死机检测
Host集群
Hbase/Table
BCM-META服务
nsType== 'host' || (nsType!= 'host' && nsType != 'instance' && startTime < 2019-08-21 18点)
存储层
时序引擎层
start
Agent
第三方推送
CPU采集
最近6个小时数据从Redis查，其余时间从Table/HBase集群查
size++
树里已有？
apiType == 'meta' || startTime >= 2019-10-08 13点
FF
size>阈值？
table[i]是一个节点 && key和hash值都相等？
报警
数据转发
redis
group.argushost-table-query-engine-routing.docker.bdblbce
RpcServer
服务数据采集
mt-client
table[i]是红黑树？
链表尾部添加值
routing.conf
服务管理
远程服务采集
kafkaManager
Astream
服务监控
链表长度>8?
MEM采集
流量接入层
Adaptor
group.argusinstance-table-query-engine-routing.docker.bdblbce
配置管理
query
数据采集
resize创建数组table并设阈值
本地客户端采集
kafka
计算在数组的索引i
元信息管理
转换成红黑树
异常检测
configManager
进程采集
查询区间包含最近6个小时？
HBase
Api-service
HTTP Server
api-service
HBase集群
日志采集
红黑树插入值
agent/puller...
go-adaptor
resize扩容，转移到新table并设阈值
saver-proxy-HB
collector
0 条评论
回复 删除
下一页
