算法数据平台
2020-09-16 10:22:59 0 举报
算法核心数据平台架构图
作者其他创作
大纲/内容
特征组描述
实时特征计算
通道2
算法版本管理
pop
内存数据库
FFS特征门户服务
版本规划
标准模型加载PMML
通道1
版本路由配置
写流速控制
Spark- 特征
Hbase回放库
通道3
特征获取
实时数据总线
回放服务
特征组聚合
实时特征
结点状态
特征&模型监控
离线特征
特征管理
index
httpfs 模型刷新
Storm-特征
count
监控
业务端
SQL
代码扫描
数据抽取
RFCS特征计算分片
HDFS模型库
结果返回
算法调用
mafka
业务库
Mafka业务消息
模型加载
版本特征
表达式
版本路由
算法管理
模型管理
线下
服务启动
Hlive 数据仓库
MOS模型管理服务
模型数据
msg
启动过程
代理状态上报
离线数据
FAS特征管理服务实时特征离线特征
Redis特征库
中间内存表
启动完成
线上
Spark-模型模型训练
算法资源
算法数据平台
AOS算法版本服务
自定义模型加载ZIP
平台-AgentJar
数据映射索引加工消息驱动
离线特征聚合
过程数据
服务过程
Redis
算法管理平台
数据上报
业务服务
PB压缩
上报算法版本
binlog
cache
第三方服务
流量属性
0 条评论
下一页