算法数据平台,spark离线计算,大数据平台
2023-09-18 14:17:39 0 举报
算法数据平台,spark离线计算,大数据平台
作者其他创作
大纲/内容
线下
算法数据平台
表达式
版本路由
离线特征聚合
算法版本管理
结果返回
平台-AgentJar
Redis
SQL
通道3
httpfs 模型刷新
Storm-特征
离线数据
特征&模型监控
算法管理平台
FFS特征门户服务
算法管理
binlog
RFCS特征计算分片
数据上报
Hlive 数据仓库
特征组聚合
服务启动
特征管理
标准模型加载PMML
模型加载
算法调用
Spark- 特征
启动过程
上报算法版本
回放服务
中间内存表
mafka
算法资源
特征组描述
业务端
模型数据
模型管理
内存数据库
MOS模型管理服务
第三方服务
Mafka业务消息
特征获取
通道2
实时特征计算
通道1
FAS特征管理服务实时特征离线特征
pop
代理状态上报
数据映射索引加工消息驱动
cache
写流速控制
离线特征
线上
业务服务
版本规划
实时数据总线
msg
数据抽取
版本特征
Hbase回放库
服务过程
版本路由配置
这是水印,克隆可删除
index
监控
count
Spark-模型模型训练
过程数据
业务库
Redis特征库
代码扫描
PB压缩
启动完成
HDFS模型库
实时特征
AOS算法版本服务
自定义模型加载ZIP
流量属性
结点状态
0 条评论
下一页