流计算处理
2017-03-05 16:00:28 0 举报
流计算处理是一种实时数据处理方法,它能够在数据生成的同时对其进行分析、处理和存储。这种处理方法适用于需要对大量数据进行实时监控、分析和决策的场景,如金融交易、物联网设备监控等。流计算处理通过将数据流分割成一系列连续的、有限大小的“事件”,然后对这些事件进行并行处理,以实现高效的数据处理。流计算处理通常使用分布式系统来实现,以确保高并发、低延迟的性能。此外,流计算处理还具有容错性、可扩展性和易于维护等优点。总之,流计算处理是一种强大的实时数据处理工具,能够帮助企业和组织更好地应对大数据时代的挑战。
作者其他创作
大纲/内容
运营配置
排序
实时推荐计算
物料画像
1. Flink + AFlink or Flink + Pylink + Pytorch/飞桨 在线,近线,离线 3.目前在线计算,也是根据准备好的料和修正数据进行计算获得在线数据的2.Spark + DL4j 实现离线
推荐引擎基于标签
用户画像
索引库
Kafka
数据采集爬虫/Cat/DataX/Canel
推荐引擎FLink
初步计算推荐结果查询
用户请求服务入口
推荐的结果,保存到大数据
策略
应用展示平台
元数据离线存储Hadoop
推荐引擎基于。。。
推荐引擎基于模型
召回算法
详情库
推荐结果
0 条评论
下一页