大数据微服务架构
2023-02-17 16:36:20 13 举报
大数据微服务架构是一种将大数据处理任务分解为多个小型、独立的服务的架构模式。每个微服务负责处理特定的数据子集,并使用专门的工具和技术进行数据处理和分析。这种架构模式具有高度的可扩展性和灵活性,可以根据业务需求快速添加或删除服务。此外,由于每个微服务都是独立的,因此它们可以独立部署和更新,而不会影响到其他服务。总之,大数据微服务架构为企业提供了一种高效、灵活、可扩展的方式来处理和分析大量数据。
作者其他创作
大纲/内容
MySQL
Zipkin调用链追踪
自动化脚本
AI算法引擎
Hutool工具组件
FastDFS
车辆分类
音视频
Map/Reduce
非结构化数据
其他数据库
运维
Spring Alibaba阿里开源
GetWay网关
视频识别
火灾检测
Docker容器
支撑多端统计分析辅助决策
图像AI能力
Hive SQL
半结构化数据
Nacos服务注册服务发现
结构化数据
日志文件
语音视频AI能力
Hive+hdfs(数仓)
权限服务----{security}
存储
Prometheus监控报警
组件封装
YoLov5
Activiti工作流引擎
服务治理与配置
Hystrix熔断保护
网关
Kafka
口罩识别
智能引擎
EFK日志中心
Spark Streaming
文本AI能力
呼叫服务----{call}
Hadoop-hdfs
RabbitMQ
地图服务----{map}
烟雾检测
数据源服务----{datasrce}
离线计算
基础设施
事务服务----{transacti}
Git代码管理
数据中台
DL/ML
POI/PDFBox/OCR
Spring Cloud 全家桶
Mavenjar管理工具
PDF/Word
CNN/GNN
异常服务----{exception}
K8s
核心工具----{core}
服务监控
对象滞留
短信服务----{sms}
应用层
Flume/FileBeat+Logstash
Security安全控制
Nacos统一配置
数据源层
公共技术层
大数据采集、存储、计算融合AI引擎
服务中台
实时计算
Jenkins自动构建平台
日志服务----{log}
应用算法
图像识别
爬虫
安全帽识别
AI服务
UndertowWeb容器
Redis
应用模型
存储服务----{oss}
分析计算层
网关层
报表服务----{jimu}
手写汉字识别
人脸识别
区域入侵
MongoDB
Admin服务治理
Spark/SparkSQL
0 条评论
下一页