大数据流程图
2022-03-11 12:56:32 1 举报
大数据开发架构图
作者其他创作
大纲/内容
增量接入/实时(Flink和Streamsets )
任务运维
数据权限管理(Ranger)
数据开发
交互式查询(Presto)
身份认证管理(LDAP)
离线计算(Hive)
运维监控(Ambari)
结构化数据(如RDBMS)
日志文件
数据集成
数据计算
数据同步
统一资源管理与调度(Yarn)
数据血缘(Atlos)
项目管理
接入数据源
系统Portal层
数据服务化(Data Api)
------
流式计算(Flink)
分布式文件系统(HDFS)
场景应用
数据质量(Quality)
大数据开发门户(前台WEB)
分布式数据库(Hbase)
内存计算(Spark)
全量/非实时接入(Sqoop)
任务调度
数据存储
数据管理
工作流调度(Azkaban)
资源管理
0 条评论
下一页