2023最新版《大数据技术及大数据架构》知识地图
2022-09-08 16:27:46 24 举报2023最新版《大数据技术及大数据架构》知识地图.大数据架构分为：数据来源层->数据采集层->分布式存储层->传输层->分析计算层->业务存储层->展示层共七层，基本使用flume sqoop hive hadoop spark flink mysql redis logstash elasticsearch datax等技术
作者其他创作
大纲/内容
Flume/FileBeat+Logstash
Spark Streaming
数据大屏
POI/PDFBox/OCR
结构化数据
分布式存储层
搜索
Hive SQL
数据来源层
爬虫
Spark/SparkSQL
Hive+hdfs(数仓)
离线计算
实时计算
非结构化数据
PDF
数据采集层
分析计算层
统计报表
Map/Reduce
用户画像
排名
数据展示层
Hadoop-hdfs
Word
半结构化数据
业务存储层
数据传输层
日志文件
图片
0 条评论
下一页
