Spark知识点梳理
2023-01-08 11:02:54 19 举报AI智能生成
整理了spark学习的知识点
作者其他创作
大纲/内容
概念&原理
driver
executor
application
job
stage
task
DAG的划分
配置&参数
运行模式
Standalone
Single Master
HA
On Yarn
Cluster
Client
On K8S
Local
启动和运行流程
SparkCore&RDD
概念和特性
常用算子和特性
数据存储
Shuffle
容错机制
累加器和广播变量
SparkSQL
DataFrame
DataSet
关联
自定义函数
Spark Streaming
原理
窗口
WaterMark
时间:event、process
DStream
Structured Streaming
排错与优化
Spark UI
常见错误与解决方法
常见性能问题与改进方法
收藏
0 条评论
下一页
