spark sql执行逻辑
2021-03-31 11:11:57 0 举报
spark sql执行逻辑
作者其他创作
大纲/内容
是否有这张表
select ....
data
hadoop outputPath inputPath
SQL转MR程序
read/write
ReduceTask
文件
元数据
文件格式
table结构化
DDL
table是虚拟的location
dir
schema
四种类型
有没有做过DDL存储位置存储类型列类型 元数据等列顺序分隔符
DQL
key
from table
dep = dev
Select
inputformat
datametadata
row
where
group ... udf
假设一加公司存放了10年的数据
UDF
关系
DCL
MapTask
文本
SQL
DML
0 条评论
下一页