同步程序任务执行流程
2021-04-27 15:22:02 0 举报同步程序任务执行流程
作者其他创作
大纲/内容
流批一体：涉及多个spark自定义read/write
注册监听器根据任务状态写入表：t_job_process_state
触发执行
获取任务节点，表：t_noe遍历执行计划，dateframe转化source->转化->sink
SparkSeesion
注册相关UDF
轮询执行
扫描待执行任务表：t_workflow
收藏
收藏
0 条评论
下一页
