logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Apache DolphinScheduler 源码解析-任务生命周期(1)

ApacheDolphinScheduler 是一个分布式去中心化,易扩展的可视化 DAG 工作流任务调度平台。本篇对 Apache DolphinScheduler 调度平台从源码上解析任务从创建,构建,分发,执行,结束五个阶段的处理,涉及 Api-Server,Master-Server,Worker-Server三个服务。ApacheDolphinScheduler官网: https://d

文章图片
#apache#java#大数据
离线安装Python3和离线安装第三方模块

企业内网无联网真实离线安装Python3和离线安装第三方模块实例,亲测有效!!!

#linux#python
主流大数据调度工具对比DolphinScheduler Azkaban Airflow Oozie Xxl-job

大数据环境下,调度工具比不可少,离线批任务和准实时任务都需要调度去驱动。下文介绍主流大数据调度工具对比DolphinScheduler Azkaban Airflow Oozie Xxl-jobXxl-jobDolphinSchedulerAzkabanAirflowOozie定位一个轻量级分布式的任务调度框架解决数据处理流程中错综复杂的依赖关系为了解决Hadoop的任务依赖关系问题通用的批量数据

#大数据
暂无文章信息