工作流和数据治理将复杂的数据处理进行有序调度及处理,并在元数据和数据质量方面进行管控。在ASF有多种个项目提供了多种数据工作流方案,例如Apache Airflow,Apache Dolphin Scheduler,Apache Oozie,而Apache Atlas和Apache Griffin提供了多种元数据、数据质量的管理。在工作流和数据治理主题中大家不但会了解到一线用户将这些Apache项目应用到具体项目当中的实践经验,而且会了解这些Apache项目生态的最新进展,同时也将展望数据调度和数据治理方面的愿景。
工作流和数据治理
出品人 : 郭炜
2021-08-07
-
13:30 GMT+8 DolphinScheduler 调度工具在运营商的实践 中文演讲 王兴杰
14:10 GMT+8 Apache DolphinScheduler - 一个用于处理大量复杂的任务优秀调度工具 中文演讲 Qiang Guo
14:50 GMT+8 Airflow深度实践 中文演讲 吴琏
15:30 GMT+8 基于Apache Hudi的数据湖上的Dolphin调度器的实践 英文演讲 Zhao Yuwei
2021-08-08
-
13:30 GMT+8 新一代大数据工作流调度平台--Apache DolphinScheduler的架构演变 中文演讲 Lidong Dai
14:10 GMT+8 基于DolphinScheduler的数据质量服务实践 中文演讲 孙朝和
14:50 GMT+8 使用Airflow在Kubernetes进行数据处理 中文演讲 栾鹏
15:30 GMT+8 DolphinScheduler json拆分项目 中文演讲 lijinyong