DolphinScheduler 在T3出行一站式平台中的应用

李心恺,赵玉威

中文演讲 2022-07-30 15:10 GMT+8  #workflowdatagovernance

Apache DolphinScheduler是一款优秀的分布式数据工作流任务调度系统,但是缺少相关CI\CD模块。T3出行整合了一站式开发平台,并且使DolphinScheduler对接了Apache Kyuubi、Apache Linkis计算中间件,形成了开发调试、发布、版本控制等一套完成的开发流程,极大提高了开发效率,规范了数据开发流程,实现了代码开发、业务上线与调度系统的打通,同时可以收口做到大数据开发 CI/CD 管理,帮助业务部门低门槛上线大数据相关的需求,减轻了数据开发的压力,向我们一站式开发平台的目标更进了一步

Speakers:


李心恺: T3出行, 大数据平台研发工程师, 负责T3出行计算引擎和一站式平台研发管理工作,参与了COSCon'2021以及Apache SeaTunnel & Kyuubi 联合 Meetup ,分享Apache Kyuubi在T3出行的实践和应用。


赵玉威: T3出行, 大数据平台研发工程师, 负责T3出行基于Dolohin Scheduler任务调度平台的研发管理工作,并参与了2020阿帕奇中国开源年会及Workflow ApacheCon Asia 2021,分享Dolphin Scheduler在T3出行的深度定制与实践。