OPPO大数据Spark、Flink引擎诊断系统的设计与实践

庄泽波

中文演讲 2023-08-19 15:45 GMT+8  #performance

OPPO在EB级数据量、大数据组件多、问题种类多情况下,从问题触发、快速定位、问题优化到问题收敛,打造一个引擎诊断平台,提供给用户在大数据Flink、Spark作业方面的性能优化工具,提升用户解决问题效率,降低用户作业资源使用,最后开源系统 https://github.com/cubefs/compass,为社区贡献力量。

Speakers:


庄泽波: OPPO, 高级后端研发工程师, OPPO高级研发工程师,Compass开源项目Maintainer,专注云原生、可观测、大数据等领域。