云原生数据湖如何提速两倍以上

史少锋

中文演讲 2023-08-19 13:30 GMT+8  #datalake

随着云计算与大数据技术的融合,云原生湖仓逐渐成为业界的热点。Kubernetes和Apache Spark做为云原生和大数据领域的开源技术领导者,彼此结合成为很多人的首选。然而将Spark在Kubernetes上作为湖仓分析引擎,面临诸多挑战,例如资源管理、任务调度、存储对接、弹性伸缩、高可靠性等。Kyligence 在服务各类客户的过程中积累了丰富的经验,并积极参与和回馈社区;此次演讲将分享如何基于一系列开源技术如 K8S、Spark、Gluten、Volcano、Kyuubi 等打造开箱即用的云原生湖仓分析引擎。

Speakers:


史少锋: Kyligence Inc, 首席架构师, 史少锋,Kyligence 首席架构师;Apache Kylin committer & PMC。曾就职于 eBay,IBM,作为核心成员,参与 Apache Kylin 项目的研发与开源全过程。对大数据和云计算行业发展趋势、产业生态、技术产品化有着长期深入的研究和丰富的实战经验。