小米基于Apache Doris的OLAP实践

魏祚

中文演讲 2023-08-20 15:45 GMT+8  #olap

简介:Apache Doris 在小米集团有着广泛的应用,主要用于满足集团内部对于报表分析和BI看板的需求,支持了小米内部近百个核心业务,并且在小米内部已经形成了一套以 Apache Doris 为核心的数据生态。本次演讲将重点分享 Apache Doris 在小米的应用实践以及小米对Apache Doris的优化实践。

提纲:

  • 历史选型及应用现状介绍小米内部OLAP系统的发展历史、选型情况,以及Apache Doris目前在小米集团的应用现状。
  • Apache Doris 在小米的应用实践介绍Apache Doris在集团BI平台数据流中的位置及使用方式;
    • 介绍小米数据工场针对Apache Doris的权限管理、元数据管理机制及数据治理情况;
    • 介绍Apache Doris在小米用户行为分析平台的应用实践;
    • 介绍小米Apache Doris的监控报警机制。
  • 小米对Apache Doris的优化实践主要从Stream Load两阶段提交功能和单副本数据写入功能介绍小米对Apache Doris的优化。
  • OLAP未来规划介绍小米用户在使用Apache Doris过程中遇到的痛点,及小米OLAP未来的发展规划(多OLAP引擎方案探索和OLAP Service能力研发等)。

Speakers:


魏祚:小米数据库内核研发工程师,Apache Doris Committer & PMC Member