新的Apache Bigtop 1.5和Wikimedia: 在现实世界中为BigData赋能

Yuqi Gu, Luca Toscano

英文演讲 2021-08-08 16:50 GMT+8  (ROOM : B) #bigdata

Bigtop是为基础设施工程师和数据科学家提供的Apache项目,他们正在寻找开源大数据组件的打包、测试和配置。其最新版本1.5.0已经作为大数据Sw堆栈发布。从Bigtop的真实使用案例来看,维基媒体的分析/数据工程团队与该项目合作,将其Cloudera CDH Hadoop分布转移到Apache Bigtop。 在本次会议中,发言人将概述Bigtop的新功能及其实施细节,并简要介绍维基媒体和Bigtop之间为支持其数据基础设施的迁移所做的工作。

讲师:

Yuqi Gu: Yuqi Gu目前在Arm和linaro工作。他是Apache Bigtop的提交者和PMC成员。他主要关注Arm64的性能优化。

Luca Toscano: Luca Toscano 是维基媒体基金会的一名网站可靠性工程师。他对可扩展的系统设计和可靠性、流程自动化和并行/分布式/低级编程感兴趣。他对能够管理和自动化复杂基础设施的软件堆栈充满热情。