OminiRuntime:一个简洁的大数据运行时框架

Jingfang Zhang

英文演讲 2021-08-07 14:10 GMT+8  (ROOM : A) #bigdata

我们分析了几个主流大数据计算引擎的数据处理过程,发现了一些共同的问题,并使用一个统一的解决方案来解决这些优化问题。这个解决方案就是OmniRuntime。OmniRuntime使用JIT技术动态地生成高性能的运算器。启用列式内存数据的矢量化执行;数据可以有效地交换。通过使用存储-计算协作技术,减少存储和计算之间的网络带宽。

讲师:

Jingfang Zhang: OpenLooKeng开发者,拥有9年的大数据开发经验。曾负责海量存储主动化项目的设计和开发,深度参与OpenLooKeng计算引擎的内核设计和开发,涉及OmniRuntime的设计和开发。跨数据中心查询技术探索,以及数据传输优化工作。