专题演讲嘉宾:吴彪

美团数据科学与平台部/技术专家

目前在美团负责 AdHoc 查询方向,专注于分布式计算引擎方向,曾主导 OneSQL 引擎设计开发、Presto 引擎优化、PrestoOnYarn & 动态伸缩、Hive 引擎优化等项目。

by 吴彪

美团
数据科学与平台部/技术专家

在美团 AdHoc 场景中有两个查询引擎,Spark 支持复杂查询场景,Presto 来支持简单高性能场景,对分析师使用成本很高,我们通过结合机器学习算法实现智能路由策略、SQL 方言自动改写等方法降低用户使用成本。

本议题我将详细介绍架构选型和实现原理,期待给你带来收获。

演讲提纲:

  1. 为什么需要统一引擎
  2. OneSQL 统一引擎整体架构
  3. OneSQL 实现原理
    • 解析层统一
    • 引擎预测
    • 方言改写
    • 异常诊断
  4. 未来展望

你将获得:

  • AdHoc 不同场景下多引擎语法函数兼容性、引擎选择实践经验
  • 查询统一引擎实现思路

交通指南

杭州·和达希尔顿逸林酒店

Shanghai Marriott Hotel Parkview
地址:杭州市钱塘区金沙大道600号
小姐姐