2007年毕业于浙江大学,获得计算机硕士学位。2007-2012年在Google上海从事视频搜索技术的研发,负责从视频发现,索引到搜索质量的相关技术。2012年开始在Google广告部门担任技术经理,2014年至今在Google产品基础架构部门负责核心数据库系统F1和Mesa的研发。
2007年毕业于浙江大学,获得计算机硕士学位。2007-2012年在Google上海从事视频搜索技术的研发,负责从视频发现,索引到搜索质量的相关技术。2012年开始在Google广告部门担任技术经理,2014年至今在Google产品基础架构部门负责核心数据库系统F1和Mesa的研发。
Mesa是一个高度可扩展的分析型数据仓库系统,用于存储Google在线广告业务中的关键性计量数据。Mesa的设计目标是要满足一系列极具挑战的用户及系统需求,其中包括近实时的数据更新和查询,高可用性,可靠性,高容错性和可扩展性。Mesa存储了PB规模的数据,能处理每秒百万行规模的更新和每天Billion规模的查询请求,每天处理的查询总数据量在Trillion规模。Mesa实现了跨地域的多数据中心冗余,可以在单个数据中心发生灾难的情况下仍然提供低延时的一致性查询结果。
演讲提纲
1. Mesa的设计目标;
2. Mesa的数据模型:
3. Mesa的系统架构:
4. Mesa在生产环境中的表现;
5. 总结。
听众受益
在大规模数据仓库中如何实现:
极客邦控股(北京)有限公司
北京市朝阳区望京利泽中二路洛娃大厦C座6层1607