阿里云计算平台事业部高级技术专家,在阿里8年一直从事大数据开发套件的开发和设计,主要包括一站式的大数据开发平台、工作流任务调度、任务监控、数据质量、数据管理等。
阿里云计算平台事业部高级技术专家,在阿里8年一直从事大数据开发套件的开发和设计,主要包括一站式的大数据开发平台、工作流任务调度、任务监控、数据质量、数据管理等。
阿里巴巴计算平台事业部技术专家,多年分布式系统经验,曾研发了 Aliyun StreamCompute V1.0,目前负责交互式分析产品的设计与研发。
中国企业全面进入数字化转型的关键时期,迅速搭建数据中台挖掘数据价值反哺业务的重要性逐步为企业重视。阿里巴巴大数据平台架构是怎么样的?如何快速复制阿里巴巴大数据中台建设思路?如何提高数据开发的效率?如何进行数据资产的规划和治理?如何实时高效的开展业务价值探索和洞察?这些都是企业数据中台建设过程中需要面临并解决的问题。
培训大纲:
(一)一站式大数据开发平台
1. 单日EB级别数据同步技术
1.1 插件化架构实现
1.2 实时同步
1.3 离线同步
2. 单租户千万级复杂依赖调度技术(待定)
2.1 任务转实例
2.2 任务隔离
3. 调度的自我运维(mosad)
3.1 调度基线管理
3.2 自我运维技术实现
4. 数据治理实现手段
4.1 数据探查
4.2 数据质量监控实现
4.3 血缘关系
(二)阿里新一代交互式分析引擎Hologres
1. 产品定位
1.1 背景
1.2 应用场景
2. 技术架构
2.1 存储引擎
2.2 计算引擎
2.3 存储计算分离
2.4 联邦计算
2.5 异步框架
3. 生态
3.1 Postgres生态
3.2 大数据生态
(三)阿里大数据中台最佳实践
听众受益点:
1. 阿里云大数据平台技术架构和实现
2. 新一代实时交互式分析引擎架构和实现
3. 阿里巴巴大数据中台最佳实践