专题演讲嘉宾:韩飞

京东零售集团数据计算平台专家架构师、技术总监

负责京东集团实时大数据平台的整体技术架构演进及研发工作,Flink、Pulsar 等多个开源项目Contributor。曾就职于 FreeWheel,任数据基础架构实时团队负责人。深耕大数据平台多年,在数据平台技术架构、实时计算、云原生、数据集成等领域具备丰富的实践经验。

by 韩飞

京东零售
集团数据计算平台专家架构师、技术总监

通常数据时效性越高,价值越大。随着实时计算、数据湖等技术的日趋成熟,数据实时化的需求增长迅速,传统大数据平台能力在应对实时化需求时表现出资源利用率低、弹性能力差、智能化程度低等问题,而解决这些问题也成为数据平台发展的新趋势。

本次分享将介绍京东集团实时数据平台在不断推动数据实时化的基础上,针对上述问题进行的一些探索及实践,包括实时链路端到端云原生底座能力的打造、数据实时化的整体方案以及如何不断提升平台的智能程度,实现降本提效等。最后,对平台的后续发展进行展望。

演讲提纲:

  1. 平台定位及规模
    • 业务及定位
    • 平台规模现状
  2. 架构演进及实践
    • 云原生/容器化实践
      • 实时平台架构及容器化现状
      • JDQ on JDOS
      • 实时计算弹性伸缩
      • 跨机房能力
    • 数据实时化
      • 实时采集替换离线
      • 基于增量的准实时链路
    • 平台智能化
      • 低代码开发
      • 智能调度
      • 作业健康度
  3. 未来规划

你将获得:

  • 了解大数据平台云原生的实践经验
  • 了解数据实时化的技术方案及思路
  • 了解如何打造平台智能化能力

交通指南

上海·明捷万丽酒店

Shanghai Marriott Hotel Parkview
地址:上海市普陀区铜川路50号近岚皋路5号口20米
小姐姐