现负责蚂蚁图计算部门流式图计算团队。2012 年加入阿里集团数据平台,2016 年加入蚂蚁集团数据技术部,经历了阿里和蚂蚁实时计算从 0 到 1 的演进,从 2017 年底开始负责流式图系统和团队的构建,从 0 到 1 打造了蚂蚁的流式图系统,对实时计算和图计算以及上层的应用场景有深入的理解。

现负责蚂蚁图计算部门流式图计算团队。2012 年加入阿里集团数据平台,2016 年加入蚂蚁集团数据技术部,经历了阿里和蚂蚁实时计算从 0 到 1 的演进,从 2017 年底开始负责流式图系统和团队的构建,从 0 到 1 打造了蚂蚁的流式图系统,对实时计算和图计算以及上层的应用场景有深入的理解。
对于社交网络、金融风控等大数据领域,业务一般会利用 Graph 系统(如 Google Pregel、Spark GraphX 等)来高效地执行复杂的图算法,其比传统的 Data 系统更快。但随着相关领域大数据业务的发展,基于 Spark GraphX 的图计算方式存在一些问题,例如这种方式需要先通过 Spark Streaming 接收流式数据并进行清洗,然后周期性的全量构图,最后使用 Spark GraphX 做全量图迭代,这样实现一方面会导致业务链路较长,另一方面实时性无法满足。在蚂蚁内部,我们实现了一套自研的流式图计算引擎 Geaflow,天然契合金融风控等业务场景需求,能有效满足业务秒级时序增量的要求,同时为业务带来显著收益。
本议题将为你分享自研的流式图计算引擎 Geaflow 的技术实践,希望能够为你带来启发。
演讲提纲:
你将获得:



