一直从事软件工程领域,具备多年云原生、AI 工程、微服务、可观测方向从业经验。现就职于百度,负责百度百舸平台私有化工作。百舸 AI 异构算力平台作为算力效能底座承接百度智能云千帆大模型平台,并深耕金融、能源、教育、工业等多行业场景。本科毕业于西北工业大学,研究生毕业于北京大学。

一直从事软件工程领域,具备多年云原生、AI 工程、微服务、可观测方向从业经验。现就职于百度,负责百度百舸平台私有化工作。百舸 AI 异构算力平台作为算力效能底座承接百度智能云千帆大模型平台,并深耕金融、能源、教育、工业等多行业场景。本科毕业于西北工业大学,研究生毕业于北京大学。
大模型时代的到来,为智算平台建设带来了新的挑战,也由此衍生出一系列工程实践问题。如算力规模的急遽增长带来的集群纳管和运维难度增加问题;训练时长增长,则出错概率变高问题;面向用户的推理时效性问题;以及在人工智能领域知识逐渐深入的背景下,如何同时服务好运维人员和算法工程师的问题。
基于百度多年来在 AI 领域的工程积累,百度百舸团队专为大规模深度学习场景,打造出一套高性能云原生 AI 计算平台,为模型算法专家和运维专家提供全面的集群运维支持和任务全生命周期管理,同时具备训练/推理加速、故障容错、智能故障诊断等高级功能,大幅提升算力使用效率。
演讲提纲:
听众受益点:



