专题演讲嘉宾：张力寰

本次演讲主要介绍千亿模型训练过程中的训练优化实践经验，如何在 MFU 和 Goodput 两个维度提升模型训练的效率。其中包括分布式训练策略、异步存储 CKPT、FP8 训练经验分享、MOE 训练优化分享等。

演讲提纲：

1. 模型训练硬件利用率影响因素
2. 提升分布式训练效率
3. 异步存储 CKPT
4. FP8 训练经验分享
5. MOE 训练经验分享
6. 总结与展望

听众收益：

• 了解大模型训练优化方法
• 了解 FP8 训练相关经验
• 了解 MOE 训练相关经验