课程目标

1.  理解分布式训练基本理论与 Horovod 框架的工作机理，掌握使用 Cambricon TensorFlow2 对常见网络进行分布式训练的能力。

2.  帮助开发者们理解 Cambricon TensorFlow2 的混合精度训练机制，掌握使用 Cambricon TensorFlow2 对常见网络进行混合精度训练的能力。

课程概述

第一讲：

1. 分布式训练理论

2. 原生 Horovod 框架简介

3. Cambricon Horovod 框架简介

4. 基于 Horovod 的 Cambricon TensorFlow2 的多卡分布式训练实践

第二讲：

1. Cambricon TensorFlow2 混合精度训练理论

2. 在 MLU 上使用 Cambricon TensorFlow2 进行混合精度训练