深入混合精度训练的工程细节,掌握 FP16/BF16 自动选择、损失缩放策略和梯度累积中的精度控制。
学习自动混合精度训练机制,利用 FP16 或 BF16 计算加速并省内存,通过损失缩放与动态类型转换保持训练数值稳定。