1-bit SGD:用正负号取代梯度幅值的极端压缩

FreeGuideOnline 最新 2026-06-28

error ← 0 for t = 1, 2, ... do 计算局部梯度 g_t g_t ← g_t + error 发送 Q(g_t) (即符号 + 缩放因子) 更新误差:error ← g_t - Q(g_t) end