深度学习难度 ★★★★☆
批归一化
把每层数据"标准化"到均匀分布,让训练又快又稳
分享:
📖 详细解释
🎯 一句话定义
把每层数据"标准化"到均匀分布,让训练又快又稳
⚙️ 工作原理
在每个mini-batch内对每层输出做μ=0,σ=1归一化,再通过可学习参数γ,β恢复表达力
💡 生活类比
"流水线上每道工序前都先"校准"材料规格,保证下一道工序稳定接收——BatchNorm就是这么做的"
🌍 真实应用
几乎所有现代深度学习网络(ResNet, Transformer)都使用BatchNorm或其变体(LayerNorm)