为什么要有批量归一化：

在这里插入图片描述

归一化数学公式：

核心思想就是把一整个批次的均值和方差固定在一定的范围内，满足一个均匀分布，和标准化不同的是它并不是把均值和方差映射在[0,1]的区间内。这个α（偏移）和β（缩放）是可以学习的参数，在每一轮迭代中都会更新，这也使得α和β能更好的拟合这个模型。
在这里插入图片描述

批量归一化的使用：

在这里插入图片描述

代码实现：

期中的moving_mean和moving_var就是对应的就是α和β，在每次跌打都会更新，eps根据这个后面的介绍好像是学习率，因为后面介绍时eps=1e-5，应该是学习率
在这里插入图片描述

总结：

在这里插入图片描述

# 深度学习 # 机器学习 # 人工智能
Logo
九章云极普惠算力

更多推荐

cover

阿里云 Coding Plan Lite 下架，各家算力吃紧，上哪买还能支持GLM-5和5.1的coding plan？_2026-04-15

avatar 九章云极普惠算力
cover

看遍了市面上的coding plan，我发现还是这个好用

avatar 九章云极普惠算力

Kandinsky-5.0-I2V-Lite-5s惊艳效果展示：赛博朋克街景→霓虹闪烁+雨滴滑落动态视频

本文介绍了如何在星图GPU平台上自动化部署Kandinsky-5.0-I2V-Lite-5s镜像，实现高效图生视频转换。该工具能将静态赛博朋克街景图片快速转换为动态视频，添加霓虹闪烁、雨滴滑落等效果，适用于短视频制作、广告创意等场景，显著提升内容创作效率。

avatar 九章云极普惠算力