首页
学习
活动
专区
圈层
工具
发布

[深度学习概念]·数据归一化问题

预测时数据如何归一化问题?

个人主页--> https://xiaosongshine.github.io/

参考Batch Normalization(简称BN)的处理方法

在训练时,我们会对同一批的数据的均值和方差进行求解,进而进行归一化操作。但是对于预测时我们的均值和方差怎么求呢?

比如我们预测单个样本时,那还怎么求均值和方法呀!其实是这种样子的,对于预测阶段时所使用的均值和方差,其实也是来源于训练集。比如我们在模型训练时我们就记录下每个batch下的均值和方差,待训练完毕后,我们求整个训练样本的均值和方差期望值,作为我们进行预测时进行归一化处理的均值和方差。

简单点来说就是我们记录下来每次训练batch下的均值和方差,最后分别求均值和方差的平均值,然后再对预测数据做归一化处理。

下一篇
举报
领券