用户6915903

LV1
发表了文章

深度残差网络+自适应参数化ReLU激活函数(调参记录21)Cifar10~95.12%

本文在调参记录20的基础上,将残差模块的个数,从27个增加到60个,继续测试深度残差网络ResNet+自适应参数化ReLU激活函数在Cifar10数据集上的表现...

用户6915903
发表了文章

深度残差网络+自适应参数化ReLU激活函数(调参记录20)Cifar10~94.17%

在之前的调参记录18中,是将深度残差网络ResNet中的所有ReLU都替换成了自适应参数化ReLU(Adaptively Parametric ReLU,APR...

用户6915903
发表了文章

深度残差网络+自适应参数化ReLU激活函数(调参记录19)Cifar10~93.96%

由于调参记录18依然存在过拟合,本文将自适应参数化ReLU激活函数中最后一层的神经元个数减少为1个,继续测试深度残差网络+自适应参数化ReLU激活函数在Cifa...

用户6915903
发表了文章

深度残差网络+自适应参数化ReLU激活函数(调参记录18)Cifar10~94.28%

本文将残差模块的数量增加到27个。其实之前也这样做过,现在的区别在于,自适应参数化ReLU激活函数中第一个全连接层中的神经元个数设置成了特征通道数量的1/16。...

用户6915903
发表了文章

深度残差网络+自适应参数化ReLU激活函数(调参记录17)

在调参记录16的基础上,增加了两个残差模块,继续测试其在Cifar10数据集上的效果。

用户6915903
发表了文章

深度残差网络+自适应参数化ReLU激活函数(调参记录16)

在调参记录15的基础上,将第一个残差模块的卷积核数量,从16个增加到32个,同时将自适应参数化ReLU激活函数中第一个全连接层的神经元个数改成原先的1/16,继...

用户6915903
发表了文章

深度残差网络+自适应参数化ReLU激活函数(调参记录15)

训练集上还没拟合得很好,测试集准确率已经低于训练集准确率大约2.5%了。这是同时存在欠拟合和过拟合呀!

用户6915903
发表了文章

深度残差网络+自适应参数化ReLU激活函数(调参记录14)

这次再尝试解决过拟合,把残差模块的数量减少到2个,自适应参数化ReLU激活函数里面第一个全连接层的权重数量,减少为之前的1/8,批量大小设置为1000(主要是为...

用户6915903
发表了文章

深度残差网络+自适应参数化ReLU激活函数(调参记录13)

从以往的调参结果来看,过拟合是最主要的问题。本文在调参记录12的基础上,将层数减少,减到9个残差模块,再试一次。

用户6915903
发表了文章

深度残差网络+自适应参数化ReLU激活函数(调参记录12)

本文在调参记录10的基础上,在数据增强部分添加了zoom_range = 0.2,将训练迭代次数增加到5000个epoch,批量大小改成了625,测试Adapt...

用户6915903
发表了文章

深度残差网络+自适应参数化ReLU激活函数(调参记录11)

本文在调参记录10的基础上,将残差模块的数量从27个增加到60个,测试采用Adaptively Parametric ReLU(APReLU)激活函数的深度残差...

用户6915903
发表了文章

深度残差网络+自适应参数化ReLU激活函数(调参记录10)

本文在调参记录9的基础上,在数据增强部分添加了shear_range = 30,测试Adaptively Parametric ReLU(APReLU)激活函数...

用户6915903
发表了文章

深度残差网络+自适应参数化ReLU激活函数(调参记录9)

本文在调参记录6的基础上,继续调整超参数,测试Adaptively Parametric ReLU(APReLU)激活函数在Cifar10图像集上的效果。

用户6915903
发表了文章

深度残差网络+自适应参数化ReLU激活函数(调参记录8)

https://blog.csdn.net/dangqing1988/article/details/105670981

用户6915903
发表了文章

深度残差网络+自适应参数化ReLU激活函数(调参记录7)

https://blog.csdn.net/dangqing1988/article/details/105628681

用户6915903
发表了文章

深度残差网络+自适应参数化ReLU激活函数(调参记录7)

https://blog.csdn.net/dangqing1988/article/details/105628681

用户6915903
发表了文章

深度残差网络+自适应参数化ReLU激活函数(调参记录6)

https://blog.csdn.net/dangqing1988/article/details/105627351

用户6915903
发表了文章

深度残差网络+自适应参数化ReLU激活函数(调参记录5)

https://blog.csdn.net/dangqing1988/article/details/105610584

用户6915903
发表了文章

深度残差网络+自适应参数化ReLU激活函数(调参记录4)

https://blog.csdn.net/dangqing1988/article/details/105601313

用户6915903
发表了文章

深度残差网络+自适应参数化ReLU激活函数(调参记录3)

https://blog.csdn.net/dangqing1988/article/details/105595917

用户6915903

个人简介

个人成就

  • 获得 1 次赞同
  • 文章被阅读 1.6K 次

扫码关注云+社区

领取腾讯云代金券