首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >【图像分割】开源 | 纽约大学--提供了一个极其简单和实用的方法,从训练数据中自动发现不变性和等方差

【图像分割】开源 | 纽约大学--提供了一个极其简单和实用的方法,从训练数据中自动发现不变性和等方差

作者头像
CNNer
发布2020-11-03 10:22:45
4280
发布2020-11-03 10:22:45
举报
文章被收录于专栏:CNNerCNNer

论文地址: http://arxiv.org/pdf/2010.11882v1.pdf

代码: https://github.com/g-benton/learning-invariances

来源: 纽约大学

论文名称:Learning Invariances in Neural Networks

原文作者:Gregory Benton

内容提要

本文引入了Augerino,这是一个可以与标准模型架构无缝部署的框架,可以单独从训练数据中学习对称性,并提高泛化能力。通过实验我们可以看到Augerino能够恢复ground truth的不变性,包括软不变性,最终发现数据集的可解释表示。Augerino在增强时恢复可解释和准确分布的能力提高了在特定任务的专门基线和基于数据的增强方案上的性能,该方案适用于各种任务,包括分子特性预测、图像分割和分类。

摘要:平移的不变性为卷积神经网络注入了强大的泛化特性。然而,我们通常无法预先知道数据中存在哪些不变性,或者模型在多大程度上应该对给定的对称组保持不变。我们展示了如何通过参数化增强分布和同时优化网络参数和增强参数的训练损失来学习不变性和等方差。Augerino是第一种不需要验证集或特殊损失函数就能从训练数据中学习神经网络对称性的方法。

主要框架及实验结果

本文参与 腾讯云自媒体分享计划,分享自微信公众号。
原始发表:2020-10-31,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 CNNer 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档