前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >CVPR2022|Low-level领域不容错过的几篇paper

CVPR2022|Low-level领域不容错过的几篇paper

作者头像
AIWalker
发布2022-03-29 20:35:19
7700
发布2022-03-29 20:35:19
举报
文章被收录于专栏:AIWalker

大家好,前两天CVPR2022放榜了,您中了吗!

今天给大家推荐几篇笔者曾经解读过也非常喜欢的几篇paper,其他优秀的paper正在赶来的路上,哈哈。

1让Dropout在图像超分领域重焕光彩!

原文链接

Dropout有助于缓解high-level视觉任务中的过拟合问题,但在low-level视觉任务(如图像超分)中却鲜少应用。作为经典的回归问题,SR具有与high-level任务不同的行为:对dropout操作非常敏感

然而,本文研究表明:合理的使用dropout有益于SR模型,提升其泛化性能 。具体来说,dropout更适合于嵌入到网络的尾部 ,并对于多退化情形帮助极大。下图给出了不同配置下采用Dropout前后的性能对比,可以看到:引入dropout可以大幅提升模型的泛化性能 ,甚至可以将SRResNet的提升到优于RRDB的程度。重要的是,添加dropout仅需一行code。真可谓:One line of code is worth a ten-fold increase in the model parameters .

该发现打破了我们的常识并启发我们探索其工作机理。我们采用两种分析工具(Channel Saliency Map与Deep Degradation Representation)进行分析,分析结果为实验发现提供了佐证并为SR模型的理解提供了新视角。

2RealBasicVSR:BasicVSR再次升级,破局真实场景视频超分

原文链接

真实场景视频数据的多样性、退化的复杂性为视频超分带来了极大的挑战。尽管时序上的长距离传播可以有效改善轻度的重建质量,但真实场景的重度退化则会伴随长距离传播损害重建质量。

为平衡细节生成与伪影抑制,我们发现:预清洗(pre-cleaning)对于降低噪声与伪影不可或缺 。武装上精心设计的预清洗模块后,所提RealBasicVSR在重建质量与效率方面超越了已有方案。

3NTIRE2021竞赛"三冠一亚"方案BasicVSR++,Vid4新巅峰29.04dB

原文链接

由于需要利用额外的时序信息,视频超分往往比图像超分包含更多的模块,这就导致了各式各样的复杂结构。该文作者对视频超分进行了梳理并重新审查了视频超分的四个基本模块:Propagation, Alignment, Aggregation以及Upsampling。通过复用现有方案的模块并添加微小改动,作者提出了一种简单方案:BasicVSR,它在推理速度、复原质量方面取得了引人注目的提升。

作者对BasicVSR进行了系统的分析,解释了性能提升的原因所在,同时也讨论了其局限性。在BasicVSR的基础上,作者进一步提出了“信息寄存(information-refile)”与“耦合传播(coupled propagation)”两种机制促进信息集成。所提BasicVSR及其改进IconVSR将视频超分的性能进行了更进一步的提升,可以作为视频超分领域的一个更强的基准。

下图给出了所提方案与其他视频超分方案在性能与推理速度放慢的对比,可以看到BasicVSR与IconVSR遥遥领先。

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2022-03-03,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 AIWalker 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 1让Dropout在图像超分领域重焕光彩!
  • 2RealBasicVSR:BasicVSR再次升级,破局真实场景视频超分
  • 3NTIRE2021竞赛"三冠一亚"方案BasicVSR++,Vid4新巅峰29.04dB
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档