首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
您找到你想要的搜索结果了吗?
是的
没有找到

Learning Texture Invariant Representation for Domain Adaptation

由于为语义分割注释像素级标签非常费力,因此利用合成数据是一个很有吸引力的解决方案。然而,由于合成域与真实域之间存在域间的差异,用合成数据训练的模型很难推广到真实数据中去。在本文中,我们考虑到两个域之间的根本区别作为纹理,提出了一种适应目标域纹理的方法。首先,我们利用风格转换算法对合成图像的纹理进行多样性处理。生成图像的各种纹理防止分割模型过度拟合到一个特定的(合成)纹理。然后通过自训练对模型进行微调,得到对目标纹理的直接监督。我们的结果达到了最先进的性能,我们通过大量的实验分析了在程式化数据集上训练的模型的属性。

03

GAN-Based Day-to-Night Image Style Transfer forNighttime Vehicle Detection

数据增强在训练基于CNN的检测器中起着至关重要的作用。以前的大多数方法都是基于使用通用图像处理操作的组合,并且只能产生有限的看似合理的图像变化。最近,基于生成对抗性网络的方法已经显示出令人信服的视觉结果。然而,当面临大而复杂的领域变化时,例如从白天到晚上,它们很容易在保留图像对象和保持翻译一致性方面失败。在本文中,我们提出了AugGAN,这是一种基于GAN的数据增强器,它可以将道路行驶图像转换到所需的域,同时可以很好地保留图像对象。这项工作的贡献有三个方面:(1)我们设计了一个结构感知的未配对图像到图像的翻译网络,该网络学习跨不同域的潜在数据转换,同时大大减少了转换图像中的伪影; 2) 我们定量地证明了车辆检测器的域自适应能力不受其训练数据的限制;(3) 在车辆检测方面,我们的目标保护网络在日夜困难的情况下提供了显著的性能增益。与跨领域的不同道路图像翻译任务的竞争方法相比,AugGAN可以生成更具视觉合理性的图像。此外,我们通过使用转换结果生成的数据集训练Faster R-CNN和YOLO来定量评估不同的方法,并通过使用所提出的AugGAN模型证明了目标检测精度的显著提高。

02

英伟达黄仁勋:摩尔定律结束了;78% 的试点公司顺利实现四天工作制;小米回应11系列,可能是系统故障或主板质量问题 | EA周报

近日,特斯拉上海工厂工人薪酬曝光,特斯拉生产线一线普工的底薪是 5341 元,若是本科学历可再加 200 元,加上各种补贴及季度奖,年薪过 10 万并不困难。“对外号称 17 薪,平均下来每个月到手有个七八千,还有五险一金”。有内部人员表示,所说的 17薪,是将季度奖包含在内,特斯拉工厂就会发放一笔奖金,根据不同的绩效评分。据其透露,季度奖分成 A-E 五个档次,其中 A 档是月底薪的 1.5 倍,C 等为一个月底薪。但他只拿过 C 等,从未获得过 AB 档评级。(时代财经)

01

钉钉总裁称非常讨厌红点和DING消息;Mozilla控诉苹果、谷歌和微软锁定浏览器;特斯拉上海工人薪酬曝光:到手七八千|Q资讯

整理 | 褚杏娟 东南亚电商巨头 Shopee 中国裁员:上午开全员大会、下午赔偿 N+2 离职;判赔 20 万!星愿浏览器因拦截广告被优酷起诉;钉钉总裁称非常讨厌红点和 DING 消息:自己从不 DING 人只打电话;特斯拉上海工人薪酬曝光:五险一金,到手七八千;新东方以“能力不足”为由辞退员工:被判赔 41 万;Mozilla 控诉苹果、谷歌和微软的操作系统锁定浏览器:剥夺了消费者的选择权;腾讯市值已大跌 4 万亿元,160 亿元股票回购难阻跌势;人社部发布最新工资价位表:负责人、金融、IT 这三职业挣

01

CyCADA: Cycle-Consistent Adversarial Domain Adaptation

领域适应对于在新的、看不见的环境中取得成功至关重要。对抗性适应模型通过专注于发现域不变表示或通过在未配对的图像域之间进行映射,在适应新环境方面取得了巨大进展。虽然特征空间方法很难解释,有时无法捕捉像素级和低级别的域偏移,但图像空间方法有时无法结合与最终任务相关的高级语义知识。我们提出了一种使用生成图像空间对齐和潜在表示空间对齐来适应域之间的模型。我们的方法,循环一致的对抗性领域适应(CyCADA),根据特定的有区别的训练任务指导领域之间的转移,并通过在适应前后加强相关语义的一致性来避免分歧。我们在各种视觉识别和预测设置上评估了我们的方法,包括道路场景的数字分类和语义分割,提高了从合成驾驶领域到现实驾驶领域的无监督自适应的最先进性能。

03

Multi-source Domain Adaptation for Semantic Segmentation

用于语义分割的实域自适应仿真已被积极研究用于自动驾驶等各种应用。现有的方法主要集中在单个源设置上,无法轻松处理具有不同分布的多个源的更实际的场景。在本文中,我们建议研究用于语义分割的多源域自适应。具体来说,我们设计了一个新的框架,称为多源对抗域聚合网络(MADAN),它可以以端到端的方式进行训练。首先,我们为每个源生成一个具有动态语义一致性的自适应域,同时在像素级循环上一致地对准目标。其次,我们提出了子域聚合鉴别器和跨域循环鉴别器,以使不同的适应域更紧密地聚合。最后,在训练分割网络的同时,在聚合域和目标域之间进行特征级对齐。从合成的GTA和SYNTHIA到真实的城市景观和BDDS数据集的大量实验表明,所提出的MADAN模型优于最先进的方法。

01

Learning to Adapt Structured Output Space for Semantic Segmentation

对语义分割来讲基于卷积神经网络的方法,依赖像素级ground-truth标记,但是对未知领域可能泛化效果并不好。因为标记过程是沉闷和耗时的,开发将源ground truth标记到目标域引起了很大的关注。本文我们提出一种对抗训练方法在语义分割的内容中进行域适配。考虑语义分割作为结构输出包含源域和目标域的空间相似性,在输出空间中,我们采用对抗训练。为了进一步增强适配模型,我们构建一个多层对抗网络,在不同特征级别上有效的执行输出空间域适配。一系列的实验和消融研究在不同域适配下进行,包括合成到真实和跨城市场景。我们表明提出的方法在精度是视觉质量方面,超过了现有的最先进的方法。

02

【AI模型安全性专题】模型安全性-图神经网络后门的攻守道

图模型因其强大的表示能力在现实中有着广泛的应用,如欺诈检测、生物医学、社交网络等。由于图结构不具有平移不变性,每一个节点的上下文结构有较大的差异,因此传统的深度学习模型就无法直接应用到图模型上。图神经网络(GNN)可以从图数据中提取相应特征,在尽可能的保证图结构特征的情况下把图数据映射到向量空间中。随着GNN的应用越来越广泛,其安全性也越来越被关注。比如说在信用评分系统中,欺诈者可以伪造与几个高信用客户的联系以逃避欺诈检测模型;垃圾邮件发送者可以轻松地创建虚假的关注者,向社交网络添加错误的信息,以增加推荐和传播重大新闻的机会,或是操控在线评论和产品网站。

02

Cycle-object consistency for image-to-image domain adaptation

生成对抗性网络(GANs)的最新进展已被证明可以通过数据扩充有效地执行目标检测器的域自适应。虽然GANs非常成功,但那些能够在图像到图像的翻译任务中很好地保存目标的方法通常需要辅助任务,例如语义分割,以防止图像内容过于失真。然而,在实践中很难获得像素级注释。或者,实例感知图像转换模型分别处理对象实例和背景。然而,它在测试时需要目标检测器,假设现成的检测器在这两个领域都能很好地工作。在这项工作中,我们介绍了AugGAN Det,它引入了循环目标一致性(CoCo)损失,以生成跨复杂域的实例感知翻译图像。 目标域的目标检测器直接用于生成器训练,并引导翻译图像中保留的目标携带目标域外观。与之前的模型(例如,需要像素级语义分割来强制潜在分布保持对象)相比,这项工作只需要更容易获取的边界框注释。接下来,对于感知实例的GAN模型,我们的模型AugGAN-Det在没有明确对齐实例特征的情况下内化了全局和对象样式转移。最重要的是,在测试时不需要检测器。实验结果表明,我们的模型优于最近的目标保持和实例级模型,并实现了最先进的检测精度和视觉感知质量。

01

Source-Free Domain Adaptation for Semantic Segmentation

无监督域自适应(UDA)可以解决基于卷积神经网络(CNN)的语义分割方法严重依赖于像素级注释数据的挑战,这是劳动密集型的。然而,这方面现有的UDA方法不可避免地需要完全访问源数据集,以减少模型自适应过程中源域和目标域之间的差距,这在源数据集是私有的真实场景中是不切实际的,因此无法与训练有素的源模型一起发布。为了解决这个问题,我们提出了一种用于语义分割的无源领域自适应框架,即SFDA,其中只有经过训练的源模型和未标记的目标领域数据集可用于自适应。SFDA不仅能够在模型自适应过程中通过知识转移从源模型中恢复和保存源领域知识,而且能够从目标领域中提取有价值的信息用于自监督学习。为语义分割量身定制的像素级和补丁级优化目标在框架中无缝集成。在众多基准数据集上的广泛实验结果突出了我们的框架相对于依赖源数据的现有UDA方法的有效性。

03
领券