前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >来试试!微软开源: 老旧照片修复的AI算法

来试试!微软开源: 老旧照片修复的AI算法

作者头像
公众号机器学习与AI生成创作
发布2021-01-08 15:07:50
3.4K0
发布2021-01-08 15:07:50
举报
文章被收录于专栏:机器学习与生成对抗网络

开源最前线(ID:OpenSourceTop) 猿妹整编 | 来源 逆锋起笔

https://github.com/microsoft/Bringing-Old-Photos-Back-to-Life

http://raywzy.com/Old_Photo/

微软研究团队万紫宁、张波等人开发了一种新的基于AI算法,用于通过深度学习恢复老旧照片,与通过监督学习还原旧照片的方式不同,真实照片的降级很复杂。

bringing-old-photos-back-to-life作者使用变分自动编码机(VAE)将图像变换到隐空间,并在隐空间进行图像恢复操作。这种转换可以很好的体现出真实照片。

此外,为了解决一张旧照片中的多种退化,bringing-old-photos-back-to-life设计了一个全局分支和局部非全局分支,全局分支专门针对结构化缺陷(例如划痕和灰尘点)的功能,局部非全局分支主要针对非结构化缺陷(例如噪声和模糊度),bringing-old-photos-back-to-life在隐空间中融合了两个分支,从而提高了从多个缺陷还原旧照片的能力。关注公众号 逆锋起笔,回复 pdf,下载你需要的各种学习资料。

如何使用

该项目依赖于「Synchronized-BatchNorm-PyTorch」,按照教程配置即可。首先,你需要安装和下载预训练的模型,然后就可以通过一个简单的命令轻松回复旧照片。

对于没有划痕的图像:

代码语言:javascript
复制
python run.py --input_folder [test_image_folder_path] \
              --output_folder [output_path] \
              --GPU 0

对于有刮擦的图像:

代码语言:javascript
复制
python run.py --input_folder [test_image_folder_path] \
              --output_folder [output_path] \
              --GPU 0 \
              --with_scratch

注意:请尝试使用绝对路径。最终结果将保存在中./output_path/final_output/。

目前,微软不打算直接发布带有标签的有划痕旧照片数据集。如果你想要得到配对的数据,你可以使用官方提供的预训练模型来测试收集到的图像,以获得标签。

下面我们还是来看看几组不同照片的还原效果吧:

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2020-12-26,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 机器学习与AI生成创作 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档