为回忆“上色”,GitHub 上一开源影像还原工具 Star 数已破万!

码海绘汐使
• 阅读 6284

为回忆“上色”,GitHub 上一开源影像还原工具 Star 数已破万!

影像记录的方式让我们有机会直观的感受历史,一张张照片、一段段视频,承载的是一代代人的记忆。利用着色和还原技术修复老照片,成为了我们回忆亲人,回顾历史的新方法。

最近,GitHub 上就有一个名为 DeOldify 的黑白影像还原工具受到了很多关注,目前 Star 数已经破万了。值得一的是,这个项目还是开源的!

为回忆“上色”,GitHub 上一开源影像还原工具 Star 数已破万!

三种模型各有所长

DeOldify 可以对旧图像和胶片进行着色和还原,在 DeOldify 中可以选择三种模型,每一个都有关键的优点和缺点,因此具有不同的用例。

艺术性模型:该模型在有趣的细节和鲜艳度方面实现了图像着色的最高质量结果。但是,最明显的缺点是,要获得最佳结果要花些力气,必须调整渲染分辨率或 render_factor 才能实现此目的。该模型在一些关键的常见场景,包括自然场景和肖像中表现不佳,它的重点放在解码器端的层深度上。

为回忆“上色”,GitHub 上一开源影像还原工具 Star 数已破万!

稳定性模型:该模型在横向和纵向条件下可获得最佳效果,通常比艺术色具有更少的怪异色泽,该模型着重于解码器侧的层宽度。

为回忆“上色”,GitHub 上一开源影像还原工具 Star 数已破万!

视频模型:此模型针对平滑,一致和无闪烁的视频进行优化。这肯定是这三种模型中色彩最少的一种,但是说实话,它与“稳定”相差不远。该模型在架构上与“稳定”相同,但在训练上有所不同。

为回忆“上色”,GitHub 上一开源影像还原工具 Star 数已破万!

虽然旧照片还原技术让我们有机会看到过去你十年甚者上百年前的真实影像,但它仍可能存在一个问题,那就是这些照片和视频的颜色还原是否准确?

以下面这张图为例,还原出的照片中,桥的颜色是白色的,但经过调查,这座桥其实是红色的。也就是说,对于旧照片还原技术来说,历史准确性仍然是一个巨大的挑战。

为回忆“上色”,GitHub 上一开源影像还原工具 Star 数已破万!

NoGAN 是啥?为啥用了它图像色彩更稳定?

什么是 NoGAN ?

这是 DeOldify 创建者开发的一种新型 GAN 训练,用于解决以前的DeOldify模型中的一些关键问题。大部分训练时间都花费在通过更直接、更快速、更可靠的常规方法分别对生成器和注释器进行预训练。这种方法可以消除故障和伪影。

原始 DeOldify 模型:

为回忆“上色”,GitHub 上一开源影像还原工具 Star 数已破万!

基于 NoGAN 的 DeOldify 模型:

为回忆“上色”,GitHub 上一开源影像还原工具 Star 数已破万!

影像修复技术中,稳定的还原视频图像非常有难度。DeOldify 采用了 NoGAN 训练结合 GAN 训练的方式,不仅可以提供稳定的色彩图像修复,还能消除视频中的闪烁。

视频是使用隔离的图像生成来渲染的,而无需附加任何时间建模,一次使用 1% 到 3% 的 imagenet 数据。然后,与静止图像着色一样,在重建视频之前对各个帧进行“ DeOldify”处理。

除了提高视频稳定性之外,还有一件有趣的事情值得一提。虽然不同的模型和具有不同的培训结构的模型,但都都或多或少地得出相同的解决方案。甚至对任意的和不可知的事物进行着色的情况也是如此,例如衣服,汽车的颜色,甚至是特殊效果的颜色。

对此,DeOldify 的创建者猜测,这些模型正在学习一些有趣的规则,以根据黑白图像中存在的细微提示来着色。即使在运动场景中,这些渲染的结果也非常一致。

关于开源支持的声明

开源已经为世界带来了很多好处,DeOldify 的创建也得益于开源。

DeOldify 的创建者在声明中表示,“我们的立场是,我们提供的研究代码和文档,是有益于世界的。我们所提供的是关于彩色化、广域网和视频的新颖表现,希望对开发人员和研究人员有所帮助,以供学习和采用。”

他们并不打算提供一个可以随时使用的免费“产品”或“应用程序”,并且未来也不打算提供这种服务。他们说:“DeOldify 将继续是一个基于 Linux 的项目,没有 Windows 支持,用 Python 编码,并要求人们有一些额外的技术背景才能使用它。”

现在,已经有一些人通过 DeOldify 开发了自己的应用程序,有的是付费的,有的是免费的。对此,DeOldify 创建者的立场是,只要你有适当的背景和资源,则该项目将为你提供足够的入门资源。

安装细节

这个项目是围绕 Fast.AI 库构建的,现在已经可以使用 Anaconda 进行简单安装了。

具体步骤如下:

打开命令行并导航到要安装的根文件夹,然后键入以下命令:

为回忆“上色”,GitHub 上一开源影像还原工具 Star 数已破万!

然后开始使用以下命令运行:

为回忆“上色”,GitHub 上一开源影像还原工具 Star 数已破万!


参考链接:https://hackernoon.com/deoldify-can-colorize-your-black-and-white-photos-with-full-photorealistic-renders-5k2i33c3

GitHub 地址:https://github.com/jantic/DeOldify#a-statement-on-open-source-support

为回忆“上色”,GitHub 上一开源影像还原工具 Star 数已破万!

点赞
收藏
评论区
推荐文章
blmius blmius
4年前
MySQL:[Err] 1292 - Incorrect datetime value: ‘0000-00-00 00:00:00‘ for column ‘CREATE_TIME‘ at row 1
文章目录问题用navicat导入数据时,报错:原因这是因为当前的MySQL不支持datetime为0的情况。解决修改sql\mode:sql\mode:SQLMode定义了MySQL应支持的SQL语法、数据校验等,这样可以更容易地在不同的环境中使用MySQL。全局s
Wesley13 Wesley13
3年前
MySQL部分从库上面因为大量的临时表tmp_table造成慢查询
背景描述Time:20190124T00:08:14.70572408:00User@Host:@Id:Schema:sentrymetaLast_errno:0Killed:0Query_time:0.315758Lock_
美凌格栋栋酱 美凌格栋栋酱
7个月前
Oracle 分组与拼接字符串同时使用
SELECTT.,ROWNUMIDFROM(SELECTT.EMPLID,T.NAME,T.BU,T.REALDEPART,T.FORMATDATE,SUM(T.S0)S0,MAX(UPDATETIME)CREATETIME,LISTAGG(TOCHAR(
皕杰报表之UUID
​在我们用皕杰报表工具设计填报报表时,如何在新增行里自动增加id呢?能新增整数排序id吗?目前可以在新增行里自动增加id,但只能用uuid函数增加UUID编码,不能新增整数排序id。uuid函数说明:获取一个UUID,可以在填报表中用来创建数据ID语法:uuid()或uuid(sep)参数说明:sep布尔值,生成的uuid中是否包含分隔符'',缺省为
Wesley13 Wesley13
3年前
FLV文件格式
1.        FLV文件对齐方式FLV文件以大端对齐方式存放多字节整型。如存放数字无符号16位的数字300(0x012C),那么在FLV文件中存放的顺序是:|0x01|0x2C|。如果是无符号32位数字300(0x0000012C),那么在FLV文件中的存放顺序是:|0x00|0x00|0x00|0x01|0x2C。2.  
Wesley13 Wesley13
3年前
mysql设置时区
mysql设置时区mysql\_query("SETtime\_zone'8:00'")ordie('时区设置失败,请联系管理员!');中国在东8区所以加8方法二:selectcount(user\_id)asdevice,CONVERT\_TZ(FROM\_UNIXTIME(reg\_time),'08:00','0
Wesley13 Wesley13
3年前
PHP创建多级树型结构
<!lang:php<?php$areaarray(array('id'1,'pid'0,'name''中国'),array('id'5,'pid'0,'name''美国'),array('id'2,'pid'1,'name''吉林'),array('id'4,'pid'2,'n
Stella981 Stella981
3年前
Android蓝牙连接汽车OBD设备
//设备连接public class BluetoothConnect implements Runnable {    private static final UUID CONNECT_UUID  UUID.fromString("0000110100001000800000805F9B34FB");
Stella981 Stella981
3年前
Django中Admin中的一些参数配置
设置在列表中显示的字段,id为django模型默认的主键list_display('id','name','sex','profession','email','qq','phone','status','create_time')设置在列表可编辑字段list_editable
Stella981 Stella981
3年前
Linux日志安全分析技巧
0x00前言我正在整理一个项目,收集和汇总了一些应急响应案例(不断更新中)。GitHub地址:https://github.com/Bypass007/EmergencyResponseNotes本文主要介绍Linux日志分析的技巧,更多详细信息请访问Github地址,欢迎Star。0x01日志简介Lin
Python进阶者 Python进阶者
1年前
Excel中这日期老是出来00:00:00,怎么用Pandas把这个去除
大家好,我是皮皮。一、前言前几天在Python白银交流群【上海新年人】问了一个Pandas数据筛选的问题。问题如下:这日期老是出来00:00:00,怎么把这个去除。二、实现过程后来【论草莓如何成为冻干莓】给了一个思路和代码如下:pd.toexcel之前把这