有一位小哥研究了一个名为DeOldify的工具,可以让黑白老电影以及老照片复原其本色

黑白老照片上色已经不足为奇了,但是让黑白老电影还原彩色还是非常新鲜有趣的意见事情。近日,twitter上有一位小哥研究了一个名为deoldify的工具,可以让黑白老电影以及老照片复原其本色。
谁说经典只属于黑白?
最近,一位名叫jason antic的小哥在twitter上大火了一把,它创建的deoldify工具,可以让过去的黑白视频和照片秒变彩色。
这个神器一出,可把网友们高兴坏了,纷纷开始玩儿了起来。目前在github上5800+星,相当火爆!
卓别林的电影瞬间年轻、有“味道”了许多。
1960年的经典电影《psycho》:
1936年的经典电影《reefer madness》:
1927年的经典电影《metropolis》:
deoldify不仅能让视频恢复色彩,还能让黑白老照片秒变彩照。
《移民母亲》,migrant mother bydorothea lange (1936)
toffs and toughs by jimmy sime (1937)
中国鸦片吸食者(1880)
这些黑白的视频和照片,当换上了彩色的“衣服”时,不得不说拉近了与我们的距离,并不觉得那么得有年代感了。
读者们可以手动试试为黑白老照片添色了!地址如下:
https://colorize.cc/
只需要从本地上传或者添加图片的链接,输入邮箱即可收到,非常的方便。
新智元便试了一下“慈禧太后”的黑白照,结果如下:
可以说,是相当的逼真了!
神奇的deoldify背后的利器:nogan
作者在github中提到,deoldify中至关重要的就是nogan。nogan训练结合了gan训练的优点(绚烂的色彩),同时消除了令人讨厌的副作用(如视频中闪烁的物体)。作者表示视频是使用孤立的图像生成,没有任何形式的时间建模附加。该过程执行30-60分钟的gan部分的“nogan”训练,一次使用1%到3%的imagenet数据。然后,与静态图像着色一样,在重建视频之前,对单个帧进行“去旧化”。
除了提高视频的稳定性,还有一件有趣的事情值得一提。事实证明,运行的模型,甚至是不同的模型和不同的训练结构,都或多或少地得出相同的解决方案。你可能认为有些东西的颜色是随意的、不可知的,比如衣服的颜色、汽车的颜色,甚至是特效(就像《大都会》里看到的那样)。
作者对此的猜测是这些模型正在学习一些有趣的规则,关于如何根据黑白图像中出现的细微线索来着色。这个结果导致了非常确定和一致的结果,这意味着你没有跟踪模型着色决策,因为它们不是任意的。此外,它们看起来非常健壮,所以即使在移动场景中渲染也是非常一致的。
那么nogan是什么呢?
这是作者开发的一种新型gan训练模型,用来解决之前deoldify模型中出现的一些关键问题。
它提供了gan训练的好处,同时花费最少的时间进行直接的gan训练。在非常短的实际gan训练期间,发生器不仅获得了过去需要数天逐步调整大小的gan训练的完全逼真的着色能力,而且它也几乎没有产生任何gan的“副作用”。据作者介绍,这是一种非常有效的新技术。
下图是原始deoldify模型的效果,可以看出不同帧的颜色是存在差异的。
下面是基于nogan的deoldify模型,可以看到着色效果非常好。
为什么是三个模型?
deoldify现在有三种型号模型可供选择。每个都有关键优势和劣势,因此具有不同的用例。
更多细节内容可以访问查看github:
https://github.com/jantic/deoldify/blob/master/readme.md

新一代iPhone X必然会推出新的配色,iPhone 8、8 Plus上的那种金色如何?
2019年十大物联网趋势和预测
光伏防孤岛保护装置的作用_光伏防孤岛保护装置的功能
比特币如何解决经济危机的问题
思特威推出两颗基于自研先进BSI工艺平台的手机应用
有一位小哥研究了一个名为DeOldify的工具,可以让黑白老电影以及老照片复原其本色
连接器现状介绍 电磁仿真技术介绍
LED芯片对使用的锡膏有什么要求?操作不同吗?
开关柜的基本知识
诺基亚回归,已在120个国家上市,覆盖半个地球
创通联达深耕XR赛道 以领先技术赋能产业发展
电动牙刷真的有危害吗?
2182A双通道纳伏表的应用特点和优势
激光院士专访:下一代显示的主流一定是激光显示
必看!电路的各种基础知识
家用吸尘器十大排名令高科技“现原形”,哪个牌子好一目了然
探究锂聚合物电池的太阳能路灯控制器设计
家电巨头纷纷向智能制造转型升级,可望助力中国机器人产业整体升级
无线运动蓝牙耳机什么牌子的好、运动达人必备无线运动耳机推荐
吉利和宝腾签署合作协议,宝腾将以新能源汽车的名义再次入华