【彩蛋特辑】AI修复技术:点几下按钮就能复原老北京?

2024-02-21 10:41:2907:18 1179
声音简介

更新提醒 

每周二和周五更新

点击右上角免费订阅↑↑↑

本期原文 

大家好,我是郝景芳。今天这期节目是我们的彩蛋特辑。


爱好科技的你应该也听说了,前阵子有位叫大谷的北京小伙,用AI修复技术,将一段百年前老北京的黑白影像视频,变成了彩色的世界。让网友们实实在在体验了一把穿越的感觉。有人说,视频里的他们大概根本想象不到,自己当年的一举一动,会在一百年后的今天,被我们以这种特别的方式看到,这大概就是科技发展的魅力吧。


其实,AI修复作为一项肉眼可见的视觉技术,不仅赋予古老影像独特的魅力,更将前沿技术与历史情感相结合,让我们感受到一种区别于传统科技的非理性浪漫。我自己在看到这个视频时,也是非常喜欢的,忍不住想跟大家聊聊有关AI修复的那点事儿。


AI修复技术入门


我想先请大家思考一个问题,那就是,AI修复技术真的那么高不可攀吗?


就拿这个视频来说吧,你在观看的过程中,会不会觉得,AI修复技术的过程一定复杂又难懂。对于这个问题,折叠宇宙的小伙伴专门采访了视频制作人大谷。他认为,人工智能,其实是大家都可以尝试学习的,哪怕没有编程基础也可以跟着一步一步学。制作这个视频的同时,也是希望能起到一个普及性的作用。


他不认为人工智能就一定是高大上,晦涩难懂的,而是一个在现实生活中可以有很多实际应用的技术。在修复这段视频的时候,他用到的工具,也都是开源社区里公开分享的小工具,用他的话说,主要按钮点一下就可以,稍微调调设置,大部分工作都是人工智能电脑自己做的


AI修复技术过程初探


听到这儿,你可能会问了,人工智能也太神奇了吧!这个视频到底是怎么修复的呢?


我们都知道,由于当年的技术限制,许多老电影中的人物画面看上去都像加速播放的。如果是用现在的电影技术标准,调整老电影里的人物活动速度。你会发现,这个老视频里1秒基本上只有6-10帧,那就没法形成连贯的动态画面。所以要做的第一步,就是补帧。把这个老视频里不稳定的帧数,都修成160帧。


这个过程其实类似我们平时常说的脑补,而人工智能跟人类大脑处理影像画面是很相似的,比如老视频里,第一帧里手臂的角度是10度,第二帧里变成了30度。人工智能就能想象中间缺少的那20度变化过程。随后根据参数设置,人工智能负责脑补,把中间的15度,25度都画出来,或者根据你的要求把11度、12度、13度,全部画出来。


第二步要做的,就是调整分辨率,也就是我们所说的,把画质变得高清。这也是人工智能可以做到的脑补。通过分析得出,画面中的哪些模糊部分是由于画质过低造成的,然后去完成优化。第三步则是上色,在一个叫DeOldify的小工具里,可以设置分辨率、颜色的饱和度、画面视觉风格等等。


这个人工智能依赖一个数据集,具备了区分黑白电影和彩色电影的差异。通过观看4-6万张图片和视频,它学会了人的皮肤是肉色的,天空是蓝色的,植物大多是绿色的。当它学了足够多以后,就能根据画面形状分辨出这是什么东西,分析出人、马车、蓝天等事物,然后完成填色。到这里,AI修复工作也就基本完成了。


AI修复技术尚未成熟


当然了,AI修复技术虽然神奇,但并不是万能的。在这里我要做一个小小的纠正,其实这个视频中的AI修复,与其说是还原,不如说是二度创作更准确些。


为什么这么说呢?


我们都知道,人工智能是基于人脑思维被制造出来的现代产物,所以它的数据集也决定了它的知识储备。比如我们在视频中看到的服饰颜色,大多是灰色布衣。但在真实的历史中,这个人穿的可能是红色大袄,也可能是带花纹的长袍。所以,如果有更多基于中国文化的数据集加入进去,比如,经过史学家考据过的分析结果被加入到数据集里,那么这个人工智能,就可以更好的复原中国历史,更接近100年前真实的北京。而目前人工智能所做到的,是一个合理的视觉效果呈现,并非准确的复原。


AI修复技术前景+争议性讨论


那么,随着未来AI修复技术的飞速发展,会不会逐渐代替人类插画师的工作呢?


刚刚我们也聊到了,人工智能可以像人类一样去脑补画面。比如,当我们想象出一个不存在的人脸,人工智能会负责帮我们脑补,直接把这个画出来。如果艺术家用这种工具进行创作,其实节约了很多时间。当你想画一个像狗的金鱼、或者像金鱼的狗,人工智能可以帮你画出来,甚至有的AI作品会在画廊进行展览。


在这个过程中,AI会帮助插画师节省很多工作量。比如Nvidia(英伟达)推出的人工智能辅助绘画功能,创作者只要粗略地画出山、水的线条轮廓,人工智能就会自动完成全部的山、水创作。你还可以把物体的明暗交界、颜色饱和度等,直接告诉人工智能,让人工智能去画。很多游戏原画师会用人工智能绘制背景,然后自己专注画出游戏人物的细节部分。


所以,AI修复技术非但不会代替人类插画师,反而会为他们提供帮助。也有越来越多的爱好者们使用这种技术,尝试修复老照片,古画等等。不过也有人表示,AI修复后的作品,虽然更高清美观,但却少了些原有的意境。


比如,之前网上曾经疯传了一张,AI修复后的林徽因旧照,虽然美丽,却让这位千古才女缺少了该有的韵味。所以,任何事物都有一定的利弊。用视频制作人大谷的话来说, 当里面的人也看着镜头,我也看着影片里的人,那一瞬间会有种历史时空的交流感,希望通过这个视频,能把我学习的过程分享给大家。


总结


好了,这期彩蛋特辑,我与你分享了AI修复技术的大致操作,以及与视频制作人大谷的幕后采访故事。听完这期节目,你会不会觉得,其实AI修复并没有想象中那么难,感兴趣的话,不妨大胆尝试一下,我等着你在讨论区与我分享你的成果感悟。欢迎继续走进折叠宇宙的世界,我是郝景芳,我们下期节目再见。


备注:感谢视频AI修复制作人大谷Spitzer接受采访,提供宝贵经验。

用户评论

表情0/300
喵,没有找到相关结果~
暂时没有评论,下载喜马拉雅与主播互动
猜你喜欢
AI 特辑

AI专属制作,喜欢听AI有声书的朋友可以点开听听

by:九月慕七

彩蛋

无论一部电影好看与否,都存在值得挖掘的彩蛋。

by:播客公社

敏宝特辑

亲爱的各位敏妈们,当我们的宝宝因为过敏反应而备受折磨的时候,最心疼和最痛苦的其实是作为母亲的我们。有很多的心声,就连宝爸都无法理解,只有我们自己能够感同身受!你...

by:媛筱潇_北辰剧社

新春特辑

《喘息之间》出过年专题咯!年关以至,朋友们是不是早就开始筹备年货了?收拾行装马上要回家朋友们是不是会担心在归乡的旅途中会无聊呢?不用担心,朴鲁和老李最新企划的《...

by:不上班的朴鲁

特辑节目

“跟lily走吧”是一档美食旅游类视频和音频节目,在华盛顿制作。原央视记者lily以她独特的视角,带您每个周末去世界各地品游最本土的美食和当地美景,探访各类美...

by:跟Lily走吧