快捷搜索:  www.ymwears.cn

人工智能将阿波罗登月镜头提升到60帧每秒

虽然观看阿波罗登月的所有历史性镜头令人兴奋和激动,但你不得不承认,质量有时并不那么好。尽管NASA已经在修复和增强一些最受欢迎的阿波罗镜头,但其中一些仍是颗粒状或模糊的。

但现在,人工智能的新发展起到了拯救作用,为观众提供了观看历史性的阿波罗视频的全新体验。

一位名叫DutchSteamMachine的照片和胶卷修复专家运用了一些人工智能的魔法来增强阿波罗的原始胶卷,创造出非常清晰和生动的视频剪辑和图像。

他对《今日宇宙》说:“我真的很想给大家提供一种以前从未见过的体验。”

让我们来看看阿波罗16号月球车与查理·杜克和约翰·杨一起穿越月球的这段增强镜头吧,在这段镜头中,最初以每秒12帧的速度拍摄的镜头被提高到了每秒60帧:

惊人的,对吧?我被这张阿波罗15号在Hadley Rille着陆地点的强化图中月球表面的清晰景象所震撼:

或者在登月舱内的16毫米摄像机拍摄的阿波罗11号“第一步”视频的增强版中,看看尼尔·阿姆斯特朗是如何清晰可见:

DutchSteamMachine使用的人工智能称为深度感知视频帧插值,简称DAIN。这种人工智能是开源的,免费的,并且不断被开发和改进。运动插值或运动补偿帧插值是视频处理的一种形式,它在现有的动画帧之间生成中间动画帧,试图使视频更加流畅,以弥补模糊等。

“人们用同样的人工智能程序让20世纪的高清彩色电影重现生机,”他说。“这种技术似乎是一个伟大的东西,适用于更新的镜头。”

但是你可能不能在家里尝试这个。它需要一个强大的高端GPU和特殊的散热风扇。DutchSteamMachine表示,一段5分钟的视频可能需要6到20个小时才能完成。但结果不言自明。

他解释了他的工作原理:“首先,我开始寻找最高质量的源视频,谢天谢地,我找到了高比特率的720p视频文件,”他说。这样质量问题就解决了。从可能的最高来源开始编辑是很重要的。然而,大部分的镜头还是很不稳定。这是因为为了长时间保存胶卷和记录,大部分漫游者的镜头都是以每秒12帧、6帧甚至1帧的速度拍摄的。虽然人们以前尝试过使用稳定和/或框架混合类型来缓解这种效果,但我从来没有真正满意过。”

DutchSteamMachine试图确定原始镜头的帧率,这些帧率通常可以在NASA的文件中找到,或者,就像上面阿波罗16号的镜头一样,宇航员在打开摄像机时宣布。

他说:“不幸的是,有时帧率似乎不正常或不稳定,并不总是按照预期工作。”“所以找到帧率的最好方法是收听宇航员谈论的地标,并将视频与之匹配。我将源文件分割成单独的PNG帧,将它们与输入帧率(1、6、12或24)和期望的输出帧率(2x、4x、8x)一起输入到AI中。AI开始使用我的GPU并查看两个真实的连续帧。利用算法,它分析了两帧中物体的运动,并呈现出全新的物体。例如,通过一个5x的插值率,它能够从两个真实帧中渲染出5个“假”帧。如果以12帧每秒的速度记录镜头,并且将插补速率设置为5x,那么最终的帧率将会是60,也就是说在12帧的真实帧中,它产生了48帧的伪帧。然后两者都被导出为视频,并以60帧/秒的速度播放真假帧。最后,我应用颜色校正,因为源文件通常具有蓝色或橙色的色调。我将视频与音频同步,如果可能的话,还会同步电视和同时拍摄的照片。有时候,两台16毫米的摄像机同时运行,这样我就可以把它们并排播放了。”

下面是他分享的一段关于他的工作室和专业设备的视频:

DutchSteamMachine在业余时间做这项工作,并免费发布在他的YouTube页面上。他的口号是“为未来保存过去”,他也使用同样的技术来增强旧的家庭视频、图像和幻灯片。

“看到人们对我的视频的反应真是太棒了,”他说。“所以当人们发布类似‘哇!这是惊人的!我从来没见过这个!’这是我前进的动力。”

如果你想支持DutchSteamMachine为阿波罗镜头所做的惊人的修复/增强工作,这里是他的Patreon页面。通过支持他的工作,你将获得额外的,早期访问和即将到来的工作预览,并有机会询问有关过程的问题。他打算让这一切继续下去。

他说:“我计划改进大量像这样的阿波罗镜头。”“我的YT频道将不断发布更多空间和历史相关的镜头。”他也有一个Flickr页面,上面有更多的图片。

您可能还会对下面的文章感兴趣: