物理科技生物学-PHYICA

人工智能将阿波罗登月镜头提升到山口美佳子60帧/秒

天文学与空间 2022-02-04 00:01:13

南希·阿特金森,《今日宇宙》 信用:荷兰蒸汽机器 尽管观看阿波罗登月的所有历史镜头令人兴奋和激动,但你必须承认,质量有时并不那么好

尽管美国宇航局一直致力于恢复和增强一些最受欢迎的阿波罗镜头,但其中一些仍然模糊不清

但是现在,人工智能的新发展拯救了我们,为观众提供了一个观看历史性阿波罗视频的全新体验

一位名叫“荷兰蒸汽机器”的照片和电影修复专家使用了人工智能的魔法来增强阿波罗电影的原创性,创造了清晰生动的视频剪辑和图像

“我真的很想给这个以前从未见过的老镜头提供一次体验,”他告诉《今日宇宙》

看看这个由查理·杜克和约翰·杨拍摄的阿波罗16号月球车的增强镜头,其中最初以每秒12帧(fps)拍摄的镜头已经增加到每秒60帧: 惊艳吧?这张阿波罗15号在哈雷里勒着陆点的放大图清晰地显示了月球表面,这让我大吃一惊: 信用:荷兰蒸汽机器 或者看看尼尔·阿姆斯特朗在这个经常看到的阿波罗11号“第一步”视频的增强版本中有多清晰,这个视频是由登月舱内的16毫米摄像机拍摄的: 信用:荷兰蒸汽机器 荷兰蒸汽机器使用的人工智能被称为深度感知视频帧插值,简称DAIN

这种人工智能是开源的,免费的,并且在不断地开发和改进

运动内插或运动补偿帧内插是视频处理的一种形式,其中在现有的动画帧之间生成中间动画帧,试图使视频更加流畅,以补偿模糊等

他说:“人们使用同样的人工智能程序,以高清晰度和彩色将20世纪的旧电影录像重现生机。”

“这项技术似乎是一个伟大的东西,适用于更新的镜头

" 但是你可能无法在家尝试这个

它需要一个强大的高端GPU和特殊的冷却风扇

荷兰蒸汽机器公司表示,一段5分钟的视频可能需要6到20个小时才能完成

但是结果不言自明

他解释了他是如何做到这一点的:“首先,我开始寻找最高质量的源视频,谢天谢地,我找到了高比特率的720p视频文件,”他说

“这样质量问题就解决了

重要的是从最高可能的来源开始,并从那里进行编辑

然而,拍摄的大多数序列仍然非常不稳定

这是因为为了节省胶片和长时间记录,大多数漫游者镜头是以每秒12、6甚至1帧的速度拍摄的

虽然人们以前曾试图应用稳定和/或帧混合类型来缓解这种效果,但我从未真正满意过

" 荷兰蒸汽机器公司希望确定原始素材的帧速率,这通常可以在美国国家航空航天局的文件中找到,或者像上面阿波罗16号的素材一样,宇航员在打开相机时宣布

“不幸的是,有时,帧率似乎是关闭或波动,并不总是如预期的工作,”他说

“所以找到帧速率的最好方法是听宇航员谈论的地标,然后将镜头与地标匹配

我将源文件分割成单独的巴布亚新几内亚帧,将它们与输入帧速率(1、6、12或24)和所需的输出帧速率(2x、4x、8x)一起输入到人工智能中

人工智能开始使用我的图形处理器,看两个真实的,连续的帧

使用算法,它分析对象在两个帧中的运动,并渲染全新的帧

例如,插值率为5倍时,它能够从两个真实帧渲染出5个“假”帧

如果素材是以12帧/秒的速度录制的,并且插值速率设置为5倍,那么最终的帧速率将是60,这意味着只有12个真实帧,它就制作了48个“假”帧

然后,两者都被导出回视频,并以60帧/秒的速度回放真实帧和虚假帧

最后,我应用颜色校正,因为源文件通常带有蓝色或橙色

我用音频同步镜头,如果可能的话,也同步电视和同时拍摄的照片

有时,两个16毫米的摄像头同时运行,所以我可以一个接一个地回放

" 这是他分享的一段他的工作室和专用设备的视频: 信用:荷兰蒸汽机器 荷兰蒸汽机器在业余时间做这项工作,并在他的YouTube页面上免费发布

他的口号是“为未来保留过去”,他还使用同样的技术来增强旧的家庭视频、图像和幻灯片

“在我的视频中看到人们的反应真是太棒了,”他说

“所以当人们发布类似‘哇!这太神奇了!我从来没见过这个!,‘这让我坚持下去

" 如果你想支持荷兰蒸汽机器为阿波罗镜头所做的惊人的修复/增强工作,这是他的帕特里翁页面

通过支持他的工作,你将获得额外的东西,提前访问和预览即将到来的工作,并有机会就这个过程提出问题

他计划让这一切继续

“我计划改进像这样的大量阿波罗镜头,”他说

“越来越多与空间和历史相关的镜头将会在我的YT频道上连续发布

“他还有一个Flickr页面,图像更加丰富

来源:由phyica.com整理转载自PH,转载请保留出处和链接!

本文链接:http://www.phyica.com/tianwenxue/9524.html

发表评论

用户头像 游客
此处应有掌声~

评论列表

还没有评论,快来说点什么吧~