利用AI人工智能技术将普通常见的30fps进行智能插帧计算获得240/480fps的慢动作视频

电子说

1.2w人已加入

描述

NVIDIA近日与美国UMass Amherst大学、UC Merced大学研究人员,开发出利用AI人工智能技术,可以将普通常见的30fps进行智能插帧计算,可以获得240/480fps的慢动作视频。这个对于视频内容创作者来说可是个巨大福利,在一些需要慢放的镜头不再需要专门高帧率摄像头机,只要通过AI运算就能获得让人觉得流畅慢动作视频。

我们都知道现在所谓的,其实是在一秒内播放多帧画面,让我们感觉到它是在不停变化中,这个与人眼的视觉暂留现象有关系。而一秒钟播放的帧数越多,我们感觉就视频越流畅,高帧率视频而且经过后期剪辑处理,还能做出非常多有意思的视频。

研究人员提到,尽管现在的手机可以拍摄240fps甚至更高帧率的慢动作视频,但由于高帧率需要庞大的缓存和数据写入系统,普通设备都是撑不住的,用他们来长时间纪录是不切实际的。而他们通过使用NVIDIA Tesla V100显卡以及cuDNN深度神经网络每天对超过11000个240fps视频进行训练,训练完成的模型可以将普通30fps视频插帧成240fps的视频,同时还会有独立的来验证他们插帧内容准确性,是否符合原视频的效果。

而之前绝大部分的插帧技术都是利用前后帧的关系生成更多的中间帧,NVIDIA与大学研究员则是只利用其中的一帧就可以办到,因此插帧数目显著提高,还能保持图像不失真,不影响观看效果。

据悉,这项技术将在本周举办的计算机视觉和模式年度参考会议上发布。最后,尽管这项技术很有前景,但英伟达觉得它尚未做好向消费级市场推出的准备。在此之前,该公司仍需大量的优化,才能让系统做到实时运行。

打开APP阅读更多精彩内容
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

全部0条评论

快来发表一下你的评论吧 !

×
20
完善资料,
赚取积分