新浪科技 数码

英伟达AI新玩法:将30fps视频变成240fps

IT之家

关注

创建流畅的慢动作视频需要短时间捕捉多帧画面,如果录的帧数不够,那么最终的慢动作视频看起来会很不流畅,大多数人并没有昂贵的高速相机,不过英伟达试图用AI技术来解决这个问题。

芯片设计商英伟达的新研究通过深度学习将每秒30帧的视频变成每秒240帧慢动作。AI系统会查看两个不同的帧,然后通过跟踪从一帧到下一帧的对象移动来填充中间帧,并且能够产生非常准确(不完美)的结果。

“虽然现在已经可以用手机拍摄每秒240帧的视频,但以高帧率记录所有内容是不切实际的,因为它需要大容量的存储器,而且对于移动设备而言功耗很大,”研究人员在一篇论文中写道,“出于这些原因和其他原因,从现有视频中生成高质量的慢动作视频非常令人感兴趣。”

但这种技术也有限制。首先,研究人员必须训练他们的深度学习系统来处理特定类型的素材。因此,为了获得汽车在水中滑行的慢速视频,他们必须首先用相似的镜头进行训练。另外,这种技术不能产生无限数量的中间帧。没有数据,计算机就不可能预测真实世界物体的运动和行为。但是,英伟达的系统可以产生多达7个中间帧,足以创造不错的慢动作。

预计不久的将来,手机相机中会出现类似的功能。

加载中...