北京时间3月2日上午消息,谷歌AI又学会一项新技能,如果你拍摄自拍视频,它可以更换视频背景(抠像);之前我们只能更换静态照片的背景。
抠像是一门应用了几十年的特效技术,不过做起来很费时间,也很复杂,例如,拍摄电影时,导演会让演员在绿幕前表演,稍后计算机用再用数字特效(比如爆炸的大楼)更换绿屏。但现在,有了3D场景数据(比如iPhone双摄像头提取的数据)之后,处理起来就容易很多了。
谷歌用许多标签图像训练神经网络,让神经网络不断学习,分辨脸部特征,比如眼睛、头发、眼镜、嘴等部位的特点,将这些特征与其它东西区分开来。最终,谷歌开发出一套系统,它可以置换背景,速度很快,能够跟上视频的播放速度。数字视频帧的播放速度约为30fps,在谷歌Pixel2手机上,新技术的处理速度约为40fps,如果是苹果iPhone7,处理速度可以超过100fps。
想不想试试?抱歉啊,现在只有少数知名YouTube播主才能用,而且这些人还是YouTubeStories用户。
谷歌程序员在博文中介绍说:“我们开发了新的技术,它可以帮助创作者替换、修改背景,不需要任何特殊设备就可以轻松提升视频制作价值。”
神经网络技术有一个优势,它不需要知道各种各样的规定,比如脸有两只眼睛,位于鼻子之上,只有一些情况例外,比如从侧面观看时,可能只会看到一只眼睛,又或者拍摄对象戴了黑色眼镜。我们只需要用足够多的照片训练网络,照片已经由人贴上标签,这些人知道它是不是脸,然后神经网络就会自己学习,掌握特定模式。事实证明,当我们筛选垃圾邮件,预测手机输入内容时,这门技术很实用。