今天要跟大家聊的话题,跟脸有关,人类自诞生以来,就没少在脸上下功夫,从胭脂水粉YSL,到磨皮瘦脸P图相机,脸不仅贡献了GDP,更推动了科技的发展。
今年初开始爆火的人脸挂件,是继PS修图技术后,脸促进的又一大发明!
自打上线开始,不管是大咖明星,还是打酱油的路人,甚至政界精英,都玩得不亦乐乎。
火爆一段时间后,挑剔的人们就发现了一个问题——动效挂件有抖动现象。
要不就是脸部的挂件一会出现一会消失,很不稳定。
还有当时吓到不少人的幽灵小插曲,把我们可爱的妹子吓了一跳。
(问题来了,识别出来的脸是谁的?)
爱美的人类当然不能接受这种半成品,各方技术人员也在马不停蹄的改进这一问题,而在国内,腾讯优图实验室不仅解决了脸部识别不精准的问题,同时在手机QQ上实现了动态多人挂件的功能。
But,他们是如何做到的呢?
问的好!
掌声有请腾讯优图团队,我们今天在手机QQ拍照,视频聊天的动效贴图都是出自他们之手。
优图团队是腾讯旗下专注机器学习的一个小组,自2013年至今,在人脸AR上取得很大的突破,国际上也获奖无数。据他们介绍,实现短视频挂件最重要的两个因素,是要找准五官和贴图挂件从静态到动态的升级。
1.找准五官—90点人脸标注
不明白人脸AR没关系,看过科幻电影应该知道,很多人物的特效都有用到增强现实的技术,最直观的表现就是需要在演员的脸上打点。
这样做的目的是为让机器去找准标注的五官,再将特效用机器附在人脸五官上,腾讯优图的人脸AR同样需要打点。
可不要小看打点这个简单的动作,点的位置与数量都十分讲究。
点过多,会增加标注成本,同时也会降低算法计算速度;
但点过少,又不足以描述人脸各个器官的轮廓,增加了上层应用的难度。
(腾讯优图团队五官关键点标注工作场景)
团队用匠心精神不断打磨测试,运用90点标注,将人脸完善的勾勒出来,使机器可以精准的在脸部添加特效。
2.持之以恒,积少成多
五官定位是让机器学会寻找人脸上的关键点,就好比教婴儿认字,难度却有过之而无不及。
这个环节最繁复的工作就是不断地标注照片的五官让机器学习,于是,打开图片,标注五官,打开图片,标注五官......
这样的动作,团队累计做了几万次。
功夫不负有心人,优图对视频做到了90点人脸配准跟踪,定位偏差1.8像素,接近人工水平。
3.由静至动
在满足上述两个条件后,机器就基本具备了人脸特征点检测的能力啦。
不过这还不够,原始的人脸特征点检测算法耗时长(0.5s左右)如果用这种速度检测多人动态人脸,则会出现抖动的情况。
为了让QQ视频聊天多人挂件功能实现,检测的算法必须更快才能保证动效画面的稳定性!
也就是说,从单人静态的检测,跨越到多人动态的检测,优图团队取得了很大的突破!
也因为他们的成功,我们今天才能和baby井柏然一起畅玩QQ短视频挂件,感恩比心!
资料来源于最黑科技,转载的稿件版权归原作者和机构所有,若有侵权请私信小编,小编立即删除处理