出品 | AI科技大本营
魔性的背景音乐、酷炫的AR特效、多元的内容题材,让大众欲罢不能的短视频App正在成为内容生产和传播主要渠道之一。
而短视频平台为了抢夺用户,正在通过各种方式提升用户体验。其中,AR特效打破虚拟与真实的界线,带来丰富的娱乐性,再度提升了短视频的体验。结合人脸识别技术,AR特效相机可以在人脸上添加各种萌萌的动物挂件,与此同时,AR特效功能还会匹配相应的背景音乐,从而吸引用户生成有趣生动的AR内容。
腾讯微视作为一款时下热门的短视频软件之一,对于创意玩法应用也有诸多有趣的探索。
最近,他们推出了“AR投篮机”,在微视APP内搜索“AR投篮”,点击体验后,手机屏幕会出现一个投篮的小游戏,点开始就能投篮。除了AR投篮机,腾讯微视此前还推出了摆摊、熊出没等有趣的特效。
AR投篮机,模拟真实世界的“手感”
PBR渲染、水平面AR技术几乎是每个AR特效必备的基础技术组件,AR投篮机也不例外。
在玩AR投篮机时,用户需要在手机屏幕上定位篮球的位置,在这一特效的三维空间里面放置一个AR模型,微视的水平AR技术就用到了视觉定位技术,研发人员使用了ORBSLAM、VINS、SVO等SLAM算法来计算,比如,可以一边建图一边定位,定位的精度比较高。
相比ARkit或ARcore,虽然它们高精度定位更好,但微视的水平面AR算法更简洁,能涵盖绝大多数的模型,此外,在单目相机的手机上,水平面AR算法能在第一帧就初始化放置AR模型,不需要视差。同时,在鲁棒性、计算量、交互和扩展性等方面,水平面AR算法也优于其它技术。
AR纸片人,让画中人动起来
AR纸片人是一个让简笔画或动漫人物“活”过来的特效。当用户在扫描一个图案后,其中的纸片人算法会把图案中的轮廓提取出来,同时通过骨骼绑定算法再给这个3D模型加上起身、跳跃、摆手等动作,如此画中人就可以“动次打次”起来了。
3D人民币,识别多张纸币的大好山河
当你使用3D人民币特效时,将摄像头对准第五套人民币的背面拍摄即可体验。
在识别人民币后,会有凤凰飞旋在人民大会堂、布达拉宫、桂林山水等3D画面上方。你不光能看到精致的画面 ,还能不断变换角度观看3D场景细节。
当然,微视光流AR技术在端上部署时,也需要解决不同计算设备的适配问题,以获得最佳的用户体验。由于苹果的硬件相对统一和标准化,所以在包括iphone6S及以上的iOS机型上,微视的AR算法都可正常运行。而在Android端,由于ARCore覆盖度比较低,他们选择了算法自研,目前微视在Android端的82%以上机型都可正常运行,在业界具有较高覆盖度。
未来,AR技术将具备更加多元、深度的交流学习能力,而技术的精进将进一步推动其在短视频业务场景的落地。
除了AR技术外,腾讯微视也在引领其他技术领域的研发。最近,腾讯微视斩获VCR榜单第一的BLENDer单模型引发了业界关注,其AI能力已经渗透到微视从图像处理、用户理解、推荐算法到运营增长的各个环节。此外,再加上5G时代的高带宽和低延迟,这些技术的交相融合将极大促进短视频领域的发展
在短视频领域竞争如此激烈的当下,腾讯微视在AR等前沿技术上的探索,将继续推动其短视频业务的智能交互应用创新,从而更新用户对技术的认知,并吸引更多用户体验。
文章知识点与官方知识档案匹配,可进一步学习相关知识算法技能树首页概览35093 人正在系统学习中
声明:本站部分文章及图片源自用户投稿,如本站任何资料有侵权请您尽早请联系jinwei@zod.com.cn进行处理,非常感谢!