据腾讯介绍,QQ-AR穿越赛场玩法基于手机QQ和腾讯音视频实验室联合推出的、业内首次手势AI识别跟踪技术实现:当用户手指在摄像头前挥动时, 通过在终端运行级联神经网络计算,获取用户指尖的位置信息,得到指尖的运动轨迹,并记录和拟合判断是否画圈成功 。判断画圈成功后,再采用三维重建定位跟踪技术,将虚拟的魔法门增强显示到现实场景中,让用户可以稳定、准确的在真实世界和虚拟世界来回穿梭 。
文章插图
音视频实验室的手势AI识别跟踪技术在模型设计与前馈计算两个层面对体验进行优化 。模型层面,通过蒸馏、剪枝等多种方法优化网络模型,在最大限度保证高精度的前提下降低模型复杂度,在性能、准确率和误识别之间取得了一个较好的平衡;在前馈计算层面,通过在CPU指令级别优化终端前馈计算性能,最终结合模型,实现了具有良好精度,实时的性能表现以及最大程度设备兼容性的指尖运动轨迹追踪 。
手势AI识别追踪 AR任意门的玩法正是基于多项技术研究,实现了打造跨越现实和虚拟赛场的AR任意门与热门体育运动结合借助热点事件,通过使用最先进的技术,以一种全新的玩法让用户在真实世界里参与进来,最终要体现的是腾讯QQ-AR技术、文化和品牌等多方面的创意输出 。
腾讯提到,将用户从热门体育赛事的旁观者转变为赛场的参与者,在体验穿越效果的同时进行趣味互动,极大提升用户参与乐趣 。
QQ-AR技术的未来与下一个信息入口不过,用手划一个圈,进入球赛赛场/一个全新的360度世界,只是QQ-AR技术的一个小场景应用 。未来,将有越来越多的物体可以被QQ-AR技术识别,依托巨大的用户流量,QQ-AR技术将打开一个新的信息入口 。
整个项目体现出了QQ-AR的技术积累和根据场景需求所能展现的标杆效果 。手势AI识别跟踪目的是通过数学算法来识别人类手势,用户可以使用简单的手势来控制或与设备交互,比如科幻片中的浮空触控 。而姿势,步态和人类行为的识别也是手势识别技术的主题,未来通过人体姿势和面部表情、手势动作就可以实现人机交互 。
VIO视觉惯性里程计(Visual Inertial Odometry),就是通过分析相机序列图像估计相机运动位置和方向的技术,它结合IMU,可以提高相机运动测算的精准度 。一些高端的无人机、机器人已经运用上了类似的技术,用于摄像头测算景深信息,自动躲避 。
落地场景方面,QQ-AR已经可以实现的黑科技包括识别花草,为用户展示3000多种常见花草信息并预约领取绿植种苗 。几个月前,腾讯通过QQ-AR技术的能力,将数字科技和真实的城市地标结合通过扫描城市代表性建筑,展示和了解这座城市的一座座数字地标 。
文章插图
在2017年腾讯年度财报中,QQ重点展示了QQ21岁以下用户数据月活跃账户同比增长,使用时间又有所增加 。QQ正在成为一款越来越受年轻人喜爱的产品,QQ也越来越重视95后的娱乐化社交需求 。
而QQ-AR所涉及的黑科技项目同样是针对QQ年轻用户娱乐化社交需求一个很好的切入点近年来,QQ版本的更新更是添加了GIF图库、互动表情,拓展动漫、游戏等产品和服务,主攻95后娱乐社交需求 。
近年来,腾讯的一个动作是尝试打通线上和线下的信息 。当前,二维码已经作为一个线下ID,成为腾讯融合线上线下的入口 。
如果QQ-AR技术成熟,那么未来生活中的万物实体将可能成为我们熟悉的二维码通过打开我们手机上的QQ和摄像头扫一扫就可以打开相应的线上信息,实现新的增值内容 。而根据腾讯2018年一季度财报,手机QQ月活跃账户数目前为6.94亿,看起来QQ-AR未来大有可为 。
推荐阅读
- 湖南建工集团董事长什么级别
- PS打造古典的油画效果
- 榕树盆景什么品种好
- 鸡蛋放冰箱发霉是什么原因
- 寒露吃什么蔬菜
- 如何将快手隐藏作品恢复 快手将隐藏作品公开的教程
- 360借条客服在哪里找
- 如何分辨出冷却液需不需要更换
- PS调出美女暗调质感肤色