继vivo NEX发布后,vivo紧锣密鼓又在上海发布TOF 3D超感应技术,这样连续的黑科技,看得瓜友们连连称赞,毕竟苹果只是说预计会出来这样的技术,vivo就已经在今年提前出来。
vivo首发TOF 3D超感应技术
我们生活在一个三维的世界,智能终端与人类的交互方式,也随着技术进步,经历了由计算机编码、2D图形图像,到3D视觉影像的不断进化。
目前3D视觉领域主流的解决方案是结构光和TOF。苹果2013年收购了以色列公司PrimeSense,通过将3万个激光点图案投射到用户的脸上,生成用于认证的精确3D 图像技术,实现了Face ID的3D结构光方案,目前大多数Android手机企业都在“跟随”使用这一常用方案。
不过从结构光技术本身来看,存在有效深度信息少、工作距离短、baseline(基线)大、量产难度大、应用开发复杂等挑战,这也是其他Android手机品牌产品落后苹果9-12个月(也就是整整一代产品周期),同时苹果也仅将其作为Face ID 识别方案,并没有向其他应用开放的重要原因。
vivo产品经理王兆丰
TOF为Time of Flight(飞行时间)的缩写,是一项深度摄像技术。其工作原理是:发射器发出经调制的近红外光,遇到人或物体后反射,传感器在接收到红外光信息后,计算红外光线发射和反射的时间差,从而形成立体视觉。TOF相比结构光从技术开发上难度更大,对硬件、算法等要求更高,但具备结构可靠、有效深度信息高、工作距离远、结构布局灵活、应用场景丰富等优势,因此也被视为更优的3D视觉方案。
vivo软件部门负责人刘旭东透露:vivo开发的TOF 3D超感应技术,相比目前3D结构光方案,具备三大明显优势:
1)有效深度信息点高达30万,为结构光技术(3万)的10倍,是目前行业最高的有效深度信息点数量,有效解决了智能手机采集有效深度信息较少的问题;
2)工作距离可达3米,是结构光技术(约1米)的3倍,应用场景大为丰富;
3)TOF模组的baseline(基线)近乎为零,相较于结构光技术的25mm做到了大幅提升,未来手机ID设计上可以更灵活;
vivo软件技术专家臧亚奎称,在过去6个月中,vivo工程师夜以继日,从技术突破上来讲最大困难点有三个:一是TOF方案需要照射单元、传感器之间必须精准匹配,对算法要求也很高,同时还要兼顾能耗和降低噪声问题;第二个是模块结构设计是否简单可靠,同时确保量产;第三个是vivo选择这条与苹果不同的路,会承担很大的风险,这让跟随苹果的渠道供应链改变方向也非常困难。
刘旭东对《壹观察》透露,vivo从2014年开始关注3D视觉技术,2015年开始预研,2017年3月对结构光和TOF技术做具体追踪和深入讨论(iPhone X发布半年前),最终拍板TOF方案是在2017年底,也就是说,TOF 3D超感应技术在vivo内部经历了整整4年,这也符合手机产业技术3-4年的一个研发到应用的周期。
所以《壹观察》之前也多次强调说:技术研发的特点就是持续投入和长周期性,vivo进入2018年以来呈现出来的密集“黑科技组合拳”,很多都是基于三年之前的判断和决定,之前很多业界批评vivo“缺乏技术投入”的很多判断是偏颇的,应该放在一个比较长的周期来做判断。
TOF技术不止于想象力:
丰富的应用前景+革命性交互
除了手机ID外观与结构上的创新,TOF 3D超感应技术带来的最重要的变化,是将智能设备对世界感知从2D向3D上推动了一大步,vivo产品经理王兆丰将其归纳为可带来识别、追踪、建模三大方向的场景应用和交互创新。
TOF 3D超感应技术具有目前行业最高有效深度信息点数量,意味着细节更精确,图像品质更好。比如用户在拍照时,可以获得更立体的数据模型,使得打光、虚化、着色等局部调整更加精准,获得的美颜照片更加立体自然,场景光更加符合视觉习惯。更精细的深度成像还极大提升了人脸识别的安全性,此次发布会上vivo宣布了与微信达成深度技术合作,TOF 3D超感应技术已成功支持微信人脸识别高安全性支付,预计在2018年下半年投入商用。
相比结构光3倍的追踪距离,结合高精细的深度信息,带了丰富的应用场景和交互方式创新,比如线上购衣不能试穿,造成超高退货率。通过TOF 3D超感应技术进行3D拍照,买家就可以通过手机轻松建立人体模型、线上试穿,快速、方便的淘出心仪好货,避免“卖家秀”。
vivo在2018MWC上海展台展出了体感交互游戏,基于vivoTOF 3D超感应技术,可以实时追踪人体各个部位的精准变化,对未来MR体感游戏的应用将是一大利好。今年《头号玩家》中就给观众展示了一个将万物建模,再将模型与其他虚拟或现实场景融合,兼顾沉浸式MR视觉与体感交互操作的全新未来。而vivo TOF 3D超感应技术的应用和普及,将会是距离这个梦想踏出的关键一步。
vivo TOF 3D超感应技术必须结合更多的应用才会带来用户端的普及,vivo在发布会上宣布正式启动“3D视觉开发者计划”,具体讲实现从底层TOF器件和深度信息接口至上层功能应用的全渠道覆盖。
臧亚奎对《壹观察》表示,开发者可以基于TOF 3D超感应技术做很多创新,vivo考虑到并不是所有的开发者都具备基础数据的处理能力,现阶段会往上封装一些能力,比如说手机识别能力、物体识别、建筑识别,再把这些能力封装起来,释放给开发者。现阶段已经有核心的应用合作伙伴进行了接入,vivo态度是完全开放的,欢迎所有的开发者一起面向未来趋势共同为用户打造革新性的应用体验。
在发布会后与刘旭东的沟通中,《壹观察》还获得了另外一个比较重要的信息,vivo TOF 3D超感应技术并不是单独一个研发团队推动的,而是聚合了主要负责图像和拍照的vivo杭州研发中心,负责AI方向的美国硅谷和圣地亚哥研究中心,以及负责5G的北京研发中心,这也就说vivo TOF 3D超感应技术并不是一个单纯的3D图像视觉领域的解决方案,而是会与5G和AI深度结合,在vivo发布会上,vivo产品经理王兆丰也透露将在远程会议办公、远程医疗、远程教育方面进行更多行业应用场景的探索和落地,进一步完成智能终端在现实世界与虚拟世界的更好连接。
TOF技术进入量产:vivo下半年再推“未来机型”
vivo TOF 3D超感应技术的演示机基于vivo X20手机,通过自带的CCD Sensor和定制化AFE芯片,在运行中结合AI辅以深度图优化算法和高性能3D建模算法,可以轻松录入用户的3D精细面部成像。
从现场体验来看,vivo TOF 3D超感应技术的成熟度已经很高,而基于vivo X20演示也说明了其本身已经与在售机型完成了工程适配。刘旭东也强调称:“vivo从来不发布单纯概念产品,vivo TOF 3D超感应技术已经达到了可量产状态,很快会应用到下一款新机型中”。
这实际上是vivo近年来一个非常鲜明的传统:发布新技术到量产机型的间隔时间段都非常接近:比如屏幕指纹技术方案在今年1月的2018CES上亮相,当月全球首款屏幕指纹版量产机型vivo X20 Plus UD宣布上市;2月2018MWC上发布了使用前置升降式摄像头、没有刘海屏的概念机APEX,仅隔3个月后量产机型vivo NEX就来了,并搭载了第三代屏幕指纹识别方案,同时vivo还宣布搭载vivo屏幕指纹方案的手机已经生产下线超过200万台。由此可以看出,相比其他手机企业,vivo 在技术研发方面更加聚集用户痛点感知,并且具备较强的产品转化和创新能力。
搭载TOF 3D超感应技术的vivo量产机型将于2018下半年上市,按照TOF 3D的近乎为零的基线设计优势,以及vivo丰富的屏幕感光设计经验来看,下半年vivo发布的新机型,极有可能就是一款在设计方案上更优秀和大胆的“无刘海+屏下TOF 3D超感应技术+取消指纹识别”的再次革新性全面屏手机。
据说2017年下半年vivo内部在“下一代”产品如何定义、技术判断爆发过一次激烈的争论:按照市场下滑大势的判断,“跟随”和“微创新”策略是最稳妥的方式和不犯错的方式,在品牌高度集中趋势下销量照样也卖的很好。但作为全球主要TOP手机品牌,vivo希望可以在行业减速期,加速产品创新,激发消费者的换机欲望,满足用户在时尚和科技方面的升级需求。胡柏山曾向vivo技术和产品团队提问:“vivo有没有能力按照自己的节奏和理念去重新定义科技+时尚的旗舰产品?”
从vivo进入2018年之后对外界展现出来的一系列“黑科技组合拳”来看,vivo技术和产品团队最终选择了一个“最具自我挑战式的回答”。市场和用户也显然对vivo的这种技术投入和产品创新给予了肯定:赛诺数据显示,vivo最新旗舰NEX开卖后即热销,成为周度增量冠军,并且顶配版占比高达三成。而随着TOF 3D超感应技术等更多“黑科技组合拳”落地,vivo长期技术投入打造的“科技驱动引擎”,才刚刚表现出其强劲的推动力。