刚过去几天的锤子 2018 年上,新发布的坚果 TNT 和锤子手机上都集成了眼球追踪技术,将用于新一代人机交互。
该项技术由机器视觉和人工智能公司七鑫易维提供。罗永浩还称,今年年底或明年年初将和七鑫易维合作推出基于眼球追踪技术的新产品。
七鑫易维今年年初获得 B 轮亿元级投资,资方为国中创投、晟道投资、中关村发展集团、道昇投资,B 轮过后,公司估值达数亿美元。此前,七鑫易维于 2016 年曾获高通及国科的 A 轮融资; 2015 年获高通及中兴合创的 Pre——A 轮融资;以及 2014 年高通的天使轮融资。
七鑫易维产品销售与市场 VP 徐筱表示,B 轮融资将投入到眼球追踪技术的持续性研发以及商业推广中。
36 氪目前曾报道,七鑫易维成立于 2009 年,是致力于机器视觉和人工智能领域的高新科技企业。公司以研发渐冻人眼控仪设备起家,在眼动控制、视线追踪等领域进行机器视觉技术研发和销售,然后逐渐拓展到 VR 头显眼控模组、眼动分析仪等领域,今年开始,七鑫易维将在电脑、平板、手机等消费级电子设备上发力,以后还会在汽车领域有所发展。
给锤子做眼球追踪的公司「七鑫易维」,今年要把技术应用到更多移动端场景
七鑫易维的眼球追踪方案与本次锤子的两款最新产品都有搭配使用。眼球追踪算法主要在坚果 R1 上运行,而 TNT 工作站上则应用了眼控交互技术。
在 TNT 工作站上,通过搭载即插即用的外设,眼球追踪技术能够让显示器实现大视野眼球追踪,用户可以在距离1米的距离内(实际使用距离0.9max)用眼睛操作屏幕。CEO 黄通兵表示,眼球追踪技术让用户多了一个交互的维度,如配合 Talk and Touch 的交互方式,计算机就马上知道用户想要交互的焦点在哪,能够有效提高操作的效率。
旗舰机坚果 R1 则搭载了眼球追踪算法。眼球追踪的具体原理为,传感器捕捉到人眼数据信息之后,通过算法计算出人眼的具体动作从而确定眼球看向位置。
眼球追踪技术对 VR 交互的视觉效果进行了优化,能够一定程度上解决了眩晕和算力不足的问题。如这项技术会用到的注视点渲染——相较于机器,人眼所看到的视角是固定的,而对人的眼球实现跟踪后,只实时渲染人眼所覆盖到的角度,其他的角度则降低渲染水平,这样不仅能够减轻 CPU 的负担,而且能够让用户体验更佳。
而由于消费级设备与传统 PC 的算力存在差距,眼控技术如何流畅地应用在上面成为了突破的难点。黄通兵表示,将眼球追踪技术推广到消费级设备需要大量计算,而七鑫易维在近十年的研发过程中积累了大量的数据,结合云端大数据后,能够有效地降低移动端的功耗,可用率更高。
给锤子做眼球追踪的公司「七鑫易维」,今年要把技术应用到更多移动端场景
今年,七鑫易维将深耕消费级电子领域,基于手机主流芯片推出后续应用于手机、平板、桌面设备等移动电子设备的眼球追踪方案,在眼动对焦拍照、注视解锁、裸眼3D、眼控游戏、眼动浏览、活体检测虹膜识别等方面进行应用。
CEO 黄通兵表示,罗永浩在锤子发布会上一再强调,锤子本次关注的是交互方式的更新,在很多的场景下,用户一边看一边说,就能进行交互。“或许现在大家觉得这种方式很怪异,但我觉得其实就是还没有习惯而已,我们希望锤子能够让用户真正把这种交互方式用起来。”他说。
他还表示,七鑫易维 2009 年从医疗起家后,近十年中在人眼识别上投入了大量的研发成本,积累了大量数据,因此在人眼大数据以及在产品可用率上,都比同类型厂家有优势。
目前,国内专注于做眼球追踪技术服务商的只有七鑫易维一家,而与七鑫易维同类型的国外企业,据 87870 网,瑞典厂商 Tobii 在 2001 年就已经入局,旗下产品也已进入了商用阶段。
不过,国外的厂商在产品应用成本上还是居高不下,通常都在十万美元级别,但是七鑫易维的 VR 眼控模组在规模化生产后,不同方案的价格分别可以控制在较低的水平。
黄通兵还表示,VR 行业在 2016 到 2017 年间经历了爆发之后,现在行业的泡沫以及慢慢散去,活下来的公司已经趋于稳定状态,今年或明年会加快落地的进程,但技术需要更加完善,而且需要软件端更加配合,明年应该会有比较好的商业落地的场景出现。目前,七鑫易维已经与全球多个硬件厂家进行合作。
来源:36Kr