【猎云网(微信号:ilieyun)】9月9日报道 (编译:小白)
脸上布满ARKit?
本月12日,苹果将在他们的位于新竣工大楼内的史蒂夫·乔布斯中心举办活动,发布几款全新的iPhone。《彭博社》的Mark Gurman已经写了好几篇关于新iPhone细节推测报道,不过总体来说,以下两大细节,大多数分析师都一致同意:
1.两款搭载了更强劲处理器的iPhone将和现有的iPhone 7、iPhone 7 Plus外观十分相似,可能也会命名为7s和7s Plus,或者8和8 Plus,都有可能。
2.全新设计的高端版本iPhone,无边框,大OLED屏幕,取消Home键,并配有全新的前置传感器支持面部识别解锁以取代原有的指纹解锁(Touch ID)。可能的命名为Premium、Edition、Pro、X等等。
多数报道集中在iOS 11的性能提升,但是除了用户可以通过面部识别来验证身份和解锁手机之外,鲜有报道深入挖掘面部识别可能带来的其他变革。
而我则认为,这将是新一代iPhone的旗舰功能,并将使得苹果大大领先于其他竞争对手,并对未来的增强现实具有巨大的影响力。
苹果风格的面部识别解锁技术
2011年以来,不少Android手机已经具备面部识别解锁功能。但是,这些手机仅仅是采用前置摄像头抓拍用户面部的2D照片,然后再利用软件与之前的照片进行数学比较,以确定是否为用户本人。自推出以来,人们普遍反映Android的面部识别解锁技术速度缓慢且安全性低,即使是三星的S8手机也能一张放置在摄像头前的照片轻易糊弄。显然,这项技术不是我们希望的。
而苹果,更是绝不会在他们的最新最高端的iPhone上引入一个能被照片轻易糊弄的面部识别解锁功能。
过去几个月来,人们对这项新技术的猜测有很多,不过通常夹杂在关于iPhone其他谣言和预测之中。
7月份,一篇来自彭博社的报道写道:
“根据熟悉该产品的匿名人士透露,苹果正在测试一种改进的安全系统,可以允许用户通过扫描脸部来解锁手机、验证支付、以及启动安全应用。这一功能由新的3D传感器支持。另有其他人还透露,苹果正在测试眼部扫描技术来增强这一系统。”
全新的3D深度传感器,还可以跟踪眼球的移动。
那么运行速度又如何呢?
“传感器的运行速度和正确率是该功能的核心点。该人士透露,它可以在几百毫秒内完成用户面部扫描并解锁手机。并且,即使手机平放在桌面上时,该技术也可以进行人脸扫描,而不必凑到面前。”
速度很快。也许跟Touch ID差不多,甚至更快。话说回来,如果不够快,苹果也不会允许这项技术上线。
8月份,《华尔街日报》的另一篇报道也描述了这个新的传感器:
“深度传感技术,也被称为‘结构光’,可以向人脸或其他物体照射出无数微红外线发光点。
通过读取区域中点失真,摄像头可以手机到极为精确的深度信息。但由于手机摄像头可以看见红外线而人类不能,因此这一系统可以在完全黑暗环境中解锁手机。”
红外线发光点,可以在低光(或无光)环境下扫描人脸,生成极为精确的3D深度图。
接下来,让我们再深入了解下眼部跟踪。是否有报道显示苹果正在这一领域下大力气呢?或许有。今年初,苹果收购了一家名为SensoMotoric Instruments的公司,这家公司在过去20多年来一直都在开发眼部识别技术。
“SensoMotoric Instruments,成立于1991年,已经开发了广泛眼部跟踪硬件和软件,可用于多个领域,包括虚拟现实、增强现实,车载系统,临床研究,认知训练,语言学,神经科学,物理训练、生物力学,以及心理学。”
更多关于该公司的眼部跟踪技术的报道有:
“比如,该公司的Eye Tracking Glasses,可以实时记录某人的自然目光行为,采样频率高达120Hz……SensoMotoric还为虚拟设备头戴设备开发眼部跟踪技术,比如Oculus Rift,可以分析穿戴者的眼神并帮助缓解VR设备的普遍副作用——晕动症。这一解决方案同时可以允许用户以眼神控制菜单或操作游戏。”
120Hz的实时眼球跟踪技术,可以让用户仅用眼神来进行软件交互。但是在今夏的WWDC大会上,苹果介绍了一系列API,以向开发人员提供更多高级脸部识别能力:
“Vision Framework可允许你识别脸部轮廓和标志(轮廓、中线、眼睛、眉毛、鼻子、嘴唇、瞳孔位置等)”
除了这些公布的API,这一切都在暗示,新的iPhone没准可以知道你是不是在看手机,然后决定是不是要发出提示音。
总结上述所有花絮,一个关于此高端版本iPhone的新识别功能背后的完整技术蓝图逐渐浮出水面:
1.专门的传感器可以利用红外线光生成极为详尽的用户面部和周围环境的3D扫描图;
2.改进的前置摄像头将可以拍摄更保真的照片和更高帧数率的视频;
3.比Touch ID更快更安全的解锁和支付验证功能,甚至在黑暗环境中也能使用;
4.新的高级图像处理功能可以跟踪和解读眼睛的移动,从而做出相应决策;
所有这些,不单是解锁用户手机的一种新方式。他们也是目前还无其他人问津的未来技术的基础元素。
除了花样解锁,还能......
用户们将可以用他们脸来解锁iPhone。他们将可以通过面部验证来进行购物。
但是,在我看来,以上两大功能不过是新高端版本iPhone的最基础功能。
过去2年来,消费技术圈不断沉迷于自拍镜头,比如在你的照片上添加其他物品或效果,或向哈哈镜那样直接扭曲照片。Snapchat可以说是这一领域的先驱,并在后来于2015年9月以报道的1.5亿美元价格收购Looksery来增强自拍镜头技术。
几个月后,一个由白俄罗斯小团队开发的自拍滤镜应用MSQRD风靡App Store。MSQRD的设计十分简洁,但是其具有的滤镜和效果却比当时的Snapchat要真实和丰富许多。从推出到后来被Facebook收购的短短几个月时间内,MSQRD如野火般迅速席卷美国和其他国家,下载量飙升至2500万次。
但是这些跟新iPhone又有什么关系呢?
首先,所有这些自拍镜头的创新,无不基于软件使用越来越先进的图像处理技术,将你的2D自拍照转换成3D网格,从而可以实时进行处理和变换。但是iPhone上的前置摄像头的分辨率远不及后置摄像头,所以即便它可以拍摄1080P高清视频,但对于高帧数率、高分辨率取样,前置摄像头着实比不过可以拍摄4K视频并支持ARKit的后置摄像头。
但是对于新高端版本的iPhone,有传言说前置和后置摄像头将都能够支持以60FPS录制4K分辨率视频,如果是真的,那无疑是相较于今日FaceTime HD摄像头的大跃进。
即便苹果并不打算在手机上引入3D深度传感器,这些关于前置摄像头分辨率和帧数率改进的传闻也足够给自拍镜头的保真度和真实度带来巨大的影响。越是多的数据,等同于改进的面部和边缘检测技术以生成更好的网格,等同于更优的处理和跟踪。
但是!因为这款新高分辨率摄像头就位于令人难以置信的红外线面部扫描传感器附近,开发人员无需筛选大量的图像数据来确定人脸到底在哪里,他们只需使用这些来自3D传感器的数据,就可以明确知道某人最微小的面部细节位于3D空间中的何处,从而为眼下的增强现实带来更多可能性。
就在刚才,我头脑中灵光乍闪,以下看似疯狂的东西不仅可能性非常大而且还非常有可能直接出现在新高端版本的iPhone上:
1.用户在使用应用时,知道他们在看什么。界面互动完全由眼神掌控,无需触屏。
2.来自用户脸部难以置信的生物特征和健康信息。2013年,科学家可以通过分析某人的视频来判断其脉搏。毫无疑问,苹果已经研究了所有这些可能性。
3.完全浸入式的自拍AR效果,其保真度和图形细节直逼电影中的CGI效果。
4.面部移动和情绪识别彻底改变你当前使用软件的方式。如果你感到悲伤,应用会立马识别出来并改变功能。想象以下,因为手中的iPhone可以清楚地知道用户方才的表情,那么你没准可以知道你刚才发送给朋友的GIF是否真的让他们开怀大笑……
5.移动广告的大革命。届时应用和广告商将知道用户是否有真正观看手机上的广告。这些数据将比当前广告商收到的任何指标都有价值,但是或许也将导致很不好的结果。
6.这些只是一些猜想,但是随着这些新技术的推出,以及苹果向开发人员提供的API以访问这些技术,我相信无数非凡的体验(以前永远不会被构建)将很快实现。 苹果甚至可能会与多个第三方开发商合作,为即将到来的苹果发布会打造一些杀手级的演示,让世界领略其神奇。
新一代iPhone即将与9月12日发布,所以很快一切都会揭晓。