农企新闻网

2017回忆:苹果做AR的这一年,为何值得铭刻?

发布者:李龙林
导读2017是苹果发力AR的一年,其带动了2017下半年AR市场的全体开展。这一年,CEO库克在各个场所强推AR,在他看来AR对苹果的重要性,正如iPhone对苹果的重要性一样。苹果在AR硬件和软件上都获得了很多打破。 6月苹果推出ARKit,使得上亿的iPhone设备一夜间拥有高质量的AR功用;9月上线搭载ARKit的iOS 11上线至今,App Store中曾经有超越1000款AR使用;iPhon

2017回顾:苹果做AR的这一年,为何值得铭记?

2017是苹果发力AR的一年,其带动了2017下半年AR市场的全体开展。

这一年,CEO库克在各个场所强推AR,在他看来AR对苹果的重要性,正如iPhone对苹果的重要性一样。

苹果在AR硬件和软件上都获得了很多打破。 6月苹果推出ARKit,使得上亿的iPhone设备一夜间拥有高质量的AR功用;9月上线搭载ARKit的iOS 11上线至今,App Store中曾经有超越1000款AR使用;iPhone X搭载专为AR优化的A11仿生芯片、原深度摄像头和神经网络算法;苹果AR眼镜将采用独立芯片、搭载rOS零碎,最早2020年发货。

ARKit改动AR生态

苹果要做 AR 早就不是什么旧事,Tim Cook 也屡次在地下场所标明看好 AR。WWDC上苹果发布了本人迈入 AR 范畴的第一步——针对 iOS 11 推出 ARKit。

在WWDC上,苹果演示了宜家用ARKit完成的Ikea Place功用,在你选择家具的时分,可以直接把虚拟的家具放置在真实的房间中,虚拟家具会依照1:1复原,这样在购置前就可以很直观的看到家具的摆放效果。

2017回顾:苹果做AR的这一年,为何值得铭记?

苹果还演示了ARKit对Pokémon GO的晋级。2016年7月,Pokémon GO火遍全球,上亿人参加了这场捕获虚拟宠物精灵的AR游戏中,感遭到AR的魔力。但是,Pokémon GO只是低端的AR使用,其完成方式只是将虚拟物体叠加在手机相机图像流之上,虚拟宠物精灵只能漂浮在理想世界中,没有真实可言。ARKit可以使失宠物小精灵站立在空中上,扔出去的精灵球还可以在空中上弹跳,也就是说虚拟物体与真实世界有了互动。

2017回顾:苹果做AR的这一年,为何值得铭记?

ARKit是苹果迈入AR的第一步,使得上亿设备霎时拥有AR功用,也使开发者不需求任何别的工具,可以轻松应用ARKit开发AR使用。ARKit的推出直接改动了AR技术的格式,AR市场的生态。

硅谷AR投资人Matt  Miesnieks指出,ARKit的根底技术是视觉惯性测量(VIO)零碎、复杂的2D立体检测。ARKit可以被看成笨重的SLAM零碎,可以将3D虚拟物体放置在真实的立体中,使得虚拟物体在立体上运动,还可以追踪用户的绝对运动。而ARKit神奇之处和攻破的难点在于其完成了单目3D成像、计量尺度获取。(延伸阅读: 大神揭秘:苹果 ARKit 凭什么碾压对手? )

ARKit运用的VIO零碎其实和市面上曾经有的Vuforia 、谷歌Tango、HoloLens等没有差异。雷锋网理解到,ARKit的VIO技术来自于其收买的FlyBy公司,而该代码库曾经受权给Google,成为 Tango 的 VIO 零碎。大神Matt以为ARKit的优势在于苹果公司可以担负得起将 VIO 算法严密耦合到手机传感器上,并破费很多工夫来校准 VIO 零碎,以增加计算空间地位时发生的误差。

谷歌Tango早于ARKit,但是Tango是一套独立的软硬件设计参考规范,事先支持Tango的只要联想的Phab 2 pro和华硕的ZenFone。Google的AR技术积聚早于苹果,但是由于没有整合好软硬件,被ARKit抢占了先机。此时,Google显得非常为难,要么推出单目AR SDK,要么强推Tango让安卓手机硬件晋级。

显然,Google选择了前者,在8月,Google发布了ARCore,正式与ARKit停战。ARCore被看作是轻量级的Tango,可以支持Samsung S8和 Pixel系列手机。Matt以为,“作为技术处理方案,ARKit和ARCore的才能十分接近。ARKit 在集成和跟踪方面具有一定的技术优势; ARCore 在建图和重定位方面具有一些优势。可是这两个优点大多是专业的计算机视觉工程师才干看到的。”(延伸阅读: 大神解读:谷歌 ARCore 就是低配版 Tango,它比苹果 ARKit 好在哪? )

2017回顾:苹果做AR的这一年,为何值得铭记?

库克在采访中也回应了ARKit与ARCore的竞争,他说到:“Android的市场更大,但过于分散以致于谷歌无法确定手机新功用的降生需求多长工夫。虽然苹果和三星不断在抢夺手机市场的第一把交椅,但苹果的手机销量远高于竞争对手。更重要的是,苹果公司本人打造手机制造软件和硬件,这使得它在AR和其他范畴都处于无独有偶的优势位置。谷歌也在对它的Pixel手机系列做异样的事情,并整合了良好的虚拟理想功用,但这些手机的销量并不大。”

苹果发布ARKit支持iPhone 6S及以上机型,霎时就有上亿用户,而安卓OEM厂商接入ARCore或许还得等上大半年。不好看出,ARKit的推出安慰谷歌发布ARCore,让安卓市场也接入AR。但ARKit对AR格式的改动还不止于此。

阿里巴巴天猫互动技术专家蒋佳忆曾发文剖析ARKit对AR眼镜厂商、AR SDK公司、AR软件玩家的影响。在他看来,ARKit首先以手机AR的方式教育群众,对AR眼镜将来的普及是铺垫作用。AR SDK玩家比拟惨,近一年简直一切SDK公司都在基于单目做SLAM算法的研发,而苹果处理这个成绩后,这些玩家智能转而在ARKit根底上做扩展功用。例如,uSens凌感推出可以适配低端安卓机型的AR技术平台。AR软件玩家如Snapchat和Facebook遭到影响也很大,Snapchat的World LenseAR功用推出时是创新,FaceU,B612这样的小玩家有了ARKit之后,就可以立马完成Snapchat的AR功用。(延伸阅读: 如何评价苹果在 2017 WWDC 上发布的 ARKit? )

此外,值得留意的是,国际BAT在ARKit推出后,纷繁参加搭建AR技术平台和落地使用。阿里巴巴、百度、腾讯、网易、京东都纷繁开放了本人的AR技术平台,这些AR技术平台将协助开发者、企业更疾速地在这些大平台上完成AR功用。AR可以真正在落地场景中改动购物、社交和出行。2017年AR的根底技术和使用生态迅速铺开。(延伸阅读: 腾讯详解 QQ-AR 开放平台,让全社会参与出去专访赵刚 | BAT 之后,京东为何也参加 AR 战场?

硬件晋级,iPhone X专为AR打造

2017回顾:苹果做AR的这一年,为何值得铭记?

9月12日,苹果新品发布会发布了iPhone 8/8 Plus, iPhone X和搭载ARKit的iOS 11以及新的人工智能仿生芯片A11。

整个发布会,AR占据了很重要的地位。苹果营销副总裁Schiller 称iPhone X这是“第一款真正为 AR 打造的智能手机”。

此前,普通的手机应用一些AR SDK也能完成AR效果,例如去年春晚的AR抢红包。在AR场景中,摄像头是AR的入口。Schiller引见到,新iPhone的摄像头专门为 AR 而校准,刷新率到达 60fps,全新陀螺仪和减速计,以及精确的举措追踪。此外,AR算法对GPU、CPU要求十分高,A11仿生芯片让 iPhone 的 AR 功用可以更好的完成,CPU 可完成较好的追踪,GPU 能渲染更真实的图像,以及 ISP 实光阴照。

Oglass 苏波对雷锋网 (大众号:雷锋网) 说:单纯从ID(Industrial design)来看,iPhone 8简直没有什么创新之处。但是有了AR功用的iPhone相当于再一次创造了手机。好像最后,iPhone把功用手机退化为智能手机。这一次,智能手机又将退化到AR机。

WWDC上ARKit的推出让大家看到了苹果在AR技术上的实力,而在此次的新品发布会,苹果在软件和硬件两方面的AR规划更为明晰。很多业内人士置信,苹果或许会打造出一套新的AR操作零碎。(延伸阅读: 苹果大举押注AR,或将撬动整个行业? )

2017回顾:苹果做AR的这一年,为何值得铭记?

ARKit功用复杂,半年来无爆款使用

后面剖析的都是硬件、软件的根底技术停顿,而ARKit给用户的生活带来改动还得看内容。发布会上,苹果展现了四款基于ARKit打造的内容。两款AR游戏《The Machines》和《Warhammer 40k:Free Blade》,MLB(美国职棒大联盟)的《At Bat》,还有一款可以看星星的《Skyguid》。  

2017回顾:苹果做AR的这一年,为何值得铭记?

(《The Machines》游戏画面)

《The Machines》由上海创业团队Directive Games打造。《The Machines》是一款即时战略游戏,可支持两名玩家在战场上控制各自的英雄,对立和消灭对方的基地和进攻塔。这款游戏在China Joy演示时,一些玩家兴奋地围着桌子跑来跑去。

AR游戏不只使得游戏以3D的方式出现,最令人着迷的中央就是让玩家在真实空间中动起来。但是,这仍然ARKit能支持的只是放置在2D的立体上的3D游戏,不是真正的与真实场景相交融的3D。

尔后,App Store中的AR使用大幅上升,除了AR游戏以外,AR小工具,例如AR尺子、AR绘画等App数量最多。但是到目前为止,AR使用数量高达1000,我们仍然没看到一个能超越《Pokémon GO》的爆款。(延伸阅读: 苹果第一批AR使用上线,我们帮你试了哪个最好玩! )

2017回顾:苹果做AR的这一年,为何值得铭记?

体验过多款ARKit的内容之后,雷锋网发现,目前ARKit完成的使用都需求有以下一些根本的操作:用相机扫描一个立体停止定位、将虚拟物体放置于立体、虚拟物体在立体上运动。依据ARKit开发的游戏让普通用户很隐晦。大多用户都无法了解在翻开AR使用前,为什么要用相机去扫描立体,而且扫描常常需求20多秒的工夫,还时常失败。

为此,苹果专门发文解释ARKit设计进程需求服从的流程:如何让用户疾速了解AR操作、AR的人机交互与智能手机有何不同等。比起曾经有一套一致的标准和规范的手游,AR游戏的每一步都还需求开发者去探究,去填坑。(延伸阅读: 苹果官方给ARKit开发者的22条建议,你家AR使用做到没? )

在WWDC上,库克鼎力赞扬ARKit,他对剖析师们说:“这是我们将回忆的严重事情之一,是一个令人惊叹的开端。”但是在iPhone发布会上,ARKit却没有被鼎力提及。由于其完成在ARKit和ARCore都只是1.0版本。只给开发者提供了三个十分复杂的AR工具:手机的六自在度地位和坐标数据、部分小型的立体、复杂的场景照明。仅仅用这三个工具,你真的无法发明出令人印象深入的东西。

AR要真的改动游戏、文娱、购物等生活场景,需求很强的3D重建才能,也就是说原生AR使用要可以完成数字信息和物理空间或人的交互。例如,当你在桌面放置一个虚拟的水杯,这个水杯能被后面的台灯遮挡,这样你会分不清哪些物体是虚拟的,哪些是真实的,有了3D重建才能,这些AR物体还可以持久地停留在真实空间中。只要这样,我们才干真正完成,虚拟和理想相交融的愿景。

此外,AR其实是一种图像的输入,而AR要改动人们的生活场景,还需求更多的输出。这需求与AI的开展相配合。例如,美图使用将计算机视觉等AI技术与AR技术结合,发生了AR美拍、AR试妆、AR试穿等功用,这些功用将真的改动购物。雷锋网也理解到,微软正尝试将人工智能聊天机器人微软小冰与AR相结合,这样你就会拥有一个有虚拟抽象的AI助手。在一些业内人士看来,在将来的人机交互里,AI是输出、AR是输入。

AR要改动群众的生活,单靠ARKit显然难以做到。(延伸阅读: 大神揭秘:为什么ARKit得到了AR云的支持,就会毫有意义? , 独家| 阿里机器视觉专家李名杨:AR是AI的一种表现方式 )

苹果AR眼镜或于2020年上市

2017回顾:苹果做AR的这一年,为何值得铭记?

2017年,苹果做AR眼镜的音讯频出,但是苹果不断没有正面回应。

几年前,苹果便曾经组建团队,努力于 AR 相关的项目开发。这支团队由 Mike Rockwell 率领,工程师曾经到达数百人,如今他们停止着一项代号为“T288”的软硬件项目。该团队的第一个产品便是 ARKit。显然,下一步的停顿便是AR眼镜。

关于苹果为何先推出手机AR,库克在10月承受《独立报》采访中答复到:“AR要了解世界需求少量的技术,目前的技术只能将AR运用于iPhone或iPad之类的先进设备中。假如将AR使用于其他设备上,那么你永远不会取得这样的商业时机,不会有1500万个设计者说我想借助AR释放我们的设计热情。”

手机AR可以协助苹果迅速在AR市场规划,同时,AR眼镜的技术还需求工夫来积聚。库克也说道:“好的视场技术和高质量的显示器都尚未呈现,”他说。像一切产品一样,苹果公司只会在保证质量的前提下进军新的范畴。“我们不在乎成为第一,但我们想成为最好,提供一流的用户体验,”库克说:“但如今可以在市场上随时都会看到的东西并不是令我们称心的产品,我也不以为绝大少数人会感到称心。”(延伸阅读: 苹果CEO蒂姆·库克:ARKit将和App Store一样成功 )

早在2011年,Google就推出Google Glass消费版本,虽然失败,但是目前Google Glass企业版本在工业使用上很受欢送。2012年推出的HoloLens依托其弱小的SLAM技术也曾经斩获不少工业使用协作同伴。国际外其他小厂也曾经发布数款AR眼镜。苹果在AR眼镜上没有抢到先机,目前似乎只能采取稳妥的规划。

11月彭博社的一篇文章终于让我们看清楚了苹果在AR眼镜上的停顿,包括其显示、芯片、操作零碎、使用商店等。最振奋人心的是,彭博社泄漏苹果的目的是在2019年储藏好AR眼镜技术,产品无望最早在2020年发货。

苹果做AR眼镜仍然也很苹果。苹果正在本人研发 AR 头显的芯片。从概念下去说,这款芯片会跟苹果手表的芯片一样,集成度十分高。这样的芯片能把更多的元器件,比方说图形处置器、AI 芯片、CPU 等,集中在一小块区域,耗能也将增加。操作零碎方面,苹果外部将其称为“rOS”(reality operating system),基于 iOS 零碎。好像 Apple TV 的操作零碎是 tvOS,Mac 电脑的操作零碎是 macOS,Apple Watch 的操作零碎是 watchOS 一样,rOS 将是苹果 AR 头显的操作零碎。AR 头显也会运用已有的 APP Store,可以像 iPhone、Watch、Apple TV 和 Mac 一样,用户能本人下载内容。(延伸阅读: 揭秘苹果AR眼镜:独立芯片、rOS零碎,2020年发货 )

苹果的AR眼镜令人等待,惋惜Magic Leap抢先在2017年底发布了其Magic Leap One发明者版本。这款让大家等候6年之久的AR眼镜终于浮出水面。官方引见Magic Leap One具有数字光场、视觉感知、耐久显示、声场音效、高功能芯片、下一代交互界面。从Magic Leap One协作的使用我们看到,其AR使用曾经开端改动音乐、游戏、社交等多个范畴。Magic Leap的光场显示和场景了解才能可以说是目前AR技术的前沿,这些技术能否让库克称心,苹果的AR能超越Magic Leap One吗?这很值得等待。 (延伸阅读: 耗时6年,总融资近19亿美金,外媒《滚石》万字长文揭秘AR眼镜 Magic Leap One(上) )

总结

AR/VR被视为是下一代的计算平台、新的人机交互界面。各大巨头都在规划VR/AR,在AR上,苹果并没有抢占任何先机。而往年ARKit的推出,着实让人感到冷艳。凭仗本身闭合的软件和硬件消费链,苹果让6亿iPhone设备霎时拥有AR功用,不计其数开发者应用ARKit可以直接开发AR内容,群众不必购置任何新的设备就能体验AR。

ARKit改动了AR根底技术和AR使用市场的全体格式,安慰了2017年AR的全体开展,使得2017成为AR开展关键的一年,也成为苹果押注AR的关键一年。

当AR真正如智能手机普通成为我们生活必不可少的一局部,回头看,2017年会是值得留念的一年。

2017回顾:苹果做AR的这一年,为何值得铭记?