谁说解散AR团队？苹果曝光混合现实耳机新专利，可追踪完整面部表情

苹果公司已为一款复杂的混合现实耳机申请了专利，这款耳机可能包括追踪用户面部特征、眼睛和手的传感器。《Variety》杂志今天早些时候报道了这项专利申请;该报告上周发布，最初于2019年3月提交。这是苹果一系列混合(或增强)现实技术专利的一部分，而且与之前的专利一样，这表明苹果正在广泛研究的AR从手机转向眼镜。

这项“带有传感器的显示系统”专利包括一个头戴式显示器、一系列摄像头和其他跟踪外部环境的传感器，以及另一组跟踪佩戴者眼睛的传感器。这些组件一起工作，以显示基于现实世界的虚拟3D图像。除此之外，还有许多潜在的变化。这款耳机可以包括手部传感器、“头部姿态传感器”、捕捉真实世界光照条件详细信息的传感器、“眉毛传感器”和跟踪嘴巴和下巴运动的“下颌传感器”。

正如《Variety》所说，苹果描述了一个不同于大多数AR眼镜的系统，通常会投射出部分图像，仍然让你看到真实世界。该系统至少有一种变体使用了透传视频，摄像头捕捉视频反馈，然后耳机将数字对象合成到视频上，并将生成的图像显示在类似VR的屏幕上。这与CNET早些时候的一份报告相符。该报告称，苹果正在测试一款VR/AR混合耳机。然而，这项专利是开放式的，这只是众多选择之一。

同时，眉毛和下颚传感器对于将苹果的Animoji和Memoji头像移植到耳机中非常有用。 我们知道，苹果的竞争对手Facebook已在构建可以跟踪面部表情并将其转换为虚拟化身的VR头戴式耳机。手部跟踪是VR和AR一个成熟的控制选项，尽管它仍然不是任何主要设备的主要选项。

像往常一样，我们不知道苹果是否正在基于这些专利构建产品。《电子时报》本月特别声称苹果已暂停其AR眼镜计划，尽管该传言仍未得到其他消息来源的证实，并且有理由怀疑苹果正在放弃AR眼镜。 然而，苹果公司也没有公开谈论戴眼镜的计划。 它主要是为了推广其基于手机的ARKit平台。

苹果神秘的增强和虚拟现实项目

基于专利申请，苹果已经在虚拟现实和增强现实技术方面进行了超过10年的探索，但随着ARKit的推出，虚拟和增强现实普及，苹果公司的涉猎日益深入，可能实际的专用AR/VR产品在不远的将来到来。

据传，苹果公司有一个秘密的研究部门，由数百名员工组成，专门研究AR和VR技术，探索这些新兴技术在未来苹果产品中的应用。VR/AR领域的招聘活动不断增加，苹果收购了多家虚拟现实/增强现实公司，这都表明苹果在正酝酿着什么。

据传苹果公司正在研究多种虚拟和增强现实耳机原型，因为工程师正在为这种设备寻找“最引人注目的应用”。

《电子时报》在2019年7月发布的一份报告显示，苹果暂时停止了其AR/VR耳机的开发。 该媒体表示，开发该技术的团队已于5月解散，并重新分配给其他产品。

由于《电子时报》的报告迄今尚未得到其他消息来源的支持，目前还不清楚苹果在AR/VR耳机上的进展。

AR智能眼镜

除了有关一款功能强大的AR/VR耳机的传言外，还有传言称将开发增强现实智能眼镜。目前还不清楚增AR智能眼镜和AR/VR耳机是同一个项目还是两个不同的项目。

有传闻称，苹果的增强现实项目是“智能眼镜”或“增强现实耳机”，与上述完整的AR/VR耳机有所不同，但也有可能是苹果的AR项目演变了，或者是最初的智能眼镜传闻中漏掉了一些元素。这两个项目都使用代码名T288，但这似乎是几个AR/VR原型的统一代码名。

知名苹果分析师郭明錤认为，苹果的增强现实智能眼镜将在2019年末至2020年第二季度之间推出，并将作为iPhone配件使用。郭明錤表示，这款眼镜将在无线传输计算、网络和定位到iPhone，扮演一个显示屏的角色。

将眼镜设计为iPhone配套设备可以让苹果保持纤薄轻巧，因为不需要内置处理器。

彭博社此前表示，苹果正在开发一款专注于AR的产品，该产品具有专用显示器，内置处理器和新的“rOS”或现实操作系统。据说rOS基于iOS，即在iPhone上运行的操作系统。对于AR耳机，苹果正在开发一种类似于Apple Watch中的“系统封装”芯片。

至于操作手势，苹果正在考虑触摸板、语音激活和头部手势，从地图到短信的一系列应用程序正在进行原型设计。虚拟会议室和360度视频回放也是正在探索的概念。

彭博社表示，苹果的目标是在2019年之前完成增强现实耳机的研发工作，最终产品最早可能在2020年上市。

一个强大的AR/VR头戴式耳机

根据最新的传闻，苹果公司正在开发一款功能强大的AR / VR耳机，与市场上的其他产品不同。据说它可以为每只眼睛配备一个8K显示器，可以与电脑或智能手机相连，还可以与虚拟和增强现实应用程序兼容。

这款耳机将使用一种名为60GHz WiGig的高速短程无线技术，连接到一个“专用盒子”，而不是依赖与智能手机或电脑的连接。这个盒子将由一个定制的5纳米苹果处理器供电，“比目前任何可用的处理器都要强大。”目前，这个盒子看起来像一个PC基站，但它“不会是一台真正的Mac电脑”。

要使用这款耳机，用户无需在房间内安装特殊摄像头即可检测其位置，就像使用一些可用的VR耳机一样。所有这些技术都将内置于耳机和盒子中。

据说苹果计划在2020年推出这款AR/VR耳机，但该公司的计划可能会推迟或报废。

其他传言

2017年11月，苹果收购了Vrvana，这是一家开发名为Totem的混合现实耳机的公司。 Vrvana的技术可能会用于未来的苹果耳机。苹果收购了Akonia Holographics之后，又收购了Vrvana，后者是一家为AR智能眼镜生产镜片的公司。

有传言称，苹果公司可以将其增强现实研究纳入其正在进行的汽车项目，作为车载软件系统的一部分，该系统可能包括抬头显示器或其他功能。

苹果首席执行官蒂姆·库克对AR/VR的评论

最近，苹果首席执行官蒂姆·库克表示，目前，目前还没有一种技术可以“以高质量的方式”创造出一副增强现实智能眼镜。

“但今天我可以告诉你，技术本身并不存在以高质量的方式做到这一点。所需的显示技术，以及在你的脸上放置足够的东西 – 都面临着巨大的挑战。”他说。但是，显示器本身的质量尚不成熟。库克确实补充说，“然而，大多数技术挑战都可以解决，但需要时间。”

苹果公司的高管们很少分享有关虚拟现实的信息，但在2017年9月ARKit发布之前的几个月里，苹果公司首席执行官蒂姆·库克多次称赞AR的优点和好处。

“AR可能真的很棒。”他在2016年表示，“我们已经在这方面进行了大量投资，并将继续下去。从长远来看，我们对增强现实很有信心。”库克表示，他相信AR将使iPhone变得更加重要。“我认为增强现实是巨大而深刻的。这是我们将回顾的巨大事物之一，并为它的开始感到惊叹。”他说。

根据库克的说法，增强现实应该鼓励而不是取代人与人的接触，它不应该成为“障碍”。库克说，“人类接触是无可替代的。”

谈到AR和VR，库克认为AR是“两者中较大的一个”，因为它允许人们在使用这项技术时“非常真实”。他认为对虚拟现实感兴趣的人会更少，但他承认，虚拟现实在教育和游戏方面有着有趣的用例。

库克说AR是一个“像智能手机这样的大创意”，相当于一个适合所有人的产品。“我认为AR是那么大，它是巨大的。我很兴奋，因为可以做的事情可以改善很多人的生活。”他在2017年初说。

AR与VR

增强现实(AR)和虚拟现实(VR)是类似的技术，但它们之间存在重大差异，它们的潜在应用差异很大。虚拟现实指的是虚拟世界中的完全沉浸式体验，而增强现实指的是对现实世界的修改后的视图。

通过两个产品(一个AR和一个VR)之间的比较可以最好地总结差异。谷歌玻璃，谷歌现已解散的智能眼镜，是增强现实的一个例子。戴眼镜的谷歌眼镜让用户可以直观地观看世界，但它提供了一个抬头显示器，它覆盖了相关的计算机提供的信息，包括当地的天气，地图和通知。

这一差异或许可以通过AR和VR两款产品的对比来最好地总结出来。Google Glass是增强现实的一个例子。戴在眼睛上的Google Glass可以让用户看到真实的世界，但它提供了一个平视显示器，将计算机提供的相关信息覆盖在真实的世界视图之上，比如当地天气、地图和通知。

这类似于苹果所说的“智能眼镜”或增强现实耳机。

相比之下，Facebook的Oculus Rift是一款虚拟现实耳机，提供身临其境的视觉体验，不会通过额外的感官信息增强现实世界，它是完全取代现实世界的模拟世界。

增强现实技术为我们提供了计算机生成的环境和关于我们周围世界的信息，同时允许我们与周围环境进行交互，而虚拟现实技术的设计目的是将我们与周围环境隔离开来，这样我们就可以与虚拟世界进行交互。

两者的潜在应用有很大不同。虚拟现实特别注重沉浸式的内容消费，因为它让佩戴者感到，他们通过视觉、触觉和音频反馈，实际上正在体验模拟世界中发生的事情。目前，虚拟现实主要与游戏相关，但它也有潜力为教育或培训目的重建真实世界的体验。

增强现实并不依赖于身临其境的内容，由于它是在增强现实而不是取代现实，所以不那么令人兴奋，但它有更广泛的潜在应用。事实上，由于ARKit的存在，增强现实应用程序和游戏在iOS 11中已经随处可见。

使用ARKit，iOS设备能够像表格一样识别信息，然后可以将虚拟对象添加到其中。由于iPhone和iPad的计算能力，ARKit的增强现实功能令人印象深刻。 ARKit已经被用于创建大量的应用和游戏，将数字对象与现实世界融为一体。

苹果可能会瞄准一款兼容增强和虚拟现实的产品，最近有传言称AR/VR耳机可通过Wi-Fi连接到具有功能强大处理器的类似PC的盒子。这样的产品可以用于严肃的虚拟现实应用以及增强现实体验。

在macOS High Sierra中，苹果在Metal 2中引入了VR，并与Valve、Unity和Unreal合作，为VR带来了VR创建工具，这可能暗示某种未来的硬件。至少，苹果的最新Mac和即将推出的iMac Pro将支持现有的虚拟现实硬件和VR内容创建。

凯基证券分析师郭明錤认为，苹果公司的AirPods及其传闻中的高端耳罩式耳机是苹果人工智能和增强现实野心的未来。他相信这两款音频设备将补充苹果传闻中的增强现实眼镜。

苹果的VR/AR团队

苹果公司在虚拟和增强现实方面的工作可以追溯到多年前，但从2015年3月开始就有传言称，苹果有一个小团队在从事增强现实方面的工作。2015年至2016年初，随着苹果公司雇佣了精通AR/VR技术的员工，并进行了多项相关收购，苹果的团队不断壮大。

苹果的AR/VR团队包括来自苹果各地的数百名工程师，他们都是虚拟现实和增强现实方面的专家。这个团队在库比蒂诺和森尼韦尔的办公园区工作，苹果正在探索几个代号为“T288”的硬件和软件项目。

苹果的增强现实团队结合了“其硬件和软件老手的优势”，由来自杜比的迈克•洛克威尔(Mike Rockwell)领导。Oculus、HoloLens、亚马逊(来自VR团队)、3D动画公司Weta Digital和卢卡斯影业等公司的前雇员都在苹果从事AR方面的工作。

苹果开发人员还加入了WebVR社区组，致力于在任何设备和Web上查看VR内容。

招聘

苹果公司最著名的AR/VR员工之一是计算机科学教授Doug Bowman，他曾是弗吉尼亚理工大学人机交互中心的负责人。Bowman专注于三维用户界面设计，并撰写了一本关于3D界面和沉浸式虚拟环境优势的书籍。他拥有虚拟和增强现实方面的专业知识。

苹果还聘请了在微软和Lytro从事过虚拟或增强现实产品的员工。据说最近招聘的一些人来自微软的HoloLens团队，而另一些人则在Lytro工作，Lytro是一家致力于将真人动作和计算机图形融为一体的真人VR体验相机的公司。来自HoloLens团队的员工将拥有创建高级增强现实耳机的经验。

Zeyu Li是Magic Leap(一家开发头戴式AR/VR显示器的初创公司)的首席计算机视觉工程师，目前正在苹果工作，担任“高级计算机视觉算法工程师”。

Yury Petrov是Facebook旗下Oculus的前研究科学家，现在担任苹果的“研究科学家”。根据他的LinkedIn个人资料，Petrov研究了虚拟现实体验、原型光学，并开发了计算机模拟软件。

增强现实专家Jeff Norris于2017年4月加入苹果，担任该公司增强现实团队的高级经理。 Norris在NASA创立了Mission Operations Innovation Office和JPL Ops Lab。他领导了多个专注于人机交互的项目，重点是虚拟和增强现实。

2018年5月，苹果请来了Sterling Crispin，他为移动VR耳机开发了一款绘画应用程序。 “Cyber​​ Paint”让VR耳机佩戴者在Oculus Go、Daydream、GearVR和Vive Focus上创建2D 260度图片。 Crispin的LinkedIn页面称他正在担任“原型研究员”，暗示他加入了传闻中正在研究VR/AR耳机技术的团队。

2018年12月，苹果公司聘请了前特斯拉和微软HoloLens高级设计师安德鲁·金，考虑到他的经历，他可能会参与传闻中的苹果AR眼镜项目，或者即将推出的据说正在开发中的苹果汽车。

Jaunt VR创始人Arthur van Hoff于2019年4月加入苹果担任高级架构师。加入苹果之前，他的公司创建了VR硬件，包括价值10万美元的3D VR相机Jaunt One。在van Hoff离开公司之前，Jaunt失败了，转而投身AR体验。

由于苹果的团队拥有数百名员工，因此还有许多其他虚拟现实专家的招聘工作已经引起了人们的关注。在LinkedIn上，苹果拥有多名具有虚拟现实体验的软件工程师，但目前还不清楚他们是否为AR/VR秘密团队工作。

收购事项

苹果AR/VR团队的许多成员可能是通过收购加入了公司。自2015年以来，苹果已经收购了几家创建AR / VR相关产品的公司，其中一些AR / VR收购甚至可以追溯到几年前。

Akonia Holographics

苹果于2018年8月收购了Akonia Holographics，这是一家为增强现实眼镜制造镜片的初创公司。 Akonia Holographics宣称，推出“世界上第一个可用于智能眼镜透明显示元件的体积全息反射和波导光学。”

据称，它所制造的显示器使用该公司的HoloMirror技术实现“超清晰，全彩色性能”，以实现“世界上最薄，最轻的头戴式显示器”。

Vrvana

2017年11月，苹果收购了Vrvana，这是一家开发名为Totem的混合现实耳机的公司。 Totem从未向公众发布，其设计初衷是将增强现实技术和虚拟现实技术结合在一个头盔中，将完整的VR功能与直通摄像头结合起来，实现基于屏幕的增强现实功能。

Totem基本上使用一组摄像头将真实世界的图像投射到其内置的1440p OLED显示屏中，这种独特的方法使其与微软的HoloLens等竞争产品区别开来，后者使用透明显示屏来结合虚拟和增强现实。苹果可能计划在未来的产品中使用Totem的一些技术。

PrimeSense

苹果于2013年收购了以色列3D人体感应公司PrimeSense，引发市场猜测基于动作的功能将应用在Apple TV中。 PrimeSense的3D深度技术和动作感应功能在微软最初的Kinect平台中使用。

PrimeSense使用近红外光将不可见光投射到房间或场景中，然后由CMOS图像传感器读取，以创建物体或人的虚拟图像。这使得基于动作的控件可用于软件界面，但它也能够执行诸如测量虚拟对象和提供相对距离或大小的操作，这对于增强现实应用程序(如交互式游戏，室内地图等)非常有用。PrimeSense技术还可以为人和物体创建高度精确的360度扫描，这对虚拟现实应用非常有用。

Metaio

2015年5月，苹果收购了增强现实初创公司Metaio。Metaio开发了一款名为Metaio Creator的产品，可以在几分钟内创建增强现实场景。在被苹果收购之前，Metaio的软件曾被法拉利等公司使用，后者创建了一个增强现实展厅。

Metaio技术也被用于柏林，允许参观柏林墙的人们使用智能手机或平板电脑看看柏林墙仍然存在时该区域的样子。 Metaio的技术可以用于在像Maps这样的苹果应用程序中，实现增强现实功能。

Faceshift

苹果于2015年8月收购了Faceshift，标志着其在2015年第二次增强现实收购活动。在被苹果收购之前，Faceshift与游戏和动画工作室合作开发了一种技术，旨在使用3D传感器快速准确地捕捉面部表情，将其实时地转换为动画面孔。Faceshift还致力于以消费者为导向的产品，让人们可以在Skype中实时将他们的脸变成卡通或怪物脸。

Faceshift的技术具有广泛的可能用例，苹果似乎在iPhone X中的Animoji上使用该功。

Emotient

Emotient是一家建立面部表情分析工具的公司，于2016年1月被苹果收购。Emotient的技术使用人工智能和机器学习来解读人类情感，广告商在现实世界中使用这些功能来确定广告的情绪反应。

苹果可以用Emotient做很多事情，从照片应用程序中更好的面部检测到分析苹果零售店中的客户感受，再到解锁iOS设备，但它也有潜在的AR / VR用途。与Faceshift一样，Emotient的技术可用于分析和转换面部表情，用于创建虚拟化身，对社交媒体和游戏非常有用。 Animoji可能会使用Emotient技术。

Flyby Media

Flyby Media于2016年初购买，是另一家致力于增强现实的公司。 Flyby创建了一个应用程序，可与谷歌配备3D传感器的“Project Tango”智能手机配合使用，允许将消息附加到真实世界的对象上，其他人可以用谷歌的一款设备查看信息。

例如，一个人可以“扫描”像旧金山金门大桥这样的地标并写下附加的信息。稍后访问桥梁的人将能够使用Flyby应用程序扫描桥梁以查看消息。 Flyby应用程序吸引苹果的注意力在于，它能够识别和理解扫描的不同对象，苹果可以在照片和地图等应用程序中以多种方式使用这项技术。

RealFace

2017年2月，苹果收购了RealFace，这是一家专门从事面部识别技术的网络安全和机器学习公司，未来有可能用于增强现实功能。

RealFace开发了面部识别技术，将人工智能集成到无摩擦人脸识别中。 Realface技术很可能用于iPhone X，这是苹果首款具有Face ID形式的面部识别功能的智能手机。

竞争对手

苹果的几家竞争对手正在开发虚拟现实或增强现实项目，这可能是苹果再次对此事感兴趣的另一个因素。许多竞争对手的科技公司已经推出了VR/AR产品，或者正计划在不久的将来推出，使得开发领先于苹果可能正在开发的产品。

Facebook —— Oculus

Oculus Rift是首批面向消费者的虚拟现实耳机之一。它于2016年3月底发布，定价为599美元。 Oculus Rift于2013年在Kickstarter上首次亮相，从那时起一直在开发中，吸引了大量关注，并将虚拟现实带入了聚光灯下。

Oculus Rift佩戴在头部，每只眼睛都有两个1080 x 1200分辨率的OLED面板，两者都具有90Hz的刷新率，可实现沉浸式视觉体验，不会出现运动模糊或波动。它包括一个游戏手柄，用于跟踪用户头部位置的外部红外跟踪传感器，以及可通过传感器在3D空间中跟踪的可选Oculus Touch运动控制器。

Oculus Rift受到一些技术限制。它不是一个独立的设备，需要连接到配备强大GPU的Windows PC，并且它针对的是游戏市场。必须使用Oculus SDK专门为Oculus Rift创建软件。 Oculus表示它无法将Rift带到Mac上，因为苹果没有优先考虑高端GPU。目前的Mac不支持Oculus Rift。

Oculus Rift用户也可以观看传统电影和360度视频，并且正在开发面向社交的应用程序，因为Oculus现在归Facebook所有。在虚拟世界中，人们可以进行社交互动，这是Oculus Rift等设备具有巨大消费潜力的领域之一。

Facebook于2018年5月推出了Oculus Go，这是一款价值199美元的虚拟现实耳机，可以独立运行，无需连接智能手机或电脑。

在设计上，Oculus Go看起来和Oculus Rift很像。这是一款VR头盔，可以戴在眼睛上，并通过可调节的肩带和透气面料连接到头部。它是一个独立的设备，这意味着不需要连接到电脑或游戏系统来运行。

Oculus Go配备5.5英寸显示屏，分辨率为2560 x 1440(每只眼睛1280 x 1140)，高通骁龙821处理器和内置空间音频驱动程序。它附带了1,000多个可用的应用程序。

微软——HoloLens

微软的HoloLens与Google Glass相似，戴着一副类似于护目镜的头戴式眼镜。 HoloLens结合了立体3D显示器，空间声音，麦克风阵列，摄像机以及加速度计、陀螺仪和磁力计等传感器。它运行Windows全息操作系统，允许人们通过手势、眼球运动和语音与HoloLens进行交互。

HoloLens结合了虚拟和增强现实，创建了微软称为“全息图”的虚拟对象，可以与现实世界的对象一起查看和操作。微软已经为HoloLens展示了多个用例，包括Skype的互动版本，增强现实第一人称射击游戏，《我的世界》的增强现实版本，用于创建3D打印对象的3D建模应用程序，以及人体解剖课程。

微软的HoloLens因其混合虚拟现实和增强现实的方式吸引了大量关注，超越了典型的增强现实应用，但又没有失去现实世界互动的好处。

微软还开发了Windows混合现实平台，该平台本质上是面向开发人员和硬件制造商的虚拟现实平台。微软已与宏碁、戴尔、惠普、联想和三星合作为该设备制造耳机，目前有一系列产品，起价329美元。

三星为Windows混合现实开发了价值499美元的HMD Odyssey耳机，提供高分辨率3.5英寸AMOLED双显示屏，110度视野，内置AKG耳机，360度空间声音，营造身临其境的体验。

谷歌 —— Cardboard

谷歌Cardboard是一个非常简单的虚拟现实实现，围绕现有智能手机构建Cardboard查看器。鉴于其简单性，谷歌Cardboard不太可能是苹果公司会效仿的产品，但它确实提高了可以与iPhone一起使用的配件的可能性，以实现虚拟现实体验。

谷歌Cardboard耳机采用低成本组件构建，需要兼容的应用程序才能将iPhone的显示屏分成两部分，以创建立体3D图像。作为一个开放平台，谷歌Cardboard已被多家公司用于构建具有3D体验和游戏的应用程序。其他功能包括用于拍摄360度照片的摄影应用程序，以及一个供学生进行虚拟实地考察的教育组件。

据说谷歌正在开发第二代Cardboard耳机，以及完全独立的虚拟现实耳机，其设计与Oculus Rift类似，但无需连接到计算机。

其他产品

PlayStation VR，与Oculus Rift类似，带有完整的头戴式显示器，可与PlayStation 4游戏机配合使用。 PS VR包括一个1920 x 1080 120fps OLED显示屏，具有宽阔的事业，立体3D和头部跟踪功能。它于2016年秋季发布。

Samsung Gear VR，与Oculus合作开发，类似于Google Cardboard，采用三星Galaxy Note 5，Galaxy S6、Galaxy S6 Edge作为显示器和处理器。它包括定制传感器和高视场镜头，使其比简单的Google Cardboard更精确。

HTC Vive，是HTC与Valve合作开发的头戴式显示器。与Oculus Rift和PlayStation VR一样，它主要针对游戏玩家，并与Steam平台合作。它包括1080 x 1200 90Hz显示器， 70多种不同的传感器。通过附带的基站，它可以检测人的移动以避免障碍物碰撞。

AR/VR专利

苹果已经申请了多项与虚拟现实耳机直接相关的专利，这些专利都可以追溯到几年前。尽管技术可能已经在一定程度上超越了这些，但它们提供了一个有趣的视角来审视苹果过去探索的理念。

2008年的一项专利申请涉及一个相当基本的“个人显示系统”，旨在模仿观看视频时在电影院中的体验。

第二项专利描述了具有“激光引擎”的“头戴式显示系统”，其将图像投影到佩戴在眼睛上的透明玻璃显示器上，类似于眼镜。在这种配置中，耳机连接到诸如iPod的手持视频播放器以提供处理能力。

最初于2008年提交的第三项专利在设计上类似，涵盖了一种类似护目镜的视频耳机，旨在让用户观看电影和其他内容。它概述了两个可调节的光学模块，与用户的眼睛对齐，可以提供视力校正并允许观看3D内容。 苹果将此描述为提供个人媒体观看体验。

2008年的第四项专利涉及类似于Google Glass的视频耳机框架，允许用户将其iPhone或iPod滑入耳机以提供视频。这款耳机被描述为一种增强现实产品，可让用户在观看视频或查看电子邮件的同时注意周围环境。

除了与耳机相关的专利外，苹果还申请了专利，描述了可以在其设备中实现虚拟和增强现实功能的其他方式。例如，在2009年的一项专利申请中，覆盖了配备摄像头的3D显示器，可以根据用户的相对位置改变视角。

这样的显示器将检测头部移动，允许用户移动他们的头部，从不同角度观看3D图像，同时还结合用户环境的元素。

2010年和2012年的专利描述了使用运动传感器为基于增强现实技术的iOS设备创建3D界面。苹果公司将界面描述为一个“虚拟房间”，通过内置传感器或手势操纵设备的方向来导航。

2011年，苹果在地图应用程序中提交了一项增强现实功能专利，该功能与将距离映射到著名的地标有关。通过摄像头，用户可以查看它们周围的区域，并获得两点之间距离的实时估计以及相关信息的叠加。

2014年提交并于2017年授予的专利涵盖了移动增强现实系统，该系统能够检测环境中的物体，并通过使用相机、屏幕和用户界面将其覆盖有虚拟信息。 苹果将该系统描述为头戴式显示器的理想选择，但它也表明它可用于智能手机。

苹果一直致力于可以在自动驾驶汽车中使用的虚拟现实技术。几项苹果专利描述了一种系统，包括一个车载虚拟现实系统，配有VR耳机，可以提供娱乐，并减轻车辆行驶时阅读和工作等任务引起的晕车。

上市日期

苹果在“智能眼镜”和虚拟现实耳机方面的工作仍处于原型阶段，因此可能还需要数年时间才能推出一款产品。苹果经常会创造出一些永远不会变成实际产品的原型，因此如果公司不认为这是一个值得进入的市场，或者它可以更简单地实施，那么它的虚拟现实和增强现实工作就有可能被搁置。

然而，苹果公司目前的目标是到2019年完成增强或虚拟现实产品的生产，最终产品可能会在2020年上市。苹果公司的时间表据称“非常有野心”，但可能会改变。