Apple多年來(lái)一直致力于AR眼鏡 iOS 13只是最新的標(biāo)志

在WWDC 2019主題演講中，Apple花時(shí)間展示了它為ARKit 3帶來(lái)的一些最新功能，ARKit 3是該公司的框架，允許開(kāi)發(fā)人員為其應(yīng)用添加增強(qiáng)現(xiàn)實(shí)功能。作為iOS 13的一部分而增加的將使Apple的AR努力達(dá)到一個(gè)新的水平，更接近用戶(hù)期望的理想技術(shù)形式。

然而，就目前而言，Apple生態(tài)系統(tǒng)中的AR仍然局限于iPhone和iPad，這在用戶(hù)體驗(yàn)方面并不理想。使用耳機(jī)的AR版本可以提供效果，而不需要人們?cè)谝苿?dòng)設(shè)備上保持和查看有限的窗口，這可能是該技術(shù)的完美形式，并且Apple繼續(xù)更接近創(chuàng)建每一個(gè)對(duì)平臺(tái)的改進(jìn)。

iOS 13中的ARKit 3

主題演講強(qiáng)調(diào)了迄今為止AR體驗(yàn)中缺少的一些元素，這些元素通過(guò)早期的ARKit版本實(shí)現(xiàn)。在ARKit 3下，進(jìn)行了許多更改以使其更具身臨其境，并使開(kāi)發(fā)人員能夠在其應(yīng)用程序中提供更多功能。

ARKit 3的一個(gè)關(guān)鍵組件是人物遮擋，其中iOS設(shè)備檢測(cè)到有人站在AR增強(qiáng)的場(chǎng)景中間。ARKit 3不是用數(shù)字對(duì)象平直地覆蓋攝像機(jī)視圖，而是可以檢測(cè)到被人與用戶(hù)之間的距離，如果它們理論上比數(shù)字對(duì)象更近，可以改變疊加以使對(duì)象看起來(lái)更像在人的背后。

該技術(shù)還可以實(shí)現(xiàn)綠屏風(fēng)格效果，通過(guò)應(yīng)用程序查看的主題可以看起來(lái)在完全數(shù)字化的環(huán)境中行走，而不需要色度鍵背景。

Apple還增加了動(dòng)作捕捉功能，可以在應(yīng)用程序中實(shí)時(shí)分析和解釋主題的動(dòng)作。將主體劃分為簡(jiǎn)單的骨架，可以確定并監(jiān)視關(guān)節(jié)和骨骼的變化，這些運(yùn)動(dòng)能夠觸發(fā)動(dòng)畫(huà)或者被記錄以用于自定義的角色移動(dòng)。

跟蹤變化也會(huì)影響ARKit Face Tracking，后者已經(jīng)利用現(xiàn)代iPhone和iPad Pro型號(hào)上的TrueDepth相機(jī)來(lái)分析用戶(hù)的臉部，例如Memoji和Snapchat。在ARKit 3中，面部跟蹤已經(jīng)擴(kuò)展，允許它同時(shí)處理多達(dá)三個(gè)面部。

另一個(gè)關(guān)鍵組件是用戶(hù)在同一AR環(huán)境中相互協(xié)作的能力。通過(guò)讓人們?cè)趩蝹€(gè)會(huì)話(huà)中看到相同的項(xiàng)目和環(huán)境，這可以使多人游戲和協(xié)作工作在多人之間的AR中進(jìn)行，從而實(shí)現(xiàn)社交元素到AR體驗(yàn)。

ARKit 3中還引入的其他變化是能夠同時(shí)使用前后攝像頭跟蹤用戶(hù)的臉部和世界，同時(shí)檢測(cè)多達(dá)100個(gè)圖像，自動(dòng)估計(jì)物理圖像大小，更強(qiáng)大的3D對(duì)象檢測(cè)，并通過(guò)機(jī)器學(xué)習(xí)改進(jìn)平面檢測(cè)。

Apple正在進(jìn)行的工作

除ARKit公告外，專(zhuān)利是蘋(píng)果AR眼鏡工作的第二個(gè)證據(jù)來(lái)源。

雖然Apple不打算在未來(lái)的產(chǎn)品和服務(wù)中使用其在專(zhuān)利商標(biāo)局提交的創(chuàng)意，但這些文件至少表明Apple以前對(duì)研發(fā)工作感興趣的領(lǐng)域。

AR耳機(jī)的一個(gè)關(guān)鍵元素是顯示器，因?yàn)榭焖夙憫?yīng)時(shí)間對(duì)于創(chuàng)建虛擬和真實(shí)場(chǎng)景組合的完美錯(cuò)覺(jué)至關(guān)重要。2016年12月和2017年1月的標(biāo)題為“具有多種掃描模式的顯示器”的專(zhuān)利申請(qǐng)描述了顯示器的電路如何僅為每次刷新而不是整個(gè)顯示器更新顯示器的部分部分，以便最小化偽像出現(xiàn)在高位的可能性。分辨率和高刷新率屏幕。

僅更新屏幕的一部分還可以減少顯示器執(zhí)行每次刷新的工作量，從而縮短刷新周期并提高整體屏幕更新速率。更快的更新還可以幫助減少某些用戶(hù)的暈動(dòng)病，其中顯示器的更新速度不足以匹配用戶(hù)頭部的物理移動(dòng)。

正如2017年提交的“預(yù)測(cè)性，虛擬虛擬現(xiàn)實(shí)系統(tǒng)”一樣，高速渲染世界的能力也可以幫助預(yù)防惡心和暈動(dòng)病。由具有多攝像頭設(shè)置的耳機(jī)組成，硬件將以低分辨率和高分辨率拍攝世界的照片，其中較高的部分向用戶(hù)顯示他們的眼睛在顯示器上看，而較低的部分填充外圍，

2016年“具有世界和用戶(hù)傳感器的顯示系統(tǒng)”使用耳機(jī)外部和內(nèi)部的攝像頭來(lái)跟蹤環(huán)境和用戶(hù)的眼睛，表情和手勢(shì)，從而能夠創(chuàng)建和交互一種形式的增強(qiáng)現(xiàn)實(shí)圖像。

眼動(dòng)追蹤在專(zhuān)利申請(qǐng)中也占有重要地位，其中包括2019年5月用于確定眼優(yōu)勢(shì)的一項(xiàng)，以及2018年的其他一些提示實(shí)際上盡可能靠近用戶(hù)頭部進(jìn)行眼動(dòng)追蹤的方法。通過(guò)使跟蹤設(shè)備更靠近面部并使用諸如“熱鏡”之類(lèi)的物品來(lái)反射紅外光，更少的重量定位在遠(yuǎn)離用戶(hù)頭部的位置，從而產(chǎn)生更舒適的用戶(hù)體驗(yàn)。

在更實(shí)際的層面上，Apple還探索了AR眼鏡如何完美貼合在2019年使用各種調(diào)節(jié)系統(tǒng)，包括電動(dòng)收緊帶和充氣部分，以防止耳機(jī)一旦磨損就移動(dòng)。熱調(diào)節(jié)也被認(rèn)為是一個(gè)重要元素，不僅可以冷卻耳機(jī)內(nèi)部的硬件，還可以冷卻用戶(hù)的臉部。

Apple還考慮過(guò)如何創(chuàng)建一種智能眼鏡，而不是使用單獨(dú)的顯示器，只需將用戶(hù)的iPhone放在眼前。作為基于智能手機(jī)的簡(jiǎn)單VR耳機(jī)外殼的更先進(jìn)形式，Apple提出的“用于保持2017年便攜式電子設(shè)備的頭戴式顯示設(shè)備從一側(cè)滑動(dòng)iPhone，包括一個(gè)攝像頭和外部按鈕，內(nèi)置 - 手機(jī)中的耳機(jī)和遙控器。

為了進(jìn)行互動(dòng)，Apple花了一些時(shí)間研究如何在VR和AR系統(tǒng)中使用力感應(yīng)手套。通過(guò)使用導(dǎo)電線(xiàn)和嵌入式傳感器，手套和其他服裝可以提供力感應(yīng)能力，可以觸發(fā)命令，讀取手勢(shì)，甚至計(jì)算與物理對(duì)象接觸的手指數(shù)量。

在申請(qǐng)方面，Apple的專(zhuān)利申請(qǐng)表明AR可用于乘車(chē)服務(wù)，智能眼鏡可讓客戶(hù)找到他們的乘車(chē)，反之亦然。對(duì)于導(dǎo)航，2019年的一項(xiàng)專(zhuān)利建議如何通過(guò)AR在真實(shí)世界的視圖中顯示興趣點(diǎn)，還可以擴(kuò)展其以建議房間中物品的位置，而不是顯著的地理特征。

蘋(píng)果創(chuàng)造某種智能眼鏡或AR耳機(jī)的想法已經(jīng)流傳了一段時(shí)間，并可能導(dǎo)致未來(lái)幾年硬件的發(fā)布。Loup Ventures的分析師Gene Munster在2018年建議蘋(píng)果可以在2021年末發(fā)布“Apple Glasses” ，可能在發(fā)布的第一年銷(xiāo)售多達(dá)1000萬(wàn)臺(tái)，每臺(tái)售價(jià)約為1300美元。

另一位蘋(píng)果長(zhǎng)期評(píng)論員郭明智最近提出，耳機(jī)可能會(huì)在2020年中期亮相，制造工作可能會(huì)在2019年底開(kāi)始。

至于所謂的眼鏡如何出現(xiàn)，Kuo建議他們可以采取行動(dòng)更多作為iPhone的顯示器執(zhí)行大部分處理。WiGig聯(lián)盟一個(gè)可以提供無(wú)線(xiàn)連接的60千兆赫無(wú)線(xiàn)網(wǎng)絡(luò)系統(tǒng)，也已經(jīng)為該設(shè)備以及8K分辨率的目鏡以及所謂的代號(hào)“ T288 ” 傾斜。

2017年泄露的安全報(bào)告中 出現(xiàn)了耳機(jī)開(kāi)發(fā)，在Apple的辦公室中，測(cè)試原型設(shè)備的人員需要“急救以外的醫(yī)療”。特別是與眼睛疼痛相關(guān)的傷害，這表明它正在測(cè)試視覺(jué)相關(guān)的東西，可能是某種形式的耳機(jī)。

據(jù)報(bào)道，蘋(píng)果公司還與技術(shù)供應(yīng)商就2019年在CES上收購(gòu)AR耳機(jī)組件進(jìn)行了交談，其中隱姓埋名的Apple員工正在訪問(wèn)波導(dǎo)硬件供應(yīng)商。

此外，還收購(gòu)了與AR和耳機(jī)生產(chǎn)密切相關(guān)的公司。2017年，Apple收購(gòu)了眼動(dòng)追蹤公司SensoMotoric Instruments2018年8月，它收購(gòu)了Akonia Holographics，這是一家專(zhuān)注于AR耳機(jī)專(zhuān)用鏡頭開(kāi)發(fā)的創(chuàng)業(yè)公司。