AR的殺手級設(shè)備是什么？蘋果：沒眼鏡啥事 就是iPhone

11月22日，很多傳言宣稱，在不久的將來，蘋果將推出一款增強(qiáng)現(xiàn)實（AR）或混合現(xiàn)實（MR）設(shè)備。盡管蘋果還沒有詳細(xì)討論過這款設(shè)備，但AR功能在iPhone上已經(jīng)變得十分活躍，而且正在迅速變得越來越好。

蘋果從2017年開始了AR之旅，憑借虛擬宜家家具和外觀逼真的戶外Pokemon Go大戰(zhàn)引起轟動。今年，美國資深科技編輯斯科特?斯泰恩(Scott Stein)利用蘋果新款iPhone 12 Pro掃描消防栓、繪制其住宅的內(nèi)部地圖，并在屋內(nèi)地板上導(dǎo)航如何渡過熔巖河。在許多方面，蘋果最新款iPhone和iPad上的深度傳感激光雷達(dá)傳感器，憑借其先進(jìn)的3D掃描功能，正成為未來蘋果AR設(shè)備的支柱。

Facebook、微軟和Magic Leap已經(jīng)在探索旨在融合虛擬和現(xiàn)實的護(hù)目鏡和眼鏡，未來將有更多使用高通芯片的VR設(shè)備問世。但蘋果AR主管邁克·羅克韋爾(Mike Rockwell)和AR高級產(chǎn)品經(jīng)理阿莉珊德拉·麥金尼斯(Alless Andra McGinnis)表示，蘋果目前的AR使命是讓人們口袋里已有的設(shè)備更好地運(yùn)行。從長遠(yuǎn)來看，將AR與真實世界的位置分層，自動彈出體驗，同時基于AR的能力開發(fā)創(chuàng)意工具和開發(fā)輔助技術(shù)，可能成為最大的殺手級應(yīng)用。

羅克韋爾說：“AR技術(shù)具有巨大的潛力，可以通過今天已有的設(shè)備和未來可能推出的設(shè)備來幫助人們，但我們必須確保它的成功。對我們來說，最好的辦法就是塑造我們的設(shè)備生態(tài)系統(tǒng)，讓人們投入自己的時間和精力，這是個健康而有利可圖的領(lǐng)域。”羅克韋爾和麥金尼斯還談到了現(xiàn)在和三年前有什么不同，以及為什么手機(jī)對未來如此重要。

蘋果殺手級AR應(yīng)用：智能手機(jī)

像Oculus Quest 2這樣的虛擬現(xiàn)實設(shè)備，雖然質(zhì)量不斷提高，但與智能手機(jī)相比，仍然沒有多少人使用。Moor Insights高級消費芯片分析師安謝爾·薩格（Anshel Sag）表示，除了索尼，沒有人真正談?wù)揤R頭盔的銷量。到目前為止，索尼已經(jīng)售出了500萬臺PlayStation VR頭盔，盡管Oculus Quest 2很有可能在第一年賣出500萬至600萬臺。但即便如此，這些VR頭盔使用的應(yīng)用程序通常會讓人感覺與我們?nèi)粘Ｊ褂玫氖謾C(jī)和電腦相去甚遠(yuǎn)。即使在Magic Leap和微軟HoloLens承諾即將呈現(xiàn)MR幾年后，AR設(shè)備仍然沒有大量存在。

羅克韋爾指出：“對于那些只使用VR技術(shù)，或者想要只使用AR技術(shù)體驗的開發(fā)者來說，這是一條非常艱難的道路。市場上并沒有那么多設(shè)備可用。但與此同時，蘋果自2017年以來擁有AR功能的iPhone和iPad數(shù)量高達(dá)數(shù)億部。即使你只吸引了相對較小比例的用戶，這仍然是個巨大的數(shù)字?！?/p>

蘋果表示，已經(jīng)有來自7000名開發(fā)者提供的1萬款支持AR的iOS應(yīng)用程序，其中許多應(yīng)用程序?qū)Ｗ⒂谫徫锘蚣揖友b修，以此作為在家中實際使用AR的一種方式。實用性正是蘋果目前似乎最看重的。羅克韋爾說：“我們想為開發(fā)者提供一個平臺和生態(tài)系統(tǒng)，他們可以在那里謀生?！?/p>

雖然新冠肺炎疫情已經(jīng)導(dǎo)致許多實體企業(yè)關(guān)閉，減緩了大多數(shù)人的出行速度，但使用AR工具進(jìn)行家居購物仍是蘋果目前關(guān)注的主要問題。就像谷歌和微軟正在尋求的方法一樣，使用基于手機(jī)的AR工具，你可能會在家里的手機(jī)上以3D掃描形式查看你可能想要購買的東西。蘋果與Safari瀏覽器的連接使彈出式AR購物看起來像是去商店購物的完美替身。

麥金尼斯援引Shopify and Build.com的數(shù)據(jù)指出：“家得寶發(fā)現(xiàn)，人們在AR上看到某款產(chǎn)品時，改用AR的可能性是其他人的兩到三倍。購買的可能性更大(94%)，回報率也更低（22%）?！?/p>

包括Adobe在內(nèi)的應(yīng)用開發(fā)商似乎對基于手機(jī)的AR也持同樣的看法。Adobe為蘋果iOS開發(fā)了AR創(chuàng)意應(yīng)用Aero。Adobe AR主管斯特凡諾·科拉扎(Stefano Corrazza)在談到公司為何除了從Oculus收購Medium之外還沒有探索頭盔創(chuàng)意工具時說：“頭盔已經(jīng)在我們的路線圖上了，它們還沒有達(dá)到讓我們有理由部署的臨界點。在蘋果或谷歌大規(guī)模推出產(chǎn)品之前，我們推出它沒有太大意義?！?/p>

與此同時，像售價999美元的新款iPhone 12 Pro這樣的智能手機(jī)可以成為主要的創(chuàng)意工具，為未來的AR設(shè)備添磚加瓦?？评f：“即使有了AR頭盔，所有的計算都會在手機(jī)上進(jìn)行，而且也可以流式傳輸?shù)姆绞竭B接到眼鏡上。”

這也是高通已經(jīng)在為未來的AR/VR設(shè)備打造的相同模式，但這可能需要數(shù)年時間。與此同時，智能手機(jī)將發(fā)揮更大作用?？评谡劦絠Phone 12 Pro時說：“在一段時間內(nèi)，它將是主要的消費設(shè)備，但也可以3D掃描內(nèi)容，它是一臺非常強(qiáng)大的機(jī)器?！盇dobe還沒有在Aero上使用3D掃描工具，但未來可能會探索加入這些功能的方法。

激光雷達(dá)作為創(chuàng)意工具向AR領(lǐng)域邁進(jìn)

蘋果進(jìn)軍AR領(lǐng)域的第一步，只是使用手機(jī)的運(yùn)動傳感器、陀螺儀和內(nèi)置攝像頭來識別樓層，然后它識別墻和人。具備激光雷達(dá)功能的iPhone和iPad則更進(jìn)一步，從后置攝像頭附近的一個小黑色圓圈隱形地噴射出一系列紅外激光，可以快速網(wǎng)格化(以3D方式繪制)房間的全景。

這也包括空間中的3D掃描對象和人。這是谷歌多年前通過一系列深度感應(yīng)Tango手機(jī)探索的技術(shù)的演變，但技術(shù)更先進(jìn)、范圍更廣泛。許多早期的激光雷達(dá)應(yīng)用，如Polycam、3D掃描儀和Record 3D都非常有創(chuàng)意，以3D捕捉為重點，與2017年令人驚嘆的、玩游戲的AR應(yīng)用相比，這是一個巨大的轉(zhuǎn)變。

羅克韋爾說：“這就是我們在設(shè)備上安裝掃描儀的部分原因。我們覺得這是一項關(guān)鍵技術(shù)，可以開啟3D掃描技術(shù)的爆炸式增長，可以用于各種用途。它還開啟了以某種方式開始掃描環(huán)境的可能性，并且能夠使創(chuàng)建3D對象變得更容易。”

互聯(lián)網(wǎng)上最大的3D對象存儲庫之一Sketchfab已經(jīng)看到了增長，盡管在此之前，它已經(jīng)在3D掃描方面進(jìn)行了多年的探索。Sketchfab的訂戶剛剛達(dá)到400萬，自2012年開始提供這項服務(wù)以來，它迎來了第一個盈利月份。

但正如Sketchfab首席執(zhí)行官阿爾班·德諾伊爾（Alban Denoyel）所說的那樣，他已經(jīng)經(jīng)歷了之前自己預(yù)計3D掃描物體會蓬勃發(fā)展的時期。2016年，當(dāng)VR頭盔和幾款谷歌3D掃描Tango手機(jī)首次亮相時，大肆炒作。然而，市場的采用并沒有發(fā)生，導(dǎo)致了德諾伊爾所說的“VR冬天”到來?，F(xiàn)在，這種情況可能開始好轉(zhuǎn)了。

Snapchat已經(jīng)在探索使用激光雷達(dá)實現(xiàn)AR效果，可以將虛擬物體放入現(xiàn)實世界，甚至還進(jìn)行了掃描整個城市街區(qū)的更大規(guī)模實驗。Snapchat攝像頭平臺副總裁埃坦·皮利普斯基(Eitan Pilipski)表示：“我們認(rèn)為深度是非常重要的。”

不過，即使有了這些可能性，學(xué)習(xí)使用這些新工具可能也會令人望而生畏。蘋果自己的AR創(chuàng)作工具Reality Composer和Adobe的3D AR創(chuàng)作工具包Aero，并不一定是人們馬上就能下載的應(yīng)用，甚至是他們回避的應(yīng)用。到目前為止，3D掃描應(yīng)用很吸引人，但也是實驗性的，而且并不總是直觀的。蘋果在很大程度上將3D掃描應(yīng)用程序的世界交到了開發(fā)者手中，而蘋果日常的核心iOS工具完全沒有整合這些功能。

蘋果在iOS范圍內(nèi)對3D掃描對象的支持確實表明，3D掃描對象最終可能會像PDF或照片一樣被分享。但在某些方面，未來的創(chuàng)造性工具還沒有完全存在。

拍照效果也可能帶來令人驚嘆的改進(jìn)，蘋果自己的攝像頭應(yīng)用程序使用iPhone 12 Pro的激光雷達(dá)來提高夜間拍照和肖像的對焦能力。但蘋果目前還沒有將AR技術(shù)集成到攝像頭應(yīng)用中，也不允許進(jìn)行任何3D掃描。這些想法留給開發(fā)者去探索。有些應(yīng)用程序，如DSLR Camera，已經(jīng)使用iPhone的激光雷達(dá)在照片數(shù)據(jù)上創(chuàng)建自定義的3D信息層，將3D文本分層到照片中。

DSLR Camera的創(chuàng)建者弗爾維奧·希基洛內(nèi)（Fulvio Scichilone）說：“這款應(yīng)用能夠計算出人和背景物體之間的分割，AR肖像畫的未來計劃是用陀螺儀或手指移動畫框?！?/p>

作為擴(kuò)展感官的AR以及可訪問性工具

蘋果認(rèn)為AR的殺手級應(yīng)用是可發(fā)現(xiàn)性，但在可訪問性方面還有另一個巨大的機(jī)遇。AR可以擴(kuò)展一個人的感官。在音頻領(lǐng)域，蘋果已經(jīng)將AirPods用作助聽器，F(xiàn)acebook也在探索用于輔助聽力的空間音頻技術(shù)。

同樣的情況也可能發(fā)生在輔助視力上。未來的助視產(chǎn)品，如Mojo Lens承諾的增強(qiáng)型隱形眼鏡，正致力于成為對視力受損的人有用的工具。蘋果可能會在iPhone上的AR以及未來的設(shè)備作為輔助工具的工作方式上走類似的道路。IOS 14.2中已經(jīng)有了新的人類檢測功能，它使用蘋果的AR和激光雷達(dá)來識別人與人之間的距離，并在新款iPhone上用它來輔助視覺。

這可能只是個開始。羅克韋爾說：“我們可以做的事情還有很多，特別是與我們對周圍環(huán)境的理解有關(guān)。我們可以辨認(rèn)人，但如果你想一想，人類對環(huán)境的理解程度，沒有理由不能讓一臺設(shè)備最終也具備這種程度的理解，并將其提供給開發(fā)者。”麥金尼斯補(bǔ)充說：“我們將與盲人和弱視社區(qū)合作，特別是在人類的探測方面進(jìn)行改進(jìn)?！?/p>

AR未來的殺手級優(yōu)勢：即時性

盡管有些人始終在使用AR，但在日常生活中使用iPhone或iPad時，他們經(jīng)常會忘記尋找新的AR應(yīng)用。當(dāng)我們在現(xiàn)實世界中忙碌時，發(fā)現(xiàn)虛擬世界中的新事物并不是一個無縫的過程。

羅克韋爾認(rèn)為iPhone AR的未來不是應(yīng)用程序，而是快速瀏覽功能。他解釋說：“你每天要打開手機(jī)多次來做各種事情，這些都是輕量級的體驗。真正的殺手級應(yīng)用是，它將一直以這些微妙的方式被定期使用，幫助你做你現(xiàn)在做的事情，讓你的工作變得更容易、更快。”

實現(xiàn)這一目標(biāo)的途徑包括App Clips，這是蘋果在iOS 14中推出小型微應(yīng)用的新方式，無需下載任何東西就能在iPhone上運(yùn)行。App Clips可以由現(xiàn)實世界中放置的NFC標(biāo)簽或可掃描代碼觸發(fā)，它還涉及蘋果的地圖繪制工作。蘋果新推出的Location Anchors意味著虛擬AR對象可以存在于現(xiàn)實生活中的地點，比如在時代廣場看到一件虛擬藝術(shù)品，并與多人同時共享。

羅克韋爾在談到Location Anchors時說：“如果它位于我們擁有高分辨率地圖的地區(qū)之一，這在美國是相當(dāng)多的。如果它在一米之內(nèi)，你就可以體驗到這一點。”他承諾，Location Anchors的精確度將高于全球定位系統(tǒng)(GPS)。同時，在現(xiàn)實世界中，由特定二維碼或Location Anchors觸發(fā)的App Clips精確度可以達(dá)到厘米級。

對于蘋果的AR技術(shù)來說，這兩項工作仍在進(jìn)行中：在疫情導(dǎo)致封鎖期間，人們可能不太可能出現(xiàn)這種基于位置的AR技術(shù)出現(xiàn)在公共場所、商店或博物館。但蘋果認(rèn)為，對于每天使用AR的人來說，它們是至關(guān)重要的。羅克韋爾說：“我們知道我們必須解決這些問題，才能讓AR成為主流體驗，我認(rèn)為我們正處在讓AR成為人們?nèi)粘Ｉ钜徊糠值倪吘?。?/p>

Acute Art公司首席執(zhí)行官雅各布·德蓋爾（Jacob De Geer）說：“我的看法是，App Clips和Location Anchors將產(chǎn)生巨大的不同。”Acute Art是一款已經(jīng)在現(xiàn)實世界舉辦AR展覽的應(yīng)用程序，但目前人們找到這件藝術(shù)品的挑戰(zhàn)之一是需要知道它的存在。德蓋爾稱：“現(xiàn)在的主要問題是：你怎么才能讓人們下載你的應(yīng)用呢？這不僅是AR領(lǐng)域的問題，也是現(xiàn)在所有科技領(lǐng)域的問題?！?/p>

麥金尼斯說：“我們經(jīng)常聽說人們在使用AR應(yīng)用，卻不知道它們是什么?！彼傅氖俏直取づ量?Warby Parker)的即時AR眼鏡試戴等流行iPhone工具。他稱：“隨著AR變得越來越主流，你是否知道它是AR并不重要。重要的是你在你的設(shè)備上有一種令人驚嘆的體驗?！?/p>

現(xiàn)在為將來打好基礎(chǔ)

結(jié)合蘋果基于激光雷達(dá)的3D掃描功能，越來越強(qiáng)大視覺效果的AR工具，再加上AirPod Pro引入的空間音頻技術(shù)（可以讓你正在聽的東西聽起來就像在3D空間中移動一樣），不難想象未來蘋果AR頭盔的樣子。

蘋果對此不予置評。但與此同時，該公司正在努力鼓勵大批開發(fā)者開發(fā)支持AR的應(yīng)用程序。無論其AR設(shè)備是否會在短期內(nèi)面世，更具空間意識的iPhone和iPad都將把手機(jī)轉(zhuǎn)變?yōu)槭澜鐠呙柙O(shè)備。或者甚至可能用于機(jī)器人技術(shù)，或者在意想不到的地方用作計算機(jī)視覺攝像頭。

羅克韋爾說:“這些東西最初是很微妙的，你必須具備所有的元素才能讓它們成功。幾年之后，它將成為一種你會記不起沒有它的生活方式，就像互聯(lián)網(wǎng)一樣。你會覺得：‘哇，我經(jīng)常用這個’，它最終將融入我們的生活?！?/p>