盡管傳聞不斷，但蘋果的首款MR（混合現(xiàn)實(shí)）頭戴顯示器仍未讓外界窺及真容。
北京時(shí)間6月7日凌晨，蘋果WWDC2022如約而至。在長達(dá)兩個(gè)小時(shí)的主題演講中，蘋果先后介紹了iOS 16、WatchOS 9、macOS 13、iPadOS 16四大系統(tǒng)的功能更新，并亮相了搭載全新M2芯片的MacBook Air和Macbook Pro，而近期呼聲甚高的MR頭顯，蘋果并沒有在本屆大會(huì)上泄露任何信息。
不過，MR產(chǎn)品的缺席也并沒有讓人深感意外。此前彭博社的報(bào)道中就指出蘋果的首款MR產(chǎn)品目前的散熱問題尚未解決，可能要在2023年才會(huì)問世。況且，作為一場屬于開發(fā)者的盛會(huì)，蘋果過去也鮮有在WWDC上發(fā)布革命性硬件產(chǎn)品的先例。
但還是那個(gè)問題，都已經(jīng)2022年了，蘋果真的對“元宇宙”概念無動(dòng)于衷嗎？自Meta扯起這面大旗后，上至圣何塞，下至華強(qiáng)北，不插足元宇宙領(lǐng)域，根本不好意思說自己是科技企業(yè)，過去幾年有關(guān)蘋果關(guān)于行業(yè)的消息，也大多都是未經(jīng)證實(shí)的傳聞。
蘋果當(dāng)然不會(huì)坐以待斃，證據(jù)就是本次iOS系統(tǒng)上的多項(xiàng)功能及組件升級，處處展現(xiàn)著元宇宙的影子。
這種描述可能并不準(zhǔn)確，因?yàn)閹炜嗽恢挂淮卧诠_場合表示，“不要講什么元宇宙，各方顯然有不同的叫法，但我會(huì)遠(yuǎn)離流行詞語”，而從蘋果近期的動(dòng)作來看，庫克的野心也顯然不是“元宇宙”能夠滿足的。
“iOS舞劍，意在MR？”
事實(shí)表明，想要對蘋果發(fā)布會(huì)做出預(yù)判真的不易。
此前業(yè)內(nèi)普遍猜測iOS 16上會(huì)搭載息屏顯示功能并沒有發(fā)布，取而代之的是全新的鎖屏自定義功能，現(xiàn)在用戶可以在iPhone上給鎖屏界面的照片像添加濾鏡一樣改變鎖屏界面的顏色風(fēng)格，同時(shí)也可以通過添加小組件的來豐富鎖屏界面的信息。
實(shí)事求是地說，這是一項(xiàng)被安卓陣營玩透的功能，但從實(shí)際效果來看，iOS 16鎖屏界面上展現(xiàn)出字體更像是背景圖像的一部分，而非簡單的疊加。這項(xiàng)功能可能與此前iOS相機(jī)更新的一項(xiàng)技術(shù)有關(guān)——它可以在人像模式下借助AI勾勒出身體輪廓，并在模糊背景的同時(shí)讓人像保持對焦。
那么這個(gè)鎖屏功能和元宇宙有什么關(guān)系呢？在回答這一問題之前，我們需要厘清蘋果一直強(qiáng)調(diào)的“混合現(xiàn)實(shí)”的概念。
不同于VR的完全虛擬的概念，也不同于AR為現(xiàn)實(shí)場景添加虛擬信息的概念，MR強(qiáng)調(diào)的是將使用者所處的物理環(huán)境部分或全部數(shù)字化，這就要求系統(tǒng)能夠讓真實(shí)世界與虛擬信息混合在一起且不失真，而iOS 16上鎖屏界面就像是這一功能的“平面演示版本”。
除此之外，iOS 16上還推出了一項(xiàng)“一鍵摳圖”功能，使用者只要長按圖像信息中的主體，系統(tǒng)就會(huì)自動(dòng)提取出主體的輪廓并生成圖片，并通過拖放在各個(gè)APP間轉(zhuǎn)發(fā)。
當(dāng)然，這項(xiàng)“傻瓜摳圖”功能并不能作為MR的關(guān)聯(lián)技術(shù)來使用，但蘋果曾在去年5月申請過一項(xiàng)專利，該專利用于渲染不同細(xì)節(jié)的模擬現(xiàn)實(shí)圖像，其中就涵蓋了提取畸變空間中的圖像處理方法。
在混合現(xiàn)實(shí)的應(yīng)用場景下，這些技術(shù)可以實(shí)時(shí)提取當(dāng)前環(huán)境下的人像或物體信息，并融合在其他現(xiàn)實(shí)場景中。
而另一項(xiàng)相對實(shí)用的功能則更好地展現(xiàn)出了混合現(xiàn)實(shí)的應(yīng)用。在iOS 15上，用戶可以通過相機(jī)識別、提取圖片中的文字，到了本代系統(tǒng)，用戶可以直接在視頻暫停的任何一幀畫面中進(jìn)行文本操作，比如翻譯，或是實(shí)時(shí)的匯率換算，這十分符合混合現(xiàn)實(shí)最基本的設(shè)計(jì)理念——在現(xiàn)實(shí)世界、虛擬世界和用戶之間搭起一個(gè)交互反饋的信息回路。
如果說以上功能升級，都不能直接說明蘋果是在為AR/MR產(chǎn)品做出準(zhǔn)備，那么針對AirPods的技術(shù)升級，則完全無法解釋的通了，因?yàn)檫@項(xiàng)技術(shù)幾乎就是為AR/MR頭戴顯示器量身定制的。
在iOS 16 中，AirPods 的使用者可以利用 iPhone 的深感攝像頭來創(chuàng)建個(gè)性化的“空間音頻檔案”，從而實(shí)現(xiàn)更準(zhǔn)確和具有沉浸式的聽覺體驗(yàn)，簡單地說就是基于算法來實(shí)現(xiàn)三維動(dòng)態(tài)頭部追蹤，讓聲音環(huán)繞在使用者的周圍，為音樂和視頻營造三維空間效果。
但在大多數(shù)應(yīng)用場景下，人們在聽音樂時(shí)根本不會(huì)進(jìn)行頻繁的頭部運(yùn)動(dòng)（除了蹦迪），那么這項(xiàng)技術(shù)顯然不適用于手機(jī)，或者說是目前蘋果所有的硬件終端產(chǎn)品線。
最合理的解釋，這項(xiàng)技術(shù)是為AR/MR產(chǎn)品的前期技術(shù)儲(chǔ)備。
蘋果的野心有多大？
在今年5月的最后一天，有開發(fā)者在蘋果APP store上傳日志和開源代碼中，意外發(fā)現(xiàn)了對“realityOS”的引用，雖然蘋果在消息曝出后的第一時(shí)間刪除了這個(gè)提交，但蘋果的首款XR（VR、AR、MR的合稱）操作系統(tǒng)算是正式坐實(shí)了。
現(xiàn)在的問題是，蘋果的首款XR產(chǎn)品會(huì)以什么樣的形式出現(xiàn)？
首先排除的就是行業(yè)內(nèi)現(xiàn)階段最普及的VR頭顯，因?yàn)檫@類產(chǎn)品高度依賴于元宇宙概念，而不符合庫克對XR產(chǎn)品的規(guī)劃。
早在今年1月初，彭博社的Mark Gurman就曾表示過，“如果蘋果在發(fā)布第一款頭顯時(shí)說出‘元宇宙’一詞，我會(huì)非常震驚�！边@位蘋果知名爆料人士稱，在蘋果內(nèi)部“元宇宙”基本屬于禁詞。
這倒不是庫克有多么鄙視Meta提出的概念，而是蘋果的基本盤決定了這家公司不可能去依附現(xiàn)有的行業(yè)生態(tài)。長久以來，蘋果在消費(fèi)電子領(lǐng)域中都堅(jiān)持兩項(xiàng)準(zhǔn)則，其一是對硬件產(chǎn)業(yè)鏈的掌控，其二是通過多端口構(gòu)建閉源生態(tài)。
而且目前XR最受人詬病的一點(diǎn)就是貧瘠的內(nèi)容生態(tài)，而由于APP store能為開發(fā)者提供持續(xù)且穩(wěn)定的高收入，蘋果數(shù)以千萬計(jì)的開發(fā)者甚至都不會(huì)允許蘋果在XR賽道中開發(fā)委身于Meta的“元宇宙”。
那如果不去做VR和“元宇宙”，蘋果只能投身于AR或是MR賽道，某種程度上，兩者的技術(shù)路徑是相通的，而且蘋果已經(jīng)積攢了足夠多的開發(fā)工具和技術(shù)儲(chǔ)備。早在2017年的WWDC上，蘋果就已發(fā)布了支持Unity、Unreal引擎的AR軟件開發(fā)工具ARKit。而在去年的WWDC上，蘋果已經(jīng)將這一工具更新到了ARKit 5，同時(shí)還發(fā)布了AR Maps、Object Capture、RealityKit 2等新功能。
在今年3月美國專利商標(biāo)局公布的專利名單中，蘋果申請的一項(xiàng)授權(quán)專利更是表明蘋果可能繞過AR，直接推出MR產(chǎn)品。
根據(jù)專利場景設(shè)想描述。在系統(tǒng)的支持下，醫(yī)生可以直接在頭顯中實(shí)時(shí)接收到另一家醫(yī)院病人的腦部掃描圖像，并可以改變圖像的視角和信息，這與混合現(xiàn)實(shí)的定義已十分接近。
圖片來源：Patenly Apple
值得一提的是，蘋果的監(jiān)管機(jī)構(gòu)Patently Apple已經(jīng)報(bào)告了蘋果為MR設(shè)計(jì)申請的超過349項(xiàng)專利。其中關(guān)鍵專利包括實(shí)時(shí) 3D （RT3D）空間音頻系統(tǒng)、面部生物識別技術(shù)、3D飛行時(shí)間（ToF） 模塊、獨(dú)特的 MR用戶界面以及適用于惡劣照明條件的精確增強(qiáng)現(xiàn)實(shí) （AR）顯示器等。
資深蘋果分析師郭明錤此前公布的蘋果研發(fā)報(bào)告為我們展示出了這款產(chǎn)品更多的細(xì)節(jié)：根據(jù)郭明錤的描述，蘋果首款MR頭顯將采用一體式設(shè)計(jì)，但并沒有為其開發(fā)游戲手柄，交互方式是使用手勢追蹤，硬件方面則是依托指環(huán)，或夾在手指間的輕量化設(shè)備。
圖片來源：Patently Apple
《The Information》發(fā)布的另一份報(bào)告稱，蘋果首款MR設(shè)備內(nèi)置了14個(gè)攝像頭，這些傳感器將能夠完成捕捉外部環(huán)境，面部表情，身體動(dòng)作等，同時(shí)完成VST透視，定位等等一系列工作。
這14枚攝像頭組成的環(huán)境捕捉系統(tǒng)也展現(xiàn)了MR產(chǎn)品相較于VR產(chǎn)品做大的優(yōu)勢：能夠讓用戶之間形成情感紐帶。
我們不妨回顧一下斯皮爾伯格導(dǎo)演的大作《頭號玩家》，這部電影對虛擬現(xiàn)實(shí)世界進(jìn)行了深入的刻畫描寫，但影片中有一個(gè)很大的Bug：VR頭顯是無法及時(shí)反映出用戶面目表情和身體動(dòng)作的，而MR頭顯則可以很好地解決這一問題。
當(dāng)然，因?yàn)樵谶@一過程中會(huì)涉及到大量圖像信息，蘋果不得不額外定制一顆芯片來處理圖像信息，據(jù)悉該芯片代號Bora，將與代號Staten的主處理器協(xié)同工作。但新的問題也接踵而至，Bora芯片和主芯片通訊配合會(huì)增加延遲，這進(jìn)一步加大導(dǎo)致視覺不適的可能性。
為此，蘋果唯一的方法就是再做一套流媒體的編解碼方案解決這一問題，但這無疑會(huì)進(jìn)一步增加成本，根據(jù)彭博社的測算，蘋果的首款MR產(chǎn)品售價(jià)可能高達(dá)2000-3000美元，這顯然不是普通消費(fèi)者能負(fù)擔(dān)得起的。
盡管成本高昂，而且發(fā)布時(shí)間屢次延后，但這反而符合蘋果的一貫常態(tài)，畢竟從音樂播放器，再到智能手機(jī)，蘋果似乎很少以行業(yè)開創(chuàng)者的形象示人，但卻能一次又一次地引爆新的產(chǎn)業(yè)革命。
