盡管傳聞不斷,但蘋果的首款MR(混合現(xiàn)實(shí))頭戴顯示器仍未讓外界窺及真容。
北京時(shí)間6月7日凌晨,蘋果WWDC2022如約而至。在長(zhǎng)達(dá)兩個(gè)小時(shí)的主題演講中,蘋果先后介紹了iOS 16、WatchOS 9、macOS 13、iPadOS 16四大系統(tǒng)的功能更新,并亮相了搭載全新M2芯片的MacBook Air和Macbook Pro,而近期呼聲甚高的MR頭顯,蘋果并沒(méi)有在本屆大會(huì)上泄露任何信息。
不過(guò),MR產(chǎn)品的缺席也并沒(méi)有讓人深感意外。此前彭博社的報(bào)道中就指出蘋果的首款MR產(chǎn)品目前的散熱問(wèn)題尚未解決,可能要在2023年才會(huì)問(wèn)世。況且,作為一場(chǎng)屬于開發(fā)者的盛會(huì),蘋果過(guò)去也鮮有在WWDC上發(fā)布革命性硬件產(chǎn)品的先例。
但還是那個(gè)問(wèn)題,都已經(jīng)2022年了,蘋果真的對(duì)“元宇宙”概念無(wú)動(dòng)于衷嗎?自Meta扯起這面大旗后,上至圣何塞,下至華強(qiáng)北,不插足元宇宙領(lǐng)域,根本不好意思說(shuō)自己是科技企業(yè),過(guò)去幾年有關(guān)蘋果關(guān)于行業(yè)的消息,也大多都是未經(jīng)證實(shí)的傳聞。
蘋果當(dāng)然不會(huì)坐以待斃,證據(jù)就是本次iOS系統(tǒng)上的多項(xiàng)功能及組件升級(jí),處處展現(xiàn)著元宇宙的影子。
這種描述可能并不準(zhǔn)確,因?yàn)閹?kù)克曾不止一次在公開場(chǎng)合表示,“不要講什么元宇宙,各方顯然有不同的叫法,但我會(huì)遠(yuǎn)離流行詞語(yǔ)”,而從蘋果近期的動(dòng)作來(lái)看,庫(kù)克的野心也顯然不是“元宇宙”能夠滿足的。
“iOS舞劍,意在MR?”
事實(shí)表明,想要對(duì)蘋果發(fā)布會(huì)做出預(yù)判真的不易。
此前業(yè)內(nèi)普遍猜測(cè)iOS 16上會(huì)搭載息屏顯示功能并沒(méi)有發(fā)布,取而代之的是全新的鎖屏自定義功能,現(xiàn)在用戶可以在iPhone上給鎖屏界面的照片像添加濾鏡一樣改變鎖屏界面的顏色風(fēng)格,同時(shí)也可以通過(guò)添加小組件的來(lái)豐富鎖屏界面的信息。
實(shí)事求是地說(shuō),這是一項(xiàng)被安卓陣營(yíng)玩透的功能,但從實(shí)際效果來(lái)看,iOS 16鎖屏界面上展現(xiàn)出字體更像是背景圖像的一部分,而非簡(jiǎn)單的疊加。這項(xiàng)功能可能與此前iOS相機(jī)更新的一項(xiàng)技術(shù)有關(guān)——它可以在人像模式下借助AI勾勒出身體輪廓,并在模糊背景的同時(shí)讓人像保持對(duì)焦。
那么這個(gè)鎖屏功能和元宇宙有什么關(guān)系呢?在回答這一問(wèn)題之前,我們需要厘清蘋果一直強(qiáng)調(diào)的“混合現(xiàn)實(shí)”的概念。
不同于VR的完全虛擬的概念,也不同于AR為現(xiàn)實(shí)場(chǎng)景添加虛擬信息的概念,MR強(qiáng)調(diào)的是將使用者所處的物理環(huán)境部分或全部數(shù)字化,這就要求系統(tǒng)能夠讓真實(shí)世界與虛擬信息混合在一起且不失真,而iOS 16上鎖屏界面就像是這一功能的“平面演示版本”。
除此之外,iOS 16上還推出了一項(xiàng)“一鍵摳圖”功能,使用者只要長(zhǎng)按圖像信息中的主體,系統(tǒng)就會(huì)自動(dòng)提取出主體的輪廓并生成圖片,并通過(guò)拖放在各個(gè)APP間轉(zhuǎn)發(fā)。
當(dāng)然,這項(xiàng)“傻瓜摳圖”功能并不能作為MR的關(guān)聯(lián)技術(shù)來(lái)使用,但蘋果曾在去年5月申請(qǐng)過(guò)一項(xiàng)專利,該專利用于渲染不同細(xì)節(jié)的模擬現(xiàn)實(shí)圖像,其中就涵蓋了提取畸變空間中的圖像處理方法。
在混合現(xiàn)實(shí)的應(yīng)用場(chǎng)景下,這些技術(shù)可以實(shí)時(shí)提取當(dāng)前環(huán)境下的人像或物體信息,并融合在其他現(xiàn)實(shí)場(chǎng)景中。
而另一項(xiàng)相對(duì)實(shí)用的功能則更好地展現(xiàn)出了混合現(xiàn)實(shí)的應(yīng)用。在iOS 15上,用戶可以通過(guò)相機(jī)識(shí)別、提取圖片中的文字,到了本代系統(tǒng),用戶可以直接在視頻暫停的任何一幀畫面中進(jìn)行文本操作,比如翻譯,或是實(shí)時(shí)的匯率換算,這十分符合混合現(xiàn)實(shí)最基本的設(shè)計(jì)理念——在現(xiàn)實(shí)世界、虛擬世界和用戶之間搭起一個(gè)交互反饋的信息回路。
如果說(shuō)以上功能升級(jí),都不能直接說(shuō)明蘋果是在為AR/MR產(chǎn)品做出準(zhǔn)備,那么針對(duì)AirPods的技術(shù)升級(jí),則完全無(wú)法解釋的通了,因?yàn)檫@項(xiàng)技術(shù)幾乎就是為AR/MR頭戴顯示器量身定制的。
在iOS 16 中,AirPods 的使用者可以利用 iPhone 的深感攝像頭來(lái)創(chuàng)建個(gè)性化的“空間音頻檔案”,從而實(shí)現(xiàn)更準(zhǔn)確和具有沉浸式的聽覺(jué)體驗(yàn),簡(jiǎn)單地說(shuō)就是基于算法來(lái)實(shí)現(xiàn)三維動(dòng)態(tài)頭部追蹤,讓聲音環(huán)繞在使用者的周圍,為音樂(lè)和視頻營(yíng)造三維空間效果。
但在大多數(shù)應(yīng)用場(chǎng)景下,人們?cè)诼犚魳?lè)時(shí)根本不會(huì)進(jìn)行頻繁的頭部運(yùn)動(dòng)(除了蹦迪),那么這項(xiàng)技術(shù)顯然不適用于手機(jī),或者說(shuō)是目前蘋果所有的硬件終端產(chǎn)品線。
最合理的解釋,這項(xiàng)技術(shù)是為AR/MR產(chǎn)品的前期技術(shù)儲(chǔ)備。
蘋果的野心有多大?
在今年5月的最后一天,有開發(fā)者在蘋果APP store上傳日志和開源代碼中,意外發(fā)現(xiàn)了對(duì)“realityOS”的引用,雖然蘋果在消息曝出后的第一時(shí)間刪除了這個(gè)提交,但蘋果的首款XR(VR、AR、MR的合稱)操作系統(tǒng)算是正式坐實(shí)了。
現(xiàn)在的問(wèn)題是,蘋果的首款XR產(chǎn)品會(huì)以什么樣的形式出現(xiàn)?
首先排除的就是行業(yè)內(nèi)現(xiàn)階段最普及的VR頭顯,因?yàn)檫@類產(chǎn)品高度依賴于元宇宙概念,而不符合庫(kù)克對(duì)XR產(chǎn)品的規(guī)劃。
早在今年1月初,彭博社的Mark Gurman就曾表示過(guò),“如果蘋果在發(fā)布第一款頭顯時(shí)說(shuō)出‘元宇宙’一詞,我會(huì)非常震驚!边@位蘋果知名爆料人士稱,在蘋果內(nèi)部“元宇宙”基本屬于禁詞。
這倒不是庫(kù)克有多么鄙視Meta提出的概念,而是蘋果的基本盤決定了這家公司不可能去依附現(xiàn)有的行業(yè)生態(tài)。長(zhǎng)久以來(lái),蘋果在消費(fèi)電子領(lǐng)域中都堅(jiān)持兩項(xiàng)準(zhǔn)則,其一是對(duì)硬件產(chǎn)業(yè)鏈的掌控,其二是通過(guò)多端口構(gòu)建閉源生態(tài)。
而且目前XR最受人詬病的一點(diǎn)就是貧瘠的內(nèi)容生態(tài),而由于APP store能為開發(fā)者提供持續(xù)且穩(wěn)定的高收入,蘋果數(shù)以千萬(wàn)計(jì)的開發(fā)者甚至都不會(huì)允許蘋果在XR賽道中開發(fā)委身于Meta的“元宇宙”。
那如果不去做VR和“元宇宙”,蘋果只能投身于AR或是MR賽道,某種程度上,兩者的技術(shù)路徑是相通的,而且蘋果已經(jīng)積攢了足夠多的開發(fā)工具和技術(shù)儲(chǔ)備。早在2017年的WWDC上,蘋果就已發(fā)布了支持Unity、Unreal引擎的AR軟件開發(fā)工具ARKit。而在去年的WWDC上,蘋果已經(jīng)將這一工具更新到了ARKit 5,同時(shí)還發(fā)布了AR Maps、Object Capture、RealityKit 2等新功能。
在今年3月美國(guó)專利商標(biāo)局公布的專利名單中,蘋果申請(qǐng)的一項(xiàng)授權(quán)專利更是表明蘋果可能繞過(guò)AR,直接推出MR產(chǎn)品。
根據(jù)專利場(chǎng)景設(shè)想描述。在系統(tǒng)的支持下,醫(yī)生可以直接在頭顯中實(shí)時(shí)接收到另一家醫(yī)院病人的腦部掃描圖像,并可以改變圖像的視角和信息,這與混合現(xiàn)實(shí)的定義已十分接近。
圖片來(lái)源:Patenly Apple
值得一提的是,蘋果的監(jiān)管機(jī)構(gòu)Patently Apple已經(jīng)報(bào)告了蘋果為MR設(shè)計(jì)申請(qǐng)的超過(guò)349項(xiàng)專利。其中關(guān)鍵專利包括實(shí)時(shí) 3D (RT3D)空間音頻系統(tǒng)、面部生物識(shí)別技術(shù)、3D飛行時(shí)間(ToF) 模塊、獨(dú)特的 MR用戶界面以及適用于惡劣照明條件的精確增強(qiáng)現(xiàn)實(shí) (AR)顯示器等。
資深蘋果分析師郭明錤此前公布的蘋果研發(fā)報(bào)告為我們展示出了這款產(chǎn)品更多的細(xì)節(jié):根據(jù)郭明錤的描述,蘋果首款MR頭顯將采用一體式設(shè)計(jì),但并沒(méi)有為其開發(fā)游戲手柄,交互方式是使用手勢(shì)追蹤,硬件方面則是依托指環(huán),或夾在手指間的輕量化設(shè)備。
圖片來(lái)源:Patently Apple
《The Information》發(fā)布的另一份報(bào)告稱,蘋果首款MR設(shè)備內(nèi)置了14個(gè)攝像頭,這些傳感器將能夠完成捕捉外部環(huán)境,面部表情,身體動(dòng)作等,同時(shí)完成VST透視,定位等等一系列工作。
這14枚攝像頭組成的環(huán)境捕捉系統(tǒng)也展現(xiàn)了MR產(chǎn)品相較于VR產(chǎn)品做大的優(yōu)勢(shì):能夠讓用戶之間形成情感紐帶。
我們不妨回顧一下斯皮爾伯格導(dǎo)演的大作《頭號(hào)玩家》,這部電影對(duì)虛擬現(xiàn)實(shí)世界進(jìn)行了深入的刻畫描寫,但影片中有一個(gè)很大的Bug:VR頭顯是無(wú)法及時(shí)反映出用戶面目表情和身體動(dòng)作的,而MR頭顯則可以很好地解決這一問(wèn)題。
當(dāng)然,因?yàn)樵谶@一過(guò)程中會(huì)涉及到大量圖像信息,蘋果不得不額外定制一顆芯片來(lái)處理圖像信息,據(jù)悉該芯片代號(hào)Bora,將與代號(hào)Staten的主處理器協(xié)同工作。但新的問(wèn)題也接踵而至,Bora芯片和主芯片通訊配合會(huì)增加延遲,這進(jìn)一步加大導(dǎo)致視覺(jué)不適的可能性。
為此,蘋果唯一的方法就是再做一套流媒體的編解碼方案解決這一問(wèn)題,但這無(wú)疑會(huì)進(jìn)一步增加成本,根據(jù)彭博社的測(cè)算,蘋果的首款MR產(chǎn)品售價(jià)可能高達(dá)2000-3000美元,這顯然不是普通消費(fèi)者能負(fù)擔(dān)得起的。
盡管成本高昂,而且發(fā)布時(shí)間屢次延后,但這反而符合蘋果的一貫常態(tài),畢竟從音樂(lè)播放器,再到智能手機(jī),蘋果似乎很少以行業(yè)開創(chuàng)者的形象示人,但卻能一次又一次地引爆新的產(chǎn)業(yè)革命。