正在閱讀:

讓Siri打造“元宇宙”?蘋果MR頭顯內(nèi)容生態(tài)大起底

掃一掃下載界面新聞APP

讓Siri打造“元宇宙”?蘋果MR頭顯內(nèi)容生態(tài)大起底

還能這么玩?蘋果MR頭顯玩法大揭秘。

編譯 | 智東西 徐珊

編輯 | 云鵬

蘋果MR頭顯要來了——緊跟而來的,會是MR內(nèi)容生態(tài)爆發(fā)嗎?

8K顯示屏、64顆攝像頭、雙芯片設(shè)計(jì)......除了這些耳熟能詳?shù)奶O果MR頭顯硬件爆料信息外,近日彭博社和科技媒體The Information接連爆料蘋果在MR內(nèi)容生態(tài)的布局,并且揭露了其多個內(nèi)容“殺手锏”。

據(jù)悉,蘋果MR內(nèi)容開發(fā)項(xiàng)目主要由 個內(nèi)部代號為Z50的秘密團(tuán)隊(duì)承擔(dān),該團(tuán)隊(duì)大約有幾十人,其員工主要來 視頻、游戲等 業(yè)。并且,蘋果還在打造一款內(nèi)容開發(fā)工具,希望讓不懂編程的人也能通過Siri語音助手,構(gòu)建自己的MR軟件,并上線App Store。

▲網(wǎng)傳蘋果MR頭顯渲染圖

此外,據(jù)知名蘋果記者馬克·古曼(Mark Gurman)透露,蘋果不但將MR頭顯稱為“Reality Pro”,定價(jià)約為3000美元,而且還訂下了一百萬銷量的目標(biāo)。

作為消費(fèi)電子行業(yè)的領(lǐng)頭羊之一,蘋果常?!爸匦露x”一款產(chǎn)品。蘋果將MR頭顯定價(jià)3000美元的底氣從何而來?蘋果將如何補(bǔ)上MR頭顯內(nèi)容的不足,令其在“元宇宙”賽道中能夠脫穎而出?蘋果又將如何達(dá)成百萬銷量目標(biāo)?從最新爆料中,我們挖到了蘋果MR頭顯除硬件參數(shù)之外,又一大秘密武器:MR內(nèi)容生態(tài)布局。在這里,蘋果將用一些新的玩法和技術(shù)創(chuàng)新,試圖重新帶動整個VR/AR行業(yè)。

01.打造“空氣鍵盤”?蘋果MR頭顯四大功能秀翻全場

在蘋果MR頭顯登場之前,市面上已有不少頭顯類產(chǎn)品嶄露頭角。這其中有拿下千萬臺出貨量的Quest 2,有針對高端市場的Quest Pro,更不用提國內(nèi)PICO 4、奇遇MIX等各類新品頭顯接連亮相。

這意味著如果要和現(xiàn)有的頭顯產(chǎn)品拉開差距,蘋果勢必要打出自己的產(chǎn)品特色,又或是拿出更好的體驗(yàn)吸引用戶。近期的爆料信息,正好揭曉了蘋果MR頭顯的四大看點(diǎn):一鍵切換VR/AR模式、眼動追蹤及手部追蹤功能、視頻會議功能以及作為外接生產(chǎn)力工具。

1、一鍵切換VR/AR模式:簡潔操作、平滑切換

據(jù)知情人士透露,蘋果MR頭顯將會有兩種模式:完全沉浸在虛擬世界(VR模式)和將虛擬世界疊加到現(xiàn)實(shí)世界兩種模式(AR模式)。而用戶想要切換從VR模式切換到AR模式時,只需要“轉(zhuǎn)動”特定按鍵,沉浸式的數(shù)字世界將會逐漸淡出,用戶將會逐漸被真實(shí)環(huán)境包圍,就像轉(zhuǎn)動手表表冠按鍵一樣。

此前,蘋果分析師郭明錤曾在推特上分析該功能將成為蘋果MR頭顯的關(guān)鍵亮點(diǎn)之一。他認(rèn)為一個真正的MR頭顯不但能支持AR和VR的硬件,而且還應(yīng)該支持整合AR和VR兩種模式,并可以在兩個不同的場景中順利切換。

▲郭明錤推特原文

同時,他也說道:“可能很多人都比較難想象在AR和VR之間的平滑切換能提供什么樣的體驗(yàn),因此在AR和VR之間干凈、簡潔的切換可能是蘋果頭顯的關(guān)鍵賣點(diǎn)之一。”

來自彭博社的多位消息人士也證實(shí)了這一點(diǎn),提到蘋果同樣希望該功能成為該產(chǎn)品的一個亮點(diǎn)。

但這能否成為蘋果MR頭顯的“殺手锏”功能嗎?這可能需要看蘋果在此基礎(chǔ)上還存在哪些其他的新玩法。

畢竟,目前市面上多數(shù)新品頭顯都能夠通過RGB攝像頭與SLAM的配合完成彩色透視功能,也就是AR模式下的顯示場景。像是剛剛發(fā)布的奇遇MIX可以通過雙目RGB透視方案,實(shí)現(xiàn)了一鍵切換VR/AR場景。

如果說蘋果僅是簡單地完成了一鍵切換VR/AR場景,切換方式從現(xiàn)有的虛擬按鍵改成了物理按鍵,可能并不能為蘋果的MR頭顯帶來太大的優(yōu)勢。但如果正如爆料所說,蘋果能夠通過滾動按鍵,調(diào)整數(shù)字信息逐漸淡出視野,更好地與現(xiàn)實(shí)世界直接結(jié)合,或許能夠?yàn)镸R內(nèi)容交互提供更多地空間。

2、眼動、手動追蹤功能:突破性交互方式或成關(guān)鍵

彭博社認(rèn)為蘋果MR頭顯的眼動追蹤功能和手動追蹤功能可以與競爭對手的產(chǎn)品拉開差距。

據(jù)介紹,蘋果MR頭顯將會有通過外部攝像頭追蹤手部定位,以及通過內(nèi)部傳感器讀取眼睛的相關(guān)數(shù)據(jù)。

用戶可以通過眼動交互來選擇某個按鈕、應(yīng)用程序或者是列表項(xiàng)目,然后通過拇指和食指捏在一起的動作激活某個特定的任務(wù)。

眼動追蹤和手部追蹤確實(shí)是近年來MR頭顯新品的重要功能亮點(diǎn)之一,各大頭顯廠商也在此方向上做出不少探索。從目前行業(yè)情況來看,盡管硬件已經(jīng)開始支持眼動追蹤和手部追蹤功能,但其具體應(yīng)用還少有動作。

▲PICO 4所支持的手勢識別

但不要忘記,蘋果一向喜歡打造一個突破性的交互界面,使其產(chǎn)品和競爭對手拉開差距。

在iPod時代,是點(diǎn)擊輪;在iPhone和iPad時代是多點(diǎn)觸控;在Apple Watch時代是數(shù)字皇冠(Digital Crown)。而在MR頭顯產(chǎn)品上,則很有可能是眼動交互或者手部交互。

▲iPod時代的點(diǎn)擊式交互

目前,蘋果已經(jīng)有至少3項(xiàng)專利涉及到眼動追蹤技術(shù),比如說通過3顆眼動攝像頭完成眼動分析、如何處理眼動追蹤中的數(shù)據(jù)過濾等。同時,蘋果也有多項(xiàng)專利探索智能戒指、手指傳感器、裸手交互等方向。

看起來,蘋果已經(jīng)在交互領(lǐng)域用專利搭起自己的技術(shù)護(hù)城河,這也側(cè)面印證了蘋果在新的交互領(lǐng)域頗下功夫。

2、視頻會議功能:用戶將擁有全身渲染

還記得當(dāng)Quest Pro發(fā)布時,大家都對小扎“長腿”了頗感驚喜。但隨后Meta卻表示該功能仍處在研發(fā)階段,尚未上線。而這次蘋果真的要帶著“長腿”的虛擬人形象來了。

▲元宇宙形象“長腿”

據(jù)彭博社介紹,蘋果將重點(diǎn)打造基于FaceTime的高級視頻會議功能。頭顯內(nèi)的FaceTime軟件將在虛擬世界中逼真地渲染用戶的面部和全身。用戶將會感覺自己和其同伴都處在同一個“房間”。這可能比只有”上半身”或者頭部形象的Meta的Horizon平臺要更先一步。

當(dāng)然,蘋果也考慮到全身渲染所需要的數(shù)據(jù)處理能力,因此全身渲染功能僅在一對一視頻聊天中所支持。如果要是多人進(jìn)行FaceTime通話,其他用戶仍以圖標(biāo)或者M(jìn)emoji(Apple的自定義表情符號)的形象出現(xiàn)。

4、生產(chǎn)力工具:作為Mac外接顯示器,或打造“空氣鍵盤”

外媒此前曾爆料,蘋果一直希望將這款MR頭顯打造成工作頭顯,并且希望開發(fā)者成為其主要用戶群體。因此,蘋果MR頭顯成為生產(chǎn)力工具也成為其亮點(diǎn)之一。

據(jù)悉,蘋果MR頭顯不但能夠作為連接Mac的外部顯示器,被當(dāng)作“大號”的iPhone和iPad一樣使用,而且還能在用戶戴上頭顯之后,使用觸控板或者鼠標(biāo)、物理按鍵控制設(shè)備。

盡管目前不少頭顯同樣能支持無線投屏顯示,又或是通過串流方式實(shí)現(xiàn)擴(kuò)屏,但是蘋果MR頭顯以數(shù)據(jù)線的方式連接設(shè)備,并能和其他物理鍵盤等配件產(chǎn)生聯(lián)動,也是其亮點(diǎn)之一。

也因此,當(dāng)用戶需要輸入某些文本信息時,蘋果MR頭顯至少支持語音輸入和按鍵輸入兩種輸入方式。語音輸入時,設(shè)備將直接識別相關(guān)文本信息、借助iPhone、Mac或iPad等第三方設(shè)備的鍵盤,通過物理按鍵輸入文本信息。

不僅如此,蘋果還在開發(fā)“空氣鍵盤”,讓用戶可以用手在半空中打字。但據(jù)悉,該功能不會在蘋果首次發(fā)布頭顯時上線。此前,Meta也曾展示在該方向嘗試探索。

可以看出,目前蘋果MR頭顯在顯示、交互、用途以及具體應(yīng)用上均做出了相關(guān)新的嘗試。盡管這其中不少功能此前業(yè)內(nèi)的MR頭顯都曾涉及,但是蘋果在此基礎(chǔ)上又增添了一些不同的思路,創(chuàng)造了新的玩法。

02.主攻教育、健康等四大場景,AppleTV+團(tuán)隊(duì)或成內(nèi)容研發(fā)主力

當(dāng)硬件上難以拉開明顯差距時,內(nèi)容則正為了產(chǎn)品制勝的關(guān)鍵要素之一。除了硬件之外,蘋果已經(jīng)在健康、教育、游戲、視聽四大場景對其MR內(nèi)容有所布局。

而打造這些內(nèi)容的則是一個秘密團(tuán)隊(duì)。據(jù)五位知情人士透露,蘋果自己的內(nèi)容團(tuán)隊(duì)由一個代號為Z50的團(tuán)隊(duì)研發(fā),規(guī)模約為幾十人,其主要辦公地點(diǎn)實(shí)在加利佛尼亞州卡爾弗城一座建筑內(nèi)。該團(tuán)隊(duì)成員多數(shù)都是來自視頻、游戲等領(lǐng)域,其主要任務(wù)為根據(jù)自身過去的流媒體服務(wù)Apple TV+中的經(jīng)驗(yàn),為MR頭顯打造內(nèi)容。

首先是健康場景。一位熟悉蘋果MR頭顯內(nèi)容策略的消息人士透露,蘋果的高管一直強(qiáng)調(diào)蘋果在健康場景發(fā)力,并提及他們正在開發(fā)有助于冥想和鍛煉的AR應(yīng)用程序。比如說早期蘋果曾開發(fā)過一個讓用戶在充滿禪意的花園中打坐的軟件。

其次在教育領(lǐng)域,蘋果則希望用戶可以通過MR頭顯打造沉浸式MR閱讀。一位前蘋果高管希望用戶可以通過瀏覽書籍,讓用戶在看書的過程中,能夠體驗(yàn)到奇幻的環(huán)境與現(xiàn)實(shí)世界融為一體的感受。

2021年11月,蘋果曾公開發(fā)布了一款應(yīng)用程序。該程序是蘋果Apple TV+ 系列電視劇“For All Mankind”的衍生產(chǎn)品,可以讓劇迷們直接參與到一些字幕的制作,或者直接與劇中的一些物品,如老舊的Apple II電腦等物體進(jìn)行交互。這樣的方式可以讓用戶如同置身于電視劇的場景中,親眼見證故事的發(fā)展。

再次,視聽領(lǐng)域也是蘋果MR頭顯的核心內(nèi)容之一。

蘋果將為MR頭顯打造專用的視頻觀看功能,可以讓觀眾處于一個新的觀看環(huán)境,如沙漠或者太空場景中觀看視頻。不過,該類場景構(gòu)建早已在現(xiàn)有的頭顯產(chǎn)品中上線。

▲奇遇Dream打造星空觀影環(huán)境

音頻方面,用戶通過佩戴AirPods,可以獲得完整的空間音頻體驗(yàn),感受環(huán)繞立體聲。但這是否意味著僅通過佩戴AirPods,用戶才能獲得空間音頻體驗(yàn),我們尚不明晰。

在內(nèi)容上,蘋果已經(jīng)與包括華特迪士尼公司(Walt Disney)和杜比實(shí)驗(yàn)室(Dolby Laboratories)在內(nèi)的大約六家合作伙伴討論了為該平臺開發(fā)MR內(nèi)容相關(guān)事宜。豐富的內(nèi)容加持,或成為蘋果在視聽領(lǐng)域制勝的關(guān)鍵。

最后,游戲一直是蘋果鮮少涉及的領(lǐng)域,在MR頭顯上也不例外。蘋果已經(jīng)創(chuàng)建了自己的底層引擎為MR游戲提供支持,但游戲內(nèi)容仍然是交付給第三方開發(fā)。

在內(nèi)容方面,蘋果高管一直秉持著一個觀點(diǎn),蘋果將專注于AR。他們希望將數(shù)字信息帶入現(xiàn)實(shí),像是將Apple TV+的內(nèi)容遷移到頭顯內(nèi)。Apple TV+已經(jīng)在短短時間內(nèi)迅速成為了蘋果的重要項(xiàng)目之一,蘋果此前積累的內(nèi)容優(yōu)勢也在其推出新的產(chǎn)品品類時,從研發(fā)硬件到內(nèi)容支持等各方面均帶來不小的助力。

03.讓Siri幫你做AR軟件,蘋果試圖降低內(nèi)容準(zhǔn)入門檻

如果僅僅只有蘋果自己打造的MR內(nèi)容,是遠(yuǎn)遠(yuǎn)不能夠滿足用戶豐富且多樣內(nèi)容需求的。這也是MR頭顯目前在內(nèi)容領(lǐng)域的不足之處——應(yīng)用數(shù)量太少,內(nèi)容難以吸引更多的用戶。

但現(xiàn)有的MR內(nèi)容開發(fā)難度較高,十分具有挑戰(zhàn)性,尤其是為AR模式開發(fā)相關(guān)軟件。因?yàn)閂R模式下,開發(fā)者僅需要打造一個完整的虛擬世界。而在AR模式中,虛擬對象將要附在現(xiàn)實(shí)世界上,用戶突然運(yùn)動或者現(xiàn)實(shí)世界和虛擬世界之間沒有精準(zhǔn)覆蓋,都會破壞用戶體驗(yàn)。

針對這些難題,蘋果正在打造了一款內(nèi)容開發(fā)工具,可以讓用戶輕松構(gòu)建自己的AR軟件,并能夠上線App Store,提供給他人下載。

▲網(wǎng)傳蘋果MR頭顯渲染圖

該軟件可以幫助用戶構(gòu)建一個新的應(yīng)用程序,比如說讓虛擬動物在現(xiàn)實(shí)世界的房間里開始移動,還可以圍繞在部分現(xiàn)實(shí)物體旁。借助該軟件,用戶無需從頭開始設(shè)計(jì)動物模型,也無需計(jì)算該動物將如何在有障礙物的3D空間中移動。

一位前蘋果工程師將這項(xiàng)內(nèi)容創(chuàng)建工具比作“我的世界”和“Roblox”兩款游戲。這些游戲中,用戶可以通過簡單的界面輕松構(gòu)建自己的3D世界和對象,與Meta的游戲創(chuàng)建應(yīng)用程序Horizon Worlds相類似。

The Information透露,該內(nèi)容開發(fā)工具所涉及的技術(shù)是從蘋果2017年收購蒙特利爾初創(chuàng)公司Fabric Software時繼承的。

在收購Fabric Software不久后,蘋果就發(fā)布了視頻游戲引擎Fabric Engine。開發(fā)人員通過該引擎使用可視化編程系統(tǒng)來操縱數(shù)字對象、角色和環(huán)境的外觀。這意味著他們不需要使用計(jì)算機(jī)代碼,可以大量節(jié)省構(gòu)建計(jì)算機(jī)生成圖像的時間和金錢。

該內(nèi)容創(chuàng)作軟件將主要面向軟件開發(fā)人員,蘋果同樣希望消費(fèi)者也可以使用它,就像其Final Cut Pro視頻編輯工具。

據(jù)三位知情人士透露,F(xiàn)abric Software的聯(lián)合創(chuàng)始人之一彼得·錫安(Peter Zion)在公司被收購后留在了蘋果公司,目前正在領(lǐng)導(dǎo)該內(nèi)容開發(fā)工具的項(xiàng)目。有關(guān)該項(xiàng)目的最新進(jìn)展目前尚不知曉,但有部分人透露他們最近看到了一些演示。他們提到如果項(xiàng)目研發(fā)進(jìn)度落后,那么該軟件可能會推遲研發(fā)。

除了Z50團(tuán)隊(duì),蘋果還有一個團(tuán)隊(duì),主要攻克“如何掃描現(xiàn)實(shí)世界的物體并且將其以3D的形式導(dǎo)入到頭顯中”。

這一技術(shù)將為蘋果及其用戶節(jié)省一定的時間和金錢。這樣一來,蘋果可以邀請數(shù)字藝術(shù)家來構(gòu)建龐大的虛擬對象數(shù)據(jù)庫。

此前,蘋果從2017年的ARKit開始,就曾在AR應(yīng)用程序開發(fā)方向中做出不少探索。2021年,蘋果還曾宣布推出Object Capture,根據(jù)iPhone或iPad拍攝的照片自動構(gòu)建物體的3D模型。2022年,蘋果還推出RoomPlan,它使用新款iPhone和iPad的攝像頭和激光雷達(dá)傳感器掃描并生成房間的虛擬平面圖。

而這些打造MR內(nèi)容開發(fā)技術(shù)團(tuán)隊(duì)背后,是蘋果過去多年時間里多次引進(jìn)技術(shù)人才的成果。

據(jù)不完全統(tǒng)計(jì),自2015年以來,蘋果已經(jīng)在過去7年時間里收購了超過7家創(chuàng)企,為其MR內(nèi)容服務(wù)。

2015年,蘋果收購了位于慕尼黑的Metaio,此前該公司主要為AR應(yīng)用程序制作工具。同年,蘋果還收購了專門從事面部動畫和動作捕捉的Faceshift。2017年,蘋果收購的初創(chuàng)公司Fabric Software,也正是目前研發(fā)內(nèi)容開發(fā)工具團(tuán)隊(duì)的前身。2020年,蘋果收購了兩家位于南加州的初創(chuàng)公司,分別是提供VR體育直播的NextVR和提供VR視頻會議的Spaces。

▲蘋果歷年收購涉及MR內(nèi)容的初創(chuàng)企業(yè)名單(不完全統(tǒng)計(jì))

從這些收購歷史中可以看出,蘋果從未放棄在AR內(nèi)容領(lǐng)域不斷擴(kuò)張,不斷汲取優(yōu)秀的技術(shù)人才,這也讓大家對蘋果的MR內(nèi)容更加期待。

04.定下百萬銷量目標(biāo),蘋果MR頭顯將于2月開始生產(chǎn)

隨著蘋果MR頭顯發(fā)布在即,越來越多有關(guān)蘋果MR頭顯“Reality Pro”的消息浮出水面。據(jù)知情人士爆料,今年2月,蘋果MR頭顯將在中國開始生產(chǎn);6月,蘋果將在WWDC全球開發(fā)者大會上宣布該產(chǎn)品,然后在今年晚些時候發(fā)布該產(chǎn)品。他還透露到蘋果可能會先在美國推出該產(chǎn)品。

對于這款頭顯,蘋果持有較高的期待。據(jù)悉,蘋果將第一年的MR頭顯出貨量定在100萬臺。盡管相對于每年銷量超2億臺的iPhone來說,其規(guī)模還尚小,但對一款售價(jià)約3000美元、已經(jīng)成為頭顯類產(chǎn)品價(jià)格天花板的新設(shè)備來說,完成這樣的銷售目標(biāo),仍然是不小的挑戰(zhàn)。

畢竟,“Reality Pro”的競爭產(chǎn)品Meta Quest Pro,在發(fā)布三個月時間后,就迅速調(diào)整了產(chǎn)品售價(jià),從1500美元(約人民幣13000元)降至1100美元(約人民幣7790元),售價(jià)降低近三分之一。曾有調(diào)研機(jī)構(gòu)預(yù)估,Meta Quest Pro在2022年,也就是三個月時間內(nèi),出貨量不超過25萬臺。

▲Meta Quest Pro降價(jià)400美元

在此行業(yè)背景下,蘋果想要發(fā)布一款約人民幣2萬元的頭顯新品,以比此前Meta定價(jià)約人民幣13000元的Quest Pro高出近一倍的價(jià)格,還期待達(dá)到百萬臺的銷量,這意味著蘋果就需要給消費(fèi)者帶來一款足夠驚艷的產(chǎn)品。為此,蘋果也需要用自己的方式解答一些行業(yè)共同的難題,比如說如何處理散熱。

據(jù)爆料,蘋果將通過安裝冷風(fēng)扇,解決頭顯散熱難題,就像部分高端Mac電腦一樣。此外,蘋果將采用分體式設(shè)計(jì),將頭顯的電池從頭顯上轉(zhuǎn)移至用戶的口袋里,用一根數(shù)據(jù)線連接頭顯和電池。

消息人士透露,這個電池大概外觀會像兩個iPhone 14 Pro Max堆疊在一起的樣子,一塊電池組的續(xù)航時間大約是2個小時,與目前市場上大多數(shù)的頭顯續(xù)航時間相差無幾。

不過,距離蘋果的MR頭顯發(fā)布還有幾個月時間,蘋果還可能仍然對部分功能和設(shè)計(jì)做出調(diào)整。此外,有消息稱,蘋果已經(jīng)在開發(fā)更便宜版本的MR頭顯,發(fā)布價(jià)格將為1500美元左右,將于2024年底或2025年初發(fā)布。

蘋果發(fā)言人對此次爆料信息均不予置評。

05.結(jié)語:內(nèi)容或成蘋果MR頭顯制勝關(guān)鍵

蘋果MR頭顯,是蘋果投入了千人團(tuán)隊(duì),研發(fā)近7年左右的新項(xiàng)目,這也是蘋果自2015年發(fā)布智能手表以來,打造的第一個主要新產(chǎn)品系列,更有人稱其將成為“庫克時代”的標(biāo)志。

除了硬件參數(shù)一直備受矚目,蘋果在MR內(nèi)容生態(tài)上的布局也初露端倪。教育、視聽、游戲、健康四大場景成為了蘋果主攻的四大內(nèi)容場景,蘋果也先后在此領(lǐng)域展開不少布局,Apple TV+團(tuán)隊(duì)在其中承擔(dān)了主要力量。

從現(xiàn)有的產(chǎn)品特性來看,蘋果MR頭顯能夠一鍵切換VR/AR模式,或成為其最大的看點(diǎn)之一。而像眼動追蹤、手部交互、外接設(shè)備等功能亮點(diǎn),蘋果早已不是先行者。不過在創(chuàng)新的加持下,蘋果還能夠帶來哪些不一樣的體驗(yàn),我們也將持續(xù)關(guān)注。

來源:彭博社、The Information

本文為轉(zhuǎn)載內(nèi)容,授權(quán)事宜請聯(lián)系原著作權(quán)人。

蘋果

6.4k
  • 美股收評:三大指數(shù)集體收漲,大型科技股普漲,蘋果股價(jià)續(xù)創(chuàng)新高
  • 臨港集團(tuán)獲得蘋果公司授權(quán)培訓(xùn)合作伙伴資質(zhì)

評論

暫無評論哦,快來評價(jià)一下吧!

下載界面新聞

微信公眾號

微博

讓Siri打造“元宇宙”?蘋果MR頭顯內(nèi)容生態(tài)大起底

還能這么玩?蘋果MR頭顯玩法大揭秘。

編譯 | 智東西 徐珊

編輯 | 云鵬

蘋果MR頭顯要來了——緊跟而來的,會是MR內(nèi)容生態(tài)爆發(fā)嗎?

8K顯示屏、64顆攝像頭、雙芯片設(shè)計(jì)......除了這些耳熟能詳?shù)奶O果MR頭顯硬件爆料信息外,近日彭博社和科技媒體The Information接連爆料蘋果在MR內(nèi)容生態(tài)的布局,并且揭露了其多個內(nèi)容“殺手锏”。

據(jù)悉,蘋果MR內(nèi)容開發(fā)項(xiàng)目主要由 個內(nèi)部代號為Z50的秘密團(tuán)隊(duì)承擔(dān),該團(tuán)隊(duì)大約有幾十人,其員工主要來 視頻、游戲等 業(yè)。并且,蘋果還在打造一款內(nèi)容開發(fā)工具,希望讓不懂編程的人也能通過Siri語音助手,構(gòu)建自己的MR軟件,并上線App Store。

▲網(wǎng)傳蘋果MR頭顯渲染圖

此外,據(jù)知名蘋果記者馬克·古曼(Mark Gurman)透露,蘋果不但將MR頭顯稱為“Reality Pro”,定價(jià)約為3000美元,而且還訂下了一百萬銷量的目標(biāo)。

作為消費(fèi)電子行業(yè)的領(lǐng)頭羊之一,蘋果常?!爸匦露x”一款產(chǎn)品。蘋果將MR頭顯定價(jià)3000美元的底氣從何而來?蘋果將如何補(bǔ)上MR頭顯內(nèi)容的不足,令其在“元宇宙”賽道中能夠脫穎而出?蘋果又將如何達(dá)成百萬銷量目標(biāo)?從最新爆料中,我們挖到了蘋果MR頭顯除硬件參數(shù)之外,又一大秘密武器:MR內(nèi)容生態(tài)布局。在這里,蘋果將用一些新的玩法和技術(shù)創(chuàng)新,試圖重新帶動整個VR/AR行業(yè)。

01.打造“空氣鍵盤”?蘋果MR頭顯四大功能秀翻全場

在蘋果MR頭顯登場之前,市面上已有不少頭顯類產(chǎn)品嶄露頭角。這其中有拿下千萬臺出貨量的Quest 2,有針對高端市場的Quest Pro,更不用提國內(nèi)PICO 4、奇遇MIX等各類新品頭顯接連亮相。

這意味著如果要和現(xiàn)有的頭顯產(chǎn)品拉開差距,蘋果勢必要打出自己的產(chǎn)品特色,又或是拿出更好的體驗(yàn)吸引用戶。近期的爆料信息,正好揭曉了蘋果MR頭顯的四大看點(diǎn):一鍵切換VR/AR模式、眼動追蹤及手部追蹤功能、視頻會議功能以及作為外接生產(chǎn)力工具。

1、一鍵切換VR/AR模式:簡潔操作、平滑切換

據(jù)知情人士透露,蘋果MR頭顯將會有兩種模式:完全沉浸在虛擬世界(VR模式)和將虛擬世界疊加到現(xiàn)實(shí)世界兩種模式(AR模式)。而用戶想要切換從VR模式切換到AR模式時,只需要“轉(zhuǎn)動”特定按鍵,沉浸式的數(shù)字世界將會逐漸淡出,用戶將會逐漸被真實(shí)環(huán)境包圍,就像轉(zhuǎn)動手表表冠按鍵一樣。

此前,蘋果分析師郭明錤曾在推特上分析該功能將成為蘋果MR頭顯的關(guān)鍵亮點(diǎn)之一。他認(rèn)為一個真正的MR頭顯不但能支持AR和VR的硬件,而且還應(yīng)該支持整合AR和VR兩種模式,并可以在兩個不同的場景中順利切換。

▲郭明錤推特原文

同時,他也說道:“可能很多人都比較難想象在AR和VR之間的平滑切換能提供什么樣的體驗(yàn),因此在AR和VR之間干凈、簡潔的切換可能是蘋果頭顯的關(guān)鍵賣點(diǎn)之一?!?/p>

來自彭博社的多位消息人士也證實(shí)了這一點(diǎn),提到蘋果同樣希望該功能成為該產(chǎn)品的一個亮點(diǎn)。

但這能否成為蘋果MR頭顯的“殺手锏”功能嗎?這可能需要看蘋果在此基礎(chǔ)上還存在哪些其他的新玩法。

畢竟,目前市面上多數(shù)新品頭顯都能夠通過RGB攝像頭與SLAM的配合完成彩色透視功能,也就是AR模式下的顯示場景。像是剛剛發(fā)布的奇遇MIX可以通過雙目RGB透視方案,實(shí)現(xiàn)了一鍵切換VR/AR場景。

如果說蘋果僅是簡單地完成了一鍵切換VR/AR場景,切換方式從現(xiàn)有的虛擬按鍵改成了物理按鍵,可能并不能為蘋果的MR頭顯帶來太大的優(yōu)勢。但如果正如爆料所說,蘋果能夠通過滾動按鍵,調(diào)整數(shù)字信息逐漸淡出視野,更好地與現(xiàn)實(shí)世界直接結(jié)合,或許能夠?yàn)镸R內(nèi)容交互提供更多地空間。

2、眼動、手動追蹤功能:突破性交互方式或成關(guān)鍵

彭博社認(rèn)為蘋果MR頭顯的眼動追蹤功能和手動追蹤功能可以與競爭對手的產(chǎn)品拉開差距。

據(jù)介紹,蘋果MR頭顯將會有通過外部攝像頭追蹤手部定位,以及通過內(nèi)部傳感器讀取眼睛的相關(guān)數(shù)據(jù)。

用戶可以通過眼動交互來選擇某個按鈕、應(yīng)用程序或者是列表項(xiàng)目,然后通過拇指和食指捏在一起的動作激活某個特定的任務(wù)。

眼動追蹤和手部追蹤確實(shí)是近年來MR頭顯新品的重要功能亮點(diǎn)之一,各大頭顯廠商也在此方向上做出不少探索。從目前行業(yè)情況來看,盡管硬件已經(jīng)開始支持眼動追蹤和手部追蹤功能,但其具體應(yīng)用還少有動作。

▲PICO 4所支持的手勢識別

但不要忘記,蘋果一向喜歡打造一個突破性的交互界面,使其產(chǎn)品和競爭對手拉開差距。

在iPod時代,是點(diǎn)擊輪;在iPhone和iPad時代是多點(diǎn)觸控;在Apple Watch時代是數(shù)字皇冠(Digital Crown)。而在MR頭顯產(chǎn)品上,則很有可能是眼動交互或者手部交互。

▲iPod時代的點(diǎn)擊式交互

目前,蘋果已經(jīng)有至少3項(xiàng)專利涉及到眼動追蹤技術(shù),比如說通過3顆眼動攝像頭完成眼動分析、如何處理眼動追蹤中的數(shù)據(jù)過濾等。同時,蘋果也有多項(xiàng)專利探索智能戒指、手指傳感器、裸手交互等方向。

看起來,蘋果已經(jīng)在交互領(lǐng)域用專利搭起自己的技術(shù)護(hù)城河,這也側(cè)面印證了蘋果在新的交互領(lǐng)域頗下功夫。

2、視頻會議功能:用戶將擁有全身渲染

還記得當(dāng)Quest Pro發(fā)布時,大家都對小扎“長腿”了頗感驚喜。但隨后Meta卻表示該功能仍處在研發(fā)階段,尚未上線。而這次蘋果真的要帶著“長腿”的虛擬人形象來了。

▲元宇宙形象“長腿”

據(jù)彭博社介紹,蘋果將重點(diǎn)打造基于FaceTime的高級視頻會議功能。頭顯內(nèi)的FaceTime軟件將在虛擬世界中逼真地渲染用戶的面部和全身。用戶將會感覺自己和其同伴都處在同一個“房間”。這可能比只有”上半身”或者頭部形象的Meta的Horizon平臺要更先一步。

當(dāng)然,蘋果也考慮到全身渲染所需要的數(shù)據(jù)處理能力,因此全身渲染功能僅在一對一視頻聊天中所支持。如果要是多人進(jìn)行FaceTime通話,其他用戶仍以圖標(biāo)或者M(jìn)emoji(Apple的自定義表情符號)的形象出現(xiàn)。

4、生產(chǎn)力工具:作為Mac外接顯示器,或打造“空氣鍵盤”

外媒此前曾爆料,蘋果一直希望將這款MR頭顯打造成工作頭顯,并且希望開發(fā)者成為其主要用戶群體。因此,蘋果MR頭顯成為生產(chǎn)力工具也成為其亮點(diǎn)之一。

據(jù)悉,蘋果MR頭顯不但能夠作為連接Mac的外部顯示器,被當(dāng)作“大號”的iPhone和iPad一樣使用,而且還能在用戶戴上頭顯之后,使用觸控板或者鼠標(biāo)、物理按鍵控制設(shè)備。

盡管目前不少頭顯同樣能支持無線投屏顯示,又或是通過串流方式實(shí)現(xiàn)擴(kuò)屏,但是蘋果MR頭顯以數(shù)據(jù)線的方式連接設(shè)備,并能和其他物理鍵盤等配件產(chǎn)生聯(lián)動,也是其亮點(diǎn)之一。

也因此,當(dāng)用戶需要輸入某些文本信息時,蘋果MR頭顯至少支持語音輸入和按鍵輸入兩種輸入方式。語音輸入時,設(shè)備將直接識別相關(guān)文本信息、借助iPhone、Mac或iPad等第三方設(shè)備的鍵盤,通過物理按鍵輸入文本信息。

不僅如此,蘋果還在開發(fā)“空氣鍵盤”,讓用戶可以用手在半空中打字。但據(jù)悉,該功能不會在蘋果首次發(fā)布頭顯時上線。此前,Meta也曾展示在該方向嘗試探索。

可以看出,目前蘋果MR頭顯在顯示、交互、用途以及具體應(yīng)用上均做出了相關(guān)新的嘗試。盡管這其中不少功能此前業(yè)內(nèi)的MR頭顯都曾涉及,但是蘋果在此基礎(chǔ)上又增添了一些不同的思路,創(chuàng)造了新的玩法。

02.主攻教育、健康等四大場景,AppleTV+團(tuán)隊(duì)或成內(nèi)容研發(fā)主力

當(dāng)硬件上難以拉開明顯差距時,內(nèi)容則正為了產(chǎn)品制勝的關(guān)鍵要素之一。除了硬件之外,蘋果已經(jīng)在健康、教育、游戲、視聽四大場景對其MR內(nèi)容有所布局。

而打造這些內(nèi)容的則是一個秘密團(tuán)隊(duì)。據(jù)五位知情人士透露,蘋果自己的內(nèi)容團(tuán)隊(duì)由一個代號為Z50的團(tuán)隊(duì)研發(fā),規(guī)模約為幾十人,其主要辦公地點(diǎn)實(shí)在加利佛尼亞州卡爾弗城一座建筑內(nèi)。該團(tuán)隊(duì)成員多數(shù)都是來自視頻、游戲等領(lǐng)域,其主要任務(wù)為根據(jù)自身過去的流媒體服務(wù)Apple TV+中的經(jīng)驗(yàn),為MR頭顯打造內(nèi)容。

首先是健康場景。一位熟悉蘋果MR頭顯內(nèi)容策略的消息人士透露,蘋果的高管一直強(qiáng)調(diào)蘋果在健康場景發(fā)力,并提及他們正在開發(fā)有助于冥想和鍛煉的AR應(yīng)用程序。比如說早期蘋果曾開發(fā)過一個讓用戶在充滿禪意的花園中打坐的軟件。

其次在教育領(lǐng)域,蘋果則希望用戶可以通過MR頭顯打造沉浸式MR閱讀。一位前蘋果高管希望用戶可以通過瀏覽書籍,讓用戶在看書的過程中,能夠體驗(yàn)到奇幻的環(huán)境與現(xiàn)實(shí)世界融為一體的感受。

2021年11月,蘋果曾公開發(fā)布了一款應(yīng)用程序。該程序是蘋果Apple TV+ 系列電視劇“For All Mankind”的衍生產(chǎn)品,可以讓劇迷們直接參與到一些字幕的制作,或者直接與劇中的一些物品,如老舊的Apple II電腦等物體進(jìn)行交互。這樣的方式可以讓用戶如同置身于電視劇的場景中,親眼見證故事的發(fā)展。

再次,視聽領(lǐng)域也是蘋果MR頭顯的核心內(nèi)容之一。

蘋果將為MR頭顯打造專用的視頻觀看功能,可以讓觀眾處于一個新的觀看環(huán)境,如沙漠或者太空場景中觀看視頻。不過,該類場景構(gòu)建早已在現(xiàn)有的頭顯產(chǎn)品中上線。

▲奇遇Dream打造星空觀影環(huán)境

音頻方面,用戶通過佩戴AirPods,可以獲得完整的空間音頻體驗(yàn),感受環(huán)繞立體聲。但這是否意味著僅通過佩戴AirPods,用戶才能獲得空間音頻體驗(yàn),我們尚不明晰。

在內(nèi)容上,蘋果已經(jīng)與包括華特迪士尼公司(Walt Disney)和杜比實(shí)驗(yàn)室(Dolby Laboratories)在內(nèi)的大約六家合作伙伴討論了為該平臺開發(fā)MR內(nèi)容相關(guān)事宜。豐富的內(nèi)容加持,或成為蘋果在視聽領(lǐng)域制勝的關(guān)鍵。

最后,游戲一直是蘋果鮮少涉及的領(lǐng)域,在MR頭顯上也不例外。蘋果已經(jīng)創(chuàng)建了自己的底層引擎為MR游戲提供支持,但游戲內(nèi)容仍然是交付給第三方開發(fā)。

在內(nèi)容方面,蘋果高管一直秉持著一個觀點(diǎn),蘋果將專注于AR。他們希望將數(shù)字信息帶入現(xiàn)實(shí),像是將Apple TV+的內(nèi)容遷移到頭顯內(nèi)。Apple TV+已經(jīng)在短短時間內(nèi)迅速成為了蘋果的重要項(xiàng)目之一,蘋果此前積累的內(nèi)容優(yōu)勢也在其推出新的產(chǎn)品品類時,從研發(fā)硬件到內(nèi)容支持等各方面均帶來不小的助力。

03.讓Siri幫你做AR軟件,蘋果試圖降低內(nèi)容準(zhǔn)入門檻

如果僅僅只有蘋果自己打造的MR內(nèi)容,是遠(yuǎn)遠(yuǎn)不能夠滿足用戶豐富且多樣內(nèi)容需求的。這也是MR頭顯目前在內(nèi)容領(lǐng)域的不足之處——應(yīng)用數(shù)量太少,內(nèi)容難以吸引更多的用戶。

但現(xiàn)有的MR內(nèi)容開發(fā)難度較高,十分具有挑戰(zhàn)性,尤其是為AR模式開發(fā)相關(guān)軟件。因?yàn)閂R模式下,開發(fā)者僅需要打造一個完整的虛擬世界。而在AR模式中,虛擬對象將要附在現(xiàn)實(shí)世界上,用戶突然運(yùn)動或者現(xiàn)實(shí)世界和虛擬世界之間沒有精準(zhǔn)覆蓋,都會破壞用戶體驗(yàn)。

針對這些難題,蘋果正在打造了一款內(nèi)容開發(fā)工具,可以讓用戶輕松構(gòu)建自己的AR軟件,并能夠上線App Store,提供給他人下載。

▲網(wǎng)傳蘋果MR頭顯渲染圖

該軟件可以幫助用戶構(gòu)建一個新的應(yīng)用程序,比如說讓虛擬動物在現(xiàn)實(shí)世界的房間里開始移動,還可以圍繞在部分現(xiàn)實(shí)物體旁。借助該軟件,用戶無需從頭開始設(shè)計(jì)動物模型,也無需計(jì)算該動物將如何在有障礙物的3D空間中移動。

一位前蘋果工程師將這項(xiàng)內(nèi)容創(chuàng)建工具比作“我的世界”和“Roblox”兩款游戲。這些游戲中,用戶可以通過簡單的界面輕松構(gòu)建自己的3D世界和對象,與Meta的游戲創(chuàng)建應(yīng)用程序Horizon Worlds相類似。

The Information透露,該內(nèi)容開發(fā)工具所涉及的技術(shù)是從蘋果2017年收購蒙特利爾初創(chuàng)公司Fabric Software時繼承的。

在收購Fabric Software不久后,蘋果就發(fā)布了視頻游戲引擎Fabric Engine。開發(fā)人員通過該引擎使用可視化編程系統(tǒng)來操縱數(shù)字對象、角色和環(huán)境的外觀。這意味著他們不需要使用計(jì)算機(jī)代碼,可以大量節(jié)省構(gòu)建計(jì)算機(jī)生成圖像的時間和金錢。

該內(nèi)容創(chuàng)作軟件將主要面向軟件開發(fā)人員,蘋果同樣希望消費(fèi)者也可以使用它,就像其Final Cut Pro視頻編輯工具。

據(jù)三位知情人士透露,F(xiàn)abric Software的聯(lián)合創(chuàng)始人之一彼得·錫安(Peter Zion)在公司被收購后留在了蘋果公司,目前正在領(lǐng)導(dǎo)該內(nèi)容開發(fā)工具的項(xiàng)目。有關(guān)該項(xiàng)目的最新進(jìn)展目前尚不知曉,但有部分人透露他們最近看到了一些演示。他們提到如果項(xiàng)目研發(fā)進(jìn)度落后,那么該軟件可能會推遲研發(fā)。

除了Z50團(tuán)隊(duì),蘋果還有一個團(tuán)隊(duì),主要攻克“如何掃描現(xiàn)實(shí)世界的物體并且將其以3D的形式導(dǎo)入到頭顯中”。

這一技術(shù)將為蘋果及其用戶節(jié)省一定的時間和金錢。這樣一來,蘋果可以邀請數(shù)字藝術(shù)家來構(gòu)建龐大的虛擬對象數(shù)據(jù)庫。

此前,蘋果從2017年的ARKit開始,就曾在AR應(yīng)用程序開發(fā)方向中做出不少探索。2021年,蘋果還曾宣布推出Object Capture,根據(jù)iPhone或iPad拍攝的照片自動構(gòu)建物體的3D模型。2022年,蘋果還推出RoomPlan,它使用新款iPhone和iPad的攝像頭和激光雷達(dá)傳感器掃描并生成房間的虛擬平面圖。

而這些打造MR內(nèi)容開發(fā)技術(shù)團(tuán)隊(duì)背后,是蘋果過去多年時間里多次引進(jìn)技術(shù)人才的成果。

據(jù)不完全統(tǒng)計(jì),自2015年以來,蘋果已經(jīng)在過去7年時間里收購了超過7家創(chuàng)企,為其MR內(nèi)容服務(wù)。

2015年,蘋果收購了位于慕尼黑的Metaio,此前該公司主要為AR應(yīng)用程序制作工具。同年,蘋果還收購了專門從事面部動畫和動作捕捉的Faceshift。2017年,蘋果收購的初創(chuàng)公司Fabric Software,也正是目前研發(fā)內(nèi)容開發(fā)工具團(tuán)隊(duì)的前身。2020年,蘋果收購了兩家位于南加州的初創(chuàng)公司,分別是提供VR體育直播的NextVR和提供VR視頻會議的Spaces。

▲蘋果歷年收購涉及MR內(nèi)容的初創(chuàng)企業(yè)名單(不完全統(tǒng)計(jì))

從這些收購歷史中可以看出,蘋果從未放棄在AR內(nèi)容領(lǐng)域不斷擴(kuò)張,不斷汲取優(yōu)秀的技術(shù)人才,這也讓大家對蘋果的MR內(nèi)容更加期待。

04.定下百萬銷量目標(biāo),蘋果MR頭顯將于2月開始生產(chǎn)

隨著蘋果MR頭顯發(fā)布在即,越來越多有關(guān)蘋果MR頭顯“Reality Pro”的消息浮出水面。據(jù)知情人士爆料,今年2月,蘋果MR頭顯將在中國開始生產(chǎn);6月,蘋果將在WWDC全球開發(fā)者大會上宣布該產(chǎn)品,然后在今年晚些時候發(fā)布該產(chǎn)品。他還透露到蘋果可能會先在美國推出該產(chǎn)品。

對于這款頭顯,蘋果持有較高的期待。據(jù)悉,蘋果將第一年的MR頭顯出貨量定在100萬臺。盡管相對于每年銷量超2億臺的iPhone來說,其規(guī)模還尚小,但對一款售價(jià)約3000美元、已經(jīng)成為頭顯類產(chǎn)品價(jià)格天花板的新設(shè)備來說,完成這樣的銷售目標(biāo),仍然是不小的挑戰(zhàn)。

畢竟,“Reality Pro”的競爭產(chǎn)品Meta Quest Pro,在發(fā)布三個月時間后,就迅速調(diào)整了產(chǎn)品售價(jià),從1500美元(約人民幣13000元)降至1100美元(約人民幣7790元),售價(jià)降低近三分之一。曾有調(diào)研機(jī)構(gòu)預(yù)估,Meta Quest Pro在2022年,也就是三個月時間內(nèi),出貨量不超過25萬臺。

▲Meta Quest Pro降價(jià)400美元

在此行業(yè)背景下,蘋果想要發(fā)布一款約人民幣2萬元的頭顯新品,以比此前Meta定價(jià)約人民幣13000元的Quest Pro高出近一倍的價(jià)格,還期待達(dá)到百萬臺的銷量,這意味著蘋果就需要給消費(fèi)者帶來一款足夠驚艷的產(chǎn)品。為此,蘋果也需要用自己的方式解答一些行業(yè)共同的難題,比如說如何處理散熱。

據(jù)爆料,蘋果將通過安裝冷風(fēng)扇,解決頭顯散熱難題,就像部分高端Mac電腦一樣。此外,蘋果將采用分體式設(shè)計(jì),將頭顯的電池從頭顯上轉(zhuǎn)移至用戶的口袋里,用一根數(shù)據(jù)線連接頭顯和電池。

消息人士透露,這個電池大概外觀會像兩個iPhone 14 Pro Max堆疊在一起的樣子,一塊電池組的續(xù)航時間大約是2個小時,與目前市場上大多數(shù)的頭顯續(xù)航時間相差無幾。

不過,距離蘋果的MR頭顯發(fā)布還有幾個月時間,蘋果還可能仍然對部分功能和設(shè)計(jì)做出調(diào)整。此外,有消息稱,蘋果已經(jīng)在開發(fā)更便宜版本的MR頭顯,發(fā)布價(jià)格將為1500美元左右,將于2024年底或2025年初發(fā)布。

蘋果發(fā)言人對此次爆料信息均不予置評。

05.結(jié)語:內(nèi)容或成蘋果MR頭顯制勝關(guān)鍵

蘋果MR頭顯,是蘋果投入了千人團(tuán)隊(duì),研發(fā)近7年左右的新項(xiàng)目,這也是蘋果自2015年發(fā)布智能手表以來,打造的第一個主要新產(chǎn)品系列,更有人稱其將成為“庫克時代”的標(biāo)志。

除了硬件參數(shù)一直備受矚目,蘋果在MR內(nèi)容生態(tài)上的布局也初露端倪。教育、視聽、游戲、健康四大場景成為了蘋果主攻的四大內(nèi)容場景,蘋果也先后在此領(lǐng)域展開不少布局,Apple TV+團(tuán)隊(duì)在其中承擔(dān)了主要力量。

從現(xiàn)有的產(chǎn)品特性來看,蘋果MR頭顯能夠一鍵切換VR/AR模式,或成為其最大的看點(diǎn)之一。而像眼動追蹤、手部交互、外接設(shè)備等功能亮點(diǎn),蘋果早已不是先行者。不過在創(chuàng)新的加持下,蘋果還能夠帶來哪些不一樣的體驗(yàn),我們也將持續(xù)關(guān)注。

來源:彭博社、The Information

本文為轉(zhuǎn)載內(nèi)容,授權(quán)事宜請聯(lián)系原著作權(quán)人。