讓Siri打造“元宇宙”？蘋果MR頭顯內容生態大起底

還能這麼玩？蘋果MR頭顯玩法大揭祕。

編譯 | 徐珊

編輯 | 雲鵬

來源 | 智東西

蘋果MR頭顯要來了——緊跟而來的，會是MR內容生態爆發嗎？

8K顯示屏、64顆攝像頭、雙芯片設計……除了這些耳熟能詳的蘋果MR頭顯硬件爆料信息外，近日彭博社和科技媒體The Information接連爆料蘋果在MR內容生態的佈局，並且揭露了其多個內容“殺手鐧”。

據悉，蘋果MR內容開發項目主要由⼀個內部代號爲Z50的祕密團隊承擔，該團隊大約有幾十人，其員工主要來⾃視頻、遊戲等⾏業。並且，蘋果還在打造一款內容開發工具，希望讓不懂編程的人也能通過Siri語音助手，構建自己的MR軟件，並上線App Store。

▲網傳蘋果MR頭顯渲染圖

此外，據知名蘋果記者馬克·古曼（Mark Gurman）透露，蘋果不但將MR頭顯稱爲“Reality Pro”，定價約爲3000美元，而且還訂下了一百萬銷量的目標。

作爲消費電子行業的領頭羊之一，蘋果常常“重新定義”一款產品。蘋果將MR頭顯定價3000美元的底氣從何而來？蘋果將如何補上MR頭顯內容的不足，令其在“元宇宙”賽道中能夠脫穎而出？蘋果又將如何達成百萬銷量目標？從最新爆料中，我們挖到了蘋果MR頭顯除硬件參數之外，又一大祕密武器：MR內容生態佈局。在這裏，蘋果將用一些新的玩法和技術創新，試圖重新帶動整個VR/AR行業。

01．

打造“空氣鍵盤”？

蘋果MR頭顯四大功能秀翻全場

在蘋果MR頭顯登場之前，市面上已有不少頭顯類產品嶄露頭角。這其中有拿下千萬臺出貨量的Quest 2，有針對高端市場的Quest Pro，更不用提國內PICO 4、奇遇MIX等各類新品頭顯接連亮相。

這意味着如果要和現有的頭顯產品拉開差距，蘋果勢必要打出自己的產品特色，又或是拿出更好的體驗吸引用戶。近期的爆料信息，正好揭曉了蘋果MR頭顯的四大看點：一鍵切換VR/AR模式、眼動追蹤及手部追蹤功能、視頻會議功能以及作爲外接生產力工具。

1、一鍵切換VR/AR模式：簡潔操作、平滑切換

據知情人士透露，蘋果MR頭顯將會有兩種模式：完全沉浸在虛擬世界（VR模式）和將虛擬世界疊加到現實世界兩種模式（AR模式）。而用戶想要切換從VR模式切換到AR模式時，只需要“轉動”特定按鍵，沉浸式的數字世界將會逐漸淡出，用戶將會逐漸被真實環境包圍，就像轉動手錶錶冠按鍵一樣。

此前，蘋果分析師郭明錤曾在推特上分析該功能將成爲蘋果MR頭顯的關鍵亮點之一。他認爲一個真正的MR頭顯不但能支持AR和VR的硬件，而且還應該支持整合AR和VR兩種模式，並可以在兩個不同的場景中順利切換。

▲郭明錤推特原文

同時，他也說道：“可能很多人都比較難想象在AR和VR之間的平滑切換能提供什麼樣的體驗，因此在AR和VR之間乾淨、簡潔的切換可能是蘋果頭顯的關鍵賣點之一。”

來自彭博社的多位消息人士也證實了這一點，提到蘋果同樣希望該功能成爲該產品的一個亮點。

但這能否成爲蘋果MR頭顯的“殺手鐧”功能嗎？這可能需要看蘋果在此基礎上還存在哪些其他的新玩法。

畢竟，目前市面上多數新品頭顯都能夠通過RGB攝像頭與SLAM的配合完成彩色透視功能，也就是AR模式下的顯示場景。像是剛剛發佈的奇遇MIX可以通過雙目RGB透視方案，實現了一鍵切換VR/AR場景。

如果說蘋果僅是簡單地完成了一鍵切換VR/AR場景，切換方式從現有的虛擬按鍵改成了物理按鍵，可能並不能爲蘋果的MR頭顯帶來太大的優勢。但如果正如爆料所說，蘋果能夠通過滾動按鍵，調整數字信息逐漸淡出視野，更好地與現實世界直接結合，或許能夠爲MR內容交互提供更多地空間。

2、眼動、手動追蹤功能：突破性交互方式或成關鍵

彭博社認爲蘋果MR頭顯的眼動追蹤功能和手動追蹤功能可以與競爭對手的產品拉開差距。

據介紹，蘋果MR頭顯將會有通過外部攝像頭追蹤手部定位，以及通過內部傳感器讀取眼睛的相關數據。

用戶可以通過眼動交互來選擇某個按鈕、應用程序或者是列表項目，然後通過拇指和食指捏在一起的動作激活某個特定的任務。

眼動追蹤和手部追蹤確實是近年來MR頭顯新品的重要功能亮點之一，各大頭顯廠商也在此方向上做出不少探索。從目前行業情況來看，儘管硬件已經開始支持眼動追蹤和手部追蹤功能，但其具體應用還少有動作。

▲PICO 4所支持的手勢識別

但不要忘記，蘋果一向喜歡打造一個突破性的交互界面，使其產品和競爭對手拉開差距。

在iPod時代，是點擊輪；在iPhone和iPad時代是多點觸控；在Apple Watch時代是數字皇冠（Digital Crown）。而在MR頭顯產品上，則很有可能是眼動交互或者手部交互。

▲iPod時代的點擊式交互

目前，蘋果已經有至少3項專利涉及到眼動追蹤技術，比如說通過3顆眼動攝像頭完成眼動分析、如何處理眼動追蹤中的數據過濾等。同時，蘋果也有多項專利探索智能戒指、手指傳感器、裸手交互等方向。

看起來，蘋果已經在交互領域用專利搭起自己的技術護城河，這也側面印證了蘋果在新的交互領域頗下功夫。

2、視頻會議功能：用戶將擁有全身渲染

還記得當Quest Pro發佈時，大家都對小扎“長腿”了頗感驚喜。但隨後Meta卻表示該功能仍處在研發階段，尚未上線。而這次蘋果真的要帶着“長腿”的虛擬人形象來了。

▲元宇宙形象“長腿”

據彭博社介紹，蘋果將重點打造基於FaceTime的高級視頻會議功能。頭顯內的FaceTime軟件將在虛擬世界中逼真地渲染用戶的面部和全身。用戶將會感覺自己和其同伴都處在同一個“房間”。這可能比只有”上半身”或者頭部形象的Meta的Horizon平臺要更先一步。

當然，蘋果也考慮到全身渲染所需要的數據處理能力，因此全身渲染功能僅在一對一視頻聊天中所支持。如果要是多人進行FaceTime通話，其他用戶仍以圖標或者Memoji（Apple的自定義表情符號）的形象出現。

4、生產力工具：作爲Mac外接顯示器，或打造“空氣鍵盤”

外媒此前曾爆料，蘋果一直希望將這款MR頭顯打造成工作頭顯，並且希望開發者成爲其主要用戶羣體。因此，蘋果MR頭顯成爲生產力工具也成爲其亮點之一。

據悉，蘋果MR頭顯不但能夠作爲連接Mac的外部顯示器，被當作“大號”的iPhone和iPad一樣使用，而且還能在用戶戴上頭顯之後，使用觸控板或者鼠標、物理按鍵控制設備。

儘管目前不少頭顯同樣能支持無線投屏顯示，又或是通過串流方式實現擴屏，但是蘋果MR頭顯以數據線的方式連接設備，並能和其他物理鍵盤等配件產生聯動，也是其亮點之一。

也因此，當用戶需要輸入某些文本信息時，蘋果MR頭顯至少支持語音輸入和按鍵輸入兩種輸入方式。語音輸入時，設備將直接識別相關文本信息、藉助iPhone、Mac或iPad等第三方設備的鍵盤，通過物理按鍵輸入文本信息。

不僅如此，蘋果還在開發“空氣鍵盤”，讓用戶可以用手在半空中打字。但據悉，該功能不會在蘋果首次發佈頭顯時上線。此前，Meta也曾展示在該方向嘗試探索。

可以看出，目前蘋果MR頭顯在顯示、交互、用途以及具體應用上均做出了相關新的嘗試。儘管這其中不少功能此前業內的MR頭顯都曾涉及，但是蘋果在此基礎上又增添了一些不同的思路，創造了新的玩法。

02．

主攻教育、健康等四大場景，

Apple TV+團隊或成內容研發主力

當硬件上難以拉開明顯差距時，內容則正爲了產品制勝的關鍵要素之一。除了硬件之外，蘋果已經在健康、教育、遊戲、視聽四大場景對其MR內容有所佈局。

而打造這些內容的則是一個祕密團隊。據五位知情人士透露，蘋果自己的內容團隊由一個代號爲Z50的團隊研發，規模約爲幾十人，其主要辦公地點實在加利佛尼亞州卡爾弗城一座建築內。該團隊成員多數都是來自視頻、遊戲等領域，其主要任務爲根據自身過去的流媒體服務Apple TV+中的經驗，爲MR頭顯打造內容。

首先是健康場景。一位熟悉蘋果MR頭顯內容策略的消息人士透露，蘋果的高管一直強調蘋果在健康場景發力，並提及他們正在開發有助於冥想和鍛鍊的AR應用程序。比如說早期蘋果曾開發過一個讓用戶在充滿禪意的花園中打坐的軟件。

其次在教育領域，蘋果則希望用戶可以通過MR頭顯打造沉浸式MR閱讀。一位前蘋果高管希望用戶可以通過瀏覽書籍，讓用戶在看書的過程中，能夠體驗到奇幻的環境與現實世界融爲一體的感受。

2021年11月，蘋果曾公開發布了一款應用程序。該程序是蘋果Apple TV+ 系列電視劇“For All Mankind”的衍生產品，可以讓劇迷們直接參與到一些字幕的製作，或者直接與劇中的一些物品，如老舊的Apple II電腦等物體進行交互。這樣的方式可以讓用戶如同置身於電視劇的場景中，親眼見證故事的發展。

再次，視聽領域也是蘋果MR頭顯的核心內容之一。

蘋果將爲MR頭顯打造專用的視頻觀看功能，可以讓觀衆處於一個新的觀看環境，如沙漠或者太空場景中觀看視頻。不過，該類場景構建早已在現有的頭顯產品中上線。

▲奇遇Dream打造星空觀影環境

音頻方面，用戶通過佩戴AirPods，可以獲得完整的空間音頻體驗，感受環繞立體聲。但這是否意味着僅通過佩戴AirPods，用戶才能獲得空間音頻體驗，我們尚不明晰。

在內容上，蘋果已經與包括華特迪士尼公司（Walt Disney）和杜比實驗室（Dolby Laboratories）在內的大約六家合作伙伴討論了爲該平臺開發MR內容相關事宜。豐富的內容加持，或成爲蘋果在視聽領域制勝的關鍵。

最後，遊戲一直是蘋果鮮少涉及的領域，在MR頭顯上也不例外。蘋果已經創建了自己的底層引擎爲MR遊戲提供支持，但遊戲內容仍然是交付給第三方開發。

在內容方面，蘋果高管一直秉持着一個觀點，蘋果將專注於AR。他們希望將數字信息帶入現實，像是將Apple TV+的內容遷移到頭顯內。Apple TV+已經在短短時間內迅速成爲了蘋果的重要項目之一，蘋果此前積累的內容優勢也在其推出新的產品品類時，從研發硬件到內容支持等各方面均帶來不小的助力。

03．

讓Siri幫你做AR軟件，

蘋果試圖降低內容准入門檻

如果僅僅只有蘋果自己打造的MR內容，是遠遠不能夠滿足用戶豐富且多樣內容需求的。這也是MR頭顯目前在內容領域的不足之處——應用數量太少，內容難以吸引更多的用戶。

但現有的MR內容開發難度較高，十分具有挑戰性，尤其是爲AR模式開發相關軟件。因爲VR模式下，開發者僅需要打造一個完整的虛擬世界。而在AR模式中，虛擬對象將要附在現實世界上，用戶突然運動或者現實世界和虛擬世界之間沒有精準覆蓋，都會破壞用戶體驗。

針對這些難題，蘋果正在打造了一款內容開發工具，可以讓用戶輕鬆構建自己的AR軟件，並能夠上線App Store，提供給他人下載。

▲網傳蘋果MR頭顯渲染圖

該軟件可以幫助用戶構建一個新的應用程序，比如說讓虛擬動物在現實世界的房間裏開始移動，還可以圍繞在部分現實物體旁。藉助該軟件，用戶無需從頭開始設計動物模型，也無需計算該動物將如何在有障礙物的3D空間中移動。

一位前蘋果工程師將這項內容創建工具比作“我的世界”和“Roblox”兩款遊戲。這些遊戲中，用戶可以通過簡單的界面輕鬆構建自己的3D世界和對象，與Meta的遊戲創建應用程序Horizon Worlds相類似。

The Information透露，該內容開發工具所涉及的技術是從蘋果2017年收購蒙特利爾初創公司Fabric Software時繼承的。

在收購Fabric Software不久後，蘋果就發佈了視頻遊戲引擎Fabric Engine。開發人員通過該引擎使用可視化編程系統來操縱數字對象、角色和環境的外觀。這意味着他們不需要使用計算機代碼，可以大量節省構建計算機生成圖像的時間和金錢。

該內容創作軟件將主要面向軟件開發人員，蘋果同樣希望消費者也可以使用它，就像其Final Cut Pro視頻編輯工具。

據三位知情人士透露，Fabric Software的聯合創始人之一彼得·錫安（Peter Zion）在公司被收購後留在了蘋果公司，目前正在領導該內容開發工具的項目。有關該項目的最新進展目前尚不知曉，但有部分人透露他們最近看到了一些演示。他們提到如果項目研發進度落後，那麼該軟件可能會推遲研發。

除了Z50團隊，蘋果還有一個團隊，主要攻克“如何掃描現實世界的物體並且將其以3D的形式導入到頭顯中”。

這一技術將爲蘋果及其用戶節省一定的時間和金錢。這樣一來，蘋果可以邀請數字藝術家來構建龐大的虛擬對象數據庫。

此前，蘋果從2017年的ARKit開始，就曾在AR應用程序開發方向中做出不少探索。2021年，蘋果還曾宣佈推出Object Capture，根據iPhone或iPad拍攝的照片自動構建物體的3D模型。2022年，蘋果還推出RoomPlan，它使用新款iPhone和iPad的攝像頭和激光雷達傳感器掃描並生成房間的虛擬平面圖。

而這些打造MR內容開發技術團隊背後，是蘋果過去多年時間裏多次引進技術人才的成果。

據不完全統計，自2015年以來，蘋果已經在過去7年時間裏收購了超過7家創企，爲其MR內容服務。

2015年，蘋果收購了位於慕尼黑的Metaio，此前該公司主要爲AR應用程序製作工具。同年，蘋果還收購了專門從事面部動畫和動作捕捉的Faceshift。2017年，蘋果收購的初創公司Fabric Software，也正是目前研發內容開發工具團隊的前身。2020年，蘋果收購了兩家位於南加州的初創公司，分別是提供VR體育直播的NextVR和提供VR視頻會議的Spaces。

▲蘋果歷年收購涉及MR內容的初創企業名單（不完全統計）

從這些收購歷史中可以看出，蘋果從未放棄在AR內容領域不斷擴張，不斷汲取優秀的技術人才，這也讓大家對蘋果的MR內容更加期待。

04．

定下百萬銷量目標，

蘋果MR頭顯將於2月開始生產

隨着蘋果MR頭顯發佈在即，越來越多有關蘋果MR頭顯“Reality Pro”的消息浮出水面。據知情人士爆料，今年2月，蘋果MR頭顯將在中國開始生產；6月，蘋果將在WWDC全球開發者大會上宣佈該產品，然後在今年晚些時候發佈該產品。他還透露到蘋果可能會先在美國推出該產品。

對於這款頭顯，蘋果持有較高的期待。據悉，蘋果將第一年的MR頭顯出貨量定在100萬臺。儘管相對於每年銷量超2億臺的iPhone來說，其規模還尚小，但對一款售價約3000美元、已經成爲頭顯類產品價格天花板的新設備來說，完成這樣的銷售目標，仍然是不小的挑戰。

畢竟，“Reality Pro”的競爭產品Meta Quest Pro，在發佈三個月時間後，就迅速調整了產品售價，從1500美元（約人民幣13000元）降至1100美元（約人民幣7790元），售價降低近三分之一。曾有調研機構預估，Meta Quest Pro在2022年，也就是三個月時間內，出貨量不超過25萬臺。