世界滾動:喬布斯 18 年前神預言 Vision Pro！深扒 13 個背后故事，國內真機上海見

智東西（公眾號：zhidxcom）

作者 | 徐珊

(相關資料圖)

編輯 | 云鵬

蘋果 Vision Pro 頭顯的特別之處，遠不止發布會上 40 分鐘介紹的內容。

智東西 6 月 26 日報道，半個月前，蘋果公司用其首款空間計算頭顯 Apple Vision Pro 點燃了整個 XR 賽道的熱情。在短短的 40 分鐘內，蘋果簡要介紹了 Vision Pro 的一些基礎功能和應用場景。隨后，蘋果在其官網上線了多項開發者課程，從空間設計、交互等多個方面更加具體的介紹了 Vision Pro 內多項有趣的設計。同期，有關 Vision Pro 更多臺前幕后，不為人知的細節也隨著爆料逐漸呈現在大家面前。

▲蘋果多項開發者課程

喬布斯是如何看待頭顯類產品的？蘋果是如何學會 " 讀心術 " 的？國內誰會率先一睹 Vision Pro 的真容？有關 Vision Pro，我們挖到了 13 個鮮為人知的細節，揭開有關 Vision Pro 臺前幕后的事。

一、喬布斯再次預言成功，稱頭顯產品是一個 " 奇跡 "

隨著近期人們對蘋果在 AR 領域的考古熱漸起，我們發現蘋果 " 教主 "18 年前就曾設想過 " 視頻耳機 " 的產品出現，并且稱之為 " 奇跡般的產品 "。

2005 年，喬布斯曾在 D3 的采訪中提及盡管 PS 是非常好的游戲機，但是不能作為音樂播放器，也不能裝在口袋里。

▲喬布斯提及有關 " 視頻耳機 "

然后他設想了一種新的產品思路：" 我可以裝在口袋里隨身攜帶，戴上后可以給我讓我看到家里 50 寸離子電視同樣能看到的東西。" 他在采訪時還提到，產品發布后，你既可以擁有優秀的音頻體驗，還能獲得巨幕觀影體驗。

如今的 Vision Pro，不但能夠提供多樣的空間音頻體驗，而且還能提供環繞式巨屏觀影，也是對喬布斯曾經的設想，回報出一份答卷。

二 、健身場景三大應用尚未亮相，蘋果偷偷藏一手？

在 The information 的最新報道中，有不少蘋果內部人士以及體驗過產品的媒體給出更為細致有關 Vision Pro 的內部信息。至少三位消息人士提到一些蘋果正在準備有關健身場景的內容，健身場景曾是蘋果重點打造的場景之一。但蘋果卻沒有在發布會上披露任何 Vision Pro 健身場景的有關信息。

據悉，蘋果還曾專門為 Vision Pro 研發了三款健身軟件。一款是冥想軟件，隨著呼吸節奏的調整，有規律律動的樹葉會漸漸膨脹成球形，最后包圍著用戶。另一款則是太極應用，該應用程序將指導用戶練習太極。還有一款是瑜伽健康應用程序，頭像將通過向下的攝像頭觀察用戶胸部來測量呼吸的程度和身體的變化。

據悉，蘋果內部至少有三個小組成員正在為 Vision Pro 的健身場景所努力，如與耐克等運動品牌聯名打造健身運動、如何研發出更適合出汗、高強度鍛煉的面墊、甚至是如何在騎固定自行車時佩戴 Vision Pro 并與頭顯內容互動等。

▲蘋果頭顯擁有一個外部電池組

但如今，Vision Pro 的介紹中并未展示健身場景的相關應用，甚至是蘋果自身研發的三款健康軟件也尚未亮相。對其原因，蘋果員工內部也有諸多猜測。一位蘋果頭顯前團隊成員表示，由于頭顯需要外部電池組，并有電線與之相連，所以蘋果可能并不公開討論一些健身案例。同時，頭顯的前置玻璃屏幕可能比較脆弱，無法承受家具或墻壁的撞擊。此外，他認為也有可能是此類應用程序的內容也根本沒有準備好。

三、Persona 其實是 " 閹割版 " 功能？Vision Pro 尚未實現全身追蹤

相信有不少人和我一樣，曾為蘋果的 Persona 功能感到驚艷。打開軟件，分分鐘 Vision Pro 就能幫你安排一個栩栩如生的寫實虛擬人上線。但根據媒體的最新爆料，我們現在看到的 Persona，并不是蘋果最初設想的版本。在蘋果的設想里，虛擬人應該同樣是全身展示的。

▲蘋果頭顯 Persona 功能

據三位參與該設備工作的人士透露，蘋果曾聘請了 Weta FX 等特效公司的人員來共同開發 " 在場 " 功能，為用戶打造一個栩栩如生的面部形象，甚至他們計劃在眉毛上安裝頭戴式攝像頭，以更準確地描繪一個人的面部表情。

據多名參與該設備開發的人士稱，盡管該方案最終并未被采用，但是 Persona 最初的設計版本也和如今不同。在 Persona 的最初設想里，Vision Pro 需要實現全身追蹤，這也是 Vision Pro 擁有兩個朝下攝像頭的原因之一。但由于目前尚未實現 Vision Pro 全身追蹤方案，因此，現階段，Persona 僅看到用戶的上半身。

▲蘋果頭顯前部有兩個向下的攝像頭

在發布會的相關活動環節，蘋果公司發言人曾在今年早些時候告知開發者，全身追蹤功能不會在今年上線。

四、將頭顯帶上天，Vision Pro 或擁有飛行模式

除了 The information 挖到了來自蘋果內部的一手消息，外媒 MacRumors 也在 visionOS 1.0 測試版中發現，該設備的操作系統可能有一個飛行模式選項，讓用戶可以在飛行期間使用。

系統內部文件中的一個注釋提到如果您在飛機上，則需要保持旅行模式打開才能繼續使用 "Apple Vision Pro"。該注釋還提到它還會提示用戶需要 " 在旅行模式下保持原地不動 "，避免佩戴者在佩戴頭顯時四處走動，打擾到坐在他們旁邊的人。

在文件中，visionOS 中的其他文本指出 " 某些感知功能將被關閉 "，這或許表明該設備在飛行模式下可能不會使用其某些傳感器來進行空間感知，部分功能受限。

五、蘋果學會了 " 讀心術 "？攝像頭正在猜測你的心

在發布會上，蘋果展示了一項略顯神奇的功能：當你看向界面中的任意圖標時，界面就能精準呈現出你看的圖標被選中，并隨著你的注視時間呈現子菜單或者進入等多種變幻方式。

蘋果認為眼睛意圖（eye intention）是非常重要且敏感的信息。" 眼睛是空間體驗的主要瞄準機制，所有的界面都會對您的視線做出反應。我們都能通過觀察眼睛，來瞄準界面中的任意元素，無論它有多遠。" 蘋果設計團隊的員工在開發者課程中說。

比如說，當你長期注釋著某個喜愛的照片時，眼睛會轉動的很快，系統就會知道你對它十分感興趣，時刻準備著向你展示更多的信息。再如說，當你使用停留控制功能時，你可僅用眼睛選中某個內容。

▲眼神視線變化直觀在圖標上展示

當然，蘋果也提到，被人看透的 " 眼睛意圖 " 是非常敏感的信息，因此在處理數據的時候，保護隱私是首要任務，用戶主動選擇相應的功能后，系統才會向你展示新的信息。

蘋果在眼動技術方面的積累多年。在和眼動追蹤技術相關的廠商交流后，我們了解到蘋果曾利用 iPhone 的眼動技術在廣告領域獲取相應的信息，比如說，通過用戶停留在手機界面的某個產品上的目光時長，推測其用戶喜好，并將其記錄。

除此之外，蘋果研發人員 Crispin 也在 Twitter 上曾爆料稱，其在蘋果頭顯團隊工作多年，主要攻克的方向就是通過監測身體和大腦的數據，在沉浸式體驗中能夠準確識別用戶的精神狀態。

由此可見，你的眼睛正在悄悄出賣你，蘋果正在通過其積累多年的眼動技術來讀懂你的心。

六、為什么圖標都是圓形邊框？蘋果：為了保護雙眼

盡管不少產業人士都能預測眼動追蹤技術是頭顯的關鍵交互方式之一，此前業內也有高端頭顯搭載了眼動追蹤模組，但是相較而言，蘋果的眼動識別似乎精準度更高，其交互玩法也更多樣。

在蘋果的開發者課程中，設計團隊負責人曾反復提到一句話 " 要注意，眼睛目標的元素所需要的最小點為 60pt（UI 設計單位，邏輯像素點）。" 這也隱約向我們透露蘋果頭顯 UI 設計的最小值。

▲選擇圓矩形圖標設計

同時，在設計圖標時，蘋果還溫馨提醒設計者，要使用圓形、藥丸形、或者圓角矩形等設計方式。因為當圖標時，邊緣鋒利的形狀會讓用戶的眼睛聚焦在鋒利的邊框上，從而降低眼睛的精準度，而且還會造成用眼疲勞。

可以看出，蘋果也是從多方面觀察你的注視動向，并且將每一次注視的力量發揮到關鍵之處。

七、Meta 謀劃多年的虛空鍵盤竟給蘋果搶先了

除了眼動技術之外，手勢也是蘋果頭顯的關鍵交互方式之一。人們對虛擬鍵盤的設想，早在各類科幻電影中頻頻出現。蘋果也在發布會通過一閃而過的畫面展示了虛擬鍵盤已經從科幻電影走向現實。

▲ Meta 研究如何通過肌電手環實現交互

當 Meta 正在研究如何通過肌電手環，實現虛擬打字場景的時候，蘋果已經通過裸手交互和虛擬鍵盤相配合的方式，實現虛擬打字。當然，蘋果自己也提到設計相關場景時，要考慮到 " 輸入的時間太長，手會很累 " 的問題。

在使用虛擬鍵盤的時候，當用戶的手在虛擬鍵盤上時，虛擬鍵盤的按鍵會顯示一個懸停狀態和一個高亮狀態。隨著手指越靠近按鍵表面，按鍵表面亮度會越亮。

▲蘋果實現虛擬鍵盤輸入

在演示視頻中，蘋果也直接提到了虛擬鍵盤的弊端——觸感缺失。" 我們要通過用音量、圖形和效果變換來彌補出現的頭顯效果。" 蘋果設計團隊的員工說道。

他還提到當手指接觸到虛擬鍵盤按鍵時，虛擬鍵盤的變化速度會特別快，并伴隨著相應的空間音效。這些變化能夠幫助用戶彌補缺少的觸覺信息，讓用戶和虛擬鍵盤之間的交互可具有可靠感和反饋感。

當然，除了虛擬鍵盤本身以外，Vision Pro 也支持外部鍵盤接入配合使用的方式。從現有的視頻效果來看，蘋果的虛擬鍵盤背后，既有眼動追蹤和實時渲染的技術支持，同樣也有蘋果在手勢交互精準度的 " 苦功夫 "，以及蘋果在整個用戶體驗層面的多重優化。

八、眼睛竟成 " 放大鏡 "，眨眨眼就自動放大圖片

當眼動交互和手勢交互相結合的時候，蘋果發明了不少新玩法，其中之一就是將眼睛變成 " 放大鏡 "，只需要動動雙眼，結合縮放手勢，你就可以直接放大圖像的某個 角落。

" 將視線方向與手勢相結合，我們可以創建精確且令人滿意的交互，這在其他平臺上是不可能的。" 蘋果設計團隊發言人驕傲地說道。

他解釋到，當你看向圖片的某個位置，并做出縮放手勢后，系統將以你當時的注視點作為原點，縮小或者放大圖片，并且該處圖像還會直接居中，呈現在用戶面前。

▲根據視線精準放大圖片

蘋果還舉了另一個例子，在繪圖中，你可以用手擋做畫筆直接涂抹寫，但是當你的目光轉向畫布的任一角落，并且用手輕輕點擊一下，你的畫布將會自動調整到剛剛目光所注視的位置。

在蘋果看來，眼手協同的方式，不僅能夠簡單快捷地執行命令，并且還能精準實現轉移。

九、站在在大劇院做匯報？Keynote 成舞臺提詞器

在空間設計開發者課程中，蘋果舉了一些例子講述空間感將會給用戶帶有哪些體驗升級。比如說，自適應的窗口設置、光線的變化等。其中比較有趣的一項功能，就是 Keynote 的演講模式升級。

在頭顯應用內的 Keynote 排練演示功能中，用戶將進入一個環繞式劇院內，而演示的文稿則會在左下角顯示。這樣的方式，就和登上大舞臺的演講家一樣，而 Keynote 則成為了提詞器面板。

▲沉浸式演講模式

相比此前的演講方式，這樣的排練更加真實，也更加具有沉浸感。也許，社恐們在這樣的演練下，會增加幾分 " 抗性 "，在演講時獲得更好的成績。

從 Keynote 的升級中，我們可以看到在 " 移植 "iOS 和 iPadOS 等原生應用上，蘋果不僅是將內容和功能遷移過來了，并且還結合頭顯所特有的 " 沉浸式 " 和 " 空間感 " 做了不小的升級。

十、30min 頭顯體驗有 " 貓膩 "？AR/VR 光學專家提出質疑

在發布會結束后，有一小部分媒體獲得 " 優先體驗權 "，在驚嘆聲和激動聲中，人們對頭顯的期待值不斷拉高。但也有部分專家發現，這頭顯體驗環節似乎通過巧妙的設計避開了部分關鍵功能體驗。

AR/VR 光學專家 Karl Guttag 率先發聲，從體驗時長、安全性、人體工學、算法以及眩暈等多方面提出質疑。

在體驗時長上，幾乎每位體驗的媒體都在工作員工的指導下獲得 30 分鐘的體驗時間。30min 的體驗，能避開 Vision Pro 一些潛在的遺憾。比如說，佩戴時間太長，頭顯的重量造成的不適感，續航時長的問題等等。

▲ Vision Pro 實物圖

在體驗場景上，蘋果設定的固定體驗功能，并未涉及到大范圍的動作。這也從一定程度減少了眩暈的出現。Guttag 也表示，在眩暈方面，目前蘋果的低延遲、高刷新率方案，不足以解決現有頭顯類的視覺問題。

而且，據 The information 報道，沒有一個蘋果高管或者蘋果員工在公開場合展示其部分特殊功能，如 Eyeslight、虛擬鍵盤等。這或許意味著蘋果硬件以及相關功能，仍未達到較為穩定的程度。

我們鮮少看到有媒體戴著頭顯四處走動，Vision Pro 頭顯的透視方式能否保證用戶能夠順利感知到四周環境的危險，蘋果頭顯的安全性方面也被打上了問號。

在 Vision Pro 頭顯和消費者們見面前，我們仍對這款革命性的產品保持尊重和好奇的心態，期待其與我們的見面。

十一、上海開發者或成國內首個見到 Vision Pro 的群體

在發布會結束后，哪里能買，哪里能體驗成為人們最為關注的幾大問題之一。盡管蘋果官方在發布會上給出的回答是明年早些時候發售，并且率先在美國市場上市。

▲ visionOS 開發計劃

但總有一小部分群體會得到蘋果的 " 優先權 "。據悉，蘋果會在庫比蒂諾、倫敦、慕尼黑、上海、新加坡和東京這六個地方設立開發者實驗室。由此可見，上海的蘋果開發者們或許成為國內首批 " 嘗鮮 " 的人。

此次，蘋果為開發者們提供 Vision Pro 開發工具包、visionOS 應用兼容測試以及其它服務。

十二、如何和其他設備產生聯動？UWB 芯片或成關鍵

Vision Pro 發布后，蘋果分析師郭明錤也在近日發表了他對 Vision Pro 的最新看法，并對蘋果進行了一些預測。他認為，iPhone 15 將配備超寬帶芯片，該芯片將改進與 Vision Pro 的集成。同時，Apple 積極升級 iPhone 硬件產品規格以建構更有競爭力的 Vision Pro 生態。

▲郭明錤推特

除了 iPhone，我們也在發布會上看到這樣一個畫面，只需要一眼，就可以將 Mac 畫面內容，移植到 Vision Pro 上。部分工程師認為，這本質上是在 Vision Pro 上運行 Mac 軟件。這曾是蘋果曾經 " 斃掉 " 的操作方式之一，因為 Vision Pro 的操作系統 visionOS 功能不夠，因為它基于 iOS，而 iOS 已經是 Mac 操作系統的精簡版。

同時，The information 近期也提到， Apple TV+ 團隊內，有一個在加利福尼亞州卡爾弗城的小組正在執行代號為 Z50 的項目，他們主要從內容包括為蘋果電視節目《史前星球》構建虛擬恐龍，又或者科幻節目《為了全人類》改編的其他內容。在蘋果自身的優勢上，蘋果正在從硬件、內容等多方面為 Vision Pro 加碼。

十三、13 年堅持收購 AR 創企，揭開 Vision Pro 背后的功臣們

在蘋果 Vision Pro 發布后，又傳出蘋果收購 AR 初創公司 Mira 的消息。據目前消息來看，Mira 在企業級應用以及硬件方面曾取得一定的成績。

從 2010 年開始，蘋果收購 AR 創企的消息就不斷被爆出，而從 Vision Pro 上，我們也能看到不少創企的 " 大招 " 有所體現。

▲蘋果收購 AR 企業歷程（圖源：VR 陀螺）

比如說，蘋果收購的創企中，Limbak 曾在 VR 頭顯鏡頭制作，以及 Pancake 方案有所創新，而 Vision Pro 的 3P Pancake 方案正是其成功的主要方向之一。而蘋果在空間視頻、辦公場景中展現的會議場景，或許也和蘋果在 2020 年收購 Spaces 團隊有關。Spaces 為 Zoom 提供 VR 套件和技術支持，讓用戶通過虛擬人物形象進行演示和匯報功能。

▲ Vision Pro 視頻會議場景

蘋果在眼動交互技術積累，也有部分得益于德國眼球追蹤公司 SensoMotoric Instruments，該公司成立于 1991 年，在眼動技術方面擁有超過 20 年的經驗積累。

可以看出，蘋果維持其較強的創新能力背后，也離不開其一次次精準的收并購，吸納優秀的團隊。或許，這方面，也是值得國內企業學習之處。

結語：將細節打磨極致，Vision Pro 提供創新新思路

喬布斯所幻想的 " 視頻頭顯 " 在 18 年后，成為空間計算時代的新鑰匙，正在掀起新一輪的交互革命的改變。

在蘋果的開發者課程中，我們看到 Vision Pro 較為優質的體驗來源于蘋果對用戶需求的細心觀察，以及將用戶感受放在第一的體驗。無論是對用戶雙眼的保護，還是試圖分析用戶注視行為背后的含義，蘋果都在以新的方式重新定義空間計算的交互方法。

但 Vision Pro 是否能夠重塑消費者的認知？平價版頭顯又將有哪些功能？我們或許還需要耐心等待市場的反饋。