觀熱點：Vision Pro 交互設計，蘋果的陽謀

文 /VR 陀螺 元橋

距離蘋果發(fā)布新品已過半月左右，但庫克登場說出的那句話 " 正如 iPhone 帶我們進入移動計算時代，Apple Vision Pro 將帶我們進入空間計算時代 "，仍讓人感到興奮。

興奮的不僅僅是我們或將迎來的新時代，更有這款產(chǎn)品的交互設計對當下頭戴設備的影響。在 Vision Pro 發(fā)布半個月的時間中，可以看到諸多體驗過 Vision Pro 的博主都對這款產(chǎn)品的交互設計表示甚為驚喜；VR 陀螺近期也與諸多業(yè)內人士展開深度交流，能感受到大家對于蘋果的交互設計也都一致表示震感。

(資料圖)

畢竟 Vision Pro 擺脫了「手柄」外部操控器，用戶僅通過眼睛、手、語音便可與設備進行交互，并且眼動、手勢與語音之間是打通的，是一整套的交互方式。

毫無疑問，蘋果在重新定義 MR 交互方式的標準，而從每個技術上來看，Vision Pro 又是蘋果多年來布局的一個體現(xiàn)。

從初代 iPhone，看 Vision Pro 的交互設計

喬布斯是一位為產(chǎn)品設計而瘋狂的人，在每一個步驟上，他都會推進刪除與簡化，小到一顆螺絲釘?shù)牟季侄家?jīng)過幾個回合的篩選；由此，蘋果一直都以其精湛的硬件與軟件的設計、極簡的風格而聞名全球。

在設計蘋果系列產(chǎn)品時，喬布斯曾說 " 我們的設計思想就是「極致的簡約」，我們管理公司、設計產(chǎn)品、廣告宣傳的理念就是一句話——讓我們做得簡單一點，真正的簡單。"

2007 年第一代 iPhone 發(fā)布，喬布斯在演講中說道：

" 今天我們要推出三款同級別的革命性產(chǎn)品。首先是一臺帶觸控的寬屏 iPod，其次是一部革命性的手機，還有一款具有突破性意義的互聯(lián)網(wǎng)通信設備。所以，是三樣東西：一臺帶觸控的寬屏 iPod，一部革命性的手機，一款具有突破性意義的互聯(lián)網(wǎng)通信設備。一臺 iPod，一部手機，一款網(wǎng)絡通信器……你們明白我在說什么嗎？這不是三臺獨立的設備，這是一臺設備，我們叫它 iPhone"。

蘋果為了初代 iPhone 的到來，研發(fā)了 2 年多的時間。就在喬布斯登臺之前，他還召集了其團隊，告訴他們要記住那一刻，也就是 iPhone 問世之前的那一刻。因為，下一刻，一切都會改變。

確實，第一代 iPhone 的設計，多點觸摸功能的屏幕徹底改變了傳統(tǒng)手機按鍵式操作，打開了智能手機世界的大門，并且在后續(xù)機型中引入的 App Store，讓手機成為了真正的移動智能終端，主導了當時的黑莓、摩托羅拉等智能手機。

與第一代 iPhone 同年發(fā)布的黑莓 Curve 8310，因為實體鍵盤擠占了空間，所以屏幕只有 2.5 英寸

再回看 Vision Pro 的交互方式就如同 iPhone 的多點觸摸功能設計，摒棄了多余的工具，更加貼近人體的自然習慣，讓人類自己成為自然的交互工具，更重要的是 Vision Pro 讓頭戴設備充滿了「科幻的魅力」。據(jù)稱，Vision Pro 的交互簡單到用戶只需要 1 分鐘就能適應甚至零成本的學習，界面極度絲滑，窗口就像真實世界中的運動軌跡一樣。

視線掃過時的細膩動畫效果，圖源：蘋果

在 Vison Pro 發(fā)布之后，扎克伯格曾對蘋果頭顯發(fā)表了自己的看法，他認為「蘋果 Vision Pro 并沒有實現(xiàn) Meta 未探索技術領域的任何重大突破」。其實不僅扎克伯格這么看，業(yè)界幾乎也認為 Vison Pro 并沒有帶來創(chuàng)新。但能夠看出 Vision Pro 并不重在發(fā)明，它的每個點都讓人驚喜，亦是一種創(chuàng)新。在技術上來看，Vision Pro 幾乎顛覆了第三次人機交互的創(chuàng)新，對于人機交互的發(fā)展來說，邁出了極大的一步。

《時代》雜志作家格羅斯曼在 iPhone 發(fā)布之后，曾一針見血的指出 "iPhone 并沒有真正發(fā)明許多新的功能，而是讓這些功能實用很多。這很重要，如果工具不順手，我們往往會覺得自己太傻；如果工具太糟，我們也會覺得自己很遜；而如果有人改進了工具，我們就會覺得體驗很好，自己也很完美。"

格羅斯曼直接從人文的視角解釋了為什么蘋果的產(chǎn)品能夠大受歡迎，頭戴設備一直都未被大眾所接受，交互環(huán)節(jié)的「麻煩」便占據(jù)了其中一個原因。喬布斯也曾在一次采訪中談到的一個故事，" 一個 6 歲小男孩在未接觸過 iPad 的情況下，僅憑直覺就可以用手指在屏幕上滑動，啟動應用程序并玩游戲。"

如果頭戴設備的交互能夠簡單到如此地步，還會很難推進大眾市場？相信在兩三年之后，將會見證 Vision Pro 能否成為下一代空間計算平臺以及能否打開大眾市場。

其實，蘋果每一次新品發(fā)布都會伴隨交互方式的革新，如 Mac 的鼠標、iPhone 的多觸點功能、iPad 的 Apple Pencil 再到如今的 Vision Pro 的眼球、手勢與語音。可以說，正是因為有了每一次的交互革新，使用設備的潛能才真正被挖掘出來。

正如 2005 年喬布斯對微軟一款平板電腦的評論 " 因為配有一支手寫筆，這款產(chǎn)品就廢了。" 后來微軟的平板電腦也確實被蘋果顛覆了，不難看出好的交互設計對于用戶而言多么重要。

一般人類是通過最基礎的五官：眼（視覺）耳（聽覺）鼻（嗅覺）舌（味覺）身（觸覺）去感知世界。科技企業(yè)一直都在不斷嘗試模擬人類感知世界的五官，從而產(chǎn)生了各種各樣的終端產(chǎn)品，只是一直仍未看到一款產(chǎn)品可以真正解決人機交互上存在的缺陷。Vision Pro 的到來，極大滿足了人們對人機交互的想象。為了能夠很好理解 Vision Pro 的交互設計，以下將從眼動、手勢與語音三方面進行拆解。

眼動追蹤

眼動追蹤一直都是 AR/VR 產(chǎn)業(yè)有待攻破的一大技術難題，近兩年在很多新發(fā)布的 AR/VR 設備中已經(jīng)可以看到，越來越多的產(chǎn)品搭載了眼動追蹤技術，但整體體驗上并不是很流暢，甚至有的都沒有發(fā)揮這一技術的能力。

一方面，眼動追蹤的交互方式與手柄的配合十分不完美，用戶很難真正把手柄和眼動追蹤聯(lián)合起來運用。如果說疊加一項技術但又不能發(fā)揮這項技術的能力，那么就會讓人覺得這項技術只有酷炫。另一面，眼動追蹤對精準度的要求極高，如果技術不能做到及時捕捉眼睛的視線，就會導致定位不準，體驗感極差。

眼動追蹤技術研究的三大方向是眼球的注視點看向哪里、何時看、看多久，從而去捕捉用戶情緒。在 AR/VR 設備中，眼動追蹤的系統(tǒng)包含了近紅外光源、高分辨率攝像頭、以及圖像處理相關的算法，三者缺一不可。

因此，能夠真正把眼動追蹤發(fā)揮好，底層技術很重要。近期陀螺君寫了一篇《從 Vision Pro 一窺眼動追蹤交互的巨大潛力》分析了蘋果的眼動追蹤技術，可點擊詳閱。

目前，大多數(shù) AR/VR 設備采用的都是單芯片，在算法與圖像處理方面的表現(xiàn)力匱乏。喬布斯就曾評價過英特爾的芯片設計，直指該芯片的圖像處理方面太慢，應該有款芯片專門用來處理圖像。

多年來，終于在 Vision Pro 這款產(chǎn)品看到了協(xié)處理芯片的設計。Vision Pro 搭載 M2 與 R1 芯片，其中 R1 芯片為蘋果全新設計，專為頭顯處理攝像頭、傳感器的數(shù)據(jù)傳輸（包括 12 個攝像頭、5 個傳感器和 6 個麥克風的輸入）。

據(jù)蘋果表示：傳輸速率僅需 12 毫秒便可將內容同步到 Vision Pro 的屏幕上，幾乎沒有延遲，甚至可以達到比眨眼的時間快 8 倍，對比一下 Meta 的 Quest 3 就能夠直觀的感受到 Vision Pro 的裝置是有多「豪」了。

Vision Pro 與 Quest3 部分參數(shù)對比

為了能進一步提升注視點的準確性，蘋果還為 Vision Pro 搭配了精心設計的 UI，可以很好的輔助眼球追蹤的功能。

從目前 Vision Pro 的參數(shù)與體驗者的評價來看，Vision Pro 在技術上完全做到了快與準，甚至都未看到有相關視線定位不準或視線抖動的情況。同時，其眼動追蹤也做到了非常自然，用戶的眼睛注視圖標然后雙指捏合，即可打開新的應用，眼睛在菜單欄停留一段時間會自動彈出二級菜單 .......

眼動追蹤雖并非蘋果首創(chuàng)，但蘋果卻是首家將其作為核心交互方式的公司。不可否認，Vision Pro 的到來打開了眼動追蹤交互的潛力，更創(chuàng)新了眼睛 + 手勢 + 語音的整套打法。

裸手交互

在 AR/VR 剛興起時，業(yè)內就幾乎確認了裸手交互是未來 AR/VR 的發(fā)展趨勢，只是要想做好手勢交互的確認度，是一項極大的技術難題。

也正由于技術的受限，裸手交互這一方式就一直都未被完整的發(fā)揮出來。手部是我們日常生活中交互信息的一個很重要環(huán)節(jié)，除了嘴巴之外，手部是最常用的信息輸出肢體。

回看 PC 時代，即便最初會出現(xiàn)各種交互方式，最終都會落到鼠標、鍵盤，與手部相關的標準交互上。而發(fā)展下一代計算產(chǎn)品，手部交互仍很重要。在技術上未有突破的情況下，手柄是 VR 設備最好的交互方式，相較于裸手交互，手柄的準確度可以達到 100%，尤其體現(xiàn)在玩游戲的過程中，所以現(xiàn)在大多數(shù) VR 設備都采用手柄的交互方式。

此次蘋果放棄了手柄這一外部操控器的交互方式，將裸手交互真正發(fā)揮了出來，展現(xiàn)了與市場上其他玩家完全不同的策略。也可以說，蘋果意圖用最便捷的交互方式打開輕度場景的應用，將產(chǎn)品更進一步地推向大眾消費市場。

由于 Vision Pro 配備了四顆用于手勢識別的攝像頭，可以檢測腰部以下的手勢，用戶還可以把手放在膝蓋上進行操作，甚是輕松自如。

使用 Vision Pro，雙手可以自然搭在雙腿上

除此之外，Vision Pro 中的攝像頭還能夠非常精確地追蹤眼睛視線，眼睛的位置是一個關鍵因素，可用于確定你想用手勢進行互動的對象。例如，查看應用程序圖標或虛擬元素會將其作為目標并高亮顯示，然后可以執(zhí)行手勢；或者想要打開的 App，配合手部微小的動作就能完成操作。

還值得一提的是，Vision Pro 已經(jīng)可以實現(xiàn)虛擬鍵盤打字的方式。據(jù)了解，虛擬打字目前在觸感上還未達到理想的狀態(tài)，但蘋果內部已經(jīng)在著手優(yōu)化了。

蘋果實現(xiàn)虛擬鍵盤輸入

在人機交互層面，蘋果確實考慮到了用戶體驗的方方面面，蘋果幾乎將裸手交互發(fā)揮到了目前技術的極致，甚至讓交互方式從科幻走入了現(xiàn)實，也讓空間計算平臺的發(fā)展前進了一大步。

智能語音

在 ChatGPT 未發(fā)布之前，人工智能技術的發(fā)展已經(jīng)把語音交互提高到了可用的水平，而在 ChatGPT 發(fā)布之后，智能語音已經(jīng)成為十分自然的事情了。

在我們日常生活中，智能設備的出現(xiàn)越發(fā)普遍，用戶對語音的交互也更為熟悉。例如在智能家居中，天貓精靈、小度、蘋果的 Home 再到智能手表與智能座艙，音頻的實時交互幾乎串聯(lián)了我們所有生活的場景。

與此同時，淘寶、微信等 APP 的應用對語音輸入的支持，都讓智能的語音交互迸發(fā)出了旺盛的生命力。而作為下一代計算產(chǎn)品的 AR/VR，語音交互必然也會成為其標配。而且實時互動語音技術也能讓頭戴設備的形態(tài)、用戶體驗產(chǎn)生質的飛躍。

蘋果也將智能語音搭載進了頭戴設備中，還可配合眼睛與手勢進行交互。據(jù)稱，在 Vision Pro 中你可以通過語音呼叫 Siri，打開和關閉 App 或者頁面。VR 陀螺近期也寫了一篇文章，詳細分析了 Vision Pro 中的 AI 應用，可以點擊詳閱《深剖 Apple Vision Pro 中暗藏的 "AI"》。

Vision Pro 中呼喚 Siri

還值得一提的是，為了不使用戶和周圍的人隔絕，蘋果還開發(fā)了一個名為 Eyesight 的反透視功能，這也是 Vision Pro 的一大基礎交互設計。當有人在你附近時，設備看上去會是透明的，即讓用戶能夠看到身邊的人；而當你完全沉浸時，屏幕會暗下去，旁邊的人也會明白此刻的你注意不到他們。

從目前各個方面信息來看，蘋果完全創(chuàng)新了人機交互的方式，定義了頭戴設備「眼睛 + 手勢 + 語音」這一整套的交互標準，更為重要的是蘋果將這套交互方式也找到了合理的應用場景，落在辦公、視頻、家居與觀影上等輕度場景上，解決了交互方式與場景結合的難題。

Vision Pro 的到來對頭戴設備的影響就像初代 iPhone 的到來對手機市場的顛覆一般，或許并不會有初代 iPhone 那么受歡迎，但人機交互界面是時候該迎來下一場的發(fā)展了。

庫克將 Vision Pro 稱為下一代空間計算產(chǎn)品，并不是 AR/VR，不同于市面上完全追求沉浸感的 VR 產(chǎn)品，Vision Pro 追求的是虛擬與現(xiàn)實的融合，讓用戶可以在體驗沉浸感的同時也不會與外界隔離。

WWDC 2023 大會期間，陸川與蘋果副總裁展開了一番對話，其中特別令人印象深刻的是蘋果副總裁對 Vision Pro 到來總結的三點，他說：

" 第一，我們已經(jīng)感覺到，一個科技劃時代的時刻就要到來了。與其讓別人來顛覆我們蘋果，不如我們自己來。能顛覆蘋果的，只有我們自己。"

" 第二，我們感謝過去開發(fā)出的所有全系列蘋果產(chǎn)品，因為它們掙回的這些錢。我們可以不計成本的去投入開發(fā)一個劃時代的產(chǎn)品。我們干了六七年，就等今天。"

" 第三，也要感謝其他的蘋果產(chǎn)品，在這些產(chǎn)品的開發(fā)過程中。我們才能積累起足夠強大的技術，最后把所有的科技，集成在 Vision Pro 這一個產(chǎn)品上。"

從他的回答中，能夠看出蘋果對新一代產(chǎn)品的重視程度，以及也解釋了為什么這件事蘋果可以做成。第一，蘋果足夠的有錢，2022 年賬面現(xiàn)金流就已過千億；第二，蘋果的技術累計足夠的強，Vision Pro 完全體現(xiàn)了這一點。

VR 陀螺曾統(tǒng)計過，蘋果從 2010 年左右就開始陸續(xù)收購或投資了多家面部識別、眼動追蹤、空間定位、手勢識別、動作捕捉等 AR/VR 相關的企業(yè)。

最終這些收購的企業(yè)技術都落在了 Vision Pro 上，例如蘋果內部一直都認為頭戴設備用控制器操控是個很「惱人的工具」，由此收購的多家面部追蹤公司以及多個傳感器公司，用多個傳感器實時追蹤人眼和手勢讓操作做到了更簡單。

可以說是目前為止，Vision Pro 是真正一款面向大眾消費者的 MR 產(chǎn)品，你可以用它看電影、工作、娛樂、學習、聯(lián)系家人 / 朋友等。

如何打通大眾消費者，一直都是 AR/VR 努力的方向，但無奈多年來，無論是從硬件設計上還是場景應用上，AR/VR 都未能吸引大眾消費者的興趣，這也是業(yè)內為什么會一直都覺得 AR/VR 缺殺手級應用的原因。

但使用的不便捷也是讓諸多用戶避而遠之的一大因素，蘋果到來或將會真正轉變這一點。雖然從目前來看 Vision Pro 在價格與性能仍還有很多進步的空間，但 Vision Pro 確實讓人感知到空間計算時代正在到來，站在虛擬與現(xiàn)實的融合發(fā)展上，Vision Pro 標志了一個技術的新開端。

未來，隨著蘋果 MR 產(chǎn)品不斷迭代，或許將會替代掉電腦、iPad 與手機，實現(xiàn)萬屏歸一。

第一時間了解 XR 資訊

關注 VR 陀螺官網(wǎng)（vrtuoluo.cn）

VR 陀螺的聯(lián)系方式：

商務合作 | 投稿 ：

西瓜（微信號 18659030320）

六六（微信號 13138755620）

尋求免費曝光：

六六（微信號 13138755620）