智東西(公眾號:zhidxcom)
作者 | 徐珊
編輯 | 云鵬
(資料圖片僅供參考)
蘋果 Vision Pro 頭顯的特別之處,遠不止發(fā)布會上 40 分鐘介紹的內(nèi)容。
智東西 6 月 26 日報道,半個月前,蘋果公司用其首款空間計算頭顯 Apple Vision Pro 點燃了整個 XR 賽道的熱情。在短短的 40 分鐘內(nèi),蘋果簡要介紹了 Vision Pro 的一些基礎(chǔ)功能和應(yīng)用場景。隨后,蘋果在其官網(wǎng)上線了多項開發(fā)者課程,從空間設(shè)計、交互等多個方面更加具體的介紹了 Vision Pro 內(nèi)多項有趣的設(shè)計。同期,有關(guān) Vision Pro 更多臺前幕后,不為人知的細節(jié)也隨著爆料逐漸呈現(xiàn)在大家面前。
▲蘋果多項開發(fā)者課程
喬布斯是如何看待頭顯類產(chǎn)品的?蘋果是如何學會 " 讀心術(shù) " 的?國內(nèi)誰會率先一睹 Vision Pro 的真容?有關(guān) Vision Pro,我們挖到了 13 個鮮為人知的細節(jié),揭開有關(guān) Vision Pro 臺前幕后的事。
一、喬布斯再次預(yù)言成功,稱頭顯產(chǎn)品是一個 " 奇跡 "
隨著近期人們對蘋果在 AR 領(lǐng)域的考古熱漸起,我們發(fā)現(xiàn)蘋果 " 教主 "18 年前就曾設(shè)想過 " 視頻耳機 " 的產(chǎn)品出現(xiàn),并且稱之為 " 奇跡般的產(chǎn)品 "。
2005 年,喬布斯曾在 D3 的采訪中提及盡管 PS 是非常好的游戲機,但是不能作為音樂播放器,也不能裝在口袋里。
▲喬布斯提及有關(guān) " 視頻耳機 "
然后他設(shè)想了一種新的產(chǎn)品思路:" 我可以裝在口袋里隨身攜帶,戴上后可以給我讓我看到家里 50 寸離子電視同樣能看到的東西。" 他在采訪時還提到,產(chǎn)品發(fā)布后,你既可以擁有優(yōu)秀的音頻體驗,還能獲得巨幕觀影體驗。
如今的 Vision Pro,不但能夠提供多樣的空間音頻體驗,而且還能提供環(huán)繞式巨屏觀影,也是對喬布斯曾經(jīng)的設(shè)想,回報出一份答卷。
二 、健身場景三大應(yīng)用尚未亮相,蘋果偷偷藏一手?
在 The information 的最新報道中,有不少蘋果內(nèi)部人士以及體驗過產(chǎn)品的媒體給出更為細致有關(guān) Vision Pro 的內(nèi)部信息。至少三位消息人士提到一些蘋果正在準備有關(guān)健身場景的內(nèi)容,健身場景曾是蘋果重點打造的場景之一。但蘋果卻沒有在發(fā)布會上披露任何 Vision Pro 健身場景的有關(guān)信息。
據(jù)悉,蘋果還曾專門為 Vision Pro 研發(fā)了三款健身軟件。一款是冥想軟件,隨著呼吸節(jié)奏的調(diào)整,有規(guī)律律動的樹葉會漸漸膨脹成球形,最后包圍著用戶。另一款則是太極應(yīng)用,該應(yīng)用程序?qū)⒅笇?dǎo)用戶練習太極。還有一款是瑜伽健康應(yīng)用程序,頭像將通過向下的攝像頭觀察用戶胸部來測量呼吸的程度和身體的變化。
據(jù)悉,蘋果內(nèi)部至少有三個小組成員正在為 Vision Pro 的健身場景所努力,如與耐克等運動品牌聯(lián)名打造健身運動、如何研發(fā)出更適合出汗、高強度鍛煉的面墊、甚至是如何在騎固定自行車時佩戴 Vision Pro 并與頭顯內(nèi)容互動等。
▲蘋果頭顯擁有一個外部電池組
但如今,Vision Pro 的介紹中并未展示健身場景的相關(guān)應(yīng)用,甚至是蘋果自身研發(fā)的三款健康軟件也尚未亮相。對其原因,蘋果員工內(nèi)部也有諸多猜測。一位蘋果頭顯前團隊成員表示,由于頭顯需要外部電池組,并有電線與之相連,所以蘋果可能并不公開討論一些健身案例。同時,頭顯的前置玻璃屏幕可能比較脆弱,無法承受家具或墻壁的撞擊。此外,他認為也有可能是此類應(yīng)用程序的內(nèi)容也根本沒有準備好。
三、Persona 其實是 " 閹割版 " 功能?Vision Pro 尚未實現(xiàn)全身追蹤
相信有不少人和我一樣,曾為蘋果的 Persona 功能感到驚艷。打開軟件,分分鐘 Vision Pro 就能幫你安排一個栩栩如生的寫實虛擬人上線。但根據(jù)媒體的最新爆料,我們現(xiàn)在看到的 Persona,并不是蘋果最初設(shè)想的版本。在蘋果的設(shè)想里,虛擬人應(yīng)該同樣是全身展示的。
▲蘋果頭顯 Persona 功能
據(jù)三位參與該設(shè)備工作的人士透露,蘋果曾聘請了 Weta FX 等特效公司的人員來共同開發(fā) " 在場 " 功能,為用戶打造一個栩栩如生的面部形象,甚至他們計劃在眉毛上安裝頭戴式攝像頭,以更準確地描繪一個人的面部表情。
據(jù)多名參與該設(shè)備開發(fā)的人士稱,盡管該方案最終并未被采用,但是 Persona 最初的設(shè)計版本也和如今不同。在 Persona 的最初設(shè)想里,Vision Pro 需要實現(xiàn)全身追蹤,這也是 Vision Pro 擁有兩個朝下攝像頭的原因之一。但由于目前尚未實現(xiàn) Vision Pro 全身追蹤方案,因此,現(xiàn)階段,Persona 僅看到用戶的上半身。
▲蘋果頭顯前部有兩個向下的攝像頭
在發(fā)布會的相關(guān)活動環(huán)節(jié),蘋果公司發(fā)言人曾在今年早些時候告知開發(fā)者,全身追蹤功能不會在今年上線。
四、將頭顯帶上天,Vision Pro 或擁有飛行模式
除了 The information 挖到了來自蘋果內(nèi)部的一手消息,外媒 MacRumors 也在 visionOS 1.0 測試版中發(fā)現(xiàn),該設(shè)備的操作系統(tǒng)可能有一個飛行模式選項,讓用戶可以在飛行期間使用。
系統(tǒng)內(nèi)部文件中的一個注釋提到如果您在飛機上,則需要保持旅行模式打開才能繼續(xù)使用 "Apple Vision Pro"。該注釋還提到它還會提示用戶需要 " 在旅行模式下保持原地不動 ",避免佩戴者在佩戴頭顯時四處走動,打擾到坐在他們旁邊的人。
在文件中,visionOS 中的其他文本指出 " 某些感知功能將被關(guān)閉 ",這或許表明該設(shè)備在飛行模式下可能不會使用其某些傳感器來進行空間感知,部分功能受限。
五、蘋果學會了 " 讀心術(shù) "?攝像頭正在猜測你的心
在發(fā)布會上,蘋果展示了一項略顯神奇的功能:當你看向界面中的任意圖標時,界面就能精準呈現(xiàn)出你看的圖標被選中,并隨著你的注視時間呈現(xiàn)子菜單或者進入等多種變幻方式。
蘋果認為眼睛意圖(eye intention)是非常重要且敏感的信息。" 眼睛是空間體驗的主要瞄準機制,所有的界面都會對您的視線做出反應(yīng)。我們都能通過觀察眼睛,來瞄準界面中的任意元素,無論它有多遠。" 蘋果設(shè)計團隊的員工在開發(fā)者課程中說。
比如說,當你長期注釋著某個喜愛的照片時,眼睛會轉(zhuǎn)動的很快,系統(tǒng)就會知道你對它十分感興趣,時刻準備著向你展示更多的信息。再如說,當你使用停留控制功能時,你可僅用眼睛選中某個內(nèi)容。
▲眼神視線變化直觀在圖標上展示
當然,蘋果也提到,被人看透的 " 眼睛意圖 " 是非常敏感的信息,因此在處理數(shù)據(jù)的時候,保護隱私是首要任務(wù),用戶主動選擇相應(yīng)的功能后,系統(tǒng)才會向你展示新的信息。
蘋果在眼動技術(shù)方面的積累多年。在和眼動追蹤技術(shù)相關(guān)的廠商交流后,我們了解到蘋果曾利用 iPhone 的眼動技術(shù)在廣告領(lǐng)域獲取相應(yīng)的信息,比如說,通過用戶停留在手機界面的某個產(chǎn)品上的目光時長,推測其用戶喜好,并將其記錄。
除此之外,蘋果研發(fā)人員 Crispin 也在 Twitter 上曾爆料稱,其在蘋果頭顯團隊工作多年,主要攻克的方向就是通過監(jiān)測身體和大腦的數(shù)據(jù),在沉浸式體驗中能夠準確識別用戶的精神狀態(tài)。
由此可見,你的眼睛正在悄悄出賣你,蘋果正在通過其積累多年的眼動技術(shù)來讀懂你的心。
六、為什么圖標都是圓形邊框?蘋果:為了保護雙眼
盡管不少產(chǎn)業(yè)人士都能預(yù)測眼動追蹤技術(shù)是頭顯的關(guān)鍵交互方式之一,此前業(yè)內(nèi)也有高端頭顯搭載了眼動追蹤模組,但是相較而言,蘋果的眼動識別似乎精準度更高,其交互玩法也更多樣。
在蘋果的開發(fā)者課程中,設(shè)計團隊負責人曾反復(fù)提到一句話 " 要注意,眼睛目標的元素所需要的最小點為 60pt(UI 設(shè)計單位,邏輯像素點)。" 這也隱約向我們透露蘋果頭顯 UI 設(shè)計的最小值。
▲選擇圓矩形圖標設(shè)計
同時,在設(shè)計圖標時,蘋果還溫馨提醒設(shè)計者,要使用圓形、藥丸形、或者圓角矩形等設(shè)計方式。因為當圖標時,邊緣鋒利的形狀會讓用戶的眼睛聚焦在鋒利的邊框上,從而降低眼睛的精準度,而且還會造成用眼疲勞。
可以看出,蘋果也是從多方面觀察你的注視動向,并且將每一次注視的力量發(fā)揮到關(guān)鍵之處。
七、Meta 謀劃多年的虛空鍵盤竟給蘋果搶先了
除了眼動技術(shù)之外,手勢也是蘋果頭顯的關(guān)鍵交互方式之一。人們對虛擬鍵盤的設(shè)想,早在各類科幻電影中頻頻出現(xiàn)。蘋果也在發(fā)布會通過一閃而過的畫面展示了虛擬鍵盤已經(jīng)從科幻電影走向現(xiàn)實。
▲ Meta 研究如何通過肌電手環(huán)實現(xiàn)交互
當 Meta 正在研究如何通過肌電手環(huán),實現(xiàn)虛擬打字場景的時候,蘋果已經(jīng)通過裸手交互和虛擬鍵盤相配合的方式,實現(xiàn)虛擬打字。當然,蘋果自己也提到設(shè)計相關(guān)場景時,要考慮到 " 輸入的時間太長,手會很累 " 的問題。
在使用虛擬鍵盤的時候,當用戶的手在虛擬鍵盤上時,虛擬鍵盤的按鍵會顯示一個懸停狀態(tài)和一個高亮狀態(tài)。隨著手指越靠近按鍵表面,按鍵表面亮度會越亮。
▲蘋果實現(xiàn)虛擬鍵盤輸入
在演示視頻中,蘋果也直接提到了虛擬鍵盤的弊端——觸感缺失。" 我們要通過用音量、圖形和效果變換來彌補出現(xiàn)的頭顯效果。" 蘋果設(shè)計團隊的員工說道。
他還提到當手指接觸到虛擬鍵盤按鍵時,虛擬鍵盤的變化速度會特別快,并伴隨著相應(yīng)的空間音效。這些變化能夠幫助用戶彌補缺少的觸覺信息,讓用戶和虛擬鍵盤之間的交互可具有可靠感和反饋感。
當然,除了虛擬鍵盤本身以外,Vision Pro 也支持外部鍵盤接入配合使用的方式。從現(xiàn)有的視頻效果來看,蘋果的虛擬鍵盤背后,既有眼動追蹤和實時渲染的技術(shù)支持,同樣也有蘋果在手勢交互精準度的 " 苦功夫 ",以及蘋果在整個用戶體驗層面的多重優(yōu)化。
八、眼睛竟成 " 放大鏡 ",眨眨眼就自動放大圖片
當眼動交互和手勢交互相結(jié)合的時候,蘋果發(fā)明了不少新玩法,其中之一就是將眼睛變成 " 放大鏡 ",只需要動動雙眼,結(jié)合縮放手勢,你就可以直接放大圖像的某個 角落。
" 將視線方向與手勢相結(jié)合,我們可以創(chuàng)建精確且令人滿意的交互,這在其他平臺上是不可能的。" 蘋果設(shè)計團隊發(fā)言人驕傲地說道。
他解釋到,當你看向圖片的某個位置,并做出縮放手勢后,系統(tǒng)將以你當時的注視點作為原點,縮小或者放大圖片,并且該處圖像還會直接居中,呈現(xiàn)在用戶面前。
▲根據(jù)視線精準放大圖片
蘋果還舉了另一個例子,在繪圖中,你可以用手擋做畫筆直接涂抹寫,但是當你的目光轉(zhuǎn)向畫布的任一角落,并且用手輕輕點擊一下,你的畫布將會自動調(diào)整到剛剛目光所注視的位置。
在蘋果看來,眼手協(xié)同的方式,不僅能夠簡單快捷地執(zhí)行命令,并且還能精準實現(xiàn)轉(zhuǎn)移。
九、站在在大劇院做匯報?Keynote 成舞臺提詞器
在空間設(shè)計開發(fā)者課程中,蘋果舉了一些例子講述空間感將會給用戶帶有哪些體驗升級。比如說,自適應(yīng)的窗口設(shè)置、光線的變化等。其中比較有趣的一項功能,就是 Keynote 的演講模式升級。
在頭顯應(yīng)用內(nèi)的 Keynote 排練演示功能中,用戶將進入一個環(huán)繞式劇院內(nèi),而演示的文稿則會在左下角顯示。這樣的方式,就和登上大舞臺的演講家一樣,而 Keynote 則成為了提詞器面板。
▲沉浸式演講模式
相比此前的演講方式,這樣的排練更加真實,也更加具有沉浸感。也許,社恐們在這樣的演練下,會增加幾分 " 抗性 ",在演講時獲得更好的成績。
從 Keynote 的升級中,我們可以看到在 " 移植 "iOS 和 iPadOS 等原生應(yīng)用上,蘋果不僅是將內(nèi)容和功能遷移過來了,并且還結(jié)合頭顯所特有的 " 沉浸式 " 和 " 空間感 " 做了不小的升級。
十、30min 頭顯體驗有 " 貓膩 "?AR/VR 光學專家提出質(zhì)疑
在發(fā)布會結(jié)束后,有一小部分媒體獲得 " 優(yōu)先體驗權(quán) ",在驚嘆聲和激動聲中,人們對頭顯的期待值不斷拉高。但也有部分專家發(fā)現(xiàn),這頭顯體驗環(huán)節(jié)似乎通過巧妙的設(shè)計避開了部分關(guān)鍵功能體驗。
AR/VR 光學專家 Karl Guttag 率先發(fā)聲,從體驗時長、安全性、人體工學、算法以及眩暈等多方面提出質(zhì)疑。
在體驗時長上,幾乎每位體驗的媒體都在工作員工的指導(dǎo)下獲得 30 分鐘的體驗時間。30min 的體驗,能避開 Vision Pro 一些潛在的遺憾。比如說,佩戴時間太長,頭顯的重量造成的不適感,續(xù)航時長的問題等等。
▲ Vision Pro 實物圖
在體驗場景上,蘋果設(shè)定的固定體驗功能,并未涉及到大范圍的動作。這也從一定程度減少了眩暈的出現(xiàn)。Guttag 也表示,在眩暈方面,目前蘋果的低延遲、高刷新率方案,不足以解決現(xiàn)有頭顯類的視覺問題。
而且,據(jù) The information 報道,沒有一個蘋果高管或者蘋果員工在公開場合展示其部分特殊功能,如 Eyeslight、虛擬鍵盤等。這或許意味著蘋果硬件以及相關(guān)功能,仍未達到較為穩(wěn)定的程度。
我們鮮少看到有媒體戴著頭顯四處走動,Vision Pro 頭顯的透視方式能否保證用戶能夠順利感知到四周環(huán)境的危險,蘋果頭顯的安全性方面也被打上了問號。
在 Vision Pro 頭顯和消費者們見面前,我們?nèi)詫@款革命性的產(chǎn)品保持尊重和好奇的心態(tài),期待其與我們的見面。
十一、上海開發(fā)者或成國內(nèi)首個見到 Vision Pro 的群體
在發(fā)布會結(jié)束后,哪里能買,哪里能體驗成為人們最為關(guān)注的幾大問題之一。盡管蘋果官方在發(fā)布會上給出的回答是明年早些時候發(fā)售,并且率先在美國市場上市。
▲ visionOS 開發(fā)計劃
但總有一小部分群體會得到蘋果的 " 優(yōu)先權(quán) "。據(jù)悉,蘋果會在庫比蒂諾、倫敦、慕尼黑、上海、新加坡和東京這六個地方設(shè)立開發(fā)者實驗室。由此可見,上海的蘋果開發(fā)者們或許成為國內(nèi)首批 " 嘗鮮 " 的人。
此次,蘋果為開發(fā)者們提供 Vision Pro 開發(fā)工具包、visionOS 應(yīng)用兼容測試以及其它服務(wù)。
十二、如何和其他設(shè)備產(chǎn)生聯(lián)動?UWB 芯片或成關(guān)鍵
Vision Pro 發(fā)布后,蘋果分析師郭明錤也在近日發(fā)表了他對 Vision Pro 的最新看法,并對蘋果進行了一些預(yù)測。他認為,iPhone 15 將配備超寬帶芯片,該芯片將改進與 Vision Pro 的集成。同時,Apple 積極升級 iPhone 硬件產(chǎn)品規(guī)格以建構(gòu)更有競爭力的 Vision Pro 生態(tài)。
▲郭明錤推特
除了 iPhone,我們也在發(fā)布會上看到這樣一個畫面,只需要一眼,就可以將 Mac 畫面內(nèi)容,移植到 Vision Pro 上。部分工程師認為,這本質(zhì)上是在 Vision Pro 上運行 Mac 軟件。這曾是蘋果曾經(jīng) " 斃掉 " 的操作方式之一,因為 Vision Pro 的操作系統(tǒng) visionOS 功能不夠,因為它基于 iOS,而 iOS 已經(jīng)是 Mac 操作系統(tǒng)的精簡版。
同時,The information 近期也提到, Apple TV+ 團隊內(nèi),有一個在加利福尼亞州卡爾弗城的小組正在執(zhí)行代號為 Z50 的項目,他們主要從內(nèi)容包括為蘋果電視節(jié)目《史前星球》構(gòu)建虛擬恐龍,又或者科幻節(jié)目《為了全人類》改編的其他內(nèi)容。在蘋果自身的優(yōu)勢上,蘋果正在從硬件、內(nèi)容等多方面為 Vision Pro 加碼。
十三、13 年堅持收購 AR 創(chuàng)企,揭開 Vision Pro 背后的功臣們
在蘋果 Vision Pro 發(fā)布后,又傳出蘋果收購 AR 初創(chuàng)公司 Mira 的消息。據(jù)目前消息來看,Mira 在企業(yè)級應(yīng)用以及硬件方面曾取得一定的成績。
從 2010 年開始,蘋果收購 AR 創(chuàng)企的消息就不斷被爆出,而從 Vision Pro 上,我們也能看到不少創(chuàng)企的 " 大招 " 有所體現(xiàn)。
▲蘋果收購 AR 企業(yè)歷程(圖源:VR 陀螺)
比如說,蘋果收購的創(chuàng)企中,Limbak 曾在 VR 頭顯鏡頭制作,以及 Pancake 方案有所創(chuàng)新,而 Vision Pro 的 3P Pancake 方案正是其成功的主要方向之一。而蘋果在空間視頻、辦公場景中展現(xiàn)的會議場景,或許也和蘋果在 2020 年收購 Spaces 團隊有關(guān)。Spaces 為 Zoom 提供 VR 套件和技術(shù)支持,讓用戶通過虛擬人物形象進行演示和匯報功能。
▲ Vision Pro 視頻會議場景
蘋果在眼動交互技術(shù)積累,也有部分得益于德國眼球追蹤公司 SensoMotoric Instruments,該公司成立于 1991 年,在眼動技術(shù)方面擁有超過 20 年的經(jīng)驗積累。
可以看出,蘋果維持其較強的創(chuàng)新能力背后,也離不開其一次次精準的收并購,吸納優(yōu)秀的團隊。或許,這方面,也是值得國內(nèi)企業(yè)學習之處。
結(jié)語:將細節(jié)打磨極致,Vision Pro 提供創(chuàng)新新思路
喬布斯所幻想的 " 視頻頭顯 " 在 18 年后,成為空間計算時代的新鑰匙,正在掀起新一輪的交互革命的改變。
在蘋果的開發(fā)者課程中,我們看到 Vision Pro 較為優(yōu)質(zhì)的體驗來源于蘋果對用戶需求的細心觀察,以及將用戶感受放在第一的體驗。無論是對用戶雙眼的保護,還是試圖分析用戶注視行為背后的含義,蘋果都在以新的方式重新定義空間計算的交互方法。
但 Vision Pro 是否能夠重塑消費者的認知?平價版頭顯又將有哪些功能?我們或許還需要耐心等待市場的反饋。
頭條 23-06-27
頭條 23-06-27
頭條 23-06-27
頭條 23-06-27
頭條 23-06-27
頭條 23-06-27
頭條 23-06-27
頭條 23-06-27
頭條 23-06-27
頭條 23-06-27
頭條 23-06-27
頭條 23-06-27
頭條 23-06-27
頭條 23-06-27
頭條 23-06-27
頭條 23-06-27
頭條 23-06-27
頭條 23-06-27
頭條 23-06-27
頭條 23-06-27
頭條 23-06-27
頭條 23-06-27
頭條 23-06-27
頭條 23-06-27
頭條 23-06-27
頭條 23-06-26
頭條 23-06-26
頭條 23-06-26
頭條 23-06-26
頭條 23-06-26
頭條 23-06-26
頭條 23-06-26
頭條 23-06-26
頭條 23-06-26
頭條 23-06-26
頭條 23-06-26
頭條 23-06-26
頭條 23-06-26
頭條 23-06-26
頭條 23-06-26
頭條 23-06-26
頭條 23-06-26
頭條 23-06-26
頭條 23-06-26
頭條 23-06-26
頭條 23-06-26