今天,在一年一度的 WWDC 全球開發(fā)者大會(huì)上,蘋果發(fā)布了一款名為 Vision Pro 的頭顯產(chǎn)品,這是 Tim Cook 自 2011 年上任以來,繼 Apple Watch 之后的第二個(gè)主要產(chǎn)品線擴(kuò)展。
Tim Cook 告訴聽眾:“這一天我們期待已久?!?“我相信增強(qiáng)現(xiàn)實(shí)是一項(xiàng)深?yuàn)W的技術(shù)。將數(shù)字內(nèi)容與現(xiàn)實(shí)世界融合可以解鎖前所未有的體驗(yàn)?!?/p>
“Vision Pro 是一種新型計(jì)算機(jī)。這標(biāo)志著計(jì)算新時(shí)代的開始?!薄癕ac 帶來了個(gè)人計(jì)算,iPhone 帶來了移動(dòng)計(jì)算,而 Apple Vision Pro 為我們帶來了空間計(jì)算?!?/p>

Apple Vision Pro 足夠輕薄,外形酷似滑雪護(hù)目鏡,還具有一個(gè)外向顯示屏,可以通過 EyeSight 系統(tǒng)顯示眼球運(yùn)動(dòng)和面部表情。當(dāng)用戶正在通過 Vision Pro 查看內(nèi)容時(shí),顯示屏?xí)霈F(xiàn)光環(huán)閃爍,向其他人表明這位用戶正沉浸在 AR 世界中。但當(dāng)任何人或物體進(jìn)入視線之內(nèi),Vision Pro 會(huì)將其聚焦。

蘋果表示, Vision Pro 是蘋果數(shù)十年高性能、移動(dòng)和可穿戴設(shè)備設(shè)計(jì)經(jīng)驗(yàn)的結(jié)晶,最終造就了 蘋果有史以來最雄心勃勃的這一產(chǎn)品,它可以改變溝通、寫作、工作、娛樂等場景。
Vision Pro 售價(jià) 3499 美元(約 24860 元人民幣),將于明年上市。
革命性的操作系統(tǒng)
正如 iPhone、iPad、Mac 和 Apple Watch 一樣,Apple 硬件性能的好壞取決于它所基于的操作系統(tǒng)。為了匹配 Vison Pro,蘋果今天也發(fā)布了與之相配的操作系統(tǒng) VisonOS,稱之為“世界上第一個(gè)空間操作系統(tǒng)”。
visionOS 建立在 macOS、iOS 和 iPadOS 的基礎(chǔ)上,包括了 iOS 和空間框架、多應(yīng)用 3D 引擎、音頻引擎、專用渲染器子系統(tǒng)和實(shí)時(shí)子系統(tǒng)。在架構(gòu)層面,visionOS 與 MacOS 和 iOS 共享核心模塊,新增加的“實(shí)時(shí)子系統(tǒng)”,用于處理 Apple Vision Pro 上的交互式視覺效果。

visionOS 具有全新的三維界面,讓用戶在物理世界中看到并感受數(shù)字內(nèi)容。新的三維界面將應(yīng)用程序從傳統(tǒng)顯示器的邊界中解放出來,讓它們可以以不同的比例并排顯示,通過動(dòng)態(tài)響應(yīng)自然光和投射陰影,它可以幫助用戶了解比例和距離。
與其他 AR/VR 操作系統(tǒng)不同,visionOS 真正改變了用戶操作 Vision Pro 的方式。蘋果無控制器輸入系統(tǒng)消除了對(duì)任何額外硬件組件的需求。要與 UI、應(yīng)用程序或其他操作系統(tǒng)組件進(jìn)行交互,你可以通過簡單地注視、輕敲手指或使用語音指令來瀏覽應(yīng)用程序。
具體來說,首先你只需要看向虛擬空間中的應(yīng)用程序或按鈕。然后將手指懸停在空中,Vision Pro 將毫無延遲地響應(yīng)你的手勢(shì)。

為此,蘋果在機(jī)身上放置了 12 部攝像頭、5 個(gè)傳感器和 6 個(gè)麥克風(fēng)組成的傳感器陣列,捕捉動(dòng)作,讓用戶無需遙控器或者手柄,就可以通過眼神的挪動(dòng),手指的開合以及語音指令與 Apple Vision Pro 進(jìn)行交互。
visionOS 還包含兩個(gè) 4K 分辨率的微型 OLED 屏幕(每只眼睛 5120x4096?每只眼睛的像素比 4K 電視還多!)將 12 個(gè)攝像頭、三塊屏幕(加上外向顯示屏)集中在同一個(gè)設(shè)備上,實(shí)際上是一個(gè)前所未聞的產(chǎn)品設(shè)計(jì)方式。Apple Vision Pro 還用了一顆 R1 芯片,解決畫面的延遲和抖動(dòng)問題,R1 可在 12 毫秒內(nèi)將新影像串流至顯示器,比眨眼還要快 8 倍。
而要讓這么多硬件聯(lián)動(dòng)起來發(fā)揮出作用,讓計(jì)算變得無處不在,背后的操作系統(tǒng)必須同樣優(yōu)秀。Apple 技術(shù)開發(fā)副總裁 Mike Rockwell 說,“通過硬件和軟件的緊密集成,我們?cè)O(shè)計(jì)了一款緊湊型可穿戴外形的獨(dú)立空間計(jì)算機(jī),這是有史以來最先進(jìn)的個(gè)人電子設(shè)備?!?/p>
更為夸張的是,蘋果還將機(jī)器學(xué)習(xí)融入到了產(chǎn)品中。根據(jù)蘋果的一位前設(shè)計(jì)師發(fā)布的推文,我們還可以看出 Vision Pro 并不是簡單地響應(yīng),它還會(huì)進(jìn)行“預(yù)測”:
“最酷的結(jié)果之一是會(huì)用戶實(shí)際行動(dòng)之前預(yù)測用戶會(huì)點(diǎn)擊某些東西。這是一項(xiàng)艱巨的工作,也是我引以為豪的事情。你的瞳孔在你點(diǎn)擊之前會(huì)做出反應(yīng),部分原因是你自己會(huì)預(yù)測在你點(diǎn)擊之后發(fā)生的事情。因此,蘋果可以通過監(jiān)視用戶的眼睛行為,并實(shí)時(shí)重新設(shè)計(jì) UI 以創(chuàng)建更多這種預(yù)期的瞳孔反應(yīng),從而創(chuàng)建用戶大腦的生物反饋。這是一個(gè)通過眼睛進(jìn)行的粗糙的腦機(jī)接口,但非??帷!?/span>


截圖來源:https://twitter.com/sterlingcrispin/status/1665792422914453506
同時(shí),該操作系統(tǒng)也一樣注重安全和隱私,系統(tǒng)中融入了一種新的安全身份驗(yàn)證系統(tǒng) Optic ID,可在各種不可見的 LED 光照射下分析用戶的虹膜,然后將其與受 Secure Enclave 保護(hù)的注冊(cè) Optic ID 數(shù)據(jù)進(jìn)行比較,以立即解鎖 Apple Vision Pro。用戶的 Optic ID 數(shù)據(jù)已完全加密,應(yīng)用程序無法訪問,眼動(dòng)追蹤信息也不會(huì)與 Apple、第三方應(yīng)用程序或網(wǎng)站共享。
換句話說,來自攝像頭和傳感器的數(shù)據(jù)在系統(tǒng)級(jí)別進(jìn)行處理,應(yīng)用程序無法使用,這意味著它們無法秘密捕捉用戶的周圍環(huán)境。
就像 Tim Cook 所說的,Vision Pro 定位是一臺(tái)全功能“新型計(jì)算機(jī)”,這個(gè)和 Quest 等產(chǎn)品“頭戴顯示器”本質(zhì)不同,所以會(huì)有前置攝像頭拍 3D 視頻這樣的驚艷應(yīng)用,也才有虹膜識(shí)別這樣的安全需求。
為開發(fā)者培育新市場
新操作系統(tǒng)的發(fā)布對(duì) Apple 和開發(fā)者來說都是一個(gè)重要時(shí)刻。隨著 Apple 發(fā)布這款新耳機(jī),我們幾乎肯定會(huì)看到大量開發(fā)人員開發(fā)應(yīng)用程序,嘗試?yán)眯缕脚_(tái),希望成為下一個(gè)熱門產(chǎn)品。
蘋果表示,visionOS 將擁有一個(gè)全新的 App Store,人們可以在其中下載 Vision Pro 應(yīng)用程序,而 Vision Pro 將能夠運(yùn)行“數(shù)十萬熟悉的 iPhone 和 iPad 應(yīng)用程序”。visionOS 支持第三方開發(fā)人員重新設(shè)計(jì)的 Apple 應(yīng)用程序套件和體驗(yàn),iPad 應(yīng)用程序可以相對(duì)輕松地被移植到該平臺(tái)上。
Apple 已經(jīng)與多家媒體公司合作,將他們的產(chǎn)品和內(nèi)容帶入新的 Vision Pro 生態(tài)系統(tǒng)。迪士尼首席執(zhí)行官 Bob Iger 宣布 Disney+ 從第一天起就可以在 Vision Pro 上使用。鑒于這款頭戴式耳機(jī)從首次發(fā)布到上市之間的時(shí)間很長,我們預(yù)計(jì)會(huì)有更多的開發(fā)人員加入。
在發(fā)布時(shí),visionOS 將提供來自 Adobe(特別是 Lightroom)、微軟(Teams 和 Office)、思科(WebEx)Zoom 和其他主要開發(fā)商的應(yīng)用程序——包括在 Vision Pro 上本地運(yùn)行的 Unity 應(yīng)用程序。
此外,該操作系統(tǒng)還能運(yùn)行特定的教育應(yīng)用程序。給我們印象最深的是一款用于查看人體渲染圖的醫(yī)療軟件。公告視頻顯示了人體心臟的分解圖,包括心室和肺動(dòng)脈。有一個(gè)工程應(yīng)用程序可以幫助人們形象化某些物理現(xiàn)象,例如空氣是如何流過賽車的。

Apple 肯定希望它的新操作系統(tǒng)有朝一日成為 iOS 級(jí)別的主宰,成為一款未來的金錢“蟲洞”。
這個(gè)能夠同時(shí)運(yùn)行多個(gè)應(yīng)用程序,擁有 3D 引擎,讓每只眼睛都擁有 5120x4096 高分辨率屏幕的全新軟件平臺(tái),無疑能成功地吸引到開發(fā)者的關(guān)注。為這個(gè)平臺(tái)重新設(shè)計(jì)現(xiàn)有的 iOS 應(yīng)用程序?qū)⑹情_發(fā)者競相嘗試的下一件大事。一位 Linux 開發(fā)者對(duì)此激動(dòng)評(píng)價(jià)道:“我迫不及待地想看看這會(huì)帶來什么可能性?,F(xiàn)在我需要收拾下震撼的心情并開始為這項(xiàng)未來技術(shù)做些儲(chǔ)備。誰知道會(huì)不會(huì)在不久的將來,我只用小聲說‘Siri’,而不再輸入‘sudo’?!?/p>