國慶假期前一天,Meta 公司發布了最新的 VR 頭顯 Quest 3,輕薄的設計,更強調虛拟與現實融合的混合現實體驗,采用高通最新的骁龍 XR2 Gen2 芯片,隻賣 499 美元,可以說相當親民。
不過,當天 Meta CEO 紮克伯格用在 Quest3 身上的時間,遠不如發布會上講 AI 貼紙、 AI 陪聊機器人上面的長。也可以理解,畢竟 OpenAI 掀起的新一波人工智能浪潮,讓 AI 成爲所有巨頭最緊張也最期待的賽道。
紮克伯格展示 Quest 3 上玩 Xbox 遊戲|Meta Connect 2023
當 ChatGPT 将要吞噬一切,成爲唯一的互聯網入口的時候,依然有人記得,要用 XR 設備取代已經成名 20 年的智能手機,勇氣可嘉。
蘋果推出的高價 XR 頭顯 Vision Pro 再次點燃了人們對于混合現實行業的信心,Meta 的 Quest3 則希望以前者七分之一的加個,讓更多用戶體驗到混合現實功能的樂趣。
而要實現這個夢想,行業需要一個進展更迅速的底層基礎的進步。
MR 、 MR、還是 MR
如果說過去 Meta 所代表的曾經收購的 Oculus 公司,及其産品 Quest 是 VR 頭顯的頭牌,那麽随着時間推移,加上外部競争者如蘋果的加入,Meta 已經不得不加快從 VR 向 MR 的進化。
從兩天前的 Meta Connect 2023 大會上,Quest3 的内容演示上可以看出,混合現實類體驗的重要程度已經超過了單純的 VR 體驗。
一個重要的例證,就是來自積木廠商樂高的 Lego Bricktales MR 體驗,成爲開場第一個展示的内容。另一個例證,則是 QUest3 的外觀設計,三顆攝像頭在前面闆處以非常誇張的三道豎杠的形式展現出來,基本預示了新機将在 Video See Through 視頻穿透形式的 MR 體驗上進行發力。
根據國外體驗者的感受,有人甚至稱 Quest3 的透視模式,要比上一代機器好 10 倍,多少有點誇張,但可能并非虛言。畢竟,新一代機器的雙眼分辨率已經達到了 4K,并且視場角也擴大了,保證了視覺體驗方面的進步。
但要保證 MR 體驗的完美,還有一個底層基礎必不可少,就是芯片。
Quest3 搭載了最新的高通骁龍 XR2 Gen2 芯片,相比于上一代芯片,新的 XR2 Gen2 在 GPU 速度、交互以及鏈接方面的效果,都有較大提升:
GPU 速度
骁龍 XR2 Gen2 的 GPU 和前代相比實現了 2.5 倍的性能提升,能夠賦能驚豔的圖形效果和出色的色彩和細節。開發者可以充分利用新平台的 GPU 能力,提升應用和遊戲的視覺保真度,或是在同樣的視覺效果下節省 50% 的功耗。
交互優化
要達到 MR 混合現實體驗,設備需要對周圍環境、人手部、頭部和眼部動作進行多方位追蹤,對算力要求巨大。
骁龍 XR2 Gen2 的終端側 AI 能力,相比第一代骁龍 XR2 提升高達至 8 倍。骁龍 XR2 Gen2 支持 INT8,并優化了不同 AI 模塊之間的連接,以實現緊密的協同處理,同時擴展了終端側的内存。
混合現實
爲了在 MR 體驗中增加現實世界的存在感,現實世界将通過外置攝像頭實時流傳輸到頭顯屏幕上,并且需要視頻透視時延保持極低的水平,從而實現出色用戶體驗。通過對整個視頻透視線程進行全面優化,骁龍 XR2 Gen2 可以實現低至 12ms 的視頻透視時延。
同時,高通還通過幾何校正、降噪、動态亮度調整等技術,提升視頻透視的圖像質量。
從某種意義上說,高通在 XR 芯片上的持續努力,保證了主要廠商,能夠持續推出叠代産品,滿足幾乎對行業灰心了的消費者的期待。
AR 或者智能
Meta Connect 2023 大會上,同樣發布但是多少有點被忽視的是第二代 Ray-Ban Stories 智能眼鏡。這個售價 299 美元的電子産品,因爲和墨鏡品牌合作,多少讓人覺得有點像玩具,而非像 AR 眼鏡那樣的生産力工具。
新一代的 Ray-Ban Stories 智能眼鏡看起來更時尚了|Meta
這一點可能要賴在歐美青少年最喜愛的 Snap 身上,後者推出的 Spectacles 是真的用來拍攝影像的、可玩性很高的智能眼鏡。從某種意義上來看,這兩家社交巨頭推出的,其實是「社交眼鏡」,而非智能眼鏡。
但不可否認,這種輕量級的智能眼鏡,反而可能是未來 AR 眼鏡最有潛力的一個進化方向。
而要達成在有限尺寸和輕薄程度下,保證視聽體驗和續航,同樣要求硬件在底層基礎上的技術積累。
第二代 Ray-Ban Stories 眼鏡,采用了高通推出的骁龍 AR1 Gen1 芯片,這也是高通針對輕薄智能眼鏡打造的首個專用平台。
根據智能眼鏡的強項和弱勢,以及用戶的訴求,骁龍 AR1 Gen1 具有以下特性:
拍攝優化
骁龍 AR1 Gen1 采用 14-bit 雙 ISP,支持頂級即時拍攝體驗,同時我們還結合了智能手機上的諸多頂級特性,比如自動曝光、自動人臉檢測、計算 HDR 和人像模式。
AI 能力
AI 能力對于智能眼鏡至關重要,它能夠幫助增強照片和視頻的拍攝質量,通過降噪實現更清晰的通話,并通過計算機視覺實現更清晰的視頻拍攝,以及 Meta 在發布會上展示的視覺搜索能力。
配置靈活
骁龍 AR1 Gen1 是一款可擴展平台,旨在通過支持多種不同配置,爲 OEM 廠商提供靈活性:其中包括具備出色攝像頭和音樂功能、以圖像拍攝爲核心的智能眼鏡;支持單目顯示、完美支持提醒通知和導航應用的智能眼鏡;以及支持雙目顯示、具備更豐富視覺效果的更強大的智能眼鏡。
雖然媒體在不斷唱衰蘋果 Vision Pro 的銷量和進展,但不容懷疑的是,蘋果的加入确實讓之前幾乎一攤死水的 XR 行業,迎來了轉機。而作爲底層基礎的高通公司,依然在不斷推出叠代的芯片如 XR2 Gen2,AR1 Gen1,證明這家移動芯片大廠依然在關注 XR 行業,押注它有希望取代手機,成爲下一代計算平台,也确實能讓從業者放下心,繼續打造更好的 XR 産品。
頭圖來源:Meta