題圖來自:Meta
他來了他來了,小紮帶着Meta Quest 3卷土重來了!
比起前幾年相對安靜的Meta Connect開發者大會,昨天深夜的這場大會相當震撼。
首先炸場的,就是今年六月就宣布的Quest 3。等了三個月,實際細節終于公布了。
而第二代眼鏡的強大功能,也讓現場觀衆在演示中不斷發出陣陣驚呼。
去年,價格過高的Meta Quest Pro銷量慘淡,6月,蘋果用Vision Pro給VR界樹立了全新的标杆。
現在,Meta已經被逼得箭在弦上了——它必須拿出東西來,證明一年300萬美元的錢沒白燒,矽谷的虛拟現實界,仍有它的一席之地。
在演講結束時,小紮總結道:MR+AI+智能眼鏡,這個組合就是未來。
在他看來,智能眼鏡意味着終點——把AI和頭顯都結合在了一起,硬件問題終于解決了。
Quest 3:首款MR頭顯亮相
世界上首款混合現實頭顯Meta Quest 3,終于面世了。
10月10日,Quest 3将正式上架,現在已經開放預購。
125GB版本起價499.99美元,512GB版本649.99美元。
最便宜的隻要3600塊,這個定價是把兩萬多塊的Vision Pro按在地上摩擦。
更不消說,Quest 3還不需要外接電池包這類東西。
VR帶來的沉浸式體驗,會把我們瞬間帶到違反物理定律的奇幻世界。而MR帶給我們的,則是與物理世界建立聯結。
通過Quest 3,你可以在VR和MR中随意切換。
而隻要雙擊Quest 3的側面,你就可以在VR體驗和MR的混合環境之間無縫過渡,選擇是完全身臨其境,還是讓虛拟元素疊加在周圍的物理環境中。
從《行屍走肉》的比較視頻中可以看出,它的視覺分辨率比Quest 2提高了30%,音域提升了40%,也比Quest 2更薄,重量分布更均衡,所以具有最大的舒适度。
我們可以在咖啡桌上彈奏虛拟鋼琴。
可以在眼前玩大型樂高。
可以和朋友一起玩遊戲。
也可以在客廳中打開一扇門,走進另一個世界。
與Quest 2相比,Quest 3的高保真全彩直通像素增加了10倍以上,這樣就能讓物理環境始終保持在我們的視線範圍之内。
在家裏就能和身處異地的朋友一起看NBA。
在你的客廳中,你可以放置任何虛拟現實物品。
比如在小紮客廳的照片牆上,就貼着他在沖浪的動圖。
每當走過客廳的這一角,就會看到栩栩如生的戶外風景。
處理器:巅峰性能,來自高通
Quest 3是世界首款采用全新骁龍XR2 Gen 2平台的設備,後者由Meta和骁龍合作開發。
它的圖形處理能力,達到了Quest 2的兩倍。
此外,這也是高通首次在VR頭顯芯片中,内置特征檢測和6DoF跟蹤功能。
它可以讓Quest 3等頭顯将"最密集"的任務之一轉移到專用芯片上,不僅讓用戶始終能夠在3D環境中保持方向,同時還能将功耗和延遲降低一半以上。
說到延遲,高通表示,頭顯現在可以提供全彩直通視頻,平均延遲僅爲12毫秒——和蘋果Vision Pro的定制R1芯片一樣快。
由此,Quest 3的加載時間也快如閃電,在沉浸式遊戲中會呈現出令人難以置信的高清細節。
介紹到《刺客信條 Nexus VR》時,小紮還難掩激動地說:"終于講到這兒了,我知道大家都在等這個,确實值得等待!"
鏡片更薄,分辨率更高
在Quest 3中,Meta采用了最先進的顯示器和光學元件。
與Quest 2相比,Quest 3的4K+無限顯示實現了近30%的分辨率大飛躍。
每度25像素,每英寸1218像素,讓Quest 3實現了整個Quest系列的最佳分辨率。
這也讓Quest 3的視覺效果非常壯觀,戴上它後,你簡直想要伸手去觸摸周圍的世界。
此外,在新一代Pancake技術的加持下,Quest 3不僅在光學剖面上比Quest 2減薄了40%,而且還不會影響視覺的沉浸感。
在舒适度上,Quest 3也比Quest 2有了提升。
因爲外形更薄,貼合度可以定制、重量分布更均衡,我們就可以在玩遊戲時得到最舒服的體驗。
100+ Xbox遊戲,任你玩
另外,小紮還宣布了一個好消息:Xbox Cloud Gaming将于12月登陸Quest 3,解鎖100+款遊戲。
其中就包括《我的世界》《Roblox》《Rumble》《XTADIU》等等,每月運行費用約爲16.99美元。
把辦公搬進元宇宙
有了Quest 3,以後你就可以在虛拟世界辦公了。
Word、Excel等辦公軟件,都可以使用。
上班也會變得更加"有趣"。
開源Llama2,重塑Meta全家桶
接下來,就到了最重要的AI時刻。
今年,Meta還沒有正式開過關于AI的發布會,都在默默地發布自己的開源模型。
先是,2月LLaMA大模型開源,一石激起千層浪,AI社區模型火炬徹底被點燃,壯大了"羊駝家族"。
緊接着,分割模型SAM、語音模型SeamlessM4T、多模态AI模型ImageBind、Code llama、Llama 2接連開源,已經打下了堅實的基礎。
正如小紮所說,"這隻是開始"。
接下來,就是要把AI帶入Meta全家桶,開啓不一樣的體驗。
"表情包生成器"Emu,5秒出圖
前幾天,OpenAI剛剛推出DALL·E 3,文生圖再次上升到一個新階段,甚至有網友紛紛表示R.I.P. MidJourney。
今天,小紮也推出了自家的人工智能圖像生成模型——Emu(Expressive Media Universe)。
Emu最大的特點,隻用簡單的文字,5秒即生圖片。
比如:"一隻在彩虹森林中的神仙貓咪"。
"徒步旅行者和北極熊"。
"水下的航天員"。
"在花叢中的一位女士"。
"如果恐龍是一隻貓咪"。
與其他文生圖模型相比,Emu最有趣的是,可以一鍵生成表情包。
當你正和人聊天時,不用絞盡腦汁,甚至去翻找一個合适的表情包。
比如,和朋友約好了背包旅行,想要發一個生動的準備去旅行的表情包。
"一隻快樂的刺猬騎着摩托車"。
選擇自己喜歡的一個,發送。
當然了,你還可以生成各種各樣的表情包,僅需要簡單幾個詞。
很快,任何人都可以在Ins中進行圖像編輯——重換風格和背景,背後就是由Emu和分割模型SAM加持。
重換風格,可以根據你所描述的風格,重構想像輸出圖片。
如下, 輸入"水彩",你的照片就立刻變成水彩畫了。
或者,把紮克伯格小時候的照片變成"搖滾朋克風格"。
又或者給金毛換一個"長頭發",就得到了:
你甚至可以爲圖片更換背景。
找到一張自己躺在草坪中的照片,輸入"被小狗包圍",一群可愛的小狗就伴你左右了。
又或者,家庭合照,背景可以随意切換。
Meta版ChatGPT終于來了
"我們每天,都會用不同的AI做不同的事"。
除了文生圖,小紮正式官宣Meta自家的人工智能聊天機器人——Meta AI,可以稱爲Meta版的ChatGPT。
Meta AI是基于開源模型Llama2打造的,同時還連接了微軟Bing搜索,能夠獲取實時信息。
你可以直接與它對話,甚至自研Emu加持,能夠聊天生圖。
想象一下,您和您的朋友正在群聊中讨論去聖克魯斯應該走哪條小路,Meta AI會在聊天中快速給出回答。
如果徒步旅行結束後,你想用一種有創意的方式來紀念這一天,怎麽辦?
Meta AI可以幫你。
輸入@MetaAI /imagine+描述性文本提示,比如 "創建一個帶有徒步旅行者和紅杉樹的徽章",就搞定了。
小紮介紹,Meta AI很快就可以在WhatsApp、Messenger、Instagram上使用。
最重要的是,今天全新發布的硬件産品Quest 3和二代眼鏡都将集成Meta AI。
角色宇宙
除此之外,你還可以在Meta AI上,玩轉各種角色。
也就是說,你可以得到28種不同的AI"明星助手",每個助手都有角色定義功能。
比如,當你想聊聊今天吃什麽,或者怎麽烹饪的時候。
你就可以找經驗豐富的廚師長Max,由洛杉矶最火的韓國籍廚師Roy Choi扮演。
又或者,你想寫一個AI人物的故事,你就可以找擅長創意寫作的Lily。
外出旅行,網紅打卡地推薦,旅行專家Lorena可以爲你提供建議。
美國說唱歌手"史努比狗狗"就是地下城主,引來台下觀衆一陣大笑。
小紮現場,還給親自做演示。
看得出來,他玩得是真開心!
AI Studio讓每個人開發自己的AI
演示結束後,小紮又推出了一個支持創建人工智能的平台AI Studio,讓會編碼,甚至不會編碼的人都可用。
對此,企業可以通過這個平台,創建改善客戶服務體驗的AI。
對于創作者來說,他們将能夠構建專爲元宇宙打造的AI應用。
另外,Meta還在打造一個沙盒,将于明年發布,讓任何人都可以嘗試創造自己的人工智能。
随着人工智能宇宙不斷發展壯大,Meta預計将把這個沙盒帶到元宇宙中,讓每個人有機會創建更高水平的人工智能。
Ray-Ban Meta:首款搭載Meta AI的智能眼鏡
本次發布會上的另一大亮點,就是全新的Ray-Ban Meta智能眼鏡了。
日常戴上它,你不用掏出手機就可以和朋友打電話。
戴上它,你還可以輕松實現第一視角的視頻拍攝。
随時随地向粉絲展示自己的生活,簡直是網紅必備神器!
而且,隻需雙擊兩下眼鏡上的按鈕,即可在手機和眼鏡的攝像頭之間實現無縫切換。
甚至還能讓你知道目前觀看直播的人數,和最新的評論是什麽。
功能這麽炸裂的産品,賣多少錢呢?起價299美元,10月17日上市。
這次,Meta在攝像頭、麥克風和揚聲器上都進行了大幅的升級。
可以說,從Ray-Ban Stories的500萬像素,升級到Ray-Ban Meta的1200萬像素超寬屏攝像頭,提升是非常明顯的。
畢竟上一款配備500萬像素後置攝像頭的蘋果手機,還是2010年推出的iPhone 4……
拍攝方面,照片分辨率直接從初代的2592 x 1984像素,直接躍升到了3024 x 4032像素。同時,還可以實現1080p 30幀的視頻錄制。
不僅如此,Meta還給眼鏡搭載了高通最新的骁龍AR1 Gen 1芯片。
雖然,AR1 Gen 1在性能上不是最強的,但它專門針對時尚、輕巧的智能眼鏡進行了優化,不會有過熱和燙傷臉部的風險。
具體來說,芯片采用了雙ISP設計,可同時進行照片和視頻拍攝,甚至可直接向社交媒體賬戶進行直播。
而對Wi-Fi 7和藍牙5.3的支持,也讓用戶可以更輕松地将素材分享到網上。
此外,AR1 Gen 1還具有端側AI(on-device AI)功能,不僅可以增強圖像和音頻質量,而且還可以進行視覺搜索和實時翻譯。
就芯片本身而言,AR1 Gen 1理論上可以支持分辨率高達1280 x 1280的嵌入式屏幕。
但遺憾的是,Meta并未在其智能眼鏡中加入任何AR技術——錄制的視頻不是3D的,也不能添加任何AR效果,眼鏡上也沒有顯示屏。
不過,在設計層面,新款的Ray-Ban Meta确實更加豐富了——不僅有Wayfarer和Headliner兩種鏡框,而且還有一系列顔色可以自由搭配。
其中,透明的藍色、黃色和黑色鏡框,還可以顯示出鏡腿上電路的形狀。
其他的升級還有:多達5個麥克風的陣列(包括鼻梁上的1個),不僅可以讓通話和語音指令更加清晰,而且還可以記錄視頻片段中的空間音頻。
鏡腿上搭載的開放式揚聲器,音量和低音效果也比初代更好。
鏡框更加輕薄,具備IPX4防水功能,充電後可持續使用4小時,在附帶的皮套中充電可再使用32小時或大約8次充電。
有了Meta AI,什麽都能做
然而,對于AI的升級,Meta可以說是畫了個大餅。
也就是說,今天全新發布的Meta AI,要等到明年才能上機。
等到那個時候,具備有多模态能力的Ray-Ban Meta,才算是一款完整的智能眼鏡——識别鏡頭拍攝到的物體、讀取眼前的文字都不在話下,甚至還能給照片或視頻配文。
如果你擅長給自家貓貓拍照,想分享給廣大網友,卻不擅長寫文案怎麽辦?
Meta AI也給你包了。
如果你正在旅遊,卻不知道眼前的景觀是什麽,可以直接問Meta AI。
根據眼鏡裏實時呈現的鏡像,它就能告訴你眼前是什麽。
不過,目前還不清楚,在得到完整AI加持之後的Ray-Ban Meta眼鏡,能不能充當一個智能助手的角色。
與此同時,它又該如何成爲一個"沒有屏幕"的AR類産品,也還是個謎。
但無論如何,在生成式AI大爆發的這一年,Meta也沒有落下。
這次發布會交出的答卷,可以說非常精彩,并不遜于蘋果的Vision Pro,而且後者目前還并未正式售賣。
這就更讓人期待矽谷巨頭們的MR大戰了。
參考資料:https://www.facebook.com/Meta/videos/1038522214125952/
本文來自微信公衆号:新智元 (ID:AI_era),作者:新智元