題圖 | 視覺中國
一項技術從大膽設想到成為現實,再到改變人類生活需要多久?
在通信和交通技術不算發達的時代,十年乃至幾十年都是尋常事,很多超越人類當下技術能力的設想剛剛被提出時,常常會被誤解,直到它真正成為現實生活中的一部分,這中間總需要很長時間驗證。
但元宇宙的發展速度遠超人們的想象,今年的 CES2023(國際消費類電子産品展覽會),規模比 2022 年增長了 70%,元宇宙成為技術焦點,全球衆多大廠都在 AR/VR 新品及元宇宙生态布局繼續發力,産品類目與功能令人目不暇接。
2022 年,元宇宙離概念更遠,離人們的生活卻更近。
在現實世界之外,一個能實現虛實結合的世界,一片能供人類擺脫物理世界限制的全新土壤變得極具吸引力,技術的發展也為其實現提供了土壤。近些年來,沉浸式計算、邊緣計算、深度學習、去中心化網絡、數字錢包、感知科學、渲染引擎等技術的突破,讓人類的大膽狂想逐漸照進現實裡。
打破第四堵牆
文藝作品,通常是人類狂想的試驗場。
很多時候它還承擔着現實與未來之間的擺渡作用,将一些大膽的未來狂想體驗展示給害怕變化和未知的人們,測試他們當下的反應。
比如早在 1999 年的《黑客帝國》,人們就曾淺窺元宇宙的初貌,隻是創作者對其的描述更消極,這也代表着當時人們對超現實數字化世界的态度。
但到了 2018 年的《頭号玩家》和 2021 年的《失控玩家》中,情況就發生了變化:整體的美術設計風格變得輕松明快,光鮮亮麗,觀衆也開始接受将現實世界數字化、遊戲化的可能性,一直到《堡壘之夜》帶人們體驗了一次相對成功的虛拟世界狂歡。
未來變得不再令人恐懼,反而有了關于生活還能如何改變,我們還能得到哪些新體驗的期待?
介于影視與現實之間的綜藝率先邁出了打破第四堵牆的腳步。" 第四堵牆 " 是法國戲劇家讓 · 柔琏在 1887 年提出的,他的本意是舞台前沿應是一道第四堵牆,對觀衆是透明的,對演員來說是不透明的,演員要表演得像在自己家裡那樣,不去理會觀衆的反應,任他鼓掌也好,反感也好,隻在自己的空間内表演。
但從娛樂内容發展的角度而言,越來越多的大型娛樂項目都在嘗試打破第四堵牆。
綜藝,常常是觀衆代入感最強的藝術形式。在現實的綜藝中增加虛拟内容,通過頭盔 / 眼鏡将參演者和觀衆帶入同一個世界,增強沉浸感和互動感,這種嘗試類似于在虛拟遊戲世界增加現實活動和現實明星,都是人類在完全的元宇宙世界前的嘗試和融合,而目前的技術也完全能夠實現。
《元音大冒險》就是現實與虛拟相結合的一檔創新綜藝。
節目中,主創團隊構建起了一片完整的虛拟月球空間:"MEMOON 元音大陸 ",那些令過往從業者們想都不敢想的舞台、畫面和動作形式一一被實現,讓節目嘉賓和觀衆一次又一次穿梭在虛拟和現實世界之中。
" 當人類進入到虛拟時代的時候,我們的生活、娛樂、體驗會變成什麼樣?想太多沒有用,不如用一檔綜藝節目來代替大家進行全新的體驗。" 在接受媒體采訪時,導演陳偉表示 " 這是全球第一檔虛拟現實遊戲闖關真人秀,沒有先例可循。"
《元音大冒險》遵循了 " 先有虛拟空間,再有綜藝節目 " 的理念。節目組先行開發出了一個虛拟互動空間 " 元音大陸 ",再邀請藝人們在虛拟空間裡進行真人秀的錄制。
為了完成這一點,打造出全球首個将虛拟科技與遊戲闖關真人秀相結合的綜藝 IP,團隊采用了動捕、面捕、虛拟建模、XR 等多項前沿技術;從去年 3 月就開始進行虛拟人原畫創作,經曆了漫長的籌備過程;整個項目現場日常有 110 多個工程師、50 多個視覺設計師、近 60 個動畫設計師在背後做技術支撐。
這是一次對于當下綜藝市場來說頗為冒險的創新,但也是人們在綜藝創新和元宇宙融入生活這兩個方向上的必要探索。
創新需要技術與内容都恰如其分
在《元音大冒險》之前,國内也曾經有過一些以元宇宙概念為賣點的綜藝節目。但由于節目玩法和技術創新不足,更多隻是概念先行、噱頭大于實質,觀衆反響并不強烈。
相比同行們,《元音大冒險》在内容和技術兩個方面上都作出了革新,而這兩個方面又有機結合在了一起。
内容設置上,節目組虛實結合,讓前沿科技引爆觀衆情緒。例如第二期節目中,主創還原出了 2017 年說唱巅峰之夜總決賽的同款火車頭舞台,GAI 周延和妻子王斯然作為 " 關主 ",共同演繹經典作品《虎山行》,令觀衆在 " 回憶殺 " 中激動不已;而到了第四期,節目組利用岩漿、紅土等元素堆出了一個逼真的戰場廢墟,咆哮的戰鼓聲中,虛拟場景對觀衆情緒的煽動力達到了頂點。
事實上,幾乎所有能引領行業的爆款,背後都需要技術性的突破。
譬如電影界創造多次奇迹的卡梅隆,《阿凡達》的創意在 1995 年就有了,但相關技術,比如動作捕捉等卻直到 9 年後才成熟。《阿凡達》之後,這些技術被用到了各行各業當中,甚至成為了元宇宙實現的前置條件。
《元音大冒險》之所以能在前輩的基礎上更進一步,同樣離不開骁龍提供的最前沿的技術。
借助搭載骁龍旗艦手機支持的高通 AI 引擎,及其專門面向 AI 神經網絡的硬件加速單元等技術的支持,所有的細節、場景、表情,都僅僅隻是通過一個頭盔、一部搭載着骁龍芯片的智能手機,就精準地映射進入了 " 元音大陸 " 中。
接受采訪時,高通公司産品市場總監劉曉光表示,相較于依賴後期制作的電影,綜藝節目的現場觀衆需要看到實時的畫面并打分。這涉及到實時數據的輸出、采集、合成,進而還原演員的面部表情和動作等多方面技術,而傳統的電影面部和動作捕捉技術不僅設備極其昂貴,并且需要依賴後期進行處理,無法實時運算。為此,骁龍提供了高精度的便攜 AI 面部捕捉方案,以及一整套動作捕捉和實時運算輸出的技術支持。
其次,因為演員需要一直表演,設備也需要連續長時間進行大量數據的處理工作,這很容易引起設備發熱,進而性能下降,導緻數據不穩定甚至丢失。關于這一點,現在市場現有的解決方案都有明顯不足。" 這次我們充分的利用了我們骁龍 8 移動平台的能效和性能優勢,以及專業的 AI 技術,對這次突破性的元宇宙節目的制作提供了有力支持和保障。" 劉曉光表示。
最後,也是最關鍵的,上述這一切,都僅僅依靠一台搭載骁龍的旗艦智能手機來完成。小小一部手機,需要搭載更強大的算力以及神經網絡算法。這一切都離不開高通 AI 引擎,及其專門面向 AI 處理的神經網絡硬件加速單元。
紅點即人臉特征檢測點
搭載骁龍移動平台的智能手機可識别多達 300 個人臉特征檢測點,結合來自高通合作夥伴相芯科技的算法,能夠為明星嘉賓實現精确的實時 AI 面捕和超過 50 種表情識别,精度和能效均領先市面現有解決方案,能夠支持最高 8 路信号,驅動 8 個虛拟形象。
2004 年,為了實現高精度動作和面部表情捕捉以及特效,一部電影需要花費數億美金,然而到了今天,以高通 AI 引擎技術為代表的技術再實現這一切時,成本與效能已經發生了翻天覆地的變化,曾經隻有世界頂級導演用得起的技術,如今也能在綜藝中輕松落地。
在《元音大冒險》中,骁龍将算法和設備硬件都做了極大優化,讓民用設備不僅做到了專業的事,許多指标上甚至超過了專業工具。
我們不能否認卡梅隆這樣先行者帶給整個行業的刺激和加速,就像如今《元音大冒險》這樣的節目,同樣是元宇宙領域的先行者,它在商業和内容嘗試上的成功,也将反哺技術的飛躍,最終讓元宇宙離人們的意識和生活更進一步。
通往元宇宙的鑰匙
目前技術的強化和感官的提升,已經讓人們具備了将現實世界融入虛拟元素的條件,比如在數字世界構建資産、構建新的數字文化,将現實世界的資産、文化、信仰掃描進數字世界,也可以完全構建脫離現實的 Metaverse,短暫的在其中娛樂、社交和體驗。
但最終圖景的實現還要取決于沉浸式體驗技術、身體數字化、意識數字化以及底層算法、算力和帶寬、硬件等技術的突破,而目前最關鍵的一步是人類感官數字化,比如能支撐高精度人臉特征檢測和捕捉的算法和 AI 技術的發展,更深一步則是底層芯片的進步。
綜藝隻不過是生活的提前預演。元宇宙的可能性,當然遠遠不止于此。
以制造業為例。制造業遭遇了疫情沖擊,當設備發生故障時,專家無法到達現場檢修,生産線隻好停擺。為了減少損失,線上協同的需求開始急速上升。這樣的情形下,AR 設備成了最為合适的工具,在設備的協助下,現場維修人員将面前的視角傳輸給遠端的專家,而專家将解決方案的圖紙投送到現場人員佩戴的 AR 眼鏡屏幕上,虛拟圖紙和與實景零部件進行疊加後開啟維修,雙方協同、合為一體。一方面降低維護和溝通成本;另一方面,通過遠程終端指導工人規範操作,杜絕風險。
可以預見的是,元宇宙将會成為互聯網的未來,而随着相關技術的發展和演進,全新品類和形态的終端将不斷湧現,催生出無數令人激動的新用例。
而基于在移動連接、網聯計算和智能領域的領先優勢,骁龍憑借領先的軟硬件 AI 能力,出色的連接、AI、XR、計算、圖形、音頻等技術,為這一系列嶄新的元宇宙體驗鋪平道路,推平門檻,将越來越多的智慧體驗帶給更多用戶,增進工業界、醫療界的運作效率,為消費者和企業提供定制、優化的體驗。
《堡壘之夜》和虛幻引擎的開發公司 Epic Games 的創始人 Tim Sweeney 堅持認為互聯網誕生之後,我們就生活在與我們現實世界平行的數字世界之中。
元宇宙并不會一下子就像《頭号玩家》中所描述的那樣,直接被構建為一個完全脫離現實的虛拟世界,而是從交談的數字化、社交、工作的數字化,過渡到虛拟現實結合,最終才能抵達我們的幻想綠洲,這一切都需要技術來照亮前路。