越來越多的生成式 AI 工具正在被應用到好萊塢的作品制作中。
随着 Netflix、亞馬遜和 Apple TV 等流媒體平台越來越多地滲透到好萊塢新的原創作品,尤其是劇集的創作中,這些作品數量近幾年也愈發呈現出飛漲态勢。很多生成式 AI 初創公司正是誕生于這樣的背景之下,他們希望用 AI 工具來幫助創作者們減輕愈加繁重的工作負擔。
這些公司也正在不斷吸引資本的注意力。
據報道,在過去兩年,和電影制作相關的 AI 初創公司融資總數額已近億元人民币。投資人們看重的是 AI 有望從根本上改變電影和劇集制作方式的潛力,他們同時相信,如果這些新開發的 AI 工具能夠達到好萊塢的質量标準,那麽也将能給其他行業帶來助益。
以下是 8 家近幾年完成過融資的 AI 初創公司,可以來看看他們是如何和好萊塢進行協作,以及是如何正在給行業帶來變革的。
Deep Voodoo
Deep Voodoo 由知名動畫劇集《南方公園》的創作者 Trey Parker 和 Matt Stone 創辦,也是這部劇的制片公司 Park County 的全資公司。
它的誕生背景源于 2020 年初行業因新冠大流行停擺期間,Trey Parker 和 Matt Stone 兩人對于 Deepfake 技術的探索。當時他們恰巧也在爲正在籌備的電影項目組建一個 AI 藝術家團隊,而當新冠大流行到來後,他們便把全部精力放在了 AI 相關工具的開發上。
" 我們完全是偶然發現這項驚人的技術的,最後卻招募到了世界上最優秀的 Deepfake 藝術家們。"Matt Stone 曾在 Deep Voodoo 網站發布的一篇文章中寫道。
Deep Voodoo 的首次公開亮相是以一則換臉視頻的形式。Trey Parker 和 Matt Stone 憑借他們在行業裏的聲望取得了和說唱歌手 Kendrick Lamar 的合作,Deep Voodoo 拿來 " 做實驗 " 的視頻就來自 Kendrick Lamar 那首注明的《The Heart Part 5》的 MV。觀衆會發現,這則一鏡到底的視頻一開始還是 Kendrick Lamar 在對着鏡頭演唱,後來他的臉慢慢又變成了其他人:OJ Simpson、Nipsey Hussle、Kobe Bryant 以及 Kanye West。
當中用到的就是 Deepfake 技術。
如前文介紹,去年 12 月,Deep Voodoo 拿到了 CAA 和 NEA 投資的 2000 萬美元,這也是這家公司拿到的第一筆外部投資。這筆投資将被用在繼續開發 Deepfake 技術的視效服務,以及合成媒體技術項目上。未來 Deep Voodoo 面對的挑戰或許将在于,如何在合乎道德的情況下去更有創造性地應用 Deepfake 技術。
Deepdub
随着外語内容越來越多,總部位于以色列特拉維夫市的 Deepdub 正在做的事是,利用生成式 AI 用本地語言爲這些外語電影和劇集重新配音。
去年 2 月,Deepdub 完成了由風投公司 Insight Partners 領投的 2000 萬美元 A 輪融資,至此這家公司總共的融資金額達到了 2600 萬。它的其他投資者還包括了 HBO Max 前主管 Kevin Reilly,以及福斯公司及荷蘭制作發行公司 Endemol Shine 的前主管 Emiliano Calemzuk,後者目前也是 Deepdub 顧問委員會的成員。
Deepdub 是第一家利用 AI 将一部故事片完整轉化爲拉丁美洲西班牙語配音的公司。2021 年,Deepdub 還和流媒體平台 Topic 合作,将該平台上的外語電視節目進行了英語配音。
Deepdub 目前已經開始爲幾家好萊塢工作室服務,但它并沒有透露是哪幾家。該公司的首席風險官 Oz Krakowski 向 Business Insider 透露,Deepdub 同樣正緻力于開發一個新平台,來幫助創作者和創作公司能更好地去定位和檢索他們的内容。
疊境數字(DGene)
疊境數字是一家中國公司,資料顯示,這是一家依托上海科技大學孵化的高科技企業,于 2016 年成立,國内總部在上海,同時在矽谷設有研發中心。疊境數字的核心技術包括了智能視覺、光場技術及深度學習,并在通訊行業、科教文娛、新零售 AR 營銷、文博行業及智慧城市等領域均有涉足。
疊境數字最重要的一筆融資是在 2021 年 11 月,由阿裏巴巴領投的 2000 萬美元 A+ 輪融資。
這次融資對疊境數字最顯著幫助在于,推動了它和好萊塢的合作。據 Business Insider 了解,領導這次進入美國市場和好萊塢合作的是有麻省理工學院教育背景的計算機科學家 Jason Yang,以及曾參與過《X 戰警》和《查理 · 威爾遜的戰争》等電影項目的視效藝術家 Helena Packer。
同時也是在這次融資後,疊境數字得以在路易斯安那州的巴吞魯日開設一個世界級的容積捕獲裝置(volumetric capture stage),在這裏它主要利用 AI 來爲虛拟現實和增強現實繪制全息圖,以及進行全息顯示。此外,疊境數字還爲老電影和劇集提供 AI 修複工具,以使得這些作品能在流媒體被觀衆看到。
據國内媒體報道,在此之前,阿裏巴巴也曾在 2017 年 12 月領投過疊境數字金額超 1 億元人民币的 Pre-A 輪融資,而自成立以來,疊境數字已完成 5 輪融資。
此外,在商品三維重建方面,疊境數字還曾與天貓、京東等電商合作。其中在 2016 年的雙 11,疊境數字成爲阿裏巴巴 " 造物神計劃 " 官方戰略合作夥伴;淘寶的 BUY+ 也有使用到疊境數字的産品。
MARZ
MARZ 是漫威劇集《旺達幻視》以及 Netflix 劇集《太陽召喚》背後的視效工作室,成立于 2018 年,總部位于多倫多,它的名稱來自 "Monsters Aliens Robots Zombies" 幾個詞的首字母縮寫。
這家公司在 2021 年完成了大約 500 萬美元的 A 輪融資,領投方是 Round13 Capital,參投方是 Rhino Ventures 和 Harlo Equity Partners。MARZ 另一個較爲知名的 " 作品 " 則是 Netflix 去年改編自《亞當斯一家》的衍生劇《星期三》中,給人留下深刻印象的那隻斷手。
除了發展核心的視效服務,以及前文提到的将在今年 6 月推出的第一款基于 AI 的視效工具 "Vanity AI",MARZ 還在着手開發另一項用于解決配音和畫面不同步問題的工具。MARZ COO Matt Panousis 認爲這将能幫助傳媒公司們更好地放眼海外尋求更大發展。
他說," 我們認爲這(配音和畫面不同步的問題)是内容無法得到更好傳播的主要原因之一。"
Metaphysic
湯姆 · 克魯斯的深度僞造視頻曾一度在 TikTok 瘋傳,這些視頻背後的技術公司就是 Metaphysic。
Metaphysic 總部位于倫敦,2022 年曾拿下由 Section 32 領投的 750 萬美元融資,參投方則包括了 TO Ventures、Winklevoss Capital 以及 Logan Paul。
Metaphysic 還曾在去年 9 月利用 Deepfake 技術,讓已經故去多年的貓王登上了《美國達人秀》的舞台。此外,Metaphysic 今年初和創新藝人經紀公司(CAA)達成合作一事也頗受外界關注,他們合作的内容包括了開發生成式 AI 工具并向客戶提供服務,其中最令人期待的就是經典電影《阿甘正傳》原班人馬合作的新片《這裏》(Here),Metaphysic 将利用 AI 對主角湯姆 · 漢克斯和羅賓 · 懷特的面部進行年輕化還原。
這家公司的 CEO Thomas Graham 還向 Business Insider 透露,Metaphysic 開發的 AI 特效技術能比市面上的其他家便宜三倍。
Respeecher
Respeecher 是一家成立于 2018 年的烏克蘭初創公司,主攻利用 AI 技術對陳舊影像檔案中演員的聲音進行克隆,進而用于新電影或是遊戲的制作。
就像在《星球大戰》中爲黑武士貢獻了标志性氣息聲的 James Earl Jones,他的聲音 40 多年來在影迷心中可以說是被無法取代的存在,而在去年 Disney+ 上線的劇集《歐比旺 · 克諾比》中,Respeecher 就成功 " 克隆 " 了這個經典聲音。同樣在另一部取材自《星球大戰》、由盧卡斯影業制作的劇集《波巴 · 費特之書》中,Respeecher 也成功還原了盧克 · 天行者的聲音。
" 能和盧卡斯影業一起工作是我的榮幸,從小我就是《星球大戰》的粉絲。"Respeecher 的合成聲音藝術家 Bogdan Belyaev 曾如此對媒體表示。
此外,在 2021 年獲得艾美獎的紀錄短片《Event of Moon Disaster》中,Respeecher 也利用機器學習技術來處理了 1969 年尼克松發表的廣播的畫面和聲音關于阿波羅 11 号任務的演講。
這家由一群朋友和同行創辦的年輕公司自 2018 年以來已累計融資 300 萬美元,投資方包括了 Ff Venture Capital 及 Acrobator Ventures 等。
Runway
Runway 是爲娛樂、廣告及傳媒公司提供的一套視頻剪輯軟件服務,用戶可以用它完成非常多的事情,比如,僅通過輸入文字或改變顔色,用戶就可以在視頻中替換掉或是插入一個對象。
它的服務對象也包括了像是 Harbor Picture Company 和 The Mill 這樣的好萊塢工作室及制片公司,而它最爲中國觀衆熟知的一次應用,則是在去年推出并在今年獲得奧斯卡提名的電影《瞬息全宇宙》。
Runway 目前爲止已完成了累計 9600 萬美元的融資,其中包括了去年底獲得的 5000 萬美元 C 輪融資,投資方則包括了風投公司 Felicis、對沖基金 Coatue 以及投資公司 Amplify 等。
其創始人兼 CEO Cris Valenzuela 曾非常明确地表示,Runway 的目标是通過普及它的工具,讓每個人都能進行内容創作。這家公司正在逐漸向這個目标靠攏,比如它最新發布的産品 "Gen-1",就允許用戶使用文字和圖像在現有視頻的基礎上創作新的視頻。
Wonder Dynamics
Wonder Dynamics 背後的明星老闆是曾在《X 戰警:天啓》和《頭号玩家》中擔任過重要角色的演員 Tye Sheridan,另一位創始人則是視效專家 Nikola Todorovic。自創辦以來 Wonder Dynamics 已經吸引了不少知名投資者,2021 年 12 月它曾獲得來自 Epic Games 和三星等公司的 900 萬美元 A 輪融資,這一年年初它還曾拿到過一筆 250 萬美元的種子輪融資。
不過直到現在 Wonder Dynamics 還沒有推出過一款産品,兩位創始人的解釋是他們正在開發一款能滿足所有預算需求的視效工具,與此同時他們開發的産品也将不隻應用在電影和劇集,還将拓展到在遊戲和元宇宙中。
Nikola Todorovic 曾在宣布 A 輪融資時的一份聲明中表示," 我們堅定地相信,藝術不應該被社會經濟水平所限制。"
本文編譯自 Business Insider,原文鏈接:https://www.businessinsider.com/ai-startups-netflix-marvel-lucasfilm-holllywood-deepfake-dubbing-vc-funding-2023-3