估值暴漲3倍,《瞬息全宇宙》幕后公司Runway引領(lǐng)AI影視新時代

　　激石Pepperstone(http://1adez.com/)報道：

　　近日，生成式AI平臺Runway在谷歌領(lǐng)投的D輪融資中募集到約一億美元。Runway不僅是投資界的新星，其產(chǎn)品RunwayML參與制作的《瞬息全宇宙》也在不久前斬獲了奧斯卡最佳女主角獎。

　　“這是一個神奇的世界，留給人類的是千變?nèi)f化的瞬間?！闭珉娪袄锱_詞闡述的那樣，Runway旗下的視頻編輯工具Gen-2展現(xiàn)了AI將文本轉(zhuǎn)化為視頻世界的魔力與神奇，只需要輸入短短幾個詞語或者一句話的描繪，就能為我們生成想要的視頻畫面。

　　視頻是當(dāng)代社會內(nèi)容媒體的重要組成部分，而TikTok、Instagram、Snapchat和YouTube等視頻應(yīng)用也是過去幾年下載量最高的應(yīng)用之一。而短視頻更符合現(xiàn)代人在快節(jié)奏與高信息密度下利用碎片化時間的娛樂需求，垂直細(xì)分領(lǐng)域亦是短視頻的發(fā)展趨勢，Runway恰好滿足二者。

　　下面我們將探究Runway的發(fā)展歷程，并介紹旗下核心產(chǎn)品與獨(dú)特技術(shù)，并結(jié)合AIGC與其對國內(nèi)外娛樂行業(yè)的影響進(jìn)行分析。

　　Runway崛起之路

　　Runway是福布斯公布的2023年度AI 50榜單最值得關(guān)注的上榜公司之一，但他的崛起絕不是一蹴而就，而是經(jīng)歷了巧合與必然。

　　求學(xué)階段

　　在創(chuàng)辦公司前，Valenzuela花費(fèi)大量時間了解計算機(jī)如何應(yīng)用于視覺藝術(shù)。他雖然只擁有經(jīng)濟(jì)學(xué)背景，卻癡迷于電腦的藝術(shù)創(chuàng)造力，并好奇信息技術(shù)能夠使藝術(shù)家對圖像與視頻產(chǎn)生何種結(jié)果。

　　因此，他在搬家去紐約后，報名攻讀了紐約大學(xué)的ITP(交互電子媒體)專業(yè)。這是一個為期2年的知名碩士項目，主要培養(yǎng)學(xué)生去探索新科技，并與其他學(xué)科交互，從而改善人類生活。

　　Valenzuela在紐約大學(xué)研究ML模型在創(chuàng)意領(lǐng)域中圖像和視頻分割的應(yīng)用方面時，結(jié)識了另外兩名創(chuàng)始人。

　　他們在學(xué)習(xí)ImageNet和AlexNet后，意識到世界有大事即將發(fā)生，但沒有人去做，那為什么不選擇自己去做呢?

　　雛形初現(xiàn)

　　最初他們只專注于學(xué)術(shù)道路，而在進(jìn)行論文研究時，Valenzuela意識到完美的學(xué)術(shù)假想只會成為實踐的泡沫，于是他開始更多地與藝術(shù)行業(yè)人員進(jìn)行交流，在學(xué)校開始了第一個在Photoshop和Premiere中建立了一系列實驗和集成的研究項目，并受到外界的鼓舞。

　　Adobe的人工智能團(tuán)隊也向他們拋出了橄欖枝，但他們想要的是控制整個創(chuàng)造流程，而不是根據(jù)既定的路線去創(chuàng)造。Valenzuela認(rèn)為Premiere和Final Cut只是服務(wù)于舊媒體時代專業(yè)人員創(chuàng)作影音的工具，并非為短視頻時代下個人服務(wù)的視頻工具。于是，他們產(chǎn)生了成立公司的想法。

　　很快，在2018年，Runway首先被作為一個模型應(yīng)用商店推出，使用戶能夠針對各種用例部選擇機(jī)器學(xué)習(xí)模型，產(chǎn)品特色是應(yīng)用可視化界面抽象了原本的推理和訓(xùn)練過程。

　　隨著模型目錄和用戶群的不斷增長，團(tuán)隊開始看到在視頻編輯中出現(xiàn)了一種特別的使用模式。許多視頻編輯和電影制作人使用Runway，是因為他們發(fā)現(xiàn)了利用模型能夠完成自動化繁瑣工作流程的潛力。

　　于是Runway開始嘗試?yán)闷淠Ｐ湍夸浿械闹R，圍繞視頻編輯進(jìn)行更深入的構(gòu)建。整個團(tuán)隊意識到他們正在削減制作視頻的時間和成本，并使ML視頻編輯變得人人皆可參與。就在那時，他們改變了策略，決定致力于構(gòu)建即時視頻生成工具。

　　大獲成功

　　Runway被定義為下一代視頻創(chuàng)作者的新工具。Valenzuela表示在藝術(shù)創(chuàng)意中，人們永遠(yuǎn)無法找到能做一切事情的工具，但Runway卻是一款根據(jù)人們的問題與洞察力而提供幫助的工具，旨在減少人們制作視頻的繁瑣與麻煩。

　　Runway利用市場對生成式人工智能的熱情，在連續(xù)募集幾輪風(fēng)險投資后，估值達(dá)到15億美元，一躍成為新晉生成式AI獨(dú)角獸。在今年3月份與亞馬遜達(dá)成一項大型云協(xié)議后，Runway又在不久前與谷歌簽署了一項重大的云計算協(xié)議，可謂是一呼百應(yīng)，春風(fēng)得意。

　　如今，Runway已成為一款成熟的視頻編輯器，可以在瀏覽器中進(jìn)行實時協(xié)作，并擁有越來越多的AI視頻編輯和創(chuàng)建功能。它被成千上萬的用戶使用，無論是從業(yè)余愛好者，還是專業(yè)人員。

　　Runway的產(chǎn)品布局

　　在Runway，他們相信每個人都有自己的故事。其使命是：讓所有人都能進(jìn)行內(nèi)容創(chuàng)作。因此該公司正在利用計算機(jī)圖形學(xué)和機(jī)器學(xué)習(xí)的最新進(jìn)展來突破創(chuàng)造力的界限，從而降低內(nèi)容創(chuàng)作的障礙，掀起新一波講故事的浪潮。

　　在過去的四年里，該公司從頂級投資者那里籌集了資金，團(tuán)隊規(guī)模從小到只有容納一張桌子的人數(shù)，到團(tuán)隊成員來自各行各業(yè)并富有創(chuàng)造力，多年來致力于人工智能視頻編輯軟件的研發(fā)。

　　Runway的產(chǎn)品和技術(shù)有很多，Runway創(chuàng)業(yè)之初的產(chǎn)品形態(tài)是一個關(guān)于ML(機(jī)器學(xué)習(xí))模型的應(yīng)用商店，用戶可以在這上面使用數(shù)百個模型，比如StyleGAN模型。

　　隨后Runway基于新的AI算法發(fā)布大約30余個AI創(chuàng)作工具，包含音頻、圖片、視頻、3D和生成五個大類，涵蓋了幾乎所有的音視頻內(nèi)容生成和處理工具。

　　此外，RunwayML作為全球首款A(yù)I生成視頻軟件，是其向傳統(tǒng)內(nèi)容平臺和移動端進(jìn)軍的表率。它除了提供一整套多模態(tài)人工智能工具庫之外，該工具庫還推出圖像修復(fù)、綠幕修圖、運(yùn)動跟蹤三大核心功能，可謂是將黑科技直接拉滿，效果炸裂的程度。

　　如今，Runway的核心產(chǎn)品為視頻編輯器Gen-1和Gen-2。Gen-1模型可以通過輸入文本或圖像，改變原視頻的風(fēng)格，例如將現(xiàn)實中的實拍鏡頭轉(zhuǎn)換為卡通剪紙世界。Gen-2模型可以直接使用文本生成視頻場景， 使用戶可以使用文本提示生成“逼真的視頻內(nèi)容”并“自動剪輯視頻”。

　　Runway的產(chǎn)品和技術(shù)不言而喻，其客戶除了包含許多知名品牌和機(jī)構(gòu)以外，例如Adobe、Facebook、Google、Netflix和The New York Times等，還有抖音和YouTube用戶以及主流電影和電視劇工作室都在使用該公司的創(chuàng)造，被廣泛應(yīng)用于電影、電視和廣告等領(lǐng)域。例如：《黑寡婦》中的特效制作;斯蒂芬-科爾伯特主持的《深夜秀》;《瞬息全宇宙》狂拽酷炫的視覺效果等等。

　　其應(yīng)用領(lǐng)域的擴(kuò)展背后是產(chǎn)業(yè)面臨的巨大變革，作為視頻領(lǐng)域的“神奇魔法”，Runway等工具受到了影視制作行業(yè)的歡迎，但并非所有人都對AI表示歡迎。

　　編劇抵制，特效最愛

　　隨著AI工具火遍全球，人們的生活的確變得更加便捷，但這也導(dǎo)致了文案、編劇等文字類工作者面臨失業(yè)。公司用AI寫劇本，這不僅是在搶編劇們的飯碗，同時也貶低了“人類勞動的尊嚴(yán)和價值”。

　　導(dǎo)演郭帆表示，“《流浪地球》第三季如果拍攝的話，現(xiàn)場可能至少一半以上的人會減少掉。人工智能對我們來說既是挑戰(zhàn)，也是機(jī)遇，可能是我們彎道超車好萊塢的機(jī)會?！?/p>

　　目前在好萊塢，制片方出于成本考量，已經(jīng)在大量使用AI進(jìn)行創(chuàng)作。據(jù)媒體此前報道，AI機(jī)器在學(xué)習(xí)某熱門美劇的劇情后，已經(jīng)可以為新一季的第一集撰寫劇本大綱。

　　這種利用AI進(jìn)行創(chuàng)作的行為卻引發(fā)了美國好萊塢編劇工會(WGA)數(shù)千名電影和電視編劇的強(qiáng)烈抵制，他們抗議收入過低和AI越來越多地取代人類參與劇本寫作的現(xiàn)象?！逗阽R》主創(chuàng)查理·布洛克在接受采訪時說，他曾經(jīng)用ChatGPT寫了一集《黑鏡》劇本，結(jié)果“跟垃圾一樣”。

　　雖然同屬于影視行業(yè)，但特效制作者對待AI的態(tài)度卻截然相反，他們正在積極擁抱AI技術(shù)。

　　斬獲奧斯卡金像獎的《瞬息全宇宙》的特效團(tuán)隊便是在AI技術(shù)的加持下，僅靠五人就完成了后期制作，其中名場面 “熱狗手”還獲得了業(yè)內(nèi)外的一致好評。

　　這個成功的案例表明，AI技術(shù)在影視創(chuàng)作中的潛力是巨大的，也是不可忽視的。為了探討AI技術(shù)如何改變影視行業(yè)的未來，最近，非營利組織AI LA在洛杉磯舉辦了“AI on the Lot”會議，最終得到“人工智能的時代已經(jīng)到來”和“所有創(chuàng)意工作人員都應(yīng)該學(xué)會使用它”這兩個結(jié)論。

　　趨勢不可擋，技術(shù)革新的車輪滾滾而過，AI的入侵大戲已在好萊塢悄然上演。

　　AI公司正在入侵好萊塢

　　的確，人工智能的時代已經(jīng)到來，并且它正在改變著影視行業(yè)的游戲規(guī)則，越來越多的AIGC公司已蓄勢待發(fā)，為影視制作帶來全新的靈感。

　　Deep Voodoo

　　Deep Voodoo由知名動畫劇集《南方公園》的創(chuàng)作者Trey Parker和Matt Stone創(chuàng)辦，專注于開發(fā)Deepfake技術(shù)的視效服務(wù)和合成媒體技術(shù)項目。

　　Deepfake是一種利用深度學(xué)習(xí)等機(jī)器學(xué)習(xí)方法創(chuàng)建或合成視聽覺內(nèi)容的技術(shù)，這種技術(shù)可以將已有的圖像或視頻中的人臉或表情替換成目標(biāo)人物，從而達(dá)到偽造身份或表情的目的。

　　該公司的換臉技術(shù)自推出以來便廣受關(guān)注，比如說唱歌手Kendrick Lamar的《The Heart Part 5》MV以及籃球巨星科比的換臉視頻。

　　Metaphysic

　　同樣利用Deepfake技術(shù)進(jìn)行視頻創(chuàng)作的還有Metaphysic，該公司曾在去年9月利用Deepfake讓已經(jīng)故去多年的貓王登上了《美國達(dá)人秀》的舞臺。

　　此外，在經(jīng)典電影《阿甘正傳》原班人馬合作的新片中，該公司將利用AI技術(shù)對主角湯姆·漢克斯和羅賓·懷特的面部進(jìn)行年輕化還原。

　　MARZ

　　MARZ作為漫威劇集《旺達(dá)幻視》以及Netflix劇集《太陽召喚》背后的視效工作室，開發(fā)了基于AI的視效工具“Vanity AI”。

　　Vanity AI可以自動地完成2D的老化、年輕化、美容、假發(fā)和假肢等視效修飾，大大縮短了制作時間和成本。

　　此外，MARZ公司的COO Matt Panousis認(rèn)為配音和畫面不同步的問題是內(nèi)容無法得到更好傳播的主要原因之一，因此該公司正著手開發(fā)一項用于解決音畫不同步問題的工具，這種工具將能幫助傳媒公司們更好地放眼海外以尋求更大的發(fā)展。

　　Respeecher

　　Respeecher是一家烏克蘭的初創(chuàng)公司，成立于2018年，擅長運(yùn)用AI技術(shù)“克隆”陳舊影像檔案中演員的聲音，然后用于新的電影或游戲制作中。在去年Disney+推出的劇集《歐比旺·克諾比》里，Respeecher就成功“克隆”了黑武士的標(biāo)志性呼吸聲。

　　同樣，在另一部改編自《星球大戰(zhàn)》、由盧卡斯影業(yè)打造的劇集《波巴·費(fèi)特之書》里，Respeecher也還原了盧克·天行者的聲音。

　　此外，在2021年贏得艾美獎的紀(jì)錄短片《Event of Moon Disaster》里，Respeecher也利用機(jī)器學(xué)習(xí)技術(shù)來處理了1969年尼克松關(guān)于阿波羅11號任務(wù)的演講的畫面和聲音。

　　除了上述的幾家公司，還有一些AIGC公司也正在改變著影視和動畫行業(yè)。比如利用生成式AI技術(shù)為外語電影和劇集重新進(jìn)行本地語言配音的Deepdub，以智能計算機(jī)視覺技術(shù)、光場技術(shù)、深度學(xué)習(xí)技術(shù)為核心的中國公司疊境數(shù)字(DGene)，以及由參演過《X戰(zhàn)警》和《頭號玩家》的明星Tye Sheridan和動畫特效專家Nikola Todorovic聯(lián)合創(chuàng)立的公司W(wǎng)onder Dynamics等

　　Stay hungry，stay foolish

　　Runway的創(chuàng)業(yè)成功符合當(dāng)下生成式AI潮流與短視頻媒體時代背景，很難說不屬于過程順勢而為，結(jié)果水到渠成。

　　“每個平行世界的我們都存在著無限可能。“伊芙琳在電影中的感嘆是不是也能印證到Runway創(chuàng)始人的職業(yè)生涯中?他拒絕加入谷歌，如今帶領(lǐng)Runway又與谷歌展開緊密合作。

　　Valenzuela曾在接受采訪時表示，無論是創(chuàng)業(yè)還是工作，只有保持不斷學(xué)習(xí)的心態(tài)與超過常人的學(xué)習(xí)速度，才能創(chuàng)造出新的產(chǎn)品?；仡櫵麑IGC的追求與堅持，即使他當(dāng)時選擇谷歌，我們也相信他絕不會泯然眾人矣。

　　AIGC的爆火對元宇宙的發(fā)展不是沖擊，而是助力。元宇宙終將帶領(lǐng)我們把現(xiàn)實世界與虛擬世界融為一體，這個看似遙遠(yuǎn)的理念離不開人工智能技術(shù)的支撐。

　　2023年已過半，元宇宙遠(yuǎn)去了嗎?不，它只是換了個旗幟重回我們身邊。