影片生成式 AI 工具實現創意 - Runway 新創介紹

An artistic representation of a futuristic AI research lab branded with 'Runway'

生成式 AI 的相關應用自從 ChatGPT 誕生後便如雨後春筍般萌芽，許多的公司皆從各自領域往 AI 發展，而 Runway 這間 AI 研究新創則是專門針對內容創作者打造一個整合是的生成式影音 AI 創作平台。

Runway Website

背景介紹

Runway is an applied AI research company shaping the next era of art, entertainment and human creativity.

所以他們不只生成圖片，更強調為內容創作者提供圖文影音的 AI 生成式組合包，目前已經提供 30 種影音工具提供給使用者搭配使用。其中 Runway 的主打產品是 Gen-2，一個從文字提示或現有圖像生成影片的 AI 模型。

Runway 於 2018 年，由 Cris Valenzuela、Alejandro Matamala 和 Anastasis Germanidis 三位在NYU藝術學院就讀期間認識的朋友共同創立。一開始他們是希望創造出針對電影製作人、攝影師的AI 輔助創作工具，但目前重點已轉向生成式 AI。

在今年六月，Runway 宣佈獲得 1.41 億美元的 C 輪融資，其投資者包括 Google、Nvidia 和Salesforce 等公司，目前總融資金額到達 2.37 億美元。這讓他們成為少數估值高達 15 億美元 (1.5 Billion) 的 AI 科技新創。目前 Runway 的客群包含 Fortune 500 與 Global 2000 的公司，像是 New Balance，以及百萬名個人創作者。

Runway 與好萊塢罷工事件

當好萊塢的演員和編劇們繼續罷工時，生成式 AI 對他們的行業和工作產生的影響成為一個核心關注點。Runway 的 CEO Cristóbal Valenzuela 知道他的 Gen AI Startup—最近估值達到15億美元—正在遭受罷工群眾的大力抨擊。

在一場專訪中，面對這些影視產業人員的質疑與抨擊聲浪，Valenzuela 他以「我們對於 AI 的討論需要更細緻、多元化」，原文如下：

“I empathize with the artistic community who might feel threatened or who might have questions,” he said. “At the same time, when you speak with the creators or filmmakers, you start understanding that it’s different from a singular point of view that this is going to replace everything, because it’s not — it’s going to augment a lot of other things as well.” - Cristóbal Valenzuela from VentureBeat

為什麼他能夠如此回應這些抨擊聲浪？

我想只要實際體驗過 Runway 就能大概理解他的想法。

Runway 的影音生成式 AI 能力

Runway Gen-2 Model 的導演模式提供使用者可以自行控制攝影機方向與基本運鏡，並將圖片進行的影片生成，這包含了許多的模式，像是 Direcional Looping Video、Motion Slider 等。

透過 Gen2 模型，已經可以讓使用者生成 18 秒的短片段，並且提供影片、相片、文字轉生成影片的功能。雖然目前的畫質低，無法媲美真實影片，但對於很多的創作者或公司來說，他們可能需要的就是這些功能性短片去傳達想法，這樣的工具無疑為他們提供更快更低成本的方案。

舉例來說，我自己在短短 10 秒內就能透過簡單的 prompt 生成一個4秒的開場短片：

其中他們近期透過 Twitter 與使用者合作的短片更是令人驚豔，一定要看：

實際體驗感想

之所以認為實際使用 Runway 的工具後就能夠理解其創辦人的想法，是因為會發現以目前的技術，甚至可以預見未來一段時間的技術，都不太可能真正取代在電影、電視劇產業工作的職業人員。

我們常會思考 AI 究竟是來幫助人類提升生產力，還是來和人類搶飯碗的，至少以目前的情況來看，AI 充其量只能作為我們的輔助工具，就好像從建築師、設計師從手繪轉向電腦輔助繪圖 (Computer Aided Design, CAD) 的概念。AI 還不至於透過我們的三言兩語 (Prompt)，就替我們產生出足以取代職業創作者的影視作品，這點看來，在平面繪圖與設計領域反而才是真正面臨重大威脅的地方。

最後我們可以看看如何真正地透過 Runway 輔助製作出一部好的短片。

Genesis - 百萬點閱的 45 秒生成式 AI 預告片

這部影片由 Midjourney + Runway 所製作，看似簡單，卻也花費比想像中更多的時間與精力。

Valenzuela 說：「這個預告片以及其他許多我們看到的預告片都不僅僅是靠一個字、一個句子所構建的，然而這卻也是現在大多數人所認為的。」

大型語言模型 (LLMs) 被大眾所認識，卻也逐漸被簡化為像是聊天機器人一般，只要給他一個問題、一個 prompt，他就能夠把你想要的吐出來給你。然而真實的情況卻是：你需要有好的創意、腦中需要有好的構圖、好的畫面，才能透過這些 AI 工具不斷反覆嘗試、反覆拼湊，最後得到一個滿意的成品。

從 ChatGPT 問世以來，AI 生成式工具與相關新創快速萌芽，對於許多人和我來說，都會有一種 overwhelmed 的 AI 焦慮，但即使如此我還是很關心 AI 是如何發展，未來會長成什麼樣，在我們這個時代最該感到慶幸的就是能夠見證這個迅速發展的時刻。

如果你對於影音生成式 AI 感到有興趣，或是也認為這些工具即將取代我們的工作，你可以點擊 Runway 網站快速體驗！

如果你喜歡這類型的文章，或是有任何建議與心得，請留言告訴我！並且追蹤我唷！