今天給大家推一款ai視頻編輯工具Runwayml，它的功能又不僅僅是編輯，更重要的是支持文字轉(zhuǎn)視頻，只需輸入一句話就可以拍大片。它是由Stable Diffusion和《瞬息全宇宙》背后技術(shù)公司Runway推出的一款產(chǎn)品。

Runwayml，是對(duì)第一代的重大改進(jìn)。Runwayml可以僅根據(jù)文本描述制作完整視頻，而舊版本只能使用現(xiàn)有視頻中的數(shù)據(jù)生成新視頻。自去年 12 月以來(lái)，該公司一直在研究這種創(chuàng)新模型，今年的3月份發(fā)布了，但直到最近才免費(fèi)開放給大家，一天就引爆全網(wǎng)。他們現(xiàn)在很高興地透露，這是第一個(gè)向公眾提供的文本到視頻的 AI 模型。

Runwayml發(fā)布的最新模型之一是 Gen-2，它是一種生成視頻模型，可以從文本或圖像中合成逼真且一致的視頻。Gen-2 基于一種稱為穩(wěn)定擴(kuò)散的新技術(shù)，該技術(shù)允許模型從大規(guī)模視頻數(shù)據(jù)集中學(xué)習(xí)并產(chǎn)生高質(zhì)量的輸出。Gen-2 可用于各種應(yīng)用程序，例如創(chuàng)建新場(chǎng)景、角色或動(dòng)畫、增強(qiáng)現(xiàn)有視頻或生成用于講故事或教育的視頻內(nèi)容。

Gen-2 與 Gen-1 不同，Gen-1 是 RunwayML 的另一種生成視頻模型，可以根據(jù)給定的風(fēng)格或內(nèi)容將任何視頻轉(zhuǎn)換為另一個(gè)視頻。Gen-1 使用一種稱為潛在擴(kuò)散的不同技術(shù)，該技術(shù)將輸入視頻編碼為潛在空間，然后將其解碼為新視頻。Gen-<> 可用于視頻到視頻轉(zhuǎn)換、樣式轉(zhuǎn)換或內(nèi)容處理等任務(wù)。

Runwayml優(yōu)點(diǎn)：

• 它可以合成您能想象到的任何風(fēng)格的視頻，只使用文本提示。

• 它可以將任何圖像或提示的樣式傳輸?shù)揭曨l的每一幀。

• 它可以將模型變成完全風(fēng)格化和動(dòng)畫化的渲染。

• 它可以隔離視頻中的主題，并通過(guò)簡(jiǎn)單的文本提示對(duì)其進(jìn)行修改。

• 它可以通過(guò)應(yīng)用輸入圖像或提示將無(wú)紋理的渲染轉(zhuǎn)換為逼真的輸出。

如何使用 Runwayml？

要使用Runway，請(qǐng)注冊(cè)一個(gè)免費(fèi)賬戶并訪問(wèn)他們的AI神奇工具。這些工具允許您使用文本、圖像或視頻剪輯生成視頻、圖像和動(dòng)畫。您還可以訓(xùn)練自己的定制AI模型，從視頻中刪除背景，創(chuàng)建慢動(dòng)作視頻等等。