VideoPoet是Google開發(fā)的一款文本圖片生成視頻、音頻的多模態(tài)模型生成工具，VideoPoet 可以執(zhí)行文本到視頻、圖像到視頻、視頻風(fēng)格化、視頻修復(fù)和外繪畫以及視頻到音頻的生成。

與其他基于擴散的視頻模型不同，VideoPoet 將多個視頻生成功能結(jié)合在一個 LLM 中。它遵循類似于 LLM 的兩步訓(xùn)練過程：預(yù)訓(xùn)練和特定任務(wù)的適應(yīng)。研究人員說，預(yù)訓(xùn)練的LLM成為可以適應(yīng)多種視頻生成任務(wù)的基礎(chǔ)。

Google Videopoet 的工作原理：

• 該工具在大型語言模型 （LLM） 上運行，該模型通過分詞器處理輸入，將它們轉(zhuǎn)換為序列供 ai 理解。

• 它執(zhí)行的任務(wù)：文本到視頻、圖像到視頻動畫、視頻風(fēng)格化、修復(fù)/外繪畫和視頻到音頻生成。

如何使用 Google Videopoet？

1、訪問 Google Videopoet 網(wǎng)站并使用您的 Google 帳戶登錄。

2、選擇輸入類型（文本、圖像或音頻），輸入您想要描述的內(nèi)容，然后選擇主題或流派。

3、等待 Videopoet 生成您的視頻;監(jiān)控進度并在屏幕上預(yù)覽。

4、通過調(diào)整主題、字體、顏色、布局、持續(xù)時間和媒體來編輯您的視頻。根據(jù)需要添加或刪除元素。

5、VideoPoet將為您創(chuàng)建出一個精美的視頻，將您的視頻下載或分享為 MP4 文件或通過鏈接/社交媒體。

Google Videopoet應(yīng)用： 

• Google Videopoet 徹底改變了視頻創(chuàng)作方式，為全球創(chuàng)作者、教育工作者、營銷人員和藝人賦能。 

• 它有可能對溝通、教育和娛樂產(chǎn)生積極影響，但考慮到它對創(chuàng)造力和情感的影響，需要負責(zé)任地使用。

Google Videopoet 有什么好處：

• 易于使用，無需技術(shù)技能。

• 節(jié)省時間，在幾分鐘內(nèi)創(chuàng)建視頻。

• 通過創(chuàng)意和定制靈活地制作用于各種目的的視頻。

• 能夠創(chuàng)建視覺上引人入勝的視頻，以有效地吸引觀眾。

VideoPoet與其他AI視頻生成器的比較：

Google Videopoet 因其先進的 Transformer 模型、多樣化的創(chuàng)造力以及在教育和娛樂方面的有效性而脫穎而出。VideoPoet 可以生成比競爭對手更長的視頻。雖然它僅限于兩秒鐘視頻的初始爆發(fā)，但它可以在 8 到 10 秒的視頻中保持上下文。

Google Videopoet 是一個 AI 驅(qū)動的視頻生成器，可簡化從文本、圖像或音頻創(chuàng)建視頻的過程。雖然高效且用途廣泛，但由于道德考慮和原創(chuàng)性的限制，負責(zé)任的使用至關(guān)重要。