VideoDoodles是一款能在視頻中輕松任意插入手繪動(dòng)畫并與視頻內(nèi)容無縫融合的ai工具，它將視頻內(nèi)容與手繪動(dòng)畫相結(jié)合，制作出獨(dú)特的視頻剪輯。通過VideoDoodles你可以在視頻中添加手繪涂擦動(dòng)畫，比如你可以畫個(gè)搞笑的小人或者別 的手繪元素插入到視頻中，讓視頻更吸引人。這些動(dòng)畫不僅能跟隨視頻中的物體移動(dòng)，還能自動(dòng)調(diào)整大小和角度。

VideoDoodles主要挑戰(zhàn)在于確保手繪動(dòng)畫能完美集成到捕獲的場(chǎng)景中，當(dāng)它們相對(duì)于相機(jī)和場(chǎng)景中的其他對(duì)象移動(dòng)時(shí)進(jìn)行適當(dāng)?shù)母櫋⑼敢曌冃魏驼趽酢?/p>

VideoDoodles引入了一種新穎的 UI 和跟蹤算法，以解鎖通過深度和運(yùn)動(dòng)數(shù)據(jù)（通過現(xiàn)有計(jì)算機(jī)視覺方法獲得）增強(qiáng)的視頻的新版本功能。根據(jù)通過任意數(shù)量的位置和方向關(guān)鍵幀表達(dá)的用戶意圖，VideoDoodles的算法可以通過正確的遮擋、透視變換在視頻的任何幀渲染場(chǎng)景感知畫布，并使畫布跟隨移動(dòng)對(duì)象。使得插入的繪畫能夠自然地融入視頻場(chǎng)景，實(shí)現(xiàn)追蹤、透視變形和遮擋等復(fù)雜視覺效果。

VideoDoodles 的主要功能：

• 場(chǎng)景感知畫布：VideoDoodles讓用戶可以將平面畫布放置在從視頻重建的 3D 場(chǎng)景中。這些畫布以 3D 方式進(jìn)行跟蹤，然后手繪動(dòng)畫在相對(duì)于相機(jī)和場(chǎng)景中的其他對(duì)象移動(dòng)時(shí)保持正確的透視和遮擋。

• 自定義跟蹤算法：VideoDoodles可將畫布錨定到視頻中的靜態(tài)或動(dòng)態(tài)對(duì)象。這確保畫布移動(dòng)和旋轉(zhuǎn)以跟隨這些對(duì)象的位置和方向，使動(dòng)畫顯示為捕獲場(chǎng)景的一部分。

• 用戶界面易用：VideoDoodles提供 2D 圖像空間 UI，用戶可以通過關(guān)鍵幀控制畫布的位置和方向。系統(tǒng)通過跟蹤視頻1中移動(dòng)對(duì)象的運(yùn)動(dòng)來插入這些關(guān)鍵幀。

• 深度和運(yùn)動(dòng)數(shù)據(jù)集成：VideoDoodles 利用通過現(xiàn)有計(jì)算機(jī)視覺方法獲得的深度和運(yùn)動(dòng)數(shù)據(jù)來增強(qiáng)動(dòng)畫的真實(shí)感。這種集成允許通過正確的遮擋和透視變換準(zhǔn)確渲染場(chǎng)景感知畫布。

VideoDoodles 的應(yīng)用：

娛樂：通過添加與現(xiàn)實(shí)世界鏡頭交互的動(dòng)畫元素來創(chuàng)建有視覺吸引力的視頻內(nèi)容。

教育：通過說明性動(dòng)畫增強(qiáng)教育視頻，有助于更有效地解釋復(fù)雜的概念。

增強(qiáng)講故事能力：VideoDoodles 可用于在真人鏡頭中添加異想天開或說明性元素，從而增強(qiáng)敘事和視覺吸引力。

創(chuàng)意廣告：品牌可以使用 VideoDoodles 來創(chuàng)建獨(dú)特的廣告，通過將現(xiàn)實(shí)世界的鏡頭與動(dòng)畫元素相結(jié)合來讓廣告更有吸引力。

VideoDoodles 通過實(shí)現(xiàn)手繪動(dòng)畫與視頻內(nèi)容片段的無縫融合，從而輕松地生成獨(dú)特有趣的交互式視頻視覺內(nèi)容，從而增強(qiáng)講故事、教育、營(yíng)銷、社交媒體內(nèi)容創(chuàng)作的用戶體驗(yàn)。