
可靈AI
可靈AI簡介
可靈ai(Kling)是由快手大模型團(tuán)隊自研打造的文生視頻大模型,具備強(qiáng)大的AI視頻生成能力 讓用戶可以輕松高效地完成藝術(shù)視頻創(chuàng)作。
可靈AI采用了與Sora相似的技術(shù)路線,并結(jié)合了多項自研技術(shù)創(chuàng)新。可靈AI的效果對標(biāo)了之前發(fā)布的Sora。
可靈AI官網(wǎng)地址:kling.kuaishou.com
可靈AI試用申請流程:下載快影APP - AI玩法 - AI生視頻模塊 - 填問卷申請。
可靈AI功能和應(yīng)用場景:
高分辨率和高幀率視頻生成:可靈AI能夠生成高達(dá)1080p分辨率、最高2分鐘時長(幀率30fps)的視頻。
自由寬高比輸出:可靈支持自由的輸出視頻寬高比,用戶可以根據(jù)需要調(diào)整視頻的比例。
概念組合能力和想象力:可靈具備強(qiáng)大的概念組合能力和想象力,能夠生成具有復(fù)雜運(yùn)動和物理特性的視頻。
模擬物理世界特性:可靈模型能夠模擬物理世界的特性,使生成的視頻更加真實和自然。
廣泛的應(yīng)用場景:由于其高分辨率、高幀率和自由寬高比的輸出特性,可靈AI在短視頻領(lǐng)域有廣泛的應(yīng)用場景,如內(nèi)容創(chuàng)作、廣告制作等。
可靈AI優(yōu)勢:
大幅度的合理運(yùn)動:可靈采用3D時空聯(lián)合注意力機(jī)制,能夠更好地建模復(fù)雜時空運(yùn)動,生成較大幅度運(yùn)動的視頻內(nèi)容,同時能夠符合運(yùn)動規(guī)律。
長達(dá)2分鐘的視頻生成:得益于高效的訓(xùn)練基礎(chǔ)設(shè)施、極致的推理優(yōu)化和可擴(kuò)展的基礎(chǔ)架構(gòu),可靈AI能夠生成長達(dá)2分鐘的視頻,且?guī)蔬_(dá)到30fps。
模擬物理世界特性:基于自研模型架構(gòu)及Scaling Law激發(fā)出的強(qiáng)大建模能力,可靈能夠模擬真實世界的物理特性,生成符合物理規(guī)律的視頻。
強(qiáng)大的概念組合能力:基于對文本-視頻語義的深刻理解和 Diffusion Transformer 架構(gòu)的強(qiáng)大能力,可靈能夠?qū)⒂脩糌S富的想象力轉(zhuǎn)化為具體的畫面,虛構(gòu)真實世界中不會出現(xiàn)的的場景。
電影級的畫面生成:基于自研3D VAE,可靈能夠生成1080p分辨率的電影級視頻,無論是浩瀚壯闊的宏大場景,還是細(xì)膩入微的特寫鏡頭,都能夠生動呈現(xiàn)。
支持自由的輸出視頻寬高比:可靈采用了可變分辨率的訓(xùn)練策略,在推理過程中可以做到同樣的內(nèi)容輸出多種多樣的視頻寬高比,滿足更豐富場景中的視頻素材使用需求。
同時,可靈基于自研的3D人臉和人體重建技術(shù),結(jié)合背景穩(wěn)定性和重定向模塊,實現(xiàn)表情肢體全驅(qū)動技術(shù),僅需一張全身照片,即可體驗生動的“唱跳”玩法。
可靈AI如何使用?
1、在手機(jī)下載并安裝快影App。
2、打開快影App后,使用快手賬戶登錄。
3、在快影App中找到可靈AI創(chuàng)作功能。
4、根據(jù)可靈AI提供的功能,上傳所需的素材,例如全身或半身照片,以便進(jìn)行面部和肢體的驅(qū)動。
5、選擇可靈AI提供的具體功能,如AI舞王或AI唱跳等,按照提示操作生成視頻。
6、生成視頻后,可以在App內(nèi)對視頻進(jìn)行編輯,然后導(dǎo)出或直接在快影分享自已的作品。
可靈AI基礎(chǔ)使用技巧
提示詞簡潔明了:將AI視為一個理解力有限的孩子,使用簡單直接的描述。例如,“一位穿著古裝的女子在櫻花樹下彈古箏,畫面清晰,光線柔和”。
多次嘗試與調(diào)整:如果初始結(jié)果不理想,不要猶豫更換或調(diào)整提示詞,尤其是當(dāng)AI似乎不理解你的描述時。
人物場景描述格式:采用“人物+地點(diǎn)+動作”的結(jié)構(gòu),并加入細(xì)節(jié),如“高清,寫實風(fēng)格,背景是夜晚的城市天際線”。
運(yùn)鏡與畫質(zhì):網(wǎng)頁版提供了更多運(yùn)鏡選項,但需注意移動運(yùn)鏡可能影響人物面部清晰度,建議固定鏡頭或謹(jǐn)慎使用。
負(fù)面提示詞:為了避免不想要的效果,如動畫感、模糊等,應(yīng)加入負(fù)面提示詞,如“非動畫,高清晰度”。
創(chuàng)意與運(yùn)氣:有時簡單的描述能產(chǎn)生驚人效果,保持創(chuàng)意并接受偶然的驚喜。
連貫性技巧:若需保持視頻中人物一致性,保留成功視頻的描述,僅修改場景或動作部分。
避免生圖功能:盡管視頻生成能力強(qiáng),但圖片生成可能不如其他專業(yè)工具,如SD和MJ。
相關(guān)資訊:
可靈AI 2.0全系模型于2025年4月15日發(fā)布,有哪些新功能?