
千影QianYing
千影QianYing簡介
“千影QianYing”是由巨人網絡推出的有聲游戲大模型,包含游戲視頻生成大模型YingGame和視頻配音大模型YingSound。實現了有聲可交互游戲視頻的生成,標志著ai游戲領域的技術突破。YingGame由巨人網絡AI實驗室與清華大學SATLab聯合研發,支持角色多樣動作的交互控制,用戶可以自定義游戲角色。
千影QianYing的主要功能
YingGame:作為游戲視頻生成大模型,它能夠創造開放世界游戲視頻,支持通過文本、圖像或傳統的鍵盤鼠標操作來控制角色動作,允許用戶自定義游戲角色。YingGame的強項在于角色多樣運動與個性化設計,以及無需傳統3D建模和渲染的物理模擬特性。
YingSound:視頻配音大模型,專門用于根據視頻畫面生成匹配的音效,包括復雜環境音和角色對話,無需人工提示詞,直接從視頻內容中提取語義進行高精度音頻生成。YingSound的泛化能力使其適用于多種視頻類型,從真實場景到動漫和游戲,提升游戲的沉浸感。
千影QianYing模型技術:
YingGame:由巨人網絡AI實驗室與清華大學SATLab聯合研發,支持角色多樣動作的交互控制。
YingSound:由巨人網絡AI實驗室、西北工業大學ASLP Lab和浙江大學聯合研發,具備超強的時間對齊和視頻語義理解能力。
開放世界游戲:YingGame可生成開放世界游戲視頻,通過文本、圖像或鍵盤、鼠標操作實現角色動作的交互控制。
音效生成:YingSound能夠根據畫面生成與之匹配的復雜音效,實現有聲游戲視頻。
技術突破:千影QianYing模型展示了通過文字描述生成游戲內容的可行性。
千影共創計劃
計劃啟動:巨人網絡啟動“千影共創計劃”,開放模型技術、應用和原創游戲項目的合作。
合作領域:包括模型技術、模型應用、原創游戲項目等方面的合作共創。
應用落地:加速“游戲+AI”技術的應用落地,推動從降本增效到顛覆式創新的轉化。
人才招募:計劃中還包括人才招募,以支持技術的持續發展。
開放性:計劃旨在通過開放合作加速技術的成熟和應用。
巨人網絡在2024年度中國游戲產業年會上推出了“千影 QianYing”有聲游戲生成大模型,顯示巨人網絡在“AI游戲”領域的重大技術發展。
與千影QianYing相關工具
- 用戶登錄