視界一粟YiSu是由北京極佳視界科技有限公司聯合清華大學自動化系共同發布的Sora級、高性價比、端側可用的 Sora 級視頻生成大模型視界一粟 YiSu。視界一粟YiSu基于自研技術，融合了LLM和擴散模型，展現出強大的多模態融合能力。2024年6月11日，在奇績創壇路演日上正式發布。

視界一粟YiSu項目網址：https://world-dreamer.github.io/

Github地址：https://github.com/JeffWang987/WorldDreamer

視界一粟YiSu功能：

• 超長時長：模型原生支持16秒的視頻生成，并且可以擴展至1分鐘以上。

• 高性能表現：具備超大運動范圍、超強表現力，并且能夠理解物理世界，這使得生成的視頻更加逼真和自然。

• 端側可用：模型可以在終端設備上直接運行，不需要云端支持。

• 懂物理世界：模型能夠理解和模擬物理世界的規律

• 低成本與高效率：YiSu模型在運行成本上更低，同時在推理速度上更快，且適用于端側設備。

• 持續迭代與優化：該模型將按照每周一個小版本、每月一個大版本的迭代速度進行快速成長和進化，未來幾個月內將在視頻時長、可控性、推理速度、運行成本、理解物理世界等方面迎來大幅度的提升。

視界一粟YiSu技術特點

• 自研架構：融合LLM和擴散模型的自研架構，結合多種技術路線的優勢。

• 多模態融合：在多模態數據處理方面進行了優化。

• 訓練效率和推理效率：模型在訓練和推理效率上進行了優化。

• 模型效果：在視頻質量和效果上進行了優化。

視界一粟 YiSu應用場景：

娛樂與媒體：

動畫制作：自動生成動畫序列，加快動畫制作流程。

音樂視頻：創造獨特的音樂視頻內容。

特效制作：生成電影和電視劇中的特效鏡頭。

教育與培訓：

互動教學：制作互動式的教學視頻，提高學習體驗。

模擬實驗：創建虛擬實驗室環境，進行科學實驗演示。

廣告與營銷：

廣告創意：快速生成吸引人的廣告視頻。

產品展示：制作詳細的產品介紹和演示視頻。

社交網絡：

用戶生成內容：幫助用戶輕松制作高質量的社交媒體視頻。

虛擬偶像：創建虛擬人物進行直播或互動。

電子商務：

商品展示：生成商品的360度展示視頻。

客戶反饋：模擬用戶對產品的使用和評價。

自動駕駛與機器人：

仿真訓練：為自動駕駛系統和機器人提供模擬訓練數據。

環境感知：增強車輛和機器人對周圍環境的理解。

游戲開發：

游戲預告片：自動生成游戲預告片和宣傳視頻。

游戲內容生成：創造游戲內的動畫和劇情內容。

虛擬現實（VR）與增強現實（AR）?：

VR內容制作：為虛擬現實應用提供豐富的視覺內容。

AR體驗增強：增強增強現實應用中的視覺效果。

安全監控：

事件模擬：模擬安全事件，用于訓練和教育。

視頻分析：增強視頻監控系統的分析能力。

醫療健康：

醫學教育：制作醫學解剖和手術過程的教學視頻。

患者教育：為患者提供疾病和治療的可視化解釋。

北京極佳視界科技有限公司是一家專注于ai大模型的初創公司，公司核心成員來自清華、中科院等知名院校以及微軟、阿里、百度等知名公司，擁有業內領先的AI技術和應用經驗。