ClotheDreamer，一個虛擬試穿項目，可以從文本生成可穿戴3D服裝，ClotheDreamer是上海大學、上海交通大學、復旦大學和騰訊優圖實驗室出的。

ClotheDreamer功能特征：

• 支持自定義服裝模板，實現多樣化、個性化3D服裝生成

• 生成的服裝可以適應不同身材，并支持自動擬合

ClotheDreamer，一種用于文本引導服裝生成的新型系統，它使用 3D 高斯曲面 （3D GS） 對不同的服裝幾何形狀進行建模。

ClotheDreamer 允許用戶從文本描述生成 3D 服裝模型，從而實現更直觀、更具表現力的服裝設計。

ClotheDreamer利用大型語言模型和 3D 高斯曲面的強大功能來生成詳細、高質量的服裝網格，以捕捉復雜的形狀和褶皺。

ClotheDreamer 這個工具允許你通過文字描述來創建衣服的3D模型。您無需使用復雜的 3D 建模軟件自己設計衣服，只需輸入描述，系統就會為您生成 3D 服裝模型。

ClotheDreamer 的關鍵創新是使用 3D 高斯曲面 （3D GS） 來表示服裝的形狀。高斯曲面是一種描述 3D 形狀的數學方法，可以捕捉復雜的細節，如衣服上的褶皺和懸垂。通過將這種 3D 建模技術與強大的語言模型相結合，ClotheDreamer 可以將您的文本描述轉換為高度逼真的 3D 服裝模型。

這使得設計衣服的過程更加直觀和容易獲得，因為您不需要專門的 3D 建模技能。您可以簡單地描述您心目中的服裝，ClotheDreamer 將以 3D 形式將其變為現實。這對于時裝設計師、3D 藝術家或任何想要創建定制服裝設計的人都很有用。

ClotheDreamer技術說明

ClotheDreamer 使用 GaussianDreamer： Fast Generation from Text to 3D 架構，根據文本描述生成 3D 服裝模型。它利用預先訓練的語言模型對輸入文本進行編碼，然后用于調節表示服裝幾何形狀的 3D 高斯曲面的生成。

ClotheDreamer在大型 3D 服裝模型數據集及其相應的文本描述上進行訓練。在推理過程中，使用語言模型對輸入文本進行編碼，此表示用于預測將形成最終服裝網格的 3D 高斯曲面的參數。

通過使用 3D 高斯曲面，ClotheDreamer 能夠捕捉復雜的服裝幾何形狀，包括褶皺、窗簾和其他復雜的細節。這使得系統能夠生成高度逼真和多樣化的服裝模型，這些模型與輸入的文本描述非常匹配。

作者還提出了對基本 ClotheDreamer 模型的擴展，包括 LAGA：通過文本生成和自定義分層 3D 頭像和著裝代碼：從文本生成服裝的自回歸縫紉，這進一步擴展了系統的服裝生成和定制功能。

ClotheDreamer局限性分析

ClotheDreamer 系統代表了文本到 3D 生成領域的一個令人印象深刻的進步，展示了大型語言模型和 3D 高斯曲面在直觀服裝設計方面的潛力。將自然語言描述轉換為高質量 3D 服裝模型的能力可能會對時尚、3D 藝術和其他領域產生重大影響。

然而，本文確實承認了當前方法的一些局限性。該系統在相對較小的 3D 服裝模型數據集上進行訓練，這可能會限制其推廣到更多樣化或非常規服裝風格的能力。此外，3D 高斯曲面表示雖然可以有效地捕獲復雜的幾何圖形，但可能并非適用于所有類型的服裝特征，例如尖銳的折痕或高度不對稱的形狀。

進一步的研究可以探索擴展數據集、改進 3D 表示以及增強系統處理更廣泛的服裝類型和款式的能力的方法。正如相關工作中所暗示的那樣，將 ClotheDreamer 與其他 3D 建模工具或頭像生成系統集成，也可以解鎖該技術的新應用和用例。

總的來說，ClotheDreamer代表了在尋求使3D服裝設計更易于訪問和直觀方面邁出的令人興奮的一步。隨著文本到3D生成領域的不斷發展，像 ClotheDreamer 這樣的系統可能會成為設計師、藝術家和任何想要在數字領域將他們的服裝創意變為現實的人越來越有價值的工具。