
Personalized Restoration
Personalized Restoration簡介
Personalized Restoration,一個面部圖像精準恢復和個性編輯技術,Personalized Restoration不僅能復原受損圖像細節,同時能精準捕捉和重現個人獨特的面部特征,確保恢復的圖像既清晰自然,又忠實于原始面貌。同時它還支持換臉。
Personalized Restoration通過先進的雙軸調整方法——結合文本引導和模型調整——確保恢復的圖像既忠實于原始面貌,又保持個人的獨特身份。
此外,Personalized Restoration還支持文本引導的編輯,允許用戶通過簡單的文本提示來改變恢復圖像的特定細節。
Personalized Restoration功能特色:
利用參考圖像個性化擴散先驗
在去噪框架中保留面部身份信息
保留退化圖像的視覺屬性
Personalized Restoration使用場景:
針對某位明星的幾張參考照片,個性化擴散模型進行人像圖像復原
使用不同個性化模型實現人臉互換效果
結合文字提示實現個性化模型的文本導向編輯
Personalized Restoration主要功能和作用:
假設你有一張模糊的老照片,是你的外祖父在年輕時的樣子。這張照片非常重要,但因為年代久遠,這張照片非常模糊,顏色褪色,面部細節幾乎無法辨認。你想恢復這張照片,使其看起來更清晰、更接近原始狀態。
傳統的圖像恢復技術可能會使照片變得更清晰,但可能會丟失你祖父獨特的面部特征,如特定的微笑或眼睛的形狀。這是因為傳統技術通常依賴于一般性的圖像模型,這些模型并不專門針對你祖父的獨特外觀。
Personalized Restoration調整過程:
1、文本引導的調整階段:
假設你還有一些外祖父其他時期的清晰照片。這些照片和一些描述性文本(如“年輕時的外祖父,戴著眼鏡,有著特別的笑容”)被用來微調生成模型G。這個微調過程讓模型能夠了解和學習你外祖父的獨特面部特征,比如他的眼睛形狀、微笑的方式等。
2、模型基礎的調整階段:
接下來,引導網絡E在固定了微調過的生成模型G的基礎上進行調整。這一步驟的目的是讓引導網絡在恢復模糊照片時,能夠同時考慮到個性化特征(比如外祖父的笑容)和圖像的其他方面(如顏色和清晰度)。
最終結果是:恢復后的照片不僅變得清晰,顏色和細節也都得到了改善。更重要的是,這張照片忠實地反映了你外祖父的獨特面部特征,讓人一看就能認出是他。
通過這種雙軸調整方法,這個系統能夠在保留個人獨特特征的同時,恢復出自然且高質量的圖像,使得老照片得以新生,且更具個人記憶的價值。
同時它還支持面部交換功能,可以將個人特征應用于其他圖像,打造出全新的視覺體驗。例如,你可以將某人的面部特征轉移到另一個人的照片上。
此外,它還支持文本引導的編輯,允許用戶使用提示修飾符(如“微笑”和“藍眼睛”)可以啟用 與修復一起進行相關編輯。