光影研究室揭秘AI黑科技:火爆網絡的“童話臉”是怎樣煉成的?

(原標題光影研究室揭秘AI黑科技:火爆網絡的“童話臉”是怎樣煉成的?)

每個人都有一個童話夢,童話世界主人公通常天真、爛漫,是美好形象的象徵。假如有一天,可以穿越到童話世界中,你是否躍躍欲試?近期,騰訊光影研究室出品的“童話臉”特效玩法在網絡上迅速走紅,不僅有李雪琴親傳童話世界基本生存須知公主並”,更是受到辣目洋子劉曉慶、王大陸等衆多明星青睞。作爲業內首次將GAN技術與3D卡通風格相結合的應用特效,“童話臉”支持用戶化身爲人間芭比、在逃公主、童話王子人物,分享在QQ小世界、微視APP、微博等社交平臺,不少用戶更是直接將變身後的童話臉設置個人頭像

二次元當道,個性化“童話臉”特效應運而生

隨着年輕用戶在社交互動中的個性化表達需求持續增加,自帶二次元、萌元素的虛擬形象成爲了用戶展示自我情緒、日常交流的新形式。基於在用戶個性化形象創造上的長期積累,騰訊光影研究室上半年已推出2D日漫卡通畫特效,並受到廣大網友的一致好評。爲了更好地還原用戶的面部特徵以及情緒張力的表達,團隊五官神態捕捉都十分靈動的3D卡通風格作爲研發方向之一,並在權衡卡通化趣味性和真實摹寫的用戶體驗後,最終打造了童話臉特效。

據團隊介紹,童話臉風格屬於卡通畫風格中的一種。卡通畫裡有不同分類,如寫實風,卡通風,日韓風,歐美風,中國風。但在技術實現層面,不同的風格意味着模型要學習紋理和形變的困難指數不一樣。其中,寫實風基本沒有形變,實現較簡單生成效果也最佳;卡通風形變較小且涉及紋理學習,存在一定的難度;Q版卡通風形變較大並涉及風格模型學習,難度最大。此次,“童話臉”特效便是將難度最大的Q版卡通風得以實現。目前,該特效技術已應用在QQ、微視APP等社交娛樂場景中,給用戶提供最直觀新鮮的AI體驗。

GAN技術與3D卡通風格首次結合,左右互搏訓練生成完美圖片

由於傳統的CV算法基本不可能滿足需求,此次童話臉特效是基於先進的生成對抗網絡(GAN)算法研發而出,也是全球首家在手機上給用戶提供的實時個性化童話臉特效。具體而言,針對卡通童話臉大形變、CG質感紋理等特點,團隊在設計模型網絡結構策略上,將形變和紋理區分後再進行解耦,從而達到穩定生成卡通童話臉的目的。同時,結合複雜的實際應用場景下,更是在拍攝環境及角度臉型妝容濾鏡機型性能差異維度上持續打磨逼真效果,確保給用戶帶來愉悅、滿意、驚喜的體驗。

實際上,“童話臉”特效從啓動上線花費兩週時間,並保持快速的模型迭代。高效率的研發升級得益於光影研究室在新技術上的提前積累、底層技術的深度優化和強大的工程能力支持。特效背後的GAN生成技術,在2020年上半年便已投入研發進行積累,通過對一定數量的圖片進行訓練,便能在一週內生成多版本模型進行上線。此前刷新微視視頻特效製作新紀錄王者臉,以及QQ上線的國內首創光頭特效,均是騰訊光影研究室利用生成式對抗網絡GAN所製造的獨特體驗。

伴隨新技術的不斷髮展和進步,AI在社交娛樂方面的應用也將變得更加豐富。作爲騰訊旗下專注於探索前沿影像處理技術的團隊,騰訊光影研究室通過酷炫的渲染能力與靈活便捷的特效玩法引擎,已賦能QQ、微視APP、全民K歌等多款產品。未來,團隊也將持續探索更多場景的創意玩法,爲用戶提供充滿趣味驚喜的社交新體驗