迪士尼版「乡村爱情」!刘能、赵四秒变童话脸,人人可用
StyleGAN2太好玩了!
什么萌妹子變臉奧巴馬,什么美國總統一頓切換……
but,都是國外的有啥意思?來點接地氣的!
童話里走出來的劉能叔,你見過嗎?
最近,國外兩個技術宅Justin Pinkney和Doron Adler開發了一種AI「神奇」,分分鐘秒變「迪士尼臉」。假如你想知道自己在迪士尼動畫里會是什么樣子,只要在網站上上傳一張照片就能解鎖了。
于是,我們選擇了劉能叔。
Toonify Yourself!兩個生成器「捏造」迪士尼臉
StyleGAN2大家都不陌生,這個火爆的技術被稱作「換臉神器」,是用真實人臉數據集訓練而成,但對生成卡通人臉不太在行。
但開發者想到了一個把兩個生成器「捏」在一起的好方法。
他們發現,低分辨率層影響的是頭部姿勢和臉型,高分辨率層控制的是光線和表面質感紋路之類。于是,他們從原始的人臉生成器上提取了高分辨率層;從用迪士尼圖片調教過的生成器(用了300張迪士尼圖像)上提取了低分辨率層,把它們捏合在一起。
讓原始StyleGAN2生成了一堆真實人臉,讓迪士尼版StyleGAN2生成了一堆卡通臉。就這樣,用一對對的數據為AI提供訓練素材。
訓練完成之后,只要輸入一張人臉照片,生成器就給出迪士尼臉了。
誰動了我的眼鏡?
但是目前來說此生成器還不算完美。開發者們表示:該算法在無噪聲的高分辨率圖像上效果最好,直視鏡頭似乎也不錯。
不過好多網友發現,生成后的圖像似乎對眼鏡不太友好,比如下面這張:
用男神的照片試試:
好像眼鏡也很變形。
對此,開發小哥解釋道,因為動畫電影中戴眼鏡的人物并不多,因此該模型一般會將它們的大部分移除。
訓練一個pix2pixHD模型來對任意圖像應用轉換
該系統采用了深度學習的方法,它是基于蒸餾混合StyleGAN模型到一個pix2pixHD圖像到圖像轉換網絡。
最初的Toonification方法涉及到一個昂貴的優化過程,即使用混合的StyleGAN模型對人臉進行編碼,這需要在GPU上運行幾分鐘。
顯然,這并不能把它作為一個網絡應用程序!
深度學習的一個常見模式是,用更多的神經網絡取代代價高昂的優化。于是,他們使用了StyleGAN2精餾中描述的用于前饋圖像處理的基本思想,即訓練一個pix2pixHD模型來對任意圖像應用轉換,而不是首先執行優化步驟。
左:原始,中:優化,右:pix2pixHD
這里的新穎之處在于,用于訓練過程的圖像對是由原始FFHQ模型和混合模型生成的圖像對。
雖然pix2pixHD模型只對兩種StyleGAN模型生成的圖像進行訓練,但當訓練完成后,所以應該能夠將它應用到任何圖像上,并得到相同的toonification結果
看!即使是油畫臉也完全OK!
你想試試嗎?
首先,在手機或相機上拍照,然后前往toonify.justinpinkney.com。
-通過頁面頂部的網站上載器瀏覽照片。
-點擊“ Toonify”按鈕。
-不久之后,您的Toonified圖片就會出現在原始圖片的旁邊。您可以單擊它或將其拖離屏幕以保存它。
還瞅啥呢?趕緊試試啊!
總結
以上是生活随笔為你收集整理的迪士尼版「乡村爱情」!刘能、赵四秒变童话脸,人人可用的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 老祖宗留下一句话是什么歌?歌名叫什么?
- 下一篇: 特斯拉又降价!Model S两版本均降2