迪士尼版「乡村爱情」!刘能、赵四秒变童话脸,人人可用
StyleGAN2太好玩了!
什么萌妹子變臉奧巴馬,什么美國(guó)總統(tǒng)一頓切換……
but,都是國(guó)外的有啥意思?來(lái)點(diǎn)接地氣的!
童話里走出來(lái)的劉能叔,你見過嗎?
最近,國(guó)外兩個(gè)技術(shù)宅Justin Pinkney和Doron Adler開發(fā)了一種AI「神奇」,分分鐘秒變「迪士尼臉」。假如你想知道自己在迪士尼動(dòng)畫里會(huì)是什么樣子,只要在網(wǎng)站上上傳一張照片就能解鎖了。
于是,我們選擇了劉能叔。
Toonify Yourself!兩個(gè)生成器「捏造」迪士尼臉
StyleGAN2大家都不陌生,這個(gè)火爆的技術(shù)被稱作「換臉神器」,是用真實(shí)人臉數(shù)據(jù)集訓(xùn)練而成,但對(duì)生成卡通人臉不太在行。
但開發(fā)者想到了一個(gè)把兩個(gè)生成器「捏」在一起的好方法。
他們發(fā)現(xiàn),低分辨率層影響的是頭部姿勢(shì)和臉型,高分辨率層控制的是光線和表面質(zhì)感紋路之類。于是,他們從原始的人臉生成器上提取了高分辨率層;從用迪士尼圖片調(diào)教過的生成器(用了300張迪士尼圖像)上提取了低分辨率層,把它們捏合在一起。
讓原始StyleGAN2生成了一堆真實(shí)人臉,讓迪士尼版StyleGAN2生成了一堆卡通臉。就這樣,用一對(duì)對(duì)的數(shù)據(jù)為AI提供訓(xùn)練素材。
訓(xùn)練完成之后,只要輸入一張人臉照片,生成器就給出迪士尼臉了。
誰(shuí)動(dòng)了我的眼鏡?
但是目前來(lái)說(shuō)此生成器還不算完美。開發(fā)者們表示:該算法在無(wú)噪聲的高分辨率圖像上效果最好,直視鏡頭似乎也不錯(cuò)。
不過好多網(wǎng)友發(fā)現(xiàn),生成后的圖像似乎對(duì)眼鏡不太友好,比如下面這張:
用男神的照片試試:
好像眼鏡也很變形。
對(duì)此,開發(fā)小哥解釋道,因?yàn)閯?dòng)畫電影中戴眼鏡的人物并不多,因此該模型一般會(huì)將它們的大部分移除。
訓(xùn)練一個(gè)pix2pixHD模型來(lái)對(duì)任意圖像應(yīng)用轉(zhuǎn)換
該系統(tǒng)采用了深度學(xué)習(xí)的方法,它是基于蒸餾混合StyleGAN模型到一個(gè)pix2pixHD圖像到圖像轉(zhuǎn)換網(wǎng)絡(luò)。
最初的Toonification方法涉及到一個(gè)昂貴的優(yōu)化過程,即使用混合的StyleGAN模型對(duì)人臉進(jìn)行編碼,這需要在GPU上運(yùn)行幾分鐘。
顯然,這并不能把它作為一個(gè)網(wǎng)絡(luò)應(yīng)用程序!
深度學(xué)習(xí)的一個(gè)常見模式是,用更多的神經(jīng)網(wǎng)絡(luò)取代代價(jià)高昂的優(yōu)化。于是,他們使用了StyleGAN2精餾中描述的用于前饋圖像處理的基本思想,即訓(xùn)練一個(gè)pix2pixHD模型來(lái)對(duì)任意圖像應(yīng)用轉(zhuǎn)換,而不是首先執(zhí)行優(yōu)化步驟。
左:原始,中:優(yōu)化,右:pix2pixHD
這里的新穎之處在于,用于訓(xùn)練過程的圖像對(duì)是由原始FFHQ模型和混合模型生成的圖像對(duì)。
雖然pix2pixHD模型只對(duì)兩種StyleGAN模型生成的圖像進(jìn)行訓(xùn)練,但當(dāng)訓(xùn)練完成后,所以應(yīng)該能夠?qū)⑺鼞?yīng)用到任何圖像上,并得到相同的toonification結(jié)果
看!即使是油畫臉也完全OK!
你想試試嗎?
首先,在手機(jī)或相機(jī)上拍照,然后前往toonify.justinpinkney.com。
-通過頁(yè)面頂部的網(wǎng)站上載器瀏覽照片。
-點(diǎn)擊“ Toonify”按鈕。
-不久之后,您的Toonified圖片就會(huì)出現(xiàn)在原始圖片的旁邊。您可以單擊它或?qū)⑵渫想x屏幕以保存它。
還瞅啥呢?趕緊試試啊!
總結(jié)
以上是生活随笔為你收集整理的迪士尼版「乡村爱情」!刘能、赵四秒变童话脸,人人可用的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 老祖宗留下一句话是什么歌?歌名叫什么?
- 下一篇: 请问各位这段对话说明什么意思啊,急急急。