研究人員投入了大量的精力來訓(xùn)練更聰明、更準(zhǔn)確、更復(fù)雜的人工智能。然而看看沿途發(fā)生的花絮也是一件很有趣的事。
我們所知的是,算法可以創(chuàng)造出逼真的人像或足以以假亂真的視頻,但來自微軟和香港城市大學(xué)的人工智能開發(fā)者團隊卻回避了繪制的準(zhǔn)確性。相反,他們把人工智能用于自動將照片變成一幅漫畫,能夠模仿那些你可能在游樂場等地方看到的那種夸張的、高度程式化的圖像。
斯坦福大學(xué)研究生Kaidi Cao與來自香港城市大學(xué)的人工智能研究人員Jing Liao以及微軟的Lu Yuan合作開發(fā)了以神經(jīng)網(wǎng)絡(luò)繪制漫畫的系統(tǒng),這些漫畫作品令人感到難以置信??紤]到Kaidi Cao參與此項目時,他只是北京微軟研究院的視覺計算小組的一名實習(xí)生。
兩個AI協(xié)作創(chuàng)造漫畫系統(tǒng)
為了創(chuàng)造出能映射到一個人面部特征的風(fēng)格圖像,工程師們需要訓(xùn)練兩個獨立的人工智能系統(tǒng),最終教他們協(xié)同工作。否則,結(jié)果將會像之前試圖制造人工智能漫畫一樣,看起來更像是道林·格雷畫作的恐怖版本。
這里的AI,實際上是一對生成對抗網(wǎng)絡(luò)(GAN),被稱為CariGAN。它的第一個神經(jīng)網(wǎng)絡(luò),CariGeoGAN,決定了照片中人臉的幾何形狀,并將其映射到一個漫畫模型。CariGANs的另一半CariStyGAN進(jìn)行“風(fēng)格轉(zhuǎn)移”,或?qū)⑺囆g(shù)外觀應(yīng)用于幾何圖。
為了讓CariGAN能夠?qū)⒁粡埾鄬o聊的照片變成一場賞心悅目的盛宴,系統(tǒng)接受了數(shù)以千計的手繪圖像訓(xùn)練。
為了確定功效,研究人員進(jìn)行了兩項研究。第一個是確保人工智能的漫畫保留了肖像主題的身份。這里的斷言是,一個好的漫畫必須以夸張的形式捕捉一個人的本質(zhì)。據(jù)研究人員稱,受訪者表示CariGANs的漫畫與手繪藝術(shù)家相比毫不遜色。
研究人員進(jìn)行了第二項研究,以確定“繪圖”與手繪藝術(shù)家作品相比的總體效果。這同樣表明很成功。
在CariGAN AI中,一個GAN負(fù)責(zé)分析一個人的面部照片,并夸大某些特征,例如高顴骨、突出的下巴,就像一個漫畫藝術(shù)家所做的那樣,另一個則負(fù)責(zé)模仿漫畫藝術(shù)家中常見的筆觸和藝術(shù)風(fēng)格。把它們放在一起,你會看到一些看起來很傻的AI藝術(shù)作品,看起來就像其所描畫的那個人?;蛘撸辽偎雌饋砭拖褚粋€人畫的漫畫一樣。
解析視頻和逆向?qū)ふ铱ㄍㄈ宋镌?/strong>
CariGANs AI還可以解析視頻中的幀并從中創(chuàng)建漫畫,以下圖像就是來自美國總統(tǒng)一個的演講視頻。
這對動畫師來說是非常有用的,證明了與人工智能一起創(chuàng)造的“藝術(shù)”可以在人類精神中激起一些東西。
CariGANs AI還可以對漫畫進(jìn)行逆向工程,并確定卡通人物的真實外觀。研究人員說:“我們相信這可能對漫畫中的人臉識別有幫助。”這聽起來有點可怕。但如果這意味著我可以用一個巨大的腦袋和一個寬邊帽作為ID來繪制自己,那就把我算進(jìn)去吧。
值得注意的是,CariGAN AI的排名比手繪的要好22.95%,這意味著其結(jié)果有時會讓用戶誤以為這是真正的手繪漫畫。盡管它離理想的欺騙率(也就是50%)還差得很遠(yuǎn),但該研究小組所做的工作已經(jīng)邁出了一大步,與其他方法相比,繪制效果更接近藝術(shù)家們所繪制的漫畫。
該藝術(shù)算法將于今年12月在東京舉行的國際動漫與游戲技術(shù)大會(SIGGRAPH Asia 2018)上發(fā)布。