AI 生成網路對抗漫畫系統 CariGAN 的手繪人物也能與藝術家一決高下

AI 生成網路對抗漫畫系統 CariGAN 的手繪人物也能與藝術家一決高下

研究人員投入了大量的精力來訓練更聰明、更準確、更複雜的人工智慧。然而看看沿途發生的花絮也是一件很有趣的事。

AI 生成網路對抗漫畫系統 CariGAN 的手繪人物也能與藝術家一決高下

我們所知的是,演算法可以創造出逼真的人像或足以以假亂真的影片,但來自微軟和香港城市大學的人工智慧開發者團隊卻迴避了繪製的準確性。相反,他們把人工智慧用於自動將照片變成一幅漫畫,能夠模仿那些你可能在遊樂場等地方看到的那種誇張的、高度程式化的圖像。

史丹佛大學研究生Kaidi Cao與來自香港城市大學的人工智慧研究人員Jing Liao以及微軟的Lu Yuan合作開發了以神經網路繪製漫畫的系統,這些漫畫作品令人感到難以置信。而Kaidi Cao參與此專案時,他只是北京微軟研究院的視覺運算小組的一名實習生。

兩個AI協作創造漫畫系統

為了創造出能映射到一個人面部特徵的風格圖像,工程師們需要訓練兩個獨立的人工智慧系統,最終教他們協同工作。否則,結果將會像之前試圖製造人工智慧漫畫一樣,看起來更像是道林‧格雷畫作的恐怖版本。

這裡的AI,實際上是一對生成對抗網路(GAN),被稱為CariGAN。它的第一個神經網路,CariGeoGAN,決定了照片中人臉的幾何形狀,並將其映射到一個漫畫模型。CariGANs的另一半CariStyGAN則進行「風格轉移」,或將藝術外觀應用於幾何圖。

AI 生成網路對抗漫畫系統 CariGAN 的手繪人物也能與藝術家一決高下

為了讓CariGAN能夠將一張相對無聊的照片變成一場賞心悅目的盛宴,系統接受了數以千計的手繪圖像訓練。

為了確定功效,研究人員進行了兩項研究。第一個是確保人工智慧的漫畫保留了肖像主題的身份。這裡的斷言是,一個好的漫畫必須以誇張的形式捕捉一個人的本質。據研究人員稱,受訪者表示CariGANs的漫畫與手繪藝術家相比毫不遜色。

研究人員進行了第二項研究,以確定「繪圖」與手繪藝術家作品相比的總體效果。這同樣表明很成功。

AI 生成網路對抗漫畫系統 CariGAN 的手繪人物也能與藝術家一決高下

在CariGAN AI中,一個GAN負責分析一個人的面部照片,並誇大某些特徵,例如高顴骨、突出的下巴,就像一個漫畫藝術家所做的那樣,另一個則負責模仿漫畫藝術家中常見的筆觸和藝術風格。把它們放在一起,你會看到一些看起來很傻的AI藝術作品,看起來就像其所描畫的那個人。或者,至少它看起來就像一個人畫的漫畫一樣。

解析影片和逆向尋找卡通人物原型

CariGANs AI還可以解析影片中的幀並從中創建漫畫,以下圖像就是來自川普的一個演講影片。

AI 生成網路對抗漫畫系統 CariGAN 的手繪人物也能與藝術家一決高下

這對動畫師來說是非常有用的,證明了與人工智慧一起創造的「藝術」可以在人類精神中激起一些東西。

CariGANs AI還可以對漫畫進行逆向工程,並確定卡通人物的真實外觀。研究人員說:「我們相信這可能對漫畫中的人臉辨識有幫助。」這聽起來有點可怕。但如果這意味著我可以用一個巨大的腦袋和一個寬邊帽作為ID來繪製自己,那就把我算進去吧。

值得注意的是,CariGAN AI的排名比手繪的要好22.95%,這意味著其結果有時會讓使用者誤以為這是真正的手繪漫畫。儘管它離理想的欺騙率(也就是50%)還差得很遠,但該研究小組所做的工作已經邁出了一大步,與其他方法相比,繪製效果更接近藝術家們所繪製的漫畫。

該藝術演算法將於今年12月在東京舉行的國際動漫與遊戲技術大會(SIGGRAPH Asia 2018)上發佈。

  • 資料來源:futurism & the next web   作者:Dan Robitzski & Tristan Greene 
  • 本文授權轉載自網易科技

使用 Facebook 留言

發表回應

謹慎發言,尊重彼此。按此展開留言規則