一支由斯坦福大學研究生、香港城市大學AI研究員和微軟員工組成的隊伍將于今年12月份參加由美國計算機協會計算機圖形專業組(ACM SIGGRAPH)在東京舉辦的計算機圖形學頂級年度會議SIGGRAPH Asia 2018,并將在會上展示一項不可思議的AI技術——利用神經網絡繪制漫畫。
此AI實際上是一對生成式對抗網絡(generative adversarial networks,GAN),該研究小組將它命名為CariGANs:其中一個神經網絡CariGeoGAN確定照片中人臉的幾何形狀,然后把它映射到漫畫模型;另一個神經網絡CariStyGAN則進行“風格轉換”,或將藝術表現應用到幾何圖形。
為了賦予CariGANs將普通肖像轉化成討喜漫畫的能力,這個研究小組用數千張手繪圖像對系統進行了訓練。
兩項研究分別確定了該機器的效能。第一項研究主要是為了確保AI繪制的漫畫能保留與原肖像畫主題的一致性,研究小組認為,一幅好的漫畫雖然有夸張的表達形式,但必須抓住人物的本質特征。這個小組進行了第二項研究來確定這種“繪圖”方式的整體效能是否比得上人類的手繪,結果顯示,CariGANs生成的漫畫足以與手繪藝術家的作品相媲美。
CariGANs AI還可以從視頻中分解每一幀畫面并創建漫畫,基本上,從單個幀生成的漫畫會和其他幀保持一致性,這個功能對動畫師而言非常有用,提供了一種滑稽而準確的視角來審視視頻,并證明了藝術與AI的結合能傳播某些有關人文精神的東西。此外,該AI甚至還可以逆向還原一幅漫畫來確定漫畫對應的原型,研究人員表示他們相信這可能有助于漫畫中的面部識別技術開發。