簡筆草圖「一秒」生成真實(shí)人臉，這款人像生成AI，究竟有多厲害？
??新智元報(bào)道??
??新智元報(bào)道??
來源：學(xué)術(shù)頭條
編輯：白峰
【新智元導(dǎo)讀】隨著人工智能技術(shù)的發(fā)展，其用途也變得豐富多樣，而在與圖像結(jié)合方面，AI 面部識別技術(shù)和創(chuàng)建逼真圖像的算法一直備受關(guān)注。
但是，如果將這個(gè)過程倒轉(zhuǎn)過來，我們就能得到另外一種算法——該算法可以從粗糙的繪畫圖紙中獲得逼真的圖像。雖然這看起來像是科幻小說中的場景，但一年半前，NVIDIA 的科學(xué)家就已經(jīng)開始使用它了。
實(shí)際上，為了達(dá)到這一目標(biāo)，科學(xué)家們也做出了許多努力，然而多數(shù)類似的AI算法框架都需要詳細(xì)的、繪制良好的草圖。因此實(shí)用性、普遍性都不夠高。
而一個(gè)全新的AI算法正在解決這些問題，這就是 DeepFaceDrawing：從素描草圖中深度生成面部圖像。
據(jù)了解，該項(xiàng)目由北京中國科學(xué)院和香港城市大學(xué)的一個(gè)團(tuán)隊(duì)創(chuàng)造，DeepFaceDrawing 也是迄今為止最先進(jìn)的圖像生成器之一。
根據(jù)該團(tuán)隊(duì)的說法，“我們的主要想法是從真實(shí)的面部素描圖像中隱式地學(xué)習(xí)一個(gè)合理的面部描寫空間，并在該空間中找到最接近的點(diǎn)來模擬該輸入草圖?！?br>
DeepFaceDrawing 的深度學(xué)習(xí)框架使用模塊來生成圖像-CE（組件嵌入），F(xiàn)M（功能映射）和IS（圖像合成）。CE模塊本質(zhì)上可以識別一些最突出的面部特征，例如眼睛，鼻子，嘴巴和目標(biāo)面部的“剩余”部分。然后，F(xiàn)M和IS模塊一起“將組件特征向量映射到逼真的圖像”。
使用這一技術(shù)時(shí)，用戶只需要繪制一張草圖作為參考圖像，而后就能獲得與您的草圖相匹配的接近照片般逼真的人臉。有趣的是，在繪制毛發(fā)之前，它還會(huì)自動(dòng)提供一些繪畫起點(diǎn)。但是，如果我們選擇自己創(chuàng)造想要的發(fā)型，它也會(huì)按照我們的圖紙如實(shí)地進(jìn)行。
不僅如此，它還提供了更多驚人的功能，例如：可以幫助用戶調(diào)整不同的面部特征，并且一處調(diào)整可以同時(shí)映射到許多可能的人臉上。
例如，一個(gè)女人的素描中，兩只眼睛大小不一，而在AI對應(yīng)著產(chǎn)生的圖像中，眼睛的不同甚至導(dǎo)致了面部其他特征發(fā)生變化，這顯然不是繪畫者最初的目的。
在實(shí)際生活中，這項(xiàng)技術(shù)也可能有許多用途。該團(tuán)隊(duì)指出，他們的框架在“犯罪調(diào)查，角色設(shè)計(jì)，教育培訓(xùn)等”方面特別有用。
此外，也有人堅(jiān)信，數(shù)字藝術(shù)家們將在不久的將來采用這種技術(shù)，它將幫助藝術(shù)家們將自己的藝術(shù)構(gòu)想變?yōu)楝F(xiàn)實(shí)，這不僅能夠提高契合度，還有利于縮短實(shí)際的執(zhí)行時(shí)間。
參考資料：
https://futurehubnet.blogspot.com/2020/09/ai-to-help-you-create-real-human-faces.html
https://hothardware.com/news/ai-turns-sketches-into-portraits
評論
圖片
表情