簡筆草圖「一秒」生成真實人臉，這款人像生成AI，究竟有多厲害？
??新智元報道??
??新智元報道??
來源：學術頭條
編輯：白峰
【新智元導讀】隨著人工智能技術的發(fā)展，其用途也變得豐富多樣，而在與圖像結合方面，AI 面部識別技術和創(chuàng)建逼真圖像的算法一直備受關注。
但是，如果將這個過程倒轉過來，我們就能得到另外一種算法——該算法可以從粗糙的繪畫圖紙中獲得逼真的圖像。雖然這看起來像是科幻小說中的場景，但一年半前，NVIDIA 的科學家就已經開始使用它了。
實際上，為了達到這一目標，科學家們也做出了許多努力，然而多數類似的AI算法框架都需要詳細的、繪制良好的草圖。因此實用性、普遍性都不夠高。
而一個全新的AI算法正在解決這些問題，這就是 DeepFaceDrawing：從素描草圖中深度生成面部圖像。
據了解，該項目由北京中國科學院和香港城市大學的一個團隊創(chuàng)造，DeepFaceDrawing 也是迄今為止最先進的圖像生成器之一。
根據該團隊的說法，“我們的主要想法是從真實的面部素描圖像中隱式地學習一個合理的面部描寫空間，并在該空間中找到最接近的點來模擬該輸入草圖?！?br>
DeepFaceDrawing 的深度學習框架使用模塊來生成圖像-CE（組件嵌入），FM（功能映射）和IS（圖像合成）。CE模塊本質上可以識別一些最突出的面部特征，例如眼睛，鼻子，嘴巴和目標面部的“剩余”部分。然后，FM和IS模塊一起“將組件特征向量映射到逼真的圖像”。
使用這一技術時，用戶只需要繪制一張草圖作為參考圖像，而后就能獲得與您的草圖相匹配的接近照片般逼真的人臉。有趣的是，在繪制毛發(fā)之前，它還會自動提供一些繪畫起點。但是，如果我們選擇自己創(chuàng)造想要的發(fā)型，它也會按照我們的圖紙如實地進行。
不僅如此，它還提供了更多驚人的功能，例如：可以幫助用戶調整不同的面部特征，并且一處調整可以同時映射到許多可能的人臉上。
例如，一個女人的素描中，兩只眼睛大小不一，而在AI對應著產生的圖像中，眼睛的不同甚至導致了面部其他特征發(fā)生變化，這顯然不是繪畫者最初的目的。
在實際生活中，這項技術也可能有許多用途。該團隊指出，他們的框架在“犯罪調查，角色設計，教育培訓等”方面特別有用。
此外，也有人堅信，數字藝術家們將在不久的將來采用這種技術，它將幫助藝術家們將自己的藝術構想變?yōu)楝F實，這不僅能夠提高契合度，還有利于縮短實際的執(zhí)行時間。
參考資料：
https://futurehubnet.blogspot.com/2020/09/ai-to-help-you-create-real-human-faces.html
https://hothardware.com/news/ai-turns-sketches-into-portraits
評論
圖片
表情