訂閱
糾錯
加入自媒體

簡單草圖也能瞬間生成真實人臉照?

人工智能的功能真的是越來越強(qiáng)大了。小黑前幾天剛剛介紹過可以寫文章的人工智能GPT-3,現(xiàn)在,又來了幾個可以畫畫的人工智能。

這些人工智能有的可以自動生成人臉照片,有的可以讓人變成“迪士尼小公主”。具體情況,還是跟著小黑一起來看看吧。

讓簡筆畫變成真人照片,人工智能是怎么做到的?

將3D物體繪制成平面圖片的人工智能算法已經(jīng)不算什么新鮮事了,而且實現(xiàn)原理也并不復(fù)雜:獲取3D模型輸入,并逐步細(xì)分,最后繪制出這一3D對象的平面圖像進(jìn)行輸出。

但是要將這些步驟反過來,在平面圖片中生成逼真的圖像,是不是聽起來有點像是科幻小說中的情節(jié)?其實,在一年半以前,英偉達(dá)的科學(xué)家就開始使用這一算法了。

不過,這個算法的局限性在于無法生成真實的人臉。

為了達(dá)到這一目標(biāo),科學(xué)家們做出了許多努力,但一般的AI算法都需要細(xì)節(jié)完善的圖片進(jìn)行處理,因此實用性和普及度都不夠高。

但是,這個問題現(xiàn)在得到了最終解決:新的AI算法DeepFaceDrawing,可以幫助用戶從手繪簡圖中深度生成面部圖像。

DeepFaceDrawing是一種基于深度學(xué)習(xí)的圖像-圖像轉(zhuǎn)換技術(shù)。這一技術(shù)可以幫助像小黑這樣的手殘黨畫出逼真的人像。

根據(jù)該團(tuán)隊的說法,“我們的主要想法是從真實的面部素描圖像中隱式地學(xué)習(xí)一個合理的面部描寫空間,并在該空間中找到最接近的點來模擬該輸入草圖!

DeepFaceDrawing的深度學(xué)習(xí)框架由三個模塊組成,分別是CE(組件嵌入)、FM(特征映射)和IS(圖像合成)。CE模塊用來識別一些突出的面部特征,如眼睛、鼻子、嘴巴等,也包括面部剩余的部分。之后,由FM將這些特征映射到即將生成的人臉中,最后由IS生成完整的人臉。

不僅如此,它還可以識別用戶畫出的不同表情,并以此生成不同表情的人臉圖片。

除此之外,用戶還可以不畫任何物體,只通過選擇面部特征,就可以得到人臉圖片。這項技術(shù)被稱作“Face Copy-Paste”。

當(dāng)然,這項技術(shù)還有一些局限性,例如只能生成看上去“漂亮”的臉,但不可否認(rèn)的是,至少從小黑的角度來說,這項技術(shù)的實際運(yùn)用會相當(dāng)廣泛:

至少警察叔叔們在需要繪制人像的時候,可以先讓受害者繪制簡單草圖,并稍作調(diào)整,就可以第一時間知道犯罪嫌疑人的大概長相,而不必再等專門的模擬畫像專家上門了。要知道,模擬畫像專家可是非常稀有的呢。

通過照片,一鍵進(jìn)入迪士尼的世界

如果上面那個AI算法在現(xiàn)實中非常有用,那么接下來小黑要介紹的這個算法,則可以滿足每個孩子的“卡通夢”。

這個算法的名字叫作Toonify Yourself。在介紹之前,小黑先放出幾張通過它制作的名人卡通頭像讓大家欣賞一下吧。

雖然小黑個人覺得,這個AI的實現(xiàn)方式并不困難,但它的火爆還是讓小黑吃驚:

根據(jù)Toonify Yourself開發(fā)者的闡述,這個工具剛剛發(fā)布就完成了25萬次服務(wù),甚至一度還因為擠爆了服務(wù)器被迫下線。好在目前,這個工具已經(jīng)重新上線,感興趣的小伙伴們可以通過國外的搜索引擎搜索“Toonify Yourself”,來進(jìn)行體驗。

根據(jù)開發(fā)者之一的Doron Adler介紹,Toonify Yourself采用的是混合網(wǎng)絡(luò)(Blended Network)機(jī)制,這個機(jī)制雖然復(fù)雜,但整體工作流程與其他的人工智能是一樣的:首先,通過預(yù)訓(xùn)練模塊對數(shù)量龐大的數(shù)據(jù)學(xué)習(xí),之后再使用處理模塊進(jìn)行圖像的混合生成。

為了保證生成照片的漫畫效果,他們收集了迪士尼、皮克斯、夢工廠等動畫制作廠商的約300多張漫畫圖像作為學(xué)習(xí)數(shù)據(jù)集。

而在圖像處理模塊中,模型中的不同層會以不同方式影響人物的生成效果。低分辨率層決定頭部姿勢和人臉形狀,而高分辨率層則控制光線和紋理等細(xì)節(jié)。

Toonify Yourself使用的 Layer Swapping 腳本可以從原始圖片中提取高分辨率層,并從預(yù)訓(xùn)練模塊的微調(diào)模型中提取低分辨率層,最終得到具有卡通人臉結(jié)構(gòu),且和照片一樣逼真的混合模型。

或許在不久的將來,Vlogger們不止可以拍出真人視頻,還可以通過這一技術(shù)拍出不遜于迪士尼大片的動畫視頻來。

在人工智能越來越發(fā)達(dá)的現(xiàn)在,許多我們原先認(rèn)為的復(fù)雜工作,都可以輕松解決。這就解放了許多人的生產(chǎn)力,也降低了不少工作的門檻。

小黑始終相信,人工智能可以讓我們在進(jìn)行創(chuàng)作時,有更輕松的工作方式。相信通過它的不斷發(fā)展,我們可以在最后真正擺脫那些繁瑣無用的工作,給每一個人的創(chuàng)意添上一雙翅膀。

圖源:網(wǎng)絡(luò)、官網(wǎng)

聲明: 本文由入駐維科號的作者撰寫,觀點僅代表作者本人,不代表OFweek立場。如有侵權(quán)或其他問題,請聯(lián)系舉報。

發(fā)表評論

0條評論,0人參與

請輸入評論內(nèi)容...

請輸入評論/評論長度6~500個字

您提交的評論過于頻繁,請輸入驗證碼繼續(xù)

暫無評論

暫無評論

    掃碼關(guān)注公眾號
    OFweek人工智能網(wǎng)
    獲取更多精彩內(nèi)容
    文章糾錯
    x
    *文字標(biāo)題:
    *糾錯內(nèi)容:
    聯(lián)系郵箱:
    *驗 證 碼:

    粵公網(wǎng)安備 44030502002758號