0
本文作者: 李帥飛 | 2018-06-17 17:34 |
在人們的日常拍照中,眨眼經(jīng)常會(huì)成為影響最終人像照片效果的因素之一;而且紅眼等拍照痼疾相比,眨眼所造成的閉眼或半睜眼問題更加難以在后期修圖中進(jìn)行調(diào)整——即使現(xiàn)有的修圖神器如 Adobe Photoshop,恐怕也很難讓照片中的人自然而然地睜開眼睛。
現(xiàn)在,F(xiàn)acebook 的研究者們已近在著手解決這一問題,并取得了一定的成果。
雷鋒網(wǎng)了解到,F(xiàn)acebook 于近日發(fā)表了一篇題為《Eye In-Painting with Exemplar Generative Adversarial Networks(通過樣本生成式對(duì)抗網(wǎng)絡(luò)進(jìn)行眼部圖像修復(fù))》的論文,該論文解決的問題是,利用已有的人像樣本,來對(duì)處于閉眼狀態(tài)的人像進(jìn)行眼部修復(fù),使得后者呈現(xiàn)出自然睜眼的效果。
具體來說,利用一個(gè)基于機(jī)器學(xué)習(xí)技術(shù)的生成式對(duì)抗網(wǎng)絡(luò)(Generative Adversarial Networks,簡(jiǎn)稱 GAN),對(duì)其進(jìn)行訓(xùn)練;GAN 的一部分工作負(fù)責(zé)識(shí)別人像中的人臉,另外一部分則根據(jù)識(shí)別結(jié)果去生成類似于真實(shí)而自然的圖像——在雙方不斷協(xié)作和改進(jìn)的過程中,最終使得生成的圖像結(jié)果接近于真實(shí)的人臉。
我們以下圖中所展示的過程為例。簡(jiǎn)單來說,通過一張?zhí)幱诒犙蹱顟B(tài)的人臉去對(duì)閉眼的圖像進(jìn)行人眼修復(fù),一個(gè)簡(jiǎn)單的步驟是復(fù)制前者的眼睛到后者;但經(jīng)常出現(xiàn)的問題是圖像在顏色、姿態(tài)、方向上的不匹配。而 Facebook 所做的就是利用 GAN 對(duì)被修復(fù)圖像的面部特征進(jìn)行識(shí)別,并針對(duì)識(shí)別結(jié)果對(duì)圖像進(jìn)行不斷修正,最終達(dá)到自然效果。
雷鋒網(wǎng)查詢到,在 Facebook 論文中給出的測(cè)試結(jié)果中,研究者們利用 A/B 測(cè)試方法,從 Facebook 的內(nèi)部數(shù)據(jù)庫(kù)拿出兩組圖片;第一組是一張閉眼圖和一張真實(shí)圖,第二組是一張閉眼圖和一張 GAN 修復(fù)圖——結(jié)果是有 54% 的測(cè)試參與者沒有區(qū)分出原圖像和眼部修復(fù)圖像之間的真實(shí)性差異。而能夠被區(qū)分的圖像,往往是圖片中人像出現(xiàn)了戴眼鏡或頭發(fā)遮擋的情況,論文認(rèn)為,更多的訓(xùn)練可以減少這類問題。
當(dāng)然,除了眼部修復(fù),利用 GAN 進(jìn)行更多方面的圖像修復(fù)完全成為可能,考慮到 Facebook 運(yùn)行著全球最大的社交網(wǎng)絡(luò),尤其是社交網(wǎng)絡(luò)中人像數(shù)據(jù)的龐大性,這一技術(shù)毫無疑問更有更大的應(yīng)用空間。不過 54% 的成績(jī)并不算突出,可能還需要更大的改進(jìn)空間。
不過,雷鋒網(wǎng)更為關(guān)心的是,在圖像移植技術(shù)越來越先進(jìn)、越來越接近真實(shí)效果的情況下,包括 Facebook 在內(nèi)的巨頭們將如何保證人們的肖像等權(quán)力得到充分的保障;這又是一個(gè)技術(shù)如何有效地為人類服務(wù)的問題。
雷峰網(wǎng)原創(chuàng)文章,未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。