1
本文作者: 劉芳平 | 2017-09-13 22:10 |
蘋果今天發(fā)布的 iPhone X,即將給自拍美顏界帶來(lái)顛覆性的改變。
如今,很少有人會(huì)貼自拍原圖出來(lái),最少都要加個(gè)濾鏡,更多則是要?jiǎng)佑眯迗D軟件,磨皮、瘦臉、調(diào)光線,還有各種 AR 玩法。所以我們看到的自拍照,輕則磨皮美白,重則各種貴妃妝、煙熏妝、老年人特效。
很多人覺(jué)得這已經(jīng)很好玩了,但是等他們用上 iPhone X 后,想法很可能會(huì)改變。下面是今天蘋果發(fā)布會(huì)上,新品體驗(yàn)區(qū)一位用戶在玩一項(xiàng)新的 AR 自拍功能——天天 P 圖開發(fā)的京劇臉譜。
在 iPhone X 的屏幕上可以看到,用戶的臉戴上了虛擬的臉譜。但和上面的萌寵 AR 效果簡(jiǎn)單地把一些元素添加到用戶頭像上(兩個(gè)耳朵的位置明顯有些歪)不同,iPhone X 上臉譜和人臉實(shí)現(xiàn)了立體的融合,而且貼合很好,追蹤也相當(dāng)迅速,以至于用戶眨眼的瞬間臉譜都可以實(shí)時(shí)地進(jìn)行反應(yīng),見視頻中第 2 秒開始處。
除此之外,鏡頭晃動(dòng)和突然的遮擋對(duì)于對(duì)于追蹤的影響非常小,用戶用手一揮,臉譜換了一張,但仍然移穩(wěn)穩(wěn)地停留在用戶臉上,沒(méi)有錯(cuò)位,這是目前手機(jī)上 AR 自拍效果所根本不能比的。
核心在于 iPhone X 的“劉?!辈糠郑ň褪乔爸脭z像頭、聽筒等部件所在的地方),蘋果對(duì)這里進(jìn)行了一次大變革,塞進(jìn)很多用戶之前沒(méi)聽過(guò)的一些傳感器。?
在這個(gè)被很多人詬病的小“劉?!鄙?,蘋果塞進(jìn)了 8 顆傳感器,除了麥克風(fēng)、揚(yáng)聲器、前置攝像頭、環(huán)境光傳感器、距離感應(yīng)器等我們熟知的部分,還集成了紅外鏡頭、泛光感應(yīng)元件(Flood illuminator)、點(diǎn)陣投影器。
蘋果將整個(gè)系統(tǒng)稱之為真深度攝像頭系統(tǒng)(TrueDepth Camera System),而整個(gè)系統(tǒng)除了能用于 Face ID 人臉驗(yàn)證,也可以擴(kuò)展自拍功能,實(shí)現(xiàn)動(dòng)畫表情發(fā)布,和 AR 效果疊加。
具體而言,上述的感應(yīng)器會(huì)投射人眼看不見的光,并讀取用戶的臉部 3D 幾何結(jié)構(gòu)圖,而這一切都是實(shí)時(shí)發(fā)生的。蘋果甚至為此開發(fā)了一個(gè)神經(jīng)引擎(Neural Engine),可即時(shí)處理人臉識(shí)別數(shù)據(jù)。蘋果高級(jí)副總裁 Phil Schiller 在發(fā)布會(huì)上解釋稱,“我們用神經(jīng)網(wǎng)絡(luò)處理圖像和點(diǎn)陣模式,來(lái)建立人臉數(shù)學(xué)模型。”
現(xiàn)場(chǎng)特別演示了臉部追蹤技術(shù),可用于 Animoji。通過(guò)實(shí)時(shí)追蹤用戶面部非常細(xì)微的表情動(dòng)作,將其放入各種動(dòng)物形象表情中,記錄下的表情和語(yǔ)音可以信息的形式發(fā)送給朋友。
現(xiàn)場(chǎng)還演示了AR 相機(jī)效果,和前面京劇臉譜玩法一樣,用戶將虛擬巴西國(guó)旗貼到臉上,看起來(lái)就像是真的畫上去一樣,逼真度遠(yuǎn)超之前的 AR 相機(jī)。
上圖為現(xiàn)場(chǎng)演示的 AR 相機(jī)功能,下圖為傳統(tǒng)的 AR 相機(jī)。差距顯而易見,上圖在質(zhì)感、真實(shí)度方面遠(yuǎn)超下圖。
開發(fā)京劇臉譜的天天P圖對(duì)雷鋒網(wǎng)表示:“通過(guò)基于FaceKit、 SceneKit以及Metal 2等軟件架構(gòu)進(jìn)行開發(fā),我們可以通過(guò)iPhone X的前置攝像頭為用戶帶來(lái)AR自拍。天天P圖的用戶現(xiàn)在可以獲得更接近現(xiàn)實(shí)的面譜和3D裝飾效果,得到更真實(shí)的AR自拍體驗(yàn)?!?/p>
實(shí)現(xiàn)這種程度的AR效果,需要軟件和硬件的深度結(jié)合。
目前 AR 相機(jī)玩法非常多,特別是在 P 圖軟件 、直播應(yīng)用等方面,而即便在效果質(zhì)量一般的情況下,還是廣受歡迎。
隨著 iPhone X 的到來(lái),這類應(yīng)用的體驗(yàn)將實(shí)現(xiàn)飛躍。上圖中的第三個(gè)畫面,這位女生用 AR 相機(jī)給自己的臉部進(jìn)行修飾,外人可以很明顯地分辨出這是 AR 效果做的;但在 iPhone X 上,配合優(yōu)秀的軟件,我們將可以做到以假亂真的效果,因?yàn)?iPhone X 的“劉?!本_記錄了用戶人臉的三維圖像信息,因而當(dāng) P 圖軟件在給人臉 P 圖時(shí),是可以精確到臉上的某一個(gè)點(diǎn)的。
另一方面,這種對(duì)人臉的精確追蹤,還將在表情追蹤方面實(shí)現(xiàn)大躍進(jìn)。以前,軟件可以根據(jù)你的二維肖像圖知道用戶的一些基本表情,比如喜、怒、哀、樂(lè)。到了 iPhone X 上,對(duì)用戶表情的追蹤將達(dá)到消費(fèi)設(shè)備上從未有過(guò)的水平,用戶的一顰一動(dòng)手機(jī)都將感知得到。未來(lái),一個(gè)聊天機(jī)器人通過(guò)手機(jī)前置攝像頭看著你和你對(duì)話時(shí),它將能夠根據(jù)你的細(xì)微表情作出不同的回應(yīng)。
以上僅是兩個(gè)幾乎肯定將會(huì)到來(lái)的應(yīng)用案例,iPhone X 的這個(gè)劉海,配合蘋果優(yōu)秀的軟件以及芯片,所能帶來(lái)的可能性將是無(wú)限的,F(xiàn)ace ID 和 Animoji 僅僅只是個(gè)開始,未來(lái)也許又有現(xiàn)象級(jí)的應(yīng)用會(huì)誕生。
而率先這場(chǎng)創(chuàng)意盛宴當(dāng)中的,正是天天P圖這類相機(jī)應(yīng)用。iPhone X 將在 11 月正式上市,讓我們一起期待吧。
雷峰網(wǎng)原創(chuàng)文章,未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。