0
“無聊”、“沒有驚喜”這些詞似乎和蘋果發(fā)布會捆綁住了。
不管是WWDC，還是秋季新品發(fā)布會，總會有人熬完夜頂著熊貓眼捂著腎，大喊“無聊”?？赐臧l(fā)布會，雷鋒網(wǎng)編輯發(fā)現(xiàn)除了Apple Watch部分，整個iPhone的發(fā)布都在講A12仿生芯片以及其賦能的各種全新AI功能。
或許，我們以后需要用看AI發(fā)布會的姿勢來看蘋果秋季新品發(fā)布會了。
在WWDC結(jié)束后，雷鋒網(wǎng)編輯曾寫過一篇《看似無聊的本屆WWDC背后，蘋果在布局怎樣的未來》,分析了蘋果低調(diào)又無處不在的AI戰(zhàn)略。
在AI浪潮下，互聯(lián)網(wǎng)巨頭都已經(jīng)完成了AI戰(zhàn)略轉(zhuǎn)型，谷歌從Mobile First轉(zhuǎn)為AI First，微軟強調(diào)全新的世界觀——智能云和智能邊緣。而蘋果在AI上則更為低調(diào)，一直沒有響亮的口號，似乎不想忘記自己是一家做產(chǎn)品的公司。
然而，蘋果行動力卻絲毫沒有滯后，顯然已經(jīng)集齊AI三要素：算力、算法、數(shù)據(jù)。在算力方面，發(fā)布會重點介紹了全新A12 仿生智能芯片；在算法方面有Neural Engine、Core ML和Create ML；數(shù)據(jù)方面，20億臺iPhone的用戶數(shù)據(jù)想必夠了。
今天，伴隨著三款iPhone X系列手機，我們再來看看蘋果如何用AI給手機做徹頭徹尾的大改造。（手機具體參數(shù)信息請前往：《蘋果發(fā)布了史上最強但最貴的 iPhone 新品，還有中國特供版 》）
A12仿生智能芯片是這次發(fā)布會的重中之重，以至于雷鋒網(wǎng)編輯感到全程都在講芯片。
在去年的秋季發(fā)布會上，蘋果推出iPhone X的同時，推出了A11仿生芯片。蘋果高級副總裁 Phil Schiller將其稱為“最強大的智能手機芯片”。而現(xiàn)在，A12仿生芯片順利超越把前任拍在了沙灘上。
A12采用最新采用7nm制造工藝，配備六核 CPU、4核GPU，CPU包括2個性能核心和四個效能核心，其性能雙核比 A11 仿生芯片速度提高 15％，4 個效率核功耗降低 50％；4 核 GPU圖形處理速度比A11仿生芯片提高 50％。
除此之外，A12芯片最強大的地方在于A12芯片上全新的神經(jīng)網(wǎng)絡(luò)引擎（Neural Engine）。神經(jīng)網(wǎng)絡(luò)引擎在去年推出A11時一并推出，去年是2核，今年是8核設(shè)計，支持復(fù)雜機器學習，還有一個智能計算的系統(tǒng)，能夠合理分配CPU、GPU和神經(jīng)網(wǎng)絡(luò)引擎上進行的計算任務(wù)。去年，A11上的神經(jīng)網(wǎng)絡(luò)可以每秒運行6千萬次計算，今年A12上的神經(jīng)網(wǎng)絡(luò)引擎可以每秒運行5萬億次計算。這個數(shù)據(jù)的飛躍，簡直難以置信。
由此，基于全新的A12仿生芯片，iPhone上的拍照功能、視頻功能、語音助手、Face ID、AR，所有這些會調(diào)用CPU、GPU能力的功能都上升到全新水平。最顯而易見的，iPhone現(xiàn)在的存儲空間首次擴展到了512GB，能夠儲存20萬張圖片，當然，也把iPhone價格推向了歷史新高。
計算機視覺是最主要的人工智能技術(shù)，也是目前在智能手機上運用最成熟的技術(shù)。在智能手機上可以實現(xiàn)的主要功能有：人臉識別、手勢識別、人體運動追蹤、圖像識別、物體識別等。
iPhone X首創(chuàng)的Face ID人臉識別解鎖已經(jīng)成為智能手機標配，國內(nèi)外廠商都是追趕蘋果帶起來的這波潮流。
國內(nèi)廠商曾告訴雷鋒網(wǎng)，實時人臉識別對算法要求極高，蘋果特意在A11仿生芯片的神經(jīng)網(wǎng)絡(luò)引擎上劃出一片區(qū)域來支持Face ID。這也是蘋果做Face ID獨有的軟硬件一體化優(yōu)勢。
Schiller 說道，A12上新的神經(jīng)網(wǎng)絡(luò)引擎能夠更有效地識別人臉的各個部分，加快Face ID的識別速度。由于全靠本地的A12芯片處理，而沒有用到云端AI，F(xiàn)ace ID的安全性也將更高。
人臉識別就這么難，識別距離更遠的人體運動識別顯然難度更高?，F(xiàn)場，開發(fā)者帶來了一款叫做《Homecourt》的應(yīng)用，可以用來記錄跟蹤籃球比賽，實時記錄比分。強大的神經(jīng)網(wǎng)絡(luò)引擎能夠?qū)崟r追蹤和識別人體運動、預(yù)測運動軌跡、實時分析六項運動數(shù)據(jù)，可以精細到投籃的角度。
iPhone X搭載了支持Face ID的原深度攝像頭，數(shù)十個傳感器使得iPhone X成為史上最短續(xù)航的iPhone手機。而A12改善了這一狀況，A12能合理分配CPU、GPU和神經(jīng)引擎上進行的計算任務(wù)，從而節(jié)省能耗。iPhone XS Max 的續(xù)航時間比 iPhone X 長 90 分鐘，iPhone Xs比iPhone X可以多用30分鐘，Max則比iPhone X多用1.5小時。
在AI手機時代，拍照成為彰顯AI圖像處理能力的最顯而易見的亮點。除了觸摸屏、App Store之外，攝像頭也是蘋果帶給世界的一大創(chuàng)新。
鏡頭方面，iPhone Xs 系列采用了與 iPhone X 相類似的后置雙鏡頭，有更大的傳感器，更深的相觸。在智能手機圖像處理領(lǐng)域，有一種說法照片是否能拍好，更多地取決于AI算法，AI算法也會倒逼硬件設(shè)計。
Schiller介紹了全新的Smart HDR 拍攝功能， HDR 拍照指的是在按下快門時，相機會拍下多張不同曝光的照片，將它們拼在一起，使得從高光到暗影的每一處細節(jié)都呈現(xiàn)更清晰。Smart HDR可以做到零快門延遲、有更多的高光和陰影、細節(jié)更豐富、逆光處理更好。這一切不是用通常的ISP+CPU實現(xiàn)的，而是由ISP+神經(jīng)網(wǎng)絡(luò)引擎實現(xiàn)，你每拍下一張照片，都會進行一萬億次操作。
同時，Smart HDR 拍攝功能也能支持后期調(diào)焦。蘋果用單反相機拍攝的照片反復(fù)訓(xùn)練神經(jīng)網(wǎng)絡(luò)引擎，得到了可以先拍照再選擇虛化區(qū)域的效果?？梢哉f是相當驚艷了。
為了用機器學習帶來更好的用戶體驗，蘋果已經(jīng)做出了很多嘗試。比如在iPad上利用機器學習識別手寫便簽的文本、在iPhone上通過學習和預(yù)測用戶的使用習慣來讓iOS更省電、在照片app里自動創(chuàng)建的回憶相冊以及面部識別， Siri也利用機器學習帶來了更多貼心的功能和更流暢的對答。在今年的WWDC上我們也來看一些新的功能，比如：
智能化的照片分享功能。當用戶在分享一張照片時，系統(tǒng)會把相關(guān)的照片都找出來，并且將照片中出現(xiàn)的人作為發(fā)送的推薦對象。然后，當對方收到照片后，系統(tǒng)會建議對方回復(fù)手機中相關(guān)的照片。這樣一來，雙方就能很簡單地獲得在同一個活動或者事件中的完整照片。
Siri Shortcuts。每個應(yīng)用都可以將一些快捷功能提供給Siri，讓Siri以更智能、更便捷、更符合用戶行為習慣的方式執(zhí)行。例如，通過設(shè)定短語“I lost my keys”幫助尋找鑰匙的應(yīng)用Tile App可以添加一個Shortcuts給Siri。然后當你說出這句話時，Siri可以自動打開Tile，并且在Siri的界面直接調(diào)動尋找鑰匙這一功能，而無需去到應(yīng)用里。
Siri Suggestion。Siri Suggestion更加智能，其能夠根據(jù)你的使用行為來預(yù)測你將要做的事情，并且在相應(yīng)的時間給出你建議。例如，你的日程里有一個聚會安排，但是Siri通過定位發(fā)現(xiàn)，聚會時間快到了你還離聚會地點很遠，Siri就會彈出一個快捷的消息，給你的朋友發(fā)消息說你會晚一點到。
由于在WWDC 2018上，蘋果已經(jīng)發(fā)布了ARKit 2.0，這次大會AR雖然占據(jù)了一定的時間，但是并沒有什么大消息，主要是軟硬件的升級。
Schiller曾說，iPhone X是第一款專為AR打造的手機，攝像頭專門為 AR 而校準，刷新率達到 60 fps，全新陀螺儀和加速計，以及準確的動作追蹤。這一切都依賴于A11芯片的CPU、GPU和ISP實時光照，A12當然更進一步支持AR。我們已經(jīng)知道，ARKit 2能夠更精準地進行垂直和水平面檢測，支持多玩家操作，新的空間測繪能力可以把3D物體放到真實場景里看到效果。
這次，最驚艷的或許是Directive Games團隊帶來了多人聯(lián)機AR游戲《Galaga AR》,在WWDC 上，蘋果展示了多人樂高游戲，內(nèi)容很簡單。而《Galaga AR》則是看起來十分炫酷的AR射擊游戲，可以同時支持4個人，畫面的渲染和音效的呈現(xiàn)都上升了不止一個檔次?；蛟S，我們在不久之后就能看到更多炫酷的AR聯(lián)機游戲。
要想看到AR方面更重磅的消息，或許還得等到蘋果在2021年發(fā)布AR眼鏡。
有了這么強的芯片，一向喜歡打造封閉式生態(tài)的蘋果自然也希望開發(fā)者在蘋果的平臺上開發(fā)AI應(yīng)用，將蘋果的AI能力落地。
在WWDC2017上，蘋果介紹了Core ML。Core ML是能在蘋果產(chǎn)品上使用的高性能機器學習框架，能幫助開發(fā)者快速地將多種機器學習模型融合到App中。WWDC2018，升級的Core ML 2，其可以使模型運行更快，處理速度提升30%，模型大小能減少75%。同時，蘋果還發(fā)布Create ML，支持計算機視覺、自然語言處理等機器學習任務(wù)模型開發(fā)，能直接在Mac上完成模型訓(xùn)練。
A12 芯片搭載全新的神經(jīng)網(wǎng)絡(luò)引擎 Neural Engine 采用 8 核架構(gòu)，它每秒可以進行 5 萬億次運算，是運行實時機器學習的利器。更好的消息是，A12仿生芯片上的Neural Engine 向第三方開發(fā)者開放，可以通過蘋果的機器學習框架 Core ML 訪問，Core ML的運行速度將能提升9倍，應(yīng)用程序的啟動速度提高30%，功耗只是原來的十分之一。
這樣，開發(fā)者可以用Core ML來運行更復(fù)雜的AI模型，且能運行更快更流程。
AI時代，算法的提升對算力提出了更高要求。蘋果雖然沒有高喊AI的口號，但是iPhone顯然是目前最領(lǐng)先的AI手機，F(xiàn)ace ID的成功是蘋果軟件、算法與全新AI芯片無縫融合的勝利。目前，蘋果的7nm制造工藝的A12仿生芯片配合上神經(jīng)網(wǎng)絡(luò)引擎已經(jīng)成為移動終端最強芯片。蘋果還通過Core ML和Create ML等機器學習工具，建立起AI開發(fā)者生態(tài)，將自己的AI能力開放給上千萬蘋果開發(fā)者，為iPhone開發(fā)更多的AI應(yīng)用。蘋果在AI軟硬件布局上，不知道又已經(jīng)領(lǐng)先多少年。
相關(guān)文章：
蘋果成立新的 AI/ML 團隊，由 John Giannandrea 領(lǐng)導(dǎo)
雷峰網(wǎng)原創(chuàng)文章，未經(jīng)授權(quán)禁止轉(zhuǎn)載。詳情見轉(zhuǎn)載須知。
