0
今年11月，高通發(fā)布了其旗艦移動平臺第二代驍龍8，采用臺積電4nm工藝，Kryo CPU性能提升35%，能效提升40%，Adreno 740 GPU性能提升25%，能效提升45%。
值得注意的是，這一次高通在AI方面做了關鍵升級，在這個芯片制程更新速度放緩的年代為智能手機性能提升提供了新道路，同時也在開啟全新的AI創(chuàng)新時代。
高通打造的專為AI而生的移動平臺，具體在哪些方面有所升級？又能為終端用戶帶來何種新體驗？
AI引擎多方位升級，認知ISP打開新世界
“我們把人工智能作為設計第二代驍龍8的關鍵技術，將全新的旗艦移動平臺打造成一個創(chuàng)新引擎，一個真正的AI大師?！痹?022驍龍峰會首日，高通高級副總裁及CMO莫珂東如此說道。
AI引擎升級是第二代驍龍8的重點，為了滿足不同場景和應用對AI算力和功耗的需求，高通新一代AI引擎進行了四個關鍵升級。
一是在Hexagon處理器中加入專用的供電系統(tǒng)，進一步提升芯片處理的能效比；二是對內存讀/寫進行改進，盡量減少對外部數(shù)據(jù)的讀寫，降低能耗；三是通過微切片的推理方式，將單個神經(jīng)網(wǎng)絡拆分成幾萬個微切片，然后將其分配到張量、標量、向量加速器上，從而提高整個神經(jīng)網(wǎng)絡的推理速度。
另外，高通AI引擎還升級了精度支持，率先支持INT4 AI精度格式。
高通技術公司產品管理副總裁Ziad Asghar指出，“與INT8相比，INT4將帶來60%的能效提升和90%的AI推理性能提升。具體來看，從32位浮點運算到4位整數(shù)運算，我們將能耗降低了驚人的64倍。”
通過在硬件架構層面進行AI引擎的技術創(chuàng)新，第二代驍龍8的自然語言處理性能提升超過4倍，能效提升達60%。
不過，AI引擎的升級只是第二代高通驍龍8平臺 AI能力提升的一部分，“真正的AI大師”從使用攝像頭收集信息到傳感器中樞就已經(jīng)在使用“AI魔法”。
此前，高通在手機攝像頭中引入計算攝影，就已經(jīng)實現(xiàn)了一些令人驚嘆的功能，包括2億像素拍照以及首次實現(xiàn)捕捉超過10億色的8K HDR視頻拍攝等，不過無論是多精美的照片和視頻，都是在拍攝完成之后才開始運行神經(jīng)網(wǎng)絡，不僅費時費電，還會影響用戶快速拍攝下一張照片。
這一次，高通推出了認知ISP，這是一項通過一個名為“Hexagon直連”的物理連接，將Hexagon處理器和Qualcomm Spectra ISP之間直連的新技術，通過提高存儲和計算效率，實時運行被稱為“語義分割”的AI照片編輯，直接在ISP中完成“修圖”，從而生成更具美感的照片。
如果將原先的ISP理解成“先存后算”，那么認知ISP就是“邊存邊算”，甚至是“先算后存”，顯然后者會比前者效率更高。認知ISP的誕生也相當于幫助智能手機從時間的維度更好地理解和處理信息。
高通傳感器中樞作為高通AI引擎的一部分，為了支持層出不窮的AI用例，集成了兩個AI處理器，支持直觀體驗，實現(xiàn)自定義喚醒詞。
對于終端用戶而言，這些AI技術升級與創(chuàng)新似乎略顯抽象，真正理解高通的AI魔法，還需要觀察具體在應用方面發(fā)生哪些變化。
結合獨特軟件棧，影像、游戲、連接全面升級
首先，在離開發(fā)者更近的軟件工具及生態(tài)方面，高通也做了相應的升級。
早在今年6月，高通就發(fā)布了自家首個統(tǒng)一的高通AI軟件棧（Qualcomm AI Stack），將所有業(yè)務線的AI軟件功能訪問權限都集中在統(tǒng)一的軟件棧中，開發(fā)者可以面向不同智能終端的AI模型和軟件遷移以及開發(fā)。
開發(fā)者和客戶可以根據(jù)自己的實際需求進行模型的開發(fā)和優(yōu)化，且只要一次開發(fā)，就可以將解決方案跨高通所有產品線進行遷移。
其次，在體驗方面，終端用戶能夠感受到無論是影像、游戲，還是連接的全方位升級。
正如前文所提到的，認知ISP可以實時運行語義分割，“實時語義分割技術具有開創(chuàng)性意義，這意味著攝像頭能夠真正實現(xiàn)對捕捉畫面的情景感知”，高通技術公司產品管理副總裁Judd Heape進一步解釋道。
高通對實時語義分割濾鏡進行了效果演示，能夠看出這一神經(jīng)網(wǎng)絡能夠識別人臉五官細節(jié)，還能夠識別各種配飾，識別到眼鏡時，還能夠對其反光和眩光進行消除。
加上ISP自帶的編輯功能，以及高通與三星、索尼在圖像傳感器方面的合作，用戶已經(jīng)能夠享受專業(yè)級的拍攝體驗。
當用戶化身為手游玩家時，能夠與AI訓練過的敵人作戰(zhàn)，就像是同真人作戰(zhàn)那樣，在一個更具挑戰(zhàn)性的游戲環(huán)境中成長為更加出色的玩家。
在《Air Derby Battleground》這一游戲中，就能看到飛機智能地飛行，且隨著時間推移變得更加智能，這些序列由多個神經(jīng)模型和數(shù)千個神經(jīng)元進行訓練，并在Hexagon處理器中進行推理，這些飛機會自適應調整行為甚至掌握主動，真正用“智慧”同人類玩家戰(zhàn)斗。
值得注意的是，除了AI方面的提升，第二代驍龍8移動平臺集成的GPU還能夠在移動終端游戲中支持基于硬件加速的實時光追技術，而首批采用這一光追技術的手游即將面世。
網(wǎng)易基于第二代驍龍8的光線追蹤的手游《逆水寒》也已完成了大部分制作，將給玩家?guī)沓錾墓庾敷w驗。
光追特性關閉和開啟后游戲畫面中瓷瓶表面反射對比
在《逆水寒》極富武俠情調的演示場景中，不開啟光追效果時能表現(xiàn)出水面的波光、漣漪，并微弱地映射出水面上的其他物體，但無法達到全反射的鏡面效果。而在開啟實時光追效果后，游戲引擎可以按照真實的光線反射規(guī)律渲染畫面，俠客、竹林、天空被清晰地倒映在水面中，色彩真實絢爛，畫面層次感清晰，“呼吸的江湖”就在眼前。
在無線連接方面，驍龍X70作為全球首個和唯一一個配備5G AI處理器的調制解調器及射頻系統(tǒng)，利用AI功能支持突破性5G性能。
調制解調器內的AI處理器能夠實時優(yōu)化多種關鍵參數(shù)和條件，比如信道狀態(tài)反饋、毫米波波束成形、天線調諧和其他自適應功能，在終端上實現(xiàn)無與倫比的連接速度、覆蓋、時延和電池續(xù)航提升。
此外，借助全球首個和唯一一個支持高頻多連接并發(fā)的Wi-Fi 7解決方案FastConnect 7800，第二代驍龍8將開啟Wi-Fi 7時代。
AI產品出貨超20億，AI體驗無處不在
當然，高通所開啟的AI創(chuàng)新時代，不僅僅體現(xiàn)在智能手機方面，高通作為最大的AI邊緣芯片公司，迄今為止AI產品出貨已經(jīng)超過20億，其AI技術從智能手機滲透到其他終端，所帶來的AI體驗已經(jīng)無處不在。
在PC領域，高通已經(jīng)攜手宏碁、華碩、惠普、聯(lián)想、微軟Surface、三星和小米等領先的PC OEM廠商，發(fā)布了多代驍龍計算平臺。
終側端AI處理正在成為除了CPU和GPU之外的衡量PC的第三個指標，正如十年前GPU加速改變圖像和視頻計算那樣，專用AI將推動實時優(yōu)化和能效發(fā)展的下一個征程。
UL Procyon等用戶體驗基準測試顯示，高通Hexagon處理器比競品的CPU快5倍，比競品GPU快2.5倍，這意味著當用戶在運行視頻會議等計算密集型應用時，將享有無縫的體驗。
在2022驍龍峰會上，高通技術公司產品管理副總裁 Kedar Kondap利用第三代驍龍8cx的AI引擎，演示了全新的Windows Studio效果，即便是在戶外工作，也能通過降噪保持語音的清晰洪亮和攝像頭的聚焦，保持生產效率。
XR也是除了智能手機之外的移動計算平臺。多年來，高通都在持續(xù)推動著XR的創(chuàng)新，專注于打造業(yè)界領先的平臺、基礎感知技術、參考設計和開發(fā)者工具。
高通新推出的驍龍AR2平臺旨在變革頭戴式AR眼鏡外形設計，因此采用了多芯片分布式處理架構和定制化IP模塊。其中驍龍AR2平臺主處理器在AR眼鏡中的PCB面積縮小40%，平臺整體AI性能提升2.5倍，功耗降低50%，能夠支持AR眼鏡實現(xiàn)低于1W的功耗。
這將支持在AR眼鏡上打造更豐富的體驗，以及更長時間的舒適佩戴。
正如大家所期待的那樣，第二代驍龍8移動平臺正在改變全球下一代旗艦移動手機，而其他終端廠商也在同高通進行合作，在智能聯(lián)網(wǎng)邊緣進行探索，高通驍龍的AI觸角已經(jīng)伸向各個角落。
相信在不久的將來，高通所開啟的AI創(chuàng)新時代中，會有越來越多的終端加入，更多的邊界被突破，我們拭目以待。（雷峰網(wǎng)(公眾號：雷峰網(wǎng))）
相關文章：
折疊旗艦全面進化，驍龍8+助力vivo X Fold+強者更強
雷峰網(wǎng)原創(chuàng)文章，未經(jīng)授權禁止轉載。詳情見轉載須知。
