參數背後的細節:驍龍865如何讓智能手機更聰明?
如何評價一款智能手機是否好用?曾經不少人會說“不服跑個分”,但在手機日益同質化的今天,細節體驗反而成為了真正拉開差距的重點。拍照更清晰、變焦更順滑、甚至一鍵變天、實時翻譯……這些讓一個場景體驗明顯上升的細節,往往需要目前最熱門的AI人工智能來高效率解決。
以目前安卓旗艦手機使用率最高的手機處理器——高通驍龍865為例,它擁有第五代AI Engine人工智能引擎,可以賦能各種實用細節功能,如小米10的AI魔法變天、 OPPO FindX2 Pro的超清夜景、vivo NEX 3的實時語音翻譯等等。
要實現這麼強大的功能,首先AI運算性能不能差。驍龍865的AI能力並不是依靠獨立的AI芯片來實現的,而是通過系統級地整合CPU、GPU、DSP、內存、緩存等模塊,共同組成第五代AI Engine。
它的運算能力可達到15萬億次/秒(TOPS),是驍龍855的2倍多,更是驍龍845的5倍。其中,作為核心的Hexagon 698處理器,引入了全新升級的Hexagon張量加速器,算力是上代的4倍,同時能效提升35%;它還支持深度學習帶寬壓縮,無損壓縮率超50%,可為SoC其它部分釋放帶寬,節省功耗;GPU Adreno 650部分支持16位、32位浮點運算和新的AI混合精度指令,算力提升2倍以上;LPDDR5內存則將帶寬增加30%,有助於優化AI處理。
有了這麼強大的AI運算能力,驍龍865又是如何應用到用戶直接體驗的功能部分呢?下面通過幾個實例為大家介紹一下。
AI 魔法變天
小米10系列採用1億像素攝像頭,並支持神奇的AI魔法變天效果:只需要拍一張帶有天空的照片,一鍵選擇,就可以讓天空瞬間變化成星空、極光、雪天等景象,而且與照片精準融合,不會出現明顯的違和感。這種功能的實現,在過去需要用電腦上的專業圖像軟件,進行細緻的摳圖、換景和調節整體光線,需要一定的技術基礎,但如今小白用戶也能一鍵實現了。
要實現AI魔法換天,主要有兩個難點:識別、分割並替換天空部分;優化替換後的邊緣細節。前者,第五代AI Engine支持物體識別、分割和替換功能,通過對整個圖片進行分析,AI能快速區分物體的類型並分割、替換;後者優化則通過AI引擎對成千上萬張類型圖片進行機器學習,自動打分、識別,學習優化出最佳解決方案,從而實現一鍵AI魔法變天的效果。
當然,這種物體識別、優化技術不僅僅能用在魔法變天上面,還能對各種物體進行深度修圖,讓人臉更滑更美、讓樹葉更綠更銳、讓食品更甜美… …AI的魔法,就是這麼潤物細無聲。
OPPO 超清夜景
OPPO Find X2 Pro是目前最頂級的安卓旗艦之一,特別在影像實力上受到媒體和用戶的高度評價。在手機最難應對的弱光夜景下,OPPO支持超清夜景3.0功能,三個攝像頭都能拍攝夜景模式,輕鬆拍出清晰、對焦準確的夜景美照。
要實現超清夜景,除了OPPO Find X2 Pro擁有一顆感光面積高達1/1.4英寸的IMX689 CMOS外,還需要第五代AI Engine和Spectra 480 ISP的全程參與。Spectra 480 ISP最高能夠拍攝2億像素靜態圖片、每秒處理20億個像素,並將將對焦點從圖像傳感器的中心升級至了整個傳感器面積,對焦點數量是原來的9倍,這解決了手機的高像素拍照能力和對焦能力。
照片AI降噪方面,Spectra 480 ISP在功耗降低16%的基礎上,還能為畫面增加18%的細節,提升40%的降噪處理能力。結合第五代AI Engine進行多幀降噪優化,手機能快速輸出對焦準確、圖像清晰、色彩還原優秀的夜景照片。
通過第五代AI Engine和Spectra 480 ISP的綜合優化,手機的防抖拍照優化、AI人像優化等等方面也能有更好的表現。
AI 實時翻譯
作為頂級商務旗艦,vivo NEX 3有不少商務功能,如自動回复的電話秘書功能,如實時翻譯多國語言的AI實時翻譯功能。有了它,在國外出差、旅遊,在電話裡與外國人聊天都能實現實時通話的夢幻效果。
這種實時翻譯的功能,是通過第五代AI Engine的轉錄功能實現的。以中文翻譯為英文為例,第一步,利用Hexagon處理器上的實時卷積神經網絡,可以把用戶的中文語音信號轉錄成中文文本;第二步,利用轉換器神經網絡進行本地神經機器翻譯,把中文文本轉換為英文文本;第三步,通過LSTM(長短期記憶)卷積神經網絡,將英文文本轉換成英文語音輸出,這時,對面的外國人就听到你“說”的英文了。
看似有好幾步流程,實則在第五代AI Engine的軟硬件協同下,AI實時翻譯一瞬間即可完成,實用性非常高。同時,第五代AI Engine在低功耗全天候響應語音喚醒、遊戲語音實時變聲方面也有強大的運算性能,滿足用戶在語音方面的各類需求。
高通助力AI普及
受篇幅限制,只能舉幾個例子,事實上在驍龍865的第五代AI Engine加持下,手機能在拍照、視頻錄製、視頻播放、語音響應、遊戲優化、充電優化等常用場景都有高效的優化,讓手機用戶輕鬆享受到AI帶來的智能體驗,讓更多用戶可以接觸到AI人工智能的魅力,助力AI普及。