飛象網(wǎng)訊(魏德齡/文)科幻小說《三體》中降維打擊的案例總是讓人難以忘懷,球場之上當(dāng)一個球員送出精妙的傳球,也常被人們譽為“開啟上帝視角”,維度上領(lǐng)先往往可以帶來巨大的優(yōu)勢。
11月16日的驍龍峰會上,高通產(chǎn)品市場高級總監(jiān)徐恒在第二代驍龍8移動平臺的技術(shù)介紹環(huán)節(jié)不斷用“二維到三維”來對產(chǎn)品性能與技術(shù)的提升進(jìn)行形容。而第二代驍龍8移動平臺的產(chǎn)品發(fā)布本身就有著一個不同尋常的開篇。
不同尋常的開篇
談及每一次移動SoC產(chǎn)品的發(fā)布,往往都是從CPU、GPU、AI依次開始,然而單從高通一直所堅持的“移動平臺”理念,而非“處理器”的做法上看,就能看出其中不同的考量思路。本次第二代驍龍8移動平臺發(fā)布過程中的開篇介紹環(huán)節(jié)更是不同尋常,先是拋出關(guān)鍵詞“人工智能”,隨即表示內(nèi)置的AI引擎將開始AI加速的新時代,并開始著重介紹AI方面的性能提升,以及幾乎遍及手機(jī)各個使用體驗環(huán)節(jié)的AI特性。
首先,內(nèi)置的AI引擎在升級的高通Hexagon處理器支持下,用戶能夠體驗更快速的自然語言處理所帶來的多語種翻譯和先進(jìn)的AI影像特性。Hexagon處理器實現(xiàn)全新架構(gòu)升級,包括微切片推理,和一個更大的張量加速器帶來高達(dá)4.35倍的AI性能提升。第二代驍龍8也是首個支持變革性的INT4 AI精度格式的驍龍移動平臺,在持續(xù)AI推理方面能夠?qū)崿F(xiàn)60%的能效提升。
強(qiáng)大的AI引擎能夠與ISP產(chǎn)生聯(lián)動,使其成為首個認(rèn)知ISP。簡單來說,以往所謂的AI攝影都是“事后諸葛亮”,需要在拍攝完成后才能進(jìn)行優(yōu)化處理,用戶在使用過程中也能感知到一定的等待時間。有了認(rèn)知ISP的存在,就能通過實時語義分割實現(xiàn)照片和視頻的自動增強(qiáng),利用AI神經(jīng)網(wǎng)絡(luò)讓攝像頭在情境中感知人臉、面部特征、頭發(fā)、衣服和天空等,進(jìn)行獨立優(yōu)化,當(dāng)畫面還處于取景框中的時候,就能讓每個細(xì)節(jié)獲得定制的專業(yè)圖像調(diào)優(yōu)。
有趣的是,或許今年年初驍龍X70發(fā)布之時,誰也不曾想到該產(chǎn)品其實為第二代驍龍8進(jìn)行了較為明顯的劇透,這款內(nèi)置在第二代驍龍8中的5G平臺同樣也是首款內(nèi)置5G AI處理器的5G調(diào)制解調(diào)器產(chǎn)品,利用強(qiáng)大的AI特性支持突破性的5G上傳和下載速度、網(wǎng)絡(luò)覆蓋、低時延和出色能效。
本次第二代驍龍8移動平臺發(fā)布過程中,GPU、CPU反而成了最后介紹的環(huán)節(jié),不過卻絕不可等閑視之。其創(chuàng)新性的采用了1、2、2、3的架構(gòu),擁有一個主頻可達(dá)3.2GHz的Cortex-X3超級內(nèi)核,2個A715中核、2個A710中核、3個A510小核,性能提升35%,能效提升40%。Adreno 740 GPU支持光追,性能提升25%。甚至通過查證還能發(fā)現(xiàn)第二代驍龍8依舊采用了臺積電4nm工藝。
不過,重中之重依舊是AI,對于能夠為移動設(shè)備增添新維度的第二代驍龍8,AI已經(jīng)顯現(xiàn)出了照亮未來的耀眼光環(huán)。
增添新維度
“AI創(chuàng)新方法論本身在做自我的創(chuàng)新,將從二維走向三維!毙旌悴粩鄰亩鄠層面闡述著這種維度上的變化。
例如在手機(jī)中的ISP,最早的ISP,以及后來的CV-ISP都屬于受信息論約束的技術(shù),都還沒有突破過二維的限制,而隨著首個認(rèn)知ISP的出現(xiàn),從語義的角度已經(jīng)突破到三維認(rèn)知的水平。在此基礎(chǔ)上,移動設(shè)備已經(jīng)不僅僅糾結(jié)于畫質(zhì),同樣要開始向創(chuàng)作邁進(jìn),第二代驍龍8可實現(xiàn)在人與人、人與物之間自動對焦的導(dǎo)演模式,來助力用戶進(jìn)行視頻創(chuàng)作。
對于語義理解能力的提升也開啟了更大的想象空間,例如當(dāng)AI能夠充分理解時間軸語義后,閱讀一份文字日記后,就可以具備將其根據(jù)視頻素材自動生成影片的能力,普通的舊日回憶也能夠通過影像得以再現(xiàn)。
從硬件角度上看,AI引擎中的微切片推理能力本身也是一種二維向三維的邁進(jìn),突破此前數(shù)據(jù)處理過程中的按順序進(jìn)行的二維邏輯,微切片推理則實現(xiàn)了在時間軸上的突破,可以在適合的時間點把所有適合的微切片進(jìn)行組合,從而可以最大發(fā)揮處理器的運算能力。
由于實現(xiàn)了對于INT4的支持,Transformer的運行同樣是在從二維方法論推進(jìn)到三維方法論,原因在于其可以跨過時間的約束,不僅可以進(jìn)行自然語言處理,還能進(jìn)行實時轉(zhuǎn)錄、情感分析、實時翻譯。
AI甚至還將改變很多玩家游戲中的體驗,例如目前游戲中當(dāng)玩家遇到所謂的“人機(jī)”時,都會明顯感知到其拙劣的操作。而隨著AI的引入,即便是單機(jī)游戲中的電腦AI,也能擁有更加真實的自主操作能力,進(jìn)而提升玩家在游戲中的樂趣。
打開新大門
擁有全新維度的第二代驍龍8,在AI相關(guān)用例的性能表現(xiàn)上,相比競爭對手,也可以說是降維打擊般的存在,如超分辨率、人臉檢測、背景虛化、語言方面,均比竟品A/競品B表現(xiàn)出幾倍以上的優(yōu)勢。
小米在本次峰會期間就展示具備完全離線AI能力的小愛同學(xué),依托第二代驍龍8的算力,離線實時字幕翻譯功能可以非常流暢即時顯示,甚至同時顯示三語也依舊流暢。并且離線AI能力的實現(xiàn)并非降低實際的使用體驗,相比在線AI模式,存儲降至9%,質(zhì)量保持在了91.9%的水平。
同時,離線AI能力還給予了用戶更高的安全保證,由于本地即可實現(xiàn)強(qiáng)大的自然語言處理能力,音頻數(shù)據(jù)也就不用上傳至云端,大大保護(hù)了用戶的隱私。要知道,現(xiàn)在不少IT從業(yè)者甚至敏感的保持著不用智能音箱時就會拔電源的習(xí)慣。
如同小米的案例,由于高通傳感器中樞AI能力的存在,為了運動識別、手勢檢測、人體檢測、超聲波、智慧感知攝像頭等眾多用例打開了新大門。借助高通AI Stack工具的助力,移動開發(fā)者能夠開發(fā)出即便在手機(jī)平臺上也具有超高性能和優(yōu)秀體驗的下一代 AI 移動應(yīng)用。并且高通AI Stack還將會提供包括 QualcommAI Studio 在內(nèi)的更多特性和工具。
無論是在AI側(cè)的大幅性能提升,還是種種技術(shù)設(shè)計上的新突破,顯然第二代驍龍8移動平臺已經(jīng)跳出了傳統(tǒng)的思維定式,在新的維度上為智能手機(jī)的發(fā)展開啟了一扇通往未來的大門。