您現在的位置是:首頁 > 攝影首頁攝影

融入AI的第二代驍龍8,能否成為手機未來的“最優解”?

由 品玩 發表于 攝影2022-12-12
簡介高通透過第二代驍龍 8,以AI賦能語言理解、手機視覺、AI拍照、5G傳輸,能夠從全方位對手機體驗進行提升,讓手機理解使用者的每一個動作,感知整個世界

如何解決拍照反光問題

第二代驍龍 8如約推出,在我們看來,未來一年內Android平臺手機的發展路線已經被徹底敲定了。

如果對這場釋出會有所關注的朋友,一定會注意到一個有意思的地方。

從釋出會開始到結束,高通幾乎通篇都在講自身產品在AI方面的優勢,反覆強呼叫戶體驗和AI賦能。

介於高通大篇幅對AI的介紹,我們認為高通下一步的方向,就是要用AI來加強產品的使用體驗,以此為未來手機產品發展劃出一條新的方向。

融入AI的第二代驍龍8,能否成為手機未來的“最優解”?

近兩年,國內一直在強調“智慧手機”這一概念,從早期的使用者操控手機,再到手機輔助使用者,手機正在從單純的工具變為輔助消費者的“助手”。

從手機廠商的願景來看,“智慧手機”的下一步,就是如何讓手機理解使用者,成為消費者在數字世界的“管家”。

在邁入“下一步”的環節當中,AI是至關重要的一環。第二代驍龍 8採用了與AI深度融合的方式,來增強消費者的使用體驗。

那麼,AI算力與產品體驗的融合,會成為未來手機的“最優解”嗎?

更強大的AI算力,能為消費者帶來什麼?

在談及智慧手機未來方向之前,我們先來聊聊第二代驍龍 8的AI算力。

在近兩年的移動平臺上,AI正逐漸從幕後轉為臺前,成為廠商們宣傳的重點。尤其是與AI深度融合的第二代驍龍 8,算力的強弱是貫穿所有特性的關鍵。

融入AI的第二代驍龍8,能否成為手機未來的“最優解”?

在全新的第二代驍龍 8移動平臺上,高通AI引擎的核心Hexagon 處理器實現了重大升級,Hexagon 處理器包含標量加速器、向量加速器和張量加速器,針對對於現代AI十分重要的張量加速器,高通將其尺寸翻倍,同時還引入了全新的微切片推理,並增加了獨立的供電系統。

融入AI的第二代驍龍8,能否成為手機未來的“最優解”?

需要注意,基於這顆Hexagon 處理器,第二代驍龍8是目前唯一一顆支援INT4精度AI計算的移動平臺。

與此前經常提起的浮點計算精度模式相比,支援INT4精度計算能夠在移動平臺上以有限的計算資源,執行更多神經網路模型,在不損失精度的情況下精簡AI模型以降低功耗。

在持續AI推理計算任務上,第二代驍龍 8相比第一代驍龍 8移動平臺效能提升了4。35倍,能效提升60%,從32位浮點運算到4位整數運算,能耗降低了整整64倍。

融入AI的第二代驍龍8,能否成為手機未來的“最優解”?

只談及資料,我們很難從中理解到升級進步的幅度,那我們就從功能角度進行理解。

AI的賦能,讓手機有了語言理解的能力,這一技術被稱為自然語言處理(NPL),未來搭載第二代驍龍 8的移動裝置,能夠更快的理解和分解人類語言。並且由於算力的提升,在本地就能實現更精準的語言理解能力,透過本地進行翻譯、理解,在消除網路波動的同時,還能更好的保護消費者的“大資料隱私”。

基於第二代驍龍 8的AI效能,小米也宣佈會在2023年推出離線版小愛同學,支援離線對話、語音喚醒、離線翻譯等功能。

融入AI的第二代驍龍8,能否成為手機未來的“最優解”?

這是語音助手的一種全新形態,這些都與消費者的產品體驗息息相關。

為手機加入看世界的“眼睛”

相比於前面比較“縹緲”的AI算力,“高通感測器中樞”會讓手機變得更“擬人化”。

在第一代驍龍 8上,高通感測器中樞就發揮了強大的作用,用於處理一些需要長時間執行的新特性,比如語音助理、活動檢測、環境理解,以及低功耗感知攝像頭(人臉解鎖掃描)。利用AI的強大算力,來為我們處理手機上的音訊、視覺以及感測器的資訊,幫助裝置偵測周圍環境並作出相應調整。

融入AI的第二代驍龍8,能否成為手機未來的“最優解”?

在第二代驍龍 8上,高通為其內建了兩顆 AI協處理單元和一顆DSP,用來提升高通感測器中樞的能力。

在加入更多的AI協處理單元后,高通感測器中樞在“始終感知能力”上,得到了大幅提升。在提高裝置AI效能、加快處理速度的基礎上,提升了音訊和感測器的始終感知能力,並且解鎖了“始終感知攝像頭”的全新能力。

“始終感知攝像頭”最重要的一點,就是為手機加入能夠看到世界的眼睛。

搭載第二代驍龍 8的手機,可以在後臺持續執行攝像頭的功能,並且依託於AI算力,將一切都留存在手機當中,避免隱私洩露。

比如,熄屏下只需對著二維碼,就可以實現掃碼的行為,手機自動彈出掃描出來的視窗;如果有陌生人在身旁,前置攝像頭也可以對其進行識別,並且自動隱藏通知,當感知到陌生人離開後重新開啟;當用戶躺下時,手機會自動更改螢幕方向,無需進行手動更改。

融入AI的第二代驍龍8,能否成為手機未來的“最優解”?

高通感測器中樞的功能遠不止此,對於語義識別、日常操作學習等,高通感測器中樞都能有著比較不錯的表現。

除此之外,為了帶來更強大的AI影像體驗,高通選擇在Hexagon 處理器和Qualcomm Spectra ISP之間,增加了一個名為“Hexagon直連”的物理連線,在兩者之間建立了直接連線通道。

融入AI的第二代驍龍8,能否成為手機未來的“最優解”?

而這一操作,除了讓智慧手機能夠從多個層面認知外部世界之外,還獲得了一個全新而獨特的、具有AI能力的ISP,高通將其稱之為“認知 ISP”。

擁有獨立AI的拍照系統

近兩年,計算攝影成為手機廠商的不二選擇,除了能夠保證更優質的成像效果之外,還能讓更多零基礎人群體驗到拍攝的樂趣。

但事實上,計算攝影只是AI拍照系統中的一環。

2018年,高通推出了首款支援“計算機視覺(CV-ISP)”的ISP:Spectra 380,如今又推出了全新認知 ISP,高通一直想讓AI深度介入影像系統當中。

此前的AI攝影有著較大的侷限性,手機拍攝與AI引擎介入之間有著先後順序,在手機進行拍攝後,系統才會呼叫神經網路來對圖片進行最佳化和計算,在耗時耗電的同時,還會影響拍攝速度和質量。

簡單來說,就是先拍照,再AI。

由於第二代驍龍 8在Spectra ISP與Hexagon 處理器之間建立了物理層面的直連通道,兩者之間可以進行實時的、大量的資料交換,相當於為Spectra ISP帶來更強的AI認知能力,去更好的理解世界、環境、物體、光線等等。

融入AI的第二代驍龍8,能否成為手機未來的“最優解”?

所以,有了強大AI效能的影像系統,有了更多新的玩法。

高通為搭載第二代驍龍 8的移動裝置加入了名為“語義分割”的AI照片編輯技術,能夠將畫面中多種不同的元素進行自定義編輯和分割,將每個物體分割變成類似“Photoshop”圖層一樣,在拍攝時根據每個物體的種類,進行編輯分類、柔化面板、銳化草地等等,整個過程在拍攝時都在實時執行,甚至在按下快門前,也就是取景框當中就可以實時看到這一切。

融入AI的第二代驍龍8,能否成為手機未來的“最優解”?

“語義分割”能做的遠不止這些,第二代驍龍 8還能實現對捕捉畫面的情境感知,比如在拍攝面部時,會對錶情進行智慧檢測,識別嘴唇、牙齒、面板、頭髮等,還能識別出手表、頭盔、眼鏡等,且智慧的消除掉反光和炫光,對不同細節完成針對性的最佳化。

融入AI的第二代驍龍8,能否成為手機未來的“最優解”?

這相當於,在拍照的同時,還有一個優秀的“P圖師”在 進行實時服務。

“語義分割”的實現,意味著手機擁有了類似人類的思維,能夠知曉“美與醜”,從另一方面說,也是為手機影像帶來了新的“生命”。

不管多強大的AI影像也需要更強勢的硬體支援,最後我們再來簡單聊聊第二代驍龍 8在基礎影像上的一些進步:

第二代驍龍 8依舊是18-bit 的三ISP,支援HDR 10、HDR 10+、HLG、杜比視界。單攝像頭最高支援2億畫素,在支援30fps、多幀降噪(MFNR)以及零延遲拍攝(ZSL)條件下,單攝像頭支援一億畫素,雙攝像頭支援6400萬畫素+3600萬畫素,三攝像頭最高3600萬畫素。

在影片拍攝上,第二代驍龍 8支援拍攝8K HDR@30fps的畫面,並且同時拍攝6400萬畫素照片,支援4K@120fps影片拍攝,並且加入了AV1編碼格式,最高可播放8K HDR@60fps影片。

融入AI的第二代驍龍8,能否成為手機未來的“最優解”?

此前,由於各大手機廠商的硬體和調教風格不同,拍攝出來的照片時好時壞,穩定性欠佳。基於這一情況,高通選擇了與影像廠商進行聯合調校,合作出特定感測器針對第二代驍龍 8進行最佳化,支援了包括索尼的四曝光數字重疊技術(QDOL-HDR)、三星的ISOCELL HP3 2億畫素感測器等技術。

由於高通已經對部分感測器調校完畢,相信未來會有更多的手機廠商選擇這幾款感測器,使用起來也更為方便。

5G也要加入“AI”

在文章開頭,我們聊到了AI與體驗的融合會不會成為手機的未來發展方向。

在這一點上,高通有著更為“激進”的想法,甚至在5G基帶中也塞入了一顆AI處理器。

第二代驍龍 8搭載了驍龍 X70 5G調變解調器及射頻系統,成為首個以AI賦能的移動平臺基帶。

在基帶中加入AI,比我們想象中的要更為有用,AI可以大量介入到網路傳輸當中,實時最佳化關鍵引數和條件,比如通道狀態反饋、毫米波波束成形、天線調諧和其他自適應功能,大幅度降低功耗,提升連線速度。

融入AI的第二代驍龍8,能否成為手機未來的“最優解”?

搭載第二代驍龍 8的移動裝置5G傳輸速度,甚至能達到10Gbps。

除此之外,X70 5G基帶還支援雙卡雙通(DSDA)5G連線。早前的雙卡雙通最大的問題就是需要兩套射頻系統,並且由於訊號過於複雜,還會對WiFi、藍芽等訊號造成影響。

融入AI的第二代驍龍8,能否成為手機未來的“最優解”?

如今第二代驍龍 8透過自研的射頻訊號軟體虛擬化技術,實現了5G+5G/5G+4G的雙卡雙通,

當卡一在進行資料傳輸或進行通話時,卡二同樣仍舊可以進行資料傳輸或進行通話,不會影響手機使用狀態

在WiFi連線上,第二代驍龍 8支援WiFi 7(802。11be)連線,在下載速度上最高能達到5。8Gbps,同時這也是全球時延最低的WiFi,低於2ms。

光追技術:更貼近真實的遊戲體驗

聊了AI技術的加入對手機體驗上的影響,我們再來聊聊遊戲方面。

第二代驍龍 8改變了處理器架構,帶來更為強大的效能,以及支援了更先進的遊戲技術:光線追蹤

第二代驍龍 8搭載了一個基於Cortex-X3的Kryo超大核,主頻達到了3。2GHz,大幅度提升了單執行緒效能。此外,這次第二代驍龍8在架構上進行了調整,從早前的1+3+4的架構變成了1+2+2+3的架構,四個效能核心(2 x Cortex A715 + 2 x Cortex A710),頻率均為2。8GHz,三個效率核心Cortex A510,頻率為2。0GHz。

四個效能核心的改變,讓第二代驍龍 8在日常多執行緒負載上,有了更好的表現。

根據官方說法,第二代驍龍 8的CPU效能提升了35%,能效提升了40%。

融入AI的第二代驍龍8,能否成為手機未來的“最優解”?

在GPU上,全新的Adreno 740 GPU在效能上同樣實現了躍進,相比第一代驍龍 8有著25%的提升,在能效上提升高達45%,並且新加入了Vulkan 1。3的支援,有著30%的Vulkan提升。

我們再來聊聊光線追蹤技術。

在過去兩年裡,包括三星、OPPO、Imagination等公司紛紛釋出了各自的手遊光追技術,但由於技術不夠成熟、軟硬體協同不夠,仍舊面臨著各種問題。

如今高通終於下場,在第二代驍龍 8上實現了光線追蹤能力。

融入AI的第二代驍龍8,能否成為手機未來的“最優解”?

光線追蹤技術的加入,能夠影響整體畫面的真實度,提供不同材質更真實的反射,以及真實陰影和環境光遮蔽等光學反射效果。

融入AI的第二代驍龍8,能否成為手機未來的“最優解”?

簡而言之,光追技術的加入會進一步加深手遊的“真實性”。

對消費者來說,一個高質量手遊時代即將到來,並且隨著移動平臺的效能不斷加強,會有吸引更多3A端遊廠商向著移動遊戲平臺進行遷移。

目前,網易遊戲已經宣佈與高通合作,未來會基於第二代驍龍 8移動平臺為《逆水寒》新增實時光追技術,實現更真實的遊戲畫面。

融入AI的第二代驍龍8,能否成為手機未來的“最優解”?

答案是,會。

我認為,如今移動裝置的效能確實存在“溢位”的現象,如何增強消費者的使用體驗,是一切問題的關鍵。

高通透過第二代驍龍 8,以AI賦能語言理解、手機視覺、AI拍照、5G傳輸,能夠從全方位對手機體驗進行提升,讓手機理解使用者的每一個動作,感知整個世界。

融入AI的第二代驍龍8,能否成為手機未來的“最優解”?

第二代驍龍 8透過全平臺的AI賦能案例,向我們證明了,AI的深層次融入,才是未來手機發展的“最優解”。

從如今高通展示出未來手機的發展方向,我們能夠明顯感覺到,如今高通在AI領域的領導力和適用性,透過自身的堅實技術,成為手機廠商不可或缺的技術底座。

這一情況我們也可以理解為,高通是驅動手機發展方向的幕後廠商。

隨著第二代驍龍 8的釋出結束,有越來越多的廠商宣佈採用高通新一代移動平臺。目前小米、OPPO、一加、vivo、iQOO以及紅魔遊戲手機,都已經宣佈將會首批推出搭載第二代驍龍 8的手機新品。

不知道手機廠商會為消費者提供一份怎麼樣的答卷呢?