前不久的驍龍峰會(huì)上,高通正式發(fā)布了第五代驍龍8至尊版移動(dòng)平臺(tái)。作為每年移動(dòng)端旗艦平臺(tái)的標(biāo)桿產(chǎn)品,它不僅延續(xù)了在CPU、GPU和AI方面的傳統(tǒng)優(yōu)勢(shì),更首次在影像能力上實(shí)現(xiàn)全面突破。驍龍一方面正在將更多專(zhuān)業(yè)級(jí)的強(qiáng)大影像能力“塞入”我們的手機(jī),同時(shí)又盡可能降低手機(jī)影像的創(chuàng)作門(mén)檻。
驍龍,似乎正在進(jìn)行一場(chǎng)關(guān)乎手機(jī)影像的深度變革。
第五代驍龍8至尊版移動(dòng)平臺(tái),最引人矚目的影像創(chuàng)新之一便是全球首次支持APV高級(jí)專(zhuān)業(yè)視頻編解碼器的能力。APV(Advanced Professional Video,高級(jí)專(zhuān)業(yè)視頻編解碼器)是一種專(zhuān)為專(zhuān)業(yè)級(jí)視頻錄制和后期制作需求而設(shè)計(jì)的視頻編解碼技術(shù)。它最大的亮點(diǎn)就是能夠在實(shí)現(xiàn)高效壓縮的同時(shí),最大限度保留原始畫(huà)面信息,為后期制作提供更大的調(diào)整空間。
具體到創(chuàng)作能力方面,APV高級(jí)專(zhuān)業(yè)視頻編解碼器能夠?yàn)槭謾C(jī)帶來(lái)更為專(zhuān)業(yè)的錄制能力。比如它支持手機(jī)采用LOG模式錄制,能夠極大保留高光和陰影部分的細(xì)節(jié),擴(kuò)展視頻的動(dòng)態(tài)范圍。同時(shí)APV支持12-bit色彩深度,讓畫(huà)面可以呈現(xiàn)無(wú)比豐富的色彩漸變,有效避免在拍攝天空、陰影等平滑漸變區(qū)域時(shí)出現(xiàn)難看的色彩斷層。同時(shí),4:4:4采樣能確保物體邊緣(尤其是文字和線條)的色彩和清晰度極佳,非常適合需要后期摳像或制作合成畫(huà)面的創(chuàng)作。
第五代驍龍8至尊版移動(dòng)平臺(tái)集成APV高級(jí)專(zhuān)業(yè)視頻編解碼器的能力,將專(zhuān)業(yè)級(jí)視頻制作能力帶到了智能手機(jī)設(shè)備中。它不僅僅是一個(gè)簡(jiǎn)單的錄制功能,更是實(shí)現(xiàn)了從拍攝到后期的全面專(zhuān)業(yè)工作流支持:你手中的手機(jī)就是一臺(tái)具備專(zhuān)業(yè)級(jí)視頻錄制能力的設(shè)備,它錄制的素材能夠直接導(dǎo)入專(zhuān)業(yè)編輯軟件(如DaVinci Resolve、Adobe Premiere Pro)中進(jìn)行處理,無(wú)需轉(zhuǎn)碼或轉(zhuǎn)換格式,避免了不必要的質(zhì)量損失。APV使得拍攝、編輯和分享可以在同一設(shè)備上無(wú)縫完成,大大簡(jiǎn)化了工作流程。
你的手機(jī),正在成為電影機(jī)。第五代驍龍8至尊版這一能力,成功將專(zhuān)業(yè)級(jí)視頻制作能力濃縮到芯片級(jí)別,使普通消費(fèi)者和專(zhuān)業(yè)創(chuàng)作者都能以前所未有的便捷方式捕獲和創(chuàng)作高質(zhì)量視頻內(nèi)容。對(duì)于當(dāng)前火熱的短視頻、短劇、微電影等領(lǐng)域?qū)I(yè)創(chuàng)作者來(lái)說(shuō),這無(wú)疑是一個(gè)好消息。
能體現(xiàn)第五代驍龍8至尊版移動(dòng)平臺(tái)強(qiáng)大影像能力的第二個(gè)方面就是它引入了業(yè)界首個(gè)20-bit三ISP架構(gòu)。20-bit三重ISP最顯著的提升在于動(dòng)態(tài)范圍。相比當(dāng)前普通旗艦手機(jī)的18-bit,20-bit架構(gòu)對(duì)于色彩層次信息的捕捉范圍提升了4倍,直接帶來(lái)的影像紅利就是圖像動(dòng)態(tài)范圍的大幅度擴(kuò)展。
在首發(fā)第五代驍龍8至尊版的小米17系列新機(jī)上,我們已經(jīng)能夠見(jiàn)識(shí)到20-bit三ISP架構(gòu)的實(shí)力。結(jié)合小米全新影像傳感器和全新第五代驍龍8至尊版移動(dòng)平臺(tái)的ISP性能,小米17 Pro能夠提供16.5EV超高動(dòng)態(tài)范圍。在很多旗艦手機(jī)都容易翻車(chē)的大逆光場(chǎng)景下,小米17系列能夠?qū)崿F(xiàn)更純凈的逆光抓拍,畫(huà)面能夠提供充足的明暗層次和細(xì)節(jié),避免了多數(shù)旗艦手機(jī)拍照時(shí)容易產(chǎn)生的畫(huà)面過(guò)曝和死黑區(qū)域的產(chǎn)生。
與此同時(shí),第五代驍龍8至尊版三ISP的設(shè)計(jì)也為當(dāng)前旗艦手機(jī)帶來(lái)了更具優(yōu)勢(shì)的體驗(yàn)。它能實(shí)現(xiàn)多攝像頭的協(xié)同和并發(fā)處理能力,讓手機(jī)在不同焦段、不同鏡頭切換的時(shí)候更加絲滑流暢,還能夠支持多個(gè)攝像頭同時(shí)進(jìn)行視頻錄制,為創(chuàng)作者提供多角度的拍攝能力。三ISP設(shè)計(jì)對(duì)ISP的性能要求是極高的,它不僅是數(shù)量的簡(jiǎn)單疊加,更是對(duì)架構(gòu)、算力、能效和協(xié)同能力的全方位考驗(yàn)。
第五代驍龍8至尊版的ISP強(qiáng)大的性能和數(shù)據(jù)吞吐量,也更好地實(shí)現(xiàn)了對(duì)于更高像素傳感器的支持。接下來(lái)安卓旗艦手機(jī)全面用上的2億像素超高清傳感器,背后依然離不開(kāi)第五代驍龍8至尊版提供的底層支持。
不得不提的還有第三個(gè)層面:AI影像。
即便你是一個(gè)對(duì)于手機(jī)影像沒(méi)有多高要求的普通用戶(hù),你應(yīng)該也能感受到AI對(duì)于影像的深遠(yuǎn)影響。可以說(shuō),當(dāng)前幾乎所有的智能手機(jī)影像都或多或少地用到了AI,這背后當(dāng)然離不開(kāi)驍龍的賦能。
去年的驍龍8至尊版上,高通就對(duì)Hexagon NPU與ISP之間的協(xié)作進(jìn)行了革新:Hexagon NPU與ISP之間建立了超高速直連通道,NPU可以直接訪問(wèn)處理圖像傳感器的原始RAW數(shù)據(jù)。同時(shí),借助驍龍平臺(tái)的異構(gòu)運(yùn)算架構(gòu),Hexagon NPU能夠分擔(dān)一些諸多多幀合成、語(yǔ)義分割等復(fù)雜任務(wù),使得整個(gè)圖像處理管線更加高效。
全新的第五代驍龍8至尊版上,高通進(jìn)一步提升了Hexagon NPU的性能。對(duì)比上一代,其性能提升達(dá)到了37%。這就意味著,Hexagon NPU能夠提供更加高效、強(qiáng)大的AI影像能力。
高通這次聯(lián)合虹軟推出的一項(xiàng)名為Dragon Fusion的技術(shù)。這套方案最大的亮點(diǎn)就是其全鏈路的理念,對(duì)ISP(圖像信號(hào)處理器)架構(gòu)與AI引擎的深度優(yōu)化,實(shí)現(xiàn)了CPU、GPU、NPU、ISP等多硬件的高效協(xié)同。這種協(xié)同使得Video Dragon Fusion引擎能夠充分挖掘硬件潛力,從而提升視頻動(dòng)態(tài)范圍與層次表現(xiàn)。
如果說(shuō)之前的視頻增強(qiáng)技術(shù),只是簡(jiǎn)單將照片的算法遷移到視頻。那么第五代驍龍8至尊版的Dragon Fusion技術(shù)是從圖像傳感器捕獲光信號(hào)的那一刻起,就介入處理流程,并與驍龍8至尊版,包括手機(jī)傳感器的硬件能力深度耦合。在高通峰會(huì)的展示區(qū)域,利用Dragon Fusion技術(shù)拍攝的視頻樣片在動(dòng)態(tài)范圍、影調(diào)過(guò)渡以及色彩還原等方面都表現(xiàn)出了非常大的優(yōu)勢(shì)。
高通在本次驍龍峰會(huì)上重點(diǎn)強(qiáng)調(diào)了未來(lái)AI“以人為核心”的理念。就AI影像應(yīng)用來(lái)說(shuō),基于終端側(cè)學(xué)習(xí)的多模態(tài)AI模型能深度理解用戶(hù)的拍攝習(xí)慣和偏好,實(shí)現(xiàn)個(gè)性化拍攝建議和參數(shù)自動(dòng)調(diào)整。甚至是在端側(cè)直接進(jìn)行了AI圖像、視頻的處理和再創(chuàng)作,都是當(dāng)前手機(jī)廠商以及第三方應(yīng)用服務(wù)商都在做的事情。從驍龍平臺(tái)這些年在AI領(lǐng)域的創(chuàng)新來(lái)看,提前為相關(guān)應(yīng)用謀篇布局,提供強(qiáng)大的AI影像能力支持,是驍龍平臺(tái)最擅長(zhǎng)的“基本功”。
從支持專(zhuān)業(yè)后期工作流的APV編解碼器,到捕捉驚人動(dòng)態(tài)范圍的20-bit三重ISP,再到深度融合的Dragon Fusion技術(shù),第五代驍龍8至尊版的影像升級(jí)清晰地指明了一個(gè)方向:驍龍正致力于讓手機(jī)影像能力達(dá)到前所未有的專(zhuān)業(yè)高度,同時(shí)又正在將這種強(qiáng)大的能力無(wú)縫普及至每一位用戶(hù)。
第五代驍龍8至尊版宣告了移動(dòng)影像的新時(shí)代:專(zhuān)業(yè)與大眾的邊界正在模糊,創(chuàng)作的權(quán)利被交還給每一個(gè)人。未來(lái)在驍龍平臺(tái)的驅(qū)動(dòng)下,手機(jī)影像的潛力必將持續(xù)突破想象,讓每個(gè)人都能更自由、更輕松地記錄與表達(dá)這個(gè)世界。