2022驍龍峰會(huì)的第二天,高通把主旋律定在手機(jī)之外的體驗(yàn)上。讓所有人驚喜的是,高通宣布推出第一代驍龍AR2平臺(tái)——這是高通首個(gè)專為AR眼鏡打造的專用處理器,也是移動(dòng)終端芯片領(lǐng)域首次出現(xiàn)的AR設(shè)備專用處理器。
官方資料顯示,驍龍AR2采用多芯片分布式處理架構(gòu)并結(jié)合定制化IP模塊,整體AI性能提升2.5倍,功耗降低50%,支持AR眼鏡實(shí)現(xiàn)功耗低于1W,支持Wi-Fi 7。相較于第一代驍龍XR2平臺(tái),驍龍AR2可以將AR眼鏡中的PCB面積縮小40%。
要知道,高通旗下已經(jīng)有過驍龍XR平臺(tái),高通為什么突然獨(dú)寵“AR眼鏡”?又是怎么看待這個(gè)市場(chǎng)的?驍龍AR2有什么獨(dú)特之處?科技行者在峰會(huì)現(xiàn)場(chǎng)找到了答案。
“實(shí)體屏幕將消失,空間計(jì)算是未來(lái)”
數(shù)十年來(lái),主流計(jì)算系統(tǒng)的更替,往往伴隨操作界面和顯示界面的變化,比如鍵鼠和顯示器,再到觸控和屏幕。可是電視、電腦、平板、智能手機(jī)、可穿戴設(shè)備,這些常用載體的顯示界面,無(wú)論是哪一塊界面,都還只是停留在2D屏幕上。
高通技術(shù)公司產(chǎn)品市場(chǎng)高級(jí)總監(jiān)Deb Marich現(xiàn)場(chǎng)提出,未來(lái)一定是個(gè)兼具「高度沉浸感」和「?jìng)€(gè)性化體驗(yàn)」的新時(shí)代,將模糊現(xiàn)實(shí)世界和數(shù)字世界的邊界。“高通借助XR打造更具沉浸感的空間計(jì)算體驗(yàn),而空間計(jì)算是互聯(lián)網(wǎng)的未來(lái),實(shí)體屏幕將消失,用戶能夠與周圍的各種數(shù)據(jù)進(jìn)行交互。”
圖:高通技術(shù)公司產(chǎn)品市場(chǎng)高級(jí)總監(jiān)Deb Marich
高通的XR策略主要專注于四個(gè)方面:打造業(yè)界領(lǐng)先平臺(tái)、基礎(chǔ)感知技術(shù)、參考設(shè)計(jì)和開發(fā)者工具(基于Snapdragon Spaces XR開發(fā)者平臺(tái))。高通將這些全都融入驍龍XR平臺(tái),該平臺(tái)已賦能超過60款全球領(lǐng)先的XR終端,聯(lián)想、Meta和PICO最近都已經(jīng)推出了相關(guān)的XR產(chǎn)品。
即便驍龍XR1和驍龍XR2平臺(tái)已經(jīng)助力XR生態(tài)初具規(guī)模,但是高通深知這不是終點(diǎn)。
VR和AR需求分化,需要不同的專用芯片
“我們看到了頭戴式AR這一品類的巨大潛力。”Deb Marich表示,僅去年,AR用戶數(shù)量就增加了一倍多。
Deb Marich進(jìn)一步說(shuō)道,隨著VR和AR終端的需求分化,需要借助專用解決方案,應(yīng)對(duì)兩種不同的需求。例如,VR和MR終端需要配備更高分辨率的顯示屏、更多攝像頭和傳感器。但AR眼鏡需要更薄、更輕,以適應(yīng)全天舒適佩戴。但縱觀市面產(chǎn)品,還沒有產(chǎn)品做到極致。
所以這就是驍龍AR2平臺(tái)誕生的初衷——讓每個(gè)人都擁有頂級(jí)的空間計(jì)算眼鏡。“我們相信消費(fèi)者能夠在不久的將來(lái),體驗(yàn)融入AR和MR元素的智能眼鏡,在輕薄舒適的外觀設(shè)計(jì)中,獲得沉浸式體驗(yàn)。”Deb Marich暢想道。
作為驍龍XR產(chǎn)品組合的擴(kuò)展之作,即便是驍龍AR2專為AR眼鏡而生,但要想打造理想的AR處理器,顯然不是一件易事。
且不說(shuō)頭戴式AR開發(fā)非常復(fù)雜,要實(shí)現(xiàn)功耗、散熱、感知技術(shù)和性能等關(guān)鍵變量之間的精妙平衡,而這些還只是變量的一小部分;另外,高通還必須在一副用戶愿意戴的、輕薄的、時(shí)尚的眼鏡中做到這一切。這些關(guān)鍵難點(diǎn),被高通稱之為“高通級(jí)別的挑戰(zhàn)”。
為AR市場(chǎng)帶來(lái)更多可能
驍龍AR2平臺(tái)究竟如何應(yīng)對(duì)“高通級(jí)別的挑戰(zhàn)”?高通技術(shù)公司副總裁兼XR業(yè)務(wù)總經(jīng)理司宏國(guó)(Hugo Swart)總結(jié)它有三大亮點(diǎn),覆蓋處理、AI、連接方面。
首先,驍龍AR2利用分布式處理架構(gòu),可以將一些感知數(shù)據(jù)的處理直接分配給眼鏡終端,而把更復(fù)雜的數(shù)據(jù)處理需求分流到搭載驍龍平臺(tái)的智能手機(jī)、PC或其他兼容的主機(jī)終端上。憑借分布式處理架構(gòu),高通才能夠?qū)⒐慕档偷?瓦。司宏國(guó)說(shuō),“對(duì)于打造用戶愿意戴的、輕薄的、時(shí)尚的AR眼鏡來(lái)說(shuō),功耗低至1瓦是一個(gè)非常重要的里程碑。”
其次,驍龍AR2集成了一系列面向AR優(yōu)化的性能,例如攝像頭、AI、重投影、感知算法強(qiáng)化。在攝像頭方面,驍龍AR2同時(shí)支持九路并行攝像頭進(jìn)行用戶和環(huán)境理解。在AI方面,該平臺(tái)增強(qiáng)的感知能力包括:能夠改善用戶運(yùn)動(dòng)追蹤和定位的專用硬件加速引擎、用于降低手勢(shì)追蹤或六自由度(6DoF)等高精度輸入交互時(shí)延的AI加速器,以及支持更流暢視覺體驗(yàn)的重投影引擎。
最后,驍龍AR2支持高通FastConnect 7800移動(dòng)連接系統(tǒng),成為全球首款Wi-Fi 7加持的AR解決方案,但它也支持Wi-Fi 6場(chǎng)景。
除了性能參數(shù)之外,打造涵蓋硬件、全套感知技術(shù)和軟件工具的端到端解決方案對(duì)創(chuàng)建沉浸式體驗(yàn)至關(guān)重要。為了讓開發(fā)者創(chuàng)建出色的頭戴式AR應(yīng)用,驍龍AR2平臺(tái)已經(jīng)優(yōu)化支持Snapdragon Spaces。
“智能手機(jī)是面向AR眼鏡的關(guān)鍵主機(jī)設(shè)備,讓豐富的沉浸式體驗(yàn)成為可能。隨著更多OEM廠商打造搭載驍龍AR2的AR眼鏡,我們還需要擴(kuò)展兼容智能手機(jī)和主機(jī)設(shè)備的可用性。”司宏國(guó)說(shuō)道,因此驍龍AR2平臺(tái)支持和第二代驍龍8配對(duì)使用,搭載第二代驍龍8移動(dòng)平臺(tái)的手機(jī)與搭載第一代驍龍AR2平臺(tái)的AR眼鏡,將在連接等方面能夠獲得更好的體驗(yàn)。
目前,多家OEM廠商對(duì)采用驍龍AR2的產(chǎn)品開發(fā)已進(jìn)入不同階段,包括聯(lián)想、LG、Nreal、OPPO、Pico、QONOQ、Rokid、夏普、TCL、Vuzix和Xiaomi。
好文章,需要你的鼓勵(lì)
騰訊ARC實(shí)驗(yàn)室推出AudioStory系統(tǒng),首次實(shí)現(xiàn)AI根據(jù)復(fù)雜指令創(chuàng)作完整長(zhǎng)篇音頻故事。該系統(tǒng)結(jié)合大語(yǔ)言模型的敘事推理能力與音頻生成技術(shù),通過交錯(cuò)式推理生成、解耦橋接機(jī)制和漸進(jìn)式訓(xùn)練,能夠?qū)?fù)雜指令分解為連續(xù)音頻場(chǎng)景并保持整體連貫性。在AudioStory-10K基準(zhǔn)測(cè)試中表現(xiàn)優(yōu)異,為AI音頻創(chuàng)作開辟新方向。
Meta與特拉維夫大學(xué)聯(lián)合研發(fā)的VideoJAM技術(shù),通過讓AI同時(shí)學(xué)習(xí)外觀和運(yùn)動(dòng)信息,顯著解決了當(dāng)前視頻生成模型中動(dòng)作不連貫、違反物理定律的核心問題。該技術(shù)僅需添加兩個(gè)線性層就能大幅提升運(yùn)動(dòng)質(zhì)量,在多項(xiàng)測(cè)試中超越包括Sora在內(nèi)的商業(yè)模型,為AI視頻生成的實(shí)用化應(yīng)用奠定了重要基礎(chǔ)。
上海AI實(shí)驗(yàn)室發(fā)布OmniAlign-V研究,首次系統(tǒng)性解決多模態(tài)大語(yǔ)言模型人性化對(duì)話問題。該研究創(chuàng)建了包含20萬(wàn)高質(zhì)量樣本的訓(xùn)練數(shù)據(jù)集和MM-AlignBench評(píng)測(cè)基準(zhǔn),通過創(chuàng)新的數(shù)據(jù)生成和質(zhì)量管控方法,讓AI在保持技術(shù)能力的同時(shí)顯著提升人性化交互水平,為AI價(jià)值觀對(duì)齊提供了可行技術(shù)路徑。
谷歌DeepMind團(tuán)隊(duì)開發(fā)的GraphCast是一個(gè)革命性的AI天氣預(yù)測(cè)模型,能夠在不到一分鐘內(nèi)完成10天全球天氣預(yù)報(bào),準(zhǔn)確性超越傳統(tǒng)方法90%的指標(biāo)。該模型采用圖神經(jīng)網(wǎng)絡(luò)技術(shù),通過學(xué)習(xí)40年歷史數(shù)據(jù)掌握天氣變化規(guī)律,在極端天氣預(yù)測(cè)方面表現(xiàn)卓越,能耗僅為傳統(tǒng)方法的千分之一,為氣象學(xué)領(lǐng)域帶來(lái)了效率和精度的雙重突破。
關(guān)注科技創(chuàng)新、技術(shù)投資。
以文會(huì)友,左手硬核科技,右手浪漫主義。