“到2030年,智能互聯(lián)設(shè)備的數(shù)量將突破500億臺(tái)。所有這些智能設(shè)備將通過藍(lán)牙、Wi-Fi或5G等方式互聯(lián)。”
恩智浦全球資深副總裁、工業(yè)及物聯(lián)網(wǎng)邊緣業(yè)務(wù)總經(jīng)理Charles Dachs
恩智浦全球資深副總裁、工業(yè)及物聯(lián)網(wǎng)邊緣業(yè)務(wù)總經(jīng)理Charles Dachs,在近日恩智浦邊緣處理業(yè)務(wù)媒體溝通會(huì)上這樣說道。他指出,這一驚人的數(shù)字背后是市場(chǎng)趨勢(shì)的推動(dòng)。
一方面,綠色能源能效的推廣和采用成為驅(qū)動(dòng)設(shè)備增長(zhǎng)的重要因素;另一方面,系統(tǒng)的自主性不斷提高。工廠中的自動(dòng)化設(shè)備,或汽車領(lǐng)域的自動(dòng)駕駛技術(shù),越來越普遍。同時(shí),互聯(lián)設(shè)備的數(shù)量日益增加,帶來了諸多安全挑戰(zhàn)。這一切對(duì)邊緣計(jì)算的處理能力提出了更高的要求。
為幫助企業(yè)解決邊緣處理業(yè)務(wù)難題,恩智浦將邊緣計(jì)算與AI深度融合,提供整體的系統(tǒng)級(jí)解決方案。Charles Dachs強(qiáng)調(diào),“我們不能僅僅關(guān)注芯片和硬件層面,而是要提供更多的解決方案,以滿足人工智能、功能安全、信息安全等方面的要求。”
如何讓系統(tǒng)設(shè)計(jì)化繁為簡(jiǎn)?
具體而言,恩智浦的解決方案分為三個(gè)層面。
最下層是軟硬件基礎(chǔ),主要提供模擬、電源管理、傳感器等功能。
中間層是12個(gè)重點(diǎn)技術(shù)板塊,涵蓋信息安全、連接、人工智能和機(jī)器學(xué)習(xí)、圖像與顯示、觸控、電機(jī)控制、功能安全、網(wǎng)絡(luò)、語(yǔ)音、視覺、電源轉(zhuǎn)換和低功耗,主要針對(duì)特定技術(shù)進(jìn)行創(chuàng)新。
最上層是系統(tǒng)級(jí)解決方案,通過將底層處理能力與技術(shù)專長(zhǎng)結(jié)合,為用戶提供完整的參考設(shè)計(jì)、概念驗(yàn)證、自由開發(fā)板和軟件包。
在軟硬件基礎(chǔ)層,恩智浦擁有傳統(tǒng)MCU(微控制單元)、跨界處理器,復(fù)雜多核應(yīng)用處理器三大系列產(chǎn)品。
其中MCU方面,恩智浦有MCX系列,包含MCX N、MCX A、MCX C、MCX L和MCX W 5個(gè)子系列:
MCX N定位高級(jí)信號(hào)處理技術(shù),集成了NPU(神經(jīng)網(wǎng)絡(luò)處理器),在MCU中實(shí)現(xiàn)邊緣側(cè)AI/ML處理能力;MCX A是高性能智能外設(shè),是主流和廣泛應(yīng)用的處理器;MCX C是入門級(jí)低功耗應(yīng)用,具有價(jià)格競(jìng)爭(zhēng)力;MCX L是超低功耗系列,適用于始終在線的應(yīng)用,如需供電或手持的設(shè)備;MCX W是安全、互聯(lián)、窄帶微控制器,將ZigBee、Thread、藍(lán)牙與MCU功能相結(jié)合,增強(qiáng)了連接性能。
跨界處理器方面,包括RT 700和RT 1180。前者是專為智能AI邊緣設(shè)備設(shè)計(jì),如可穿戴設(shè)備、消費(fèi)醫(yī)療設(shè)備、智能家居設(shè)備等,與前幾代產(chǎn)品相比,功耗提升了30%-70%;后者則主要針對(duì)工業(yè)和通訊產(chǎn)品設(shè)計(jì)。
應(yīng)用處理器方面,恩智浦推出了i.MX 91、i.MX 93、i.MX 95三款產(chǎn)品。i.MX 91是入門級(jí)處理器,主打性價(jià)比,而i.MX 93和i.MX 95具備高效的AI和ML處理能力。
Charles Dachs特別介紹了恩智浦在信息安全、連接、人工智能和機(jī)器學(xué)習(xí)三大技術(shù)板塊的實(shí)踐。
在安全板塊,恩智浦在整套系統(tǒng)級(jí)解決方案中嵌入了安全功能,提供滿足不同安全等級(jí)需求的產(chǎn)品。恩智浦大中華區(qū)市場(chǎng)與銷售副總裁錢志軍表示,隨著量子計(jì)算的發(fā)展,現(xiàn)有的加密算法將面臨破解風(fēng)險(xiǎn)。為此,恩智浦正與全球兩家公司合作,提供基于量子算法保護(hù)下的新加密算法。確保在未來量子計(jì)算時(shí)代仍能保障產(chǎn)品的安全性。
恩智浦大中華區(qū)市場(chǎng)與銷售副總裁錢志軍
在連接板塊,恩智浦為客戶提供所有智能連接設(shè)備所需的連接元素,包括Wi-Fi、藍(lán)牙、Thread、Zigbee、UWB、NFC等。如何將這些連接技術(shù)與底層處理能力相結(jié)合,是恩智浦助力生態(tài)系統(tǒng)和客戶開發(fā)用例的關(guān)鍵。
在人工智能和機(jī)器學(xué)習(xí)板塊,從32位微控制器、跨界MCU到應(yīng)用處理器,恩智浦都內(nèi)置了AI/ML加速器功能,提供多TOPS性能。Charles Dachs說:“我們不僅在硬件集成上做到了這一點(diǎn),還提供完整的軟件框架eIQ,使開發(fā)者和客戶能夠開發(fā)模型、采集數(shù)據(jù)、標(biāo)注數(shù)據(jù)、訓(xùn)練模型,并在底層處理平臺(tái)上測(cè)試和部署到不同的硬件中進(jìn)行推理。
值得一提的是,由于延遲和隱私監(jiān)管方面的原因,越來越多的AI/ML功能正在走向邊緣。恩智浦i.MX 9系列產(chǎn)品可以在邊緣運(yùn)行大語(yǔ)言模型,無需連接云端。
深耕中國(guó)30年,本土應(yīng)用案例齊放
恩智浦進(jìn)入中國(guó)市場(chǎng)已有30余年,在中國(guó)的布局深入且全面。目前,恩智浦在大中華區(qū)擁有超過9000名員工,其中約1600名是工程師,約占全球工程師團(tuán)隊(duì)的三分之一。公司在中國(guó)各地設(shè)有14個(gè)辦事處、6座研發(fā)中心,以及一座全球領(lǐng)先的封測(cè)廠,配備硬件設(shè)計(jì)、軟件開發(fā)、系統(tǒng)工程、客戶支持和市場(chǎng)銷售等各個(gè)團(tuán)隊(duì)。
如今,恩智浦已有超過200款產(chǎn)品在中國(guó)本地完成了定義、研發(fā)、執(zhí)行和交付,服務(wù)超過6000家客戶。今年4月,恩智浦半導(dǎo)體全球首個(gè)全線上實(shí)驗(yàn)室在天津正式上線運(yùn)營(yíng),進(jìn)一步顯示了其對(duì)中國(guó)市場(chǎng)的重視與投入。
在業(yè)務(wù)布局上,恩智浦一半的業(yè)務(wù)來自汽車行業(yè),另一半則聚焦于工業(yè)物聯(lián)網(wǎng),這也是公司重點(diǎn)發(fā)力的方向。在工業(yè)物聯(lián)網(wǎng)的細(xì)分市場(chǎng),恩智浦專注于四個(gè)關(guān)鍵領(lǐng)域:工廠自動(dòng)化、醫(yī)療、樓宇和能源,以及智慧家庭。
在這些領(lǐng)域,中國(guó)的合作伙伴和客戶基于恩智浦提供的整套系統(tǒng)級(jí)解決方案,開發(fā)出了眾多創(chuàng)新的應(yīng)用和案例,以滿足市場(chǎng)需求。Charles Dachs在會(huì)上分享了幾個(gè)中國(guó)團(tuán)隊(duì)的具體應(yīng)用案例。
AI/ML+電機(jī)控制賦能電動(dòng)工具。具體而言,恩智浦提供了單芯片解決方案,實(shí)現(xiàn)了支持AI/ML的自動(dòng)停止功能和電機(jī)控制。其中MCX N系列芯片用于本地模型的推理,eIQ工具包提高訓(xùn)練和驗(yàn)證數(shù)據(jù)集效率,讓用戶輕松構(gòu)建自有AI/ML模型。這套方案使用戶能夠在一顆芯片上同時(shí)實(shí)現(xiàn)電機(jī)控制和AI/ML賦能的自動(dòng)停止功能。典型的應(yīng)用場(chǎng)景是電動(dòng)工具鉆孔時(shí),遇到特定情況自動(dòng)停止,提升了安全性。
AI/ML聲音檢測(cè)輔助醫(yī)療行業(yè)。將AI和機(jī)器學(xué)習(xí)應(yīng)用于鼾聲檢測(cè),與傳統(tǒng)的呼吸機(jī)結(jié)合,使得設(shè)備能夠識(shí)別患者的鼾聲,將其從其他環(huán)境聲音中過濾出來,進(jìn)而檢測(cè)睡眠呼吸狀態(tài),這一創(chuàng)新為醫(yī)療設(shè)備帶來了智能化升級(jí)。
AI/ML大語(yǔ)言模型增強(qiáng)智能家居用戶體驗(yàn)。恩智浦擁有適合本地運(yùn)行大型語(yǔ)言模型的處理器,如i.MX 95,以及配套的PMIC(電源管理集成電路)和連接芯片,通過在邊緣應(yīng)用大型語(yǔ)言模型,實(shí)現(xiàn)在家庭環(huán)境或工廠環(huán)境的智能決策。
正如Charles Dachs所言,這是一個(gè)工業(yè)和物聯(lián)網(wǎng)領(lǐng)域發(fā)生深刻變革的時(shí)代。隨著未來能源效率提升、自主系統(tǒng)普及,以及技術(shù)需求不斷增長(zhǎng),恩智浦將與合作伙伴和客戶共同努力,并始終與中國(guó)市場(chǎng)攜手前行,為變革中的各個(gè)關(guān)鍵技術(shù)提供創(chuàng)新。
好文章,需要你的鼓勵(lì)
新加坡國(guó)立大學(xué)研究團(tuán)隊(duì)開發(fā)了SPIRAL框架,通過讓AI與自己對(duì)弈零和游戲來提升推理能力。實(shí)驗(yàn)顯示,僅訓(xùn)練AI玩簡(jiǎn)單撲克游戲就能讓其數(shù)學(xué)推理能力提升8.6%,通用推理提升8.4%,且無需任何數(shù)學(xué)題目作為訓(xùn)練材料。研究發(fā)現(xiàn)游戲中的三種推理模式能成功轉(zhuǎn)移到數(shù)學(xué)解題中,為AI訓(xùn)練提供了新思路。
同濟(jì)大學(xué)團(tuán)隊(duì)開發(fā)的GIGA-ToF技術(shù)通過融合多幀圖像的"圖結(jié)構(gòu)"信息,創(chuàng)新性地解決了3D相機(jī)噪聲問題。該技術(shù)利用圖像間的不變幾何關(guān)系,結(jié)合深度學(xué)習(xí)和數(shù)學(xué)優(yōu)化方法,在合成數(shù)據(jù)集上實(shí)現(xiàn)37.9%的精度提升,并在真實(shí)設(shè)備上展現(xiàn)出色泛化能力,為機(jī)器人、AR和自動(dòng)駕駛等領(lǐng)域提供更可靠的3D視覺解決方案。
伊利諾伊大學(xué)研究團(tuán)隊(duì)通過對(duì)比實(shí)驗(yàn)發(fā)現(xiàn),經(jīng)過強(qiáng)化學(xué)習(xí)訓(xùn)練的視覺語(yǔ)言模型雖然表現(xiàn)出"頓悟時(shí)刻"現(xiàn)象,但這些自我糾錯(cuò)行為并不能實(shí)際提升推理準(zhǔn)確率。研究揭示了AI模型存在"生成-驗(yàn)證差距",即生成答案的能力強(qiáng)于驗(yàn)證答案質(zhì)量的能力,且模型在自我驗(yàn)證時(shí)無法有效利用視覺信息,為AI多模態(tài)推理發(fā)展提供了重要啟示。
MIT等頂尖機(jī)構(gòu)聯(lián)合提出SparseLoRA技術(shù),通過動(dòng)態(tài)稀疏性實(shí)現(xiàn)大語(yǔ)言模型訓(xùn)練加速1.6倍,計(jì)算成本降低2.2倍。該方法使用SVD稀疏性估計(jì)器智能選擇重要計(jì)算部分,在保持模型性能的同時(shí)顯著提升訓(xùn)練效率,已在多個(gè)任務(wù)上驗(yàn)證有效性。