邊緣智能發(fā)展進(jìn)步之迅速,往往與人類智慧的不斷進(jìn)步密不可分。邊緣智能的發(fā)展?fàn)顩r已然非常喜人;邊緣設(shè)備能夠感知它們所處的環(huán)境,同時(shí)處理不同的輸入信息,并推測(cè)它們的操作將會(huì)帶來(lái)的結(jié)果。這似乎已經(jīng)接近十幾歲孩子的智力水平。不過(guò)目前邊緣智能技術(shù)剛開(kāi)始起步,它的發(fā)展前景令人期待。
利用機(jī)器學(xué)習(xí)(ML)和神經(jīng)網(wǎng)絡(luò)等方面技術(shù)的進(jìn)步,開(kāi)發(fā)人員創(chuàng)建了豐富多樣的應(yīng)用,包括工業(yè)機(jī)器視覺(jué)、圖像分類、對(duì)象檢測(cè)、語(yǔ)音識(shí)別、自然語(yǔ)言處理、手勢(shì)和情緒檢測(cè)等,這些應(yīng)用改變了我們生活、工作和學(xué)習(xí)的方式。很多創(chuàng)新的機(jī)器學(xué)習(xí)技術(shù)部署在邊緣設(shè)備上,提高了我們的住宅、辦公室、工廠、城市的安全性、智能化程度和便利性。
機(jī)器學(xué)習(xí)相當(dāng)于利用計(jì)算引擎來(lái)處理復(fù)雜的人工任務(wù),但速度更快,甚至能夠自主運(yùn)行,無(wú)需人為的直接干預(yù)。運(yùn)行機(jī)器學(xué)習(xí)應(yīng)用時(shí),需要執(zhí)行海量的數(shù)學(xué)運(yùn)算,總計(jì)達(dá)到每秒數(shù)萬(wàn)億次。以前,機(jī)器學(xué)習(xí)需要成本昂貴而又復(fù)雜的云計(jì)算,也就是“基于云的人工智能”。但現(xiàn)在,很多機(jī)器學(xué)習(xí)操作可在網(wǎng)絡(luò)邊緣進(jìn)行,在這里,智能互連設(shè)備提供更快的運(yùn)行時(shí)響應(yīng)、更低的延遲(即數(shù)據(jù)無(wú)需在設(shè)備和云之間往返傳輸),可靠性、私密性和安全性更出色。
基于邊緣的機(jī)器學(xué)習(xí)當(dāng)前采用的核心引擎通常是功能強(qiáng)大的多核處理器,具有豐富的特性和功能,可以進(jìn)行神經(jīng)網(wǎng)絡(luò)、視覺(jué)、語(yǔ)音和多媒體的處理,所有這些工作都需要在單個(gè)片上系統(tǒng)(SoC)上進(jìn)行。而我們現(xiàn)在可以很高興的宣布,恩智浦的i.MX 8M Plus應(yīng)用處理器系列對(duì)全球各地的用戶正式實(shí)現(xiàn)量產(chǎn)。i.MX 8M Plus是恩智浦EdgeVerse產(chǎn)品組合的新成員,也隸屬于恩智浦高性能應(yīng)用處理器i.MX 8系列。
我們?cè)趇.MX 8M Plus應(yīng)用處理器中集成了開(kāi)發(fā)人員所需要的異構(gòu)多內(nèi)核、子系統(tǒng)和豐富的接口,并提供多種組合可供用戶選擇。i.MX 8M Plus是恩智浦首款集成了專用神經(jīng)處理單元(NPU)的應(yīng)用處理器,可大大加快工業(yè)和物聯(lián)網(wǎng)(IoT)邊緣的機(jī)器學(xué)習(xí)推理。同時(shí)它還集成了雙圖像信號(hào)處理器(ISP)、四個(gè)或兩個(gè)工作頻率高達(dá)1.8GHz的Arm Cortex-A53內(nèi)核、配以主頻800MHz Cortex-M7內(nèi)核作獨(dú)立的實(shí)時(shí)控制、另外還集成了用于實(shí)現(xiàn)語(yǔ)音和自然語(yǔ)言加速的800MHz HiFi 4音頻DSP、高精度圖形處理單元(GPU)。
由此,開(kāi)發(fā)人員可將機(jī)器推理功能轉(zhuǎn)移到NPU上執(zhí)行,同時(shí)結(jié)合Cortex-A和Cortex M內(nèi)核、DSP和GPU的強(qiáng)大性能,以執(zhí)行其他復(fù)雜的系統(tǒng)級(jí)或應(yīng)用任務(wù)。
i.MX 8M Plus應(yīng)用處理器能夠?qū)崿F(xiàn)相對(duì)完善的機(jī)器學(xué)習(xí)和多媒體功能,利用雙攝像頭ISP和八個(gè)麥克風(fēng)輸入,提供靈敏的機(jī)器視覺(jué)和語(yǔ)音識(shí)別能力。此外,雙CAN-FD和雙千兆以太網(wǎng)接口讓它擁有了穩(wěn)定的網(wǎng)絡(luò)控制能力,i.MX 8M Plus還集成了時(shí)間敏感網(wǎng)絡(luò)(TSN),以支持一系列工業(yè)自動(dòng)化設(shè)計(jì)。內(nèi)存的糾錯(cuò)碼(ECC)技術(shù)能夠保護(hù)內(nèi)部存儲(chǔ)器,對(duì)于要求苛刻的工廠車間應(yīng)用,確保高可靠性。
在邊緣部署機(jī)器學(xué)習(xí)
采用i.MX 8M Plus處理器,開(kāi)發(fā)人員能夠?qū)C(jī)器學(xué)習(xí)工作負(fù)載轉(zhuǎn)移到網(wǎng)絡(luò)邊緣的終端設(shè)備,無(wú)論是語(yǔ)音、視頻或異常檢測(cè),網(wǎng)絡(luò)邊緣都是接收信息最近的節(jié)點(diǎn)。
開(kāi)發(fā)人員可以利用片上NPU來(lái)處理機(jī)器學(xué)習(xí)任務(wù),其性能達(dá)到2.3萬(wàn)秒次運(yùn)算每秒(TOPS),處理機(jī)器學(xué)習(xí)相關(guān)任務(wù),速度比Arm內(nèi)核快大約30倍。通過(guò)在壓縮和稀疏性方面進(jìn)行優(yōu)化(即消除不必要的乘零計(jì)算),進(jìn)一步增強(qiáng)機(jī)器學(xué)習(xí)算法的性能表現(xiàn)。數(shù)據(jù)壓縮也是非常有用的,因?yàn)樗上到y(tǒng)存儲(chǔ)器瓶頸,同時(shí)存儲(chǔ)器和DRAM控制器都能達(dá)到4千兆每秒(GT/s)的傳輸速率。
機(jī)器視覺(jué)解決方案
基于邊緣的機(jī)器學(xué)習(xí)應(yīng)用通常包括一類與攝像頭圖像數(shù)據(jù)相關(guān)的機(jī)器視覺(jué)應(yīng)用。但如果高分辨率攝像頭距邊緣設(shè)備有一定距離的話會(huì)如何?對(duì)基于i.MX 8M Plus的設(shè)備來(lái)說(shuō),這不會(huì)造成任何問(wèn)題。為了最大程度減少延遲和成像質(zhì)量下降,i.MX 8M Plus采用專用的ISP模塊處理圖像加速,同時(shí)兩個(gè)攝像頭輸入實(shí)現(xiàn)了立體影像,模仿人的左眼和右眼結(jié)合的視覺(jué)表現(xiàn)。
i.MX 8M Plus所集成ISP提供足夠的處理能力,以處理復(fù)雜的圖像處理任務(wù),例如高動(dòng)態(tài)范圍(HDR)的快速多重曝光、來(lái)自兩個(gè)不同攝像頭的同步廣角和縮放視圖。廣角魚眼畸變校正也是由ISP處理的另一項(xiàng)重要功能。采用魚眼鏡頭的低成本攝像頭可能讓圖像產(chǎn)生畸變,進(jìn)而無(wú)法識(shí)別。i.MX8M Plus處理器的廣角魚眼畸變校正引擎可對(duì)圖像進(jìn)行標(biāo)準(zhǔn)化,以便進(jìn)行精確的機(jī)器學(xué)習(xí)識(shí)別與處理。
ISP還能夠處理圖像增強(qiáng),例如“圖像降噪”,這種功能在低光照環(huán)境下至關(guān)重要,因?yàn)榈凸庹諘?huì)導(dǎo)致圖像模糊。使用機(jī)器學(xué)習(xí)算法,ISP能夠檢測(cè)需要銳化和降噪的圖像部分,而讓其他圖像區(qū)域保持自然模糊。
對(duì)于高級(jí)多媒體和顯示應(yīng)用,i.MX 8M Plus包括視頻解碼器/編碼器,支持H.265壓縮算法,可以離線存儲(chǔ)大圖像,以便日后處理。
工業(yè)級(jí)應(yīng)用理想之選
i.MX 8M Plus應(yīng)用處理器針對(duì)工業(yè)應(yīng)用進(jìn)行一系列優(yōu)化,包括ECC,它是用于檢測(cè)和糾正系統(tǒng)存儲(chǔ)器位錯(cuò)誤的必備功能。例如,阿爾法粒子是在某些環(huán)境中出現(xiàn)的一種放射物,可能誘發(fā)SRAM中的軟錯(cuò)誤,引起存儲(chǔ)器問(wèn)題,導(dǎo)致軟件崩潰。ECC算法可以檢測(cè)和糾正這些錯(cuò)誤,從而顯著降低軟錯(cuò)誤率(SER)。
很多復(fù)雜工廠流程都需要能夠精確把控時(shí)間的以太網(wǎng)數(shù)據(jù)傳輸。為此,i.MX 8M Plus支持TSN以太網(wǎng)連接,有助于保證數(shù)據(jù)在正確的時(shí)間進(jìn)行傳輸,以支持工廠車間針對(duì)時(shí)間敏感型的要求。另外,兩個(gè)CAN-FD外設(shè)支持低延遲通信和網(wǎng)絡(luò)功能。與其他所有片上內(nèi)核、外設(shè)和接口組合在一起,i.MX 8M Plus可用于構(gòu)建功能全面的工業(yè)系統(tǒng),為工業(yè)4.0提供一系列基于邊緣的機(jī)器學(xué)習(xí)功能。
強(qiáng)大的生命力
雖然電子行業(yè)不斷演進(jìn),但我們始終需要產(chǎn)品在相對(duì)極端的環(huán)境下保持可靠性和穩(wěn)定工作,并且保證產(chǎn)品持續(xù)供應(yīng)。i.MX 8M Plus應(yīng)用處理器是恩智浦長(zhǎng)期供貨保證計(jì)劃的一部分,自產(chǎn)品發(fā)布之日起,提供至少15年的生產(chǎn)供應(yīng)。因此在未來(lái)的很多年內(nèi),您可以依賴i.MX 8M Plus處理器來(lái)運(yùn)行機(jī)器學(xué)習(xí)應(yīng)用。
恩智浦利用多種音頻板、攝像頭模塊和評(píng)估套件,以及包含合作伙伴工具和解決方案的豐富生態(tài)系統(tǒng),為i.MX 8M Plus的機(jī)器學(xué)習(xí)、視覺(jué)、多媒體和工業(yè)物聯(lián)網(wǎng)應(yīng)用提供支持。現(xiàn)在您就可以立即訂購(gòu)i.MX 8M Plus評(píng)估套件開(kāi)始您的設(shè)計(jì)。
原文標(biāo)題:正式量產(chǎn)!讓i.MX 8M Plus,加速你的機(jī)器學(xué)習(xí)與機(jī)器視覺(jué)應(yīng)用開(kāi)發(fā)
文章出處:【微信公眾號(hào):NXP客棧】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
責(zé)任編輯:haq
-
恩智浦
+關(guān)注
關(guān)注
14文章
5949瀏覽量
113315 -
機(jī)器視覺(jué)
+關(guān)注
關(guān)注
163文章
4514瀏覽量
122304 -
機(jī)器學(xué)習(xí)
+關(guān)注
關(guān)注
66文章
8492瀏覽量
134122
原文標(biāo)題:正式量產(chǎn)!讓i.MX 8M Plus,加速你的機(jī)器學(xué)習(xí)與機(jī)器視覺(jué)應(yīng)用開(kāi)發(fā)
文章出處:【微信號(hào):NXP客棧,微信公眾號(hào):NXP客棧】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
恩智浦i.MX 94應(yīng)用處理器和Trimension NCJ29D6超寬帶IC榮獲嵌入式世界大會(huì)兩項(xiàng)大獎(jiǎng)

NXP基于i.MX 91應(yīng)用處理器打造的FRDM i.MX 91開(kāi)發(fā)板特性參數(shù)詳解

分享!基于NXP i.MX 8M Plus平臺(tái)的OpenAMP核間通信方案

恩智浦推出FRDM i.MX 93開(kāi)發(fā)板
恩智浦i.MX 94應(yīng)用處理器如何變革工業(yè)和汽車連接
基于i.MX95的恩智浦邊緣計(jì)算人工智能解決方案

恩智浦i.MX 91生態(tài)合作伙伴最新開(kāi)發(fā)板資源
恩智浦發(fā)布i.MX 94系列應(yīng)用處理器
NXP Semiconductors i.MX 93處理器特性概述

恩智浦i.MX8處理器的集成電源設(shè)計(jì)

使用TPS6521825和LP873347 PMIC為NXP i.MX 8M Mini和Nano供電

使用TPS65219為i.MX 8M Plus供電

i.MX 8M Plus中的ISP圖像信號(hào)處理模塊特性概述
德國(guó)康佳特?cái)y手恩智浦,推出基于i.MX 95處理器的計(jì)算模塊
康佳特推出基于恩智浦i.MX 95系列處理器的新款SMARC模塊

評(píng)論