全球領(lǐng)先的無線連接和智能傳感技術(shù)授權(quán)廠商CEVA發(fā)布了業(yè)界首款高性能傳感器集線器DSP架構(gòu)SensPro?旨在環(huán)境感知設(shè)備中處理各種傳感器處理和融合工作負(fù)載。
SensPro專用處理器可以滿足行業(yè)對各種傳感器高效處理的需求,智能手機(jī)、機(jī)器人、汽車、增強(qiáng)現(xiàn)實(shí)/虛擬現(xiàn)實(shí)耳機(jī)、語音助手、智能家居設(shè)備以及正在通過工業(yè)4.0等舉措進(jìn)行創(chuàng)新的新興工業(yè)和醫(yī)療應(yīng)用都需要這些傳感器。這些傳感器包括攝像機(jī)、雷達(dá)、激光雷達(dá)、飛行時(shí)間(ToF)、麥克風(fēng)和慣性測量單元(IMU)。它們可以從圖像、聲音、射頻和運(yùn)動(dòng)中生成各種類型和比特率的數(shù)據(jù),這些數(shù)據(jù)可用于創(chuàng)建完整的3D上下文感知設(shè)備。
為了以最高的性能功耗比處理復(fù)雜的多傳感器處理情況,SensPro的新架構(gòu)結(jié)合了高動(dòng)態(tài)范圍信號處理、點(diǎn)云創(chuàng)建和深度神經(jīng)網(wǎng)絡(luò)(DNN)訓(xùn)練的要求,并支持高性能單精度和半精度浮點(diǎn)數(shù)學(xué)函數(shù)。它還為語音、圖像、DNN推理處理和同時(shí)定位和映射(SLAM)提供大量8位和16位并行處理能力。SensPro集成了廣泛使用的ceva-bx 標(biāo)量DSP,提供了從單傳感器系統(tǒng)設(shè)計(jì)到多傳感器上下文感知設(shè)計(jì)的無縫遷移路徑。
YoleDveloppement (Yole)傳感技術(shù)部的技術(shù)和市場分析師DimitriosDamianos說:“各種傳感器在智能系統(tǒng)中的使用不斷增加,為環(huán)境和環(huán)境感知提供了更精確的建模。傳感器變得越來越智能,目標(biāo)不是獲得更多數(shù)據(jù),而是獲得更高質(zhì)量的數(shù)據(jù),特別是在環(huán)境/環(huán)境感知的情況下,例如,使用環(huán)境傳感器中樞(智能家居/辦公室),該中樞結(jié)合了麥克風(fēng)、壓力、濕度、慣性、溫度和氣體傳感器,以及ADAS/AV中的情境感知,其中許多傳感器(雷達(dá)、LID)
Yole的計(jì)算和軟件技術(shù)及市場分析師YohannTschudi說:“挑戰(zhàn)在于處理和融合來自不同類型傳感器的不同類型的數(shù)據(jù)。通過結(jié)合標(biāo)量和矢量處理、浮點(diǎn)和定點(diǎn)數(shù)學(xué)運(yùn)算以及先進(jìn)的微架構(gòu),SensPro為系統(tǒng)和SoC設(shè)計(jì)人員提供了統(tǒng)一的處理器架構(gòu),以滿足任何上下文感知多傳感器設(shè)備的需求。”
SensPro使用高度可配置的8路VLIW架構(gòu),因此易于調(diào)整以適應(yīng)廣泛的應(yīng)用。它采用先進(jìn)的微體系結(jié)構(gòu),結(jié)合了標(biāo)量和矢量處理器,并集成了先進(jìn)的多級流水線。7nm進(jìn)程節(jié)點(diǎn)運(yùn)行頻率為1.6GHz,SensPro集成ceva-bx2 標(biāo)量處理器控制代碼執(zhí)行,性能達(dá)到4.3 CoreMark/MHz。采用寬SIMD可擴(kuò)展處理器架構(gòu)進(jìn)行并行處理,最多可配置1024個(gè)8x8 MAC,256個(gè)16x16 MAC,專用8 x2 二進(jìn)制神經(jīng)網(wǎng)絡(luò)支持,64個(gè)單精度和128個(gè)半精度浮點(diǎn)MAC。SensPro在88網(wǎng)絡(luò)推理、二進(jìn)制神經(jīng)網(wǎng)絡(luò)推理和浮點(diǎn)運(yùn)算中的性能分別高達(dá)3 TOPS、20 TOPS和400 GFLOPS。SensPro的其他主要功能包括提供每秒400GB帶寬的內(nèi)存架構(gòu)、4路指令緩存、2路矢量數(shù)據(jù)緩存、直接內(nèi)存分配以及用于減輕數(shù)據(jù)交換中DSP負(fù)載的隊(duì)列和緩沖管理器。
為了加快系統(tǒng)設(shè)計(jì),SensPro自帶了一套先進(jìn)的軟件和開發(fā)工具。包括LLVM C/C編譯器、基于eclipse的集成開發(fā)環(huán)境(IDE)、OpenVX API、OpenCL軟件庫、CEVA深度神經(jīng)網(wǎng)絡(luò)(CDNN)圖形編譯器帶CDNN-邀請API加入定制AI引擎、CEVA-CV圖像功能、CEVA-SLAM軟件開發(fā)工具包和可視化程序庫, ClearVox降噪功能、WhisPro語音識別、MotionEngine傳感器融合和SenslinQ軟件架構(gòu)。
最初,SensPro DSP將提供三種配置,每種配置包括一個(gè)CEVA-BX2 標(biāo)量處理器和各種矢量單元,它們被配置為實(shí)現(xiàn)最佳用例處理:
sp 250單矢量單元,帶256個(gè)8x8媒體訪問控制,針對以圖像、視覺和聲音為中心的應(yīng)用
sp 500 f單矢量單元,512個(gè)88媒體訪問控制和64個(gè)單精度浮點(diǎn)媒體訪問控制,目標(biāo)是以SLAM為中心的應(yīng)用
sp 1000具有1024個(gè)雙矢量單元,由88媒體訪問控制和二進(jìn)制網(wǎng)絡(luò)支持,面向以人工智能為中心的應(yīng)用