瑞薩電子發(fā)布內(nèi)置視覺AI加速器的RZ/V系列器件,實(shí)現(xiàn)精確圖像識(shí)別與多攝像頭圖像支持
全球半導(dǎo)體解決方案供應(yīng)商瑞薩電子近日宣布,推出一款能夠處理多個(gè)攝像頭圖像數(shù)據(jù)的全新RZ/V2MA器件,進(jìn)一步擴(kuò)充其RZ/V系列微處理器(MPU)產(chǎn)品線,并為視覺AI應(yīng)用帶來新水平的高精度圖像識(shí)別能力。該新器件集成了兩個(gè)64位Arm? Cortex?-A53內(nèi)核,能夠以1GHz的最高工作頻率提供高計(jì)算性能;具備專有的低功耗DRP-AI(動(dòng)態(tài)可重構(gòu)處理器)加速器,可以以1 TOPS/W(每秒百萬次操作/瓦)級(jí)的性能處理圖像數(shù)據(jù)。
本文引用地址:http://cafeforensic.com/article/202209/438740.htmRZ/V2MA器件配備以太網(wǎng)、USB和PCI Express等高速接口,允許從多個(gè)外部攝像頭輸入圖像。除DRP-AI加速器外,RZ/V2MA還包含一個(gè)OpenCV加速器,以便同時(shí)執(zhí)行基于規(guī)則的圖像處理。這些功能讓AI網(wǎng)關(guān)、視頻服務(wù)器、安全門、POS終端和機(jī)械臂等機(jī)器視覺產(chǎn)品獲得高精度圖像識(shí)別能力。
新款RZ/V2MA配有一整套開發(fā)工具來輔助視覺AI系統(tǒng)設(shè)計(jì)。除現(xiàn)有DRP-AI Translator,新器件還增加了基于開源深度學(xué)習(xí)編譯器Apache TVM技術(shù)(注1)的DRP-AI TVM(注2)。DRP AI Translator旨在將AI模型轉(zhuǎn)換為DRP-AI可執(zhí)行文件,而DRP-AI TVM編譯器則讓DRP-AI加速器與CPU一起工作,使DRP-AI能夠轉(zhuǎn)換和生成比以往更多的AI模型。瑞薩針對(duì)產(chǎn)業(yè)發(fā)展的第一階段提供對(duì)ONNX和PyTorch AI模型的支持,并計(jì)劃在未來支持Tensorflow。
瑞薩電子企業(yè)基礎(chǔ)設(shè)施業(yè)務(wù)部副總裁加藤茂樹表示:“對(duì)于想要實(shí)現(xiàn)機(jī)器學(xué)習(xí)的嵌入式系統(tǒng)開發(fā)人員而言,所面對(duì)的挑戰(zhàn)之一是如何跟上不斷演進(jìn)的最新AI模型。通過新款DRP-AI TVM工具,瑞薩為設(shè)計(jì)者帶來擴(kuò)展AI框架和AI模型的選擇。這些框架和模型可轉(zhuǎn)換為可執(zhí)行格式,使他們能夠利用新的AI模型為嵌入式設(shè)備構(gòu)建最前沿的圖像識(shí)別功能?!?/p>
物聯(lián)網(wǎng)和基于AI的服務(wù)提供商、橫河電機(jī)全資子公司amnimo Inc.總裁Chiharu Nakabayashi表示:“瑞薩RZ/V系列是嵌入式設(shè)備的理想選擇。其在運(yùn)行AI時(shí)僅產(chǎn)生極低的功耗和熱量,因而無需風(fēng)扇或散熱器。借助這些器件,我們有信心開發(fā)出可安裝在任何場(chǎng)合的強(qiáng)大圖像AI網(wǎng)關(guān)?!?/p>
RZ/V2MA的關(guān)鍵特性
● 雙64位Arm Cortex-A53內(nèi)核,最大工作頻率為1GHz
● AI加速器DRP-AI(1 TOPS/W級(jí)),在執(zhí)行TinyYoloV3程序時(shí)達(dá)到52 fps(每秒幀數(shù))
● OpenCV加速器,用于基于規(guī)則的圖像處理
● 以太網(wǎng)、USB和PCI Express接口,用于外部攝像頭圖像輸入
● 視頻編解碼器(H.265和H.264)
● DRP-AI TVM工具,用于轉(zhuǎn)換基于TVM技術(shù)的AI模型;目前階段支持ONNX和PyTorch格式
● 高速內(nèi)存接口包括LPDDR4(3200Mbps)、USB 3.1(高達(dá)5Gbps)和PCI Express(2通道)
● 可采用15mm方形BGA封裝
基于RZ/V2MA的視覺AI網(wǎng)關(guān)解決方案
瑞薩開發(fā)的“視覺AI網(wǎng)關(guān)解決方案”作為一款基于AI的對(duì)象檢測(cè)與識(shí)別平臺(tái),使用多個(gè)攝像頭來收集數(shù)據(jù)并獲得有效的無線數(shù)據(jù)傳輸。這一高速處理解決方案融合了RZ/V2MA MPU與電源IC、VersaClock時(shí)鐘發(fā)生器,以及用于Wi-Fi、藍(lán)牙和LTE的通信模塊等相搭配的瑞薩產(chǎn)品,不僅帶來靈活的連接選項(xiàng)和一個(gè)優(yōu)化的電源系統(tǒng),并且經(jīng)過測(cè)試,以加速?gòu)?qiáng)大AI網(wǎng)關(guān)設(shè)備的開發(fā)。該解決方案作為瑞薩“成功產(chǎn)品組合”的一部分,將相互兼容的瑞薩器件完美結(jié)合,實(shí)現(xiàn)無縫協(xié)作,以幫助用戶縮短設(shè)計(jì)過程,加速產(chǎn)品上市?;谄洚a(chǎn)品陣容中的多款產(chǎn)品,瑞薩現(xiàn)已推出超過300款“成功產(chǎn)品組合”。
供貨信息
該產(chǎn)品的設(shè)計(jì)目的是利用更少的功率推動(dòng)在系統(tǒng)內(nèi)節(jié)約能源。
評(píng)論