瑞薩電子發(fā)布內(nèi)置視覺AI加速器的RZ/V系列器件,實(shí)現(xiàn)精確圖像識(shí)別與多攝像頭圖像支持

全球半導(dǎo)體解決方案供應(yīng)商瑞薩電子近日宣布，推出一款能夠處理多個(gè)攝像頭圖像數(shù)據(jù)的全新RZ/V2MA器件，進(jìn)一步擴(kuò)充其RZ/V系列微處理器（MPU）產(chǎn)品線，并為視覺AI應(yīng)用帶來新水平的高精度圖像識(shí)別能力。該新器件集成了兩個(gè)64位Arm^? Cortex^?-A53內(nèi)核，能夠以1GHz的最高工作頻率提供高計(jì)算性能；具備專有的低功耗DRP-AI（動(dòng)態(tài)可重構(gòu)處理器）加速器，可以以1 TOPS/W（每秒百萬次操作/瓦）級(jí)的性能處理圖像數(shù)據(jù)。

RZ/V2MA器件配備以太網(wǎng)、USB和PCI Express等高速接口，允許從多個(gè)外部攝像頭輸入圖像。除DRP-AI加速器外，RZ/V2MA還包含一個(gè)OpenCV加速器，以便同時(shí)執(zhí)行基于規(guī)則的圖像處理。這些功能讓AI網(wǎng)關(guān)、視頻服務(wù)器、安全門、POS終端和機(jī)械臂等機(jī)器視覺產(chǎn)品獲得高精度圖像識(shí)別能力。

新款RZ/V2MA配有一整套開發(fā)工具來輔助視覺AI系統(tǒng)設(shè)計(jì)。除現(xiàn)有DRP-AI Translator，新器件還增加了基于開源深度學(xué)習(xí)編譯器Apache TVM技術(shù)^（注1）的DRP-AI TVM^（注2）。DRP AI Translator旨在將AI模型轉(zhuǎn)換為DRP-AI可執(zhí)行文件，而DRP-AI TVM編譯器則讓DRP-AI加速器與CPU一起工作，使DRP-AI能夠轉(zhuǎn)換和生成比以往更多的AI模型。瑞薩針對(duì)產(chǎn)業(yè)發(fā)展的第一階段提供對(duì)ONNX和PyTorch AI模型的支持，并計(jì)劃在未來支持Tensorflow。

瑞薩電子企業(yè)基礎(chǔ)設(shè)施業(yè)務(wù)部副總裁加藤茂樹表示：“對(duì)于想要實(shí)現(xiàn)機(jī)器學(xué)習(xí)的嵌入式系統(tǒng)開發(fā)人員而言，所面對(duì)的挑戰(zhàn)之一是如何跟上不斷演進(jìn)的最新AI模型。通過新款DRP-AI TVM工具，瑞薩為設(shè)計(jì)者帶來擴(kuò)展AI框架和AI模型的選擇。這些框架和模型可轉(zhuǎn)換為可執(zhí)行格式，使他們能夠利用新的AI模型為嵌入式設(shè)備構(gòu)建最前沿的圖像識(shí)別功能。”

物聯(lián)網(wǎng)和基于AI的服務(wù)提供商、橫河電機(jī)全資子公司amnimo Inc.總裁Chiharu Nakabayashi表示：“瑞薩RZ/V系列是嵌入式設(shè)備的理想選擇。其在運(yùn)行AI時(shí)僅產(chǎn)生極低的功耗和熱量，因而無需風(fēng)扇或散熱器。借助這些器件，我們有信心開發(fā)出可安裝在任何場(chǎng)合的強(qiáng)大圖像AI網(wǎng)關(guān)?！?/p>

RZ/V2MA的關(guān)鍵特性

●   雙64位Arm Cortex-A53內(nèi)核，最大工作頻率為1GHz

●   AI加速器DRP-AI（1 TOPS/W級(jí)），在執(zhí)行TinyYoloV3程序時(shí)達(dá)到52 fps（每秒幀數(shù)）

●   OpenCV加速器，用于基于規(guī)則的圖像處理

●   以太網(wǎng)、USB和PCI Express接口，用于外部攝像頭圖像輸入

●   視頻編解碼器（H.265和H.264）

●   DRP-AI TVM工具，用于轉(zhuǎn)換基于TVM技術(shù)的AI模型；目前階段支持ONNX和PyTorch格式

●   高速內(nèi)存接口包括LPDDR4（3200Mbps）、USB 3.1（高達(dá)5Gbps）和PCI Express（2通道）

●   可采用15mm方形BGA封裝

基于RZ/V2MA的視覺AI網(wǎng)關(guān)解決方案

瑞薩開發(fā)的“視覺AI網(wǎng)關(guān)解決方案”作為一款基于AI的對(duì)象檢測(cè)與識(shí)別平臺(tái)，使用多個(gè)攝像頭來收集數(shù)據(jù)并獲得有效的無線數(shù)據(jù)傳輸。這一高速處理解決方案融合了RZ/V2MA MPU與電源IC、VersaClock時(shí)鐘發(fā)生器，以及用于Wi-Fi、藍(lán)牙和LTE的通信模塊等相搭配的瑞薩產(chǎn)品，不僅帶來靈活的連接選項(xiàng)和一個(gè)優(yōu)化的電源系統(tǒng)，并且經(jīng)過測(cè)試，以加速強(qiáng)大AI網(wǎng)關(guān)設(shè)備的開發(fā)。該解決方案作為瑞薩“成功產(chǎn)品組合”的一部分，將相互兼容的瑞薩器件完美結(jié)合，實(shí)現(xiàn)無縫協(xié)作，以幫助用戶縮短設(shè)計(jì)過程，加速產(chǎn)品上市?；谄洚a(chǎn)品陣容中的多款產(chǎn)品，瑞薩現(xiàn)已推出超過300款“成功產(chǎn)品組合”。

供貨信息

該產(chǎn)品的設(shè)計(jì)目的是利用更少的功率推動(dòng)在系統(tǒng)內(nèi)節(jié)約能源。