瑞薩電子發(fā)布內(nèi)置視覺AI加速器的RZ/V系列器件,實現(xiàn)精確圖像識別與多攝像頭圖像支持

全球半導(dǎo)體解決方案供應(yīng)商瑞薩電子近日宣布，推出一款能夠處理多個攝像頭圖像數(shù)據(jù)的全新RZ/V2MA器件，進一步擴充其RZ/V系列微處理器（MPU）產(chǎn)品線，并為視覺AI應(yīng)用帶來新水平的高精度圖像識別能力。該新器件集成了兩個64位Arm^? Cortex^?-A53內(nèi)核，能夠以1GHz的最高工作頻率提供高計算性能；具備專有的低功耗DRP-AI（動態(tài)可重構(gòu)處理器）加速器，可以以1 TOPS/W（每秒百萬次操作/瓦）級的性能處理圖像數(shù)據(jù)。

RZ/V2MA器件配備以太網(wǎng)、USB和PCI Express等高速接口，允許從多個外部攝像頭輸入圖像。除DRP-AI加速器外，RZ/V2MA還包含一個OpenCV加速器，以便同時執(zhí)行基于規(guī)則的圖像處理。這些功能讓AI網(wǎng)關(guān)、視頻服務(wù)器、安全門、POS終端和機械臂等機器視覺產(chǎn)品獲得高精度圖像識別能力。

新款RZ/V2MA配有一整套開發(fā)工具來輔助視覺AI系統(tǒng)設(shè)計。除現(xiàn)有DRP-AI Translator，新器件還增加了基于開源深度學(xué)習(xí)編譯器Apache TVM技術(shù)^（注1）的DRP-AI TVM^（注2）。DRP AI Translator旨在將AI模型轉(zhuǎn)換為DRP-AI可執(zhí)行文件，而DRP-AI TVM編譯器則讓DRP-AI加速器與CPU一起工作，使DRP-AI能夠轉(zhuǎn)換和生成比以往更多的AI模型。瑞薩針對產(chǎn)業(yè)發(fā)展的第一階段提供對ONNX和PyTorch AI模型的支持，并計劃在未來支持Tensorflow。

瑞薩電子企業(yè)基礎(chǔ)設(shè)施業(yè)務(wù)部副總裁加藤茂樹表示：“對于想要實現(xiàn)機器學(xué)習(xí)的嵌入式系統(tǒng)開發(fā)人員而言，所面對的挑戰(zhàn)之一是如何跟上不斷演進的最新AI模型。通過新款DRP-AI TVM工具，瑞薩為設(shè)計者帶來擴展AI框架和AI模型的選擇。這些框架和模型可轉(zhuǎn)換為可執(zhí)行格式，使他們能夠利用新的AI模型為嵌入式設(shè)備構(gòu)建最前沿的圖像識別功能?！?/p>

物聯(lián)網(wǎng)和基于AI的服務(wù)提供商、橫河電機全資子公司amnimo Inc.總裁Chiharu Nakabayashi表示：“瑞薩RZ/V系列是嵌入式設(shè)備的理想選擇。其在運行AI時僅產(chǎn)生極低的功耗和熱量，因而無需風(fēng)扇或散熱器。借助這些器件，我們有信心開發(fā)出可安裝在任何場合的強大圖像AI網(wǎng)關(guān)?！?/p>

RZ/V2MA的關(guān)鍵特性

●   雙64位Arm Cortex-A53內(nèi)核，最大工作頻率為1GHz

●   AI加速器DRP-AI（1 TOPS/W級），在執(zhí)行TinyYoloV3程序時達到52 fps（每秒幀數(shù)）

●   OpenCV加速器，用于基于規(guī)則的圖像處理

●   以太網(wǎng)、USB和PCI Express接口，用于外部攝像頭圖像輸入

●   視頻編解碼器（H.265和H.264）

●   DRP-AI TVM工具，用于轉(zhuǎn)換基于TVM技術(shù)的AI模型；目前階段支持ONNX和PyTorch格式

●   高速內(nèi)存接口包括LPDDR4（3200Mbps）、USB 3.1（高達5Gbps）和PCI Express（2通道）

●   可采用15mm方形BGA封裝

基于RZ/V2MA的視覺AI網(wǎng)關(guān)解決方案

瑞薩開發(fā)的“視覺AI網(wǎng)關(guān)解決方案”作為一款基于AI的對象檢測與識別平臺，使用多個攝像頭來收集數(shù)據(jù)并獲得有效的無線數(shù)據(jù)傳輸。這一高速處理解決方案融合了RZ/V2MA MPU與電源IC、VersaClock時鐘發(fā)生器，以及用于Wi-Fi、藍牙和LTE的通信模塊等相搭配的瑞薩產(chǎn)品，不僅帶來靈活的連接選項和一個優(yōu)化的電源系統(tǒng)，并且經(jīng)過測試，以加速強大AI網(wǎng)關(guān)設(shè)備的開發(fā)。該解決方案作為瑞薩“成功產(chǎn)品組合”的一部分，將相互兼容的瑞薩器件完美結(jié)合，實現(xiàn)無縫協(xié)作，以幫助用戶縮短設(shè)計過程，加速產(chǎn)品上市。基于其產(chǎn)品陣容中的多款產(chǎn)品，瑞薩現(xiàn)已推出超過300款“成功產(chǎn)品組合”。

供貨信息

該產(chǎn)品的設(shè)計目的是利用更少的功率推動在系統(tǒng)內(nèi)節(jié)約能源。