【導(dǎo)讀】視覺(jué)AI也稱(chēng)為計(jì)算機(jī)視覺(jué),旨在訓(xùn)練計(jì)算機(jī)復(fù)制人類(lèi)視覺(jué)系統(tǒng),讓數(shù)字設(shè)備(如人臉檢測(cè)器、QR碼掃描儀)能夠像人類(lèi)一樣識(shí)別和處理圖像、視頻中的物體。視覺(jué)AI可以主動(dòng)識(shí)別不安全因素,實(shí)現(xiàn)AI智能值守,節(jié)約人力成本,滿(mǎn)足不同應(yīng)用場(chǎng)景的安全管理需求。
瑞薩電子推出視覺(jué)AI網(wǎng)關(guān)解決方案,基于AI對(duì)象檢測(cè)與識(shí)別平臺(tái),使用多個(gè)攝像頭收集數(shù)據(jù)并獲得有效的無(wú)線數(shù)據(jù)傳輸。方案采用了具有豐富外設(shè)功能的RZ/V2M AI-MPU和優(yōu)化的電源IC、VersaClock時(shí)鐘發(fā)生器,以及用于Wi-Fi、藍(lán)牙和LTE的通信模塊,不僅具有靈活的連接選項(xiàng)和優(yōu)化的電源系統(tǒng),而且有助于加速?gòu)?qiáng)大AI網(wǎng)關(guān)設(shè)備的開(kāi)發(fā)。該解決方案具有高性能和低功耗的特性,同時(shí),集成的邊緣AI功能提高了此方案的網(wǎng)關(guān)應(yīng)用價(jià)值。
器件詳解
視覺(jué)AI網(wǎng)關(guān)解決方案使用了內(nèi)置視覺(jué)AI加速器的、能夠處理多個(gè)攝像頭圖像數(shù)據(jù)的全新RZ/V2MA器件,進(jìn)一步擴(kuò)充了RZ/V系列微處理器(MPU)產(chǎn)品線,并為視覺(jué)AI應(yīng)用帶來(lái)了更高水平的高精度圖像識(shí)別能力。
這款器件集成了兩個(gè)64位Arm? Cortex? -A53內(nèi)核,能夠1GHz最高工作頻率實(shí)現(xiàn)高計(jì)算性能;專(zhuān)有的低功耗DRP-AI(動(dòng)態(tài)可重構(gòu)處理器)加速器可以1TOPS/W(每秒百萬(wàn)次操作/瓦)級(jí)的性能處理圖像數(shù)據(jù)。
RZ/V2MA器件配備以太網(wǎng)、USB和PCI Express等高速接口,可以從多個(gè)外部攝像頭輸入圖像。除了DRP-AI加速器外,RZ/V2MA還包含一個(gè)OpenCV加速器,可以同時(shí)執(zhí)行基于規(guī)則的圖像處理。這些功能有助于AI網(wǎng)關(guān)、視頻服務(wù)器、安全門(mén)、POS終端和機(jī)械臂等機(jī)器視覺(jué)產(chǎn)品獲得高精度圖像識(shí)別能力。該器件的目標(biāo)應(yīng)用主要是AI功能網(wǎng)關(guān)和AI視頻服務(wù)器等。
系統(tǒng)框圖
為了幫助用戶(hù)快速上手,新款RZ/V2MA提供一整套開(kāi)發(fā)工具輔助視覺(jué)AI系統(tǒng)設(shè)計(jì)。新器件的DRP-AI Translator可以將AI模型轉(zhuǎn)換為DRP-AI可執(zhí)行文件,而新增的基于開(kāi)源深度學(xué)習(xí)編譯器Apache TVM技術(shù)的DRP-AI TVM編譯器可讓DRP-AI加速器與CPU一起工作,使DRP-AI能夠轉(zhuǎn)換和生成比以往更多的AI模型。現(xiàn)在瑞薩已對(duì)ONNX和PyTorch AI模型的支持,計(jì)劃未來(lái)支持Tensorflow。
方案優(yōu)勢(shì)
● 通過(guò)解碼視頻流(H.264或H.265)并以最小切換開(kāi)銷(xiāo)處理多個(gè)AI推理,從而實(shí)現(xiàn)快速視覺(jué)AI處理
● 支持帶以太網(wǎng)協(xié)議的高速視覺(jué)網(wǎng)關(guān)功能:100/1000Mbps和快速USB連接:USB 3.1第1代(5Gbps)
● 支持PCI Express 2.0(第2代/2通道)的外設(shè)擴(kuò)展
● RZ/V2MA內(nèi)置電源時(shí)序控制功能可使電源設(shè)計(jì)更簡(jiǎn)單且具有更高的可靠性
● 集成多種通信設(shè)備、高性能Wi-Fi模塊、緊湊且高性能的低功耗藍(lán)牙(LE)模塊和LTE Cat-M1蜂窩物聯(lián)網(wǎng)模塊
● 為合作伙伴提供評(píng)估板RZ/V2MA評(píng)估板
作為瑞薩電子“成功產(chǎn)品組合”的一部分,上述解決方案將相互兼容的瑞薩器件完美結(jié)合,實(shí)現(xiàn)無(wú)縫協(xié)作,幫助用戶(hù)縮短設(shè)計(jì)流程,加快產(chǎn)品上市。與此同時(shí),這款視覺(jué)AI網(wǎng)關(guān)解決方案也將為電商個(gè)性化圖像搜索、3D模型構(gòu)建、OCR掃描、人臉識(shí)別、圖像探測(cè)器等創(chuàng)新用例賦能。
免責(zé)聲明:本文為轉(zhuǎn)載文章,轉(zhuǎn)載此文目的在于傳遞更多信息,版權(quán)歸原作者所有。本文所用視頻、圖片、文字如涉及作品版權(quán)問(wèn)題,請(qǐng)聯(lián)系小編進(jìn)行處理。
推薦閱讀:
面向mMIMO的Open RAN無(wú)線電單元架構(gòu)
燧光科技賀杰:醒空系統(tǒng)“四步便捷創(chuàng)作”助力虛實(shí)融合內(nèi)容閉環(huán)
上海貝嶺芯片在移動(dòng)戶(hù)外電源上的應(yīng)用