研華基于RK3588的SMARC核心模塊ROM-6881助力內窺鏡應用AI升級

導讀

內窺鏡作為醫生的“第二只眼”，被廣泛應用于不同科室和不同疾病治療，在醫療行業應用中起著舉足輕重的作用。醫用內窺鏡在診療過程中提供照明、攝像和通道等功能，其臨床應用可分為診斷和治療兩方面。在設備智能化的今天，越來越多的醫療器械廠商為醫療內窺鏡設備導入了AI輔助診斷，幫助醫生大幅提高了診斷效率和準確率。 

醫療內窺鏡應用

01內窺鏡應用需求 

隨著AI為內窺鏡領域不斷注入新活力，國內某大型醫療設備廠商致力研發一款AI協助診斷的醫療內窺鏡。為滿足醫療影像中對高清顯示和低延遲顯示的需求，其設備主控板需要支持安卓環境下高清1200萬像素的2路MIPI-CSI同時輸入，且需具備獨立的ISP處理圖像，支持高清顯示和多屏顯示功能。此外，由于客戶自身硬件實力的欠缺，希望供應商可提供個性化的底板設計服務協助開發。

在內窺鏡應用上部署AI功能，對該醫療設備廠商也提出了技術上的挑戰。該客戶除了需要主控板具備AI加速能力外，在調用AI NPU方面，因客戶對RK平臺的NPU不熟悉，還需要供應商協助支持提供RK平臺的NPU的開發工具相關資料和技術服務。 

面臨的挑戰
實時高清攝像頭處理能力

安卓環境下雙路MIPI-CSI攝像頭輸入
AI算法及算力支持
多屏高清顯示

Arm平臺NPU的使用
醫療長生命周期供貨

02研華解決方案

針對該廠商需求，研華提供ROM-6881 SMARC 2.1核心模塊方案。該方案使用SGeT組織所推出的SMARC 2.1核心板標準，核心板整板尺寸選用的是Full Size，長寬尺寸為82*80mm，通過金手指連接器與底板相連，方便客戶完成安裝。此外，SMARC 核心板PIN腳定義相同，方便客戶后續做升級替換。

ROM-6881基于全新RK3588高性能Arm平臺，支持4*Arm Cortex-A76 & 4*Arm Cortex-A55主頻1.8GHz，內置NPU （神經網絡處理器）提供6TOPS的AI算力，在圖像編解碼和圖像處理方面表現出色，滿足內窺鏡輕量級AI應用算力需求。并且ROM-6881支持四屏獨立顯示，最高支持8K 分辨率顯示。在影像方面，支持4路MIPI-CSI，最高支持1200萬像素高清攝像頭，提供獨立的ISP，更高效的處理圖像內容，降低延遲。

除此之外，ROM-6881采用嚴苛的工業設計，擁有豐富的I/O擴展資源，滿足醫療應用的外設需求，產品支持-40~85℃寬溫工作環境，提供10年以上的供貨生命周期，滿足醫療設備長期供貨的需求。 

研華ROM-6881 醫療內窺鏡應用場景

03 研華技術服務 

項目的順利開發離不開研華從產品開發到項目落地一系列的技術支持，研華Design In服務在該項目中及時幫助客戶解決了安卓環境下無法獨立開發出雙MIPI-CSI的難題。雙MIPI-CSI 同時輸入功能未配置在既有的安卓環境，在客戶提出此項需求后，研華技術團隊及時響應，為客戶定制了此項功能需求，幫忙客戶加快了項目應用落地。

在AI方面，研華幫助廠商快速熟悉了RK平臺的NPU開發工具RKNN，快速部署已訓練好的模型，實現AI應用落地。在底板設計方面，研華提供了詳細的底板開發資料，包括核心板PIN OUT，Layout Checking List，Design Guide等文件，供客戶參考以便快速設計。在廠商完成底板設計后，研華還提供了底板線路圖review服務，幫助客戶檢測底板設計的錯誤，避免客戶出現底板設計問題。

研華ROM-6881產品特性

· 基于瑞芯微 RK3588 八核 4 x Cortex-A76@2.4GHz，4 x Cortex-A55@1.8GHz

· 搭載6TOPS AI算力 NPU

· 板載4/8GB LPDDR4 內存和 32/64GB 存儲

· 支持8K@60fps H.265/VP9 視頻解碼和 8K@30fps H.265/H.264 視頻編碼

· 支持 HDMI, DP, 雙通道 LVDS/DSI 四路獨顯解決方案

· 支持4路MIPI-CSI攝像頭同時輸入

· 支持4 x PCIE3.0, Dual Gigabit LAN, 2 x USB3.0, SATA3.0, 2 x CAN, 3 x MIPI-CSI, UART

· 支持Linux and Android