國產(chǎn)自研NPU,算力3.0TOPS,基于A35內(nèi)核,瑞芯微RK1808
隨著物聯(lián)網(wǎng)和人工智能的興起,AIoT(AI+IoT)芯片也隨之興起,RK1808是瑞芯微Rockchip發(fā)布的全新AIoT(AI+IoT)芯片。RK1808采用ARM雙核Cortex-A35架構(gòu),最高頻率可達(dá)1.6GHz,硬件VPU支持1080P H.264視頻格式的DEcoder和ENcoder,硬件VAD支持麥克風(fēng)陣列,內(nèi)置了ISP支持?jǐn)z像頭視頻信號輸入。在工藝上,RK1808采用22nm FD-SOI工藝制造,相同性能下功耗比主流28nm工藝降低30%左右。
![](https://pics4.baidu.com/feed/b8389b504fc2d562ed79dd376b0bcae877c66c9c.jpeg?token=00f6a7598b4f76047f87d2e2867fb1d8)
RK1808最大的特點就是內(nèi)置NPU,算力最高可達(dá)3.0 TOPs。兼顧性能、功耗及運算精度的同時支持INT8(3TOPs)/INT16(300GOPs)/FP16(100GFLOPs)混合運算。提供的RKNN-Toolkit工具支持TensorFlow、Caffe、ONNX、Darknet等框架的網(wǎng)絡(luò)模型轉(zhuǎn)換,Rock-X SDK實現(xiàn)一行代碼即可調(diào)用庫內(nèi)人工智能算法。
![](https://pics4.baidu.com/feed/c2fdfc039245d688efcb29e12fd82719d31b244f.jpeg?token=85d448c8f16a5c9ab054b4a003186202)
二、詳細(xì)資源
RK1808擁有相當(dāng)豐富的外設(shè)和接口,可以多種功能的設(shè)計。
![](https://pics3.baidu.com/feed/cf1b9d16fdfaaf5117517196014ecee9f01f7a0f.jpeg?token=d138a4cd6f0558c3bfc2369b00548f13)
![](https://pics0.baidu.com/feed/eaf81a4c510fd9f9054bf79bae378e2d2934a482.jpeg?token=15383eaaf08205402af4734b75137613)
三、工具鏈
A、RKNN-Toolkit
RKNN-Toolkit是Rockchip提供的一個進(jìn)行模型轉(zhuǎn)換、推理運行和性能評估的開發(fā)套件,最新版本到了1.4.0。用戶通過提供的 python 接口可以便捷地完成模型轉(zhuǎn)換、模型推理和性能評估等功能。但是對于自定義的網(wǎng)絡(luò)層,這個工具可能無法進(jìn)行轉(zhuǎn)換,需要等待官方的更新。
B、Rock-X SDK
Rock-X SDK是Rockchip提供的一個支持C和Python的SDK,可以使用戶通過一行代碼即可調(diào)用算法庫內(nèi)的人工智能算法,無需花更多的精力在算法的部署上,極大地加快人工智能、物聯(lián)網(wǎng)等項目的開發(fā)速度。
當(dāng)前最新版本為1.2.0,人工智能算法包括包括:人臉檢測、人臉識別、活體檢測、人臉屬性分析、人臉特征點、人頭檢測、人體骨骼關(guān)鍵點、手指關(guān)鍵點、人車物檢測等功能,
四、開發(fā)硬件
A、AI人工智能計算棒
AI人工智能計算棒由開源官方論壇Toybrick發(fā)布。AI人工智能計算棒(AI Compute Stick),定位于深度學(xué)習(xí)工具和AI加速器,并且兼容Mac、Windows和Linux三大操作系統(tǒng)平臺,拋棄以前的GPU+CPU+FPGA結(jié)合的加速計算方案,計算棒通過USB接口連接PC,是的普通的PC也能獲得強大的算力與推理能力。
![](https://pics5.baidu.com/feed/b8389b504fc2d562546f28ee690bcae876c66c74.jpeg?token=f8b16697bd7641c84b8b1e85d1ad357a)
B、TB-RK1808M0 Mini-PCIe計算卡
TB-RK1808M0 Mini-PCIe計算卡同樣由開源官方論壇Toybrick發(fā)布。Mini-PCIe計算卡不僅能作為主芯片控制外圍硬件,也可以作為計算模塊集成在人工智能主板上。
本文歸算法卡農(nóng)所有。
評論