近日，瑞芯微針對智慧視覺應(yīng)用領(lǐng)域發(fā)布完整解決方案：聚焦前端產(chǎn)品的RV1126/RV1109兩大智慧視覺處理器、專注后端NVR/XVR產(chǎn)品方案RK3568和RK3588。多場景覆蓋之下，將智慧視覺產(chǎn)品從“看得見”、“看得清”邁入“看得深”、“看得懂”、“能預(yù)見”的多維智能感知視界。 

聚焦前端視覺產(chǎn)品 RV1126/RV1109

在前端，為契合不同場景及細(xì)分行業(yè)的需求，瑞芯微推出兩款高低搭配芯片RV1126與RV1109，均采用14nm工藝制程，內(nèi)置NPU及ISP的智慧視覺處理器。

RV1126的CPU為四核ARM Cortex-A7，NPU為2.0Tops，內(nèi)置1400萬高性能、3幀高動態(tài)ISP；RV1109的CPU則為雙核ARM Cortex-A7，NPU為1.2Tops，內(nèi)置500萬高性能、3幀高動態(tài)ISP。視頻編解碼方面，RV1126支持4K H.264/H.265，RV1109支持500萬H.264/H.265，RV1109和RV1126 硬件上是pin 2 pin，產(chǎn)品升級無縫銜接。擁有以下六大優(yōu)勢：

一、看的清

RV1126與RV1109具備多級降噪、3幀HDR等技術(shù)，即可保證場景的動態(tài)范圍，又能滿足黑光全彩的需求，讓“看得清”成為現(xiàn)實(shí)，更符合智慧視覺類產(chǎn)品的實(shí)際痛點(diǎn)訴求

二、聽的清

內(nèi)置HDAEC算法、支持麥克語音陣列，RV1126與RV1109讓高清語音全面落地，增強(qiáng)聲音采集及拾音距離

三、占用空間小

低碼率、低延遲編碼、感知編碼讓空間占比更小，節(jié)省后端存儲成本

四、AI算力高

異構(gòu)計(jì)算、混合量化、完善工具和配套AI算法、網(wǎng)絡(luò)模型架構(gòu)支持豐富，實(shí)現(xiàn)AI功能擴(kuò)展。同時(shí)，功耗不及所需GPU的10%，支持Tensorflow、PyTorch、Caffe、MxNet、DarkNet、ONNX等，直接轉(zhuǎn)換和部署

五、軟件定義攝像頭

Fast Boot、雙系統(tǒng)架構(gòu)、SDK開源開放等，客戶根據(jù)產(chǎn)品需求進(jìn)行深度化定制，避免產(chǎn)品同質(zhì)化

六、豐富的加解密引擎

支持TrustZone技術(shù)、含國密在內(nèi)的多個(gè)密碼引擎、安全啟動，確保數(shù)據(jù)的安全性和完整性

除以上六點(diǎn)外， RV1126與RV1109均有豐富接口，包括千兆以太網(wǎng)接口，且有TSO網(wǎng)絡(luò)加速；USB 2.0 OTG和USB2.0 host；兩個(gè) SDIO 3.0 接口；8通道 I2S with TDM/PDM, 2通道I2S……滿足多種應(yīng)用場景的需求。

 

前端三大視覺應(yīng)用產(chǎn)品優(yōu)勢

智慧視覺領(lǐng)域的應(yīng)用場景十分廣泛。在前端，依產(chǎn)品形態(tài)分為三大領(lǐng)域：IPC智能網(wǎng)絡(luò)攝像頭、電池IPC智能門鈴/貓眼、閘機(jī)/門禁/考勤類產(chǎn)品。

針對前端產(chǎn)品形態(tài)、場景和需求的差異，RV1126與RV1109在保持全面支持的同時(shí)，還進(jìn)行更為精準(zhǔn)的細(xì)分化處理，展現(xiàn)更具針對性的特性優(yōu)勢。

針對IPC智能網(wǎng)絡(luò)攝像頭產(chǎn)品，RV1126與RV1109具備三大亮點(diǎn)：

1.   3F-HDR技術(shù)可保證高動態(tài)范圍場景的細(xì)節(jié)表現(xiàn)，依賴多級降噪技術(shù)可實(shí)現(xiàn)高質(zhì)量的黑光全彩畫面

2.   智能編碼技術(shù)解決行業(yè)痛點(diǎn)， 低碼率編碼，感知編碼

3.   內(nèi)置NPU，成熟的AI工具，豐富的AI生態(tài)算法，算力更強(qiáng)，極大擴(kuò)展應(yīng)用場景

 

對于電池IPC、智能門鈴、貓眼產(chǎn)品，客戶的需求集中在長續(xù)航、快速抓圖、高清語音對講等。RV1126與RV1109具備四點(diǎn)技術(shù)優(yōu)勢：

1.   支持快速啟動，150ms冷啟動快速抓圖

2.   雙系統(tǒng)，低功耗架構(gòu)、14nm工藝、支持LP3/LP4低功耗DDR，均有效延長電池供電的智慧視覺產(chǎn)品的續(xù)航時(shí)間

3.   內(nèi)置NPU，可以過濾無效警報(bào)

4.   支持Pre-Roll錄制功能

 

閘機(jī)/門禁/考勤類產(chǎn)品，對人臉識別的精準(zhǔn)性有著更高的要求。基于此，RV1126與RV1109做了針對性設(shè)計(jì)，讓人臉識別更加迅速、安全、可靠，人臉識別不等待、門禁快速通過成為現(xiàn)實(shí)：

1.   支持雙MIPI sensor輸入，感知更靈敏，活體驗(yàn)證的方式可防止照片驗(yàn)證，提高安全性

2.   針對逆光、順光場景的ISP優(yōu)化，光線條件不佳的環(huán)境中依然精準(zhǔn)識別

3.   豐富的AI算法生態(tài)，可擴(kuò)展產(chǎn)品應(yīng)用場景

 

專注后端NVR/XVR產(chǎn)品 RK3568和RK3588

在后端NVR/XVR產(chǎn)品中，瑞芯微同樣推出的兩款中端、高端方案——RK3568、RK3588。 

RK3568搭載4核Cortex-A55 CPU、G52GPU、NPU為0.8Tops， 軟件接口套件設(shè)計(jì)友好，依照NVR行業(yè)大平臺做法，統(tǒng)一按模塊封裝多媒體處理API，客戶應(yīng)用軟件可快速開發(fā)導(dǎo)入AI/AO/VO/VDEC/VENC。

1.   支持10路1080P30視頻解碼，8路視頻編碼

2.   支持TSO/UFO硬件加速，有效降低CPU負(fù)載；同時(shí)強(qiáng)大的CPU性能，提升網(wǎng)絡(luò)攝像頭的接入能力

3.   內(nèi)置獨(dú)立第三代 NPU硬件加速器，性能達(dá)0.8-1Tops；支持人臉對比、搜臉、報(bào)警、人車分類，支持4-5路智能檢測；支持一鍵轉(zhuǎn)換，支持Caffe/TensorFlow/TF-Lite/ONNX/PyTorch/Keras/Darknet主流架構(gòu)模型

4.   顯示接口豐富：支持雙/三屏異顯，HDMI2.0b，輸出4K畫質(zhì)；支持eDP/MIPI DSI/LVDS/RGB888/BT.1120/BT.656

5.   強(qiáng)大的后處理：支持3D-LUT/GAMMA/CSC/BCSH/DITHER/CABC；支持圖像后處理，去噪，色彩增強(qiáng)

6.   編碼能力強(qiáng)：支持4K H.264/H.265/VP9多種格式高清解碼；支持ROI編碼

7.   可兼容豐富的DDR顆粒，支持LP4/LP4x/LP3/DDR4/DDR3，支持DDR3及DDR4 ECC，滿足工控等場景高可靠性要求，32bit位寬，最高頻率1600Mhz，充裕的帶寬設(shè)計(jì)，更能滿足智能NVR/XVR場景需求

8.   豐富外圍接口：支持3xSATA3.0，雙千兆網(wǎng)口，TSO技術(shù)，雙PCIE，滿足4G/5G/WIFI6，多網(wǎng)口、NPU的擴(kuò)展需求

 

RK3588采用8nm工藝制程，搭載4核Cortex-A76+4核Cortex-A55，采用ARM最新4核GPU、NPU為6Tops，可賦能高端NVR/XVR產(chǎn)品，相比目前市面產(chǎn)品的較低視頻解碼能力、NPU算力不足、顯示接口少，高速接口少等待提升的產(chǎn)品需求，RK3588有以下四大優(yōu)勢：

 

1.   支持32路1080P視頻解碼

2.   支持4屏異顯

3.   擁有多路高速接口，支持多路 PCIe3.0/PCIe2.0,SATA3.0, USB3.1和千兆以太網(wǎng)

4.   擁有獨(dú)立6TOPS NPU超強(qiáng)算力，8核CPU+4核全新GPU架構(gòu)

 

軟硬雙提升，開發(fā)者工具更高效

當(dāng)下，是一個(gè)講求軟硬協(xié)同的新時(shí)代。眾科技巨頭在發(fā)力硬件產(chǎn)品的同時(shí)，也在通過打造開發(fā)工具、系統(tǒng)等，提升自身的“軟實(shí)力”，瑞芯微也在積極推動“軟硬”的雙提升，推出更高效更精準(zhǔn)的開發(fā)者工具RKNN Toolkit。 

RKNNToolkit的功能極為豐富，主要包括：自定義算子、模型多輸入、多加速棒支持、性能及內(nèi)存預(yù)估、模擬調(diào)試、量化精度分析、可視化功能、模型預(yù)編譯、模型分段、批量推理、模型轉(zhuǎn)換、量化/混合量化、模型優(yōu)化開關(guān)等。通過自身的可視化特性，RKNN Toolkit讓開發(fā)者的工作更為輕松。

此外，RKNNToolkit支持兩種量化機(jī)制——Post training quantization、Quantization-aware training。而且RKNN Toolkit使用模型自身的量化參數(shù)，在量化精度上不會有損失。

RKNNToolkit配合靈活的多媒體開發(fā)接口，可增加開發(fā)者自定義應(yīng)用的靈活性，讓開發(fā)不再是難事，有助于終端伙伴擴(kuò)展更多AI功能及應(yīng)用場景。

 

展開全新布局，賦能更多行業(yè)

瑞芯微致力于打造多場景計(jì)算單元SoC，在影像視覺處理、視頻編解碼、SoC 芯片設(shè)計(jì)、大系統(tǒng)開發(fā)上積累豐富經(jīng)驗(yàn)，已形成多層次、多平臺的專業(yè)解決方案。通過深挖智慧視覺產(chǎn)品痛點(diǎn)，及不同應(yīng)用場景需求，瑞芯微憑借技術(shù)優(yōu)勢，將極大優(yōu)化終端產(chǎn)品性能，提升終端產(chǎn)品的市場競爭力。