瑞芯微RV1126 IPC/CVR的高性能视觉处理器SoC 介绍

鸣涧

瑞芯微RV1126 IPC/CVR的高性能视觉处理器SoC 介绍

RV1126是一款用于IPC/CVR的高性能视觉处理器SoC，尤其适用于AI相关应用。

  高算力  高性能

它基于四核ARM Cortex-A7 32位内核，集成了NEON和FPU。每个核心有一个32KB的I-cache和32KB的D-cache，以及512KB的共用二级缓存。内置的NPU 支持 INT8/INT16 混合操作，计算能力2.0TOPs。此外，由于其强大的兼容性，很多网络模型如 TensorFlow/MXNet/PyTorch/Caffe 等可以很容易地转换。

  新一代图像处理器

RV1126 还引入了新一代完全基于硬件的 1400 万像素 ISP（图像信号处理器）和后处理器。实现了 IPC 和 CVR 中常用的算法加速器，如 HDR、3A 功能(AE、AF、AWB)、LSC、3DNR、2DNR、锐化，去雾，鱼眼校正，伽马校正，特征点检测等，这些都是实时处理。通过两个 MIPI CSI（或 LVDS/sublvds）和一个 DVP（BT.601/BT.656/BT.1120）接口，用户可以建立一个同时接收来自 3 个摄像机传感器的视频数据的系统。

高清编解码

RV1126 中嵌入的视频编码器不仅支持超高清 H.265/H.264 编码。它还支持多流编码，最高可支持一个 4Kp30 和一个 1080p30 同时进行。借助于这一功能，摄像机的视频可以被编码成更高的分辨率并存储在本地存储器中，同时将另一个低分辨率的视频传输到云存储中。

丰富的接口

RV1126还包含丰富的音频、内存和其他外围接口，如I2C、SPI、PWM等。这些可以帮助用户在整个系统中添加更多传感器或其他外围设备，以提高灵活性和可扩展性。

RV1126 具有高性能的外部 DRAM (DDR3/DDR3L/DDR4/LPDDR3/LPDDR4)能够维持要求的内存带宽。

• 视频输入接口
  
  

两个MIPI CSI/LVDS/SubVDS接口，每个4个通道，每个通道2.5Gbps；一个8/10/12/16位标准DVP接口，最高150MHz；支持BT.601/BT/656和BT.1120 VI接口。

• 视频输出接口
  

一个高达24bit RGB并行视频输出接口；一个BT.1120视频输出接口；一个4通道MIPI DSI接口，每个通道最高1Gbps；高达1080p@60fps。

• 关于视频编解码
  

• 4K H.264/H.265 30fps 视频编码：3840 x 2160@30 fps+720p@30 fps encoding
• 4K H.264/H.265 30fps 视频解码：3840 x 2160@30 encoding + 3840 x 2160@30 fps decoding
  
  
  

• 音频接口
  

8通道I2S0，2通道I2S1/I2S2；

• 神经处理单元
  

神经网络加速引擎，处理性能最高可达2.0Tops；支持深度学习框架：TensorFlow、TF lite、Pytorch、Caffe、ONNX、MXNet、Keras、Darknet；支持OpenVX API；

• 内存
  

支持从以下设备启动系统：FSPI闪存接口、eMMC接口、SDMMC接口、异步Nand接口；通过以下界面支持系统代码下载：USB OTG接口（设备模式）

• 外部存储器或存储设备
  

• 动态内存接口（DDR3/DDR3L/DDR4/LPDDR3/LPDDR4）：与JEDEC标准兼容，兼容DDR3/DDR3L/DDR4/LPDDR3/LPDDR4；支持32位数据宽度，2列（芯片选择），每列最大4GB寻址空间，总寻址空间为4GB（最大）；低功耗模式，如SDRAM的断电和自刷新。
  
  

• eMMC接口：与标准iNAND接口兼容；；与eMMC规范4.51兼容；支持三种数据总线宽度：1bit、4bit或8bit
  
  

• SD/MMC接口：兼容SD3.0、MMC版本4.51；数据总线宽度为4bit。
• 串行闪存接口（FSPI）：支持从/向串行闪存设备传输数据；支持x1、x2、x4数据位模式；支持2个芯片选择。
• Nand Flash接口：支持异步nand flash；数据总线宽度为8bit;支持LBA nand flash；高达16bit/1KB的硬件ECC；支持可配置接口时序