基于CVITEK_CV1821+SOI_K302P的IPC方案

一.方案介绍

该方案基于主控平台CVITEK_CV1821和sensor SOI_K302P，运用于智能监控IPC摄像头，可用于户外或室内。采用了2688x1520的分辨率,最高能支持60FPS,并且支持30FPS的HDR。搭载SOI_K302P近红外感度NIR+技术，QE（量子效率）显著提升，相较普通sensor，在850nm和940nm波段下感光大幅提升，即使在仅有微弱亮光的环境下，也能呈现清晰的如可见光般的高清影像。作为400万2K的监控摄像头，通过ISP图像调校技术，提升成像质量与色彩真实度，通过专用CMOS传感器和后期处理，实现更强的感光能力与更少噪点。

二.芯片介绍

1.主控芯片

产品概述：

晶视智能（CVITEK）是一家开放式人工智能芯片研发商，专注于视频监控及边缘计算技术研发，拥有国内性能*的AI TPU运算核心及soc芯片整合技术，目前研发领域涵盖soc芯片设计， AI TPU处理器及工具链，图像处理算法及设计等，致力于打造人工智能机器视觉一站式平台解决方案，为客户带来丰富价值及技术创新的产品与服务。

CV1821是其面向边缘智能监控IP 摄像机、本地端人脸辨识考勤机、智能家居等产品领域而推出的高性能、低功耗芯片，集成了 H.264/H.265 视频压缩编解码器和 ISP ；支持 HDR 宽动态、3D降噪、除雾、镜头畸变校正等多种图像增强和矫正算法，为客户提供专业级的视频图像质量。

芯片更集成自研TPU在INT8运算下，可提供约0.5TOPS算力 。特殊设计的TPU调度引擎能有效地为张量处理器核心提供极高的带宽数据流 ；并为用户提供了强大的深度学习模型编译器和Linux软件SDK开发包。主流的深度学习框架，比如 Caffe Pytorch ONNX MXNet 和TensorFlow(Lite) 框架的主流网络可以轻松的移植 到平台上 。

主要特性：

硬件架构图：

2.Sensor

晶相光电（SOI）是一家专注于CMOS图像传感器（CIS）的开发和销售的公司。该公司拥有优秀的设计团队，并与专业的晶圆厂合作，具备系统集成能力以及与测试和封装厂商的合作关系。晶相光电推出了低成本、高性能和多样化的产品，以满足市场和客户的需求，并提供快速的本地客户服务，使客户在生产效率和时间上具备竞争力。

JX-K302P是一款高性能的4.1MP BSI CMOS图像传感器，采用SOI的2.0um BSI像素技术设计和制造。它在近红外（NIR）范围内具有出色的QE性能，可提高850nm和940nm波长下的夜视效果。该传感器在全尺寸模式下可以以60fps的速度传输图像，在HDR模式下为30fps。JX-K302P由一个2696 x 1528的有源像素传感器（APS）阵列组成，具有片上10位ADC、可编程增益控制（PGA）和相关双采样（CDS）功能，可显著降低固定模式噪声（FPN）。该传感器还具有许多标准的可编程和自动功能。它采用符合行业标准的MIPI CSI2四数据通道串行接口。外部主机控制器可以通过标准串行接口访问该设备。该传感器以晶圆级封装的CSP形式提供。

主要特性

三.场景应用图

以下是在不同的环境下拍摄的效果图：

1.室内5500K_100lux:

2.室内5500K_50lux:

3.室内5500K_30lux:

4.室内5500K_10lux

5.室内5500K_1lux

6.室内5500K_0.1lux

7.红外850nm

8.红外940nm

►展示板照片

►方案方块图

►核心技术优势

1、CV1821是其面向边缘智能监控IP 摄像机、本地端人脸辨识考勤机、智能家居等产品领域而推出的高性能、低功耗芯片，集成了 H.264/H.265 视频压缩编解码器和 ISP；

2、支持 HDR 宽动态、3D降噪、除雾、镜头畸变校正等多种图像增强和矫正算法，为客户提供专业级的视频图像质量；

3、芯片更集成自研TPU在INT8运算下，可提供约0.5TOPS算力；

4、特殊设计的TPU调度引擎能有效地为张量处理器核心提供极高的带宽数据流；

5、并为用户提供了强大的深度学习模型编译器和Linux软件SDK开发包；

6、主流的深度学习框架，比如 Caffe Pytorch ONNX MXNet 和TensorFlow(Lite) 框架的主流网络可以轻松的移植 到平台上。

►方案规格

1. 主控cv1821规格:

1. • 单核ARM CA53@1.2G；

• 图像视频90、180、270度旋转、Mirror、Flip；

• MiPi接口；

• 9mm x 9mm QFN 封装大小；

• 集成 POR 、 ADC 、 I2C 、 SPI 、 UART 、PWM 、 SDIO 3.0 、 USB 2.0 Host/Device；

• 内置 DRAM；

2 .sensor_soi_K302P规格：

• • 4.1MP CMOS图像传感器；

• 分辨率：2696*1528；

• 10-bit RGB Raw Data；

• Full: 2688x1520 @60fps

• HDR: 2688x1520 @ 30fps

• DVP并行和MIPI CSI2双数据通道串行接口