基于Rockchip RV1108 IoT开发平台的人脸检测方案
原标题:基于Rockchip RV1108的人脸检测方案
人脸检测是自动人脸识别系统中的一个关键环节。随着电子商务等应用的发展,人脸识别成为最有潜力的生物身份验证手段,这种应用背景要求自动人脸识别系统能够对一般图像具有一定的识别能力,人脸检测的应用背景已经远远超出了人脸识别系统的范畴,在基于内容的检索、数字视频处理、视频检测等方面有着重要的应用价值。
瑞芯微RK1108具备强大的开放性和可程序设计,可为合作伙伴提供多样化的产品思路和方向。可广泛应用于汽车、安防监控、家用辅助机器人、运动相机、无人机等领域。RV1108采用SOC的方案,内部集成A7(1.0G 主频),600M DSP,128MB DDR,实现整个人脸检测单SOC 实现,并能实现RJ45与后台通信,卷积算法采用DSP 来实现,有效率高,指令周期快的优点。
RK1108 IoT开发平台通过内嵌CEVA XM4视觉处理器DSP以及瑞芯微独家图像算法技术(3D降噪、电子稳像、畸变矫正、人脸检测)、语音算法技术(包括回声消除、单/多麦的噪声抑制、自动增益控制、基于多麦的声源定位),让RK1108在图像与音频表现上更加智能,应用于物联网IoT多终端均表现出色
RK1108内嵌的DSP采用了可程序设计宽向量架构、定/浮点处理能力、多重同步标量单位,以及一个专门针对计算机视觉处理需求的低功耗指令集,性能强悍。可满足最复杂的图像学和视觉应用的极端处理需求,通过从CPU和GPU卸除这些性能密集任务,高效的DSP降低了整体系统的功耗,同时提供完全的灵活性。
该DSP架构还具有其他多特性,诸如支持最新的深度学习技术,利用CEVA的全面深神经网络 (CDNN2) 软件框架,利用 DSP的计算能力,可创建最低功耗和内存带宽的深度学习解决方案,以提供实时、高效的目标识别与视觉分析功能。
场景应用图
产品实体图
展示板照片
方案方块图
核心技术优势
RK1108具有五大技术优势:
1、功能强大的DSP:内嵌CEVA XM4视觉处理器DSP,最高可达600MHz。
2、微光夜视成像:专业的图像处理单元。
3、高性能编码器:2K/H.264,高画质低码率。
4、多功能语音处理能力:最多支持8路MIC数组,支持回声消除、噪声抑制等3A语音算法。
5、高集成、高扩展:支持多Camera sensor输入,HDMI OUT/CVBS OUT/CVBS IN/Audio Codec。
方案规格
1. 采用RK RV1108G主平台,内含1G A7+600MHZ DSP+128M DDR,运行Linux 系统,外围配置简单
2:人脸识别算法:在DSP 里面运行相应的人脸检测算法,指令周期快,可轻松实现深度学习算法,目前RK的人脸检测算法已经可以在产品中应用
3:摄像头支持:内置13M ISP,已经调通OV4689/CV2710/OV2718(宽动态)的驱动。
4:图像可支持直接摄像头输入或由外置枪机的图片/视频流输入,可同时检测10个目标,最小检测图片大小为80*80
5. 可实现数据网络传递到后台进行人脸识别
【RV1108】
产品概述
RV1108芯片是瑞芯微布局面向IoT物联网的产品,该芯片内嵌CEVA XM4视觉处理器DSP,具有智能图像处理等关键技术,最高可达600MHz。依托专业图像处理单元技术优势,使VR全景摄像机在宽动态、感光度、清晰度、逆光、夜视成像 。
功能特性
音频具备多路MIC阵列、噪声抑制、回声消除、声源定位、主声跟随、智能语音(MIC阵列的算法)能力 。
视频具备编解码2K/H.264画质,移动侦测、人脸识别、微光夜视能力 。
即将开源向全球生态链以及开发者提供RV1108基础开发套件。基于Linux OS,支持MiniGui和其他UI、可灵活支持WiFi/BT/GPS驱动、支持手机互联 (Android/IOS) 。
技术特性
内嵌DSP:内嵌CEVA XM4视觉处理器DSP,最高可达600MHz ;
微光夜视成像:专业的图像处理单元 ;
高性能编码器:2K/H.264,高画质低码率 ;
多功能语音处理能力:最多支持8路MIC阵列,支持回声消除、噪声抑制等3A语音算法 ;
高集成、高扩展:支持多Camera sensor输入,HDMI OUT/CVBS OUT/ CVBS IN/Audio Codec 。
RV1108
Single-core Cortex-A7 up to 1.0GHz
High-performance DSP
DDR3/DDR3L
1440P H264 video decoder
HD display
1440P H264 encoder
8M ISP with WDR
USB 2.0
HDMI 1.4 with HDCP 1.3
CVBS in&out/MIPI/Audio DAC
详细参数 | |
工艺 | • 低功耗,高性能28nm工艺 |
CPU | • 单核 Cortex-A7, 最高1.0GHz |
影像处理 | • 高性能CEVA XM4 DSP |
• 8M ISP, 支持宽动态范围 | |
• 内置高性能2D加速硬件 | |
• 支持解交错 | |
内存 | • 支持DDR3/DDR3L,16 bits位宽 |
• 支持SPI NOR FLASH ,SLC NAND,eMMC | |
多媒体 | • 支持 1440P@30fps H.264 视频解码 |
• 支持 1440P@30fps H.264 视频编码 | |
显示 | • 支持串行和并行RGB ,以及MIPI-DSI接口 |
• HDMI1.4 up to 1080P@60Hz | |
• CVBS输出最高576i | |
安全 | • 内置硬件加解密引擎 |
接口 | • MIPI-CSI ,CVBS in, DVP Sensor接口 |
• 支持: SDIO 3.0, USB2.0 OTG/HOST,I2C,UART,SPI, SFC | |
• 8通道I2S 接口, 支持8路数字麦克风输入输出 | |
• 内置Ethernet MAC ,Audio Codec | |
封装 | • BGA356 14X14, 0.65mm pitch |
• RV1108A without 128MB DDR3 | |
• RV1108G with 128MB DDR3 | |
状态 | • 大规模量产 |
产品应用 | • CVR 车载 |
• IP Camera | |
• 运动相机 | |
• 无人机 | |
• 其他应用(全景摄像应用,深度学习和计算机视觉应用,视频实时传输) |
责任编辑:David
【免责声明】
1、本文内容、数据、图表等来源于网络引用或其他公开资料,版权归属原作者、原发表出处。若版权所有方对本文的引用持有异议,请联系拍明芯城(marketing@iczoom.com),本方将及时处理。
2、本文的引用仅供读者交流学习使用,不涉及商业目的。
3、本文内容仅代表作者观点,拍明芯城不对内容的准确性、可靠性或完整性提供明示或暗示的保证。读者阅读本文后做出的决定或行为,是基于自主意愿和独立判断做出的,请读者明确相关结果。
4、如需转载本方拥有版权的文章,请联系拍明芯城(marketing@iczoom.com)注明“转载原因”。未经允许私自转载拍明芯城将保留追究其法律责任的权利。
拍明芯城拥有对此声明的最终解释权。