随着社会的发展进步和人工智能的逐步普及,人们已经逐渐习惯AI给日常生活带来的便利,比如:上班考勤、小区门禁、办公大楼门禁、高铁站检票闸机等都无需配带钥匙或识别卡凭借刷脸就可以快速通过。
由大联大友尚推出基于SOPHON的算力芯片BM1880和ON Semiconductor的AR0130 & AR0230的双目人脸识别解决方案,其BM1880支持最高1 TOPS算力和本地3万张脸谱存储;AR0230 Sensor支持内部HDR合成输出,能够出色的解决因背光、强光而导致的过曝光、过暗等现象;AR0130则在近红外表现方面效果良好。本方案支持的应用场景有:小区门禁、人脸识别考勤系统、关口闸机;本方案支持的AI功能:人体属性与姿势分析、人体检测、识别与表情分析、物体体测与识别、车牌识别、声纹识别。
图示1-大联大友尚推出基于SOPHON和ON Semiconductor的人脸识别解决方案的展示板图
核心技术优势
【SOPHON BM1880】
Ÿ BM1880是聚焦于边缘应用的深度学习推理人工智能芯片BM1880 TPU,在8位整数运算下可以提供1 TOPS的算力;在Winograd卷积加速运算下,提供高达2 TOPs的算力
Ÿ 特殊设计的TPU调度引擎能有效的为所有张量处理器核心提供极高的带宽数据流,芯片内含2MB内存,可以为性能优化和数据重用提供最佳的编程灵活性
Ÿ 为用户提供了强大的深层学习模型编译器和软件SDK开发包,主流的深层学习框架像,比如Caffe,Pytorch和Tensorflow框架,可以轻松地移植到BM1880平台上,支持常见的CNN / RNN / DNN
Ÿ 神经网络模型分析、编译和调整兼容Linaro 96boards
Ÿ 支持ResNet50、Yolo V2、Google NetV1、Mobile Netv1 / v2、SSD300、Alexnet、VGG16等模型
Ÿ SOPHON BM1880是专为人工智能应用设计的多功能加速平台,可以作为深度学习推理加速的协处理器,也可以做为主处理器从以太网接口或USB接口接收视频流、图片或其它数据,然后执行推理和其他计算机视觉任务;其它的主机也可以发送视频流或图片给BM1880,由BM1880做推理并将结果返回给主机
【ON AR0230】
Ÿ 卓越的微光性能
Ÿ ON Semiconductor最新3.0um像素,具有双转换增益的DR-Pix™技术
Ÿ 线性或高动态捕捉
Ÿ 像素或行扫描交错T1 / T2输出
Ÿ 支持片上HDR内部合成输出
Ÿ 数据接口:四通道串行高速像素接口(HiSPi)差分信号(SLVS和HiVCM)或并行输出
【ON AR0130】
Ÿ 卓越的低光性能,无论是VGA模式还是高清模式
Ÿ 卓越的近红外性能
图示2-大联大友尚推出基于SOPHON和ON Semiconductor的人脸识别解决方案的方案块图
方案规格
【应用处理器子系统】
Ÿ 双核ARMA53@1.5GHz
Ÿ Neon加速,集成了浮点运算单元(FPU)
【RISC V处理器子系统】
Ÿ 单核RISC V@1.0GHz
【张量处理器子系统】
Ÿ 512个MAC,1 TOPS@INT8
Ÿ Winograd卷积运算下,高达2 TOPS@INT8
【视频子系统】
Ÿ H.264视频解码器
Ÿ MJPEG编码器解码器
Ÿ 视频后处理器
Ÿ 1080P@60FPS或两路1080P@30FPS
【物理规格】
Ÿ 典型功耗为2.5瓦
Ÿ 0.9V核心电压,1.8V / 3.3V输入输出
Ÿ 14mm x 14mm FCBA封装
【音频子系统】
Ÿ 双I2S输入和输出
Ÿ 使用软件实现多协议的语音编解码
【外围接口】
Ÿ 一个USB 3.0 / USB2.0主机设备
Ÿ 两个集成的GMAC,支持RGMII和RMII
Ÿ 5 x I2C / 16x PWM / 4x UART / Multi GPIO
【内存接口】
Ÿ DDR3 / LPDDR3 / DDR4 LPDDR4
Ÿ 支持的DDR容量从1 Gb到4 GB
Ÿ SPI NAND / Emmc / SDIO接口
Ÿ eMMC容量可支持到32 GB
【ON AR0230】
Ÿ 卓越的微光性能
Ÿ ON Semiconductor最新3.0um像素,具有双转换增益的DR-Pix™技术
Ÿ 全高清支持高达1080P 60帧每秒的优越视频性能
Ÿ 线性或高动态捕捉
Ÿ 可选自适应局部色调映射(ALTM)
Ÿ 像素或行扫描交错T1 / T2输出
Ÿ 支持外部机械快门
Ÿ 片上锁相环振荡器
Ÿ 集成基于位置的颜色和镜头阴影校正
Ÿ 从模式为精确帧率控制
Ÿ 立体 / 3D相机支持
Ÿ 数据引擎
Ÿ 数据接口:四通道串行高速像素接口(HiSPi)差分信号(SLVS和HiVCM)或并行输出
Ÿ 自动黑电平校准
Ÿ 高速可配置A、B模式切换
Ÿ 温度传感器
【ON AR0130】
Ÿ 卓越的低光性能,无论是在VGA模式和高清模式
Ÿ 卓越的近红外性能
Ÿ 高清视频(720p60)
Ÿ 片内AE和统计引擎
Ÿ 自动黑电平校准
Ÿ A、B模式切换
Ÿ 逐行扫描
Ÿ 支持2:1缩放
Ÿ 由片上锁相环(PLL)振荡器产生的内部主时钟。
Ÿ 并行输出