2018 年 5 月,瑞芯微推出了基于 RK3399 芯片平台的深度学习目标检测技术方案,具体介绍如下:
方案优势:
- 高性能芯片基础:RK3399 是一款低功耗、高性能的应用处理器芯片,采用 big.little 架构,具有独立的 neon 协同处理器的双核 cortex-a72 及四核 cortex-a53 组合架构,主频最高可达 1.8 ghz,具备超强的计算性能、2d/3d 图形处理能力和全高清视频编解码能力,能够为目标检测提供强大的算力支持,可完美支持 4k x 2k @ 60 fps 超清解码和 4k x 2k hdmi 超清输出.
- 高检测速率:该方案对 MobileNet SSD 网络进行了专项优化,使高精度的 MobileNet SSD300 1.0 运行帧率达到 8 帧以上,精度略低而速度更快的 MobileNet SSD300 0.75 的运行帧率超过 11 帧,达到了准实时的运行速度,将目标检测这一基础 AI 技术在嵌入式端带向实用,能够满足众多实际应用场景对实时性的要求.
- 良好的系统兼容性:可同时支持 Android 及 Linux 系统,提升了使用目标检测技术的 AI 产品的用户体验,并且大幅缩短了研发周期,帮助更多的高端 AI 智能产品尽早面市,使得该方案能够广泛应用于多种不同类型的设备和项目中.
- 支持主流训练框架:支持 Google 的 TensorFlow Object Detection 训练导出的 TensorFlow Lite 模型,而目前已有大量基于 TensorFlow Object Detection 的使用案例,涵盖从面部到物体的各类检测,是工业上最方便使用、最普及的目标检测框架之一,这为开发者提供了丰富的资源和便利,降低了开发难度和成本.
应用领域:该目标检测方案可广泛应用在监控、智能交通、新零售、自然交互等领域,为这些领域中的 AI 应用提供了基础技术支持,例如在监控领域可以实现对人员、车辆等目标的实时检测和识别,在智能交通中可用于交通流量监测、违章行为识别等,在新零售场景下可进行顾客行为分析、商品识别等.