人工智能技术在过去十年中获得了快速的进步,人工智能技术也在现实世界中得到了广泛的应用。通过人工智能技术检测房间内、公共空间、危险区域等是否有“人”的存在,有着重要的实际应用价值,而在本地实现推理又是“人形检测”应用非常重要的需求。本地推理的优点包括数据隐私的保护、低延迟、低带宽需求、低成本以及低功耗等方面。

Aizip基于STM32F469 芯片开发的视觉唤醒(VWW)人形检测模型,使用了业内最新进展的极小深度神经网络技术开发,使得该模型可以在ARM Cortex-M4核芯片上运行,而级联深层神经网络的使用又能让该模型输出很高的精度。该模型可以在较低分辨率的图像中检测是否有“人”的存在,在Coco数据集上的测试准确率可以达到89%,在实际测试环境准确率达到95%以上。检测帧率可以达到每秒约4帧。模型图像输入分辨率96x96像素,资源占用277KB。

Aizip


同现有ST芯片上人形检测AI模型的性能对比:

From

Hardware

Model Size
 (KB)

Peak RAM Size
 (KB)

MACs
(M)

Frame rate

Input
Resolution

Dataset

Accuracy

Others

STM32H747

M7/M4

214

37.19

7.16

/

96x96

Person20

87%

Aizip-1

STM32F469

M4

277

32.77

5.88

3~4/s

64x64

VWW

Coco

87%

Aizip-2

STM32F469

M4

277

32.77

13.23

3~4/s

96x96

VWW

Coco

89%

Aizip-2

STM32F469

M4

277

32.77

13.23

3~4/s

96x96

Person20

95%


在获取原始摄像头的图片数据后,首先将图片压缩到模型需要的图片尺寸(96x96),然后对缩小后的图片像素进行归一化处理,以及在归一化后对数据继续量化。将最终量化后的数据,输入AI模型进行推理。再对推理完成后的结果进行去量化处理,最终得到有、无目标的分类信息。


框图

STM32F4

网址:www.aizip.ai
邮箱:info@aizip.ai

除本网站中包含的使用条款、ST 销售条款和条件及隐私政策外,以下条款和条件同样适用于所有意法半导体合作伙伴计划。

虽然意法半导体尽力在网站中提供准确信息,但意法半导体对信息的准确性不承担任何责任。意法半导体在本网站上提供的所有信息均“按现状”提供,其中包含所有错误,无任何明示、暗示或法定保证。意法半导体可能随时更改或者终止(停产)其合作伙伴计划、其产品或服务,恕不另行通知。所提及的任何非意法半导体产品或服务仅供参考,并不构成意法半导体的认可。本网站所用“合作伙伴”一词从任何方面均不表示或暗示意法半导体与任何其他公司之间存在任何合伙或代理关系,意法半导体与任何其他公司之间存在任何类型的法律或信托关系,或者任何其他公司是意法半导体的子公司。意法半导体合作伙伴计划中的合作伙伴就其产品和/或服务及意法半导体器件的相关技术的购买和使用提供单独的许可。请直接联系相应合作伙伴,获取此类合作伙伴产品和/或服务的许可条款、价格、支持以及任何其他信息。此类产品和/或服务的条款和条件可能因合作伙伴而异,并且由此类合作伙伴直接且独立发放许可。意法半导体对合作伙伴销售或提供的产品和服务的适用性不作任何表述或保证,意法半导体特此声明,对于合作伙伴提供的任何产品或服务相关的明示、暗示或法定的所有保证和条件均不承担任何责任,包括但不限于任何适销性、特定用途适用性、所有权、非侵权性或由交易、使用或贸易惯例引起的任何保证和条件。对于因参与或信赖合作计划,使用或无法使用或无法从合作伙伴处购买产品和/或服务,或者因此等产品和服务的性能,您与合作伙伴的关系,您使用或无法使用或无法依赖意法半导体门户或意法半导体于其中提供的任何信息,而无论通过何种方式产生或者与此等情形相关的任何直接、间接、偶然、特殊、惩戒性、后果性或惩罚性损害或包括但不限于使用、利润或收入损失的任何损害,无论以任何方式导致,也无论因合同、严格责任或侵权(包括疏忽或其他)等任何责任理论所引起,同时即便在就可能出现此等损害予以提醒的,意法半导体在任何情况下均不承担任何责任。意法半导体提供的第三方网站链接不受意法半导体的控制,对于所链网站或所链网站中的任何链接、此类网站的任何变更或更新的任何内容、材料、意见、建议或声明,或者任何此类内容和材料的准确性或可靠性,意法半导体均不承担任何负责。对于任何所链接网站的以任何方式(包括但不限于网络广播或音频传输)传输的内容,意法半导体均不承担任何责任。用户访问任何链接的网站或链接网站中所含的任何链接的,应自行承担风险。意法半导体仅为方便起见向您提供这些链接,添加任何链接均不表示意法半导体对第三方网站有任何保证(暗示、明示或其他方式)或任何认可。


微信扫一扫