0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

【EsDA应用】10分钟快速实现人脸识别

ZLG致远电子 2023-06-08 15:01 次阅读

人脸识别是一种高安全性的生物识别技术,在安防、身份验证等领域被广泛应用。本文主要介绍如何基于EsDA设计的人脸特征值提取节点和特征值比对节点,快速实现人脸识别功能。

44a1a782-00dc-11ee-ba01-dac502259ad0.jpg  简介

人脸识别是一种高安全性的生物识别技术,在安防、身份验证等领域被广泛应用。本文在《【EsDA应用】5分钟快速实现图像人脸检测》的基础上,使用M6G2C核心板,简单介绍如何基于EsDA设计的人脸特征值提取节点和特征值比对节点,快速实现人脸特征值提取和比对识别。


44bac488-00dc-11ee-ba01-dac502259ad0.jpg 前期准备

若是刚开始接触EsDA,可先阅读EsDA其他系列文章,从零开始搭建环境和掌握基本开发流程,已有基础的可以跳过:

EsDAMPC-ZC1入门(一)——软件安装

EsDAMPC-ZC1入门(二)——LED控制

【EsDA应用】5分钟快速实现摄像头图像采集

【EsDA应用】5分钟快速实现图像人脸检测

1. 硬件准备

1.1 准备一个摄像头,这里我们以OV7725摄像头为例,搭配转接板使用。44d63650-00dc-11ee-ba01-dac502259ad0.jpg1.2 准备一块LCD显示屏(非必须)。1.3 准备一张SD卡,用于存放人脸模型。1.4 准备一块M6G2C核心板和EPC-6G2C-L评估板,并按照下图所示连接好硬件。其中,eth0网口用于下载流图,并连接LCD显示屏接口、电源,以及将OV7725摄像头通过转接板连接到开发板背面的CSI接口上。

4501dd28-00dc-11ee-ba01-dac502259ad0.png

2. 其它准备

将人脸检测和特征值提取相关的模型参数文件存放到SD卡中。

4561d250-00dc-11ee-ba01-dac502259ad0.png

457d154c-00dc-11ee-ba01-dac502259ad0.png


44bac488-00dc-11ee-ba01-dac502259ad0.jpg  节点介绍

这里我们需要使用到摄像头、图像格式转换以及人脸检测、特征值提取、特征值比对相关的AWFlow节点,包括在《【EsDA应用】5分钟快速实现摄像头图像采集》中介绍的camera_video节点、camera配置节点、lcd_display节点,在《【EsDA应用】5分钟快速实现图像人脸检测》中介绍的image_format_convert转换节点、face_detection人脸检测节点,以及本文介绍的用于人脸特征值提取的face_character_extract节点和用于特征值比对的face_character_compare节点。

1. face_character_extract节点

face_character_extract是人脸的特征值提取节点,该节点对输入的人脸图像数据进行特征值提取,并输出提取的特征值信息。后级节点可以将这个特征值进行存储,也可以与已有的特征值信息进行比对和匹配识别。

1.1属性

45af93aa-00dc-11ee-ba01-dac502259ad0.png

  • 名称:节点的名称;
  • 显示名称:节点在画布中显示的名称;
  • 模型和参数路径:特征值提取相关的模型和参数文件的路径。

1.2输入

image:需要进行特征值提取的人脸图像数据缓冲区,一般由face_detection检测节点提供输入,face_detection检测到图像中存在人脸时,才将数据输入到这里进行特征值提取(通常这正是我们想要的)。

1.3输出

  • character:人脸的特征值。人脸信息一般都会提取成一段特定大小的特征值,方便我们进行存储(录入)和比对(识别)。

2. face_character_compare节点face_character_compare是人脸的特征值比对节点,该节点一般由face_character_extract节点提供特征值输入,并从文件/数据库中获取已经录入信息的特征值集合。

2.1属性

45c56df6-00dc-11ee-ba01-dac502259ad0.png

比对阈值:比对阈值是一个0.1~0.9范围内的数字,数字越大,对特征值的匹配程度要求就越高,识别的准确度也越高;

2.2输入

character:待比对的人脸特征值,一般由face_character_extract节点提供特征值输入;

character_target:比对的目标特征值集合,一般是由我们已经录入/注册的特征值文件/数据库提供;

target_num:目标特征值集合的特征值数量。

2.3输出

result:比对结果,如果输入中的character与character_target中的某一个匹配成功的话,输出1;都不匹配则输出0;

id:匹配成功的话,输出第一个匹配的特征值在特征值集合character_target中的序号,匹配失败输出-1。


44bac488-00dc-11ee-ba01-dac502259ad0.jpg  业务处理

本应用主要实现如下功能:

采集摄像头图像,并在LCD显示屏上进行显示(显示可选);

将摄像头输出的原始数据进行格式转换后,输入到face_detection节点中进行人脸检测;

将检测结果输入到face_character_extract节点提取特征值;

通过face_character_compare节点进行特征值比对识别;

注册特征值,这里我们为了方便演示,只是简单地通过face_data_write节点将特征值保存到文件中;

通过GPIO输入来控制特征值录入。

具体实现如下:

1. 添加节点并连线

首先,我们添加流图左上角的部分,主要完成图像的输入和人脸的检测;左下部分我们简单地通过一个IO输入来控制是否将特征值进行注册;然后,添加一个特征值提取节点;右下部分主要完成两个功能,分别是特征值的注册,以及特征值的比对识别。

45f8d330-00dc-11ee-ba01-dac502259ad0.png2. 配置节点2.1 图像输入和人脸检测本应用左上部分的六个节点主要完成图像采集输入和人脸的检测部分,其配置方式与【EsDA应用】5分钟快速实现图像人脸检测 4.2 配置节点部分完全相同,请参考之。462478be-00dc-11ee-ba01-dac502259ad0.png

2.2配置face_character_extract节点

使用人脸特征值提取节点需要将相关的模型文件存放到文件系统中,并在节点中指定模型存放的路径,这里我们存放到SD卡中,并指定路径。46442dd0-00dc-11ee-ba01-dac502259ad0.png

2.3face_character_compare节点

face_character_compare节点我们只需要指定比对阈值即可,这里我们设置为0.7。

466a6fa4-00dc-11ee-ba01-dac502259ad0.png

2.4face_data_write和face_data_read

这两个节点是为了方便演示。face_data_write节点简单地将特征值保存到文件,而face_data_read从文件中读取特征值,我们指定特征值文件路径即可。

467ebab8-00dc-11ee-ba01-dac502259ad0.png

469f2fa0-00dc-11ee-ba01-dac502259ad0.png

2.5gpio_in

为了方便演示,本应用简单地通过IO引脚的电平高低来控制是否录入人脸特征值。这里我们选择了EPC-6G2C-L评估板的RX8引脚,其对应编号为90,并将其设置为默认下拉模式,当输入高电平时进行人脸信息的录入。46bcb6ce-00dc-11ee-ba01-dac502259ad0.png

2.6fscript节点

其余的五个节点均为fscript节点,分别用于控制本应用的逻辑以及输出结果。demo流图中对这些fscript进行了编号,它们的内容分别如下:

2.6.1是否录入人脸信息

这个节点判断gpio_in输入的IO电平状态,通过设置全局标志位来控制是否进行人脸录入。这里我们设置当处于低电平状态时,进行人脸识别;而在输入高电平状态时,录入人脸信息。

if(msg.payload == 0) { global.face_recognition = 1 global.face_register = 0} else { print("......录入人脸信息中......") global.face_register = 1 global.face_recognition = 0}

2.6.2register_chk

register_chk判断前面设置的标志,当不需要录入人脸信息时(即IO处于低电平),通过aborted=1放弃向后面的节点传递数据;否则(此时IO处于高电平)设置一个命令给face_data_write节点。

if (global.face_register == 0) { aborted = 1;} else { msg.register_cmd = "register";}

2.6.3recognition_chk如果此时正在录入人脸信息(IO处于高电平),则通过aborted放弃后面的特征值比对环节。

if (global.face_recognition == 0) { aborted = 1;}

2.6.4录入人脸信息结果

我们在face_data_write节点后面添加打印信息,当face_data_write成功将特征值录入到文件中后,会告诉我们当前录入的是第几个人脸信息。

print("特征值注册成功,当前是第 " + msg.id + "个");

2.6.5特征值比对结果

打印特征值比对的结果,如果比对成功的话,打印出与之匹配的人脸ID。

print("特征值比对结果:" + msg.result);if(msg.result == 1) { print("特征值比对成功,匹配的人脸ID是:" + msg.id);} else { print("特征值比对失败,请先注册人脸信息");}

3. 下载验证因为M6G2C开发板是通过网口去下载流图,打开AWFlow Designer后,AWFlow Designer可以自动发现网络上的设备。选择当前设备M6G2C,然后点击下载运行即可。46d91b2a-00dc-11ee-ba01-dac502259ad0.png

3.1图像采集显示

流图下载完成后,通过LCD可以看到,我们已经成功从摄像头获取图像,并且成功在显示屏上显示。46f0b50a-00dc-11ee-ba01-dac502259ad0.png

3.2人脸检测、特征值提取比对

从打印信息中我们可以看到,坐标点已经被输出出来了,所以人脸检测功能是正常的。但是,一开始我们并没有录入任何人脸信息,因此特征值文件(即/flow/face_data.txt)并不存在,所以提示特征值比对失败。474f9bba-00dc-11ee-ba01-dac502259ad0.png

3.3特征值录入

当我们将RX8接入3.3V后,系统就进入了录入人脸信息的模式。此时我们可以通过摄像头录入人脸信息。

47662830-00dc-11ee-ba01-dac502259ad0.png

3.4特征值比对识别

特征值信息录入完毕后,我们可以将RX8引脚置低,使系统回到特征值比对识别模式。现在,我们就可以和已经录入的特征值集合比对成功了。而没有录入的人脸,依然无法通过识别。4780ace6-00dc-11ee-ba01-dac502259ad0.png

4. 扩展应用

本应用中,当特征值比对完成后,只是简单地输出比对的结果,这样我们可能感受不到它实际的用处:

print("特征值比对结果:" + msg.result);if(msg.result == 1) { print("特征值比对成功,匹配的人脸ID是:" + msg.id);} else { print("特征值比对失败,请先注册人脸信息");}

4.1应用1

但是,如果我们简单的改造一下,比如在识别成功后,发出一个高电平,或者一条指令,这样,一个基于人脸识别的门禁系统,是不是已经有了雏形了呢?

//以下内容仅供示例print("特征值比对结果:" + msg.result);if(msg.result == 1) { set(flow.gpio_out_ctl_door, 1); // 让控制门禁的IO输出1} else { set(flow.warn_led, blinking); // 比对失败,可以让告警灯闪烁等等}

4.2应用2又或者,当匹配到一个已经录入系统中的人脸时,将特征值ID和当前时间记录到数据库中,一个基于人脸识别的考勤系统,其核心功能是不是已经实现了呢?

print("特征值比对结果:" + msg.result);if(msg.result == 1) { var dt = date_time_create(); //获取当前时间 var str = "ID:" + msg.id + "\t" + dt.year + "-" + dt.month + "-" + dt.day + " " + dt.hour + ":" + dt.minute + ":" + dt.second + "\n" print(str); file_write_append("/flow/attendance_records.txt", str); //将ID和时间信息写入到考勤记录文件} else { print("Please try again"); //提示用户失败重试}

47963764-00dc-11ee-ba01-dac502259ad0.png

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 人脸识别
    +关注

    关注

    76

    文章

    4012

    浏览量

    81877
  • 识别
    +关注

    关注

    3

    文章

    173

    浏览量

    31966
收藏 人收藏

    评论

    相关推荐

    ElfBoard开源项目|百度智能云平台的人脸识别项目

    百度智能云平台的人脸识别项目,旨在利用其强大的人脸识别服务实现自动人脸
    的头像 发表于 12-24 10:54 124次阅读
    ElfBoard开源项目|百度智能云平台的<b class='flag-5'>人脸</b><b class='flag-5'>识别</b>项目

    安信可的本地人脸识别方案

    小伙伴们,安信可的本地人脸识别方案来啦,支持 Arduino 环境,搭载人脸识别算法,来看看产品介绍~(也可以点击下方视频,1分钟
    的头像 发表于 11-28 10:13 185次阅读
    安信可的本地<b class='flag-5'>人脸</b><b class='flag-5'>识别</b>方案

    EsDA,一站式嵌入式软件

    EsDA是一套面向工业智能物联领域的嵌入式系统设计自动化工具集,包含实时操作系统AWorksLP、低代码开发平台AWStudio、资源管理平台AXPI、跨平台GUI引擎AWTK和云服务平台ZWS
    的头像 发表于 09-15 08:10 285次阅读
    <b class='flag-5'>EsDA</b>,一站式嵌入式软件

    带阻滤波器在人脸识别中的应用

    人脸识别技术作为模式识别领域的重要课题,近年来在公共安全、门禁系统、数字娱乐等多个领域得到了广泛应用。其核心在于通过算法对人脸图像进行特征提取和匹配,以
    的头像 发表于 08-08 18:15 902次阅读

    人脸识别技术将应用在哪些领域

    应用最为广泛的领域之一。通过人脸识别技术,可以快速识别犯罪嫌疑人、失踪人员等,提高公安机关的办案效率。此外,人脸
    的头像 发表于 07-04 09:24 2720次阅读

    人脸识别技术的原理介绍

    人脸识别技术是一种基于人脸特征信息进行身份识别的生物识别技术。它通过分析人脸图像,提取
    的头像 发表于 07-04 09:22 1159次阅读

    如何设计人脸识别的神经网络

    人脸识别技术是一种基于人脸特征信息进行身份识别的技术,广泛应用于安全监控、身份认证、智能门禁等领域。神经网络是实现
    的头像 发表于 07-04 09:20 649次阅读

    人脸识别模型训练是什么意思

    的各个方面。 人脸识别技术概述 人脸识别技术是一种生物特征识别技术,通过分析人脸图像的特征,
    的头像 发表于 07-04 09:16 586次阅读

    人脸检测和人脸识别的区别是什么

    检测和人脸识别的区别。 定义 人脸检测是指在图像或视频中快速准确地找到人脸的位置,并将其从背景中分离出来的技术。
    的头像 发表于 07-03 14:49 1199次阅读

    人脸识别门禁方案:轻松实现刷脸开门、闸机及考勤管理

    和密码等方式,实现无接触、高效率的出入控制。刷脸开门的实现人脸捕获与跟踪人脸识别门禁系统首先需要对进入者的面部进行捕获,并自动地将其保存。
    的头像 发表于 06-25 15:57 1484次阅读
    <b class='flag-5'>人脸</b><b class='flag-5'>识别</b>门禁方案:轻松<b class='flag-5'>实现</b>刷脸开门、闸机及考勤管理

    ESD管 AZ5825-01F型号ESDA05CPX参数对比

    ESD管 AZ5825-01F型号ESDA05CPX参数对比
    的头像 发表于 05-11 08:03 872次阅读
    <b class='flag-5'>ESD</b>管 AZ5825-01F型号<b class='flag-5'>ESDA</b>05CPX参数对比

    岚图发布“琥珀电池”,续航达900km,10分钟充电即可满足450km续航 

    琥珀电池基于800V平台研发,具备5C超快速充电性能,能实现10分钟内为车辆补充450公里续航里程。此外,该电池在-10℃至40℃的宽泛温度
    的头像 发表于 04-24 17:38 1378次阅读

    人脸识别终端 10人脸

    终端人脸识别
    深圳市远景达物联网技术有限公司
    发布于 :2024年04月22日 16:01:46

    人脸识别技术的原理是什么 人脸识别技术的特点有哪些

    人脸识别技术的原理 人脸识别技术是一种通过计算机以图像或视频为输入,识别、检测、跟踪和分析人脸
    的头像 发表于 02-18 13:52 1888次阅读

    如何基于EsDA开发套件快速使用射频读卡器模块

    简介无线射频读写卡技术是一种基于无线通信的身份识别技术,由读写器和卡片组成,读写器可以通过无线射频信号,实现与卡片之间的数据传输与操作。本文将基于EsDA开发平台,
    的头像 发表于 01-11 08:24 705次阅读
    如何基于<b class='flag-5'>EsDA</b>开发套件<b class='flag-5'>快速</b>使用射频读卡器模块