在数字化网络化飞速发展的今天,门禁技术也得到了迅猛的发展。生物认证技术由于其具有高可靠性、安全性、方便性等特点,逐渐受到社会的瞩目。传统的人脸图像识别系统依赖于较大型设备,速度较慢、实时性较差、价格昂贵。随着数字信号处理器dsp的飞速发展,以dsp为核心的硬件系统同样可以用来进行图像处理。随着dsp的运算速度和运算精度不断提高,片内的存储容量不断加大,系统功能、数据处理能力以及与外部设备的通信功能不断增强,人们完全可以脱离pc 机开发出基于dsp的图像处理系统。
本文利用dsp和实时嵌入式操作系统dsp/bios开发了基于人脸识别技术的门禁系统。系统利用摄像头获取人脸图像,利用dsp完成人脸图像的处理和特征提取以及识别,利用液晶显示器完成识别信息的显示,并通过串口与外部通信。
1 dsp/bios简介
dsp/bios是一种简易的实时嵌入式操作系统,主要面向实时调度与同步、主机与目标系统通讯以及实时监测等应用,具有实时操作系统的诸多功能,如任务的调度管理、任务问的同步和通讯、内存管理、实时时钟管理、中断服务管理、外设驱动程序管理等。dsp/bios由三个部分组成:dsp/bios实时内核与api、dsp/bios分析工具以及dsp~ios配置工具” 。
1.1 dsp/bios中的线程
dsp~ios内核通过在单一处理器上允许高优先级线程抢先低优先级线程的方式支持不同优先级的多种线程,并负责处理各线程之间的各种相互作用,包括通讯、同步等。dsp/bios支持四种线程:硬件中断(hwi)、软件中断(swi)、任务(tsk)、后台线程(idl)。它们的优先级依次从高到低。 dsp~ios用hwi模块来管理硬件中断,为dsp中的每个硬件中断配置了中断服务程序(isr)。硬件中断用来处理时间要求苛刻的关键任务,如系统时钟等。软件中断通过swi模块管理,用于处理一些对实时性要求较低的任务。任务通过tsk模块管理,后台线程的优先级最低,用于没有时间限制的处理,只有在其它线程不运行时,它才运行。
任务管理与软件中断的区别是,每个任务都有自己的堆栈,任务问支持同步和通讯,一个任务可以挂起以等待某一资源的释放,因此,特别适用于门禁系统的应用。本文中用到了两个任务:tskvideocapture与tskloopback,其中tskvideocapture是视频获取任务,tskloopback是视频处理和显示任务。task任务级的通讯主要使用scom(synchronized communication module)消息队列。scom消息是用户定义的一个数据结构,用于task之间交换信息。
1.2 dsp/bios程序开发
dsp/bios支持交互式的应用程序开发模式,开发人员可以用dsp/bios先为应用程序生成一个框架,在使用实际的算法之前给程序加上一个仿真的运算负荷来测试程序,看是否满足时序要求。开发步骤如下:① 用配置工具建立应用程序要用到的对象;②保存配置文件,系统会生成编泽和链接应用程序时需的库文件;③为应用程序编写一个框架,可以使用c、c++、汇编语言;④在ccs环境下编译并链接程序;⑤使用仿真器和dsp/bios分析工具来测试应用程序;⑥ 重复步骤① 到⑤ 直到程序运行正确;⑦硬件开发好后,修改配置文件以支持硬件,并进行测试。
1.3 cdb配置文件
cdb文件包含了以下几个部分内容:系统部分(system)、实时分析部分(instrumentation)、调度部分(scheduling)、同步部分(synchronization)、输入输出部分(input/output)、芯片支持库部分(csl)。dsp/bios配置工具采用可视化界面,如图l所示。
图l dsp~ios配置界面
具体地说,cdb文件的主要配置内容有以下几部分。系统部分:global settings体现系统所用处理器型号及其各种参数特性;mem体现系统的程序和代码的放置位置以及占用空间的大小。调度部分:tsk—task manager主要定义用户定义任务及系统后台线程所调用的子函数,任务的优先级以及其存放位置和堆栈大小的设置情况。输入输出部分:定义视频各个输入输出端口如何实现与片级支持库csl的链接,从而实现微驱动和参数传递。
2 门禁系统的硬件结构
本系统基于ti公司的tms320dm642设计硬件平台,因为dm642有丰富的外部设备接口,完全能够满足门禁系统的需要。dm642通过外部存储器接口(emif)访问片外存储器sdram和flash。sdram为4m x 64位的同步动态存储器接口,用于存储程序、数据和图像处理中间结果,配置在emif接口的ce0空间;fl ash为4m x8位的异步静态存储器接口,用来存储人脸的模板特征、固化程序、导入装载和配置信息,配置在dm642的emif的ce1子空间。此外,ce1子空问还分配给状态/控制寄存器、uart等资源使用。因此,flash的最大的可寻址范围为512k x 8位。为了访问到flash的所有地址空间,本系统采用分页技术来实现对flash的访问,即将整个4m x 8位的flash分成8个512×8位的页,而页地址则由位于cpld中的页地址寄存器提供。选用tvp5150视频解码芯片,通过i2c可编程总线进行控制,采用8位并行总线实现数据的传输。
系统将模拟pal视频信号转换为bt.656格式的ycbcr(4:2:2)模式的数字视频信号,选用saa7121视频编码芯片,将bt.656格式的数字视频信号转换为pal格式的视频输出。选用tl16c752b实现二路异步串口,每路异步串口占用8个8位存储单元。本系统可通过网络接口实现功能扩展。门禁系统的硬件结构如图2所示。
图2 门禁系统的硬件结构
加电后,系统完成初始化,存储在flash中的程序和数据被加载到sdram中。在无人进门时,系统进行视频的采集和回放。当有人要进门时,系统通过串口给dsp一个中断信号,tvp5150视频解码芯片将对摄像头采集的视频数据进行解码,实现a/d转换,并给出llc2(采集时钟)、vref(场同步参考信号)、href(行同步参考信号)等采集参考控制信号,并将解码得到的ycbcr(4:2:2)模式的人脸图像存储在sdram中。之后,dsp对存储在sdram中的图像进行人脸检测和特征提取,将提取的特征与存储在flash中的模板数据作对比,最后将识别结果显示在液晶屏上,并通过多通道缓冲串口给门锁控制器发送开门信号或报警信号。
3 基于dsp/b10s的软件程序设计实现
本系统基于dsp/bios架构开发实现,系统结构分为三部分:输入控制部分、视频处理部分和输出部分。输入控制部分通过串口中断来响应外部的输入;视频处理部分主要完成视频流中图像的人脸检测、特征提取和人脸识别并将结果输出;输出部分主要是完成识别结果的显示并通过串口向门锁控制器发送信号。整个 dsp上的软件由二个任务线程组成:tskvideo—capture线程从视频输入端口读取数据;tskloopback线程完成视频流中图像的处理并将结果输出。二者之间靠scom消息队列进行同步和消息传递 。系统流程如图3所示。
当系统上电启动后,首先对系统进行初始化。初始化完成后,系统进行视频图像的采集和回放,gio/fvid(项层类驱动)控制tvp5150通过edma 将视频数据ycbcr(4:2:2)传递到视频输入任务请求的缓冲i~capframebuf中。当系统接收到串el中断信号后,视频处理任务通过 scom通讯从capframebuf中将数据取走,进行人脸检测、特征提取和人脸识别等一系列操作,并将结果输出。
本系统软件通过在ycbcr色彩空间中建立人脸肤色模型对人脸进行粗检测。实验发现当cb取值范围为[90,135】,cr取值范围为[120,168] 时,系统对肤色检测效果最好。人脸粗检测后再通过数学形态学中的开运算去除孤立的小点、毛刺和小桥(即连通两块区域的小点),最后通过对肤色中连通域的标记和统计去除非人脸区域,得到人脸图像 。在提取人脸特征之前对人脸图像进行灰度拉伸和归一化,使用离散余弦变换提取人脸特征,提取的人脸特征可以进行两种操作:作为模板存入人脸特征库或进行人脸识别。系统通过计算人脸特征,再与模板库中的人脸特征进行相似度比对和识别。
4 结束语
本文将dm642芯片结合视频编解码芯片和实时嵌入式操作系统dsp/bios应用于门禁系统,实现了完全脱离pc机的图像采集、处理和结果显示系统。算法运算速度快,实时性高。系统可以通过串口或网络接口实现人机交互,并具有良好的可扩展性和独立性。
智能家电哪家强,非莱克立式吸尘器M12MAX莫属
宠物口粮生产线如何实现远程监控智能运维
一次消谐器发热的原因是什么
采用TMP275温度传感器实现对电机设备温度实时监测
极狐GitLab被授予2022开放原子开源基金会黄金捐赠人
基于DSP/B10S和人脸识别技术的门禁系统设计
Lantronix推出新型EDS-MD多端口医疗设备服务器
从源头深化绿色低碳转型,西门子可持续发展专项支持融资项目发布
中环股份上半年营业总收入达64.61亿元 8英寸区熔硅片已实现量产
导热结构胶与导热凝胶的区别是什么
一文简析使用符合ASIL标准的IP加速汽车安全认证
华为商城正式开启了华为P30 Pro的限量套装预约
用源表测试软件如何输出I-V曲线、I-P曲线、恒定输出
长沙高新区集成电路项目主体厂房预计9月实现封顶 明年11月实现整线试生产
索尼PS5官宣 2020年圣诞季发布
关于python中非常实用的一个图像处理库 2
简述分组交换的特点
虹软 PhotoStudio AI 智能商拍摄影软件大师完成首轮定向用户内测
汽车零部件气密性测试重要性
家庭电路维修方法