基于AT91RM9200的嵌入式网络摄像机设计浅析

随着通信技术和网络技术的迅猛发展,通过网络远程实时监控重要场所已倍受人们关注,网络摄像机在此背景下产生,并成为人们关注的焦点。网络摄像机是一种结合传统摄像机与网络技术所产生的新一代摄像机,它可以将影像通过网络传至地球另一端,且远端的浏览者不需用任何专业软件,只要标准的网络浏览器(如“microsoft ie或netscape)即可监视其影像。网络摄像机要将高清晰度的实时视频信息通过互联网传送到监控终端,因其信息量巨大,所以必须压缩。通常人们采用dsp与mpeg-4算法相结合的方案来实现,不仅编程工作量大,而且产品的成本高。本文所介绍的网络摄像机采用专用的mpeg-4压缩芯片、以嵌入式linux作为操作系统,不仅开发便捷、成本低廉,而且实时性好,适用范围广。
2. 系统总体设计
系统总体设计包括硬件设计和软件设计两部分。这两部分工作是互相联系的,需要交叉进行,系统设计是开发人员进行的工作,他们将系统设计阶段得到的目标系统的逻辑模型转换为目标系统的物理模型,该阶段得到工作成果――系统设计说明书是下一个阶段系统实施的工作依据。硬件设计模块主要包括微控制器模块、微控制器是将微型计算机的主要部分集成在一个芯片上的单芯片微型计算机。微控制器诞生于20世纪70年代中期,经过20多年的发展,其成本越来越低,而性能越来越强大,这使其应用已经无处不在,遍及各个领域。例如电机控制、条码阅读器/扫描器、消费类电子、游戏设备、电话、hvac、楼宇安全与门禁控制、工业控制与自动化和白色家电(洗衣机、微波炉)等。压缩编码模块、网络接口模块和相机控制模块四部分。微控制器模块主要由主控芯片、dataflash和sdram(1)组成。其中,主控芯片是整个控制系统的核心,它负责整个系统的调度工作。dataflash里固化了嵌入式linux内核、及其文件系统、应用软件和系统配置文件。压缩编码模块由视频数据采集芯片、mpeg-4压缩编码芯片、sdram(2)组成,负责将视频流转化为mpeg-4码流。网络接口模块主要是配合主控芯片传送mpeg-4码流。相机的控制模块主要由串口芯片组成,其完成转发控制相机命令的功能。当系统启动时,微控制器通spi(serial peripheral interface,串行外设接口)将linux内核转入sdram(1)中,系统从sdram(1)中启动。系统启动后,微控制器通过hpi(host peripherial interface, 主机接口)控制mpeg-4编码模块。统结构如图1所示。
图1 系统结构框图
软件设计部分主要包括嵌入式linux移植、mpeg-4压缩编码模块、cgi控制程序和mpeg-4解码程序四部分。嵌入式linux系统存放到由at91rm9200控制的dataflash里,它负责整个系统软件的调度工作。mpeg-4压缩编码模块主要负责模拟视频流的采集,并将数字视频流压缩为mpeg-4数据流。cgi控制程序主要负责对摄像机的控制和对mpeg-4视频流的相关设置。简称cgi.在物理上是一段程序,运行在服务器上,提供同客户端 html页面的接口。这样说大概还不好理解。那么我们看一个实际例子: 现在的个人主页上大部分都有一个留言本。留言本的工作是这样的:先由用户在客户端输入一些信息,如名字之类的东西。接着用户按一下”留言“(到目前为止工作都在客户端),浏览器把这些信息传送到服务器的cgi目录下特定的cgi程序中,于是cgi程序在服务器上按照预定的方法进行处理。在本例中就是把用户提交的信息存入指定的文件中。然后cgi程序给客户端发送一个信息,表示请求的任务已经结束。此时用户在浏览器里将看到”留言结束“的字样。整个过程结束。mpeg-4解码程序主要负责对通过网络得到的mpeg-4数据流的解码工作。
3. 硬件设计
3.1微控制器模块
微控制器是本系统的核心部件,选用的是atmel公司的at91rm9200.它是一款基于arm920t核的32位微控制器。其主频为180mhz,处理速度快,功能强,性价比高,能很好满足嵌入式linux系统的需求。它在系统中的主要作用是在系统上电时配置其他芯片的功能寄存器,在正常工作状态下调度控制整个系统工作,通过片内以太网控制器控制物理层芯片发送码流。
at91rm9200通过片内的spi总线和sdram控制器实现对外围dataflash和sdram的控制,利用片内的usart实现对串口芯片的控制,通过片内的以太网控制器对片外网络芯片进行控制。其控制原理图如图2所示。
图2 控制原理图
3.2压缩编码模块
压缩编码模块包括模拟视频采集模块和mpeg-4压缩模块。视频采集芯片采用ti公司的tvp5150,数据压缩芯片采用映佳公司的mpg440.tvp5150输入端可是两种混合视频信号也可是s-video端子的视频信号,支持ntsc、pal、secam等3种制式,其输出的数据色彩格式可以为8bit 4:2:2数字信号或者8bit同步itu-r bt.656数字信号。mpg440芯片具有符合工业标准的16b/32b的双向主机接口,分别用来与视频采集芯片和微控制器芯片通信。同时,具有移动侦测、防伪水印、动态调整ip画格比率、动态调整图像质量等特性,支持d1、vga、cif、qvga、qci等五种分辨率模式。微压缩编码模块的硬件设计原理如图3所示。
图3 压缩编码电路
tvp5150的ai模拟输入口与模拟摄像头输出端连接,向视频处理芯片传送模拟视频信号。模拟信号经过采样处理之后通过yout0~yout7引脚送到mpg440,采样数据在pclk的上升沿有效,mpg440的video_clk在收到pclk的上升沿时获得yout的信号。tvp5150分场同步脉冲和行同步脉冲,分别对应其输出端vsync、hsync.mpg440正是根据与之相连的vsync和hsync信号线来实现图像的场同步和行同步操作。mpg440的视频输入数据线data_tv0~data_tv7与tvp5150的yout0~yout7相连。mpg440在接收数据的同时,将其得到的数据流传送给mpeg-4压缩编码单元,编码后的mpeg-4数据流暂存到sdram(2)中。mpg440片内pdma控制器根据配置寄存器的设置准确发起对sdram(2)访问,同时将得到的数据流输送往hpi(主机总线接口,host peripherial interface),以等待at91rm9200通过dma通道将数据发送到网络。
mpg440通过hpi与at91rm9200通信,at91rm9200将mpg440的寄存器、存储空间等资源作为其本身内存寻址访问。mpg440由at91rm9200选通线ncs4来选通,其在at91rm9200寻址空间中的地址段为0x50000000到0x5fffffff.通过对mpg440一系列寄存器的设置,可以访问mpg440系统存储空间。mpg440中断信号rsc_int0从通用i/o引脚的pb29输入,当缓冲器填满时,rsc_int0引脚置低提示at91rm9200通过dma通道提取mpeg-4数据流。编码后视频数据读取过程和mpg440与主机通信过程由at91rm9200读信号cfrd和写信号cfwe控制。
3.3网络模块
网络模块硬件设计原理如图4所示。
图4 网络模块电路
at91rm9200的在片以太网卡端口和网络物理层芯片dm9161e的mii接口通信。发送数据时,首先置发送使能信号etxen有效。数据发送端etx0~etx1与dm9161的etxo~etx1引脚对应连接,作为数据发送通道,以dm9161e的时钟信号ref_clk发送数据。数据接收端erx 0~erx1与dm9161e的rxdo~rxd1引脚对应连接,作为数据接收通道。管理时钟信号emdc和管理数据输入输出信号emdio用来芯片控制参数的写入和读取。dm9161e的mdintr端用来产生中断信号。
片内以太网卡通过dma通道进行数据的发送,不影响at91rm9200的正常运行。首先正确设置传送控制寄存器和传送地址寄存器的传送数据块字节数、数据块存储首地址等参数,随后依次从指定数据存储区地址读取1024b数据,送入内部发送缓冲器中,由mac对数据进行封装发送,同时记录已传送字节数,直到数据块发送完毕。当发送完一组数据后,发出dma中断请求,由at91rm9200进行相应的处理。整个网络子系统电路由at91rm9200控制和调度。
4.软件设计
嵌入式linux系统主要由四个部分组成引导内核启动的文件(bootloader)、linux内核文件(kernel)、虚拟磁盘文件(ramdisk)、用户空间文件(user)。它们分别被放在dataflash内的四个分区模块中。根据不同模块的具体功能采用不同的文件系统:bootloader、kernel、ramdisk,移植完成后不需要动态改变,使用较节省空间的romfs只读文件系统;user模块内放置一些可以动态更新的配置文件等,需要进行较多的读写操作,所以使用支持动态擦写保存的jffs2文件系统。inux做嵌入式的优势,首先,linux是开放源代码的,不存在黑箱技术,遍布全球的众多linux爱好者又是linux开发者的强大技术支持;其次,linux的内核小、效率高,内核的更新速度很快,linux是可以定制的,其系统内核最小只有约134kb.第三,linux是免费的os,在价格上极具竞争力。 linux还有着嵌入式操作系统所需要的很多特色,突出的就是linux适应于多种cpu和多种硬件平台,是一个跨平台的系统。到目前为止,它可以支持二三十种cpu.而且性能稳定,裁剪性很好,开发和使用都很容易。
linux移植技术已经成熟,本文不作详细的阐述。下文主要介绍mpeg-4压缩编码模块和cgi模块的程序设计。
4.1 mpeg-4压缩编码模块程序设计
该模块主要完成mpg440和ti5150相关寄存器的配置,并保证mpeg-4码流的正常输出。当嵌入式linux系统启动后,首先配置mpg440的相关寄存器,其初始化完成后,通过i2c总线对tvp5150进行初始化配置。当系统开始压缩编码时,mpeg-4码流接收存储程序由mpeg-440的数据流缓冲器标志信号控制。
mpeg-4压缩编码模块程序流程如图4所示。
图5 mpeg-4压缩编码模块程序流程图
4.2 cgi程序模块设计
cgi(common gateway interface)是外部扩展应用程序与www服务器交互的一个标准接口。本系统cgi的工作过程:在pc机端的ie浏览器中输入网络摄像机ip地址,嵌入式网络服务器根据请求,将相应的控制页面反馈给ie浏览器,用户填写表单,然后提交,cgi程序提取表单的信息,根据不同信息来分别处理相应的事件,如调节mpeg-4相关属性、相机的相关操作等。cgi控制原理如图5所示。
图6 cgi控制原理图
cgi模块的设计主要包括三部分:嵌入式web服务器的配置、html页面的编写、cgi程序的设计。
嵌入式web服务器采用的是apache,其配置是以配置文件的形式提供,放在ramdisk中/etc/httpd/conf/目录下。其配置主要涉及以下三个方面:
1配置根文件的路径:”documentroot /home/httpd/html“,html页面必须放到此目录下。
2配置cgi外部程序所放的路径:”scriptalias /cgi-bin/ home/httpd/cgi-bin/“。
3配置环境变量:”seteenv d_library_path=/lib:/usr/local/lib:/usr/lib“,该变量将会被传送到 cgi 脚本和ssi页面,以保证cgi程序能正确找到所依赖的库。
网页编写采用html与shtml相结合的方式。html的解析速度较快,shtml可以在普通网页中嵌入外部cgi程序,通过这种方式将系统的默认配置反馈给客户端。
cgi程序采用的是c语言和shell脚本相结合的方式,c语言是一种计算机程序设计语言。它既具有高级语言的特点,又具有汇编语言的特点。它可以作为工作系统设计语言,编写系统应用程序,也可以作为应用程序设计语言,编写不依赖计算机硬件的应用程序。因此,它的应用范围广泛,不仅仅是在软件开发上,而且各类科研都需要用到c语言,具体应用比如单片机以及嵌入式系统开发。 具体编写过程,与通常的了linux下编程相同。
4.3 mpeg-4解码程序
mpeg4于1998 年11 月公布,原预计1999 年1月投入使用的国际标准mpeg4不仅是针对一定比特率下的视频、音频编码,更加注重多媒体系统的交互性和灵活性。mpeg专家组的专家们正在为mpeg-4的制定努力工作。mpeg-4标准主要应用于视像电话(video phone),视像电子邮件(video email)和电子新闻(electronic news)等,其传输速率要求较低,在4800-64000bits/sec之间,分辨率为176x144.mpeg-4利用很窄的带宽,通过帧重建技术,压缩和传输数据,以求以最少的数据获得最佳的图像质量。与mpeg-1和mpeg-2相比,mpeg-4的特点是其更适于交互av服务以及远程监控。mpeg-4是第一个使你由被动变为主动(不再只是观看,允许你加入其中,即有交互性)的动态图像标准,它的另一个特点是其综合性。从根源上说,mpeg-4试图将自然物体与人造物体相溶合(视觉效果意义上的)。mpeg-4的设计目标还有更广的适应性和更灵活的可扩展性。映佳科技已提供供二次开发的mpeg-4解码插件ocx,ocx在pc机端注册后,ocx函数可方便地被网页调用,从而实现在pc机端观看实时图像。
5 总结
本文介绍了一种利用at91rm9200、tvp5150,mpg440和dm9161e等芯片设计的嵌入式网络摄像机。经测试,该系统稳定、可靠、实时性好、图像质量出色。该产品可广泛应用于交通监控和工业监控以及家庭监控、视频会议话等众多领域。

谷歌光纤初体验:人与互联网距离完全消失
使用LabVIEW 实现物体识别、图像分割、文字识别、人脸识别等深度视觉
物联网产品设计的未来发展方向
机器视觉在物流分拣自动化系统中的应用简析
科瑞技术针对锂电市场的策略是坚持7字箴言:“有所为,有所不为”
基于AT91RM9200的嵌入式网络摄像机设计浅析
PCIe核心技术CRC基础知识
爱立信预计到年底全球5G用户数将达2.2 亿
北方供暖即将开始!传感器有哪些新挑战?
详解Drive.ai与自动驾驶服务落地方案!
浅析光伏系统防雷注意事项
MAX15112 电流模式降压转换器
高通表示如果没有高通iPhone将不可能存在
NZXT发布《魔兽世界》定制机箱 售价69.99美元起
网线测试仪的G灯是干什么用的_网线测试仪g灯不亮原因
北京法院正在用区块链进行存证可让当事人更加诚信
伺服驱动器的常见接线方法
全球工厂的格局会被物联网技术影响?
Agilent N6751A直流电源50w,50v
数控铣床伺服系统常见故障