利用TMS320 DM355监控服务器设计方案
利用tms320 dm355监控服务器设计方案
本设计以ti公司davinci系列芯片作为硬件平台，结合嵌入式linux操作系统，实现了基于tms320dm355的视频服务器。本文阐述了各硬件模块的选型与功能，以及服务器的软件架构与实现。同时给出了整个网络视频监控系统的框架，包括视频服务器、网络传输链路及客户监控端。本设计采用mpeg4视频编码标准，由dm355内部的mpeg/jpeg协处理器完成。实验表明，在带宽充足的条件下，可实现实时监控。
1．引言
多媒体监控一直是人们关注的应用技术热点之一，它以直观、方便、信息内容丰富等特点被广泛应用于许多场合。而随着嵌入式系统和视频压缩技术的不断发展，基于嵌入式技术的视频监控系统也得到了快速的发展与应用。其通过把摄像机输出的模拟信号转化为数字信号，再经过嵌入式系统编码和传输。在客户端，通过安装监控软件，或者直接通过web进行监控。采用嵌入式linux操作系统的视频监控系统具备编码处理、网络通信、自动控制等强大功能，直接支持网络传输和网络管理，使得监控范围达到了一定的广度。
此外，嵌入式处理器的发展也日新月异，有专注于控制的arm系列处理器，擅长快速计算的dsp处理器，还有一些针对性非常强的处理器，可以实现硬件视频编解码等。而德州仪器（ti）新近推出的针对便携式高清（hd）视频产品市场的达芬奇（davinci）处理器tms320dm355处理器，结合了它们的特长。其内部具有一个arm9ej-s的主处理器，负责整个系统的控制，同时也集成了一个mpeg/jpeg协处理器，专注于mpeg/jpeg算法的实现。其内部的视频处理子系统（vpss）及其它外设可方便快速的实现视频的采集、预处理、显示、网络传输等功能。同时，其低廉的价格也为用户降低了成本。而本设计即选用此处理器。
2．视频监控系统整体框架
本嵌入式网络视频监控系统由视频服务器、网络传输链路、客户监控端等3部分组成。视频服务器负责音视频等数据的采集、压缩处理等，网络传输链路将视频服务器压缩和发送的多媒体数据进行传输，而客户端监控部分接收音视频数据，进行解压、显示以及对视频服务器的控制等。整个系统的示意图如图1所示。
图1视频监控系统示意图
2.1．视频服务器
视频服务器采用德州仪器（ti）新近推出的达芬奇(davinci)系列处理器tms320dm355作为主处理器，接收ccd摄像头采集的视频信号，进行预处理及mpeg4压缩，然后将压缩后的数据通过网络传输。同时，接收上位机发送的命令，解析并且执行。每个设备都具有唯一的id，当客户端进行连接时，服务器会首先检查id号是否匹配，以防止恶意连接。此外，当视频服务器运行异常时，其内部的守护进程会进行监视，适当的时候进行重启。
2.2．网络传输链路
网络传输链路负责多媒体数据的传输。此处，可以根据实际需求，进行网络传输链路的选择。局域网（lan）、无线局域网（wlan）、internet、cdma、3g等都是可供选择的传输链路。其中，局域网（lan）和无线局域网（wlan）带宽充足、稳定，并且设备简单，易于实现，但会受到距离的限制。internet和cdma网络可以使监控距离得到扩展，但是其带宽受限，图像质量会受到影响。而最新的3g网络也是一个不错的选择，带宽在静止状态下可以达到2mbps，但是其在稳定性方面还待测试。用户可以根据自己的需求进行选择，或者直接搭建专线网络，以实现各自的监控指标。
2.3．客户监控端
客户端主要与各个视频服务器进行连接，以实现监控。客户端可以采用pc机或者便携式设备，与网络传输链路相连，通过上位机软件与视频服务器连接，接收视频服务器发送的多媒体数据，进行解码，然后在上位机显示。同时，向视频服务器发送控制命令，实现云台、镜头等的控制。3．视频服务器硬件设计3.1．整体框架视频服务器完成视频的采集、mpeg4压缩和网络传输，以及云台、镜头等的控制。其硬件结构框图如图2所示。
图2视频服务器硬件结构框图
4.1．系统上电及引导程序
系统上电时，是由dm355的输入引脚btsel[1:0]来决定从rom或者aemif启动。此设计处选择从rom启动。此时，系统直接跳转到内部rom的起始地址（0x00008000）执行指令。内嵌的rom启动代码（rbl）进行一些配置操作，然后读取bootcfg寄存器来决定是从nand、mmc/sd或者uart启动。本设计选择nand启动。nandflash里预先烧写好了u-boot、linux内核以及根文件系统。nand启动以后，会读取bootloader的stage1部分的指令对系统进行必要的设置，然后将stage2部分的代码搬移到sdram中进行执行。当用户选择启动内核时，bootloader将内核从nandflash里搬运到sdram，然后跳转到内核的起始地址进行执行，启动内核。
4.2．嵌入式linux操作系统
嵌入式linux操作系统是针对不同的应用需求，对linux内核进行裁剪修改使之能在嵌入式计算机系统上运行的一种操作系统。它开放源码，内核小、效率高，适用于多种cpu和硬件平台，性能稳定，可移植性好等特点为其开辟了一片属于自己的空间。
本设计选择嵌入式linux操作系统作为软件平台，实现各硬件模块的驱动的添加及移植，用户应用程序的编写及调试。
4.3．用户应用程序
本设计中将整个应用程序分为2个进程，data进程和command进程。data进程主要负责音视频数据的采集、压缩和网络传输。其中，又分为3个线程，capture线程、编码线程以及control线程。capture线程控制采集设备进行图像及声音的采集及预处理；编码线程从capture线程读取数据，进行mpeg4（视频）或g.711（音频）压缩。control线程从编码线程读取压缩完的数据，通过网络发送给客户端。而command进程接收上位机命令，解析、执行，并且控制云台，镜头及测温等。command进程还加入了用户id检验等功能，提供简单的保护机制。应用程序的流程图如图4所示。
图4应用程序流程图
4.4．mpeg/jpeg协处理器编码
由于dm355内部集成了mpeg/jpeg协处理器，对于音视频的编解码主要是通过它来完成的。而对它的操作是依靠ti公司制订的基于expressdsp算法互用性标准（xdais）的xdais-dm标准实现的。此标准定义了一组统一的api，这些api是建立在各种多媒体算法之上的，这样即简化了集成难度，同时保证了互用性。ti提出的codecengine就是一组用于示例和运行xdais算法的api，而visa（video，image，speech，audio）类是用来与xdais-dm算法标准定义的基于各种多媒体算法的api函数集进行交互的接口。在应用程序编程中，通过进行如下的操作来完成视频的编码。
打开编解码引擎：
staticstringenginename=videnc
engine_handlece;engine_errorerrorcode;ce=engine_open(enginename,null,&errorcode);视频编码类提供四个api函数：创建视频编码类：videnc_handlehenc;staticstringencodername=mpeg4enc;henc=videnc_create(ce,encodername,null);其中ce为打开编码引擎时返回的句柄。对视频编码类进行控制，设置视频编码动态参数：videnc_control(henc,xdm_setparams,&dynamicparams,&encstatus);处理数据，进行编码：videnc_process(henc,&inbufdesc,&outbufdesc,&inargs,&outargs);其中参数henc为创建的visa类句柄，inbufdesc为原始数据buffer，outbufdesc为压缩后数据buffer，inargs和outargs为输入输出配置参数。销毁创建的视频编码类：videnc_delete(henc)；在应用程序中调用以上api，即可利用mpeg/jpeg协处理器对原始视频数据进行压缩，而音频数据的压缩与此类似。
5．总结
本文介绍了基于最新davinci平台的视频监控服务器的设计与实现，包括硬件组成和软件设计。整个视频服务器利用dm355内部的arm926ej-s核运行嵌入式linux操作系统，而用mpeg/jpeg协处理器进行mpeg4编码相关的计算。文中对利用mpeg/jpeg协处理器进行编码也做了介绍，同时给出了整个视频监控系统的框架。经过在局域网内测试，可以实现d1格式的视频的实时传输，同时可以进行云台及镜头等的控制。利用该系统可实现楼宇、街道等场所的视频监控。
参考文献
[1]codecengineapplicationdeveloperuser'sguide
[2]xdais-dm(digitalmedia)userguide
[3]王田苗.嵌入式系统设计与实例开发北京：清华大学出版社2003.10
[4]李善平，刘文峰，王焕龙.linux与嵌入式系统（第2版）北京：清华大学出版社2006.3
[5]杜春雷.arm体系结构与编程北京：清华大学出版社2003.8
苹果在测试中的自动驾驶车队上 已经使用了一种激光雷达系统
机器学习和数据处理的常见算法的简单介绍及优缺点分析
农产品溯源系统有什么作用，它具体有哪些功能
华为连续四年领跑中国SD-WAN市场，市场份额第一
Quartus Prime Pro设计软件：用于支持英特尔下一代高度集成的大容量FPGA
利用TMS320 DM355监控服务器设计方案
不输入密码即可登录电脑的方法
爱芯元智影像专用芯片AX170A成功进入消费领域，全面提升手机拍摄体验
神舟优雅X4全新升级 性价比之王，杠杠的！
小米mix2什么时候发布？小米mix2又新增一项黑科技：屏幕内嵌指纹技术
水质毒性测定仪的相关功能特点说明
魅族副总裁华海良曝光，网友：真牛逼
比特币近期价格行情分析
山西联通采用华为5G端到端解决方案打造出了首家智能化社区
接插件安全使用及航空插头连接范围
光谱共焦传感器的共焦成像原理是什么
交叉导轨的使用寿命
bms电池管理概述 bms电池管理什么意思
预测:全球IC设计厂商研发支出将大幅攀升
用线性数字电位器实现对数调节
本设计以ti公司davinci系列芯片作为硬件平台，结合嵌入式linux操作系统，实现了基于tms320dm355的视频服务器。本文阐述了各硬件模块的选型与功能，以及服务器的软件架构与实现。同时给出了整个网络视频监控系统的框架，包括视频服务器、网络传输链路及客户监控端。本设计采用mpeg4视频编码标准，由dm355内部的mpeg/jpeg协处理器完成。实验表明，在带宽充足的条件下，可实现实时监控。
1．引言
多媒体监控一直是人们关注的应用技术热点之一，它以直观、方便、信息内容丰富等特点被广泛应用于许多场合。而随着嵌入式系统和视频压缩技术的不断发展，基于嵌入式技术的视频监控系统也得到了快速的发展与应用。其通过把摄像机输出的模拟信号转化为数字信号，再经过嵌入式系统编码和传输。在客户端，通过安装监控软件，或者直接通过web进行监控。采用嵌入式linux操作系统的视频监控系统具备编码处理、网络通信、自动控制等强大功能，直接支持网络传输和网络管理，使得监控范围达到了一定的广度。
此外，嵌入式处理器的发展也日新月异，有专注于控制的arm系列处理器，擅长快速计算的dsp处理器，还有一些针对性非常强的处理器，可以实现硬件视频编解码等。而德州仪器（ti）新近推出的针对便携式高清（hd）视频产品市场的达芬奇（davinci）处理器tms320dm355处理器，结合了它们的特长。其内部具有一个arm9ej-s的主处理器，负责整个系统的控制，同时也集成了一个mpeg/jpeg协处理器，专注于mpeg/jpeg算法的实现。其内部的视频处理子系统（vpss）及其它外设可方便快速的实现视频的采集、预处理、显示、网络传输等功能。同时，其低廉的价格也为用户降低了成本。而本设计即选用此处理器。
2．视频监控系统整体框架
本嵌入式网络视频监控系统由视频服务器、网络传输链路、客户监控端等3部分组成。视频服务器负责音视频等数据的采集、压缩处理等，网络传输链路将视频服务器压缩和发送的多媒体数据进行传输，而客户端监控部分接收音视频数据，进行解压、显示以及对视频服务器的控制等。整个系统的示意图如图1所示。
图1视频监控系统示意图
2.1．视频服务器
视频服务器采用德州仪器（ti）新近推出的达芬奇(davinci)系列处理器tms320dm355作为主处理器，接收ccd摄像头采集的视频信号，进行预处理及mpeg4压缩，然后将压缩后的数据通过网络传输。同时，接收上位机发送的命令，解析并且执行。每个设备都具有唯一的id，当客户端进行连接时，服务器会首先检查id号是否匹配，以防止恶意连接。此外，当视频服务器运行异常时，其内部的守护进程会进行监视，适当的时候进行重启。
2.2．网络传输链路
网络传输链路负责多媒体数据的传输。此处，可以根据实际需求，进行网络传输链路的选择。局域网（lan）、无线局域网（wlan）、internet、cdma、3g等都是可供选择的传输链路。其中，局域网（lan）和无线局域网（wlan）带宽充足、稳定，并且设备简单，易于实现，但会受到距离的限制。internet和cdma网络可以使监控距离得到扩展，但是其带宽受限，图像质量会受到影响。而最新的3g网络也是一个不错的选择，带宽在静止状态下可以达到2mbps，但是其在稳定性方面还待测试。用户可以根据自己的需求进行选择，或者直接搭建专线网络，以实现各自的监控指标。
2.3．客户监控端
客户端主要与各个视频服务器进行连接，以实现监控。客户端可以采用pc机或者便携式设备，与网络传输链路相连，通过上位机软件与视频服务器连接，接收视频服务器发送的多媒体数据，进行解码，然后在上位机显示。同时，向视频服务器发送控制命令，实现云台、镜头等的控制。3．视频服务器硬件设计3.1．整体框架视频服务器完成视频的采集、mpeg4压缩和网络传输，以及云台、镜头等的控制。其硬件结构框图如图2所示。
图2视频服务器硬件结构框图
4.1．系统上电及引导程序
系统上电时，是由dm355的输入引脚btsel[1:0]来决定从rom或者aemif启动。此设计处选择从rom启动。此时，系统直接跳转到内部rom的起始地址（0x00008000）执行指令。内嵌的rom启动代码（rbl）进行一些配置操作，然后读取bootcfg寄存器来决定是从nand、mmc/sd或者uart启动。本设计选择nand启动。nandflash里预先烧写好了u-boot、linux内核以及根文件系统。nand启动以后，会读取bootloader的stage1部分的指令对系统进行必要的设置，然后将stage2部分的代码搬移到sdram中进行执行。当用户选择启动内核时，bootloader将内核从nandflash里搬运到sdram，然后跳转到内核的起始地址进行执行，启动内核。
4.2．嵌入式linux操作系统
嵌入式linux操作系统是针对不同的应用需求，对linux内核进行裁剪修改使之能在嵌入式计算机系统上运行的一种操作系统。它开放源码，内核小、效率高，适用于多种cpu和硬件平台，性能稳定，可移植性好等特点为其开辟了一片属于自己的空间。
本设计选择嵌入式linux操作系统作为软件平台，实现各硬件模块的驱动的添加及移植，用户应用程序的编写及调试。
4.3．用户应用程序
本设计中将整个应用程序分为2个进程，data进程和command进程。data进程主要负责音视频数据的采集、压缩和网络传输。其中，又分为3个线程，capture线程、编码线程以及control线程。capture线程控制采集设备进行图像及声音的采集及预处理；编码线程从capture线程读取数据，进行mpeg4（视频）或g.711（音频）压缩。control线程从编码线程读取压缩完的数据，通过网络发送给客户端。而command进程接收上位机命令，解析、执行，并且控制云台，镜头及测温等。command进程还加入了用户id检验等功能，提供简单的保护机制。应用程序的流程图如图4所示。
图4应用程序流程图
4.4．mpeg/jpeg协处理器编码
由于dm355内部集成了mpeg/jpeg协处理器，对于音视频的编解码主要是通过它来完成的。而对它的操作是依靠ti公司制订的基于expressdsp算法互用性标准（xdais）的xdais-dm标准实现的。此标准定义了一组统一的api，这些api是建立在各种多媒体算法之上的，这样即简化了集成难度，同时保证了互用性。ti提出的codecengine就是一组用于示例和运行xdais算法的api，而visa（video，image，speech，audio）类是用来与xdais-dm算法标准定义的基于各种多媒体算法的api函数集进行交互的接口。在应用程序编程中，通过进行如下的操作来完成视频的编码。
打开编解码引擎：
staticstringenginename=videnc
engine_handlece;engine_errorerrorcode;ce=engine_open(enginename,null,&errorcode);视频编码类提供四个api函数：创建视频编码类：videnc_handlehenc;staticstringencodername=mpeg4enc;henc=videnc_create(ce,encodername,null);其中ce为打开编码引擎时返回的句柄。对视频编码类进行控制，设置视频编码动态参数：videnc_control(henc,xdm_setparams,&dynamicparams,&encstatus);处理数据，进行编码：videnc_process(henc,&inbufdesc,&outbufdesc,&inargs,&outargs);其中参数henc为创建的visa类句柄，inbufdesc为原始数据buffer，outbufdesc为压缩后数据buffer，inargs和outargs为输入输出配置参数。销毁创建的视频编码类：videnc_delete(henc)；在应用程序中调用以上api，即可利用mpeg/jpeg协处理器对原始视频数据进行压缩，而音频数据的压缩与此类似。
5．总结
本文介绍了基于最新davinci平台的视频监控服务器的设计与实现，包括硬件组成和软件设计。整个视频服务器利用dm355内部的arm926ej-s核运行嵌入式linux操作系统，而用mpeg/jpeg协处理器进行mpeg4编码相关的计算。文中对利用mpeg/jpeg协处理器进行编码也做了介绍，同时给出了整个视频监控系统的框架。经过在局域网内测试，可以实现d1格式的视频的实时传输，同时可以进行云台及镜头等的控制。利用该系统可实现楼宇、街道等场所的视频监控。
参考文献
[1]codecengineapplicationdeveloperuser'sguide
[2]xdais-dm(digitalmedia)userguide
[3]王田苗.嵌入式系统设计与实例开发北京：清华大学出版社2003.10
[4]李善平，刘文峰，王焕龙.linux与嵌入式系统（第2版）北京：清华大学出版社2006.3
[5]杜春雷.arm体系结构与编程北京：清华大学出版社2003.8
苹果在测试中的自动驾驶车队上 已经使用了一种激光雷达系统
机器学习和数据处理的常见算法的简单介绍及优缺点分析
农产品溯源系统有什么作用，它具体有哪些功能
华为连续四年领跑中国SD-WAN市场，市场份额第一
Quartus Prime Pro设计软件：用于支持英特尔下一代高度集成的大容量FPGA
利用TMS320 DM355监控服务器设计方案
不输入密码即可登录电脑的方法
爱芯元智影像专用芯片AX170A成功进入消费领域，全面提升手机拍摄体验
神舟优雅X4全新升级 性价比之王，杠杠的！
小米mix2什么时候发布？小米mix2又新增一项黑科技：屏幕内嵌指纹技术
水质毒性测定仪的相关功能特点说明
魅族副总裁华海良曝光，网友：真牛逼
比特币近期价格行情分析
山西联通采用华为5G端到端解决方案打造出了首家智能化社区
接插件安全使用及航空插头连接范围
光谱共焦传感器的共焦成像原理是什么
交叉导轨的使用寿命
bms电池管理概述 bms电池管理什么意思
预测:全球IC设计厂商研发支出将大幅攀升
用线性数字电位器实现对数调节