基于TMS320VC550的JPEG视频压缩系统的实现
基于tms320vc550的jpeg视频压缩系统的实现
1 引言
随着网络和多媒体技术的发展，视觉通信的重要性和需求急剧增加，如桌面视频会议、移动终端、基于因特网的视频通信等。这些视觉信息内涵丰富，但数据量大，必须压缩数据。但采用多种方法压缩图像数据，其数据量仍然巨大，这就对计算机处理速度、传输介质、传输方法和存储介质提出较高要求。因此，数据压缩作为数据图像处理的关键技术之一，对研究图像压缩编码技术具有重要价值。
嵌入式微处理器中，dsp具有灵活、高速、便于嵌入式应用等优点，特别适合复杂算法处理的应用。数字视频图像压缩系统利用dsp作为其嵌入式平台，充分发挥其性能优势，较好地提高编码效率，满足图像实时处理需要。因此，这里介绍一种基于tms320vc5509a型dsp的视频压缩系统。
2 静止图像的压缩编码标准jpeg
jpeg(joint photographic experts group)是由国际标准化组织(iso)提出面向静止图像编码的标准，其处理方法依次使用离散余弦变换、量化、z行扫描、游程编码和不变字长编码。jpeg算法定义了以下4种运行模式：
(1)基于dct顺序型模式按照从左到右、从上到下的顺序对图像进行扫描和编码，称为基本系统。
(2)基于dct递增模式 按照从粗到细的顺序对一幅图像进行编码，适用于传输时间长、用户喜欢图像从粗糙到清晰的场合。
(3)无失真编码模式保证重建图像与原始图像完全相同。
(4)分层编码 采用各种分辨率对图像进行编码。
该系统采用基本系统模式。图1是jpeg的编码框图。
3 硬件系统设计
该视频压缩系统直接与pal制摄像头的输出端相连，来采集、预处理和压缩现场图像，再以usb或rs232方式将处理后的图像数据传给上位机。图2为视频压缩系统硬件结构图。
该系统硬件设计以ti公司的tms320vc5509a型数字信号处理器为核心，包括视频采集电路、fpga预处理电路、存储器扩展、系统电源和看门狗电路等。系统中tms320vc5509a为中央处理器；sdram为dsp外扩数据存储器；flash为程序存储器，用于系统上电自举；模拟摄像头与视频 a／d转换器负责视频图像采集；fpga用于地址译码、隔行运算，控制两片sram用于缓存视频a／d转换器转换后的数字图像。从系统设计成本考虑，这里选用altera公司的可编程逻辑器件epic6q240c8型fpga。该器件是cyclone系列器件中一款非bga封装的可用i／o引脚最多的 fpga。
3．1 视频采集电路
该系统选用的视频解码器为philip公司的高性能视频a／d转换器saa7111。该器件是一款广泛应用于桌面视频、多媒体、数字电视、图像处理、视频电话的高性能视频输入处理器件。该器件采用3．3 v的cmos电路，高度集成模拟前端和数字视频编码器；包括2路模拟视频处理通道，1个时钟产生电路，1个自动箝位和自动增益控制电路，1个多制式数字解码器，1个亮度／对比度／饱和度控制电路，以及色彩空间矩阵。saa7111输出为16位vpo总线，支持不同位宽的数据输出格式。saa7111支持的输出格式包括：12位yuv411，16位yuv4：2：2，8位ccir-656、16位565rgb以及24位的888rgb。图3为视频采集电路。
3．2 存储器选型
选择存储器应从以下方面考虑：首先图像压缩算法中间数据量大，要求处理器的片上内存尽可能大，尽量避免对外部存储器读写操作。vc5509a的片上存储器包括32 kx16位daram，96 kx16位saram，共128 k位的存储空间。其中daram为双地址，在每个周期内可以对其进行两次操作(2次读，两次写，一次读和一次写)，这样大大增加片上存储器的利用率；其次，vc5509a片上资源丰富，包括i2c总线(多主从接口)，3个mcbsps(1个与多媒体卡／数字加密卡mmc/sd串行接口复用引脚)。利用 fc总线对saa7111的片内控制寄存器进行读写操作，非常方便实时控制saa711 1的工作状态；利用mcbsp配合dma，软件编程实现uart功能，无需专门的硬件uart，从而节省电路板空间：vc5509a采用144引脚 lqfp封装，便于安装、调试；vc5509a功耗小，工作在200 mhz主频下，功耗仅100 mw，非常适合嵌入式应用。
3．3 dsp供电电源电路
dsp基本系统由独立的电源系统供电，而硬件平台的其他器件共用另一套电源供电系统。为了降低系统功耗，dsp一般采用低电压供电．并且采用i／o和 cpu内核分开供电方式。vc5509a不同的工作频率要求不同的核电压，200 mhz为1．6 v，144 mhz为1．35 v，108 mhz为1．2 v。dsp的i／o电压为3．3 v。
dsp供电电源电路如图4所示。选用ti公司的两款ldo电源器件tps76801和tps75833分别为dsp提供内核电压和i／o电压。
tps76801能给cpu内核提供最大1 a的电流，电压在1．2～3 v范围内可调。
调整tps76801的输入电阻值得到1．6 v，1．35 v，1．2 v的核电压，dsp相应工作在200 mhz，144 mhz，108 mhz的频率下。而tps75833能提供最高3 a的i／o电流，对于低功耗的tms320vc5509a，这已足够保证其工作在最大负荷状态。
4 系统软件设计
该系统软件设计的主要功能是实时采样现场的视频信号，然后对网像数据编码压缩并通过usb总线或rs232串口将图像数据传送给主机。系统主程序流程如图5所示，该系统软件设计可分为系统初始化、图像采集、压缩编码和数据传输4个主要模块。
系统上电后，dsp首先初始化，初始化主要包括：通过i2c总线初始化saa7111，设置其工作模式；空间分配，emif的配置以保证外部存储器的正常访问；配置usb模块；设定dma通道以及设定外部中断。然后dsp等待fpga的中断。当dsp接收到fpga的中断后，dsp设定标志寄存器，启动 dma读取数据，并进行编码。当编码结束后，dsp把数据交付usb模块，通过usb总线传送至上位机，同时dsp向fpga发送空闲信号，通知fpga 继续发送下一帧。
5 jpeg优化
jpeg算法在dsp上实现需要解决编码速度问题。片上内存资源的有限性使得大部分的程序代码和数据不得不放在片外，大量的图像数据在慢速的sdram存储器中，对其访问和算术运算是影响系统性能的关键因素之一。因此，应从内存分配和代码优化两个方面来优化程序，提高编码效率。
5．1 数据内存优化
由于vc5509a的片上存储器包括32 kx16位daram，96 kx16位saram，共128 k位的存储空间。其中daram为双访问内存，即在一个周期内可完成两次数据访问，saram为单访问内存，即在一个周期内只能完成一次数据访问，片外内存为扩展的sdram，访问其需要额外的等待时间，执行效率比较低。因此在算法设计中应合理安排内存分配，尽量将访问频繁的程序代码和数据放在片内内存中，特别是daram中，可以提高编码效率。
5．2 c代码优化
在jpeg的编码中，根据vc5509a结构特点及结合图像数据量大的特点，提高编码效率，考虑程序编写和优化如下：
(1)利用编译器优化，开启编译器的优化选项，包括基本优化、文件级优化和程序级优化。
(2)使用本征(intrinsics)函数，c55x提供了一种特殊函数一本征函数，可迅速优化c代码。本征甬数前有个下划线“一”，调用方法和普通函数相同。
(3)使用图像库，ti提供基于c55x的图像库imglib，库中都是图像处理常用的函数，而且可以用c语言调用，汇编优化好，执行效率高，因此尽量用库函数。在jpeg编码中比较关键的是dct变换可调用库函数中的img_sw_fdct_8x8(short*fdct_data，short， *inter_buffer)，该函数完成一次dct变换需用1 078个时钟周期。大大提高jpeg的编码效率。
(4)高效使用mac硬件，c55x有专门的硬件高效执行mac运算。一个周期中可以执行一个单乘加或一个双乘加(dual-mac)运算。
(5)使用特殊数据类型(register类型、volatile类型、const类型)，对于需要多次重复访问的变量，如for循环中的变量值，一般可设置为register型变量。声明变量为register型能提高效率，但必须小心使用。在某些编译器中，优化器会自动分配一些变量为register 型。
(6)减少判断循环，在使用判断方式选取控制语句时应尽量减少判断转移。dsp多采用流水线结构。由于tms320c55x采用7级流水线结构，频繁的转移指令使得流水线难以发挥作用。
另外。dsp的大多数指令为单周期指令，但转移类指令却通常要耗费较多的机器周期。因此，应尽可能减少程序中的转移分支，以提高程序的效率。
6 实验结果
6．1 压缩效果实验结果
通过改变量化因子q，改变图像的压缩比。压缩比越大，压缩过程中的视觉损失越大，压缩后的图片越不清晰。图6为采用不同的量化因子q的压缩前后效果比较图。其中，图6a为未压缩，大小57．4 kb的原始bmp图像，图6b为压缩后大小为5．18 kb的图像，图6c为压缩后大小5．18 kb的图像。由图知，压缩后的图像与原始图像在视觉效果上相差不大。当q=50时，压缩后图像所需存储空间仅为原图像的1／14。
6．2 压缩耗时实验结果
对于一个8x8数据块，各步耗时如下：分块：1．335μs；dct变换：5． 39μs；量化：1．355μs；哈夫曼编码：3．375μs。说明一个8x8数据块总耗时为11．455μs，一帧720x576灰度图像的压缩总耗时为90x72x11．455=74 228．4μs，再加上其他辅助操作，实际耗时约75 ms。根据上述结果，在1 s内向上位机发送13帧720x576的灰度图像，基本满足系统要求。
7 结束语
介绍基于tms320vc5509a dsp的jpeg视频压缩系统的设计和实现方案，该系统硬件设计采用dsp+fpga的方案，充分发挥了各自优势；而软件设计针对c55x的结构进行程序结构和算法优化，经过验证达到较好的实时效果。由于该系统体积小、功耗低，适用于一些野外图像采集、远程视频监控等需要连续传输图像的场合。
半导体行业的创新案例
探针卡简化测试和替换流程
ADS2023信号完整性新功能分享
cnocr和tesseract的使用方法和效果
什么是集成显卡
基于TMS320VC550的JPEG视频压缩系统的实现
人工智能各大领域应用的技术原理详细介绍
如何使用LM317作为开关来打开和关闭电源负载
浅析异构网络安全解决方案及关键技术
采用双旋翼设计的无人机进行货物配送
我国云计算产业发展现状如何？运营商面临哪些挑战？
魅族Flyme 9：小窗模式 再度升级
PCB设计：“怎么摆”和“怎么连”
光电编码器鉴相计数电路
储备银行未来为什么要选择比特币
老旧设备IP固定如何实现NAT转换与跨网段访问
上汽大众推全新智能车联系统，智能操作更便捷
欧盟PowerizeD项目旨在改造电力电子
百度发布第四季度财报 将AI技术有效赋能“抗疫”
解析现阶段2G、3G和4G模拟网自动化测试实现方法
1 引言
随着网络和多媒体技术的发展，视觉通信的重要性和需求急剧增加，如桌面视频会议、移动终端、基于因特网的视频通信等。这些视觉信息内涵丰富，但数据量大，必须压缩数据。但采用多种方法压缩图像数据，其数据量仍然巨大，这就对计算机处理速度、传输介质、传输方法和存储介质提出较高要求。因此，数据压缩作为数据图像处理的关键技术之一，对研究图像压缩编码技术具有重要价值。
嵌入式微处理器中，dsp具有灵活、高速、便于嵌入式应用等优点，特别适合复杂算法处理的应用。数字视频图像压缩系统利用dsp作为其嵌入式平台，充分发挥其性能优势，较好地提高编码效率，满足图像实时处理需要。因此，这里介绍一种基于tms320vc5509a型dsp的视频压缩系统。
2 静止图像的压缩编码标准jpeg
jpeg(joint photographic experts group)是由国际标准化组织(iso)提出面向静止图像编码的标准，其处理方法依次使用离散余弦变换、量化、z行扫描、游程编码和不变字长编码。jpeg算法定义了以下4种运行模式：
(1)基于dct顺序型模式按照从左到右、从上到下的顺序对图像进行扫描和编码，称为基本系统。
(2)基于dct递增模式 按照从粗到细的顺序对一幅图像进行编码，适用于传输时间长、用户喜欢图像从粗糙到清晰的场合。
(3)无失真编码模式保证重建图像与原始图像完全相同。
(4)分层编码 采用各种分辨率对图像进行编码。
该系统采用基本系统模式。图1是jpeg的编码框图。
3 硬件系统设计
该视频压缩系统直接与pal制摄像头的输出端相连，来采集、预处理和压缩现场图像，再以usb或rs232方式将处理后的图像数据传给上位机。图2为视频压缩系统硬件结构图。
该系统硬件设计以ti公司的tms320vc5509a型数字信号处理器为核心，包括视频采集电路、fpga预处理电路、存储器扩展、系统电源和看门狗电路等。系统中tms320vc5509a为中央处理器；sdram为dsp外扩数据存储器；flash为程序存储器，用于系统上电自举；模拟摄像头与视频 a／d转换器负责视频图像采集；fpga用于地址译码、隔行运算，控制两片sram用于缓存视频a／d转换器转换后的数字图像。从系统设计成本考虑，这里选用altera公司的可编程逻辑器件epic6q240c8型fpga。该器件是cyclone系列器件中一款非bga封装的可用i／o引脚最多的 fpga。
3．1 视频采集电路
该系统选用的视频解码器为philip公司的高性能视频a／d转换器saa7111。该器件是一款广泛应用于桌面视频、多媒体、数字电视、图像处理、视频电话的高性能视频输入处理器件。该器件采用3．3 v的cmos电路，高度集成模拟前端和数字视频编码器；包括2路模拟视频处理通道，1个时钟产生电路，1个自动箝位和自动增益控制电路，1个多制式数字解码器，1个亮度／对比度／饱和度控制电路，以及色彩空间矩阵。saa7111输出为16位vpo总线，支持不同位宽的数据输出格式。saa7111支持的输出格式包括：12位yuv411，16位yuv4：2：2，8位ccir-656、16位565rgb以及24位的888rgb。图3为视频采集电路。
3．2 存储器选型
选择存储器应从以下方面考虑：首先图像压缩算法中间数据量大，要求处理器的片上内存尽可能大，尽量避免对外部存储器读写操作。vc5509a的片上存储器包括32 kx16位daram，96 kx16位saram，共128 k位的存储空间。其中daram为双地址，在每个周期内可以对其进行两次操作(2次读，两次写，一次读和一次写)，这样大大增加片上存储器的利用率；其次，vc5509a片上资源丰富，包括i2c总线(多主从接口)，3个mcbsps(1个与多媒体卡／数字加密卡mmc/sd串行接口复用引脚)。利用 fc总线对saa7111的片内控制寄存器进行读写操作，非常方便实时控制saa711 1的工作状态；利用mcbsp配合dma，软件编程实现uart功能，无需专门的硬件uart，从而节省电路板空间：vc5509a采用144引脚 lqfp封装，便于安装、调试；vc5509a功耗小，工作在200 mhz主频下，功耗仅100 mw，非常适合嵌入式应用。
3．3 dsp供电电源电路
dsp基本系统由独立的电源系统供电，而硬件平台的其他器件共用另一套电源供电系统。为了降低系统功耗，dsp一般采用低电压供电．并且采用i／o和 cpu内核分开供电方式。vc5509a不同的工作频率要求不同的核电压，200 mhz为1．6 v，144 mhz为1．35 v，108 mhz为1．2 v。dsp的i／o电压为3．3 v。
dsp供电电源电路如图4所示。选用ti公司的两款ldo电源器件tps76801和tps75833分别为dsp提供内核电压和i／o电压。
tps76801能给cpu内核提供最大1 a的电流，电压在1．2～3 v范围内可调。
调整tps76801的输入电阻值得到1．6 v，1．35 v，1．2 v的核电压，dsp相应工作在200 mhz，144 mhz，108 mhz的频率下。而tps75833能提供最高3 a的i／o电流，对于低功耗的tms320vc5509a，这已足够保证其工作在最大负荷状态。
4 系统软件设计
该系统软件设计的主要功能是实时采样现场的视频信号，然后对网像数据编码压缩并通过usb总线或rs232串口将图像数据传送给主机。系统主程序流程如图5所示，该系统软件设计可分为系统初始化、图像采集、压缩编码和数据传输4个主要模块。
系统上电后，dsp首先初始化，初始化主要包括：通过i2c总线初始化saa7111，设置其工作模式；空间分配，emif的配置以保证外部存储器的正常访问；配置usb模块；设定dma通道以及设定外部中断。然后dsp等待fpga的中断。当dsp接收到fpga的中断后，dsp设定标志寄存器，启动 dma读取数据，并进行编码。当编码结束后，dsp把数据交付usb模块，通过usb总线传送至上位机，同时dsp向fpga发送空闲信号，通知fpga 继续发送下一帧。
5 jpeg优化
jpeg算法在dsp上实现需要解决编码速度问题。片上内存资源的有限性使得大部分的程序代码和数据不得不放在片外，大量的图像数据在慢速的sdram存储器中，对其访问和算术运算是影响系统性能的关键因素之一。因此，应从内存分配和代码优化两个方面来优化程序，提高编码效率。
5．1 数据内存优化
由于vc5509a的片上存储器包括32 kx16位daram，96 kx16位saram，共128 k位的存储空间。其中daram为双访问内存，即在一个周期内可完成两次数据访问，saram为单访问内存，即在一个周期内只能完成一次数据访问，片外内存为扩展的sdram，访问其需要额外的等待时间，执行效率比较低。因此在算法设计中应合理安排内存分配，尽量将访问频繁的程序代码和数据放在片内内存中，特别是daram中，可以提高编码效率。
5．2 c代码优化
在jpeg的编码中，根据vc5509a结构特点及结合图像数据量大的特点，提高编码效率，考虑程序编写和优化如下：
(1)利用编译器优化，开启编译器的优化选项，包括基本优化、文件级优化和程序级优化。
(2)使用本征(intrinsics)函数，c55x提供了一种特殊函数一本征函数，可迅速优化c代码。本征甬数前有个下划线“一”，调用方法和普通函数相同。
(3)使用图像库，ti提供基于c55x的图像库imglib，库中都是图像处理常用的函数，而且可以用c语言调用，汇编优化好，执行效率高，因此尽量用库函数。在jpeg编码中比较关键的是dct变换可调用库函数中的img_sw_fdct_8x8(short*fdct_data，short， *inter_buffer)，该函数完成一次dct变换需用1 078个时钟周期。大大提高jpeg的编码效率。
(4)高效使用mac硬件，c55x有专门的硬件高效执行mac运算。一个周期中可以执行一个单乘加或一个双乘加(dual-mac)运算。
(5)使用特殊数据类型(register类型、volatile类型、const类型)，对于需要多次重复访问的变量，如for循环中的变量值，一般可设置为register型变量。声明变量为register型能提高效率，但必须小心使用。在某些编译器中，优化器会自动分配一些变量为register 型。
(6)减少判断循环，在使用判断方式选取控制语句时应尽量减少判断转移。dsp多采用流水线结构。由于tms320c55x采用7级流水线结构，频繁的转移指令使得流水线难以发挥作用。
另外。dsp的大多数指令为单周期指令，但转移类指令却通常要耗费较多的机器周期。因此，应尽可能减少程序中的转移分支，以提高程序的效率。
6 实验结果
6．1 压缩效果实验结果
通过改变量化因子q，改变图像的压缩比。压缩比越大，压缩过程中的视觉损失越大，压缩后的图片越不清晰。图6为采用不同的量化因子q的压缩前后效果比较图。其中，图6a为未压缩，大小57．4 kb的原始bmp图像，图6b为压缩后大小为5．18 kb的图像，图6c为压缩后大小5．18 kb的图像。由图知，压缩后的图像与原始图像在视觉效果上相差不大。当q=50时，压缩后图像所需存储空间仅为原图像的1／14。
6．2 压缩耗时实验结果
对于一个8x8数据块，各步耗时如下：分块：1．335μs；dct变换：5． 39μs；量化：1．355μs；哈夫曼编码：3．375μs。说明一个8x8数据块总耗时为11．455μs，一帧720x576灰度图像的压缩总耗时为90x72x11．455=74 228．4μs，再加上其他辅助操作，实际耗时约75 ms。根据上述结果，在1 s内向上位机发送13帧720x576的灰度图像，基本满足系统要求。
7 结束语
介绍基于tms320vc5509a dsp的jpeg视频压缩系统的设计和实现方案，该系统硬件设计采用dsp+fpga的方案，充分发挥了各自优势；而软件设计针对c55x的结构进行程序结构和算法优化，经过验证达到较好的实时效果。由于该系统体积小、功耗低，适用于一些野外图像采集、远程视频监控等需要连续传输图像的场合。
半导体行业的创新案例
探针卡简化测试和替换流程
ADS2023信号完整性新功能分享
cnocr和tesseract的使用方法和效果
什么是集成显卡
基于TMS320VC550的JPEG视频压缩系统的实现
人工智能各大领域应用的技术原理详细介绍
如何使用LM317作为开关来打开和关闭电源负载
浅析异构网络安全解决方案及关键技术
采用双旋翼设计的无人机进行货物配送
我国云计算产业发展现状如何？运营商面临哪些挑战？
魅族Flyme 9：小窗模式 再度升级
PCB设计：“怎么摆”和“怎么连”
光电编码器鉴相计数电路
储备银行未来为什么要选择比特币
老旧设备IP固定如何实现NAT转换与跨网段访问
上汽大众推全新智能车联系统，智能操作更便捷
欧盟PowerizeD项目旨在改造电力电子
百度发布第四季度财报 将AI技术有效赋能“抗疫”
解析现阶段2G、3G和4G模拟网自动化测试实现方法