当前位置:首页 > 嵌入式 > 嵌入式教程
[导读]基于MPEG-4的视频编解码技术已经成为当前多媒体技术发展的热点。本文提出了一种以多DSP为核心的MPEG-4编解码系统,并设计出了具体的硬件平台方案。

引言

随着互联网的飞速发展,消费类电子、电视电影广播、计算机技术日益紧密地结合起来。人们不再满足于只用简单的文字、声音进行交流,逐渐趋向于用图、文、声、动画、视频等多种媒体进行综合交流。MPEG-4作为新一代多媒体标准提供了一整套能同时满足制作者、服务商和终端用户的编解码技术。它为数字化的多媒体数据的通信、访问和操作提供了新的方法,并且提供了一个灵活的框架和一套开发工具来支持新的和传统的性能。其基于对象的数据压缩、灵活的码流伸缩性以及可交互性的优点使其可以适应多媒体数据压缩技术的发展趋势。

基于MPEG4标准的解决方案纷纷推出,有的为硬件方案,有的为软件方案。前者设计一个MPEG-4专用编解码芯片,后者方式是基于通用视频DSP芯片的软件实现. 采用专用芯片的优点是系统实时性好,压缩率高,且图像质量也好。缺点是一旦编解码方案固定,就较难对其进行升级与更新,且此种系统成本造价高,不易在市场上推广。后一种方式利用DSP的高速信号处理功能,使用软件实现的算法在其上运行时可以大大缩短执行时间,获得较高的压缩率,同时该方案易升级,算法易更新。

近几年随着通用DSP芯片的价格下降,使得以DSP芯片为核心加上适当的外围部件形成的MPEG-4音视频编解码系统将成为主流。本系统就是基于TI 公司的DSP平台上对MPEG-4编解码算法的实现。

1.方案设计

在开发MPEG-4编解码系统时,总的来说其难点在于对MPEG-4视频编解码算法的实现上。这是由于视频图像数据量巨大,对其处理和压缩需占用较多的芯片资源和处理时间,在单独的一片DSP芯片很难实现。举例来说,在视频编码中通常的实现方式是由单片的DSP芯片加上一定的片外扩展资源(如EPROM、SDRAM等)来实现编码算法,但是在实际算法的执行中,对外接器件中的数据读写的速度远小于对DSP芯片内部资源的读写速度,这使得整个系统的运行速度就比较慢。如果要求一片DSP芯片同时实现编解码算法则开发难度就更大了。实际的开发经验也证明在单片DSP上实现视频的编解码算法较为困难,开发周期较长,其图像效果也不佳。而在实际应用中,用户对图像显示效果的要求越来越高,这就对图像的显示速度和清晰度提出了更高的要求。

本方案中是采用多DSP来实现MPEG-4的编解码算法,多DSP的好处不言而喻,多DSP的协同处理可以极大得提高信号处理的速度。虽然多DSP带来成本上提升,但是主流通用DSP芯片TMS320C5000、TMS320C6000系列芯片价格的逐年下降,使得多DSP的应用已经步入实用化阶段。

2.系统实现

具体的系统实现方案是采用三片DSP作为音视频的协处理器:一片TMS320C5402(以下简称为TMS5402)实现音频编解码,一片TMS320C6204(以下简称为TMS6204)实现视频编码,另一片TMS6204实现视频的解码。为了实现对系统的控制,同时扩展其网络功能,另外采用了一片ATMEL公司的AT75C220芯片,通过在其上嵌入式操作系统,来实现对DSP芯片及其外围电路的控制。具体的系统硬件结构图如下图1所示:

系统上电后,通过自引导程序进行初始化,AT75C220自动从Flash Disk中植入嵌入式操作系统,各DSP芯片也分别自引导入相应的编解码算法。同时此操作系统还向用户提供一个友好的操作界面,用户通过此界面来控制DSP芯片的编解码过程、系统与网络的连接,以及常用的功能(关机、播放音视频、上网等)。

2.1音视频编码

视频编码模块框图如下:


视频编码工作过程:视频图像经过采集存储于帧缓存器中,采集完成后FPGA(可编程逻辑器件)向TMS6204发出接收信号。TMS6204接收到“图像已采集好”的信号后,就通过DMA方式将图像写至片外存储器SDRAM中,并开始运行MPEG-4视频编码算法对片外存储器中的图像进行编码。编码输出信号通过HPI(Host Port Interface)口送至AT75C220,AT75C220将视频信号与音频进行同步打包后经由网络模块发往接收主机处。

音频编解码模块框图如下:

音频编码的过程与视频类似,不同的是由TMS5402来执行编码算法,这主要是考虑到系统的性价比。由于音频编码的运算量要比视频编码小得多,这使得TMS5402的芯片资源足够完成音频编码,并且其价格要比TMS6204低的多。音频编码工作过程:信号通过MIC(Microphone)送到A/D转换器中,A/D转换器将收到的模拟信号转换成为离散信号,未压缩的离散信号被送到DSP后,DSP将其存储起来,每收够一帧处理一次,即调用音频编码算法一次,编码后得到的离散信号被DSP发送至AT75C220,由其打包经由网络发至主机处。音频解码和音频编码都在同一块DSP芯片TMS5402中完成,这是因为音频的编解码过程没有视频那么复杂,占用的资源相对较少。以TMS5402的芯片资源是可以同时完成音频的编解码算法的。

2.2音视频解码

音频解码工作过程:TMS5402接收到MPEG-4音频已编码信号后就开始进行解码算法,每解码出一帧音频信号,就直接将其进行D/A转换发送到耳机或是音箱中播放。

视频解码模块框图如下:


视频解码工作过程:AT75C220将接收到的MPEG-4视频编码信号直接送往TMS6204。当其运行解码算法得到第一帧的图像数据后,就将其拷贝到片外的SDRAM中,同时向FPGA发送一个初始化信号,然后FPGA调用中断通过DMA方式将SDRAM中的图像转移到FIFO里,经D/A转换合成为RGB信号后送往显示器显示出图像。

3.系统特点

根据仿真的结果,在352*240(NTSC制式),视频输出35帧/秒以上,码率可控制在100kbps~1000kbps之间,完全可以满足实际需要。近年来,随着FPGA技术的日益成熟,利用FPGA的特殊结构和特性,很多复杂数字算法开始使用PPCA完成,使它可以更加高速和高效地完成这些算法,但相应的是其开发难度变大,周期变长。由于本系统是基于DSP来实现的,与上述方式相比具有设计周期短,成本低的特点。同时具有很强的通用性和扩展性,可根据实际需求形成丰富的产品系列。

4.结束语

MPEG4的应用前景将是非常广阔的。 它的出现将对以下各方面产生较大的推动作用:实时通信、数字电视、广播电视、实时多媒体监控、移动多媒体通信、内容存储和检索多媒体系统、基于Internet/Intranet的数字码流视频、基于面部表情模拟的虚拟会议、DVD上的交互多媒体应用、基于计算机网络的可视化合作实验室场景应用等。

本站声明: 本文章由作者或相关机构授权发布,目的在于传递更多信息,并不代表本站赞同其观点,本站亦不保证或承诺内容真实性等。需要转载请联系该专栏作者,如若文章内容侵犯您的权益,请及时联系本站删除。
换一批
延伸阅读

随着在线会议、直播和游戏语音交流的普及,高质量的音频输入设备变得越来越重要。为此,边缘AI和智能音频专家XMOS携手其全球首家增值分销商飞腾云科技,利用其集边缘AI、DSP、MCU和灵活I/O于一颗芯片的xcore处理器...

关键字: AI DSP MCU

多DSP集群的实时信号处理系统,通信拓扑的优化直接决定任务调度效率与系统吞吐量。RapidIO与SRIO作为嵌入式领域的主流互连协议,其带宽利用率差异与QoS配置策略对集群性能的影响尤为显著。以无线基站、雷达阵列等典型应...

关键字: DSP 通信拓扑优化

随着5G网络普及与物联网设备爆发式增长,边缘计算正从概念验证走向规模化部署。据IDC预测,2025年全球边缘数据量将占总体数据量的50%,这对边缘节点的实时处理能力提出严苛要求。在此背景下,AI加速器的DSP化趋势与可重...

关键字: AI加速器 DSP

在工业控制领域,数字信号处理器(DSP)的性能直接决定了系统的实时控制能力和可靠性。德州仪器(TI)的C2000系列芯片凭借其卓越的采样、控制和功率管理能力,长期以来在全球工业控制市场占据绝对领导地位,广泛应用于能源、电...

关键字: TI C2000 DSP 格见半导体 芯来 RISC-V 工控

2025年7月16日 – 专注于引入新品的全球电子元器件和工业自动化产品授权代理商贸泽电子 (Mouser Electronics) 持续供货Texas Instruments (TI) 的新产品和解决方案。作为一家授权...

关键字: 线性稳压器 栅极驱动器 DSP

在当今数字化浪潮的推动下,数据流量呈爆炸式增长,数据中心、5G通信网络以及云计算等领域对高速光通信的需求愈发迫切。800G光模块作为高速光通信的关键组件,其性能直接影响着整个通信系统的传输效率和可靠性。数字信号处理(DS...

关键字: 800G DSP PAM4均衡算法

以氢燃料电池空压机为研究对象 ,开发超高速永磁同步电机控制器 ,采用传统的IGBT主功率器件 ,且为两电平主回 路结构形式 ,通过改进的V/F控制算法 ,完成了控制器的设计。搭建了试验平台进行测试 ,结果表明 ,控制器能...

关键字: 超高速永磁同步电机 V/F控制 DSP

医疗设备智能化进程,数字信号处理器(DSP)作为核心计算单元,承担着实时处理生物电信号、医学影像等敏感数据的重任。然而,随着医疗设备与网络互联的深化,数据泄露风险显著增加。美国《健康保险流通与责任法案》(HIPAA)明确...

关键字: 医疗设备 DSP

数字信号处理器(DSP)作为实时信号处理的核心器件,其架构设计直接决定了运算效率与功耗表现。自20世纪70年代DSP理论诞生以来,其硬件架构经历了从冯·诺依曼结构到哈佛结构的演进,这一过程体现了对实时性、并行性与存储带宽...

关键字: DSP 冯·诺依曼

随着嵌入式系统对实时性、多任务处理能力的需求日益增长,实时操作系统(RTOS)在数字信号处理器(DSP)中的移植与性能优化成为关键技术课题。DSP以其高效的数值计算能力和并行处理特性,广泛应用于通信、图像处理、工业控制等...

关键字: RTOS DSP
关闭