当前位置:首页 > 嵌入式 > 嵌入式硬件

随着DSP芯片集成度、运算速度、数据吞吐率等性能的不断提高,DSP不再局限于传统视频处理、离线信号处理等方面的应用,它已被广泛地应用于许多实时视频处理和传输领域。本文设计了一种以ADSP-BF533为核心处理器,集视频处理、云台运动控制、摄像机自动调节于一体的嵌入式实时控制系统。该系统体积小,灵活性高,易于升级,可应用于无人值守的智能监控系统,如银行,金库,仓库等重地。当发现异常情况出现时,该系统能够自动报警或采取其它相应的措施,从而更有效、可靠地实现了安全防范,同时也在很大程度上减少了监视人员的工作量和疲劳度,大大提高了工作效率。

系统的功能和结构

如图1所示,嵌入式运动目标智能跟踪系统的基本功能为:系统采用高速DSP实现图像信号的实时采集,经过图像预处理模块实现对数字图像的复原、增强,然后分别发送给自动控制模块、运动目标检测模块、运动估计模块等。各功能模块对图像进行处理后,通过现场总线控制网络自动向解码器发出控制指令,驱动对应云台、摄像机作相应动作。当然系统也可以通过手动控制模块接收从监控中心发送的控制数据,直接控制摄像机、云台动作。

图1 嵌入式运动目标智能跟踪系统功能图

如图2所示,嵌入式运动目标智能跟踪硬件系统主要由 CCD 摄像机、高速数字云台、视频 ADC、图像帧存储器、DSP处理控制器、视频合成及DAC、报警模块等部分构成。视频 ADC的作用是通过视频解码芯片将模拟视频信号转换成标准的数字视频信号;帧存储器可以按照一定的时间周期存储图像数据;视频合成及DAC的作用是将视频信号与工作状态字符、报警标记、报警次数等字符叠加起来,同时转换成模拟视频信号,供监视器显示;报警电路的作用是当有活动目标进入视场或进入设定的警戒区域时,通知DSP处理器启动报警装置。其核心DSP处理控制部分由两块DSP芯片组成,一块负责图像的实时采集,运动目标跟踪算法的处理,实现对高速数字云台的驱动控制以及报警发生电路的控制等;另一块负责视频合成和编码输出。

图2 嵌入式运动目标智能跟踪硬件系统结构

系统的硬件设计和实现

整个系统的设计如图3所示,下面将从DSP核心处理器、视频处理通道、帧存储器、一体化球型摄像机控制等几个方面进行阐述。

DSP核心处理器

系统采用了ADI公司最新推出的BLACKFIN DSP,主频可以达到750MHz,它是基于ADI公司与Intel公司联合开发的微信号结构(MSA),外部存储器接口可以和SDRAM、FLASH、异步RAM实现无缝连接。PPI接口可以和视频解码器、编码器实现无缝连接,加强了系统的稳定性。 除通用I/O、实时时钟和定时器外,所有其他的外设都有独立的DMA通道,片内还有一个独立的存储器DMA通道,专用于在DSP的不同存储空间进行数据传输,包括外部的SDRAM和异步存储器。片内总线能以133MHz的速度运行,提供了足够的带宽以保证处理器内核的速度能够与片内和片外外设匹配,特别适合于图像处理。

系统使用ADSP-BF533 (DSP(1))和ADSP-BF531(DSP(2))组成核心处理部分。750MHz的DSP(1)通过PPI接口的DMA通道进行实时图像采集,实现运动目标的跟踪算法,然后通过UART接口对一体化球型摄像机进行控制。同时使用通用I/O口模拟I2C总线,对视频解码芯片SAA7113H和视频编码芯片SAA7185B进行初始化设置和控制。400MHz的DSP(2)通过PPI接口,将视频合成后的图像采用DMA的方式编码输出。

视频处理通道

如图3所示,模拟视频信号(CVBS)通过SAA7113H芯片进行视频解码,输出标准的ITU 656 YUV 4 : 2 : 2 视频流(8-bit),然后通过DSP(1)的PPI接口,由其DMA通道0,传送到帧存储器中。DSP(1)处理完的数据经SPORT接口传送到DSP(2)的帧存储器中,由其DMA通道0,通过PPI接口送至SAA7185B,输出标准的模拟视频信号。因为PPI接口可以实现与视频编、解码器的无缝连接,所以简化了视频同步和锁相控制电路的硬件设计,同时还大大加强了系统的可靠性。通过PPI _CONFIG控制寄存器还可以进行数据过滤,选择感兴趣的数据,系统中滤掉了同步控制字符,保留了有效视频数据,节省了帧存储器存储空间。如图4所示,每行中的前288个字节同步控制字符可以被过滤掉,只保留有效视频数据。DSP(1)的PPI接口工作在ITU 656下的输入模式,DSP(2)的PPI接口工作在ITU 656下的输出模式。

图3 嵌入式运动目标智能跟踪系统硬件设计

图4 PAL制式下ITU-656 YUV 4 : 2 : 2数据流格式描述

帧存储器及系统启动

ADSP-BF53X支持的

最高系统时钟频率SCLK为133MHz,所以系统采用MICRON的MT48LC16M16A2(SDRAM PC133 32MB)作为帧存储器,其结构为4Meg×16×4Banks,可以与DSP(1),DSP(2)的EBIU实现无缝连接。

由于DSP(1)片内没有程序存储器,系统必须从片外引导。本系统采用的是从SPI接口的EEPROM引导方式,所选用的EEPROM是ATMEL的AT25HP512(64KB)。

一体化球型摄像机控制

系统采用的是一体化智能球形摄像机,可实现水平自由度为 360°的连续旋转,垂直自由度为0~90°的旋转,水平、垂直自由度运动速度0.5°~160°/s可控,摄像机的光圈和焦距可控,直接通过RS-485总线对其进行控制。

系统的软件设计

系统采用了一种基于差分图像的运动目标检测算法,检测结果是符号化的图像,其中运动目标由其外接矩形表示,通过计算目标的形心坐标与图像中心的偏差来控制云台和摄像机转动,使目标显示在图像的中央,进而达到对运动目标的跟踪。

如图5所示,DSP(1)对波门内的数字图像处理得到一阈值,根据该阈值再从波门内的数字图像中分割出目标象元。然后根据分割出的全部目标象元的位置数据和目标象元的总点数,计算出目标的形心。该形心数据作为下一场波门的跟踪数据,目标的形心相对于视场中心的位置数据作为目标的偏差数据,对一体化球型摄像机进行控制。

图5 嵌入式运动目标智能跟踪软件设计框图

图6 对单目标运动物体的跟踪

实验结果和结论

整个系统使用VISUAL DSP++ 3.5进行开发,用EZ_ICE 通过JTAG接口在开发目标板上进行仿真调试,现已脱机运行。当图像分辨力设定为384×288时,跟踪算法处理速度为10帧/s。当摄像机与跟踪目标的距离>2.5m,目标运动速度不高于1m/s时,能对目标进行有效跟踪。图6是在背景较为简单的情况下,实现对单目标运动物体跟踪的实验图片。系统采用的是双DSP结构,DSP(2)只承担了视频的复合和编码工作,在运算负荷和端口资源还有很大的裕量,下一步工作将在DSP(2)上进行MPEG-4压缩编码和传输。

本站声明: 本文章由作者或相关机构授权发布,目的在于传递更多信息,并不代表本站赞同其观点,本站亦不保证或承诺内容真实性等。需要转载请联系该专栏作者,如若文章内容侵犯您的权益,请及时联系本站删除。
换一批
延伸阅读

随着在线会议、直播和游戏语音交流的普及,高质量的音频输入设备变得越来越重要。为此,边缘AI和智能音频专家XMOS携手其全球首家增值分销商飞腾云科技,利用其集边缘AI、DSP、MCU和灵活I/O于一颗芯片的xcore处理器...

关键字: AI DSP MCU

2025年8月14日,致力于亚太地区市场的国际领先半导体元器件分销商---大联大控股宣布,其旗下诠鼎推出基于新突思(Synaptics)SL1680嵌入式处理器的AI疲劳驾驶检测方案。

关键字: AI 嵌入式处理器 Type-C

多DSP集群的实时信号处理系统,通信拓扑的优化直接决定任务调度效率与系统吞吐量。RapidIO与SRIO作为嵌入式领域的主流互连协议,其带宽利用率差异与QoS配置策略对集群性能的影响尤为显著。以无线基站、雷达阵列等典型应...

关键字: DSP 通信拓扑优化

随着5G网络普及与物联网设备爆发式增长,边缘计算正从概念验证走向规模化部署。据IDC预测,2025年全球边缘数据量将占总体数据量的50%,这对边缘节点的实时处理能力提出严苛要求。在此背景下,AI加速器的DSP化趋势与可重...

关键字: AI加速器 DSP

在现代电子系统中,电源扮演着核心角色,如同人体的心脏,为整个系统稳定运行提供不可或缺的动力支持。从日常生活中的智能设备,到复杂精密的工业控制系统,再到关乎国计民生的航空航天、医疗等关键领域,电源的可靠性直接决定了系统的稳...

关键字: 电源 设备 系统

在工业控制领域,数字信号处理器(DSP)的性能直接决定了系统的实时控制能力和可靠性。德州仪器(TI)的C2000系列芯片凭借其卓越的采样、控制和功率管理能力,长期以来在全球工业控制市场占据绝对领导地位,广泛应用于能源、电...

关键字: TI C2000 DSP 格见半导体 芯来 RISC-V 工控

2025年7月16日 – 专注于引入新品的全球电子元器件和工业自动化产品授权代理商贸泽电子 (Mouser Electronics) 持续供货Texas Instruments (TI) 的新产品和解决方案。作为一家授权...

关键字: 线性稳压器 栅极驱动器 DSP

在当今数字化浪潮的推动下,数据流量呈爆炸式增长,数据中心、5G通信网络以及云计算等领域对高速光通信的需求愈发迫切。800G光模块作为高速光通信的关键组件,其性能直接影响着整个通信系统的传输效率和可靠性。数字信号处理(DS...

关键字: 800G DSP PAM4均衡算法

以氢燃料电池空压机为研究对象 ,开发超高速永磁同步电机控制器 ,采用传统的IGBT主功率器件 ,且为两电平主回 路结构形式 ,通过改进的V/F控制算法 ,完成了控制器的设计。搭建了试验平台进行测试 ,结果表明 ,控制器能...

关键字: 超高速永磁同步电机 V/F控制 DSP

医疗设备智能化进程,数字信号处理器(DSP)作为核心计算单元,承担着实时处理生物电信号、医学影像等敏感数据的重任。然而,随着医疗设备与网络互联的深化,数据泄露风险显著增加。美国《健康保险流通与责任法案》(HIPAA)明确...

关键字: 医疗设备 DSP
关闭