当前位置:首页 > 汽车电子 > 汽车电子
[导读]摘要:智能循迹小车可以根据前端摄像头的输入图像识别出道路状况,通过优化智能车的软硬件设计,能够确保其在不同环境下行驶的快速性和准确性,本文以Kinetis60为核心处理器,完成了智能车路径检测、速度检测、数据传

摘要:智能循迹小车可以根据前端摄像头的输入图像识别出道路状况,通过优化智能车的软硬件设计,能够确保其在不同环境下行驶的快速性和准确性,本文以Kinetis60为核心处理器,完成了智能车路径检测、速度检测、数据传输模块、电机舵机驱动模块的设计与实现,并在此基础上提出了一种利用摄像头实时图像进行智能车循迹判断的方法,能够提取出精确的路径特征信息,实践证明该方法具有可行性。

随着智能交通系统的广泛应用,智能车的系统控制也逐步成为一项新兴技术,该领域涵盖了控制、模式识别、传感技术、电子、电气、计算机、机械等多个学科。本方案采用摄像头作为信号采集的传感器,根据摄像头采集的图像进行精密计算,确定速度参考和舵机转向参考。摄像头组的智能车对于道路信息预测能力强,而且摄像头对道路的探测精细,视角范围大,因此受到众多智能车设计者的欢迎。但摄像头图像受周围光线的影响大;算法运算量大,算法复杂,需要占用较多的NCU资源,因此其中图像识别算法的设计成为系统设计的关键步骤。

1 系统设计

智能车系统由核心处理器KINETIS60、路径检测模块、起跑线检测模块、车速检测模块、电源模块,无线数据传输模块、电机驱动模块、舵机驱动模块组成。其中摄像头组的路径检测模块由OV7620摄像头实现。

车速检测模块由编码器构成,实现速度的实时采集。电机驱动模块由八片IRF3205构成H桥来实现。电源模块由三块LM2940组成。舵机使用S-D5连接至PWM引脚,起跑线检测模块由两个TCRT5000以及一个LM339组成。无线数据传输通过NRF24L01进行数据传输。

智能车由路径传感器采集得到前方道路的图像,从中提取出有用信息,判断所处的跑道类型(直道,大弯道,S弯道),确定小车的舵机转向及车速。从而通过电机和舵机驱动小车流畅地在跑道上行进。系统框图如图1所示。

2 软件算法总体设计

本方案中,以IAR为开发工具,系统软件设计包括以下几个方面:系统初始化、视频图像信号采集、小车的方向(舵机)控制和速度(电机)控制。系统软件流程罔如图2所示。

3 图像采集

OV7620是CMOS彩色/黑白图像传感器。它支持连续和隔行两种扫描方式,VGA与QVGA两种图像格式;最高像素为664×492;数据格式包括YUV、YCrCb、RGB3种,能够满足一般图像采集系统的要求。

由于芯片处理能力不足以达到PC的运算能力,因此本方案采用了黑白摄像头,由于受片内总线频率的限制,每行能够采集到的点数有限而且图像质量很差,并且会占用CPU大部分的时间,所以我们采用了K60自带的DMA进行数据采集,实践证明,DMA能够采集到绝大多数的点,并且图像质量很好。

为了更好的检测黑线中心位置,要保证单行上有足够的点,为了提高处理速度,可适当降低采样行数,综合了以上条件,最终决定采用100行信息进行方向判断,每幅图像大小限定为180×100。

4 图像识别

摄像头智能车系统是否能辨识正确的方向的关键就是其中的图像识别算法的设计,在本算法中根据采集来的图像,首先进行图像二值化,然后再对二值化后的图像进行去噪处理,得到只含有赛道黑线的图像,再对图像进行图像识别,根据设定的阈值进行方向识别,得到的结果送至舵机控制模块进行舵机的方向控制。基于图像识别算法的路径识别流程图如图3所示。

4.1 黑线提取

二值化是一种广泛使用的图像分割技术,它利用了图像中要提取的目标物与其背景在灰度特性上的差异,把原图像变为仅用两个灰度值表示的图像目标物和背景的二值图像,考虑到所采集的图像目标物(黑色中心线)与背景(白色跑道)的灰度值差异比较明显,采用固定阈值法进行图像的二值化。二值化的实现是由下面的公式来实现:

式中g(x,y)为二值化结果;T为阈值,f(x,y)为原图像的灰度值。

本方案采用固定的阈值进行图像二值化,因为单片机没有足够的时间进行动态阈值计算。因此要确定一个合理的算法来确定一个固定阈值,小车在不同光照条件下的图像阈值不同,因此小车每一次启动时计算一次固定阈值,如图4所示。

4.2 舵机及电机控制算法

提取出图像的中心线以后,需要根据中心线的位置,来判断赛道的类型,区分直道、S型弯道和左转弯和右转弯。利用摄像头识别道路在识别性能方面具有优势,相对于光电和电磁传感器,可以有较远的前瞻距离,赛道信息不是根据单行数据来判断,而是根据每幅图像的多行信息来判断。根据前述,每幅图像采用80行的信息进行判断。

根据二值化图像的结果,以图像重心为界,分别计算边界左右侧白点数目和(式2、式31,然后对左右侧白点数和leftSum,rightSum做差,然后对差值除以行数,得到赛道偏移量(式4),根据偏移量centerAVG大小,centerAVG的大小基本上可以判断当前赛道情况,根据赛道情况,对centerAVG乘以不同的系数k(式5),得到舵机值(式6),然后进行方向控制。

5 结论

文中提出一种基于摄像头的智能循迹车的设计及实现方法,处理简单,占用MCU资源少,执行效率高。文中提到的算法在具有本文特征的其他赛道上也可以使用。通过多次实践,算法正确识别率达93%以上,在实际的大学智能车竞赛中被多次采用,并取得优异成绩。但摄像头的高度和角度还需要进一步的试验、调整以得到更好的图像采集效果,算法仍需进一步优化,以提高系统的稳定性。

本站声明: 本文章由作者或相关机构授权发布,目的在于传递更多信息,并不代表本站赞同其观点,本站亦不保证或承诺内容真实性等。需要转载请联系该专栏作者,如若文章内容侵犯您的权益,请及时联系本站删除。
换一批
延伸阅读

深圳2025年9月3日 /美通社/ -- 全球可穿戴眼动追踪解决方案领军创新企业见臻科技(Ganzin Technology),今日于深圳光博会展隆重发布其突破性的 Gaze2AI™参考设计。该方案基于高性能 AUROR...

关键字: AI 参考设计 TIMES 摄像头

先进驾驶辅助系统 (ADAS)已成为现代车辆的标配功能,能够提升行车安全性和驾驶舒适度。ADAS 功能既包括挡风玻璃摄像头实现的经典紧急制动功能,也涵盖集成泊车辅助功能的多摄像头环视 + 感知系统。这些系统依托 100...

关键字: 图像传感器 ADAS 摄像头

2025年8月28日,中国上海 — 思特威(上海)电子科技股份有限公司(股票简称:思特威,股票代码:688213)近日宣布,全新推出5000万像素1.0μm像素尺寸手机应用CMOS图像传感器——SC562HS。基于思特威...

关键字: CMOS图像传感器 摄像头 智能手机

中国深圳2025年8月25日 /美通社/ -- 今天,全球领先的3D打印机制造商创想三维(Creality)推出K2和K2 Pro两款机型,进一步拓展其旗舰K系列产...

关键字: AI 摄像头 步进伺服 3D打印机

据博主数码闲聊站透露,除华为外,主流国产手机厂商正集体调整影像战略,Pro系列机型仍将延续常规的超大底主摄方案,而在更高端的Ultra系列上,目前仅有一家厂商明确计划继续采用一英寸主摄传感器。

关键字: 摄像头 手机

麦格纳集成式舱内感知系统,正受到越来越多汽车制造商的青睐 舱内感知系统至关重要,它能提供全面、灵敏的安全保障,同时优化驾驶体验 舱内儿童监测等先进功能,能有效保证乘客的安全,避免弱势乘客出现热射病等危险情况...

关键字: 集成 BSP COM 摄像头

2025年7月23日,中国上海 — 思特威(上海)电子科技股份有限公司(股票简称:思特威,股票代码:688213)近日宣布,重磅推出5000万像素1英寸高端旗舰手机应用图像传感器新品——SC5A5XS。此款新品基于思特威...

关键字: CMOS图像传感器 智能手机 摄像头

该生态系统摄像头模块和开发工具基于Microchip的VS700系列串行器/解串器,将助力日本OEM在ADAS应用中加速ASA-ML标准采用

关键字: 摄像头 串行器 解串器

FacePulse是一种实时、非接触式心率监测系统。它只使用一个摄像头和人工智能,通过面部视频来测量你的心率——没有电线,没有可穿戴设备,没有麻烦。

关键字: 摄像头 人工智能 FacePulse 树莓派5

2025年5月22日,中国上海 — 思特威(上海)电子科技股份有限公司(股票简称:思特威,股票代码:688213)近日宣布,全新推出4MP智能安防应用图像传感器——SC4336H。作为思特威基于DSI™-3工艺技术打造的...

关键字: 图像传感器 智能安防 摄像头
关闭