当前位置:首页 > 瑞萨电子
[导读]基于深度学习的视觉处理,可实现高精度及低功耗的解决方案

2019年9月26日,日本东京、美国加州圣何塞讯-全球领先的半导体解决方案供应商瑞萨电子株式会社,与具备深度学习专业知识的自动驾驶视觉处理技术解决方案提供商StradVision今日宣布联合开发基于深度学习的视觉处理解决方案,用于下一代高级驾驶辅助系统(ADAS)的智能摄像头,适用于ADAS Level 2及以上级别。

瑞萨电子与StradVision合作开发采用深度学习进行物体识别的智能摄像头解决方案.jpg

为了避免在城市地区发生的常见危险,下一代ADAS需具备高精度视觉处理能力,能够检测出行人和骑行者等所谓弱势道路使用者(VRU)。同时,对于大众市场的中低端车辆,这些系统必须实现非常低的功耗。瑞萨与StradVision的全新解决方案同时实现了这两个目标,旨在加速ADAS的广泛应用。

瑞萨电子汽车技术客户合作事业部副总裁吉田直树表示:“作为视觉处理技术的领导者,StradVision在应用瑞萨R-Car SoC开发ADAS解决方案方面拥有丰富经验。通过此次合作,我们带来了量产级解决方案,面向未来打造安全和精准的移动性能。这一基于深度学习的全新合作解决方案针对R-Car SoC进行了优化,将有助于下一代ADAS的广泛采用,并可支持未来几年内不断提升的视觉传感器要求。”

StradVision首席执行官Junhwan Kim表示:“StradVision很高兴能够与瑞萨联手,帮助开发人员有效推进ADAS的下一次重大飞跃。这一共同努力不仅可以转化为快速有效的评估方案,而且将大大提升ADAS的性能。未来几年中,预计前置摄像头市场将会大规模增长,StradVision和瑞萨联手打造优势技术,无疑将保持双方在该领域的领先地位。”

StradVision基于深度学习的视觉处理软件为车辆、行人和车道的识别等提供了高性能。该高精度视觉处理软件已针对瑞萨R-Car汽车片上系统(SoC)产品R-Car V3H和R-Car V3M进行了优化,而R-Car系列产品已在量产车型中拥有良好的应用业绩。以上R-Car系列产品搭载了CNN-IP(卷积神经网络知识产权)深度学习处理专用引擎,使其能够以最低功耗高速运行StradVision的SVNet汽车深度学习网络。此次合作开发的视觉处理解决方案实现了基于深度学习的视觉处理能力,同时保持了低功耗,使其适用于量产车辆,进而推动ADAS的采用。

基于深度学习的视觉处理解决方案的关键特性:

(1) 解决方案同时支持早期评估及量产车型

StradVision的SVNet深度学习软件是一款强大的AI感知解决方案,用于量产的ADAS系统。它因在弱光环境下的识别精度和识别对象被其它物体部分遮挡时的处理能力而备受关注。R-Car V3H的基本软件包可同时执行车辆、人员与车道的识别,以每秒25帧的速度处理图像数据,实现快速评估和POC开发。以这些功能作为基础,如果开发人员希望通过添加符号、标记和其它物体作为识别物体来定制软件,StradVision可为基于深度学习的视觉处理提供支持,面向量产车辆,涵盖从培训到软件嵌入的所有步骤。

(2) R-Car V3H和R-Car V3M SoC在降低成本的同时提升了智能摄像头系统的可靠性

除了CNN-IP专用深度学习模块,瑞萨R-Car V3H和R-Car V3M还搭载了IMP-X5图像识别引擎。将基于深度学习的复杂物体识别与高度可验证的图像识别处理同人为规则相结合,使设计人员能够构建一个强大的系统。此外,方案还设计了片上图像信号处理器(ISP)对传感器信号进行转换,用于图像渲染和识别处理,从而可以采用无内置ISP的低成本摄像头进行系统配置,以降低BOM成本。

供货信息

采用全新联合开发的深度学习解决方案的瑞萨电子R-Car SoC(包括StradVision的软件与开发支持),计划于2020年初向开发人员供货。


换一批

延伸阅读

[汽车电子技术文库] 车用计算机再进化 Domain Controller及Centralized架构各有所长

车用计算机再进化 Domain Controller及Centralized架构各有所长

随著汽车导入ADAS、甚至自驾等复杂功能,车用计算机设计亦需符合此需求,为让车子所接收到的讯息能得到最佳化的处理及运算,汽车业者提出来的车用计算机架构包含网域控制器(Domain Controller)及集中式(Centralized...

关键字: 自动驾驶 adas 车载计算机

[汽车电子技术文库] 保证ADAS的运行安全性,从而避免驾驶安全问题

保证ADAS的运行安全性,从而避免驾驶安全问题

“Advanced Driver Assistance System”高级驾驶员辅助系统——包括ACC自适应巡航、AEB自动制动系统、车道偏离预警系统、车道保持系统、盲区监测系统等&md...

关键字: 汽车电子 adas

[功率器件] 你知道基于NXP产品的ADAS域控制器系统解决方案吗?

你知道基于NXP产品的ADAS域控制器系统解决方案吗?

什么是基于NXP产品的ADAS域控制器系统解决方案?它有什么作用?2019年10月22日,致力于亚太地区市场的领先半导体元器件分销商---大联大控股宣布,其旗下世平推出基于恩智浦(NXP)S32V234 + MPC5744P的AD...

关键字: NXP adas 大联大世平集团

[汽车电子技术文库] ADAS在欧洲的发展现状与影响ADAS装配率的原因

ADAS在欧洲的发展现状与影响ADAS装配率的原因

欧洲不仅是世界汽车工业重镇,也是最大的 ADAS 市场。广义来说,所有协助驾驶员进行驾驶,保证驾驶安全、驾驶舒适以及交通顺畅的智能系统都被欧盟视为 ADAS。 从 2013 年开始,欧盟要求新车必须装配电子稳定控制(ESC)与...

关键字: 自动驾驶 adas

[汽车电子技术文库] 视觉ADAS解决方案大比拼,准备好为你爱车雇一个保镖了吗?

视觉ADAS解决方案大比拼,准备好为你爱车雇一个保镖了吗?

1885年,当奔驰一号驰骋在夕阳下,谁能想到这一开就开出一个未来。现如今各色各样的小轿车早已成了马路上的勇士,风驰电掣好不痛快。汽车安全出行理念随着科技的进步而升级,高级驾驶辅助系统(ADAS)市场的战火越烧越旺,其中适合于汽车行业的...

关键字: adas

瑞萨电子

55 篇文章

关注

发布文章

技术子站

关闭