从感知到认知,ST影像技术赋能边缘AI
在半导体技术飞速演进的当下,传统的图像传感器正在经历一场变革。曾经,影像类传感器的核心使命是“记录美好”,通过不断攀升的分辨率和色彩还原度来取悦人类的视觉感知;而今天,随着人工智能、自动驾驶和智能制造的浪潮席卷全球,传感器正在成为机器的“眼睛”和“大脑”的延伸。
作为全球领先的半导体供应商,意法半导体(ST)正敏锐地捕捉到这一历史性的机遇。其影像事业部正在从传统的Time-of-Flight(ToF)和图像传感器供应商,全面升级为“边缘AI时代的高性能3D感知与机器视觉系统供应商”。依托深厚的IDM垂直整合模式、革命性的3D堆叠工艺以及超表面透镜等前沿光学创新,ST正以最新发布的VL53L9CX高分辨率一体化dToF LiDAR为代表的FlishtSense和关键技术升级的BrightSense系列为核心抓手,重塑从智能手机到机器人、汽车座舱及工业自动化的视觉感知边界。
战略跃迁:从智能手机核心向高增长新兴市场
意法半导体的影像业务历史可以追溯到25年前。在这段跨越四分之一个世纪的征程中,ST经历了从服务诺基亚时代的影像模块到如今引领智能感知市场的转变。过去,智能手机是影像传感器绝对的业务重心,ST凭借在激光自动对焦、人体存在检测等领域的领先地位,实现了海量的产品出货。然而,面对日新月异的市场环境,ST意识到单纯依赖消费电子市场的增长已不足以支撑未来的愿景,必须向更高增长、更高技术门槛的新兴领域拓展。
意法半导体影像子事业部,模拟、电源与分立器件、MEMS 与传感器事业部执行副总裁 Alexandre Balmefrezol 在近日的发布会上明确指出:“如果我们关注的是成像传感器的话,首先成像传感器它产生了大量的数据,不仅能够捕捉传统的图像,还能够实现传感数据的传输。包括深度传感、接触式传感,以及包括超越人类视觉可见的数字传感能力。”。这一表态深刻揭示了ST战略转型的底层逻辑:影像传感器不再仅仅是捕捉光的工具,而是产生高价值传感数据的源泉。
这种战略转型具体表现为业务版图的全面扩张。ST目前在巩固智能手机后置摄像头、PC及笔记本电脑等核心业务的同时,正全力向高速增长的细分市场渗透。这其中包括日益智能化的汽车工业,特别是针对座舱内部的安全监控与交互需求;也包括新兴的机器人技术和人工智能领域,这些领域要求传感器具备极高的环境感知能力和实时数据处理能力。ST的目标不仅是提供一颗芯片,更是要通过差异化的产品和解决方案,为客户带来系统级的价值创造,从而在激烈的市场竞争中脱颖而出。
VL53L9CX:定义一体化激光雷达模组的新高度
在本次媒体会上,VL53L9CX一体化激光雷达模组无疑是最亮眼的明星产品。这款在年初斩获CES创新奖的产品,不仅是ST在dToF(直接飞行时间)技术领域的集大成之作,更是其迈向系统方案商的进一步开拓。VL53L9CX的设计理念完全颠覆了传统LiDAR系统复杂的集成模式,将激光发射器、单光子雪崩二极管(SPAD)接收阵列以及片上处理单元集成在一个微型化的、可回流焊的模组中。
意法半导体影像子事业部飞行时间(Time-of-Flight)与环境光感应产品线经理 Laurent PLAZA 对这款产品的性能表现充满信心。他特别强调:“这款产品它拥有54度乘42度的测距区,同时最大的测距距离达到了9米,最高帧率达到了100帧每秒。”。这意味着VL53L9CX能够在极短的时间内捕捉到高密度的深度信息,为高速移动的物体检测提供可靠的数据支持。更重要的是,这款产品采用了先进的超表面透镜技术,使其在拥有72度对角线视场角的同时,依然保持了极高的角分辨率,在某些应用场景下甚至能达到1度的精度。
VL53L9CX的另一大优势在于其对隐私的天然保护以及对边缘AI的极度友好。由于其输出的是深度图和红外灰度流,而非高分辨率的彩色图像,它在智能家居、办公场所等对隐私敏感的场景中具有得天独厚的优势。同时,由于其片上已完成了复杂的测距算法,输出的数据量适中,这使得它能够与相对低算力的小型化微控制器(如STM32H5)进行无缝对接,在无需昂贵GPU或高端应用处理器的情况下,即可实现复杂的人体姿态识别、跌倒检测和物体跟踪功能。这种“传感器+轻量化AI”的组合,正是ST助力客户快速产品化、降低系统成本的核心武器。
FlightSense系列的长期技术演进与市场领导力
作为ST的传统优势领地,FlightSense产品家族的演进史实际上就是一部微型ToF技术的革新史。从最初仅有50厘米测距能力的初代产品,到如今能够覆盖10米范围、具备2300个测距点的先进LiDAR,ST在过去十二年间持续推高技术天花板。这种长期的积累使得ST在ToF市场占据了无可动摇的领导地位,其全球累计出货量已超过30亿颗,稳居全球第一。
意法半导体影像子事业部个人电子、工业及大众市场业务线总监 David Maucotel 回顾了这一漫长而辉煌的历程。他提到:“我们是一支充满激情的工程师团队,对影像有着非常深刻的技术了解。我们的故事源于25年前,当时我们在苏格兰收购了爱丁堡大学孵化的一家初创公司。” (指的是Vision,全称 VLSI Vision Ltd)。正是这种深厚的技术积淀,让ST能够从制程工艺、电路设计到系统集成进行全方位的创新。
FlightSense技术的飞跃受益于多方面的突破。首先是半导体制程的演进,ST将ToF传感器的制程从早期的100纳米级一路推进到最先进的40纳米甚至更先进的制程,并引入了3D堆叠技术。其次是SPAD像素尺寸的持续缩小,从传统的16微米缩小到10微米乃至更小,从而在有限的芯片面积内实现了更高的空间分辨率。与此同时,ST还开发了独特的背景光抑制算法和多路径干扰抵消技术,使得FlightSense产品能够在强烈的阳光下或复杂的室内反射环境中,依然保持精准的测距性能。如今,该系列产品已广泛应用于手机激光对焦、PC人体感应、无人机避障等多个领域,成为3D传感技术的行业标杆。
据悉,当前3D ToF传感器可服务市场规模 6 亿颗;而ST已经累计出货超 30 亿颗。
BrightSense系列:计算视觉与超低功耗的融合策略
如果说FlightSense关注的是“距离”,那么BrightSense系列则聚焦于“认知”。作为专门为计算机视觉设计的传感器家族,BrightSense系列在追求高画质的同时,更强调在边缘端实现智能、高效的图像捕捉与处理。该系列产品广泛应用于工业条码读取、生物识别、增强现实(AR)以及物联网视觉监控等领域。
意法半导体影像子事业部个人电子、工业及大众市场相机传感器产品线经理 Nicolas ROUX 指出了机器视觉与传统摄影的本质区别。他认为:“其实视觉对于机器理解上下文和环境来说是一个非常重要的数据的输入,也是用户视觉模式的一个关键的情境信息源。”。为了满足这一需求,BrightSense系列引入了诸如全局快门(Global Shutter)技术和高量子效率的近红外(NIR)成像能力。
全局快门技术是解决高速运动物体拍摄畸变的关键。在BrightSense的旗舰产品中,用户可以在全局快门和卷帘快门模式之间根据场景自由切换,既能在低速高动态场景下获得极致的画质,又能在高速运动场景下精准捕捉物体的轮廓。此外,针对电池供电的物联网设备,BrightSense系列展现了卓越的低功耗管理能力。通过内置的自动唤醒和场景变化检测模式,传感器可以长时间处于待命状态,仅在检测到运动事件时才激活后续的分析系统。这种“时刻待命、极低功耗”的特性,解决了智能穿戴设备和分布式传感器网络在续航与性能之间的矛盾,为边缘AI视觉的普及铺平了道路。
据悉,当前CIS图像传感器总市场规模320 亿美元,而ST的可服务市场规模可达到40亿美元。
在BrightSense系列的战略版图里,意法半导体不仅关注图像的捕获,更关注传感器如何成为边缘侧人工智能的“高效感官”。为了将这种“智能视觉”理念落地到具体行业,意法半导体通过Vx1943与VD65G4/VD55G4这两组差异化的产品组合,分别针对高精度交通/机器人场景以及极致便携的穿戴式设备,交出了两份不同的技术答卷。接下来我们一一介绍。
Vx1943:集成RGB-IR分光技术,定义智慧城市与机器人视觉的高精度标准
在追求机器视觉识别精度与系统灵活性平衡的过程中,意法半导体推出的500万像素成像解决方案Vx1943,展现了极强的技术竞争力。该传感器采用背照式(BSI)全局快门技术,最大的技术亮点在于实现了“片上RGB-IR智能分光”。这意味着仅需一颗传感器,即可在没有机械滤光片(IR-cut filter)的情况下,同时捕获彩色和近红外图像,极大地简化了工业与交通安防设备的硬件设计。
意法半导体影像子事业部个人电子、工业及大众市场相机传感器产品线经理 Nicolas ROUX 详细解释了这一技术的应用价值,他表示:“它是一种可以实现全局快门和卷帘快门在高帧率下随意切换的解决方案。”。这种灵活性在智慧城市监控中表现得尤为突出,通过RGB与近红外(NIR)的智能分光技术,传感器可以在白天输出高质量的彩色图像流,而到了夜间则自动切换至清晰的近红外影像。“白天的时候的话可以使用标准的RGB流,夜间的时候的话可以使用近红外的一个照明。无需特定的一个机械的一个滤光器,就可以实现清晰的影像的捕捉。” 针对交通监控场景Nicolas ROUX 进一步补充道:“500万像素的一个分辨率,甚至可以实现单设,就能覆盖2到3个条车道。
Vx1943的强大性能也得到了行业合作伙伴的高度评价。Appro Photoelectron 影像产品经理 Ivan Liu 曾评价:“无惧雨天、强光、暗夜,VD1943传感器精准捕捉每一处细节,经过高速路况实测验证,为各个行业带来高性能边缘 AI。”。而在机器人视觉领域,Leopard Imaging 公司市场主管 Ariel Zhang 则指出:“Leopard Imaging 选用 ST 的 Vx1943 图像传感器的原因是,该器件具备出色的背照式全局快门性能与画质,给机器人及人工智能带来高准确度的立体视觉系统。”。该传感器凭借嵌入式HDR和高感光灵敏度,正广泛开启工厂自动化、无人机和人形机器人等视觉新赛道。
VD65G4与VD55G4:极致能效赋能“时刻待命”的边缘AI视觉
针对可穿戴设备、智能眼镜及物联网边缘端对尺寸与功耗的极端挑战,意法半导体BrightSense产品家族推出了VD65G4与VD55G4系列传感器。这两款产品主打小尺寸(1/9英寸感光单元)与极致能效,其800×700的分辨率专为适配边缘AI算法识别而设计,避免了冗余数据带来的功耗负担。
Nicolas ROUX 强调了该系列产品在捕捉动态画面时的卓越表现:“它是全局快速的高效高速成像,无异变。并且的话它的分辨率达到了184FPS。”为了解决可穿戴设备“时刻待命”的续航痛点,这两款传感器集成了极其智能的电源管理逻辑。Nicolas ROUX 详细说明了 BrightSense 系列独特的智能电源管理逻辑。他指出,理想的视觉方案应赋予传感器足够的自主智能,使其能够独立完成环境监测。该系列传感器在极低功耗的“时刻待命”模式下持续运行,监测功耗仅维持在 1 至 2 mW。一旦传感器在本地检测到场景发生显著变化或特定事件,便会立即输出信号唤醒主处理器进行后续处理。这种设计在保障系统实时响应的同时,大幅降低了不必要的系统唤醒,从而实现了能效利用的最大化。
此外,VD65G4与VD55G4不仅是传感器,更是具备初级预处理能力的智能单元。它们支持“片上噪声去除”与“背景去除”等创新成像模式,能够在不增加主处理器负载的情况下优化识别数据。Nicolas ROUX 提到:“在无需额外增加功耗和延迟的情况之下,能够实现标准拍摄NLL补光拍摄和背景。” 这种特性使其能够通过SPI或I3C接口,与内置NPU的STM32N6或超低功耗的STM32U3微控制器形成完美的系统级联动。无论是在仅有2mW自动唤醒功耗的智能门禁,还是在需要全天候感测的智慧家居中,该系列传感器都通过软硬件的深度协同,实现了感知性能与能源消耗的最佳平衡。
SafeSense系列:为汽车座舱构建安全感官系统
随着汽车行业向电动化、智能化迈进,座舱内部的感知需求呈现出爆发式增长。监管机构对于驾驶员监控系统(DMS)和乘客监控系统(OMS)的要求日益严苛。ST为此专门推出了SafeSense系列产品,旨在满足汽车行业最高的安全合规要求。
SafeSense传感器不仅具备极高的灵敏度,能够在近红外光谱下实现高对比度成像,确保在黑暗驾驶环境中依然能清晰监测司机的状态;更重要的是,其设计严格遵循了功能安全标准。通过集成在座舱内部,SafeSense可以实时分析司机的面部特征,识别出困倦、分心等危险行为,并发出及时警告。此外,它还能感应车内是否有儿童或宠物被遗留,从而提供全方位的车内安全保障。与ST的汽车处理器和电源管理芯片配合,SafeSense构成了一套完整的座舱传感解决方案,通过系统级的优化,降低了整车的电子架构复杂度,同时提升了响应速度和可靠性。
据悉,当前ST的汽车座舱内部监测图像传感器可服务市场约5000 万颗,而ST的目标是拿下30%的市场份额。
IDM垂直整合模式与3D堆叠工艺的技术支撑
意法半导体之所以能够在影像传感领域保持持续的差异化竞争优势,其核心驱动力在于坚持IDM(集成器件制造)的垂直整合模式。在影像传感器这样一个极度依赖工艺与设计协同的领域,IDM模式让ST能够实现从像素设计、晶圆制造、彩色滤光片沉积、超表面透镜开发到后端封装测试的全链条自主掌控。
Alexandre Balmefrezol 在介绍公司优势时特别提到了这一点:“这是由于我们是一家从传感器芯片到系统集成都能够带来价值的IDM的供应商。我们也能够是在市场当中展示出产品和解决方案的差异化。”。这种模式不仅能加快创新周期,更能确保在供应链波动时保持极强的业务韧性。
而在具体的技术实现上,3D堆叠异构集成工艺是ST的一张王牌。通过将顶层的像素阵列金源与底层的逻辑处理金源进行垂直堆叠,ST实现了在极小尺寸内集成复杂的数字计算、图像信号处理(ISP)乃至AI加速器。这种架构不仅缩短了信号传输路径、降低了功耗,还允许在传感器内部直接完成如背景去除、特征提取等复杂的预处理任务。此外,ST在光学领域的另一项黑科技是超表面透镜(Metasurface Lens)技术的产业化。通过利用亚波长尺寸的微结构来控制光线的相位和振幅,ST可以制造出厚度仅为微米级、重量极轻、且具备出色光学性能的平面透镜。这一创新彻底改变了传统多片式光学模组庞大且脆弱的局限,为智能眼镜、微型机器人等空间极度受限的应用场景提供了可能。
多领域应用场景的技术适配与生态联动
ST的愿景不仅在于提供先进的硬件,更在于通过广泛的生态合作,将技术转化为解决实际问题的价值。在工业领域,VL53L9CX被智慧农业公司BarnTools应用于粮仓体积流转监测系统。利用dToF技术的高精度和抗干扰能力,该系统可以在灰尘飞扬的环境中准确计算仓储物资的数量,实现了农业管理的数字化。在机器人领域,ST与Leopard等合作伙伴共同开发了基于BrightSense传感器的双目立体视觉方案,为仿人机器人提供了深度感知与场景理解能力。
Laurent PLAZA 在分享实际用例时提到,ST非常注重与STM32生态系统的联动。例如,通过将ToF传感器与STM32H5 MCU结合,开发出能够识别跌倒姿态且保护隐私的康养监控方案。他指出,尽管硬件算力有限,但通过算法优化:“这些所有的算法都是直接在STM32H5 MCU上来进行运行的。而H5的话它其实本身是没有配备AR硬件的加速器的。”。这意味着即使在资源有限的嵌入式平台上,ST也能通过软硬件的高度协同,输出强大的AI应用能力。
此外,ST还通过“ST合作伙伴计划”积极拓展外部朋友圈。无论是在智能建筑中的人数统计、商超零售中的货架分析,还是智能眼镜中的手势跟踪,ST都提供了详尽的参考设计和交钥匙方案。这种全方位、多层级的技术适配策略,使得ST的影像产品不再是孤立的元器件,而是能够快速集成进各种异构计算系统的智能模块,极大地降低了开发者进入AI时代的门槛。
结语:从感知到认知的影像未来
回顾本次新产品发布和新技术分享,意法半导体影像事业部的升级路径清晰可见:这不仅仅是从单点传感器向一体化模组的进化,更是从“光电转换”向“边缘决策”的跨越。在全球追求智能化、自动化的大背景下,影像数据已成为最核心的生产要素。ST凭借FlightSense、BrightSense和SafeSense三大产品家族,构建了覆盖三维深度信息、高效机器视觉与严苛安全感知的全场景矩阵。
正如Alexandre Balmefrezol 在总结中所强调的,ST正致力于让传感器成为人工智能时代的赋能者。通过将顶尖的光学创新、先进的3D堆叠工艺与灵活的IDM模式深度融合,意法半导体不仅在传统的智能手机和PC市场保持领先,更在机器人、自动驾驶和工业物联网的星辰大海中扬帆起航。在未来的万物智联世界中,ST的影像传感器将不仅是机器的“眼睛”,更是链接物理世界与数字孪生的关键纽带,通过可信的数据与高效的算力,开启感知智能的新纪元。





