当前位置:首页 > 半导体 > 瑞萨电子
[导读]全新方案在物联网和边缘应用中,实现对嵌入式视觉AI系统的低功耗语音控制操作

2021 年 7 月 28 日,日本东京和美国加州尔湾讯 - 全球半导体解决方案供应商瑞萨电子集团(TSE:6723),和致力在边缘设备领域推动低功耗智能语音及传感器处理技术的深度学习芯片技术供应商Syntiant今日宣布,共同开发出一款语音控制的多模态AI解决方案,在基于视觉AI的物联网和边缘系统(如自助收银机、安全摄像头和视频会议系统)以及智能家电(如扫地机器人等)中实现低功耗、非接触式的图像处理。

全新解决方案结合了瑞萨RZ/V系列视觉AI微处理器(MPU)和低功耗多模态、多功能Syntiant NDP120 Neural Decision Processor™,以提供先进的语音和图像处理功能。该解决方案具备常开功能,可从待机模式快速通过语音激活,以执行物体识别、面部识别等视觉任务,以及其它安防摄像机等系统的关键功能。如当用户定义的语音提示激活并运行系统时,视觉AI将识别跟踪操作员的行为,并控制操作或在检测到可疑行为时发出警告。

多模态架构使得为基于视觉AI的系统创建非接触式用户体验变得更加容易。由于可以独立于视觉AI功能进行软件开发,因此利用专用的高能效芯片进行语音识别可降低待机功耗,并加速系统开发。

瑞萨电子高级副总裁、物联网及基础设施事业本部SoC事业部部长新田启人表示:“我们预计,作为提高易用性和安全性的一种有效途径,对采用多输入信息流(包括图像和语音)的多模态系统需求将会增加。拥有先进低功耗图像AI技术的瑞萨与语音AI技术优秀供应商Syntiant紧密合作,将加速低功耗、超小型智能语音AI技术在嵌入式系统中的应用,并为全球客户带来新的综合解决方案。”

Syntiant CEO Kurt Busch表示:“基于语音的用户界面让客户获得全新用户体验,将下一代创新理念从概念变为现实。我们的深度学习NDP全球出货量已超过1500万片,为各类消费和工业物联网应用实现了常开语音功能。我们同瑞萨的合作打造了强大、低功耗的语音及图像解决方案,相信它将会加速推动全球客户在丰富设备和案例中的应用。”

用于视觉AI的瑞萨RZ/V系列MPU集成了瑞萨独有的DRP-AI(动态可配置处理器-AI)加速器,并将高精度AI推理与业界领先能效充分结合。卓越能效可消除对散热片或冷却风扇等散热措施的需求,从而降低材料清单(BOM)成本,使视觉AI集成至广泛的嵌入式应用成为可能。

Syntiant NDP120芯片集成了复杂的AI功能,可用于众多高精度免提语音应用,包括演讲人识别、关键词检测、多唤醒词和本地命令识别等。NDP120与Syntiant Core 2™神经网络推理引擎封装,还可同时运行多个应用程序,并将功耗降至1mW电池功率。

全新语音控制多模态AI解决方案作为瑞萨电子“成功产品组合”的一部分,从瑞萨更广泛的产品组合中选取多个相互兼容的器件,为客户构建更高阶的原型设计平台,以加速上市并降低风险。瑞萨“成功产品组合”包含卓越的模拟、电源和嵌入式处理产品组合,可帮助客户加速设计并缩短上市时间。

欲知详情,请下载word文档 下载文档
换一批

延伸阅读

[TsinghuaJoking] 第十六届全国大学生智能汽车竞赛航天智慧物流总决赛暨第二届“航天杯”移动机器人AI创新技术挑战赛圆满举办

第十六届全国大学生智能汽车竞赛航天智慧物流总决赛暨第二届“航天杯”移动机器人AI创新技术挑战赛圆满举办

2021年8月20日至21日,第十六届全国大学生智能汽车竞赛航天智慧物流总决赛暨第二届“航天杯”移动机器人AI创新技术挑战赛圆满线上举办。本次比赛由全国大学生智能汽车竞赛组委会、中国航天科工三院、三院159厂主办,中国航天科工集团增材制造创...

关键字: AI 移动机器人 智慧物流

[瑞萨电子] 瑞萨电子推出全新RA4入门级产品群,通过平衡的低功耗性能和功能集成提供卓越价值,扩展RA MCU

瑞萨电子推出全新RA4入门级产品群,通过平衡的低功耗性能和功能集成提供卓越价值,扩展RA MCU

2021年9月22日,日本东京讯 - 全球半导体解决方案供应商瑞萨电子集团(TSE:6723)今日宣布推出基于Arm® Cortex®-M33内核的新微控制器(MCU)产品群,扩展其32位RA MCU产品家族。新型1...

关键字: 物联网 瑞萨电子 CAN

[智能硬件] 人工智能将带来哪些影响?人工智能的社会价值体现在何处?

人工智能将带来哪些影响?人工智能的社会价值体现在何处?

一直以来,人工智能都是大家的关注焦点之一。因此针对大家的兴趣点所在,小编将为大家带来人工智能的影响以及人工智能在规律预测方面的相关介绍,详细内容请看下文。 一、人工智能影响 在这里,小编将人工智能的影响归结为3个方面。...

关键字: 人工智能 智能机器人 AI

[TsinghuaJoking] 参赛总结与体会 | AI小布丁

参赛总结与体会 | AI小布丁

01 参赛总结  卓老师您好,我们是西安邮电大学参与16届智能视觉组的代表队,很荣幸拿到了今年全国总决赛一等奖的好成绩。下面我将分享我们的参赛总结。Ⅰ.总体分析  相较于15届的AI电磁以及今年的室外越野来说,智能视觉组是一个 全新的AI...

关键字: AI

[Excelpoint世健] 【世说芯品】Microchip推出业界最紧凑的1.6T以太网PHY 可为云数据中心、5G和AI提供高达800 GbE的连接性

【世说芯品】Microchip推出业界最紧凑的1.6T以太网PHY 可为云数据中心、5G和AI提供高达800 GbE的连接性

路由器、交换机和线卡需要更高的带宽、端口密度和高达800千兆位以太网(GbE)的连接,用来处理5G、云服务和人工智能(AI)及机器学习(ML)应用带来的不断增加的数据中心流量。为提供更高的带宽,这些设计需要克服行...

关键字: 数据中心 云数据 AI

瑞萨电子

128 篇文章

关注

发布文章

技术子站

关闭