当前位置:首页 > 原创 > 21ic专访
[导读] 赛灵思(Xilinx)面向广泛的视觉导向机器学习应用领域推出Xilinx reVISION堆栈。作为赛灵思推出的一个崭新的品牌形象, reVISION 堆栈解决方案进一步补充和完善了其近期发布的面向云端主流应用的可重配置加速堆栈,将

 赛灵思(Xilinx)面向广泛的视觉导向机器学习应用领域推出Xilinx reVISION堆栈。作为赛灵思推出的一个崭新的品牌形象, reVISION 堆栈解决方案进一步补充和完善了其近期发布的面向云端主流应用的可重配置加速堆栈,将Xilinx技术在机器学习应用领域的部署从云端扩张到了更广泛的从终端应用领域。

重磅出击,创新品牌打通广泛应用障碍

Xilinx在视觉领域已经赢得了众多客户,其中40余家正在运用机器学习进行设计。以汽车行业为例,全球已经有23 家汽车制造商在 85 款不同车型的 ADAS 系统中部署了高级嵌入式视觉系统,另外还有其它数百家嵌入式视觉客户在数千种应用中也部署了赛灵思的先进嵌入式视觉系统。在这些市场中,差异化至关重要,系统必须具备最高响应速度、最新算法和快速的传感器部署,大约三分之二的视觉导向半导体应用属于这个市场,其中包括传统的高端消费市场、汽车、工业、医疗和航空航天与国防等。这些应用正从嵌入式视觉向视觉导向的自主系统升级,新一代应用包括和工人一起工作的协作机器人、具有“感应和躲避”功能的无人机、增强现实、自动驾驶汽车、自动化监控和医疗诊断等。这些都需要智能性及高效的立即响应性、升级到最新算法和传感器的灵活性,以及随时与其他机器和云保持连接。

Xilinx战略与市场营销高级副总裁 Steve Glaser表示:“Xilinx能够不仅支持从传感器到小于8位推断与控制的全程优化,还能够支持最新网络和传感器的可重配置性,并提供任意连接的能力,正满足了这些应用对响应性、可重配置性和连接性的需求。以往,Xilinx器件的这些优势只有那些拥有硬件或者RTL设计专长的专业用户才能受益,对于更广泛的应用和支持使用行业标准库和框架进行软件定义编程,还存在障碍。reVISION堆栈的推出,有效解决了这个通往广泛应用的障碍。”

1.jpg

图:赛灵思公司战略与市场营销高级副总裁Steve Glaser

Xilinx reVISION 堆栈包括平台、算法和应用开发所需的丰富的开发资源,可支持最流行的神经网络,包括AlexNet、GoogLeNet、SqueezeNet、SSD和 FCN。此外,该堆栈还提供了库元素, 包括 CNN 网络层的预定义的优化型实现方案,这也是构建定制神经网(DNN/CNN)所必需的。机器学习元素配合丰富的满足加速要求的 OpenCV 系列功能用于计算机视觉处理。对应用层开发来说,Xilinx支持业界标准的框架,包括用于机器学习的 Caffe 和用于计算机视觉的 OpenVX。reVISION 堆栈还包括赛灵思及第三方提供的开发平台,诸如各种类型的传感器。

因此,reVISION堆栈能够支持更广泛的嵌入式软件和系统工程师,使其即使没有或者很少硬件设计专业知识也可以使用赛灵思技术更轻松、更快速地开发视觉导向的智能系统。在单个 Zynq SoC 或 MPSoC 上开发出嵌入式视觉应用,一旦将机器学习、计算机视觉、传感器融合和连接的优势融为一体,工程师将从中大受裨益。

剑走偏锋,决胜于CPU/GPU短板

reVISION 支持以最快速度发展到响应速度最快的视觉系统,和现有的计算嵌入式 GPU 和典型 SoC相比,其机器学习推断的单位功耗图像捕获速度提升了 6 倍,计算机视觉处理的单位功耗帧速度提升了40倍,时延降低为1/5。Glaser告诉21ic记者,这些数据是针对硬件知识有限的工程师,如果是硬件专家,则更多是依据Zynq SoC芯片的优势,借助reVISION可以实现双倍性能提升,例如其时延可以实现1/12,在机器学习的单位功耗图像捕获速度能够提升10倍,在计算机视觉方面,每帧每秒每瓦这个指标上能够达到100倍的优化。

拥有速度极快的确定性系统响应时间有什么好处呢?在高级辅助驾驶应用中,一辆汽车采用赛灵思基于 Zynq SoC 的reVISION 与采用 Nvidia Tegra 的汽车一起识别潜在的碰撞并采取刹车,在速度为 65mph 情况下,根据 Nvidia器件的具体实现方案,赛灵思的响应时间可以让汽车在5到33英尺的距离停下,从而轻松实现安全刹车,避免碰撞。

Glaser表示:“我们从端到云看到来自机器学习应用领域的巨大兴趣,而且我们也相信赛灵思对堆栈开发持续的投入能加速主流应用。今天,成百上千的嵌入式视觉客户都借助赛灵思技术实现了性能和时延 10 倍以上的提升。新增reVISION 之后,成千上万的客户也将受益于上述种种优势。”

客户追捧, reVISION 为视觉导向机器学习应用铺平道路

Eyetech Digital Systems 公司 CEO 兼创始人 Robert Chappell 指出:“我们的眼部跟踪科技采用 Zynq SoC 支持高清视觉分析功能,让 ALS 等各种瘫痪病人受益匪浅。新型reVISION 堆栈借助机器学习的力量为算法开发提供了各种新的机会。这必将支持我们进一步扩展我们的人机交互硬件产品,并提升我们核心眼部跟踪产品的价值。”

Xilinx中国本地客户也对reVISION寄予厚望。为无人机/机器人、安防监控和数据中心提供嵌入式视觉解决方案的深鉴科技(DeePhi)创始人兼CEO姚颂表示:“我们已经开发了一个完整的工作流程,用于在FPGA上部署深度学习算法,实现算法、软件和硬件的协同优化。在未来,我们希望真正赋予万物智能,而赛灵思的全可编程技术将支持我们不断地适应和重新配置系统以实现这个目标。reVISION堆栈中所包含的完整的工具包,可以让我们的客户更加轻松容易地利用全可编程FPGA和SoC—即使是没有任何FPGA开发背景的算法工程师也能有效地部署经过训练的模型。这对于利用FPGA搭建智能解决方案有莫大的好处。”

随着神经网络、算法和传感器技术和接口标准不断加速发展,可重配置性对“适应未来的”智能视觉化系统至关重要。凭借reVISION堆栈所独有的可重配置性和任意连接优势,开发人员能够快速开发和部署升级,更快完成从嵌入式视觉向视觉导向的自主系统的升级。

本站声明: 本文章由作者或相关机构授权发布,目的在于传递更多信息,并不代表本站赞同其观点,本站亦不保证或承诺内容真实性等。需要转载请联系该专栏作者,如若文章内容侵犯您的权益,请及时联系本站删除。
换一批
延伸阅读

【2024年4月24日,德国慕尼黑讯】英飞凌科技股份公司(FSE代码:IFX / OTCQX代码:IFNNY)发布全新PSOC™ Edge微控制器(MCU)系列的详细信息,该系列产品的设计针对机器学习(ML)应用进行了优...

关键字: 物联网 机器学习 MCU

TDK株式会社(东京证券交易所代码:6762)新近推出InvenSense SmartEdgeMLTM解决方案,这是一种先进的边缘机器学习解决方案,为用户提供了在可穿戴设备、可听戴设备、增强现实眼镜、物联网 (IoT)...

关键字: 机器学习 物联网 传感器

北京——2024年4月19日 亚马逊云科技宣布,Meta刚刚发布的两款Llama 3基础模型Llama 3 8B和Llama 3 70B现已在Amazon SageMaker JumpStart中提供。这两款模型是一系列...

关键字: 机器学习 基础模型

2024年4月18日 – 提供超丰富半导体和电子元器件™的业界知名新品引入 (NPI) 代理商贸泽电子 (Mouser Electronics) 很荣幸地宣布与Edge Impulse建立新的全球合作关系。Edge Im...

关键字: 机器学习 MCU CPU

北京——2024年4月18日 西门子中国和亚马逊云科技双方高层在西门子中国北京总部会晤,双方宣布签署战略合作协议,共同成立“联合创新团队”。基于亚马逊云科技在生成式AI领域的领先技术和服务,并结合西门子在工业领域的深厚积...

关键字: 生成式AI 机器学习 大数据

机器学习作为人工智能领域的重要组成部分,其过程涉及到多个核心环节。本文将详细阐述机器学习的四个主要步骤:数据准备、模型选择、模型训练与评估,以及模型部署与应用,以揭示机器学习从数据到应用的完整流程。

关键字: 数据 人工智能 机器学习

随着信息技术的迅猛发展和大数据时代的到来,机器学习成为了人工智能领域中的核心技术之一。机器学习是通过模拟人类学习行为,使计算机系统能够从数据中自动发现规律、提取特征并进行预测和决策的过程。它在诸多领域取得了广泛的应用,包...

关键字: 计算机 人工智能 机器学习

机器学习算法是人工智能领域中的核心技术之一,它通过对大量数据进行学习,自动发现数据中的规律和模式,从而实现对新数据的预测、分类、聚类等任务。本文将深入探讨机器学习算法的基本过程,包括数据准备、模型选择、训练与评估等关键步...

关键字: 数据 人工智能 机器学习

随着大数据时代的到来,数据处理成为了一项至关重要的任务。传统的数据处理方法往往面临着效率低下、准确性不高等问题,而机器学习技术的兴起为数据处理带来了全新的解决方案。本文将深入探讨机器学习在数据处理中的应用,并分析其优势和...

关键字: 数据处理 计算机 机器学习

机器学习是人工智能领域的一个重要分支,它使用各种算法来使计算机系统能够从数据中学习和改进,而无需进行明确的编程。在机器学习的广阔领域中,有多种算法被广泛应用,每种算法都有其独特的适用场景和优势。本文将详细介绍机器学习中的...

关键字: 机器学习 人工智能 计算机
关闭
关闭