当前位置:首页 > 物联网 > 物联网技术文库
[导读] 物联网正在不断产生不可思议的数据量。分析师预计,2019年将有266.6亿台物联网设备投入使用。此外,IDC预计,到2025年,物联网设备将产生超过90 zettabytes的数据。 所

物联网正在不断产生不可思议的数据量。分析师预计,2019年将有266.6亿台物联网设备投入使用。此外,IDC预计,到2025年,物联网设备将产生超过90 zettabytes的数据。

所有这些数据意味着什么?

通过流式分析,它意味着可以对拯救生命事件的实时反应。例如,卡车接收关于道路上结冰的数据,然后,卡车不仅可以提醒驾驶员,而且还可以提醒其他车辆结冰的确切位置。

为了使这种实时数据能够以高容量和高速度从物联网传感器和网络操作中不断流入组织,您需要一种不同于传统静态事务数据所需的数据管理解决方案。

以卡车为例。想象一下,冬天的时候,你在路上开着一辆卡车。贵公司为车辆安装了物联网传感器,可持续监控车轮打滑、气温、速度和转速情况。突然,当气温降至冰点以下时,车轮打滑测量值急剧上升,如果卡车或司机能在几毫秒内做出反应,事故就可以避免,如果没有,传感器数据就没有意义。


 

事件流处理

事件流处理系统使您能够通过实时数据清理和分析及时处理这些数据。

让我们定义事件流处理:“事件”是在明确定义的时间发生并记录在数据字段集合中的任何事件; “流”是数据事件的持续流动,或者是从成千上万个连网设备流入企业内部和企业周围的持续数据流;“处理”是指分析数据的行为。

当事件流处理系统管理来自物联网传感器的数据时,它们会执行将原始数据转化为实时操作信息的过程。随着大量数据快速流入系统,事件流处理系统会立即清理、规范和聚合内存中的数据。同时,在这些数据流中编码的实时分析模型将执行分析,以确定特定事件是否相关,并在需要紧急行动时生成即时警报。

实时分析与事后分析

事件流处理系统实时过滤数据。因为这些系统最初存储数据的内存是有限的,所以事件流处理系统决定要丢弃哪些数据或者要保存哪些数据,甚至可能以聚合形式保存,因为多个事件通常比单个事件更具信息性。

例如,当卡车在结冰的道路上有打滑的危险时,网络边缘的实时分析会立即提醒司机减速,甚至自动减速。

相比之下,传统的关系数据库管理系统(RDBMS)存储所有数据,并在事后进行清理和分析。关系数据库管理系统从预定义的来源收集数据,并将其存储在存储系统中,如数据集市。一旦进入存储,数据就会被清理、规范化并整合到数据仓库或Hadoop中。只有这样,用户才能通过报告、历史分析,甚至预测分析和机器学习,从数据中获得意义。

例如,对于事件流处理,如果传感器跟踪气温并且气温保持稳定,则系统不会存储持续的读数。相反,它可能只保留指示变化的读数。

多阶段分析提供了优势

事件流处理为您提供了多个从数据中提取价值的机会。对于传统的数据管理,数据是历史的,不会改变。它可能会在事后进行分析一两次,而不是更多。

事件流处理系统首先实时分析数据,从而能够对事件做出即时响应。然后,您可以实时或接近实时地将来自多个传感器的数据子集带回云端或现场进行跨传感器分析。

假设您希望对整个卡车车队进行分析,以确定在某一海拔处发生的故障情况。如果系统检测到问题,则可能触发车队中所有卡车的大规模维修。

最后,事件流处理系统还将指定的数据存储在数据仓库或Hadoop中。在那里,您可以对现在的历史数据进行可视化分析或可视化统计。

利用数据仓库中的历史数据,您可以使用机器学习算法进行预测性维护。随着时间推移,机器学习算法可以学习模式,指示卡车何时需要维护并提前发现故障。

在多阶段分析的所有步骤中,机器学习可以训练系统更好地预测结果。随着模型的变化,流处理解决方案可以根据需要在边缘、本地或云中更新模型。

流数据允许您在需要时从物联网数据中收集见解,并实时地和历史地识别跨传感器分析的趋势。通过处理边缘数据,组织、个人和社区可以从实时数据提供的见解中受益。这些实时数据有望拯救生命、改善交通状况和危机沟通。

让我们生活在边缘,看看它会把我们带去哪里!
来源:物联网之家

本站声明: 本文章由作者或相关机构授权发布,目的在于传递更多信息,并不代表本站赞同其观点,本站亦不保证或承诺内容真实性等。需要转载请联系该专栏作者,如若文章内容侵犯您的权益,请及时联系本站删除。
换一批
延伸阅读

北京——2024年4月19日 亚马逊云科技宣布,Meta刚刚发布的两款Llama 3基础模型Llama 3 8B和Llama 3 70B现已在Amazon SageMaker JumpStart中提供。这两款模型是一系列...

关键字: 机器学习 基础模型

2024年4月18日 – 提供超丰富半导体和电子元器件™的业界知名新品引入 (NPI) 代理商贸泽电子 (Mouser Electronics) 很荣幸地宣布与Edge Impulse建立新的全球合作关系。Edge Im...

关键字: 机器学习 MCU CPU

北京——2024年4月18日 西门子中国和亚马逊云科技双方高层在西门子中国北京总部会晤,双方宣布签署战略合作协议,共同成立“联合创新团队”。基于亚马逊云科技在生成式AI领域的领先技术和服务,并结合西门子在工业领域的深厚积...

关键字: 生成式AI 机器学习 大数据

机器学习作为人工智能领域的重要组成部分,其过程涉及到多个核心环节。本文将详细阐述机器学习的四个主要步骤:数据准备、模型选择、模型训练与评估,以及模型部署与应用,以揭示机器学习从数据到应用的完整流程。

关键字: 数据 人工智能 机器学习

随着信息技术的迅猛发展和大数据时代的到来,机器学习成为了人工智能领域中的核心技术之一。机器学习是通过模拟人类学习行为,使计算机系统能够从数据中自动发现规律、提取特征并进行预测和决策的过程。它在诸多领域取得了广泛的应用,包...

关键字: 计算机 人工智能 机器学习

机器学习算法是人工智能领域中的核心技术之一,它通过对大量数据进行学习,自动发现数据中的规律和模式,从而实现对新数据的预测、分类、聚类等任务。本文将深入探讨机器学习算法的基本过程,包括数据准备、模型选择、训练与评估等关键步...

关键字: 数据 人工智能 机器学习

随着大数据时代的到来,数据处理成为了一项至关重要的任务。传统的数据处理方法往往面临着效率低下、准确性不高等问题,而机器学习技术的兴起为数据处理带来了全新的解决方案。本文将深入探讨机器学习在数据处理中的应用,并分析其优势和...

关键字: 数据处理 计算机 机器学习

机器学习是人工智能领域的一个重要分支,它使用各种算法来使计算机系统能够从数据中学习和改进,而无需进行明确的编程。在机器学习的广阔领域中,有多种算法被广泛应用,每种算法都有其独特的适用场景和优势。本文将详细介绍机器学习中的...

关键字: 机器学习 人工智能 计算机

随着信息技术的飞速发展和大数据时代的到来,数据挖掘和机器学习作为数据处理的两大核心技术,在各行各业中发挥着越来越重要的作用。然而,尽管数据挖掘和机器学习在很多方面存在交集,但它们各自具有独特的定义、方法和应用场景。本文旨...

关键字: 数据挖掘 机器学习 数据处理

随着大数据时代的到来和计算能力的不断提升,机器学习作为人工智能领域的重要分支,正逐渐改变我们的生活方式和工作模式。机器学习涉及多个学科的理论和技术,其应用广泛且深入,为各个领域的发展带来了前所未有的机遇。那么,机器学习具...

关键字: 大数据 机器学习 人工智能
关闭
关闭