Pentaho:物联网与大数据的应用整合

 物联网和大数据都是时下最热门的话题与技术。如何将两者结合起来，构建一个完整的解决方案，是一个把握未来命脉的领域。随着全球科技信息化的飞速发展，各个国家赶着时代的潮流迈入了大数据时代，数据分析成为了企业的核心竞争力。

然而，信息化建设是条漫长且持续的发展道路，由于建设时期不同，录入人员不同，信息化系统不同，格式规范要求不同等，造成了数据的不一致性，不同的应用系统形成了彼此孤立的信息孤岛，没有一座统一的桥梁，管理者想要得到几项信息必须进到不同的系统中进行查询，且查询所得无法进行统一分析比较，综合利用，即使拥有丰富的数据资源，也没法提炼出有价值的信息辅助决策。

企业面临着日益严峻的挑战，如何更好地管理种类和数量不断增长的数据，并从中提取重要价值已为燃眉之急。幸运的是，Pentaho现已正式加入HDS的大家庭，未来将与我们一起就项目与解决方案进行合作，共创美好数据未来。

集成>探查>可视化>预测

Pentaho 将数据集成与商业分析紧密结合，使 IT 和业务用户能够访问、集成、混合、可视化并分析对业务成效具有重要影响的所有数据。从本质上来说，Pentaho是一款开放式平台，它可以快速进行部署，易于使用，并且极为经济高效。简而言之，它就是一款专门用于满足未来分析需求的平台。

》》数据集成

利用 Pentaho Data Integration(PDI，数据集成功能)，企业可以访问来自复杂异构来源的数据，并将其与现有的各类数据混合，生成适用于分析的高质量信息。PDI通过丰富的图形用户界面和并行处理引擎提供高性能的ETL(提取、转换和加载)功能，可满足所有数据集成要求，包括大数据。

》》数据发现和探查

Pentaho Business Analytics 可以提供现代化的高度交互式直观 Web 界面，使业务用户能够访问和发现所有数据，包括大数据。借助一系列日益先进的分析功能，用户可以创建报告和仪表板，从多个维度实现数据可视化并对其进行分析，而无需依赖IT和开发人员。

》》数据可视化

Pentaho Data Integration能够提供丰富的图形化可视设计环境，以缩短时间并降低复杂性。

Pentaho Business Analytics可以为业务用户提供基于 Web 的直观交互式报告，为高级用户提供丰富的图形化企业报告设计器。提供交互式数据可视化和分析，并通过可视化套索过滤和缩放功能，以了解或排除异常值。根据属性突出显示功能，以提供具有更高视觉对比度的数据显示。另外还拥有丰富的交互式可视化工具库，包括地理图、热度网格和散点气泡图。

》》数据预测分析

Pentaho 还提供强大、先进的机器学习算法和数据处理工具。数据科学家和分析人员可以发现标准分析和报告无法显示的重要模式以及相互关系。时序预测等复杂的先进分析可以帮助企业在更充分地了解过往业务绩效的基础上，针对希望实现的未来成果制定相关计划。

那么，在物联网领域，如何利用Pentaho更好的与数据打交道?

首先当然是需要获得IoT数据，才能对其进行捣鼓、分析。IoT数据不象看起来那么普遍，至少值得分析的数据量很少，而在关键型物联网 (IoTTM) 领域获取数据更是难上加难。利用 Pentaho Data Integration，企业可以访问来自复杂异构来源的数据，并将其与现有的各类数据混合，生成适用于分析的高质量信息。

我们举个例子说明：比如智能边缘“人员检测器”，此设备用于拍摄像片，并分析人脸与上半身图像。设备由PDI控制，自动运行，收集图像并分析，然后在传感器日志中记录结果。如果检测到人脸或身体，就会决定是否碰到“人”了，随后会在HDS HCP中存储相应图像。所有一切都会记录在传感器日志中，不过，如果检测到人，会摄取图像，连同图像轮廓图，以描述性文件名存储于对象存储。

物联网时代：Pentaho不惧现在，更关乎未来

图像保存时，其文件名的描述很清楚，包括时间戳、传感器标识号、人脸数量、身体数量、人数。一旦碰到了“人”，完成存储后，您就有了大量的IoT数据可以分析了。你可以点击任何文件名，预览被检测物体的轮廓图像。

此图中检测到21个身体但缺少脸部。从数据点拉取的图像得知，原来这21个是来自一则广告(只有脸部，没有身体)。这个案例充分体现了Pentaho analytics 如何与IoT设备充分融合做数据收集和分析。

Pentaho 提供了涵盖整个大数据生命周期的完整解决方案，可利用从数据发现到预测分析的一系列分析功能，对任何基础架构中的大数据和传统类型数据进行数据提取和准备。利用 Pentaho，我们现在可以立即了解需要处理的是一个一次性错误还是一种错误模式。Pentaho 非常直观易用，我们可以轻松灵活地对其进行调整，以满足不断变化的要求，最终赢得的是整个未来!