工业生产会产生大量不同的技术操作数据。这类数据还包括工艺数据、测量数据和元数据。工厂的过程数据通常是周期性获取的,而测量数据既可以属于一个过程,也可以属于一个产品或批次。元数据,如产品编号、客户编号或其他附加信息也会被添加进来。技术操作数据可通过 iba 系统进行记录、存储、分析和可视化。一般来说,详细的数据记录是质量文档所必需的。此外,详细的数据记录还有助于发现工艺和质量改进的潜力。
公司产生的数据量会随着公司规模和数字化程度的增加而迅速增加。数据管理的工作量和复杂性也随之增加。因此,本白皮书探讨了 iba 软件用户如何满足这些要求,以及有哪些解决方案可用于管理海量数据。为此,作为 NewTech4Steel 研究项目的一部分,iba 开展了相关调查。本白皮书包括有关 Apache Hadoop 的基本信息、项目成果,以及对拥有海量数据或计划使用 Apache Hadoop 存储和分析测量数据的 iba 用户的建议。它也是上一份有关 ibaHD-Server 基准的白皮书的后续。ibaHD-Server基准测试的结果表明,ibaHD-Server因其高效的存储算法而非常适合高频数据记录。本文档的重点是大数据的可扩展性和解决方案。
