《工业互联网平台数据采集与处理通用技术要求》团体标准征求意见

　　【仪表网 仪表标准】按照《浙江省智能技术标准创新促进会团体标准管理办法(试行)》要求，由浙江省智能技术标准创新促进会归口的《工业互联网平台数据采集与处理通用技术要求》团体标准，已由标准起草组完成了征求意见稿的编制，现公开征求意见。意见反馈邮箱：zaits@zhejianglab.com，截止时间：2022年02月12日前。
 

　　本文件按照 GB/T 1.1-2020《标准化工作导则 第 1 部分：标准化文件的结构和起草规则》的规定起草。本文件由浙江省智能技术标准创新促进会归口。 本文件起草单位：之江实验室、阿里云技术有限公司、北京机械工业自动化研究所、浙江中控技术股份有限公司、浙江大学、浙江工业大学、杭州电子科技大学、浙江工商大学、金卡智能集团股份有限公司。
 

　　本标准参考GB/T 22239—2019 信息安全技术 网络安全等级保护基本要求编制而成。本标准规定了工业互联网平台中数据采集、数据存储、数据处理、数据分析的通用技术要求。
 

　　工业互联网平台具有可集成工厂内部/外部的各种数据并据此进行处理分析的特点。根据工业互联 网平台的特点，在工业互联网平台功能架构图的基础上对工业互联网平台中的数据服务功能建立工业互 联网平台数据服务参考架构模型。
 

　　数据采集通用技术要求：
 

　　1.概述
 

　　工业互联网平台数据采集功能是进行多源数据融合、分析、应用的前提条件。通过各类通信手段接入不同设备、产品和系统，并通过数据转换技术将采集到的大范围、深层次的工业数据转换成工业互联网平台可识别处理的标准数据。对工业互联网平台数据采集功能的要求涵盖了协议适配、格式转换、数据清洗等方面。
 

　　2.协议适配
 

　　协议适配应符合以下要求： a) 要求支持MQTT、CoAP、HTTP/S等接口协议的适配； b) 要求支持多协议并发接入的适配。
 

　　3.格式转换
 

　　格式转换应符合以下要求： a) 要求支持数据格式模板； b) 要求支持数据格式自定义功能； c) 要求支持数据解析脚本的自定义功能。
 

　　4.数据清洗
 

　　数据清洗应符合以下要求： a) 要求支持实时数据的清洗功能，包括但不限于去除噪声数据、数据完整性校验等； b) 要求支持离线数据的清洗功能，包括但不限于去除噪声数据、数据完整性校验等； c) 要求支持数据清洗条件的设置/组合/保存功能； d) 要求支持数据清洗报告功能，包括但不限于命中数据清洗条件次数统计。
 

　　数据分析通用技术要求：
 

　　1.概述
 

　　数据分析从功能层面上包括信息检索、基于机理模型的数据分析、基于数据驱动模型的数据分析、 以及数据可视化功能。
 

　　2.信息检索
 

　　信息检索应符合以下要求： a) 要求支持多种数据业务的信息检索能力； b) 要求支持用户自定义信息检索条件； c) 要求支持用户自定义结果展示方式。
 

　　3.实时数据计算
 

　　实时数据计算应符合以下要求： a) 要求支持实时计算任务的管理能力，包括但不限于创建/删除/运行/暂停等； b) 要求支持实时计算任务的监控能力，包括但不限于CPU/内存使用率等； c) 要求支持多种输入数据源类型，包括但不限于实时数据流、数据库表等； d) 要求支持滚动时间窗口、滑动时间窗口的数据处理能力； e) 要求支持实时数据的过滤/分流/聚合计算/异常检测/关联分析能力； f) 要求支持计算结果的展示/存储/流转能力。
 

　　4.批量数据计算
 

　　批量数据计算应符合以下要求： a) 要求支持批量数据计算任务的管理能力，包括但不限于创建/删除/运行/暂停等； b) 要求支持批量数据计算任务的监控能力，包括但不限于CPU/内存使用率等； c) 要求支持批量数据计算任务的资源管理和作业调度的能力；d) 要求支持用户自定义工作流的能力； e) 要求支持计算结果的展示/存储/流转的能力。
 

　　5.知识驱动模型功能
 

　　知识驱动的分析方法，是基于大量理论模型以及对现实工业系统的物理、化学、生化等动态过程进 行改造的经验，建立在工业系统的物理化学原理、工艺及管理经验等知识之上，包括基于规则的方法、 主成分分析技术、因果故障分析技术和案例推理技术等。要求如下： a) 要求支持机理驱动模型任务的管理能力，包括但不限于创建/删除/查询等； b) 要求支持行业知识图谱的能力，包括但不限于创建/删除/编辑/发布等； c) 要求支持行业算法引擎。
 

　　6.基于数据驱动的模型分析功能
 

　　数据驱动的分析方法，较少考虑机理模型和闭环控制逻辑的存在，而是利用算法在完全数据空间中 寻找规律和知识，包括神经网络、分类树、随机森林、支持向量机、逻辑回归、聚类等机器学习方法以 及基于统计学的方法。应符合以下要求： a) 要求支持数据驱动模型任务的管理能力，包括但不限于创建/删除/查询等； b) 要求支持数据驱动模型的上传/保存/删除/查询能力； c) 要求支持多种建模语言，包括但不限于Python、R、Java等； d) 要求支持多种数据源类型的数据加载能力； e) 要求支持数据预处理/特征工程等能力； f) 要求支持机器学习算法库/深度学习组件库的能力； g) 要求支持模型的在线/离线训练及评估能力； h) 要求支持模型的部署/调度/运行的能力； i) 要求支持模型分析结果的展示/保存能力。
 

　　本标准适用于工业互联网平台的建设方作为工业互联网平台中数据服务的功能测试框架，也适用于 使用工业互联网平台进行数字化转型的工厂企业作为对工业互联网平台提供商的服务考核依据。