MES实时数据采集与存储架构设计

📚 共计 30 章节

MES系统概述

MES的定义与定位 · MES在制造业中的价值 · MES与ERP/SCADA的关系

实时数据采集概述

什么是实时数据 · 采集的实时性要求 · 数据类型（设备/工艺/质量/物料）

数据采集技术选型

PLC · RFID · 条码/二维码 · 传感器 · CNC/机器人

设备连接与通信协议

Modbus TCP/RTU · OPC UA · Profinet · EtherNet/IP · MQTT

边缘计算与数据预处理

边缘网关 · 数据清洗与过滤 · 压缩与缓存 · 规则引擎

边缘预处理

数据采集架构设计

分层架构（设备/边缘/平台） · 数据流 · 高可用与冗余

消息队列与数据缓冲

Kafka/RabbitMQ · Topic与分区 · 持久化 · 幂等性

时序数据库选型

InfluxDB · TimescaleDB · TDengine · Tag/Field · 降采样

关系数据库与数据仓库

MySQL/PostgreSQL · 数据分层(ODS/DWD/DWS/ADS) · ETL

数据存储架构设计

冷热分离 · 生命周期 · 容量规划 · 备份与恢复

数据接口与API设计

RESTful · WebSocket · gRPC · API网关与鉴权

数据质量与治理

完整性校验 · 异常检测 · 数据血缘 · 元数据管理

数据安全与权限控制

加密 · RBAC · 审计日志 · GDPR/等保

高并发与性能优化

读写分离 · 连接池 · 索引优化 · 缓存(Redis)

性能高并发

系统监控与告警

采集链路监控 · 延迟告警 · 容量告警 · 自定义规则

数据可视化与报表

实时看板 · 历史趋势 · OEE报表 · 自定义报表

可视化报表

案例：汽车零部件MES

需求分析 · 架构设计 · 设备接入 · 看板展示

案例：电子SMT产线

贴片机 · 回流焊温度 · AOI检测集成

案例：食品饮料行业

批次追溯 · 称重 · CIP · 冷链监控

案例：医药行业MES

GMP合规 · 电子批记录 · 环境监测 · 验证数据

案例：钢铁冶金行业

高温传感器 · 振动监测 · 能耗 · 连铸工艺

案例：半导体晶圆制造

SECS/GEM · 设备状态 · 良率 · FDC数据

半导体晶圆

案例：物流仓储MES

AGV调度 · WMS对接 · 扫码 · 库存实时更新

案例：能源管理数据采集

电/水/气表 · 光伏 · 空压机 · 能源看板

案例：预测性维护数据

振动频谱 · 温度趋势 · 油液分析 · 模型训练

案例：多工厂数据汇聚

跨地域同步 · 数据中台 · 统一标准 · 联邦查询

多工厂中台

案例：云边协同采集

云端训练/边缘推理 · 节点管理 · 断网续传

案例：5G+工业互联网

低时延 · 网络切片 · 5G模组 · 应用场景

5G工业互联网

案例：数字孪生数据

三维模型 · 实时映射 · 仿真数据 · 虚实同步

数字孪生仿真

课程总结与展望

架构原则 · AI+IoT+大数据趋势 · 职业发展 · 学习资源