风电数据清洗与特征工程实战

📚 共计 30 章节
01
风电数据初探
认识SCADA数据 · 数据字段解读 · 数据质量概览
SCADA概览
02
缺失值处理
缺失值识别 · 均值/中位数填充 · 前向/后向填充 · 插值法
填充插值
03
异常值检测
基于3σ原则 · 箱线图(IQR) · 孤立森林
统计孤立森林
04
数据标准化与归一化
Min-Max归一化 · Z-score标准化 · RobustScaler
缩放鲁棒
05
时间序列特征提取
时间戳分解 · 滑动窗口统计 · 滞后特征
滑动窗口滞后
06
频域特征提取
傅里叶变换 · 功率谱密度 · 频带能量
FFT频谱
07
统计特征提取
均值、方差、偏度、峰度、相关系数
描述统计相关性
08
风功率曲线建模
理论功率曲线 · 实测数据拟合 · Bin方法
功率曲线Bin
09
风向与湍流特征
风向扇区划分 · 湍流强度计算 · 风切变指数
湍流风切变
10
机组状态编码
运行状态 · 停机状态 · 故障状态 · 限功率状态
状态编码分类
11
数据降维
主成分分析(PCA) · t-SNE · 特征选择
PCAt-SNE
12
聚类分析
K-means聚类 · DBSCAN聚类 · 聚类结果评估
K-meansDBSCAN
13
分类特征编码
独热编码 · 标签编码 · 目标编码
OneHotTarget
14
数据重采样
降采样 · 升采样 · 重采样策略
频率聚合
15
多源数据融合
气象数据 · 地形数据 · 电网数据
融合多源
16
数据质量评估
完整性 · 一致性 · 准确性 · 时效性
质量评估
17
自动化清洗管道
Airflow调度 · Docker部署 · 日志监控
AirflowDocker
18
特征重要性评估
随机森林特征重要性 · SHAP值 · Permutation Importance
SHAP重要性
19
特征交互与组合
多项式特征 · 交叉特征 · 领域知识特征
交互多项式
20
数据版本控制
DVC工具 · 数据血缘 · 回滚机制
DVC版本
21
大规模数据处理
Dask并行计算 · Spark分布式处理
DaskSpark
22
数据可视化探索
时序图 · 散点图 · 热力图 · 箱线图
可视化EDA
23
风电场群数据分析
尾流效应 · 场群相关性 · 功率聚合
尾流场群
24
数据安全与隐私
脱敏处理 · 访问控制 · 加密存储
隐私加密
25
模型部署特征工程
在线特征计算 · 特征存储 · 特征服务
部署在线
26
数据漂移检测
分布漂移 · 概念漂移 · 漂移告警
漂移监控
27
特征存储库构建
Feast框架 · 特征注册 · 特征检索
Feast特征库
28
数据标注与半监督学习
主动学习 · 伪标签 · 弱监督
标注半监督
29
端到端案例:功率预测
项目全流程数据清洗与特征工程
实战全流程
30
前沿趋势
联邦学习 · 边缘计算 · 数字孪生中的数据工程
联邦数字孪生