1. 电力能耗数据概述：数据来源、采集频率与生命周期管理
大家好，我是老张。干电力系统分析这行快十五年了，今天咱们聊聊电力能耗数据的源头。说白了，你分析得再好，数据源头要是出了问题，后面全是白搭。我个人习惯，接手任何一个新项目，第一件事就是搞清楚：数据从哪来？多久来一次？准不准？
1.1 电力数据三大来源
电力数据不是天上掉下来的。目前主流来源就三个：SCADA、AMI、智能电表。它们各有各的脾气，我一个个说。
1.1.1 SCADA系统
SCADA，全称是数据采集与监视控制系统。这玩意儿在变电站、发电厂里最常见。它负责实时监控电网的运行状态——电压、电流、功率、开关位置等等。
- 采集频率：一般是秒级到分钟级。比如2秒一次，或者5秒一次。我见过最快的能做到100毫秒一次，但那通常是故障录波用的。
- 精度：SCADA的精度不算最高，通常误差在0.5%~1%左右。为什么？因为它主要看趋势，不是用来做贸易结算的。
- 数据量：一个中型变电站，一天大概产生几万到几十万条记录。嗯，这里要注意，SCADA数据里经常有坏点，比如通信中断导致的跳变值。
避坑指南：我曾经接手过一个项目，SCADA数据里有个电压测点，连续三天数值都是0。后来一查，是端子排松了。所以拿到SCADA数据，第一件事不是分析，是清洗。
1.1.2 AMI系统
AMI，高级量测体系。你可以把它理解成智能电表的升级版。它不光能读电表，还能双向通信。说白了，电网公司可以通过AMI远程抄表、远程通断电、甚至监测用户侧的电压质量。
- 采集频率：通常是15分钟一次。也有1小时一次的，看配置。AMI的数据颗粒度比SCADA粗，但比传统人工抄表细得多。
- 精度：AMI的精度很高，一般能达到0.2级或0.5级。因为它涉及电费结算，马虎不得。
- 数据内容：除了有功电量，还能采集无功电量、电压、电流、功率因数。你想想看，有了这些数据，做用户负荷分析就方便多了。
个人经验：我建议做能耗分析时，优先用AMI数据。它的质量比SCADA好，而且时间戳更规整。SCADA的时间戳经常有抖动，AMI基本是整点或整刻钟。
1.1.3 智能电表
智能电表是AMI的终端设备。每个用户家里装的那个小盒子就是。它负责计量电量，然后把数据通过通信模块传上去。
- 采集频率：智能电表本身可以做到秒级采集，但上传频率通常是15分钟或1小时。为什么不上传那么快？因为通信带宽和电池寿命有限。
- 精度：智能电表的精度等级一般是1.0级或2.0级。家用表2.0级就够了，工商业用户要求1.0级。
- 数据存储：电表内部有存储芯片，能存最近几十天的冻结数据。即使通信断了，数据也不会丢。
注意：智能电表的数据在传输过程中可能被篡改吗？理论上有可能，但实际中很少见。因为AMI系统有加密和校验机制。我遇到过最离谱的情况是，一只老鼠咬断了通信线，导致数据延迟了三天才上传。
1.2 数据采集频率与精度
搞数据分析，频率和精度是两个绕不开的坎。我简单总结一下，不同场景对它们的要求完全不一样。
| 应用场景 | 推荐采集频率 | 推荐精度等级 | 说明 |
|---|---|---|---|
| 电网实时调度 | 1秒~5秒 | 0.5级 | 需要快速响应，精度要求适中 |
| 用户负荷分析 | 15分钟 | 1.0级 | 颗粒度够用，精度满足需求 |
| 电费结算 | 1小时 | 0.2级或0.5级 | 精度要求最高，频率反而不高 |
| 设备状态监测 | 1分钟~10分钟 | 1.0级 | 看趋势为主，不要求实时 |
为什么会这样？你想想看，调度员需要秒级数据来判断电网是否稳定，但结算员只需要小时级的累计电量。说白了，频率和精度是成本和需求的平衡。
1.3 数据生命周期管理
数据不是存得越久越好。我见过有些企业，硬盘里堆了十年的SCADA数据，但从来没分析过。这纯粹是浪费。数据生命周期管理，说白了就是回答三个问题：存多久？怎么存？什么时候删？
1.3.1 数据分级存储
我个人习惯，把电力数据分成三级：
- 热数据：最近3个月的数据。需要快速查询，放在SSD上。比如做月度能耗分析，经常要用到。
- 温数据：3个月到3年的数据。查询频率降低，可以放在普通硬盘上。比如做年度对比分析。
- 冷数据：3年以上的数据。基本不查，但法规要求保留。可以压缩后存到磁带或云存储上。
避坑指南：我曾经遇到一个客户，把所有数据都放在一个库里，结果查询一次要等半小时。后来我帮他们做了分级存储，热数据用时序数据库，冷数据用列式存储，查询速度提升了10倍。
1.3.2 数据保留策略
不同数据保留时间不一样。我列个表，大家参考：
| 数据类型 | 建议保留时间 | 法规依据 |
|---|---|---|
| SCADA实时数据 | 1~3年 | 电网运行规程 |
| AMI电量数据 | 5~10年 | 电力法、计量法 |
| 智能电表事件记录 | 2年 | 行业标准 |
| 设备参数档案 | 设备全生命周期 | 资产管理要求 |
嗯，这里要注意，法规要求是底线。比如电费纠纷，用户可能翻三年前的旧账。你要是把数据删了，那就麻烦了。
1.3.3 数据归档与销毁
数据到了保留期限，不是直接删掉就完事了。我建议按以下步骤操作：
- 归档：把冷数据打包压缩，加上校验码，存到归档存储中。
- 验证：归档后随机抽检，确保数据没损坏。
- 销毁：确认归档成功后，再删除原始数据。删除时要用安全擦除工具，防止数据被恢复。
个人经验：我建议在归档时写一个元数据文件，记录数据的时间范围、来源、精度等信息。这样以后想查，还能知道归档里有什么。别问我为什么强调这个——我吃过亏。
好了，关于电力能耗数据的来源、采集频率和生命周期管理，今天就聊到这儿。下一章咱们聊聊数据清洗和预处理，那才是真正考验功夫的地方。