01
ESG评分数据异常诊断概述
什么是ESG数据异常 · 异常诊断的重要性 · 常见异常类型概览
基础概念
02
数据源质量评估
识别数据源可靠性 · 数据采集链路审计 · 数据源一致性检查
数据源审计
03
缺失值处理策略
MCAR/MAR/MNAR · 删除法 · 填充法(均值/中位数/众数) · 插值法
缺失值插值
04
异常值检测基础
Z-Score · IQR · KNN · LOF 基于统计/距离/密度检测
统计KNNLOF
05
时间序列异常检测
趋势异常 · 季节性异常 · 突发异常 · 移动平均法 · STL分解
时间序列STL
06
跨维度交叉验证
E/S/G维度一致性 · 行业对标 · 历史数据对比
交叉验证对标
07
数据标准化与归一化
Min-Max · Z-Score · Robust标准化 · 场景选择
预处理归一化
08
重复数据识别与去重
精确匹配 · 模糊匹配 · 相似度去重 · 对评分影响
去重相似度
09
逻辑一致性校验
指标间逻辑(排放vs能耗) · 单位一致性 · 计算逻辑验证
逻辑校验单位
10
数据漂移检测
概念漂移 · 数据漂移 · PSI · KS检验
漂移PSIKS
11
异常根因分析
相关性分析 · 因果推断 · 决策树辅助 · 专家经验库
根因因果
12
数据修复策略
基于规则修复 · 模型修复 · 人工审核 · 修复记录追踪
修复审核
13
异常评分机制
严重程度分级 · 影响范围评估 · 置信度计算
评分分级
14
自动化诊断流水线
Airflow/Dagster调度 · 规则引擎 · 告警机制
流水线调度
15
数据质量监控看板
完整性/准确性/一致性/及时性 · 可视化设计
看板监控
16
行业特定异常模式
金融 · 制造业 · 科技行业ESG异常
行业模式
17
供应链数据异常处理
供应商验证 · 范围三排放异常 · 数据追溯
供应链范围三
18
文本数据异常处理
NLP在ESG报告 · 情感分析异常 · 关键信息提取错误
NLP文本
19
第三方数据源整合
可信度评估 · 数据映射冲突 · 融合策略
第三方整合
20
异常处理优先级排序
风险等级 · 监管要求 · 利益相关方关注度
优先级风险
21
数据治理元数据管理
数据血缘 · 数据字典 · 变更影响分析
元数据血缘
22
机器学习辅助异常检测
孤立森林 · AutoEncoder · GAN · 模型可解释性
ML孤立森林
23
异常处理SOP制定
标准操作流程 · 角色职责 · 升级机制
SOP流程
24
数据质量审计
内部审计流程 · 外部审计配合 · 审计证据留存
审计合规
25
监管合规要求
GRI · TCFD · SASB · 欧盟CSRD合规
监管CSRD
26
异常数据回滚机制
版本控制 · 快照管理 · 回滚风险评估
回滚版本
27
用户反馈闭环
反馈收集 · 异常标记 · 持续改进流程
反馈闭环
28
大规模数据处理
Spark/Flink流处理 · 分布式异常检测 · 性能优化
大数据Spark
29
异常诊断报告生成
自动化报告模板 · 可视化图表 · 管理层摘要
报告可视化
30
案例实战：上市公司ESG异常诊断
全流程复盘 · 真实数据演练 · 诊断要点
实战复盘