风控数据仓库建设实战

📚 共计 30 章节
01
风控数据仓库概述
什么是风控数据仓库 · 为什么需要风控数仓 · 与传统数仓的区别 · 核心价值
基础概念
02
风控业务理解与指标体系
信贷业务全流程 · 逾期率/通过率/坏账率 · 指标口径定义与对齐
业务指标
03
数据源接入与数据采集
风控数据源分类 · API/FTP/DB同步 · 数据质量初检
采集数据源
04
数据仓库分层架构设计
ODS/DWD/DWS/ADS详解 · 各层职责与数据流向 · 设计原则
分层架构
05
数据建模方法论
维度建模 vs ER建模 · 星型模型与雪花模型 · 风控场景案例
建模设计
06
ODS层建设
源数据接入规范 · 数据清洗去重 · 增量与全量策略 · 表结构设计
ODS存储
07
DWD层建设
明细数据加工 · 数据脱敏加密 · 字段标准化映射 · 表设计实战
DWD明细
08
DWS层建设
轻度汇总聚合 · 风控宽表设计 · 用户画像标签 · 表设计实战
DWS汇总
09
ADS层建设
应用数据服务 · 报表看板数据 · 模型特征输出 · 表设计实战
ADS应用
10
ETL开发实战
工具选型(Sqoop/DataX/Kettle) · 任务调度(Azkaban/Airflow) · 性能优化
ETL调度
11
数据质量保障体系
六维度质量 · 监控规则配置 · 异常告警与修复
质量监控
12
元数据管理
技术/业务元数据 · 采集存储 · 血缘分析 · 影响分析
元数据血缘
13
数据安全与权限管理
数据分级分类 · 脱敏策略 · RBAC/ABAC · 审计日志
安全权限
14
风控特征工程
特征衍生 · 计算存储 · 时效性管理 · 监控回溯
特征风控
15
实时数仓建设
Lambda/Kappa架构 · 实时ETL(Flink) · 实时风控场景
实时Flink
16
数据湖与数仓融合
数据湖概念 · 湖仓一体架构 · 风控场景实践
数据湖融合
17
数仓性能优化
SQL优化 · 数据倾斜 · 分区分桶 · Parquet/ORC
性能优化
18
数据治理与标准化
数据标准 · 数据字典 · 生命周期管理 · 资产盘点
治理标准
19
风控报表与可视化
报表设计 · Superset/Tableau · 风控驾驶舱
可视化报表
20
数仓自动化运维
Docker/K8s部署 · 监控告警 · 容量规划 · 故障自愈
运维自动化
21
数据回溯与补数
回溯场景 · 策略设计 · 补数脚本 · 回溯验证
回溯补数
22
版本管理与变更控制
数仓版本 · DDL/DML变更 · 灰度发布 · 回滚策略
版本变更
23
数据服务接口开发
API设计 · DataService · 限流降级 · 缓存策略
接口服务
24
风控模型数据支撑
训练数据准备 · 特征管道 · 上线校验 · 监控回流
模型数据管道
25
数据仓库测试
单元/集成/回归测试 · 测试数据构造 · 自动化框架
测试质量
26
成本控制与资源优化
计算/存储优化 · 冷热分离 · 成本核算
成本资源
27
灾备与高可用
备份策略 · 异地多活 · 容灾演练 · RPO/RTO
灾备高可用
28
风控数仓案例实战
消费金融公司全流程 · 从0到1搭建 · 踩坑复盘
案例实战
29
前沿技术探索
Data Mesh · Data Fabric · AI辅助数仓建设
前沿创新
30
课程总结与职业发展
知识体系回顾 · 学习路径 · 面试要点 · 职业规划
总结职业