01
量化数据仓库概述
什么是量化数据仓库 · 为什么需要 · 与传统数仓区别 · 核心价值
基础概念
02
量化数据仓库架构设计
分层架构(ODS/DWD/DWS/ADS) · 数据流向 · 技术选型 · 存储与计算引擎
架构分层
03
量化数据模型设计
维度建模 · 星型与雪花模型 · 事实表与维度表 · 缓慢变化维
建模维度
04
量化数据采集与接入
数据源类型 · 实时/批量采集 · API接入与文件导入 · 数据质量校验
采集接入
05
量化数据清洗与标准化
缺失值处理 · 异常值检测 · 格式统一 · 去重对齐 · 时间序列对齐
清洗标准化
06
量化数据存储设计
HDFS · Parquet/ORC · InfluxDB/ClickHouse · Redis缓存
存储时序库
07
量化数据仓库ETL开发
ETL流程 · 增量/全量抽取 · 调度监控 · 性能优化
ETL调度
08
量化数据仓库DWD层建设
明细层设计原则 · 交易/行情/财务明细模型
DWD明细
09
量化数据仓库DWS层建设
轻汇总设计 · 日频/分钟级汇总 · 资金流向模型
DWS汇总
10
量化数据仓库ADS层建设
应用数据层 · 因子存储 · 策略回测 · 实时监控接口
ADS应用
11
量化数据仓库元数据管理
元数据分类 · 血缘关系 · 数据字典 · 采集与同步
元数据血缘
12
量化数据仓库数据质量保障
完整性/准确性/一致性/及时性 · 监控规则 · 告警修复
质量监控
13
量化数据仓库数据安全与权限
数据分级 · RBAC/ABAC · 脱敏加密 · 审计日志
安全权限
14
量化数据仓库性能优化
查询优化 · 索引 · 分区分桶 · 物化视图 · 数据倾斜
性能调优
15
量化数据仓库实时计算
Flink/Spark Streaming · 实时管道 · 指标计算 · 实时落地
实时流计算
16
量化数据仓库批处理调度
Airflow/DolphinScheduler · DAG依赖 · 优先级 · 监控告警
调度批处理
17
量化数据仓库数据治理
数据标准 · 生命周期 · 资产盘点 · 成本优化
治理标准
18
量化数据仓库版本管理
模型版本控制 · ETL脚本版本 · 数据回滚 · 灰度发布
版本CI/CD
19
量化数据仓库测试策略
一致性测试 · 完整性测试 · 性能测试 · 回归测试 · 数据构造
测试质量
20
量化数据仓库监控与运维
集群监控 · 任务监控 · 数据延迟 · 异常自动恢复
监控运维
21
量化数据仓库数据服务接口
RESTful API · 查询/订阅接口 · 限流熔断
API服务
22
量化数据仓库与机器学习平台集成
特征工程 · 训练管道 · 推理服务 · Feature Store
ML特征
23
量化数据仓库与回测系统集成
回测数据需求 · 快照设计 · 一致性保障 · 加速
回测集成
24
量化数据仓库与实盘交易系统集成
实时行情推送 · 交易指令回传 · 风控对接 · 延迟敏感
实盘交易
25
量化数据仓库成本控制
存储/计算优化 · 冷热分离 · 资源弹性伸缩
成本优化
26
量化数据仓库灾备与高可用
备份策略 · 异地多活 · 故障切换 · 恢复演练
灾备高可用
27
量化数据仓库项目实战（一）
需求分析 · 架构设计 · 技术选型 · 环境搭建
实战启动
28
量化数据仓库项目实战（二）
ETL开发调试 · 数据验证 · 性能调优 · 上线部署
实战部署
29
量化数据仓库项目实战（三）
监控体系 · 运维手册 · 知识库 · 协作规范
实战运维
30
量化数据仓库未来趋势
云原生 · 数据湖仓一体 · AI辅助治理 · 实时数仓演进
趋势前沿