01
风控日志概述
什么是风控日志 · 日志生命周期 · 风控决策核心价值
基础概念
02
日志采集架构
Filebeat/Logstash/Fluentd · 采集设计原则 · 高可用方案
采集架构
03
日志格式规范
标准格式设计 · 字段定义 · JSON vs 普通文本
规范JSON
04
日志存储选型
ES vs ClickHouse vs Loki · 成本与性能 · 冷热分离
存储选型
05
日志清洗与预处理
数据脱敏 · 字段提取 · 脏数据处理 · 时间戳标准化
清洗ETL
06
实时日志流处理
Kafka+Flink 架构 · 滑动窗口聚合 · 实时规则命中
实时Flink
07
离线日志批处理
Hive/SparkSQL · T+1报表 · 历史回溯分析
离线批处理
08
日志检索与查询
ES DSL · Kibana可视化 · 查询性能优化
检索Kibana
09
异常检测模型
阈值检测 · 3-sigma · 移动平均 · CUSUM
异常统计
10
日志聚类分析
文本相似度 · TF-IDF+K-means · 模式提取
聚类ML
11
关联分析
IP关联 · 设备指纹 · 行为序列 · 图分析
关联图
12
日志告警体系
规则设计 · 级别定义 · 抑制聚合 · 通知渠道
告警运维
13
风控规则引擎
规则配置 · 热加载 · 优先级冲突 · 测试沙箱
规则引擎
14
日志特征工程
滑动窗口 · 统计/时序/比率特征 · 复杂特征
特征工程
15
模型训练与部署
特征准备 · 训练流程 · 上线回滚 · 监控
ML部署
16
日志数据质量监控
完整性 · 准确性 · 时效性 · 异常波动检测
质量监控
17
日志安全与合规
数据加密 · 访问控制 · 审计日志 · GDPR
安全合规
18
日志链路追踪
全链路设计 · Trace ID · Span关联 · 耗时分析
追踪APM
19
日志容量规划
速率估算 · 存储规划 · 索引生命周期 · 归档
容量规划
20
日志可视化大屏
实时大屏 · 关键指标 · 下钻分析 · 性能优化
可视化大屏
21
A/B测试日志分析
实验分组 · 指标计算 · 显著性检验 · 效果评估
A/B实验
22
黑产日志识别
爬虫特征 · 撞库模式 · 薅羊毛行为分析
黑产对抗
23
日志回放与仿真
历史回放 · 规则仿真 · 模型回测 · 场景复现
仿真测试
24
日志成本优化
压缩 · 冷热分离 · 采样 · 索引优化 · 缓存
成本优化
25
日志治理体系
元数据管理 · 标准规范 · 质量度量 · 工具链
治理体系
26
多机房日志同步
跨机房传输 · 一致性保障 · 延迟优化 · 故障切换
多机房同步
27
日志与指标融合
日志转指标 · Metrics关联 · 统一可观测性
可观测融合
28
日志自动化运维
自动扩缩容 · 索引优化 · 告警自愈 · 巡检机器人
自动化运维
29
日志分析案例实战
支付平台风控 · 实时拦截与事后分析结合
案例实战
30
日志分析平台建设
平台架构 · 功能模块 · 技术选型 · 演进路线
平台架构