01
DMA基础概念
什么是DMA、DMA与CPU数据搬运的区别、DMA在回测系统中的价值。
DMA基础
02
零拷贝技术概述
零拷贝的定义、传统IO路径的痛点、零拷贝的三大核心思想。
零拷贝IO
03
回测系统的性能瓶颈
数据吞吐量瓶颈、内存带宽瓶颈、上下文切换开销。
性能瓶颈
04
Linux中的DMA实现
DMA控制器工作原理、DMA引擎驱动、dmaengine框架。
LinuxDMA
05
用户态DMA编程
mmap与DMA缓冲区映射、O_DIRECT标志的使用、页对齐要求。
用户态mmap
06
零拷贝之sendfile
sendfile系统调用原理、在回测数据分发中的应用、性能对比实验。
sendfile零拷贝
07
零拷贝之splice
splice系统调用、管道机制、避免数据在用户态和内核态之间拷贝。
splice管道
08
零拷贝之copy_file_range
文件到文件的零拷贝、适合回测历史数据归档场景。
文件归档
09
零拷贝之mmap
内存映射文件、共享内存、回测引擎中的状态共享。
mmap共享内存
10
DMA与零拷贝的协同
DMA完成数据搬运、零拷贝消除冗余拷贝、整体流水线设计。
协同流水线
11
回测数据流水线设计
数据采集层、预处理层、回测引擎层、结果输出层。
流水线架构
12
基于DPDK的DMA加速
DPDK简介、DPDK DMA库、在回测中接收行情数据。
DPDK加速
13
基于SPDK的零拷贝存储
SPDK用户态驱动、NVMe over DMA、回测数据持久化。
SPDKNVMe
14
共享内存与DMA
多进程回测架构、共享内存队列、DMA直接写入共享内存。
共享内存多进程
15
回测引擎中的内存池设计
固定大小内存池、DMA友好对齐、减少内存碎片。
内存池对齐
16
缓存行对齐与DMA
缓存行伪共享问题、__attribute__((aligned))、DMA描述符对齐。
缓存行对齐
17
异步DMA操作
异步回调机制、io_uring与DMA的结合、回测事件循环。
异步io_uring
18
零拷贝网络传输
TCP零拷贝、RDMA技术、跨机器回测数据同步。
网络RDMA
19
RDMA在回测中的应用
InfiniBand与RoCE、ibverbs编程、远程内存直接访问。
RDMAInfiniBand
20
GPU与DMA
GPU Direct DMA、cudaMemcpy与零拷贝、GPU加速回测计算。
GPUCUDA
21
回测系统中的DMA性能监控
perf工具、dma_buf统计、延迟与带宽测量。
监控perf
22
常见DMA陷阱与调试
DMA描述符错误、总线地址错误、缓存一致性维护。
调试陷阱
23
零拷贝在回测日志系统中的应用
日志缓冲区零拷贝、异步日志写入、避免IO阻塞。
日志零拷贝
24
回测快照与DMA
快照生成、DMA直接内存快照、快速恢复机制。
快照恢复
25
多通道DMA并行
多通道DMA控制器、并行数据加载、回测数据预取。
并行多通道
26
硬件卸载与DMA
智能网卡、FPGA DMA、回测数据过滤卸载。
硬件卸载FPGA
27
回测系统中的DMA安全
DMA重映射、IOMMU配置、防止恶意DMA攻击。
安全IOMMU
28
实战：构建DMA驱动的回测数据加载器
需求分析、架构设计、代码实现。
实战加载器
29
实战：零拷贝回测结果输出模块
结果序列化、零拷贝网络发送、性能对比。
实战输出
30
总结与展望
DMA与零拷贝技术趋势、CXL与内存语义DMA、未来回测系统架构。
趋势CXL