嵌入式Linux相机应用开发实战 · 课程目录

嵌入式Linux相机开发概述

课程介绍硬件平台软件栈环境搭建

树莓派/瑞芯微

Linux内核与驱动基础

内核模块字符设备platform驱动设备树

V4L2框架深度解析

video_devicevb2_queueioctlbuffer管理

MMAP/USERPTR/DMABUF

摄像头传感器驱动开发

OV5640/IMX219I2C配置MIPI CSI-2寄存器读写

Media Controller框架

拓扑结构Pipeline配置subdev路由link建立

实体间连接

ISP图像信号处理

黑电平校正去马赛克AWB/AE/AGGamma校正

视频采集实战

v4l2-ctl抓图C采集YUV帧率控制NV12/NV21

多平面格式

视频编码与压缩

H.264/H.265MFC/VPUGOP/比特率MP4/AVI

硬件编码器

OpenCV嵌入式移植与优化

交叉编译NEON加速多线程流水线内存池

图像预处理

YUV2RGB缩放旋转/镜像ROI提取

Bilinear/Lanczos

人脸检测与识别

Haar CascadeLBPMobileNet-SSDNCNN/Tengine

深度学习部署

运动检测与目标跟踪

帧差法MOG2光流LKKCF跟踪

摄像头标定与畸变校正

张正友标定内参/外参畸变系数calibrateCamera

双目视觉与深度估计

双目同步SGBM匹配视差图点云生成

RTSP/RTMP直播推流

Live555/FFmpegH.264 over RTPRTMP推送Nginx/SRS

网络摄像头 (IP Camera)

MJPEG流ONVIF协议WebRTCJSMPEG

多摄像头同步采集

硬件触发GPIOFSYNC时间戳对齐多路拼接

摄像头驱动调试技巧

printk动态调试tracepointcrash dumpMIPI波形

逻辑分析仪

性能优化与功耗管理

CPU/GPU/DSPDVFS调频内存带宽PMU计数器

安全与加密

AES/RSA加密Secure BootTPM模块防篡改

视频流加密

QT/GTK图形界面开发

摄像头预览参数调节面板亮度/对比度录像交互

文件系统与存储优化

F2FS/UBIFS环形缓冲区掉电保护SD卡寿命

AI加速器集成

NPU驱动RKNN/算能ONNX2RKNN推理流水线

工业相机应用

GigE VisionGenICam触发模式高帧率采集

车载摄像头系统

环视拼接车道线检测ADAS预警ISO 26262

Bird's Eye View

无人机摄像头应用

图传链路EIS防抖目标锁定低延迟编码

无人机视觉

医疗内窥镜摄像头

HDR高动态低光照增强色彩还原无菌封装

摄像头固件升级与OTA

U-Boot双备份AB分区差分升级回滚机制

自动化测试与CI/CD

gtest单元测试HIL硬件在环Jenkins流水线集成测试

综合项目实战

智能安防摄像头人脸识别移动侦测云存储

产品级架构