一、图像采集基础：摄像头工作原理、分辨率与帧率、色彩空间（RGB/YUV）概念
各位同学好，今天咱们来聊聊图像采集这件事。说实话，我做了这么多年图像处理，发现很多新手一上来就调算法、写代码，结果图像质量不行，折腾半天才发现是采集环节出了问题。嗯，这节课咱们就把基础打扎实。
1.1 摄像头工作原理：光信号如何变成数字图像
摄像头的工作原理，说白了就是一个「光电转换」的过程。你想想看，我们眼睛看到的是光，摄像头要做的就是把光变成计算机能处理的数字信号。
核心器件是图像传感器，目前主流的有两种：
- CCD（电荷耦合器件）：成像质量好，但功耗高、成本高。我在做工业检测项目时用过，确实细腻，但发热是个大问题。
- CMOS（互补金属氧化物半导体）：现在手机、摄像头基本都是这个。功耗低、集成度高，但早期噪点多。不过现在技术进步了，差距越来越小。
工作流程大致是这样的：
- 光线通过镜头，聚焦到传感器表面
- 传感器上的每个像素点（photosite）接收光子，产生电荷
- 电荷量转换成电压信号
- 经过模数转换器（ADC），变成数字值
- 最后通过ISP（图像信号处理器）做一系列处理，输出我们看到的图像
关键点：每个像素只能感知亮度，不能感知颜色。那彩色图像怎么来的？靠的是「拜耳阵列」（Bayer Pattern）——在传感器表面覆盖一层滤色片，每个像素只允许红、绿、蓝其中一种光通过。然后通过插值算法还原出完整彩色图像。
我的经验：我曾经在调试一款工业相机时，发现图像偏绿严重。排查了半天，结果是拜耳阵列的排列顺序搞反了。所以拿到新摄像头，第一件事就是确认Bayer格式是RGGB还是BGGR，别想当然。
1.2 分辨率与帧率：鱼和熊掌如何兼得
这两个参数，是选摄像头时最先要看的。但很多人只盯着数字大不大，忽略了它们之间的制约关系。
分辨率：就是图像有多少个像素点。比如1920×1080，就是横向1920个像素，纵向1080个像素。分辨率越高，细节越丰富，但数据量也越大。
帧率：每秒能采集多少帧图像，单位是fps（frames per second）。30fps算流畅，60fps就很丝滑了。
这里有个关键公式：
数据传输带宽 = 分辨率 × 帧率 × 每像素位数举个例子：
| 分辨率 | 帧率 | 每像素位数 | 所需带宽 |
|---|---|---|---|
| 1920×1080 | 30 fps | 24 bit (RGB888) | 约 1.5 Gbps |
| 1920×1080 | 60 fps | 24 bit | 约 3.0 Gbps |
| 640×480 | 30 fps | 24 bit | 约 0.22 Gbps |
看到了吧？分辨率翻倍或者帧率翻倍，带宽需求都跟着翻。所以实际项目中，你得根据接口能力来权衡。
避坑指南：我曾经接手一个项目，客户要求4K分辨率、60fps，结果用的还是USB 2.0接口。USB 2.0理论带宽只有480 Mbps，实际能用的也就300多Mbps。4K@60fps的原始数据量远超这个数，根本跑不动。最后只能降分辨率或者降帧率。所以选摄像头时，先搞清楚你的传输接口是什么。
常见的接口带宽参考：
- USB 2.0：实际约 300-400 Mbps
- USB 3.0：实际约 3-4 Gbps
- GigE（千兆以太网）：实际约 900-1000 Mbps
- MIPI（手机常用）：单通道约 1-2 Gbps，可多通道组合
1.3 色彩空间：RGB与YUV，你该用哪个？
色彩空间，说白了就是「用数字表示颜色的方式」。最常用的两种是RGB和YUV。
RGB色彩空间
RGB就是红（Red）、绿（Green）、蓝（Blue）三原色。每个像素用三个数值表示，比如(255, 0, 0)就是纯红色。
优点：直观，显示器直接用的就是RGB。
缺点：三个通道数据量一样大，存储和传输效率低。
常见的RGB格式：
- RGB888：每个通道8位，共24位/像素。色彩丰富，但数据量大。
- RGB565：R用5位，G用6位，B用5位，共16位/像素。节省空间，但色彩精度略差。
- RGB332：R用3位，G用3位，B用2位，共8位/像素。老式设备用得多。
YUV色彩空间
YUV把颜色分成两部分：亮度（Y）和色度（U、V）。人眼对亮度变化敏感，对颜色变化没那么敏感。所以YUV可以「偷懒」——保留完整的亮度信息，但色度信息可以压缩。
这就是YUV最大的优势：节省带宽。
常见的YUV采样格式：
| 格式 | 说明 | 数据量 | 典型应用 |
|---|---|---|---|
| YUV444 | 每个像素都有完整的Y、U、V | 24位/像素 | 专业视频编辑 |
| YUV422 | 每2个像素共享一组U、V | 16位/像素 | 广播级视频 |
| YUV420 | 每4个像素共享一组U、V | 12位/像素 | 网络视频、H.264/H.265编码 |
重点：YUV420是现在最主流的格式。你看到的抖音、B站视频，底层基本都是YUV420。为什么？因为数据量只有RGB888的一半，画质损失却几乎看不出来。
什么时候用RGB，什么时候用YUV？
我个人的习惯是这样的：
- 做图像显示、GUI界面：用RGB。因为显示器原生支持RGB，省去转换开销。
- 做视频编码、传输：用YUV。H.264、H.265这些编码器都是基于YUV设计的，用RGB反而效率低。
- 做图像处理算法：看情况。比如做边缘检测，用Y通道就够了；做颜色识别，就得用RGB或者HSV。
我的经验：有一次做车牌识别，一开始在RGB空间里做颜色分割，效果很差。后来我把图像转到YUV空间，只用Y通道做灰度处理，反而稳定多了。因为Y通道不受光照颜色变化的影响。所以别死磕RGB，换个色彩空间可能事半功倍。
1.4 小结
这一章咱们聊了三个核心概念：
- 摄像头怎么把光变成数字信号——核心是传感器和拜耳阵列
- 分辨率和帧率怎么权衡——别忘了算带宽
- RGB和YUV怎么选——看你是做显示还是做编码
嗯，基础打牢了，后面讲图像存储和格式转换的时候，你就不会觉得晕了。下一章咱们聊聊常见的图像文件格式，比如BMP、JPEG、PNG这些，看看它们背后都藏着什么门道。
一句话总结：图像采集不是把摄像头接上就完事了。分辨率、帧率、色彩空间，这三个参数选不对，后面所有工作都是白费。我见过太多项目栽在这上面了。