第1章同步基础概念

1、同步基础概念：什么是多摄像头同步？为什么需要同步？同步的精度指标

各位同学，咱们今天聊聊多摄像头同步。说实话，这个主题我讲了快十年，每次开课都有人问：「不就是让几个摄像头同时拍照吗？有什么难的？」

嗯，如果你也这么想，那咱们这节课就是为你准备的。

先给个定义。多摄像头同步，说白了就是让多个摄像头在时间上「对齐」。不是简单的「同时开始」，而是每一帧的曝光时刻、数据读出时刻，都要精确对齐。

我举个例子。你想想看，一个自动驾驶汽车上装了6个摄像头，分别看前后左右。如果每个摄像头的时间差了几毫秒，那车辆在高速行驶时，左右摄像头看到的画面可能差了半米。融合出来的全景图，车都变形了。

所以，同步的本质是：让多个摄像头在同一个时间坐标系下工作。

核心定义：多摄像头同步是指通过硬件或软件手段，使多个图像传感器在时间维度上保持一致的曝光起始时刻、曝光时长以及数据输出时序。

这个问题我问过很多学员。有人说是为了拼接全景图，有人说是为了3D重建。都对，但不全面。

我个人习惯把需求分成三类：

空间一致性：比如双目视觉测距，左右眼必须看到同一时刻的场景，否则视差计算全是错的。我在做扫地机器人项目时遇到过，左右摄像头差了2ms，结果测出来的障碍物距离飘了5cm，机器人直接撞墙了。
时间一致性：比如多视角动作捕捉，运动员的每个动作需要从不同角度同时记录。如果不同步，重建出来的3D模型就像「鬼畜」一样抖动。
数据融合需求：比如自动驾驶的多传感器融合，摄像头和激光雷达、毫米波雷达的数据需要对齐。摄像头内部之间不同步，融合就更无从谈起。

避坑指南：我曾经在一个项目中，只做了软件层面的「同时触发」，以为就同步了。结果发现不同摄像头的曝光时间不一样，一个用了10ms，一个用了30ms。虽然触发时刻相同，但曝光结束时刻差了20ms。嗯，这个坑我替你们踩过了。

同步不是「有」或「没有」，而是「多精确」。我见过很多工程师一上来就说「我们要同步」，但问他要多高的精度，他就懵了。

这里我给大家梳理三个核心指标：

帧同步是最基础的同步方式。说白了就是让所有摄像头在同一帧开始采集。精度通常在毫秒级，取决于触发信号的传输延迟。

举个例子：

// 伪代码：帧同步触发
camera1.start_frame();  // t=0ms
camera2.start_frame();  // t=0.5ms（信号延迟）
camera3.start_frame();  // t=1.2ms（信号延迟更长）

你看，虽然都触发了，但实际开始时间差了1.2ms。对于30fps的视频流，一帧是33ms，1.2ms的误差看起来不大。但如果场景中有快速运动的物体，比如飞行的羽毛球，1ms的误差就能让球的位置偏移好几个像素。

帧同步精度范围：通常为 1ms ~ 10ms，取决于触发方式和硬件设计。

曝光同步比帧同步更严格。它要求所有摄像头的曝光窗口在时间上完全重合。注意，是「曝光窗口」，不是「帧开始时刻」。

为什么会这样？因为帧同步只保证了开始时刻，但不同摄像头的曝光时间可能不同。比如一个用全局快门（曝光时间固定），另一个用卷帘快门（曝光时间可调）。即使同时开始，曝光结束时刻也可能不同。

我记得有一次做多摄像头全景拼接，用了四个卷帘快门的摄像头。帧同步做得很好，但拼接出来的图像在运动物体处总有「撕裂感」。后来发现是曝光窗口没对齐，每个摄像头的曝光起始行不同。嗯，这个问题折腾了我两周。

曝光同步精度范围：通常为 10μs ~ 100μs，需要硬件级别的触发信号控制。

PPS（Pulse Per Second）同步，是最高精度的同步方式。它来自GPS或北斗模块，每秒输出一个精确的脉冲信号，精度可以达到纳秒级。

PPS同步的核心思想是：所有摄像头都锁定到同一个时间基准上。每个摄像头内部都有一个计数器，PPS信号到来时，计数器清零。这样，所有摄像头的时间戳都是基于同一个参考点。

你想想看，如果每个摄像头都用自己的晶振计时，时间久了肯定会有漂移。一个晶振的精度是±20ppm，两个摄像头跑一个小时，时间差可能达到72ms。但有了PPS，每秒钟校准一次，漂移就被限制在1秒以内。

重要提醒：PPS同步虽然精度高，但有个前提——所有摄像头必须支持外部触发和PPS输入。我见过有人买了便宜的USB摄像头，想用PPS同步，结果发现摄像头根本没有外部触发引脚。嗯，选型的时候一定要看清楚规格书。

好了，咱们这节课的内容就到这里。总结一下：

下一节课，我会给大家讲讲具体的同步方案选型。到时候咱们会聊到硬件触发、软件触发、以及如何根据项目需求选择最合适的方案。记得带上你的项目需求来听课，咱们一起分析。

公众号:蓝海资料掘金营，微信deep3321