分类
分类

多相机同步 ODM 案例:面向拼接级数据采集的 5 相机硬件同步

五相机 30 fps 硬件同步、音频共用一个时钟——一个拼接就绪的 AI 数据采集 ODM 案例:实测同步证据、Imatest IQ、CE/FCC/UL 就绪流程。
多摄像头同步ODM案例研究:5个硬件同步摄像头用于拼接数据采集,已获认证,EyeCloud AI
案件详情

客户身份依 NDA 保密——下文称“一家总部位于美国的全球半导体公司”。

EyeCloud AI 全链条 ODM 流程图:工业设计、结构与热设计、硬件与 PCB 布局、SMT 贴装、相机模组、校准与 IQ 实验室、固件与 SDK、组装与系统测试、生产工艺、CE FCC UL 认证与量产
EyeCloud AI 全链条 ODM 流程——从创意到认证量产共十个阶段,由一支团队执行。标 * 阶段已在其他客户项目上验证,并作为本项目的标准后续阶段提供。

内容摘要——一分钟版本

🎥 多相机,硬件同步

五台相机锁定到同一个时钟:30 Hz PWM 同步脉冲(约 23 µs)驱动每颗传感器,帧在 MIPI 接收端打时间戳,五路 2304×1272 @ 30 fps 视频流经一条 USB 3.0 链路时间对齐到达——麦克风音频在同一时间戳域。三种独立方式验证;帧完好率 99.998%。

🏗 全链条 ODM,从创意到产品

一支团队承接本项目,从工业设计到结构、硬件、PCB 布局、SMT 贴装、相机模组、校准、固件/SDK 与系统验证——一个硬件创意变成可出货产品所需的完整链条。

⛏ 为认证而生的工程

我们开发的产品按一次通过 CE、FCC 与 UL 设计:自有实验室预测试、完整的工业级标准矩阵(EN 55032/55035、EN 61000-6-2/-6-4、FCC Part 15、UL/EN 62368-1…)与经过验证的六步 UL 流程——均已在其他客户项目上完整执行,详见下文。

🎯 视觉校准与 IQ 测试

自有光学实验室:ChArUco 内参标定、多视角外参标定、镜头畸变建模与 Imatest SFRplus 图像质量验证(MTF50、ΔC、SNR)——有合格带的客观数字,不是主观印象。

* 启动您的 ODM 项目 *
一家财富 500 强半导体公司带着苛刻的需求找到 EyeCloud AI:一个下一代智能视觉平台,五台相机必须像一台一样工作——每次曝光锁定在同一时钟,每帧携带可信时间戳,多麦克风音频同步一致。EyeCloud AI 被选为全栈 ODM 伙伴,把产品从第一张 ID 草图带到经过验证、有测量数据支撑的硬件。

本文用证据讲述这个故事:五颗图像传感器如何在硬件上同步、同步如何用示波器波形、固件日志与秒表证明、平台如何运行在 Intel® Movidius™ 与 SigmaStar® 芯片上、同一架构如何延伸到多相机拼接,以及我们的认证与校准流程如何为你的量产之路降风险。

成功案例,从头到尾

客户需要什么

该应用——智慧空间/多传感器感知类的协作智能视觉平台——要求五路通道帧级同时性,并持续数小时,外加可与视频时间轴关联的麦克风音频,装入无风扇回音壁形态、以标准 USB 3.0 连接的外壳中。

我们交付了什么

项目 交付结果
工业设计与结构 无风扇铝型材条形机身、开孔被动散热、五镜头前面板、1/4″ 三脚架接口;模具与 T1 样件已产出
电子 围绕 Intel Movidius 视觉处理器的五通道传感器板;USB 3.0 数据与电源树;经 SPI/AOI/X-ray 控制的 SMT 贴装
相机与同步 5 × 高感光低照传感器,最高 2592×1304,工作模式 2304×1272 @ 30 fps,硬件帧同步(30 Hz PWM,约 23 µs)
音频 多麦克风阵列,设备端 AAC 编码,共享同一时间戳域
固件与主机 SDK Windows 10 C++ SDK:时间对齐批量 API、64 位时间戳、经独立 USB PID 的多设备支持;多机部署有文档
验证 同步证据包(示波器 + 日志 + 秒表)、帧完好性审计、吞吐量表征——报告交付客户
五相机同步 AI 视觉系统——五相机模组置于无风扇铝壳中的前视图(EyeCloud AI 多相机 ODM 案例)
五相机模组共享一个无风扇铝壳——由 EyeCloud AI 设计、开模与组装。

我们掌握的硬件平台:Intel Movidius 与 SigmaStar

平台选择决定成本、带宽与智能所在的位置。本项目运行在 Intel Movidius 视觉处理器上;同一团队也在 SigmaStar SoC 上打造成本优化的相机产品。两条平台线都是常态能力:

平台 我们在其上构建什么 优势场景
Intel Movidius(Myriad 级 VPU) 多传感器 USB 视觉系统;VPU 上的逐通道 ISP、NV12 转换与 MJPEG/H.264 编码;USB 3.0 单线部署;固件(mdk)与主机 SDK 开发;设备端神经网络推理余量(OpenVINO 兼容) 高质量多相机采集、需要向主机 PC 稳定推送同步视频的智能设备、走向量产的边缘 AI 原型
SigmaStar(SoC 家族) 成本优化的独立相机产品:集成 ISP 点亮、H.264/MJPG 编码、带 NPU 的版本支持相机端分析;传感器点亮、ISP 调优、板级与固件开发 BOM 成本、功耗与 H.264/MJPG 推流敏感的独立 USB 相机类产品——智能家居、零售、电池或 USB 供电设备

同步,用仪器证明——而非形容词

证据一:示波器上的同步脉冲

每颗传感器接收同一个30 Hz PWM 同步脉冲,脉宽约 23 µs——与传感器行周期匹配以便干净地闸控曝光。由于触发在传感器管线之前分发,五颗芯片每一帧都在同一边沿开合快门,全程无软件参与。

示波器采集的 30 Hz PWM 相机同步脉冲(20 微秒/格),分发到全部五颗图像传感器(EyeCloud AI 多相机同步案例)
台架上的硬件同步脉冲:20 µs/格——这个边沿就是每颗传感器曝光的等待对象。

证据二:固件日志——五相机,时间戳一致

帧时间戳在 MIPI 接收端获取——尽可能贴近传感器——并以 64 位计数器贯穿管线。在下面的日志中,#285–#291 帧在 cam0 到 cam4 上时间戳完全一致,帧帧如此。若时间戳在更晚处(驱动或应用层)附加,量到的将是调度而非采集时刻,在 CPU 负载下会悄然破坏对齐。

固件日志显示 cam0-cam4 的 MIPI 帧时间戳逐帧一致——五相机硬件同步证据(EyeCloud AI 案例)
固件日志:五通道,每帧一个时间戳。这就是“帧锁定”的样子。

证据三:秒表测试

最后是人可核验的证据:五台相机同时拍摄一块走动的秒表。每一组保存的图像都显示五路视频流读数一致——五张照片、五台相机、同一时刻。连续采集下的帧完好性审计测得 MIPI 级丢帧率约 6 万帧 1 帧(99.998%,2304×1272 @ 30 fps 工作模式),吞吐量表征确定了平台的真实上限(5×ISP + 5×NV12 + 5×MJPEG q95 ≈ 每通道每帧 6.1 / 5.5 / 6.5 ms)。

秒表实测:五个照片查看器显示五台同步相机同时拍下的相同读数(EyeCloud AI 案例)
五个查看器、五台相机、一个秒表读数:多相机同步最简单的证明。

视频与音频共用一个时钟

多麦克风音频常是被事后补上、进而破坏音画关联的部分。本项目把它设计进同一时间戳域:麦克风数据包在设备端编码为 AAC,携带自己的 64 位时间戳,经与视频帧相同的时间对齐 API 交付。因为音视频共享同一计数器,主机可直接关联二者——这是必须信任声音与图像相对时序的波束成形、说话人跟踪与音视频分析的基础。而 AAC 编码占用 DDR 带宽可忽略,我们的测量显示加入音频对视频管线吞吐零影响。

同步多相机系统在哪里物有所值

  • AI 与具身智能数据采集——第一视角与多传感器采集装置,五路帧锁定视频流加同一时间戳域的多麦克风音频正是数据集的质量门槛。
  • 视频协作与智慧空间——回音壁形态设备上的多视角会议采集、说话人检测与会议室分析(正是本项目的形态)。
  • 全景与多视角拼接——镜头阵列实现 180°/360° 覆盖;同步与校准是前提(见下节)。
  • 深度、立体与三维重建——帧锁定的基线,没有它视差图撕裂、点云出现鬼影。
  • 机器人与 AMR 感知——障碍检测与视觉 SLAM 默认每个传感器看到的是同一瞬间。
  • 工业检测与体育/转播装置——多机位采集,帧必须能无时间偏差地剪切与合并。

多相机推流:从五路流到一张图

同步采集是入场券;拼接把重叠视野变成一张无缝图像。管线是确定性的——每个阶段都是我们构建并校准的能力:

同步采集 → 内参标定 → 外参标定 → 重投影 / LUT → 接缝与融合 → 多视角输出

三个成败手

  • 硬件同步(上文已解决)。拼接缝上哪怕 1 ms 的时间偏差都会让运动物体出现重影与双边缘;30 Hz 帧锁定触发从源头消除该误差。
  • 几何。经 ChArUco 靶标获取每个模组的内参(焦距、主点、畸变),再在我们的标定台上恢复外参——相机间的旋转与平移——此阶段我们在多视角项目上交付;烘焙进重投影 LUT,运行时管线保持轻量。
  • 光度一致性。逐模组的曝光/白平衡归一化与亮度匹配融合,让接缝在颜色上与几何上一起消失——经 Imatest 测试卡验证,色差(ΔC)是数字而不是争论。

每台产品背后的校准与图像质量实验室

同步在时间上对齐帧;校准在空间与颜色上对齐相机。我们出货的每个模组都要在印刷 ChArUco 靶标(7×9 网格,35 mm 方格,26 mm ArUco 标记)上完成内参标定——棋盘格精度加标记鲁棒性,适合自动化多相机拍摄——并在 Imatest SFRplus 5×9 测试卡上验证图像质量,让“看着不错”变成有合格带的数字。

ChArUco 标定板 7×9,35 mm 棋盘格,26 mm ArUco 标记,DICT_4X4——用于相机内参标定(EyeCloud AI 相机校准案例)
ChArUco 靶标(7×9,35 mm / 26 mm 标记,DICT_4X4)——我们可重复多相机内参标定的标准。
Imatest SFRplus 5×9 图像质量测试卡(对角 783 mm),用于验证五相机系统的 MTF、色彩与色调响应(EyeCloud AI 案例)
Imatest SFRplus 5×9 测试卡——对每个相机通道做客观的 MTF、色彩与色调验证。

认证:为通过而设计,而非祈求通过

产品能工作不算完成;通过认证才算完成。我们的硬件从第一天起就按目标标准设计——爬电与电气间隙、外壳阻燃、EMC 意识的叠层与连接器接地都是设计输入,不是事后补救。本项目范围止于系统验证;认证不是纸面承诺——它是我们团队在其他客户产品上例行执行的阶段,经认可的合作伙伴实验室完成,自有实验室先行预测试以减少返工。

我们按之设计的 CE / FCC 标准矩阵

市场 / 标志 指令 / 标准 覆盖内容
CE(欧盟) EMC 指令 2014/30/EU——EN 55032、EN 55035、EN 61000-3-2/-3-3 辐射与传导发射、抗扰度(ESD、射频场、EFT、浪涌)、谐波与闪烁
CE(欧盟) RED 2014/53/EU——EN 300 328、EN 301 489(配 Wi-Fi/蓝牙时) 2.4/5 GHz 无线电的频谱与 EMC
CE(欧盟) LVD 2014/35/EU——EN 62368-1;RoHS 2011/65/EU——EN IEC 63000 电气安全(能量源 ES1/ES2、PS1/PS2)、有害物质
FCC(美国) 47 CFR Part 15 Subpart B(A/B 类);无线电适用 Part 15C;ICES-003(加拿大) 无意与有意辐射体的发射;供应商符合性声明或认证
工业级 EMC EN 61000-6-2(抗扰)/ EN 61000-6-4(发射) 消费级 EMC 不够用的工厂车间与机器人部署
环境预测试 IEC 60068-2 系列(干热、低温、湿热、振动) 正式送测前的热与机械稳健性

UL 流程,逐步(典型)

01 范围与标准(UL 62368-1) → 02 安全设计评审 → 03 预测试 → 04 送测实验室 → 05 首件与工厂审查 → 06 FUS 监督

  1. 范围与标准选择——美国和/或加拿大 cUL 采用 UL 62368-1(音视频/ICT 设备);确定电源子系统做列名还是认可。
  2. 安全设计评审——关键元器件清单(电源、连接器、绝缘系统——从 UL 黄卡材料中选取,见下文)、爬电/间隙检查、外壳阻燃等级、按 62368-1 的能量源分类。
  3. 自有预测试——介质耐压、接地连续性、温升、接触电流与异常工况测试,全部在送测前完成。
  4. 正式送测——在认可实验室完成结构文件与全项测试;不符合项经工程更改关闭,出具报告。
  5. 首件检验——定义产线测试规范(耐压、接地导通、功能)并在工厂审核。
  6. 跟踪服务(FUS)——周期监督、标志管控(UL/cUL)、年度审核,让列名在量产中持续有效。

典型周期:送测到证书 10–16 周,很大程度上取决于预测试阶段有多干净——而这个阶段正是我们自己执行的。

UL 黄卡材料:认证从 BOM 开始

早在实验室见到产品之前,认证就已由物料清单决定。我们的工程师选择外壳树脂、绝缘片、导线、标签与连接器时,第一道筛选就是材料是否持有 UL 黄卡(Yellow Card)——UL 认可材料的证书页(塑料材料归档于 QMFZ2 类别),可在 UL Product iQ 中按档案号查验。黄卡标明材料在各额定厚度下的防火与电应力表现:

黄卡参数 它告诉你什么 我们用在哪
UL 94 阻燃(V-0 / V-1 / 5VA) 材料在额定厚度下的自熄速度 充当防火外壳的外壳树脂与结构件塑料
RTI(相对热指数) 材料长期承受而不丧失性能的温度 靠近电源与热路径的绝缘部件
CTI / PTI(相比漏电起痕指数) 表面电痕化抗性 连接器与 PCBA 上的爬电与间隙决策
HWI / HAI(热丝/热弧引燃) 对导线或电弧故障引燃的抗性 靠近载流导体的部件
GWFI / GWIT(灼热丝) 灼热丝可燃性与引燃表现(IEC 60695 系列) 无人值守与家用设备要求

由于这些结构到实验室时已预先评估过,整机的 UL 62368-1 评审从已知数据出发而非开放问题——不符合项更少、工程返工更少、预测试阶段更干净(这正是让上文 8–14 周窗口保持现实的原因)。

诚实的范围说明——与其背后的完整链条

我们严格限定项目宣称范围。下表区分本项目交付的内容与已在其他 EyeCloud AI 客户项目上验证、作为本流程标准延续提供的能力:

全链条 ODM 阶段 状态 涉及内容
ID / 结构 / 电子 / 布局 / SMT 贴装 本项目交付 概念 → 模具 → PCBA,详见上文
相机模组与内参标定 本项目交付 模组制造、ChArUco 内参标定、SFRplus IQ 验证
固件、SDK 与同步验证 本项目交付 硬件同步、时间戳、Windows SDK、实测证据包
外参标定与拼接 已在其他项目验证 多视角几何恢复、重投影 LUT、接缝/融合调优
组装与系统测试 已在其他项目验证 装配指导与防错、ICT/FCT 工位、老化
生产工艺设计 已在其他项目验证 DFM/DFA、SOP、节拍与良率规划、产线设计
CE / FCC / UL 认证 已在其他项目验证 自有预测试,实验室管理直至拿证(矩阵与 UL 流程见上文)

* “已在其他项目验证”各行不作为本项目交付内容宣称——它们是团队在其他客户产品上执行并出货过的能力,可作为本流程的标准延续提供。

常见问题

你们如何同步一台设备里的多台相机?

尽早给每颗传感器同一个起始信号与时间戳:30 Hz PWM 同步脉冲在硬件上驱动全部五次曝光;时间戳在 MIPI 接收端获取并以 64 位计数器承载;主机 SDK 以时间对齐批量交付各通道。采集后纯软件对齐无法消除晶振漂移与 USB 调度抖动。

五相机系统达到了什么同步精度?

五通道在 30 fps 下帧锁定:固件日志显示 cam0–cam4 每帧时间戳一致,墙钟(秒表)验证五路输出读数一致。帧完好性审计测得 2304×1272 @ 30 fps 下 MIPI 级丢帧率约 6 万帧 1 帧。

视频和音频也同步吗?

是。麦克风数据包在设备端编码为 AAC,并与视频帧共享同一 64 位计数器的时间戳,主机可直接关联声音与图像——这是波束成形与说话人跟踪的前提。测量显示加入 AAC 对视频吞吐无可测影响。

相机之外,多相机拼接还需要什么?

三样东西:硬件帧同步(消灭接缝鬼影)、每相机内参加相机间外参(构建重投影 LUT)、光度归一化(在颜色上隐藏接缝)。我们以校准资产的形式交付这三者,再按产品的成本与部署模型在主机 PC 或设备端实现拼接。

CE 与 FCC 认证有什么区别?

它们是不同市场的制度,不是可互换的戳。CE 是欧盟符合性声明,覆盖 EMC(EN 55032/55035)、无线电(RED)、安全(EN 62368-1)与 RoHS;FCC 是美国制度,聚焦发射(Part 15)与无线电认证。许多产品用一次预测试同时冲刺两者,因为 EMC 测试项高度重叠。

UL 认证要多久?

该级别产品从正式送测到证书典型 10–16 周,此前还有设计评审时间。最大的进度变量是实验室开出多少不符合项——所以我们先在自己的实验室跑预测试(耐压、温升、异常测试)。

一台主机 PC 能带多台这种五相机设备吗?

能。每台设备以唯一 USB PID 枚举,设备经标准 USB 3.0 集线器连接,SDK 把每台设备暴露为独立的相机组、拥有自己的同步批量流——一台 PC 上十条以上同步通道,同时保持每台设备内的时间对齐。

全链条相机 ODM 项目包括什么?

工业设计;结构与热设计;硬件原理图与 PCB 布局;SMT 贴装;相机模组制造;内参与外参标定;固件与主机 SDK;组装与系统测试;生产工艺设计;以及 CE/FCC/UL 认证支持。链条上每个阶段都在真实客户项目中执行过,EyeCloud AI 以自有团队提供,范围从单阶段到交钥匙均可。

什么是 UL 黄卡?它对相机 ODM 项目为什么重要?

UL 黄卡是 UL 认可材料或元器件的官方证书页——塑料材料归档于 QMFZ2 类别,每个都有可在 UL Product iQ 查验的档案号。它记录材料在特定厚度下的 UL 94 阻燃等级、RTI、CTI 与灼热丝评级。在外壳、绝缘部件与关键连接器上指定黄卡材料,意味着整机安全评审从预先评估过的结构出发——不符合项更少,通往 UL 列名更快。

正在打造同步多相机产品?

如果你的路线图包含多相机阵列、拼接、立体或多传感器感知,我们可以在你的产品上复刻这套打法——从工业设计到同步采集、校准、认证与量产。欢迎浏览我们的相机与采集产品、查看工程案例,或联系我们的团队讨论你的项目。

Leave a message
FirstName*
LastName*
Email*
Message*
Company Name