明德扬智能感知数据接入系列

AI / GPU 多传感器聚合

把相机、雷达、IMU、控制总线和高速采样设备产生的数据,在进入Jetson或GPU服务器之前先完成接入、时间整理和统一传输,让AI主机集中处理识别、融合与决策。

  • 机器人
  • 无人机
  • 智能装备
  • Jetson
  • GPU服务器
  • 相机/雷达/IMU
咨询前建议准备:传感器类型接口数量单路数据量同步要求AI主机型号传输接口是否需要控制返回

适用需求

AI主机擅长分析,但不必亲自适配每一种传感器

前端FPGA平台先把多路数据接好、排齐并集中传输,AI主机就能把更多资源用于识别、融合和应用功能。

01

接口种类多

相机、雷达、IMU和高速采样设备使用不同连接方式,直接全部接到AI主机上,软硬件适配工作量大。

02

数据时间对不上

图像和运动数据如果不是同一时刻,识别和融合结果就可能出现偏差,需要先统一时间关系。

03

数据量大且要返回控制

既要快速上传多路数据,也可能需要AI主机向相机、雷达或执行机构返回配置和任务指令。

怎么看这张图

左边收集数据,中间整理打包,右边交给AI主机

不用理解每个接口的电气细节,只要知道:不同来源的数据先经过同一个“整理中心”,再通过高速通道送到Jetson或GPU服务器。

简单理解:FPGA平台像机场的行李分拣系统。相机、雷达和IMU送来的数据就像来自不同柜台的行李,系统先贴上来源和时间标签,再按顺序装上高速传输通道,AI主机收到后就能知道“这份数据来自哪里、发生在什么时候”。
1

接入多种数据源

相机提供画面,雷达提供距离或目标信息,IMU提供姿态,高速采样模块提供波形数据。

2

转换成统一表达

不同设备“说法不同”,中间平台先读懂原始数据,再转换成统一的数据格式。

3

对齐时间并合并

给数据标记采集时间和通道编号,让同一时刻的图像、姿态和雷达信息能够对应。

4

高速送到AI主机

整理后的数据通过高速网络或PCIe等通道进入Jetson或GPU服务器,用于识别、融合与判断。

5

需要时返回指令

AI主机发出的配置或控制内容,会按目标设备重新分发,形成采集、分析和控制的闭环。

相机雷达IMU等多种传感器经FPGA整理后连接Jetson或GPU服务器的流程图
图中“Holoscan打包/解包”可以理解为一种给AI数据统一装箱和拆箱的方法;是否采用该方式,会根据客户主机和软件环境确认。

客户需要先回答三个问题:有哪些传感器、每路数据有多大、AI主机希望通过什么接口接收。明确这三点后,才能准确选择板卡和数据通路。

产品选择

根据传感器接口和AI主机连接方式选择平台

以下板卡分别覆盖网络/存储、FMC高速扩展、FMC+与光纤以及图像显示接口。最终选型需结合数据带宽和接口清单确认。

网络/存储方向

CP9150-05-2NET-4SATA

提供千兆网、SFP、PCIe、USB与SATA等接口,适合验证传感器数据缓存,以及通过网络、光纤或PCIe连接主机的数据通路。

FMC高速接入

CP9165-34-2FMC-PCIEX8

提供两个FMC扩展位置和PCIe x8,适合连接高速传感器模块,并验证传感器数据进入AI/GPU主机的PCIe通路。

FMC+/光纤/存储

CP9165-36-FMC+-2SATA-2SFP-PCIE3.0X4

提供FMC+、SFP、SATA和PCIe等连接,适合数据量较大的传感器接入、缓存与综合传输验证。

图像/显示数据

CP9150-03-3DP-2HDMI

提供DP、HDMI和USB等连接,适合图像或显示类数据的输入输出、预处理以及与AI主机的数据链路验证。

实施步骤

先算清数据,再选择连接方式

列出传感器

填写相机、雷达、IMU和采样模块的型号、数量、接口和数据速率。

确认时间要求

说明哪些数据需要互相对齐、允许多大时间差,以及是否需要统一触发。

确认AI主机

提供Jetson或GPU服务器型号、可用接口和目标软件数据接收方式。

验证完整链路

检查多路接入、时间对应、持续传输、异常状态和控制指令返回。

提交数据需求

让技术人员先看懂您的传感器和主机

填写后会自动生成咨询摘要,便于快速判断接口、带宽和板卡方向。

FAQ

常见问题

FPGA平台会替代Jetson或GPU服务器吗?

不会。FPGA平台主要负责前端接口接入、数据整理和高速传输;Jetson或GPU服务器继续负责AI识别、融合和应用逻辑。

一定要使用Holoscan吗?

不一定。Holoscan只是可选的数据管线方向之一,实际数据格式和传输方式会根据AI主机、软件环境和项目目标确认。

只有相机,没有雷达和IMU,也适用吗?

适用。可以从单一图像接口或少量传感器开始,重点确认接口、分辨率、帧率、数据量和主机连接方式。