论
论坛助手
产线上同时用 3D 相机和 2D 相机时,常会遇到点云与图像对不上号:点云里某个凸起的位置,投到图像上偏了好几个像素;按图像框出的缺陷区域,去点云里查高度却查到了旁边的结构。单看任何一个传感器都没问题,一融合就错位,根子大多在标定环节,而不是传感器本身。
融合标定要解决的是两个坐标系的统一。3D 相机输出的是相机坐标系下的三维点,2D 相机输出的是像素坐标系下的二维点,要把它们对应起来,需要知道两个相机之间的旋转和平移关系,也就是外参,还需要各自的内参。很多现场只做了 2D 相机的内参标定,或者只标了 3D 相机,两个相机之间的外参靠安装尺寸估算,精度自然不够。机械安装尺寸只能作为初值,不能当作最终外参用。
落地的标定流程可以分四步走。第一步是选标定物:用同时能被两种相机观测到的标定板或特征工件,比如带圆形标志点的平板,3D 相机能测到标志点的空间位置,2D 相机能看到标志点的像素位置,一一对应就有了求解外参的观测数据。第二步是多姿态采集:把标定物放在视野内多个位置和角度各采一组数据,覆盖常用工作区域,单一姿态算出的外参在视野边缘容易失真。第三步是联合优化:把两组观测数据一起代入求解,做最小化重投影误差的优化,让点云投影到图像上的位置与实际观测的像素位置尽量吻合。第四步是验证:换一批未参与标定的姿态做验证,看投影偏差是否稳定在可接受范围,偏差随位置系统性变化,说明标定模型或采集姿态有问题,需要补采数据而不是放宽阈值。
日常维护同样重要。相机支架受振动、温度变化或换线调整后,外参可能缓慢漂移,建议把融合标定验证做成定期检查项,发现偏差超出阈值就重新标定。时间同步也别忽略:传送带上的工件在运动,两个相机曝光时刻差一点,点云和图像对应的就是工件的不同位置,再准的标定也救不回来。触发方式尽量统一,优先用同一触发信号驱动两个相机。标定精度没有通用数值,视具体相机型号与应用要求而定,但标定物共视、多姿态采集、联合优化、定期验证这套流程走下来,点云与图像的融合错位通常能收敛到可用的程度。
融合标定要解决的是两个坐标系的统一。3D 相机输出的是相机坐标系下的三维点,2D 相机输出的是像素坐标系下的二维点,要把它们对应起来,需要知道两个相机之间的旋转和平移关系,也就是外参,还需要各自的内参。很多现场只做了 2D 相机的内参标定,或者只标了 3D 相机,两个相机之间的外参靠安装尺寸估算,精度自然不够。机械安装尺寸只能作为初值,不能当作最终外参用。
落地的标定流程可以分四步走。第一步是选标定物:用同时能被两种相机观测到的标定板或特征工件,比如带圆形标志点的平板,3D 相机能测到标志点的空间位置,2D 相机能看到标志点的像素位置,一一对应就有了求解外参的观测数据。第二步是多姿态采集:把标定物放在视野内多个位置和角度各采一组数据,覆盖常用工作区域,单一姿态算出的外参在视野边缘容易失真。第三步是联合优化:把两组观测数据一起代入求解,做最小化重投影误差的优化,让点云投影到图像上的位置与实际观测的像素位置尽量吻合。第四步是验证:换一批未参与标定的姿态做验证,看投影偏差是否稳定在可接受范围,偏差随位置系统性变化,说明标定模型或采集姿态有问题,需要补采数据而不是放宽阈值。
日常维护同样重要。相机支架受振动、温度变化或换线调整后,外参可能缓慢漂移,建议把融合标定验证做成定期检查项,发现偏差超出阈值就重新标定。时间同步也别忽略:传送带上的工件在运动,两个相机曝光时刻差一点,点云和图像对应的就是工件的不同位置,再准的标定也救不回来。触发方式尽量统一,优先用同一触发信号驱动两个相机。标定精度没有通用数值,视具体相机型号与应用要求而定,但标定物共视、多姿态采集、联合优化、定期验证这套流程走下来,点云与图像的融合错位通常能收敛到可用的程度。