视觉引导机器人抓取 手眼标定那些事

3D 视觉引导抓取,看上去很简单——扫一眼、伸进去、抓起来。背后其实是一整套「手眼协同」的功夫,而其中精度最容易被悄悄吃掉的地方,就是手眼标定。再好的相机和算法,如果标定不准,机器人一样会抓偏、抓空甚至撞坏工件。

相机怎么装:两种安装方式

先说相机安装。常见两种:Eye-to-hand(相机固定在场景外)和 Eye-in-hand(相机装在机械臂末端)。Eye-to-hand 视野稳定、一次扫描覆盖整个工作区、不随机械臂运动,节奏快,料框无序抓取多用这种。

Eye-in-hand 则随臂移动、视角灵活,能近距离、多角度观察目标,精细装配更偏向它,缺点是视野随臂变化、每次都要重新扫描。选哪种取决于工作区大小、节拍要求和精度需求,没有绝对优劣。还有一种混合方案——主相机 Eye-to-hand 负责粗定位,末端相机 Eye-in-hand 负责精对准,兼顾效率与精度。

标定:精度被吃掉的地方

再说标定,这是把「像素坐标」翻译成「机器人坐标」的关键一步。它的本质,是求出相机坐标系与机器人基座坐标系之间的旋转和平移关系(那个著名的 AX=XB 方程)。关系算错了,后面所有定位都是错的。

标定的精度高度依赖数据采集质量:标定板摆放的位姿越多样、覆盖越充分、旋转越充分,解算结果越稳定;位姿太集中、角度太单一,误差会被急剧放大。很多「当时准、跑两天就飘」的问题,根源就是标定时位姿采集不够充分。

标定的具体做法

传统方法用齐次矩阵描述坐标变换,参数冗余、对噪声敏感。有团队用基于双四元数的方法做手眼标定,再用旋角一致性定理过滤观测野点,比直接用齐次矩阵更紧凑、精度更高。

工程上常用的标定流程是:把标定板固定在机械臂末端(或工作台上),让机器人带着它摆出十几个到几十个不同位姿,每个位姿同时记录相机观测到的标定板位姿和机器人法兰盘位姿,最后用最小二乘解出手眼矩阵。采集位姿时,旋转要覆盖足够大的角度范围,平移要在工作空间内均匀分布。

工程上的精度参考

工程上有一组参考数字:双目结构光方案的扫描精度约 0.01–0.1mm,定位精度约 0.03–0.5mm,能自主识别无序摆放的异形件、判断朝向并调整抓取位姿。这套指标足以应付大多数上下料、分拣场景。

但要注意,这是理想标定下的数字,现场安装偏差、工件反光、温度漂移都会让实际精度打折。所以要留抓取裕量,吸盘或夹爪的接触容差要能吃掉这部分误差。标定完成后,最好用已知尺寸的工件做一次验证,确认实际精度是否达标。

复杂场景才是真考验

真正难的是复杂场景——遮挡、反光、堆叠咬合。算法要能从点云里正确分割出单个工件,标定要经得起机械臂长时间运动后的微小变化。还有个常被忽视的坑:相机安装角度倾斜会带来图像畸变,标定之前先做机械找正。

看着是机械活,其实直接决定了视觉精度的上限。刚性、振动、温度,都会让标定参数漂移,成熟的方案会把重标定做成定期自动执行的维护流程。你们做手眼标定用什么方法?有没有被「标定完当时准、跑两天就飘」的问题困扰过?

要点梳理:

  • 无序抓取多用 Eye-to-hand,精细装配偏向 Eye-in-hand
  • 标定求相机与机器人坐标系关系,是精度关键
  • 双四元数加野点过滤,比齐次矩阵更紧凑精确
  • 位姿采集要多样、覆盖范围大,否则误差被放大
  • 标定前先机械找正,定期重标定对抗漂移

你们做手眼标定用什么方法?踩过哪些标定漂移的坑?

标定精度的验证与维护

标定做完不等于万事大吉,验证和维护同样重要。验证的常用方法是"多点重投影":把标定结果作用在若干未参与标定的已知位姿上,看视觉给出的坐标与真实坐标的偏差,这个偏差才是标定精度的真实体现。只盯着标定算法输出的重投影误差是不够的,那个数字往往过于乐观。

维护方面,要建立定期复检机制。机械臂长期使用后关节间隙会变大、支架可能松动、相机温度会漂移,这些都会让标定参数慢慢失效。建议把标定做成可快速执行的标准化流程,并设定复检周期(比如每周或每次换线后)。有些先进方案会引入自标定能力,利用现场工件自动检测标定是否漂移并触发重标定。把标定当成一项持续的"健康管理",而不是"一次性手术",抓取精度才能长期稳定。

抓取规划中的碰撞与姿态问题

手眼标定解决的是"看清在哪",但要真正抓得稳,还要过碰撞规划和姿态选择两道关。碰撞规划要求系统根据点云判断机械臂从当前位置到抓取点的路径上有没有障碍物——包括料框边缘、其他工件、夹具本身。再好的定位,如果路径撞上料框,抓取照样失败。成熟的方案会在路径规划阶段做碰撞检测,必要时自动调整接近方向。

姿态选择则决定了夹爪以什么角度接触工件。对于异形件,往往要从点云分析出稳定的"可抓取面",让夹爪从法线方向接近、保证受力平衡。有些工件有多个候选抓取姿态,系统要结合夹具特性和后续放置要求综合选择。这些决策都建立在准确的三维信息之上,再次说明手眼标定是整个抓取链路的地基——地基打不牢,上层的规划再精巧也是空中楼阁。


本文基于公开资料整理改写,来源:3D视觉:机器人的「火眼金睛」。版权归原作者所有,如有侵权请联系删除。