opencv 九点标定_精度与HALCON结果仅差（±0.2mm）

很多初学者，都对标定概念模糊不清，分不清坐标系之间的关系，搞不清相机标定和机械手相机标定有什么关系，想当初自己也是一个人摸索了很久，本文将尽量给大家解释。

         我们通常所说的相机标定分为两种，一种是相机参数的标定，这一般用到张氏标定法，标定的作用是校正相机自身的畸变，利用校正得到的参数对图形进行处理后再呈现出来。关于这方面的资料，网上大把，我也不再此说明。一般的机械手定位也不会进行这个标定，因为现在的相机畸变还是很小的，精度可以满足大多数要求。

        本文要介绍的是第二种，相机和机械手之间的标定，作用：建立相机坐标系和机械手坐标系之间的关系，即给机械手装上眼睛，让它去哪就去哪。

         常用的方法是9点标定，所用到函数是EstimateRigidTransform，网上关于 estimateRigidTransform 的详细说明很少，Emgucv的几乎没有。当时找了N久，一度以为opencv没有坐标系转换的算法，差点就投奔halcon去了，不得不说，opencv在机器视觉方面的应用是完全不如halcon的。EstimateRigidTransform有两个方法。

           方法一：Mat EstimateRigidTransform(PointF[] sourcePoints, PointF[] destinationPoints, bool fullAffine);返回的是一个2*3的double的矩阵 。

第一个参数sourcePoints：换之前图像上的点（相机坐标系下的点）

第二个参数destinationPoints：换之后图像上的点（机械手坐标系下的点）

第三个参数fullAffine：  TRUE（全仿射变换,包括：rotation, translation, scaling,shearing,reflection）

                                      FALSE（带有约束的仿射变换） 

           方法二：Mat EstimateRigidTransform(IInputArray src, IInputArray dst, bool fullAffine);   //返回的是图像

第一个参数src：变换之前的图像

第二个参数dst：变换之前的图像

第三个参数fullAffine：  TRUE（全仿射变换,包括：rotation, translation, scaling,shearing,reflection）

                                      FALSE（带有约束的仿射变换） 

        因为我们需要的是坐标点，所以选用第一个函数。采用9点标定是因为点数越多越精确，但也不是越多越好，因为点数越多标定也会越麻烦，所选取的9个点在相机中间不要太靠近边缘，能够照顾到要定位的点即可。最少需要机械手和相机系下各2组点。

标定步骤：

0.准备工作：相机位置，机械手位置全部固定好，标定针固定在机械手上，固定好后不能够再移动。标定针的位置一定要与夹手或吸盘之内的工具同一位置高度。

1.制作标定板，条件不行的，用普通的纸绘制9个圆，打印出来就行。

2.将标定板放到相机下方，位置区域要与机械手工作的区域一样，包括高度必须尽量一致，这是标定准确度的关键。

3.调整好相机焦距，拍照，然后识别9个点的坐标，关于如何找圆，opecv的霍夫变换找圆非常容易误判，比较好的方法是采用轮廓找圆法。这个我也想写篇博客讲一讲。

4.将机械手依次移动到9的圆的中心，记下机械手坐标（九个）

5.将机械手坐标destinationPoints与相机坐标sourcePoints代入方法EstimateRigidTransform，即可算出一个2*3的矩阵。

6.根据所得到的标定参数，可将图像下的所有坐标转换为机器人的坐标，机器人即可移动到图像上指定的位置。

 坐标转换方法：

Point2d cal_Rob_Coordinate(Point2d points_camera)
{
	Point2d Rob_coordinate;
	double A = _Hom_mat2d.ptr(0)[0];
	double B = _Hom_mat2d.ptr(0)[1];
	double C = _Hom_mat2d.ptr(0)[2];
	double D = _Hom_mat2d.ptr(1)[0];
	double E = _Hom_mat2d.ptr(1)[1];
	double F = _Hom_mat2d.ptr(1)[2];
	Rob_coordinate.x = (A * points_camera.x) + (B * points_camera.y) + C;
	Rob_coordinate.y = (D * points_camera.x) + (E * points_camera.y) + F;
	return Rob_coordinate;
}

---

以下是于2020年12月25日附加内容：第六步中——我发现在opencvsharp中Mat.Ptr()结果和opencv这边不同：

opencvsharp请这样写：var A = Hom_mat2d.Get (    ,    );

---

至此，标定结束，可以随意玩耍机械手，对着物体拍张照，定位要夹取的点，然后根据以上标定得到的参数将换算为机械手坐标系下的坐标，然后将坐标通过通信协议传送给机械手，就大功告成了！

亲测精度与HALCON的计算结果仅差（±0.2mm）

 

参照于:https://www.cnblogs.com/thebreeze/p/10316030.html