このページの一部は機械翻訳であり、まだ人による確認が行われていません。

手と目のキャリブレーション不良(キャリブレーションボードの移動またはずれ)のため、タッチテストは安全に実施できません。

問題

ハンドアイキャリブレーションの結果が不良であり、タッチテスト を安全に実施することは危険です。

手と目の変形

手と目の残差

投影検証

タッチテスト

悪い

悪い

悪い

危険

キャリブレーションボードが取得中に動いたりずれたりした場合は、ボードを固定し、ハンドアイキャリブレーションを再度実行してください(以下の 潜在的な解決策 を参照)。

手と目のキャリブレーション結果が悪い例

手と目の変換マトリックスの値のいくつかが物理的な測定値から予想以上に異なっているため、正しくないように見えます。この差は極端に大きいわけではありませんが、このセットアップにおいて妥当とされる範囲を超えています。

手と目の変換マトリックス

0.994

0.040

0.099

-84.190

-0.042

0.999

0.021

-84.129

-0.098

-0.025

0.995

147.697

0

0

0

1

このセットアップでは、値 147.697 はおよそ 130 mm、値 -84.129 はおよそ 90 mm であることが予想されます(予想値はカメラとキャリブレーション対象物のジオメトリによって異なります)。この段階では符号(+/-)は座標系の定義に依存するため無視し、距離のみに注目します。

../../_images/eye_in_hand_approximate_hand_eye_matrix.png

較正残差も予想より著しく大きく、およそ 1 桁高い値を示している。

残差

N(ポーズ)

回転平均度(°)

最大回転角度(°)

平均転位(mm)

最大トランスミッション値(mm)

13

2.449

5.590

4.626

10.946

小型のロボットでは、残差はサブミリメートルの範囲に収まると予想されますが、大型のロボットでは、残差がミリメートル単位になることがあります。残差の回転成分については、1 度未満の範囲になると予想されます。

完全残余
残差

ポーズ

回転角度(°)

翻訳(mm)

1

5.590

10.946

2

4.864

6.151

3

5.294

5.707

4

1.682

7.975

5

1.537

4.446

6

1.570

6.958

7

1.738

2.492

8

0.950

2.917

9

1.973

5.113

10

1.546

0.831

11

1.851

0.773

12

1.701

3.509

13

1.544

2.329

投影による検証は技術的には成功しますが、結果として生じる誤差は依然として許容範囲を超えています。投影検証の結果は慎重に評価してください。ハンドアイキャリブレーションが正しくない場合でも、投影誤差が許容範囲内に見えることがあるためです。

../../_images/projection_verification_poor.png

こうした結果は、手と目のキャリブレーションが正しくないこと、そしてタッチテストを試みれば失敗する可能性が高いことを強く示唆している。

潜在的な原因

アイ・イン・ハンド:

データセットの取得中に、校正ボードが移動した。

目と手:

データセットの取得中に、カメラまたはキャリブレーションボードのいずれかが動いた。

データセット取得中にキャリブレーションボード(ハンドアイ方式)またはカメラ/ボードとフランジ(ハンドツーハンド方式)が動くと、ハンドアイキャリブレーションの前提である剛体幾何学が崩れます。これにより、フレームごとにロボットとカメラの関係が不整合になり、ソルバーが物理的なセットアップと一致しないハンドアイ変換に収束してしまいます。

その結果、残差が大きくなり、投影精度が低下し、手と目の変換マトリックスの距離が実際のジオメトリと異なることが確認できます。深刻な場合、生成された変換により衝突のリスクが生じ、タッチテストによる検証が危険になることがあります。

潜在的な解決策

  1. カメラとキャリブレーションボードがしっかりと固定され、データ取得中に動かないようにしてください。

  2. 同じデータセットを使用して、手と目のキャリブレーションを繰り返します。

  3. 手と目のキャリブレーション結果(変換、残差、投影)を確認します。

  4. (手と目のキャリブレーション結果が良好な場合)タッチテストを実行します。

../../_images/touching-test-result-aruco.jpg
問題の再現手順(校正ボードを意図的に移動させた場合)

良質なデータセット

以下の画像に示すデータセットを用いて、手と目のキャリブレーションが正常に実行されました。

../../_images/hand-eye-calibration-small-movements-dataset.png

キャリブレーションの結果は以下のとおりです。

手と目の変換マトリックス

0.999

-0.004

0.043

-55.936

0.003

0.999

0.013

-91.919

-0.043

-0.013

0.998

128.086

0

0

0

1

残差

N(ポーズ)

回転平均度(°)

最大回転角度(°)

平均転位(mm)

最大トランスミッション値(mm)

14

0.022

0.034

0.180

0.338

完全残余
残差

ポーズ

回転角度(°)

翻訳(mm)

1

0.017

0.163

2

0.008

0.135

3

0.028

0.172

4

0.009

0.053

5

0.031

0.236

6

0.006

0.060

7

0.009

0.154

8

0.015

0.102

9

0.031

0.147

10

0.009

0.145

11

0.030

0.249

12

0.023

0.152

13

0.034

0.255

14

0.031

0.169

ハンドアイキャリブレーションは、タッチテスト によって検証されました。

../../_images/touch_test_correct.png

タッチテストは成功し、手と目のキャリブレーションが正しく正確であることが確認されました。

不良データセット(キャリブレーションボードを意図的に移動)

この問題を再現するために、データセットの取得中に、2 回のキャプチャの間でキャリブレーションボードを意図的に移動させた(下の画像を参照)。

../../_images/hand-eye-calibration-small-movements-dataset-board-moved.png

校正の結果、以下の結果が得られました。

手と目の変換マトリックス

0.994

0.040

0.099

-84.190

-0.042

0.999

0.021

-84.129

-0.098

-0.025

0.995

147.697

0

0

0

1

残差

N(ポーズ)

回転平均度(°)

最大回転角度(°)

平均転位(mm)

最大トランスミッション値(mm)

13

2.449

5.590

4.626

10.946

完全残余
残差

ポーズ

回転角度(°)

翻訳(mm)

1

5.590

10.946

2

4.864

6.151

3

5.294

5.707

4

1.682

7.975

5

1.537

4.446

6

1.570

6.958

7

1.738

2.492

8

0.950

2.917

9

1.973

5.113

10

1.546

0.831

11

1.851

0.773

12

1.701

3.509

13

1.544

2.329

投影による検証は技術的には成功しましたが、結果として生じる誤差は依然として許容範囲を超えていました。投影検証の結果は慎重に評価してください。ハンドアイキャリブレーションが正しくない場合でも、投影誤差が許容範囲内に見えることがあるためです。

../../_images/projection_verification_poor.png

こうした結果は、手と目のキャリブレーションが正しくないことを強く示唆しており、タッチテストを実施しても失敗する可能性が高いため、安全上の理由からテストは省略された。

比較

以下の表では、手と目の変換行列(並進値)と手と目のキャリブレーション残差の結果を比較しています。

手と目の変換行列における並進値

データセット

X(mm)

Y(mm)

Z(mm)

良好(ボードが安定している)

-55.936

-91.919

128.086

不良(ボード移動)

-84.190

-84.129

147.697

Δ(良い-悪い)

28.254

-7.790

-19.611

残差

データセット

N

回転平均度(°)

最大回転角度(°)

平均転位(mm)

最大トランスミッション値(mm)

良好(ボードが安定している)

14

0.022

0.034

0.180

0.338

不良(ボード移動)

13

2.449

5.590

4.626

10.946