このページの一部は機械翻訳であり、まだ人による確認が行われていません。

手と目のキャリブレーション不良(手と目の設定が間違っている)のため、タッチテストは安全に実施できません。

問題

ハンドアイキャリブレーションの結果が不良であり、タッチテスト を実行するのは危険です。

手と目の変形

手と目の残差

投影検証

タッチテスト

悪い

悪い

悪い

危険

物理的なセットアップに対して誤った構成(Eye-to-Hand 対 Eye-in-Hand)でハンドアイキャリブレーションを実行した場合は、正しい構成で再実行してください(詳細は以下の 潜在的な解決策 を参照)。

手と目のキャリブレーション結果が悪い例

ハンドアイ変換行列は、いくつかの値が物理的な測定値から予想以上に異なっているため、正しいようには見えません。差は極端に大きいわけではありませんが、この構成において妥当と考えられる範囲を超えています。

手と目の変換マトリックス

0.626

0.780

0.008

116.163

-0.672

0.545

-0.502

1183.242

-0.396

0.309

0.865

-286.632

0.000

0.000

0.000

1.000

この構成では、値 -286.632 はおよそ 130 mm であることが期待され、値 1183.24 はおよそ 90 mm であることが期待されます(期待値はカメラとキャリブレーションオブジェクトの幾何学的配置によって異なります)。この段階では符号(+/-)は無視します。これは座標系の定義に依存するためであり、ここでは距離のみに注目します。

../../_images/eye_in_hand_approximate_hand_eye_matrix.png

較正残差も予想より著しく大きく、およそ 1 桁高い値を示している。

残差

N(ポーズ)

回転平均度(°)

最大回転角度(°)

平均転位(mm)

最大トランスミッション値(mm)

14

7.847

22.552

26.112

74.373

小型ロボットの場合、残差はサブミリメートルの範囲になると予想されますが、大型ロボットの場合は残差がミリメートル単位の範囲になることがあります。残差の回転成分については、1 度未満の範囲になると予想されます。

完全残余
残差

ポーズ

回転角度(°)

翻訳(mm)

1

0.690

6.318

2

9.634

18.759

3

12.329

18.773

4

6.403

17.827

5

6.900

44.173

6

0.662

3.098

7

7.149

17.514

8

8.731

28.463

9

22.552

55.483

10

12.946

24.909

11

0.666

9.978

12

9.530

17.392

13

7.362

74.373

14

4.309

28.505

投影による検証は技術的には成功しますが、結果として生じる誤差は依然として許容範囲を超えて大きくなります。ハンドアイキャリブレーションが正しくない場合でも投影誤差が許容範囲内に見えることがあるため、投影検証の結果は慎重に判断する必要があります。

../../_images/projection_verification_poor.png

こうした結果は、手と目のキャリブレーションが正しくないこと、そしてタッチテストを試みれば失敗する可能性が高いことを強く示唆している。

潜在的な原因

ハンドアイキャリブレーションが誤ったハンドアイ構成(アイインハンドまたはアイツーハンド)で実行されたため、ソルバーに物理的なセットアップに関する誤った情報が与えられました。

その結果、残差が大きくなり、投影精度が低下し、ハンドアイ変換行列の距離が実際の幾何学的配置と異なる値になることがあります。深刻な場合には、この変換結果によって衝突のリスクが生じ、タッチテストによる検証が危険になることがあります。

潜在的な解決策

  1. 手と目のキャリブレーションは、ご自身の身体環境に合った正しい手と目の設定で実行してください。

    • アイ・トゥ・ハンド:カメラは環境内に固定されており、ロボットがキャリブレーションオブジェクト(つまり、オブジェクト・イン・ハンド*または*静止/固定カメラ)を移動します。

    • アイ・イン・ハンド:カメラはロボットに取り付けられ、キャリブレーションボードは環境内に固定されます(例:オブジェクト・トゥ・ハンド*または*オンアーム/ムービングカメラ)。

  2. 同じデータセットを使用して、手と目のキャリブレーションを繰り返します。

  3. 手と目のキャリブレーション結果(変換、残差、投影)を確認します。

  4. (手と目のキャリブレーション結果が良好な場合)タッチテストを実行します。

../../_images/touching-test-result-aruco.jpg
問題の再現(手と目の配置の誤り)

良質なデータセット

以下の画像に示すデータセットを用いて、手と目のキャリブレーションが正常に実行されました。

../../_images/hand-eye-calibration-small-movements-dataset.png

キャリブレーションの結果は以下のとおりです。

手と目の変換マトリックス

0.999

-0.004

0.043

-55.936

0.003

0.999

0.013

-91.919

-0.043

-0.013

0.998

128.086

0

0

0

1

残差

N(ポーズ)

回転平均度(°)

最大回転角度(°)

平均転位(mm)

最大トランスミッション値(mm)

14

0.022

0.034

0.180

0.338

完全残余
残差

ポーズ

回転角度(°)

翻訳(mm)

1

0.017

0.163

2

0.008

0.135

3

0.028

0.172

4

0.009

0.053

5

0.031

0.236

6

0.006

0.060

7

0.009

0.154

8

0.015

0.102

9

0.031

0.147

10

0.009

0.145

11

0.030

0.249

12

0.023

0.152

13

0.034

0.255

14

0.031

0.169

ハンドアイキャリブレーションは タッチテスト によって検証されました。

../../_images/touch_test_correct.png

タッチテストは成功し、手と目のキャリブレーションが正しく正確であることが確認されました。

データセットに問題あり(キャリブレーションボードが意図的に移動された)

この問題をシミュレートするために、手と目のキャリブレーションを誤った手と目の構成(手の中に目があるのではなく、手と目が直接つながる構成)で実行しました。その結果、以下のキャリブレーション結果が得られました。

手と目の変換マトリックス

0.626

0.780

0.008

116.163

-0.672

0.545

-0.502

1183.242

-0.396

0.309

0.865

-286.632

0.000

0.000

0.000

1.000

残差

N(ポーズ)

回転平均度(°)

最大回転角度(°)

平均転位(mm)

最大トランスミッション値(mm)

14

7.847

22.552

26.112

74.373

完全残余
残差

ポーズ

回転角度(°)

翻訳(mm)

1

0.690

6.318

2

9.634

18.759

3

12.329

18.773

4

6.403

17.827

5

6.900

44.173

6

0.662

3.098

7

7.149

17.514

8

8.731

28.463

9

22.552

55.483

10

12.946

24.909

11

0.666

9.978

12

9.530

17.392

13

7.362

74.373

14

4.309

28.505

投影による検証は技術的には成功しましたが、結果として生じた誤差は依然として許容範囲を超えて大きいものでした。ハンドアイキャリブレーションが正しくない場合でも投影誤差が許容範囲内に見えることがあるため、投影検証の結果は慎重に判断する必要があります。

../../_images/projection_verification_poor.png

こうした結果は、手と目のキャリブレーションが正しくないことを強く示唆しており、タッチテストを実施しても失敗する可能性が高いため、安全上の理由からテストは省略された。

比較

以下の表では、手と目の変換行列(並進値)と手と目のキャリブレーション残差の結果を比較しています。

手と目の変換行列における並進値

データセット

X(mm)

Y(mm)

Z(mm)

良い

-55.936

-91.919

128.086

悪い(手と目の協調動作が間違っている)

116.163

1183.242

-286.632

Δ(良い-悪い)

-172.099

-1275.161

414.718

残差

データセット

N

回転平均度(°)

最大回転角度(°)

平均転位(mm)

最大トランスミッション値(mm)

良い

14

0.022

0.034

0.180

0.338

悪い(手と目の協調動作が間違っている)

14

7.847

22.552

26.112

74.373