特許 7468288 キャリブレーション装置およびキャリブレーションの自動設定方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-04-08

(45)【発行日】2024-04-16

(54)【発明の名称】キャリブレーション装置およびキャリブレーションの自動設定方法

(51)【国際特許分類】

   B25J 9/10 20060101AFI20240409BHJP

   B25J 13/08 20060101ALI20240409BHJP

【ＦＩ】

B25J9/10 A

B25J13/08 A

【請求項の数】 11

(21)【出願番号】P 2020174358

(22)【出願日】2020-10-16

(65)【公開番号】P2022065714

(43)【公開日】2022-04-28

【審査請求日】2023-08-08

(73)【特許権者】

【識別番号】000002945

【氏名又は名称】オムロン株式会社

(74)【代理人】

【識別番号】110002860

【氏名又は名称】弁理士法人秀和特許事務所

(72)【発明者】

【氏名】殿谷 徳和

(72)【発明者】

【氏名】松本 慎也

【審査官】牧 初

(56)【参考文献】

【文献】特開２０１９－２１７５７１（ＪＰ，Ａ）

【文献】特開２０２０－１４４８２９（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｂ２５Ｊ １／００－２１／０２

Ｇ０５Ｂ １９／１８－１９／４１６

Ｇ０５Ｂ １９／４２－１９／４６

(57)【特許請求の範囲】

【請求項1】

センサによる物体の検出結果に基づいてキャリブレーションを行うキャリブレーション装置であって、
物体を検出するセンサまたは前記物体が取り付けられたロボットアームの姿勢を変更する範囲を、前記センサの視野サイズと前記物体のサイズとに基づいて決定する決定手段と、
前記決定手段により決定された前記範囲内での前記ロボットアームの姿勢の変更中に、前記ロボットアームの姿勢の情報と、前記センサによる前記物体の検出結果との組み合わせを繰り返し取得する取得手段と、
前記取得手段により取得された複数の前記組み合わせに基づいて、前記ロボットアームの姿勢と前記物体の検出結果との対応関係を決定するキャリブレーションを行うキャリブレーション手段と
を有することを特徴とするキャリブレーション装置。

【請求項2】

前記センサまたは前記物体は、前記ロボットアームの先端に取り付けられており、
前記決定手段は、前記ロボットアームの姿勢を変更する範囲として、前記ロボットアームの先端の位置を変更する範囲を決定する
ことを特徴とする請求項１に記載のキャリブレーション装置。

【請求項3】

前記センサまたは前記物体は、前記ロボットアームの先端に取り付けられており、
前記決定手段は、前記ロボットアームの姿勢を変更する範囲として、前記ロボットアームの先端の姿勢を変更する範囲を決定する
ことを特徴とする請求項１または２に記載のキャリブレーション装置。

【請求項4】

前記物体の検出結果は、前記物体の、前記センサにより検出された位置を含む
ことを特徴とする請求項１～３のいずれか１項に記載のキャリブレーション装置。

【請求項5】

前記物体の検出結果は、前記物体の、前記センサにより検出された姿勢を含む
ことを特徴とする請求項１～４のいずれか１項に記載のキャリブレーション装置。

【請求項6】

前記物体の検出結果の信頼度を算出する算出手段をさらに有する
ことを特徴とする請求項１～５のいずれか１項に記載のキャリブレーション装置。

【請求項7】

前記信頼度は、前記物体の表面上の、前記センサにより検出された各位置と、所定の設計データにより示された各位置との一致度である
ことを特徴とする請求項６に記載のキャリブレーション装置。

【請求項8】

前記キャリブレーション手段は、前記複数の組み合わせのうち、前記信頼度が所定の閾値以上の組み合わせに基づいて、前記キャリブレーションを行う
ことを特徴とする請求項６または７に記載のキャリブレーション装置。

【請求項9】

前記信頼度が所定の閾値以上となる前記ロボットアームの姿勢の範囲を、前記キャリブレーションの実行後において前記ロボットアームの姿勢を変更可能な範囲として記憶部に記録する記録手段をさらに有する
ことを特徴とする請求項６～８のいずれか１項に記載のキャリブレーション装置。

【請求項10】

センサによる物体の検出結果に基づいてキャリブレーションの自動設定を行う方法であって、
物体を検出するセンサまたは前記物体が取り付けられたロボットアームの姿勢を変更す
る範囲を、前記センサの視野サイズと前記物体のサイズとに基づいて決定する決定ステップと、
前記決定ステップにおいて決定された前記範囲内での前記ロボットアームの姿勢の変更中に、前記ロボットアームの姿勢の情報と、前記センサによる前記物体の検出結果との組み合わせを繰り返し取得する取得ステップと、
前記取得ステップにおいて取得された複数の前記組み合わせに基づいて、前記ロボットアームの姿勢と前記物体の検出結果との対応関係を決定するキャリブレーションを行うキャリブレーションステップと
を有することを特徴とするキャリブレーションの自動設定方法。

【請求項11】

請求項１０に記載のキャリブレーションの自動設定方法の各ステップをコンピュータに実行させるためのプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、ロボットアームの姿勢と、センサによる物体の検出結果との対応関係を決定する技術に関する。

【背景技術】

【0002】

センサによる物体の検出結果に基づいてロボットアームの姿勢や動作を検出したり制御したりする技術（ハンドアイシステム、ビジュアルサーボ、ビジュアルフィードバックなど）が知られており、例えば特許文献１に開示されている。このような技術では、ロボットアームの姿勢や動作を高精度に検出したり制御したりできるようにするために、ロボットアームの姿勢とセンサの検出結果との対応関係を決定するキャリブレーションを行う必要がある。一般的に、ロボットアームの姿勢は、ロボットアームを基準に定められた座標系（ロボット座標系）で表され、センサの検出結果（物体の位置や姿勢など）は、センサを基準に定められた座標系（センサ座標系）で表される。そのため、キャリブレーションは、ロボット座標系とセンサ座標系の対応関係を決定する処理とも言える。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２０１８－１１１１６６号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、従来の一般的なキャリブレーションでは、ユーザが膨大な数のパラメータを入力する必要があり、操作が煩雑である。例えば、ユーザは、ロボットアームの姿勢が順次変更されるように、数十個の姿勢を順次指定する。

【0005】

特許文献１に開示の技術では、キャリブレーションの実行前に、ロボットを制御して（動作させて）ロボットに設置されたマークを移動させながら、カメラによって撮像された画像からマークを検出する。これにより、ユーザによって指定された画像範囲（撮像された画像の一部）に対応するロボットの動作範囲が計測される。そして、キャリブレーションの実行時には、計測された動作範囲内でマークを移動させるように、ロボットが制御される。しかしながら、特許文献１に開示の技術を用いたとしても、ユーザは画像範囲を指定しなければならない。また、キャリブレーションの実行前にロボットを動作させる必要があるため、キャリブレーションを素早く完了させることができない。

【0006】

また、ロボットアームとセンサの従来のキャリブレーションにおいては、センサから取得する情報の結果を見ながらロボットを動作させるスキルが必要であり、センサの計測可能領域やセンシング性能の最適なチューニングなどを行えるスキルも必要である。このため、正確なキャリブレーションを実行するには熟練した作業者（熟練したシステムインテグレータ）が必要となる課題もある。また、位置姿勢を補正するには、単なる２次元の画像だけではなく、３次元の画像情報を取り扱う必要があり、システムインテグレータに求められる技術知識が多く、キャリブレーションのための操作は簡易なものと言える状況ではない。現状、これらを扱える熟練技術者は少ないため、専門知識のない作業者でも簡単に早くキャリブレーションを行うことが要求されている。

【0007】

本発明は上記実情に鑑みなされたものであって、キャリブレーションを容易に且つ短時間で行うことができる技術を提供することを目的とする。

【課題を解決するための手段】

【0008】

上記目的を達成するために本発明は、以下の構成を採用する。

【0009】

本発明の第一側面は、センサによる物体の検出結果に基づいてキャリブレーションを行うキャリブレーション装置であって、物体を検出するセンサまたは前記物体が取り付けられたロボットアームの姿勢を変更する範囲を、前記センサの視野サイズと前記物体のサイズとに基づいて決定する決定手段と、前記決定手段により決定された前記範囲内での前記ロボットアームの姿勢の変更中に、前記ロボットアームの姿勢の情報と、前記センサによる前記物体の検出結果との組み合わせを繰り返し取得する取得手段と、前記取得手段により取得された複数の前記組み合わせに基づいて、前記ロボットアームの姿勢と前記物体の検出結果との対応関係を決定するキャリブレーションを行うキャリブレーション手段とを有することを特徴とするキャリブレーション装置を提供する。

【0010】

キャリブレーションを行うためには、センサの計測可能な２次元平面の視野や３次元空間として計測可能な奥行方向を含むセンシング範囲に物体が入るようにロボットアームの姿勢を変更する必要がある。上述した構成によれば、ロボットアームの動作範囲（ロボットアームの姿勢を変更する範囲）が、センサの視野サイズと物体のサイズ（物体サイズ）とに基づいて自動で決定される。こうすることで、ロボットアームの動作範囲として、センサの視野に物体が入るような範囲を高精度に決定することができ、キャリブレーションが可能となる。また、ロボットアームを動作させずに短時間でロボットアームの動作範囲を決定することができるため、短時間でキャリブレーションを行うことができる。

【0011】

さらに、キャリブレーションを容易に（煩雑な操作無しで）行うことができる。例えば、視野サイズの情報はセンサから取得可能であるし、物体サイズの情報は物体の設計データから取得可能であるため、パラメータの入力といった操作無しでキャリブレーションを行うことができる。なお、視野サイズや物体サイズの情報はユーザによって入力されてもよい。ユーザは、視野サイズや物体サイズの情報を入力する操作を容易に行うことができるため、視野サイズと物体サイズの少なくとも一方の情報がユーザによって入力される場合であっても、簡単な操作のみでキャリブレーションを行うことができる。

【0012】

前記センサまたは前記物体は、前記ロボットアームの先端に取り付けられており、前記決定手段は、前記ロボットアームの姿勢を変更する範囲として、前記ロボットアームの先端の位置を変更する範囲を決定するとしてもよい。こうすることで、ロボットアームの先端の位置（ロボット座標系で表された位置）と、物体の検出結果（センサ座標系で表された結果）との対応関係を決定するキャリブレーションを行うことができる。

【0013】

前記センサまたは前記物体は、前記ロボットアームの先端に取り付けられており、前記決定手段は、前記ロボットアームの姿勢を変更する範囲として、前記ロボットアームの先端の姿勢を変更する範囲を決定するとしてもよい。こうすることで、ロボットアームの先端の姿勢（ロボット座標系で表された位置および姿勢）と、物体の検出結果（センサ座標系で表された結果）との対応関係を決定するキャリブレーションを行うことができる。ロボットアームの先端の位置と姿勢を考慮すれば、ロボットアームの先端の位置と姿勢の一方のみを考慮する場合よりも高精度なキャリブレーションを行うことができる。

【0014】

前記物体の検出結果は、前記物体の、前記センサにより検出された位置を含むとしてもよい。こうすることで、ロボットアームの姿勢（ロボット座標系で表された姿勢）と、物体の検出位置（センサにより検出された位置；センサ座標系で表された位置）との対応関係を決定するキャリブレーションを行うことができる。前記物体の検出結果は、前記物体の、前記センサにより検出された姿勢を含むとしてもよい。こうすることで、ロボットアームの姿勢（ロボット座標系で表された姿勢）と、物体の検出姿勢（センサにより検出さ
れた姿勢；センサ座標系で表された姿勢）との対応関係を決定するキャリブレーションを行うことができる。物体の検出位置と検出姿勢を考慮することで、物体の検出位置と検出姿勢の一方のみを考慮する場合よりも高精度なキャリブレーションを行うことができる。

【0015】

センサの視野に物体が入っていても、センサの視野における物体の位置（相対位置）に依っては、センサが物体を高精度に検出できない（物体の検出結果の信頼度が低い）ことがある。例えば、センサの視野の端部では、物体の領域と大きく異なる領域が、物体の領域として検出されることがある。このため、前記物体の検出結果の信頼度を算出する算出手段をさらに有するとしてもよい。前記信頼度は、前記物体の表面上の、前記センサにより検出された各位置と、所定の設計データにより示された各位置との一致度であるとしてもよい。

【0016】

信頼度が低い検出結果（物体の検出結果）を用いると、キャリブレーションの精度が低下してしまう。このため、前記キャリブレーション手段は、前記複数の組み合わせのうち、前記信頼度が所定の閾値以上の組み合わせに基づいて、前記キャリブレーションを行うとしてもよい。こうすることで、信頼度が低い検出結果が使用されなくなるため、高精度にキャリブレーションを行うことができる。

【0017】

キャリブレーションの実行後において、信頼度が低い検出結果（物体の検出結果）を取得して使用すると、ロボットアームの姿勢や動作を高精度に検出したり高精度に制御したりすることができない。このため、前記信頼度が所定の閾値以上となる前記ロボットアームの姿勢の範囲を、前記キャリブレーションの実行後において前記ロボットアームの姿勢を変更可能な範囲として記憶部に記録する記録手段をさらに有するとしてもよい。こうすることで、信頼度が低い検出結果が取得されにくくなるため、ロボットアームの姿勢や動作を高精度に検出したり高精度に制御したりすることができる。

【0018】

本発明の第二側面は、センサによる物体の検出結果に基づいてキャリブレーションの自動設定を行う方法であって、物体を検出するセンサまたは前記物体が取り付けられたロボットアームの姿勢を変更する範囲を、前記センサの視野サイズと前記物体のサイズとに基づいて決定する決定ステップと、前記決定ステップにおいて決定された前記範囲内での前記ロボットアームの姿勢の変更中に、前記ロボットアームの姿勢の情報と、前記センサによる前記物体の検出結果との組み合わせを繰り返し取得する取得ステップと、前記取得ステップにおいて取得された複数の前記組み合わせに基づいて、前記ロボットアームの姿勢と前記物体の検出結果との対応関係を決定するキャリブレーションを行うキャリブレーションステップとを有することを特徴とするキャリブレーションの自動設定方法を提供する。

【0019】

なお、本発明は、上記構成ないし機能の少なくとも一部を有するロボット、ロボットコントローラー、ロボットシステムなどとして捉えることができる。また、本発明は、上記処理の少なくとも一部を含む、キャリブレーションの自動設定方法、キャリブレーション方法、ロボットの制御方法、ロボットコントローラーの制御方法、又はロボットシステムの制御方法や、これらの方法をコンピュータに実行させるためのプログラム、又は、そのようなプログラムを非一時的に記録したコンピュータ読取可能な記録媒体として捉えることもできる。上記構成及び処理の各々は技術的な矛盾が生じない限り互いに組み合わせて本発明を構成することができる。

【発明の効果】

【0020】

本発明によれば、キャリブレーションを容易に且つ短時間で行うことができる。

【図面の簡単な説明】

【0021】

【図1】図１Ａ，１Ｂは、本発明が適用されたロボットシステムの大まかな構成例を示す模式図である。

【図2】図２は、本発明が適用されたキャリブレーション装置の構成例を示すブロック図である。

【図3】図３は、本発明の実施形態１に係るキャリブレーション装置の動作例を示すフローチャートである。

【図4】図４Ａ～４Ｃは、ロボットアームの動作範囲を決定する方法の一例を示す模式図である。

【図5】図５は、ロボットアームの先端の姿勢が変更される様子の一例を示す模式図である。

【図6】図６は、本発明の実施形態２に係るキャリブレーション装置の構成例を示すブロック図である。

【図7】図７は、本発明の実施形態２に係るキャリブレーション装置の動作例を示すフローチャートである。

【図8】図８は、本発明の実施形態３に係るキャリブレーション装置の構成例を示すブロック図である。

【発明を実施するための形態】

【0022】

＜適用例＞
本発明の適用例について説明する。図１Ａ，１Ｂは、本発明が適用されたロボットシステムの大まかな構成例を示す模式図である。ロボットシステムは、キャリブレーション装置１００、ロボットアーム２００、センサ３００、及び、物体４００を有する。センサ３００または物体４００は、ロボットアーム２００に取り付けられる。図１Ａでは、ロボットアーム２００にセンサ３００が取り付けられており、図１Ｂでは、ロボットアーム２００に物体４００が取り付けられている。図１Ｂでは、センサ３００は、ロボットアーム２００から離れた位置、具体的にはロボットアーム２００が設置された部屋の天井に固定されている。

【0023】

ロボットアーム２００は、姿勢を変更可能な装置であり、姿勢を変更することにより、例えば物体を掴んで移動させるといった動作を行うことができる。ロボットアーム２００は、自らの姿勢を変化させることによって、センサ３００（図１Ａの場合）または物体４００（図１Ｂの場合）を移動させる。ロボットアーム２００は、例えば、垂直多関節ロボット、移動機構ロボット、パラレルリンクロボット、直動機構ロボットなど任意のタイプのロボットであり得る。本実施形態では、ロボットアーム２００は、複数の関節を有するアーム型ロボットであり、各関節の角度を制御することによってセンサ３００または物体４００の位置（姿勢）を制御する多関節ロボットである。各関節部は、モータにより駆動されて各関節を回転させる駆動軸を備えている。

【0024】

センサ３００は、物体４００を検出可能なセンサである。例えば、センサ３００として、各種カメラ（撮像部）、深度情報を取得する深度センサ、または距離画像を取得する距離画像センサを使用することができる。センサ３００は、１次元方向の位置を検出可能な１Ｄセンサであってもよいし、２次元方向の位置や姿勢などを検出可能な２Ｄセンサであってもよいし、３次元方向の位置や姿勢などを検出可能な３Ｄセンサであってもよい。センサ３００は、センサ３００の視野（探索領域）に光を照射して照明する照射部や、画像を投影するプロジェクタを有していてもよい。

【0025】

センサ３００は、センサ３００から物体４００（対象物）までの距離を取得してもよく、当該取得の方式は、アクティブ方式とパッシブ方式のいずれであってもよい。ここで、アクティブ方式とは、センサ３００から投影した光を対象物にあてて、当該対象物での反射光を受光して距離を取得する方式である。一方、パッシブ方式とは、自然光や他の照明
によって照らされた対象物からの光を受光して距離を取得する方式である。ここで、アクティブ方式として、例えば、赤外光をプロジェクタが対象物に照射し、当該対象物にて反射した赤外光をカメラが受光することで、三角測量の原理により当該対象物までの距離を取得する方法（スポット法；ＴＯＦ）を用いてもよい。また、アクティブ方式として、例えば、パターン画像をプロジェクタが対象物に照射し、当該対象物に映し出されたパターン画像をカメラが撮像することで、撮像したパターン画像の歪みに応じて当該対象物までの距離を取得する方法を用いてもよい。また、パッシブ方式として、互いに異なる２点の位置から対象物を撮像して、２つの撮像画像の差分から距離を取得する方法を用いてもよい。

【0026】

物体４００は、後述するキャリブレーションに必要な物体である。物体４００は３次元的（立体的）な形状を有していてもよいし、２次元的（平面的）な形状を有していてもよい。物体４００は、ロボットアーム２００や地面（床面）などに描かれたマークであってもよい。物体４００が２次元的な形状の物体であれば、物体４００を低コストで製造することができる。物体４００は、キャリブレーション専用の物体であってもよいし、そうでなくてもよい。例えば、物体４００は、ロボットアーム２００が掴んで移動させるといった動作の対象とする物体であってもよい。物体４００は、キャリブレーションの実行後において、ロボットアーム２００の姿勢や動作を検出したり制御したりするために使用されてもよい。ロボットアーム２００の姿勢の変化により、センサ３００からの物体４００の見え方が変われば、物体４００の形状や用途（キャリブレーション以外の用途）は特に限定されない。

【0027】

なお、図１Ａ，１Ｂでは、キャリブレーション装置１００、ロボットアーム２００、及び、センサ３００が互いに別体の装置であるが、この構成に限られない。例えば、キャリブレーション装置１００は、ロボットアーム２００の一部であってもよい。センサ３００の一部または全部の機能がキャリブレーション装置１００に設けられてもよい。例えば、センサ３００は、センサ３００の視野の計測データを取得する計測部と、計測データに基づき物体４００を検出する検出部とを有してもよい。この場合に、検出部がキャリブレーション装置１００に設けられてもよい。

【0028】

上述したキャリブレーションは、センサ３００による物体４００の検出結果に基づいてロボットアーム２００の姿勢や動作を高精度に検出したり制御したりできるようにするために行われる。キャリブレーションは、ロボットアーム２００の姿勢とセンサ３００の検出結果との対応関係を決定する処理である。一般的に、ロボットアーム２００の姿勢は、ロボットアーム２００を基準に定められた座標系（ロボット座標系）で表され、センサ３００の検出結果（物体４００の位置や姿勢など）は、センサ３００を基準に定められた座標系（センサ座標系）で表される。そのため、キャリブレーションは、ロボット座標系とセンサ座標系の対応関係を決定する処理とも言える。

【0029】

しかしながら、従来のキャリブレーションでは、操作が煩雑であったり、キャリブレーションを素早く完了させることができなかったりする。

【0030】

図２は、本発明が適用されたキャリブレーション装置１００の構成例を示すブロック図である。キャリブレーション装置１００は、上述したキャリブレーションを実行する装置であり、例えばパーソナルコンピュータまたはロボットコントローラーなどである。キャリブレーション装置１００は、動作範囲決定部１０１、ロボット制御部１０２、情報取得部１０３、及び、キャリブレーション部１０４を有する。

【0031】

動作範囲決定部１０１は、センサ３００の視野サイズの情報と、物体４００のサイズ（物体サイズ）の情報とを取得し、視野サイズと物体サイズに基づいて、ロボットアーム２
００の姿勢を変更する範囲（ロボットアーム２００の動作範囲）を決定する。ここで、視野サイズや物体サイズは１次元的なサイズ（例えば横幅や縦幅）であってもよいし、２次元的なサイズ（例えば横幅×縦幅）であってもよいし、３次元的なサイズ（例えば横幅×縦幅×厚さ）であってもよい。同様に、動作範囲は１次元的な範囲であってもよいし、２次元的な範囲であってもよいし、３次元的な範囲であってもよい。動作範囲決定部１０１は、本発明の決定手段の一例である。

【0032】

ロボット制御部１０２は、ロボットアーム２００の姿勢や動作を制御する。例えば、キャリブレーションの実行時において、ロボット制御部１０２は、動作範囲決定部１０１により決定された動作範囲内で、ロボットアーム２００の姿勢を変更する。なお、ロボット制御部１０２は、キャリブレーション装置１００とは別体の装置（例えば、ロボットアーム２００の姿勢や動作を制御するコントローラー）などに設けられてもよい。

【0033】

情報取得部１０３は、動作範囲決定部１０１により決定された動作範囲内でのロボットアーム２００の姿勢の変更中に、ロボットアーム２００の姿勢の情報と、センサ３００による物体４００の検出結果との組み合わせ（情報セット）を繰り返し取得する。情報取得部１０３は、本発明の取得手段の一例である。

【0034】

キャリブレーション部１０４は、情報取得部１０３により取得された複数の情報セット（ロボットアーム２００の姿勢が互いに異なる複数の姿勢でそれぞれ取得された複数の情報セット）に基づいて、キャリブレーションを行う。そして、キャリブレーション部１０４は、キャリブレーションの結果をロボット制御部１０２へ設定する。キャリブレーション部１０４は、本発明のキャリブレーション手段の一例である。

【0035】

キャリブレーションを行うためには、センサ３００の計測可能な２次元平面の視野や３次元空間として計測可能な奥行方向を含むセンシング範囲に物体４００が入るようにロボットアーム２００の姿勢を変更する必要がある。上述した構成によれば、ロボットアーム２００の動作範囲が、センサ３００の視野サイズと物体４００のサイズ（物体サイズ）とに基づいて自動で決定される。こうすることで、ロボットアーム２００の動作範囲として、センサ３００の視野に物体４００が入るような範囲を高精度に決定することができ、キャリブレーションが可能となる。また、ロボットアーム２００を動作させずに短時間でロボットアーム２００の動作範囲を決定することができるため、短時間でキャリブレーションを行うことができる。

【0036】

さらに、キャリブレーションを容易に（煩雑な操作無しで）行うことができる。例えば、視野サイズの情報はセンサ３００から取得可能であるし、物体サイズの情報は物体４００の設計データから取得可能であるため、パラメータの入力といった操作無しでキャリブレーションを行うことができる。設計データは、例えば、不図示の記憶装置に予め格納される。なお、視野サイズや物体サイズの情報はユーザによって入力されてもよい。ユーザは、視野サイズや物体サイズの情報を入力する操作を容易に行うことができるため、視野サイズと物体サイズの少なくとも一方の情報がユーザによって入力される場合であっても、簡単な操作のみでキャリブレーションを行うことができる。

【0037】

＜実施形態１＞
本発明の実施形態１について説明する。実施形態１において、ロボットシステムは、図１Ａまたは図１Ｂに示す構成を有し、キャリブレーション装置１００は、図２に示す構成を有する。

【0038】

図３は、キャリブレーションの実行時におけるキャリブレーション装置１００の動作例を示すフローチャートである。図３の動作は、例えば、キャリブレーションの実行がユー
ザから指示されたことに応じて開始される。図３の動作は、予め設定されたタイミングで開始されてもよい。図３の動作は定期的に行われてもよいし、そうでなくてもよい。

【0039】

まず、動作範囲決定部１０１は、センサ３００の視野サイズと、物体４００のサイズとに基づいて、ロボットアーム２００の姿勢を変更する範囲（ロボットアーム２００の動作範囲）を決定する（ステップＳ３０１）。

【0040】

実施形態１では、図１Ａ，１Ｂに示すように、ロボットアーム２００の先端にセンサ３００または物体４００が取り付けられている。このような構成の場合には、動作範囲決定部１０１は、ロボットアーム２００の動作範囲として、ロボットアーム２００の先端の位置を変更する範囲を決定してもよい。こうすることで、ロボットアーム２００の先端の位置（ロボット座標系で表された位置）と、物体４００の検出結果（センサ座標系で表された結果）との対応関係を決定するキャリブレーションを行うことができる。

【0041】

また、動作範囲決定部１０１は、ロボットアーム２００の動作範囲として、ロボットアーム２００の先端の姿勢を変更する範囲を決定してもよい。こうすることで、ロボットアーム２００の先端の姿勢（ロボット座標系で表された位置および姿勢）と、物体４００の検出結果（センサ座標系で表された結果）との対応関係を決定するキャリブレーションを行うことができる。ロボットアーム２００の先端の位置と姿勢を考慮することで、ロボットアーム２００の先端の位置と姿勢の一方のみを考慮する場合よりも高精度なキャリブレーションを行うことができる。

【0042】

さらに、物体４００の検出結果は、物体４００の検出位置（センサ３００により検出された位置）を含んでもよい。こうすることで、ロボットアーム２００の姿勢（ロボット座標系で表された姿勢）と、物体４００の検出位置（センサ座標系で表された位置）との対応関係を決定するキャリブレーションを行うことができる。物体４００の検出結果は、物体４００の検出姿勢（センサ３００により検出された姿勢）を含むとしてもよい。こうすることで、ロボットアーム２００の姿勢（ロボット座標系で表された姿勢）と、物体４００の検出姿勢（センサ座標系で表された姿勢）との対応関係を決定するキャリブレーションを行うことができる。物体４００の検出位置と検出姿勢を考慮することで、物体４００の検出位置と検出姿勢の一方のみを考慮する場合よりも高精度なキャリブレーションを行うことができる。

【0043】

ここで、ロボットアーム２００の動作範囲を決定する方法について、具体的に説明する。まず、ロボットアーム２００の先端の位置を２次元的に変更する場合の例を説明する。この場合は、図４Ａに示すように、動作範囲決定部１０１は、センサ３００の視野サイズに基づいて、センサ３００の２次元の視野の外接円（視野外接円）を求め、物体４００のサイズに基づいて、物体４００の外接円（物体外接円）を求める。そして、動作範囲決定部１０１は、視野の中心に物体４００が配置された状態を基準として、「視野外接円の半径－物体外接円の半径」を半径とする範囲（円領域）を、動作範囲として決定する。視野外接円の半径が４ｃｍであり、且つ、物体外接円の半径が１ｃｍである場合には、図４Ｂに示すように、視野の中心に物体４００が配置された状態を基準として半径が４ｃｍの範囲が、動作範囲として決定される。

【0044】

次に、ロボットアーム２００の先端の位置を３次元的に変更する場合の例を説明する。この場合は、図４Ｃに示すように、動作範囲決定部１０１は、センサ３００の視野サイズに基づいて、センサ３００の３次元の視野の外接球（視野外接球）を求め、物体４００のサイズに基づいて、物体４００の外接球（物体外接球）を求める。図４Ｃの例では、センサ３００の視野は、センサ３００から高さ方向に１０～５０ｃｍの範囲であり、２０ｃｍの横幅と縦幅を有する。つまり、センサ３００の視野は、センサ３００から高さ方向に１
０ｃｍ離れた位置に配置された、２０（横幅）×２０（縦幅）×４０（高さ；厚さ）の直方体の範囲である。そして、動作範囲決定部１０１は、視野の中心に物体４００が配置された状態を基準として、「視野外接球の半径－物体外接球の半径」を半径とする範囲（球領域）を、動作範囲として決定する。

【0045】

キャリブレーションが完了するまで、ロボットアーム２００とセンサ３００の対応関係は未知であるため、ロボットアーム２００の姿勢変化に応じて、センサ３００の視野に対する物体４００の位置や姿勢がどのように変化するかも未知である。上述した外接円や外接球を用いることにより、センサ３００の視野に物体４００が入る範囲を含むように動作範囲を決定することができる。なお、動作範囲の決定方法は上記方法に限られず、動作範囲は、センサ３００の視野に物体４００が入る範囲を含むように決定されればよい。動作範囲の形状は、円状や球状でなくてもよい。

【0046】

図３の説明に戻る。ステップＳ３０１の次に、ロボット制御部１０２は、ステップＳ３０１で決定された動作範囲内で、ロボットアーム２００の姿勢を変更する（ステップＳ３０２）。実施形態１では、ロボット制御部１０２は、ステップＳ３０２の処理を繰り返すことで、ステップＳ３０１で決定された動作範囲内を走査するように、ロボットアーム２００の姿勢を順次変更する。

【0047】

ここで、ロボットアーム２００の姿勢の１回の変更量が小さいほど、キャリブレーションの精度は高くなるが、キャリブレーションに要する時間が長くなる。一方で、１回の変更量が大きいほど、キャリブレーションに要する時間は短くなるが、キャリブレーションの精度は低くなる。このため、１回の変更量は、キャリブレーションの精度と時間を考慮して決定されることが好ましい。

【0048】

なお、ロボットアーム２００の姿勢の１回の変更量は予め定められた固定値であってもよいし、センサ３００の視野サイズや物体４００のサイズなどに基づいて動作範囲決定部１０１またはロボット制御部１０２により決定されてもよい。

【0049】

ここで、ロボットアーム２００の先端の位置を２次元的に変更する場合の例を説明する。この場合は、図４Ａに示すように、センサ３００の２次元の視野の略中心に物体４００が配置されるように、ロボットアーム２００の姿勢が調整される。そして、変更後の物体外接円が変更前の物体外接円に重ならずに接触するように、物体外接円の直径が、ロボットアーム２００の姿勢の１回の変更量として決定される。視野外接円の半径が４ｃｍであり、且つ、物体外接円の半径が１ｃｍである場合には、図４Ｂに示すように、ロボットアーム２００の先端の位置が２ｃｍずつ移動させられる。

【0050】

次に、ロボットアーム２００の先端の位置を３次元的に変更する場合の例を説明する。この場合は、センサ３００の３次元の視野の略中心に物体４００が配置されるように、ロボットアーム２００の姿勢が調整される。そして、変更後の物体外接球が変更前の物体外接球に重ならずに接触するように、物体外接球の直径が、ロボットアーム２００の姿勢の１回の変更量として決定される。

【0051】

より高精度なキャリブレーションを実現するためには、図５に示すように、ロボットアーム２００の先端の位置だけではなく、当該先端の姿勢も変更することが好ましい。例えば、センサ３００の視野の中心に物体４００が配置された状態を基準として、±３０°の範囲でロボットアーム２００の先端の姿勢が変更されてもよい。

【0052】

図３の説明に戻る。ステップＳ３０２の次に、情報取得部１０３は、ロボットアーム２００の姿勢の情報と、センサ３００による物体４００の検出結果との組み合わせ（情報セ
ット）を取得する（ステップＳ３０３）。

【0053】

次に、情報取得部１０３は、ステップＳ３０３で物体４００の検出結果が取得できたか否かを判定する（ステップＳ３０４）。物体４００の検出結果が取得できたと判定された場合（ステップＳ３０４：ＹＥＳ）には、情報取得部１０３は、ステップＳ３０３で取得した情報セットをキャリブレーション部１０４へ出力する。そして、ステップＳ３０６へ処理が進められる。物体４００の検出結果が取得できなかったと判定された場合（ステップＳ３０４：ＮＯ）には、ステップＳ３０５へ処理が進められる。情報取得部１０３が物体４００の検出結果を取得できたか否かの判定は、センサ３００が物体を検出できたか否かの判定とも言える。センサ３００の視野に物体４００が入っていない場合には、センサ３００は物体４００を検出できない。センサ３００の視野に物体４００が入っていても、視野における物体４００の位置（相対位置）に依っては、センサ３００は物体４００を検出できないことがある。

【0054】

ステップＳ３０５では、情報取得部１０３は、ステップＳ３０３で取得した情報（ロボットアーム２００の姿勢の情報）を削除する。そして、ステップＳ３０６へ処理が進められる。物体４００の検出結果が取得されていない状態で取得された情報（ロボットアーム２００の姿勢の情報）の使用は、キャリブレーションの精度を低下させる。このため、ステップＳ３０５では、そのような情報を削除する。

【0055】

ステップＳ３０６では、ロボット制御部１０２は、ステップＳ３０１で決定された動作範囲の走査が完了したか否かを判定する。動作範囲の走査が完了したと判定された場合（ステップＳ３０６：ＹＥＳ）にはステップＳ３０７へ処理が進められ、動作範囲の走査が完了していないと判定された場合（ステップＳ３０６：ＮＯ）にはステップＳ３０２へ処理が戻される。

【0056】

ステップＳ３０７では、キャリブレーション部１０４は、情報取得部１０３から出力された複数の情報セットに基づいて、キャリブレーションを行う。

【0057】

以上述べたように、実施形態１によれば、ロボットアーム２００の動作範囲が、センサ３００の視野サイズと物体４００のサイズとに基づいて自動で決定される。こうすることで、キャリブレーションを容易に且つ短時間で行うことができる。

【0058】

＜実施形態２＞
本発明の実施形態２について説明する。実施形態２において、ロボットシステムは、図１Ａまたは図１Ｂに示す構成を有する。

【0059】

センサ３００の視野に物体４００が入っていても、センサ３００の視野における物体４００の位置（相対位置）に依っては、センサ３００が物体４００を高精度に検出できない（物体４００の検出結果の信頼度が低い）ことがある。例えば、センサ３００の視野の端部では、物体４００の領域と大きく異なる領域が、物体４００の領域として検出されることがある。そして、信頼度が低い検出結果（物体４００の検出結果）を用いると、キャリブレーションの精度が低下してしまう。そこで、実施形態２では、キャリブレーションを行う際に、物体４００の検出結果の信頼度をさらに考慮する。

【0060】

図６は、実施形態２に係るキャリブレーション装置１００の構成例を示すブロック図である。実施形態２に係るキャリブレーション装置１００は、実施形態１（図２）の構成要素の他に、信頼度算出部６０１をさらに有する。

【0061】

信頼度算出部６０１は、情報取得部１０３により取得された検出結果（センサ３００に
よる物体４００の検出結果）の信頼度を算出する。信頼度の算出方法は特に限定されないが、例えば、信頼度算出部６０１は、物体４００の表面上の、センサ３００により検出された各位置と、所定の設計データ（ＣＡＤデータなど）により示された各位置とのマッチングを行い、それらの位置の一致度を信頼度として算出する。マッチングは２次元マッチングであってもよいし、３次元マッチングであってもよい。信頼度算出部６０１は、本発明の算出手段の一例である。

【0062】

そして、実施形態２では、キャリブレーション部１０４は、情報取得部１０３により取得された複数の情報セットのうち、信頼度算出部６０１により算出された信頼度が所定の閾値以上の情報セットに基づいて、キャリブレーションを行う。こうすることで、信頼度が低い検出結果（物体４００の検出結果）が使用されなくなるため、高精度にキャリブレーションを行うことができる。

【0063】

図７は、キャリブレーションの実行時におけるキャリブレーション装置１００の動作例を示すフローチャートである。ステップＳ７０１～Ｓ７０３の処理は、実施形態１（図３）のステップＳ３０１～Ｓ３０３の処理と同じである。

【0064】

ステップＳ７０３の次に、信頼度算出部６０１は、ステップＳ７０３で取得された検出結果（物体４００の検出結果）の信頼度を算出する（ステップＳ７０４）。

【0065】

次に、信頼度算出部６０１は、ステップＳ７０４で算出した信頼度が所定の閾値以上であるか否かを判定する（ステップＳ７０５）。信頼度が所定の閾値以上であると判定された場合（ステップＳ７０５：ＹＥＳ）には、信頼度算出部６０１は、ステップＳ７０３で取得された情報セットをキャリブレーション部１０４へ出力する。そして、ステップＳ７０７へ処理が進められる。信頼度が所定の閾値以上でない（信頼度が所定の閾値未満である）と判定された場合（ステップＳ７０５：ＮＯ）には、ステップＳ７０６へ処理が進められる。

【0066】

ステップＳ７０６では、信頼度算出部６０１は、ステップＳ３０３で取得された情報セット（ロボットアーム２００の姿勢の情報と、センサ３００による物体４００の検出結果との組み合わせ）を削除する。そして、ステップＳ７０７へ処理が進められる。上述したように、物体４００の検出結果の信頼度が低い情報セットの使用は、キャリブレーションの精度を低下させる。このため、ステップＳ７０６では、そのような情報セットを削除する。

【0067】

ステップＳ７０７では、ロボット制御部１０２は、ステップＳ７０１で決定された動作範囲の走査が完了したか否かを判定する。動作範囲の走査が完了したと判定された場合（ステップＳ７０７：ＹＥＳ）にはステップＳ７０８へ処理が進められ、動作範囲の走査が完了していないと判定された場合（ステップＳ７０７：ＮＯ）にはステップＳ７０２へ処理が戻される。

【0068】

ステップＳ７０８では、キャリブレーション部１０４は、信頼度算出部６０１から出力された複数の情報セットに基づいて、キャリブレーションを行う。

【0069】

以上述べたように、実施形態２によれば、信頼度算出部６０１により算出された信頼度が所定の閾値以上の情報セットに基づいて、キャリブレーションが行われる。こうすることで、信頼度が低い検出結果（物体４００の検出結果）が使用されなくなるため、高精度にキャリブレーションを行うことができる。

【0070】

＜実施形態３＞
本発明の実施形態３について説明する。実施形態２において、ロボットシステムは、図１Ａまたは図１Ｂに示す構成を有する。

【0071】

キャリブレーションの実行後において、信頼度が低い検出結果（物体４００の検出結果）を取得して使用すると、ロボットアーム２００の姿勢や動作を高精度に検出したり高精度に制御したりすることができない。そこで、実施形態３では、物体４００の検出結果の信頼度が所定の閾値以上となるロボットアーム２００の動作範囲（ロボットアーム２００の姿勢の範囲）の情報を、記憶部に記録する。そして、キャリブレーションの実行後では、記憶部に記録された動作範囲でロボットアーム２００の姿勢を変更する。こうすることで、信頼度が低い検出結果（物体４００の検出結果）が取得されにくくなるため、ロボットアーム２００の姿勢や動作を高精度に検出したり高精度に制御したりすることができる。

【0072】

図８は、実施形態３に係るキャリブレーション装置１００の構成例を示すブロック図である。実施形態２に係るキャリブレーション装置１００は、実施形態２（図６）の構成要素の他に、動作範囲記録部８０１と記憶部８０２をさらに有する。なお、キャリブレーションの実行時におけるキャリブレーション装置１００の動作は、実施形態１の動作（図３）と同じであってもよいし、実施形態２の動作（図７）と同じであってもよい。

【0073】

動作範囲記録部８０１は、信頼度算出部６０１の算出結果に基づいて、物体４００の検出結果の信頼度が所定の閾値以上となるロボットアーム２００の動作範囲（ロボットアーム２００の姿勢の範囲）の情報を生成し、当該情報を記憶部８０２に記録する。動作範囲記録部８０１は、本発明の記録手段の一例である。

【0074】

動作範囲記録部８０１からの情報から、センサ３００の信頼度が高い検出範囲すなわち三次元の計測可能領域が分かるため、センサ３００固有の計測可能領域のバラつきを吸収したキャリブレーションが可能ということが言える。つまり、図１Ａや図１Ｂのようなシーンでロボットアームとセンサが複数台並んだ生産ラインを想定した場合、各ロボットアームとセンサのセンシング可能領域の機差を考慮したキャリブレーションが可能であるということが言える。すなわちセンサ固有の計測可能領域がロボット制御部１０２へ自動的に伝達可能である。

【0075】

記憶部８０２は、様々な情報を記憶可能である。記憶部８０２は、キャリブレーション装置１００とは別体の装置に設けられてもよいし、キャリブレーション装置１００とは別体の記憶装置であってもよい。

【0076】

そして、実施形態３では、ロボット制御部１０２は、キャリブレーションの実行後において、記憶部８０２に記録された動作範囲でロボットアーム２００の姿勢を変更する。

【0077】

以上述べたように、実施形態３によれば、信頼度算出部６０１により算出された信頼度が所定の閾値以上となるロボットアーム２００の姿勢の範囲が、キャリブレーションの実行後においてロボットアーム２００の姿勢を変更可能な範囲とされる。こうすることで、信頼度が低い検出結果（物体４００の検出結果）が取得されにくくなるため、ロボットアーム２００の姿勢や動作を高精度に検出したり高精度に制御したりすることができる。

【0078】

＜その他＞
上記実施形態は、本発明の構成例を例示的に説明するものに過ぎない。本発明は上記の具体的な形態には限定されることはなく、その技術的思想の範囲内で種々の変形が可能である。

【0079】

＜付記１＞
センサによる物体の検出結果に基づいてキャリブレーションを行うキャリブレーション装置（１００）であって、
物体を検出するセンサまたは前記物体が取り付けられたロボットアームの姿勢を変更する範囲を、前記センサの視野サイズと前記物体のサイズとに基づいて決定する決定手段（１０１）と、
前記決定手段により決定された前記範囲内での前記ロボットアームの姿勢の変更中に、前記ロボットアームの姿勢の情報と、前記センサによる前記物体の検出結果との組み合わせを繰り返し取得する取得手段（１０３）と、
前記取得手段により取得された複数の前記組み合わせに基づいて、前記ロボットアームの姿勢と前記物体の検出結果との対応関係を決定するキャリブレーションを行うキャリブレーション手段（１０４）と
を有することを特徴とするキャリブレーション装置（１００）。

【0080】

＜付記２＞
センサによる物体の検出結果に基づいてキャリブレーションの自動設定を行う方法であって、
物体を検出するセンサまたは前記物体が取り付けられたロボットアームの姿勢を変更する範囲を、前記センサの視野サイズと前記物体のサイズとに基づいて決定する決定ステップ（Ｓ３０１，Ｓ７０１）と、
前記決定ステップにおいて決定された前記範囲内での前記ロボットアームの姿勢の変更中に、前記ロボットアームの姿勢の情報と、前記センサによる前記物体の検出結果との組み合わせを繰り返し取得する取得ステップ（Ｓ３０３，Ｓ７０３）と、
前記取得ステップにおいて取得された複数の前記組み合わせに基づいて、前記ロボットアームの姿勢と前記物体の検出結果との対応関係を決定するキャリブレーションを行うキャリブレーションステップ（Ｓ３０７，Ｓ７０８）と
を有することを特徴とするキャリブレーションの自動設定方法。

【符号の説明】

【0081】

１００：キャリブレーション装置 １０１：動作範囲決定部
１０２：ロボット制御部 １０３：情報取得部 １０４：キャリブレーション部
２００：ロボットアーム ３００：センサ ４００：物体
６０１：信頼度算出部 ８０１：動作範囲記録部 ８０２：記憶部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】