特許 6560067 支援システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6560067

(24)【登録日】2019年7月26日

(45)【発行日】2019年8月14日

(54)【発明の名称】支援システム

(51)【国際特許分類】

   B65G 1/137 20060101AFI20190805BHJP

【ＦＩ】

   B65G1/137 F

【請求項の数】5

【全頁数】11

(21)【出願番号】特願2015-175225(P2015-175225)

(22)【出願日】2015年9月4日

(65)【公開番号】特開2017-48052(P2017-48052A)

(43)【公開日】2017年3月9日

【審査請求日】2018年9月3日

(73)【特許権者】

【識別番号】507234427

【氏名又は名称】公立大学法人岩手県立大学

(74)【代理人】

【識別番号】100082876

【弁理士】

【氏名又は名称】平山 一幸

(74)【代理人】

【識別番号】100184262

【弁理士】

【氏名又は名称】森田 義則

(72)【発明者】

【氏名】村田 嘉利

【審査官】 土田 嘉一

(56)【参考文献】

【文献】 特開２０１５−０１３０８９（ＪＰ，Ａ）

【文献】 特開２０１５−０２４８９９（ＪＰ，Ａ）

【文献】 特開２００５−２５５３３４（ＪＰ，Ａ）

【文献】 特開２０１１−０８８７０６（ＪＰ，Ａ）

【文献】 特開平０６−３２９２１７（ＪＰ，Ａ）

【文献】 特開２００７−１６９０４８（ＪＰ，Ａ）

【文献】 特開平０５−２７８８１６（ＪＰ，Ａ）

【文献】 特開２００１−３４０１５１（ＪＰ，Ａ）

【文献】 米国特許出願公開第２００８／０１８３３２７（ＵＳ，Ａ１）

【文献】 特開２０１０−１１６２４４（ＪＰ，Ａ）

【文献】 特開２０１４−１２２０７５（ＪＰ，Ａ）

【文献】 高橋健太，外３名，Ｋｉｎｅｃｔを用いたピッキング作業モニタリングシステム，情報処理学会第７５回全国大会，日本，情報処理学会，２０１３年，2-587−2-588

【文献】 宇田吉広，外２名，深度カメラを用いたピッキング工程における作業ミス検知システム，情報処理学会研究報告，日本，情報処理学会，２０１５年１０月 １日，Vol.2015-MBL-76 No.2，p.1-10

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｂ６５Ｇ １／１３７

Ａ６１Ｊ ３／００

(57)【特許請求の範囲】

【請求項1】

物品毎に割り当てられた複数の領域のうち次に取り出すべき物品が収納されている領域へ標識を順に表示するピッキングシステムに取り付けられ、
前記複数の領域に関する画像データにおいて前記標識を検出することにより、画像データにおいて前記標識が表示されている領域の間口を特定し、かつピッキングする作業者の手の位置を追跡し、その特定した間口と追跡した手の位置とが対応しているか否かを判定するモニタリング装置を備える、支援システム。

【請求項2】

前記モニタリング装置は、前記標識が表示された間口以外において手の位置が深度方向に変位していることを検出した場合、外部に異常信号を出力する、請求項１に記載の支援システム。

【請求項3】

前記モニタリング装置は、画像データにおける前記標識の色に基いて前記標識を検出する、請求項１又は２に記載の支援システム。

【請求項4】

前記モニタリング装置は、作業者が装着する手袋の色を基準に、作業者の手の位置を追跡する、請求項１乃至３の何れかに記載の支援システム。

【請求項5】

前記モニタリング装置は、
ビデオカメラと、
位置計測カメラと、
前記ビデオカメラからの出力データに基いて、前記標識を検出すると共にピッキングする作業者の手の位置を追跡する一方、前記位置計測カメラからの出力データに基いて、前記標識が表示されている領域の間口を特定し、ピッキングする作業者の手の位置であって前記ビデオカメラからの出力データから求めた追跡する手の位置を計測する処理ユニットと、
を備える、請求項１乃至４の何れかに記載の支援システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、ピッキング作業をサポートする支援システムに関する。

【背景技術】

【0002】

商品、製品などをピッキングすることは、流通分野、生産分野など各種分野で行われている。ピッキングとは、流通分野では倉庫、流通センタ、配送センタにおいて、注文品に関する情報に基いて注文品をピックアップすることであり、生産分野では工場において、材料や部品から必要な物を採取して配付することである。ピッキング作業を支援するシステムについて特許文献１乃至３が知られている。

【0003】

特許文献１では、タグを利用して次の二種類の確認を交互にすることにより、ピッキングミスを極力防止している。一つは、入荷パレット置き場に設置されたパレットから取り出したアイテムを確認することであり、もう一つは、出荷パレット置き場に設置されたパレットに格納したアイテムを確認することである。

【0004】

特許文献２では、本体フレームに上下方向に複数のトレイが並設されたピッキングキャビネットにおいて、各トレイの前面に表示灯を有する表示器を設けることにより、トレイが引き出された状態であっても表示手段に表示される情報がどの位置から見ても確認することができるようにしている。

【0005】

特許文献３では、部品在庫エリア内の在庫データを統轄的に管理して記憶する在庫管理コンピュータに対し、部品在庫エリアに新たに供給されるパレット内の部品情報を入力するデータ入力装置と、効率的なピッキング作業を可能ならしめるパレットの最適格納位置を算出し作業者に指示する搬入指示装置と、最も効率的にピッキング作業をなしうる目的パレットの格納位置を算出し、作業者に指示する目的パレット指示装置とを、それぞれ接続することにより、作業者による迅速かつ効率的なピッキングが行えるようにしている。

【先行技術文献】

【特許文献】

【0006】

【特許文献1】特開２００７−１６９０４８号公報

【特許文献2】特開２００１−３４０１５１号公報

【特許文献3】特開平５−２７８８１６号公報

【発明の概要】

【発明が解決しようとする課題】

【0007】

しかしながら、特許文献１乃至３に開示されているピッキングに関する技術では、既に設置してあるピッキングキャビネットを交換したり、ピッキングシステムを改造したりする必要がある。

【0008】

そこで本発明は、既存のピッキングシステムに後付けすることができる支援システムを提供することを目的とする。

【課題を解決するための手段】

【0009】

本発明のコンセプトは以下のとおりである。
[１]物品毎に割り当てられた複数の領域のうち次に取り出すべき物品が収納されている領域へ標識を順に表示するピッキングシステムに取り付けられ、
前記複数の領域に関する画像データにおいて前記標識を検出することにより、画像データにおいて前記標識が表示されている領域の間口を特定し、かつピッキングする作業者の手の位置を追跡し、その特定した間口と追跡した手の位置とが対応しているか否かを判定するモニタリング装置を備える、支援システム。
[２]前記モニタリング装置は、前記標識が表示された間口以外において手の位置が深度方向に変位していることを検出した場合、外部に異常信号を出力する、前記[１]に記載の支援システム。
[３]前記モニタリング装置は、画像データにおける前記標識の色に基いて前記標識を検出する、前記[１]又は[２]に記載の支援システム。
[４]前記モニタリング装置は、作業者が装着する手袋の色を基準に、作業者の手の位置を追跡する、前記[１]乃至[３]の何れかに記載の支援システム。
[５]前記モニタリング装置は、
ビデオカメラと、
位置計測カメラと、
前記ビデオカメラからの出力データに基いて、前記標識を検出すると共にピッキングする作業者の手の位置を追跡する一方、前記位置計測カメラからの出力データに基いて、前記標識が表示されている領域の間口を特定し、ピッキングする作業者の手の位置であって前記ビデオカメラからの出力データから求めた追跡する手の位置を計測する処理ユニットと、
を備える、前記[１]乃至[４]の何れかに記載の支援システム。

【発明の効果】

【0010】

本発明によれば、モニタリング装置が複数の領域に関する画像データにおいて標識を検出することにより、画像データにおいて標識が表示されている領域の間口を特定し、かつピッキングする作業者の手の位置を追跡し、その特定した間口と追跡した手の位置とが対応しているか否かを判定することができる。よって、既存のピッキングシステムに後付けすることができる。

【図面の簡単な説明】

【0011】

【図1】本発明の実施形態に係る支援システムを組み込んだピッキングシステムの全体構成図である。

【図2】カメラセンサとキャビネットの位置関係を示す平面図である。

【図3】カメラセンサとキャビネットの位置関係を示す側面図である。

【図4】支援システムのブロック構成図である。

【図5】ピッキング作業者の手の位置の検出・追跡の処理手順を示すフローチャートである。

【発明を実施するための形態】

【0012】

以下、本発明を実施形態に基づいて詳細に説明するが、本発明の実施形態に係る支援システムは、図面を参照して説明するものに限られることなく、ＩＣＴ（Information Communication Technology）に関する技術進歩や、適用される社会や制度に応じて適宜変更されるものも含まれる。

【0013】

（支援システムを組み込んだシステム全体の構成）
図１は本発明の実施形態に係る支援システム１０を組み込んだピッキングシステム１の全体構成図である。ピッキングシステム１は、本発明の実施形態に係る支援システム１０と、キャビネット２０と、ピッキング管理システム３０と、を含んで構成される。

【0014】

キャビネット２０は、物品毎に割り当てられた複数の領域２１が区分けされており、複数の領域２１のそれぞれに標識が表示されるように構成されている。図１に示す形態では、表示部２２が各領域２１に取り付けられており、キャビネット２０がピッキング管理システム３０に接続されている。ピッキング管理システム３０では、少なくとも次の二つが管理対象となっており、ピッキング作業の管理をしている。管理対象の一つは、物品単位で割り当てられた各領域２１における間口である。管理対象のもう一つは、領域２１の物品を取り出す順序である。

【0015】

ピッキング管理システム３０が、次に取り出すべき物品の在る領域に対して順に標識を表示することにより、ピッキング作業が管理されている。具体的には、ピッキング管理システム３０からの信号により、少なくとも１つの表示部２２が順に点灯する。表示部２２は消灯するためのスイッチを備え、ピッキングの作業者が物品を取り出すと、スイッチを押すことにより、表示部２２を消灯するようにしてもよい。

【0016】

ここで、「標識が表示される」とは、ピッキングの作業者に対し、その標識が表示されている領域２１から物品をピックアップするように促すことを指す。標識の表示の形態は、ピッキングする作業の現場、物品の種類、物品の数により、任意に設定される。例えば、表示部２２が順次点灯するようにしてもよい。表示部２２に文字、図形、記号などを表示することにより、取り出すべき物品の数を表示するようにしてもよい。一つの物品を常に取り出すピッキング作業にあっては、ピッキングする順番を番号で示すことでもよい。

【0017】

ピッキング管理システム３０は、作業者が標識に従って領域２１から物品を取り出すと、取り出す毎に例えばキャビネット２０から信号を受けることによって１回のピッキングが終了したことを確認する。確認すると、ピッキング管理システム３０からキャビネット２０へ、次に取り出すべき物品の領域２１に対して標識を表示する指令を送信する。

【0018】

（支援システム）
本発明の実施形態に係る支援システム１０は、キャビネット２０における複数の領域を撮像するためのカメラセンサ１１と、カメラセンサ１１から入力された信号を処理してピッキング作業をモニターするモニタリング装置１２と、を備える。

【0019】

カメラセンサ１１は、キャビネット２０の複数の領域２１を撮影するように配置される。図２はカメラセンサ１１とキャビネット２０の位置関係を示す平面図であり、図３はカメラセンサ１１とキャビネット２０の位置関係を示す側面図である。カメラセンサ１１は、複数の領域２１に対向するように設置される。カメラセンサ１１は一つでもよいし、図１乃至図３に示すように、キャビネット２０の前面に向って斜めに左右それぞれに設けるよう二つでもよいし、左右と正面に設けるように三つでもよし、複数の領域２１の全体の寸法に応じてカメラセンサ１１の数を設定する。

【0020】

図４は、支援システム１０のブロック構成図である。カメラセンサ１１は、カラーセンサ１３と位置距離センサ１４とを備えている。カラーセンサ１３は、例えばＲＧＢカラーカメラであって、通常のビデオカメラに相当し、動画像信号を画像データとして出力する。

【0021】

位置距離センサ１４は、３Ｄ深度センサ、深度カメラなどの位置計測センサに相当し、画像データの指定したポイントに対する位置計測センサからの位置情報を出力する。３Ｄ深度センサは、対象に光を照射する照射部１５と、対象からの光の反射光を受光する受光部１６と、照射部１５及び受光部１６と接続され、照射、受光及び外部へのデータ出力に関する制御をする制御部１７とを含んで構成されている。照射部１５は、赤外線レーザからの発振した光を単一の照射パターンに変換し、対象物体に照射する。照射パターンとしては、ランダムなドットが散りばめられた四角形などのパターンなどがある。照射パターンは対象物体に当たると歪んで、照射部１５からの距離が長くなると歪みは大きく広がる。受光部１６は、照射部１５から異なる距離の複数の照射パターンを複眼で検出する。検出した信号が制御部１７に入力されて統計処理されることにより、対象物体との距離、つまり深度を検出することができる。

【0022】

位置距離センサ１４は、受光部１６におけるビデオの画像領域を例えば６４０ドット×４８０ドットに分割し、ドット毎に深度カメラからそのドットに対応した画像までの距離を出力する。ビデオカメラにおける画素としてのドットと位置計測センサのドットの位置関係を対応づけることで、間口を構成する格子点と手に対して、それぞれの座標（ｘ_ｉ，ｙ_ｉ）と深度カメラからの距離が求まる。

【0023】

本発明の実施形態において、位置計測の手法はこれに限られることなく、次のような手法でもよい。すなわち、赤外線を発射し、戻ってくるまでの遅延時間から位置計測センサと指定位置との間の距離や位置計測センサを起点とする指定位置の座標を求める方法であってもよい。

【0024】

モニタリング装置１２は処理ユニット１８を備える。処理ユニット１８は、カメラセンサ１１のうちカラーセンサ１３からのデータと、位置距離センサ１４からのデータとの入力を受ける。処理ユニット１８は、入力されたデータに基いてピッキング作業者の動きから適切にピッキング作業がなされているか否かを判定する。具体的には、処理ユニット１８は、カメラセンサ１１からの複数の領域２１に関する画像データにおいて表示されている標識を検出することにより、画像データにおいて標識が表示されている領域の間口を特定し、かつピッキングする作業者の手の位置を追跡し、その特定した間口と追跡した手の位置とが対応しているか否かを判定する。

【0025】

ここで、処理ユニット１８での処理手順について具体的に説明する。
初期設定は次のようになされる。先ず、キャビネット２０に対してカメラセンサ１１を設置する。次に、カラーセンサ１３から出力される画像の各画素と、位置距離センサ１４から出力される画像の各画素とを対応させておき、実空間であるキャビネット２０における複数の領域２１の各格子点に関する座標データを定める。図１乃至図３に示されるように、格子点がｘｙ平面座標で規定される場合には、ｉ番目の格子点が座標（ｘ_ｉ，ｙ_ｉ）として規定される。

【0026】

具体的な初期設定として、カラーセンサ１３からの画像データにおいて、各間口を構成する格子点を選択したのち、位置距離カメラ１４からの画像データにおいて、その格子点について位置距離カメラ１４の座標軸における座標（ｘ_ｉ，ｙ_ｉ）と距離を計測する。このように事前に計測した各間口の四隅の格子点の座標（ｘ_ｉ，ｙ_ｉ）からピッキング作業者の手の前にある間口を特定することができ、四隅の格子点までの距離と手までの距離から手が間口に入ったことを識別することができる。

【0027】

作業者によるピッキング作業についてのモニタリングは次のようになされる。先ず、ピッキング管理システム３０により、物品毎に割り当てられた複数の領域のうち、次に取り出すべき物品の領域２１へ標識が表示される。

【0028】

処理ユニット１８には、カラーセンサ１３からの画像データが逐次入力される。処理ユニット１８は、入力された画像データに基いて標識が示されている領域の間口を特定する。これと同時に、処理ユニット１８には、位置距離センサ１４から位置及び距離に関するデータが逐次入力される。ここで、「位置及び距離に関するデータ」は、位置距離センサ１４から入力された画像データの画像領域の各ドットと、位置距離センサ１４の設置位置などの基準位置からのドット毎の距離とを含むデータである。

【0029】

処理ユニット１８は、このように、カラーセンサ１３からの画像データからピッキング作業者の手の位置を平面的に追跡し、位置距離センサ１４からのデータからピッキング作業者の手の位置を空間的に追跡する。処理ユニット１８は、これらの追跡した位置と、標識が示されている領域の格子点と、が対応しているか否か、つまり、次に取り出すべき領域の間口に対応しているか否かを照合する。照合が正しいことを条件に、深さデータが、標識が示された領域の間口を画する面よりもカメラセンサ１１から遠いか否かを判定する。これにより、標識が示された領域において、標識を画する平面よりも奥行き方向に手が挿入されているか否かの判定をすることができる。また、取り出すべき領域以外の間口に手が挿入されたことも判定することができる。

【0030】

作業者によるピッキング作業についてのモニタリングは、上述に限らず、次のようになされてもよい。先ず、ピッキング管理システム３０により、物品毎に割り当てられた複数の領域のうち、次に取り出すべき物品の領域２１へ標識が表示される。

【0031】

処理ユニット１８には、カラーセンサ１３からの画像データが逐次入力され、当該画像データにおいて当該標識を検出する。すると、処理ユニット１８は、位置距離センサ１４に対してその検出位置に関するデータを送信し、位置距離センサ１４において、次に取り出すべき領域２１に対応した格子点を特定することにより、管理すべき間口を認識させる。

【0032】

次に、処理ユニット１８は、カラーセンサ１３からの画像データの逐次入力を受けて、ピッキング作業者の手の位置を追跡する。その追跡位置は、例えば座標（Ｘｔ、Ｙｔ）として時間毎に表される。ここで、座標（Ｘｔ，Ｙｔ）の“ｔ”は時間のパラメータであることを示す。

【0033】

処理ユニット１８は、その追跡した位置のデータを位置距離センサ１４に出力する。すると、位置距離センサ１４は、実際に計測した位置データと共にその位置における手の進入程度を示す深さを計測し、位置データと深さデータとを処理ユニット１８に出力する。処理ユニット１８は、位置データと深さデータとを得ると、標識が示された領域の格子点に対応するか否か、つまり、次に取り出すべき領域の間口に対応しているか否かを照合する。照合が正しいことを条件に、深さデータが、標識が示された領域の間口を画する面よりもカメラセンサ１１から遠いか否かを判定する。これにより、標識が示された領域において、標識が示された領域の間口を画する面よりも奥行き方向に手が挿入されているか否かの判定をすることができる。また、取り出すべき領域以外の間口に手が挿入されたことも判定することができる。

【0034】

処理ユニット１８は、その判定結果に関し、手が入ったと判定した間口が、標識が表示されている間口と同一と判定すると、「合格」という意味の表示や音を出力する。逆に、手を入れた間口が、標識が表示されている間口と異なると判定すると、「不合格」という意味の表示や音を出力する。

【0035】

本発明の実施形態によれば、処理ユニット１８が複数の領域２１に関する画像データにおいて標識を検出することにより、画像データにおいて標識が示された領域の間口を特定し、かつピッキングする作業者の手の位置を追跡し、その特定した間口と追跡した手の位置とが対応しているか否かを判定する。よって、既存のピッキングシステムに後付けすることができる支援システムを提供することができる。

【0036】

さらに、本発明の実施形態では、処理ユニット１８が、特定した間口以外において手の位置が深度方向に変位していることを検出した場合には外部に異常信号を出力することにより、「不合格」の意味を示す文字などの情報を表示したり、音を鳴らしたりすることができる。

【0037】

本発明の実施形態では、処理ユニット１８において標識が示されている間口を特定した後に、ピッキング作業者の手の追跡を行い、所定の時間内に、その間口に手が挿入されていないことが判定されると、ピッキング作業者が取り出すべき間口から物品を取り出さないことが分かる。そのような際においても、「不合格」という意味の表示や音を出力する。

【0038】

処理ユニット１８は、「不合格」の判定をすると、異常信号をピッキング管理システム３０に出力してもよい。そうすることによって、ピッキングシステム１についてピッキング作業者による作業の異常を把握することになるので、システム的な対処を施すことができ、ピッキング作業の質についての維持に資する。

【0039】

次に、本発明の実施形態において特徴的な事項を詳細に説明する。

【0040】

（標識の検出）
キャビネット２０の表示部２２には標識が示される。当該標識として「赤」、「緑」、「青」などの特定の色のランプが点灯する場合には、その点灯した標識を次のように検出することができる。

【0041】

初期設定として、カラーセンサ１３によって標識の点灯を撮影して処理ユニット１８に出力する。処理ユニット１８は、入力された画像データを画像変換し、例えばＨＳＶデータにする。そして明度、彩度、色相のＨＳＶチャンネルに分割し、色相チャンネルから標識に関するヒストグラムを作成しておく。この作成したヒストグラムを「基準ヒストグラム」と呼ぶことにする。

【0042】

作業者によるピッキング作業についてのモニタリングにおいて、処理ユニット１８は、カラーセンサ１３から逐次入力された画像データについて画像変換し、例えばＨＳＶデータにする。そして明度、彩度、色相のＨＳＶチャンネルに分割し、色相チャンネルと基準ヒストグラムとを比べて、色分布画像を作成する。作成した色分布画像に対してＨＳＶの明度・彩度の値から作成したフィルタを使用して範囲外の色を排除する。さらに、メディアンフィルタを使用してカラーセンサ１３から出力された画像データに点在するノイズを除去する。これにより、標識の色及びそれに近似した色だけを残すことができ、標識を検出し易くすることができる。

【0043】

このように、モニタリング装置が、画像データにおける標識の色に基いて標識を検出することにより、標識を効率良くかつ的確に検出することができる。

【0044】

（ピッキング作業者の手の位置の検出・追跡）
本発明の実施形態において、カラーセンサ１３の出力される画像データからピッキング作業者が手に装着する軍手の色情報を検出し、色情報を追跡するようにしてもよい。この色情報の追跡した位置において、位置距離センサ１４から位置データ及び深度を計測する。これにより、手の位置の検出・追跡が容易になる。

【0045】

具体的な処理手順について説明する。図５は、ピッキング作業者の手の位置の検出・追跡の処理手順を示すフローチャートである。

【0046】

カラーセンサ１３から出力される画像データを、ビットマップデータに変換する（ＳＴＥＰ１）。ビットマップデータは、モニター用のＧＵＩに利用される（ＳＴＥＰ２）。

【0047】

ビットマップデータをＨＳＶに変換し（ＳＴＥＰ３）、さらにＨＳＶチャンネル分割することにより、色相（Hue）、彩度（Saturation）、明度（Value）の３つの数値に分割する（ＳＴＥＰ４）。色相チャンネルから色情報を取り出すことができる。

【0048】

ピッキング作業に先立ち、軍手に対してその色相チャンネルデータから色相ヒストグラムを作成しておく（ＳＴＥＰ５）。また、作業環境における明度の最小値と最大値及び彩度の最小値をマニュアル設定し（ＳＴＥＰ６）、軍手の色に近い色だけをＨＳＶデータから抽出するためのマスク画像を作成する（ＳＴＥＰ７）。

【0049】

位置距離センサ１４からの画像データについて、ＳＴＥＰ１乃至ＳＴＥＰ４を行い、色を検出し色分布画像を得る（ＳＴＥＰ８）。そして、マスク画像を用いて検出領域を絞り（ＳＴＥＰ９）、メディアンフィルタを使用したノイズの除去（ＳＴＥＰ１０）、ＣａｍＳｈｉｆｔ法による色追跡により、一致領域の座標を求める（ＳＴＥＰ１１）。

【0050】

このようにして、事前に取得しておいた色相ヒストグラムとピッキング作業中に得られる色情報とを比較し（ＳＴＥＰ１２）、一致したものだけを出力して、軍手のヒストグラムと照合することにより、ピッキング作業中の軍手に対して色で以って追跡することができる（ＳＴＥＰ１３）。

【0051】

（誤判定の防止）
精度の良いカメラセンサ１１を利用することにより、データ処理で生じる誤判を防止することができる。しかしながら、一台のキャビネット２０において一台のモニタリング装置が使用されることから、精度の良いカメラセンサ１１を使用すると、モニタリング装置の設備導入を踏まえてコスト高を招き、ひいては、製品・サービスのコスト高を招く。そこで、高品質でないカメラセンサ１１を用いてもデータ処理によって誤判を防止することができる。そのデータ処理は次のようなコンセプトに基づく。ピッキング作業においては、今回のピッキングの際に標識が示される領域は、一回前又は複数回前のピッキングの際に標識が示された領域とは異なるということである。つまり、一定時間が経過しないと、同じ領域に対して標識が示されないということである。

【0052】

そのデータ処理としては、例えば、ピッキング作業者の手の追跡により判明した領域が、一定時間経過しないで、同一の領域を判明したときには、その判定結果を異常とする。

【0053】

本発明の実施形態では、商品、仕掛品、材料、製品等の物品の取り出し順序と、各物品が存在するピッキングの領域の間口を管理しており、次に取り出すべき物品が存在する領域の間口に取り付けたランプ等を点灯させることにより、ピッキング作業者にピッキング対象物を知らせるシステムにおいて、次のような特徴を有する。

【0054】

カラーセンサ１３としてのビデオカメラと位置距離センサ１４としての深度カメラとが一体となったカメラセンサ１１であって、指定した箇所の位置を検出するカメラセンサ１１を用いる。点灯したランプを検出することにより、物品の取り出し間口を特定すると共に、カメラセンサ１１により手の位置を追跡することで物品の間口を検出する。そして、点灯したランプに対応した間口から物品を取り出したか否かを判定する。

【0055】

その際、カメラセンサ１１を利用して、点灯時のランプの色を検出するとよい。カメラセンサ１１を利用して、手の位置として作業者の手袋の色を追跡し、その位置での座標を測定することで、物品を取り出した間口を検出する。

【0056】

点灯したランプに対応した間口から物品を取り出したか否かの判定を行い、パトライト（登録商標）で表示したり、アラーム音を鳴らしたりすることにより、作業者に通知する。

【0057】

このように、本発明の実施形態に係る支援システムによれば、モニタリング装置１２が複数の領域２１に関する画像データにおいて標識を検出することにより、画像データにおいて標識が表示されている領域２１の間口、即ち領域２１における取出口を特定し、かつピッキングする作業者の手の位置を追跡し、その特定した間口と追跡した手の位置とが対応しているか否かを判定する。よって、既存のピッキングシステムに後付けすることができる。

【符号の説明】

【0058】

１：ピッキングシステム
１０：支援システム
１１：カメラセンサ
１２：モニタリング装置
１３：カラーセンサ
１４：位置距離センサ
１５：照射部
１６：受光部
１７：制御部
１８：処理ユニット
２０：キャビネット
２１：領域
２２：表示部
３０：ピッキング管理システム

【図1】

【図2】

【図3】

【図4】

【図5】