特許 7533134 情報処理装置、照明装置および照明システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-08-05

(45)【発行日】2024-08-14

(54)【発明の名称】情報処理装置、照明装置および照明システム

(51)【国際特許分類】

   G06T 7/00 20170101AFI20240806BHJP

   H04N 23/56 20230101ALI20240806BHJP

   H04N 23/60 20230101ALI20240806BHJP

   G06T 7/70 20170101ALI20240806BHJP

   F21S 2/00 20160101ALI20240806BHJP

   F21V 23/00 20150101ALI20240806BHJP

【ＦＩ】

G06T7/00 660B

H04N23/56

H04N23/60 300

G06T7/70 A

F21S2/00 230

F21V23/00 110

F21V23/00 140

【請求項の数】 7

(21)【出願番号】P 2020183633

(22)【出願日】2020-11-02

(65)【公開番号】P2022073569

(43)【公開日】2022-05-17

【審査請求日】2023-08-04

(73)【特許権者】

【識別番号】000003757

【氏名又は名称】東芝ライテック株式会社

(74)【代理人】

【識別番号】110002147

【氏名又は名称】弁理士法人酒井国際特許事務所

(72)【発明者】

【氏名】加藤 俊也

(72)【発明者】

【氏名】井上 優

(72)【発明者】

【氏名】平松 拓朗

(72)【発明者】

【氏名】西垣 英則

(72)【発明者】

【氏名】鈴木 琢也

(72)【発明者】

【氏名】中尾 瑠衣

(72)【発明者】

【氏名】石川 琢視

(72)【発明者】

【氏名】伊藤 良和

(72)【発明者】

【氏名】宮島 健一

(72)【発明者】

【氏名】秋吉 知寛

【審査官】伊知地 和之

(56)【参考文献】

【文献】特開２０１１－１４５８１７（ＪＰ，Ａ）

【文献】特開２０１８－１６５８９３（ＪＰ，Ａ）

【文献】特開２０１１－０２８９８１（ＪＰ，Ａ）

【文献】特開２０１９－１９１７３６（ＪＰ，Ａ）

【文献】樋口啓太 外２名，手の動作に基づく複数一人称視点作業映像のアライメント，電子情報通信学会技術研究報告，一般社団法人電子情報通信学会，2016年01月14日，第115巻 第414号，pp.9～14

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｆ２１Ｋ ９／００ － ９／９０

Ｆ２１Ｓ ２／００ － ４５／７０

Ｆ２１Ｖ ２３／００ － ９９／００

Ｇ０６Ｔ ７／００ － ７／９０

Ｇ０６Ｖ １０／００ － ２０／９０

Ｇ０６Ｖ ３０／４１８

Ｇ０６Ｖ ４０／１６

Ｇ０６Ｖ ４０／２０

Ｈ０４Ｎ ２３／００

Ｈ０４Ｎ ２３／４０ － ２３／７６

Ｈ０４Ｎ ２３／９０ － ２３／９５９

ＣＳＤＢ（日本国特許庁）

(57)【特許請求の範囲】

【請求項1】

撮像部によって撮像された撮像画像を取得する取得部と；
前記取得部によって取得された前記撮像画像から作業者の体の特定部位の位置を検出する検出部と；
前記検出部によって検出された前記特定部位の位置に基づいて、前記作業者が有効作業を実施しているか無効作業を実施しているかを判別する判別部と；
を具備し、
前記検出部は、前記撮像画像から前記作業者の体の別の特定部位の位置を検出し、
前記判別部は、前記別の特定部位が所与の作業領域内に位置している場合に、前記作業者が前記無効作業を実施していると判別する
情報処理装置。

【請求項2】

前記特定部位は、前記作業者の両手である
請求項１に記載の情報処理装置。

【請求項3】

前記判別部は、前記特定部位が所与の作業領域内に位置している場合に、前記作業者が前記有効作業を実施していると判別する
請求項１または２に記載の情報処理装置。

【請求項4】

前記判別部は、前記作業者が作業の対象物を保持していない場合に、前記作業者が前記無効作業を実施していると判別する
請求項１～３のいずれか一つに記載の情報処理装置。

【請求項5】

前記作業者が１つの単位作業において前記有効作業を実施した時間と前記無効作業を実施した時間とをそれぞれ計測する計測部；
をさらに具備する請求項１～４のいずれか一つに記載の情報処理装置。

【請求項6】

前記作業者を撮像し、撮像画像を請求項１～５のいずれか一つに記載の情報処理装置に送信する撮像部と；
前記作業者を照らす照明部と；
を具備する照明装置。

【請求項7】

照明装置と；
情報処理装置と；
を具備し、
前記照明装置は、
作業者を撮像する撮像部と；
前記作業者を照らす照明部と；
を有し、
前記情報処理装置は、
前記撮像部によって撮像された撮像画像を取得する取得部と；
前記取得部によって取得された前記撮像画像から前記作業者の体の特定部位の位置を検出する検出部と；
前記検出部によって検出された前記特定部位の位置に基づいて、前記作業者が有効作業を実施しているか無効作業を実施しているかを判別する判別部と；
を有し、
前記検出部は、前記撮像画像から前記作業者の体の別の特定部位の位置を検出し、
前記判別部は、前記別の特定部位が所与の作業領域内に位置している場合に、前記作業者が前記無効作業を実施していると判別する
照明システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明の実施形態は、情報処理装置、照明装置および照明システムに関する。

【背景技術】

【0002】

空間に設置された複数の照明装置が照明するエリアをカメラで撮像する照明システムが導入されている。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２０１７－１６２６８２号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

このような照明システムでは、照明装置を作業者の作業エリアの上部に設け、作業者が不在の場合に照明装置を消灯状態とすることで、省電力化できる。しかし、従来の照明システムは、照明装置を設けた作業エリアにおける作業者の作業状況を把握することはできない。

【0005】

本発明が解決しようとする課題は、作業者の作業状況を把握することができる情報処理装置、照明装置および照明システムを提供することである。

【課題を解決するための手段】

【0006】

実施形態に係る情報処理装置は、取得部と、検出部と、判別部とを具備する。取得部は、撮像部によって撮像された撮像画像を取得する。検出部は、前記取得部によって取得された前記撮像画像から作業者の体の特定部位の位置を検出する。判別部は、前記検出部によって検出された前記特定部位の位置に基づいて、前記作業者が有効作業を実施しているか無効作業を実施しているかを判別する。

【発明の効果】

【0007】

本発明によれば、作業者の作業状況を把握することができる。

【図面の簡単な説明】

【0008】

【図1】図１は、実施形態に係る照明システムが有する照明装置の外観例を示す斜視図である。

【図2】図２は、実施形態に係る照明システムの概要を示す図である。

【図3】図３は、実施形態に係る情報処理装置の構成を示すブロック図である。

【図4】図４は、実施形態に係る撮像画像の一例を示す図である。

【図5】図５は、実施形態に係る撮像画像の一例を示す図である。

【図6】図６は、実施形態に係る撮像画像の一例を示す図である。

【図7】図７は、実施形態に係る撮像画像の一例を示す図である。

【図8】図８は、実施形態に係る撮像画像の一例を示す図である。

【図9】図９は、実施形態に係る撮像画像の一例を示す図である。

【図10】図１０は、実施形態に係る情報処理によって得られた製造番号ごとの有効作業時間および無効作業時間の推移の一例について示す図である。

【図11】図１１は、実施形態に係る情報処理によって得られた製造番号ごとの有効作業時間および無効作業時間の推移の一例について示す図である。

【図12】図１２は、実施形態に係る情報処理装置が実行する処理手順を示すフローチャートである。

【発明を実施するための形態】

【0009】

以下で説明する実施形態に係る情報処理装置２０は、取得部２３ａと、検出部２３ｂと、判別部２３ｃとを具備する。取得部２３ａは、撮像部によって撮像された撮像画像を取得する。検出部２３ｂは、取得部２３ａによって取得された撮像画像から作業者５０の体の特定部位の位置を検出する。判別部２３ｃは、検出部２３ｂによって検出された特定部位の位置に基づいて、作業者５０が有効作業を実施しているか無効作業を実施しているかを判別する。

【0010】

また、以下で説明する実施形態に係る情報処理装置２０において、特定部位は、作業者５０の両手５１である。

【0011】

また、以下で説明する実施形態に係る情報処理装置２０において、判別部２３ｃは、特定部位が所与の作業領域Ａ１内に位置している場合に、作業者５０が有効作業を実施していると判別する。

【0012】

また、以下で説明する実施形態に係る情報処理装置２０において、判別部２３ｃは、作業者５０が作業の対象物Ｘを保持していない場合に、作業者５０が無効作業を実施していると判別する。

【0013】

また、以下で説明する実施形態に係る情報処理装置２０において、検出部２３ｂは、撮像画像から作業者５０の体の別の特定部位の位置を検出し、判別部２３ｃは、別の特定部位が所与の作業領域Ａ１内に位置している場合に、作業者５０が無効作業を実施していると判別する。

【0014】

また、以下で説明する実施形態に係る情報処理装置２０は、作業者５０が１つの単位作業において有効作業を実施した時間と無効作業を実施した時間とをそれぞれ計測する計測部２３ｄをさらに具備する。

【0015】

また、以下で説明する実施形態に係る照明装置１０は、作業者５０を撮像し、撮像画像を上述の情報処理装置２０に送信する撮像部と、作業者５０を照らす照明部１１とを具備する。

【0016】

また、以下で説明する実施形態に係る照明システム１は、照明装置１０と、情報処理装置２０とを具備する。照明装置１０は、作業者５０を撮像する撮像部と、作業者５０を照らす照明部１１とを有する。情報処理装置２０は、撮像部によって撮像された撮像画像を取得する取得部２３ａと、取得部２３ａによって取得された撮像画像から作業者５０の体の特定部位の位置を検出する検出部２３ｂと、検出部２３ｂによって検出された特定部位の位置に基づいて、作業者５０が有効作業を実施しているか無効作業を実施しているかを判別する判別部２３ｃと、を有する。

【0017】

以下、図面を参照して、実施形態に係る情報処理装置、照明装置および照明システムを説明する。実施形態において同一の部位には同一の符号を付し、重複する説明は省略される。

【0018】

［照明装置］
最初に、実施形態に係る照明装置１０の構成について、図１を参照しながら説明する。図１は、実施形態に係る照明システム１が有する照明装置１０の外観例を示す斜視図である。

【0019】

図１に示すように、照明装置１０は、照明部１１と、撮像ユニット１２と、本体部１３とを具備する。照明装置１０は、たとえば、本体部１３が天井面などに設置され、照明部１１から出力される光が床面へと照射される天井直付けタイプの照明装置である。照明装置１０は、たとえば工場での生産ラインの監視やオフィス内での従業員の状態監視などの用途で主に屋内で使用される。

【0020】

なお、説明を分かりやすくするために、図１には、鉛直下向きを正方向とし、鉛直上向きを負方向とするＺ軸を含む３次元の直交座標系を図示している。また、Ｘ軸は照明装置１０の長さ方向に、Ｙ軸は照明装置１０の幅方向に、それぞれ沿うように図示している。

【0021】

照明部１１は、Ｙ軸方向に沿うように配置された、長尺状のシャーシまたは基板（不図示）上に所定の間隔で配置された複数の発光素子（不図示）を有し、シャーシとの間に発光素子が収容されるよう床面側、すなわちＺ軸正方向側に拡散カバー１４が設けられた照明バーである。

【0022】

拡散カバー１４は、たとえば、アクリルやポリカーボネートなどの透光性の材料から作られている。拡散カバー１４は、フロスト処理が施されて複数の発光素子から出射される光を拡散する機能を有するようになっている。なお、拡散カバー１４に適宜拡散材や着色剤を混入させてもよい。

【0023】

撮像ユニット１２は、遮光カバー１５と、カメラ１６とを有する。カメラ１６は、撮像部の一例である。撮像ユニット１２は、照明部１１のＸ軸負方向側に隣り合うように並んで配置される。

【0024】

本体部１３は、照明部１１および撮像ユニット１２を保持する。また、本体部１３は、照明装置１０を天井その他の所定の位置に取り付けるための取付部材を兼ねる。

【0025】

遮光カバー１５は、本体部１３との間にカメラ１６を覆うように本体部１３のＺ軸正方向側に配設される。また、遮光カバー１５は、カメラ１６のレンズと対向する位置に設けられた貫通口を有する。このような遮光カバー１５を配設することで、照明部１１の拡散カバー１４から照射された光をカメラ１６のレンズに入り込みにくくすることができる。

【0026】

［照明システム］
つづいて、実施形態に係る照明システム１の構成について、図２を参照しながら説明する。図２は、実施形態に係る照明システム１の概要を示す図である。なお、以下では、照明システム１が工場に導入される場合を例に挙げて説明する。

【0027】

図２に示すように、実施形態に係る照明システム１は、複数の照明装置１０と、情報処理装置２０とを備える。また、図２に示す例では、各照明装置１０が工場の作業現場（たとえば、製造ラインなど）に設置される場合を示す。

【0028】

複数の照明装置１０は、たとえば、生産ラインの各作業者５０の作業エリア４０（図４参照）の上部にそれぞれ設けられ、カメラ１６により、各作業エリア４０を上部から撮像する。

【0029】

情報処理装置２０は、作業現場に設置された各照明装置１０を管理する装置である。たとえば、情報処理装置２０は、ネットワークＮを介して、各照明装置１０の照明部１１の照明態様や、カメラ１６の撮像処理などを遠隔で制御する。

【0030】

また、情報処理装置２０は、各照明装置１０のカメラ１６で撮像された撮像画像を収集し、記憶する。たとえば、情報処理装置２０によって収集された撮像画像は、作業現場の監視などに用いられる。なお、本開示において、照明装置１０のカメラ１６で撮像された撮像画像には、撮像映像が含まれる。

【0031】

［情報処理装置］
つづいて、実施形態に係る情報処理装置２０の構成について、図３を参照しながら説明する。図３は、実施形態に係る情報処理装置２０の構成を示すブロック図である。図３に示すように、情報処理装置２０は、通信部２１と、記憶部２２と、制御部２３とを具備する。

【0032】

通信部２１は、たとえば、ＮＩＣ（Network Interface Card）などによって実現される。通信部２１は、たとえば、ネットワークＮを介して、複数の照明装置１０（図２参照）との間で情報の送受信を行う。

【0033】

記憶部２２は、たとえば、ＲＡＭ（Random Access Memory)、フラッシュメモリ（Flash Memory）などの半導体メモリ素子、または、ハードディスク、光ディスクなどの記憶装置によって実現される。

【0034】

図３に示すように、記憶部２２は、撮像画像記憶部２２ａと、作業時間記憶部２２ｂとを具備する。撮像画像記憶部２２ａは、各照明装置１０で撮像された撮像画像を記憶する。

【0035】

作業時間記憶部２２ｂは、作業者５０（図４参照）が１つの単位作業において有効作業を実施した時間（以下、有効作業時間とも呼称する。）と無効作業を実施した時間（以下、無効作業時間とも呼称する。）とを記憶する。

【0036】

なお、本開示において、有効作業とは、作業の対象物Ｘ（図４参照）に対して付加価値を付ける作業のことであり、たとえば、対象物Ｘに部品Ｐ（図４参照）やネジを取り付ける作業などである。

【0037】

また、本開示において、無効作業とは、作業の対象物Ｘに対して付加価値を付けない作業のことであり、たとえば、部品Ｐや作業用の道具を取る作業などである。さらに、本開示において、１つの単位作業とは、たとえば、１つの対象物Ｘに対する作業のことである。

【0038】

制御部２３は、コントローラ（controller）であり、たとえば、ＣＰＵ（Central Processing Unit）やＭＰＵ（Micro Processing Unit）などによって、情報処理装置２０内部の記憶装置に記憶されている各種プログラムがＲＡＭを作業領域として実行されることにより実現される。また、制御部２３は、たとえば、コントローラであり、ＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）などの集積回路により実現される。

【0039】

図３に示すように、制御部２３は、取得部２３ａと、検出部２３ｂと、判別部２３ｃと、計測部２３ｄとを具備し、以下に説明する制御処理の機能や作用を実現または実行する。なお、制御部２３の内部構成は、図３に示した構成に限られず、後述する制御処理を行う構成であれば他の構成であってもよい。

【0040】

取得部２３ａは、照明装置１０のカメラ１６によって撮像された撮像画像を取得する。たとえば、取得部２３ａは、リアルタイムで各照明装置１０のカメラ１６から撮像画像を取得し、取得した撮像画像を作業エリア４０ごとに撮像画像記憶部２２ａに格納する。

【0041】

検出部２３ｂは、各種の検出を行う。たとえば、検出部２３ｂは、取得部２３ａによって取得され、撮像画像記憶部２２ａに格納された撮像画像から作業者５０の両手５１（図４参照）の位置を検出する。作業者５０の両手５１は、作業者５０の体の特定部位の一例である。

【0042】

また、検出部２３ｂは、取得部２３ａによって取得された撮像画像から作業エリア４０内の対象物Ｘの位置を検出する。

【0043】

判別部２３ｃは、検出部２３ｂで検出された作業者５０の両手５１の位置や対象物Ｘの位置などに基づいて、作業者５０が有効作業を実施しているか、または無効作業を実施しているかを判別する。かかる判別処理の詳細については後述する。

【0044】

計測部２３ｄは、作業者５０が１つの単位作業において有効作業を実施した時間（有効作業時間）と無効作業を実施した時間（無効作業時間）とをそれぞれ計測する。また、計測部２３ｄは、作業者５０が実施した１つの単位作業における有効作業時間と無効作業時間とを、記憶部２２の作業時間記憶部２２ｂに記憶する。

【0045】

［情報処理の詳細］
つづいて、情報処理装置２０が実施する情報処理の詳細について、図４～図１１を参照しながら説明する。図４～図９は、実施形態に係る撮像画像の一例を示す図である。

【0046】

照明装置１０（図１参照）は、作業者５０の作業エリア４０の上部に設けられる。そして、カメラ１６（図１参照）は、図４に示すように、作業エリア４０を上部から撮像する。これにより、取得部２３ａ（図３参照）によって取得された撮像画像には、上部から見た作業エリア４０が含まれる。

【0047】

実施形態に係る照明装置１０は、図１に示したように、照明部１１とカメラ１６とが近接して配置されることから、カメラ１６は、照明部１１からの光を遮るものが無いような撮像画像を撮像することができる。したがって、実施形態によれば、作業エリア４０全体を良好に撮像することができる。

【0048】

また、図４～図９の例では、複数の作業者５０が、作業エリア４０に配置された作業台４１に沿って並んで位置し、対象物Ｘに対してそれぞれ別の流れ作業を実施している（たとえば、対象物Ｘにそれぞれ異なる部品Ｐを組み付ける）場合を示している。

【0049】

作業エリア４０には、たとえば、複数の作業者５０が共有して使用する作業台４１と、個別の作業者５０がそれぞれ使用する複数のサイドテーブル４２とが配置される。作業台４１は、たとえば、複数の作業者５０が共有して実施する流れ作業などに用いられる。

【0050】

また、撮像画像において、作業台４１には、作業者５０ごとに作業領域Ａ１と、搬入領域Ａ２と、搬出領域Ａ３とが設けられる。

【0051】

作業領域Ａ１は、作業者５０が対象物Ｘに対する作業を実施する領域であり、たとえば、作業者５０の正面に位置する。なお、作業領域Ａ１は、作業者５０が担当する作業ごとにそれぞれ個別の範囲が指定される。

【0052】

搬入領域Ａ２は、上流側の作業者５０Ａでの作業が終了した対象物Ｘを、かかる作業者５０Ａから作業者５０に受け渡すために用いられる領域である。搬入領域Ａ２は、たとえば、作業者５０と上流側の作業者５０Ａとの間（図４では、作業者５０の左手側）に位置する。

【0053】

搬出領域Ａ３は、作業者５０での作業が終了した対象物Ｘを、かかる作業者５０から下流側の作業者５０Ｂに受け渡すために用いられる領域である。搬出領域Ａ３は、たとえば、作業者５０と下流側の作業者５０Ｂとの間（図４では、作業者５０の右手側）に位置する。

【0054】

すなわち、作業者５０の搬入領域Ａ２は、上流側の作業者５０Ａの搬出領域Ａ３となり、作業者５０の搬出領域Ａ３は、下流側の作業者５０Ｂの搬入領域Ａ２となる。

【0055】

そして、検出部２３ｂ（図３参照）は、図４に示すような撮像画像から、作業者５０の両手５１の位置を検出する。すなわち、検出部２３ｂは、撮像画像から作業者５０の右手５１ａの位置と左手５１ｂの位置とをそれぞれ検出する。

【0056】

さらに、検出部２３ｂは、取得部２３ａによって取得された撮像画像から、作業エリア４０内の対象物Ｘの位置を検出する。

【0057】

ここで、実施形態では、検出部２３ｂによって検出された作業者５０の両手５１の位置と、対象物Ｘの位置とに基づいて、作業者５０が有効作業を実施しているか無効作業を実施しているかを判別部２３ｃ（図３参照）が判別する。この判別処理の詳細について、以下に説明する。

【0058】

まず、判別部２３ｃは、作業者５０が作業の対象物Ｘを保持しているか否かについて判定する。たとえば、作業者５０が１つ以上の対象物Ｘの作業を仕掛かっている場合、すなわち、１つ以上の対象物Ｘが作業領域Ａ１内または搬入領域Ａ２内に位置している場合、判別部２３ｃは、作業者５０が作業の対象物Ｘを保持していると判定する。

【0059】

なお、本開示において、対象物Ｘが作業領域Ａ１内または搬入領域Ａ２内に位置しているとは、対象物Ｘの一部が作業領域Ａ１内または搬入領域Ａ２内に位置する場合でもよいし、対象物Ｘの全体が作業領域Ａ１内または搬入領域Ａ２内に位置する場合でもよい。

【0060】

図４の例では、上流側の作業者５０Ａから渡された対象物Ｘが搬入領域Ａ２内に位置していることから、判別部２３ｃは、作業者５０が作業の対象物Ｘを保持していると判定する。

【0061】

そして、作業者５０が作業の対象物Ｘを保持している場合、判別部２３ｃは、作業者５０の両手５１が作業領域Ａ１内に位置しているか否かについて判定する。

【0062】

なお、本開示において、両手５１が作業領域Ａ１内に位置しているとは、右手５１ａの一部および左手５１ｂの一部が作業領域Ａ１内に位置する場合でもよいし、右手５１ａの全体および左手５１ｂの全体が作業領域Ａ１内に位置する場合でもよい。

【0063】

さらに、本開示において、両手５１が作業領域Ａ１内に位置しているとは、右手５１ａの一部および左手５１ｂの全体が作業領域Ａ１内に位置する場合でもよいし、右手５１ａの全体および左手５１ｂの一部が作業領域Ａ１内に位置する場合でもよい。

【0064】

図４の例では、搬入領域Ａ２内にある対象物Ｘを作業者５０の左手５１ｂが取ろうとしていることから、作業者５０の左手５１ｂは作業領域Ａ１内に位置していない。そのため、本開示において、図４に示す作業は対象物Ｘに対して付加価値を付けない作業であるとみなすことができる。

【0065】

そこで、実施形態では、作業者５０の両手５１が作業領域Ａ１内に位置していない場合に、判別部２３ｃは、作業者５０が無効作業を実施していると判別する。そして、図４の例に示すような状態が維持されている時間を、計測部２３ｄ（図３参照）は、作業者５０の無効作業時間として積算する。

【0066】

つづいて、図５の例では、作業のために作業者５０によって動かされた対象物Ｘが作業領域Ａ１内に位置していることから、判別部２３ｃは、作業者５０が作業の対象物Ｘを保持していると判定する。

【0067】

そして、作業者５０が作業の対象物Ｘを保持している場合、判別部２３ｃは、作業者５０の両手５１が作業領域Ａ１内に位置しているか否かについて判定する。

【0068】

図５の例では、作業領域Ａ１内にある対象物Ｘに対して、作業者５０が右手５１ａおよび左手５１ｂを用いて作業をしていることから、作業者５０の両手５１が作業領域Ａ１内に位置している。そのため、本開示において、図５に示す作業は対象物Ｘに対して付加価値を付ける作業であるとみなすことができる。

【0069】

そこで、実施形態では、作業者５０の両手５１が作業領域Ａ１内に位置している場合に、判別部２３ｃは、作業者５０が有効作業を実施していると判別する。そして、図５の例に示すような状態が維持されている時間を、計測部２３ｄは、作業者５０の有効作業時間として積算する。

【0070】

つづいて、図６の例では、対象物Ｘが引き続き作業領域Ａ１内に位置していることから、判別部２３ｃは、作業者５０が作業の対象物Ｘを保持していると判定する。

【0071】

そして、作業者５０が作業の対象物Ｘを保持している場合、判別部２３ｃは、作業者５０の両手５１が作業領域Ａ１内に位置しているか否かについて判定する。

【0072】

図６の例では、サイドテーブル４２にある部品Ｐを作業者５０の右手５１ａが取ろうとしていることから、作業者５０の右手５１ａは作業領域Ａ１内に位置していない。そのため、本開示において、図６に示す作業は対象物Ｘに対して付加価値を付けない作業であるとみなすことができる。

【0073】

そこで、実施形態では、図４の例と同様に、作業者５０の両手５１が作業領域Ａ１内に位置していない場合に、判別部２３ｃは、作業者５０が無効作業を実施していると判別する。そして、図６の例に示すような状態が維持されている時間を、計測部２３ｄは、作業者５０の無効作業時間として積算する。

【0074】

つづいて、図７の例では、作業が終了した対象物Ｘを作業者５０が搬出領域Ａ３に動かしている。このように、１つの対象物Ｘが搬出領域Ａ３に移動した時点で、計測部２３ｄは、かかる対象物Ｘに対する作業が終了したとみなし、有効作業時間および無効作業時間の計測を終了する。

【0075】

そして、計測部２３ｄは、積算された有効作業時間および無効作業時間を作業時間記憶部２２ｂに記憶する。さらに、計測部２３ｄは、次の対象物Ｘに対する有効作業時間および無効作業時間の計測を開始する。

【0076】

これにより、計測部２３ｄは、作業者５０が実施した１つの対象物Ｘに対する作業（すなわち、１つの単位作業）において、有効作業を実施した時間（有効作業時間）と無効作業を実施した時間（無効作業時間）とをそれぞれ計測することができる。

【0077】

つづいて、図８の例では、１つの対象物Ｘが搬出領域Ａ３に移動し、次の対象物Ｘに対する有効作業時間および無効作業時間の計測を開始した後に、かかる次の対象物Ｘがまだ作業者５０の搬入領域Ａ２内に届いていない状態を示している。

【0078】

このような場合、判別部２３ｃは、作業者５０が作業の対象物Ｘを保持していないと判定する。そして、本開示において、図８に示す作業は次の対象物Ｘに対して付加価値を付けない作業であるとみなすことができる。

【0079】

そこで、実施形態では、作業者５０が作業の対象物Ｘを保持していない場合に、判別部２３ｃは、作業者５０が無効作業を実施していると判別する。そして、図８の例に示すような状態が維持されている時間を、計測部２３ｄは、次の対象物Ｘに対する作業者５０の無効作業時間として積算する。

【0080】

ここまで説明したように、実施形態では、検出部２３ｂによって検出された作業者５０の両手５１の位置と、対象物Ｘの位置とに基づいて、作業者５０が有効作業を実施しているか無効作業を実施しているかを判別することができる。したがって、実施形態によれば、作業者５０の作業状況を把握することができる。

【0081】

また、実施形態では、作業者５０の両手５１の位置に基づいて、作業者５０が有効作業を実施しているか無効作業を実施しているかを判別するとよい。これにより、作業者５０が有効作業を実施しているか無効作業を実施しているかを高い精度で判別することができる。

【0082】

また、実施形態では、作業者５０の両手５１が作業領域Ａ１内に位置している場合に、作業者５０が有効作業を実施していると判別するとよい。これにより、作業者５０が有効作業を実施しているか無効作業を実施しているかをさらに高い精度で判別することができる。

【0083】

なお、実施形態において、作業者５０が有効作業を実施しているか無効作業を実施しているかを判別する体の部位は、両手５１に限られない。たとえば、作業者５０が両手５１以外の体の部位で有効作業を実施する場合には、かかる体の部位の位置に基づいて有効作業を実施しているか無効作業を実施しているかを判別するとよい。

【0084】

また、実施形態では、作業者５０が対象物Ｘを保持していない場合に、作業者５０が無効作業を実施していると判別するとよい。これにより、作業者５０が対象物Ｘを保持していないにも関わらず両手５１が作業領域Ａ１内に位置している場合に、作業者５０が有効作業を実施していると誤って認識されることを抑制することができる。

【0085】

したがって、実施形態によれば、作業者５０が有効作業を実施しているか無効作業を実施しているかをさらに高い精度で判別することができる。

【0086】

また、実施形態では、作業者５０の両手５１以外の体の部位の位置をさらに用いて、判別処理を実施してもよい。図９の例では、検出部２３ｂが、作業者５０の両手５１の位置に加えて、作業者５０の頭５２の位置を検出する。作業者５０の頭５２は、作業者５０の体の別の特定部位の一例である。

【0087】

そして、本開示では、作業者５０が担当する作業において、頭５２が作業領域Ａ１内に位置することは考えにくいにも関わらず、頭５２が作業領域Ａ１内に位置する場合に、図９に示す作業は対象物Ｘに対して付加価値を付けない作業であるとみなすことができる。なぜなら、頭５２が作業領域Ａ１内に位置している場合、作業者５０が居眠りして作業台４１に突っ伏している可能性があるからである。

【0088】

このように、作業領域Ａ１内に位置することは考えにくい別の特定部位（頭５２など）が作業領域Ａ１内に位置している場合に、判別部２３ｃは、作業者５０が無効作業を実施していると判別することができる。

【0089】

これにより、作業者５０が居眠りしているにも関わらず両手５１および対象物Ｘが作業領域Ａ１内に位置している場合に、作業者５０が有効作業を実施していると誤って認識されることを抑制することができる。

【0090】

したがって、実施形態によれば、作業者５０が有効作業を実施しているか無効作業を実施しているかをさらに高い精度で判別することができる。

【0091】

なお、実施形態において、作業領域Ａ１内に位置することは考えにくい別の特定部位は、頭５２に限られず、作業者５０が担当する作業の内容に応じて適宜設定することができる。

【0092】

図１０および図１１は、実施形態に係る情報処理によって得られた製造番号ごとの有効作業時間および無効作業時間の推移の一例について示す図である。

【0093】

図１０の例では、ある工程Ａにおける製造番号ごとの有効作業時間および無効作業時間の推移について示している。そして、図１０の例では、一部の製造番号（ここでは、製造番号００３）において、有効作業時間が所与の閾値よりも長くなっている。

【0094】

このように、有効作業時間が所与の閾値よりも長くなっている場合、工程Ａの工程自体や、かかる工程Ａを流れる対象物Ｘの設計などに問題がある可能性がある。したがって、このような場合には、工程Ａの工程自体の見直しや、工程Ａを流れる対象物Ｘの設計の見直しなどが示唆される。

【0095】

また、図１１の例では、別の工程Ｂにおける製造番号ごとの有効作業時間および無効作業時間の推移について示している。そして、図１１の例では、一部の製造番号（ここでは、製造番号００４）において、無効作業時間が所与の閾値よりも長くなっている。

【0096】

このように、無効作業時間が所与の閾値よりも長くなっている場合、工程Ｂのラインバランスなどに問題がある可能性がある。したがって、このような場合には、工程Ｂのラインバランスの見直しなどが示唆される。

【0097】

［情報処理の手順］
つづいて、実施形態に係る情報処理装置２０の制御処理の手順について、図１２を参照しながら説明する。図１２は、実施形態に係る情報処理装置２０の制御処理の手順を示すフローチャートである。

【0098】

図１２に示すように、まず、情報処理装置２０は、照明装置１０のカメラ１６から撮像画像を取得する（ステップＳ１０１）。そして、情報処理装置２０は、前の対象物Ｘが搬出領域Ａ３に移動した時点から、１つの対象物Ｘに対する作業時間（有効作業時間および無効作業時間）の計測を開始する（ステップＳ１０２）。

【0099】

次に、情報処理装置２０は、撮像画像における対象物Ｘおよび作業者５０の両手５１の位置を検出する（ステップＳ１０３）。そして、情報処理装置２０は、作業者５０が対象物Ｘを保持しているか否かを判定する（ステップＳ１０４）。

【0100】

そして、作業者５０が対象物Ｘを保持している場合（ステップＳ１０４，Ｙｅｓ）、情報処理装置２０は、作業者５０の両手５１が作業領域Ａ１内に位置しているか否かを判定する（ステップＳ１０５）。

【0101】

そして、作業者５０の両手５１が作業領域Ａ１内に位置している場合（ステップＳ１０５，Ｙｅｓ）、情報処理装置２０は、作業者５０が有効作業を実施していると判別し（ステップＳ１０６）、作業者５０の作業時間を有効作業時間として積算する（ステップＳ１０７）。

【0102】

次に、情報処理装置２０は、１つの単位作業が終了したか否かを判定する（ステップＳ１０８）。そして、１つの単位作業が終了した場合（ステップＳ１０８，Ｙｅｓ）、情報処理装置２０は、対象物Ｘの作業時間の計測を終了する（ステップＳ１０９）。

【0103】

最後に、情報処理装置２０は、計測された対象物Ｘの作業時間（有効作業時間および無効作業時間）を作業時間記憶部２２ｂに記憶して（ステップＳ１１０）、一連の処理を終了する。

【0104】

一方、ステップＳ１０４の処理において、作業者５０が対象物Ｘを保持していない場合（ステップＳ１０４，Ｎｏ）、情報処理装置２０は、作業者５０が無効作業を実施していると判別し（ステップＳ１１１）、作業者５０の作業時間を無効作業時間として積算する（ステップＳ１１２）。そして、情報処理装置２０は、ステップＳ１０８の処理に移行する。

【0105】

また、ステップＳ１０５の処理において、作業者５０の両手５１が作業領域Ａ１内に位置していない場合（ステップＳ１０５，Ｎｏ）、情報処理装置２０は、ステップＳ１１１の処理に移行する。

【0106】

［実施形態の効果］
上述してきたように、実施形態に係る情報処理装置２０は、カメラ１６で撮像された撮像画像における作業者５０の両手５１の位置に基づいて、かかる作業者５０が有効作業を実施しているか無効作業を実施しているかを判別する。このため、実施形態に係る情報処理装置２０は、作業者５０の作業状況を把握することができる。

【0107】

［変形例］
上記した実施形態では、工場内で同じ高さに設置される複数の照明装置１０を用いて、複数の作業者５０の作業内容を把握していたが、より高い位置に設けられる別の照明装置をさらに用いてもよい。かかる別の照明装置は、照明装置１０と同様に、照明部とカメラとを有する。

【0108】

そして、この別の照明装置によって、工場内におけるさらに広い範囲を撮像する。これにより、たとえば、工程のラインバランスに問題があると判断された場合に、ラインバランスが悪くなる原因（たとえば、対象物Ｘの流れの詳細など）についても推測することができる。

【0109】

また、上記した実施形態では、作業者５０の両手５１の位置と、対象物Ｘの位置とに基づいて作業者５０が有効作業を実施しているか無効作業を実施しているかを判別していたが、作業者５０の両手５１の位置だけに基づいて、作業者５０が有効作業を実施しているか無効作業を実施しているかを判別してもよい。

【0110】

これにより、対象物Ｘの位置を検出する工程を省略することができることから、作業者５０が有効作業を実施しているか無効作業を実施しているかを簡便に判別することができる。

【0111】

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。

【符号の説明】

【0112】

１ 照明システム
１０ 照明装置
１１ 照明部
１６ カメラ（撮像部の一例）
２０ 情報処理装置
２１ 通信部
２２ 記憶部
２２ａ 撮像画像記憶部
２２ｂ 作業時間記憶部
２３ 制御部
２３ａ 取得部
２３ｂ 検出部
２３ｃ 判別部
２３ｄ 計測部
５０ 作業者
５１ 両手（体の特定部位の一例）
５２ 頭（体の別の特定部位の一例）
Ａ１ 作業領域
Ｘ 対象物

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】