特許 7442066 作業表示方法、及び、作業表示装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-02-22

(45)【発行日】2024-03-04

(54)【発明の名称】作業表示方法、及び、作業表示装置

(51)【国際特許分類】

   G06Q 50/04 20120101AFI20240226BHJP

   G06T 7/20 20170101ALI20240226BHJP

【ＦＩ】

G06Q50/04

G06T7/20 300Z

【請求項の数】 13

(21)【出願番号】P 2019201836

(22)【出願日】2019-11-06

(65)【公開番号】P2021076989

(43)【公開日】2021-05-20

【審査請求日】2022-10-19

(73)【特許権者】

【識別番号】314012076

【氏名又は名称】パナソニックＩＰマネジメント株式会社

(74)【代理人】

【識別番号】100109210

【弁理士】

【氏名又は名称】新居 広守

(74)【代理人】

【識別番号】100137235

【弁理士】

【氏名又は名称】寺谷 英作

(74)【代理人】

【識別番号】100131417

【弁理士】

【氏名又は名称】道坂 伸一

(72)【発明者】

【氏名】村上 奈央子

(72)【発明者】

【氏名】國分 和彦

【審査官】阿部 圭子

(56)【参考文献】

【文献】国際公開第２０１７／０１７７３９（ＷＯ，Ａ１）

【文献】特開２０１８－０４５６６９（ＪＰ，Ａ）

【文献】特開２０１６－２２１６７１（ＪＰ，Ａ）

【文献】特開２００４－２７２５３８（ＪＰ，Ａ）

【文献】特開２０１２－１９８６４４（ＪＰ，Ａ）

【文献】特開２０１９－１２５０２３（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｑ １／００ － ９９／００

Ｇ０６Ｔ ７／２０

(57)【特許請求の範囲】

【請求項1】

作業者の体の一部が第１領域を通過し、かつ、前記第１領域と異なる第２領域を通過しない作業である第１作業と、前記作業者の体の一部が前記第２領域を通過し、かつ、前記第１領域を通過しない作業である第２作業とを含む複数の作業を行う作業者に対して作業内容を表示する作業表示装置が実行する作業表示方法であって、
前記第１作業における第１作業内容を表示するための第１表示ステップと、前記第２作業における第２作業内容を表示するための第２表示ステップとを含み、
前記第１表示ステップは、
前記第１領域における前記作業者の体の一部が通過するか否かの検出を有効とし、かつ、前記第２領域における前記作業者の体の一部が通過するか否かの検出を無効とし、
センサ部から取得したセンシング結果に基づいて前記第１領域において前記作業者の体の一部が検出された場合に、前記第１作業が正常に行われたことを示す情報を前記第１作業内容として表示装置に出力し、
前記第２表示ステップは、
前記第２領域における前記作業者の体の一部が通過するか否かの検出を有効とし、かつ、前記第１領域における前記作業者の体の一部が通過するか否かの検出を無効とし、
前記センサ部から取得したセンシング結果に基づいて前記第２領域において前記作業者の体の一部が検出された場合に、前記第２作業が正常に行われたことを示す情報を前記第２作業内容として前記表示装置に出力し、
前記第２領域は、複数の領域のうち前記第１作業に対応付けられている領域であり、
前記第１領域は、前記複数の領域のうち前記第２作業に対応付けられている領域である、
作業表示方法。

【請求項2】

前記第１領域及び前記第２領域と異なる第３領域であって、前記第１作業において前記作業者の体の一部の通過が禁止されている第３領域を含み、
前記第１表示ステップは、さらに、
前記第３領域における前記作業者の体の一部が通過するか否かの検出を有効とし、
前記センサ部から取得したセンシング結果に基づいて前記第３領域において前記作業者の体の一部が検出されていない場合に、前記第１作業が正常に行われたことを示す情報を前記第１作業内容として前記表示装置に出力する、
請求項１に記載の作業表示方法。

【請求項3】

前記第１表示ステップは、さらに、前記第３領域において前記作業者の体の一部が検出された場合に、前記第１作業が正常に行われなかったことを示す情報を前記第１作業内容として前記表示装置に出力する、
請求項２に記載の作業表示方法。

【請求項4】

前記センサ部は、前記センシング結果として前記第１領域及び前記第２領域を含む画像を撮影する撮像装置を有する、
請求項１～３のいずれか１項に記載の作業表示方法。

【請求項5】

前記第１表示ステップは、さらに、
前記第１表示ステップにおいて撮影された前記画像から前記作業者の体の複数の部位を検出した検出結果に基づいて、前記第１領域において検出された前記作業者の体の部位が前記第１作業に関連付けられた部位である場合に、前記第１作業が正常に行われたことを示す情報を前記第１作業内容として前記表示装置に出力し、
前記第２表示ステップは、さらに、
前記第２表示ステップにおいて撮影された前記画像から前記作業者の体の複数の部位を検出した検出結果に基づいて、前記第２領域において検出された前記作業者の体の部位が前記第２作業に関連付けられた部位である場合に、前記第２作業が正常に行われたことを示す情報を前記第２作業内容として前記表示装置に出力する、
請求項４に記載の作業表示方法。

【請求項6】

前記画像は、前記第１領域及び前記第２領域における色に関する情報を含む、
請求項４又は５に記載の作業表示方法。

【請求項7】

前記色に関する情報は、前記作業者の体の一部の色を含む、
請求項６に記載の作業表示方法。

【請求項8】

前記色に関する情報は、前記第１作業及び前記第２作業の少なくとも一方において用いられる部品の色を含む、
請求項６に記載の作業表示方法。

【請求項9】

前記第１領域及び前記第２領域のそれぞれは、点状、線状、及び、面状のうち少なくとも１つで設定される、
請求項１～８のいずれか１項に記載の作業表示方法。

【請求項10】

前記第２作業は、前記第１作業の後に続けて行われる作業であり、
前記第１表示ステップは、さらに、前記表示装置に前記第１作業を行うための画像を表示し、
前記第２表示ステップは、さらに、前記第１表示ステップにおいて、前記作業者の体の一部が前記第１領域を通過したことが検出された場合、前記表示装置に前記第２作業を行うための画像を表示する、
請求項１～９のいずれか１項に記載の作業表示方法。

【請求項11】

前記第１領域及び前記第２領域と異なる第３領域であって、前記第１作業において前記作業者の体の一部の通過が禁止されている第３領域を含み、
前記第１表示ステップでは、前記第３領域における前記作業者の体の一部が通過するか否かの検出を有効とする、
請求項１～１０のいずれか１項に記載の作業表示方法。

【請求項12】

前記第１領域及び前記第２領域と異なる第３領域であって、前記第１作業において用いる部品と外観が類似した部品が収容されたケースから当該部品を取るために前記作業者の体の一部の通過する第３領域を含み、
前記第１表示ステップでは、前記第３領域における前記作業者の体の一部が通過するか否かの検出を有効とする、
請求項１に記載の作業表示方法。

【請求項13】

作業者の体の一部が第１領域を通過し、かつ、前記第１領域と異なる第２領域を通過しない作業である第１作業と、前記作業者の体の一部が前記第２領域を通過し、かつ、前記第１領域を通過しない作業である第２作業とを含む複数の作業を行う作業者に対して作業内容を表示するための作業表示装置であって、
前記第１作業が行われる場合に、前記第１領域における前記作業者の体の一部が通過するか否かの検出を有効とし、かつ、前記第２領域における前記作業者の体の一部が通過するか否かの検出を無効とする、及び、前記第２作業が行われる場合に、前記第２領域における前記作業者の体の一部が通過するか否かの検出を有効とし、かつ、前記第１領域における前記作業者の体の一部が通過するか否かの検出を無効とする制御部と、
前記第１作業が行われる場合に、センサ部から取得したセンシング結果に基づいて前記第１領域において前記作業者の体の一部が検出されたときに、前記第１作業が正常に行われたことを示す情報を第１作業内容として表示装置に出力し、かつ、前記第２作業が行われる場合に、前記センサ部から取得したセンシング結果に基づいて前記第２領域において前記作業者の体の一部が検出されたときに、前記第２作業が正常に行われたことを示す情報を第２作業内容として前記表示装置に出力する出力部とを備え、
前記第２領域は、複数の領域のうち前記第１作業に対応付けられている領域であり、
前記第１領域は、前記複数の領域のうち前記第２作業に対応付けられている領域である、
作業表示装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、作業表示方法、及び、作業表示装置に関する。

【背景技術】

【0002】

従来、工場などにおいて組立作業を行う作業者の組み立て誤りを検出することが検討されている。特許文献１には、カメラで撮影された画像に基づいて作業者の手の位置を検出することで、作業者が複数ある部品載置部のうち正しい部品載置部から部品を採取したか否かを判定する生産システム（作業表示システム）が開示されている。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２０１８－４５６６９号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

ところで、このような生産システムにおいては、誤検出が抑制されることが望まれる。

【0005】

そこで、本発明は、誤検出を抑制することができる作業表示方法、及び、作業表示装置を提供する。

【課題を解決するための手段】

【0006】

本発明の一態様に係る作業表示方法は、作業者の体の一部が第１領域を通過し、かつ、前記第１領域と異なる第２領域を通過しない作業である第１作業と、前記作業者の体の一部が前記第２領域を通過し、かつ、前記第１領域を通過しない作業である第２作業とを含む複数の作業を行う作業者に対して作業内容を表示するための作業表示方法であって、前記第１作業における第１作業内容を表示するための第１表示ステップと、前記第２作業における第２作業内容を表示するための第２表示ステップとを含み、前記第１表示ステップは、前記第１領域における前記作業者の体の一部が通過するか否かの検出を有効とし、かつ、前記第２領域における前記作業者の体の一部が通過するか否かの検出を無効とし、センサ部から取得したセンシング結果に基づいて前記第１領域において前記作業者の体の一部が検出された場合に、前記第１作業が正常に行われたことを示す情報を前記第１作業内容として表示装置に出力し、前記第２表示ステップは、前記第２領域における前記作業者の体の一部が通過するか否かの検出を有効とし、かつ、前記第１領域における前記作業者の体の一部が通過するか否かの検出を無効とし、前記センサ部から取得したセンシング結果に基づいて前記第２領域において前記作業者の体の一部が検出された場合に、前記第２作業が正常に行われたことを示す情報を前記第２作業内容として前記表示装置に出力する。

【0007】

また、本発明の一態様に係る作業表示装置は、作業者の体の一部が第１領域を通過し、かつ、前記第１領域と異なる第２領域を通過しない作業である第１作業と、前記作業者の体の一部が前記第２領域を通過し、かつ、前記第１領域を通過しない作業である第２作業とを含む複数の作業を行う作業者に対して作業内容を表示するための作業表示装置であって、前記第１作業が行われる場合に、前記第１領域における前記作業者の体の一部が通過するか否かの検出を有効とし、かつ、前記第２領域における前記作業者の体の一部が通過するか否かの検出を無効とする、及び、前記第２作業が行われる場合に、前記第２領域における前記作業者の体の一部が通過するか否かの検出を有効とし、かつ、前記第１領域における前記作業者の体の一部が通過するか否かの検出を無効とする制御部と、前記第１作業が行われる場合に、センサ部から取得したセンシング結果に基づいて前記第１領域において前記作業者の体の一部が検出されたときに、前記第１作業が正常に行われたことを示す情報を第１作業内容として表示装置に出力し、かつ、前記第２作業が行われる場合に、前記センサ部から取得したセンシング結果に基づいて前記第２領域において前記作業者の体の一部が検出されたときに、前記第２作業が正常に行われたことを示す情報を第２作業内容として前記表示装置に出力する出力部とを備える。

【0008】

なお、これらの包括的又は具体的な態様は、システム、方法、集積回路、コンピュータプログラム又はコンピュータ読み取り可能なＣＤ－ＲＯＭなどの記録媒体で実現されてもよく、システム、集積回路、コンピュータプログラム及び記録媒体の任意な組み合わせで実現されてもよい。

【発明の効果】

【0009】

本発明の一態様に係る作業表示方法等によれば、誤検出を抑制することができる。

【図面の簡単な説明】

【0010】

【図1】図１は、実施の形態に係る作業指示システムの機能構成を示すブロック図である。

【図2A】図２Ａは、作業用テーブルの一例を示す図である。

【図2B】図２Ｂは、検出用テーブルの一例を示す図である。

【図3】図３は、実施の形態に係る検出ポイントを示す模式図である。

【図4A】図４Ａは、実施の形態に係る作業指示装置の基本動作を説明するための第１図である。

【図4B】図４Ｂは、実施の形態に係る作業指示装置の基本動作を説明するための第２図である。

【図4C】図４Ｃは、実施の形態に係る作業指示装置の基本動作を説明するための第３図である。

【図4D】図４Ｄは、実施の形態に係る作業指示装置の基本動作を説明するための第４図である。

【図5】図５は、実施の形態に係る作業指示システムの動作を示すシーケンス図である。

【図6】図６は、実施の形態に係る作業指示装置の動作を示すフローチャートである。

【図7】図７は、実施の形態の変形例１に係る作業指示装置の動作を示すフローチャートである。

【図8】図８は、実施の形態の変形例２に係る作業指示装置の動作を示すフローチャートである。

【図9】図９は、実施の形態の変形例３に係る作業指示装置の動作を示すフローチャートである。

【図10】図１０は、実施の形態の変形例４に係る作業指示装置の動作を示すフローチャートである。

【発明を実施するための形態】

【0011】

以下、実施の形態について、図面を参照しながら説明する。以下で説明する実施の形態は、いずれも包括的または具体的な例を示すものである。以下の実施の形態で示される数値、形状、材料、構成要素、構成要素の配置位置及び接続形態、ステップ、ステップの順序などは、一例であり、本発明を限定する主旨ではない。また、以下の実施の形態における構成要素のうち、独立請求項に記載されていない構成要素については、任意の構成要素として説明される。

【0012】

また、各図は模式図であり、必ずしも厳密に図示されたものではない。また、各図において、実質的に同一の構成に対しては同一の符号を付し、重複する説明は省略または簡略化される場合がある。

【0013】

（実施の形態）
［１．作業指示システムの構成］
まず、実施の形態に係る作業指示システムの構成について、図１～図３を用いて説明する。図１は、実施の形態に係る作業指示システム１の機能構成を示すブロック図である。

【0014】

図１に示すように、作業指示システム１は、作業指示装置１０と、第１ドライバ２０と、第２ドライバ３０と、センサ装置４０と、表示装置７０とを備える。以下では、作業指示システム１は、２つの工具（第１ドライバ２０及び第２ドライバ３０）を備える例について説明するが、これに限定されない。なお、以降において、第１ドライバ２０及び第２ドライバ３０を区別しない場合、単にドライバとも記載する。なお、作業指示システム１は、作業表示システムの一例である。

【0015】

作業指示装置１０は、作業ミスの防止と習熟支援、作業時間の遵守、作業の改善、及び、作業ミスの通知等を可能にするためのサーバ装置である。作業指示装置１０の基本動作等については、後述する。本実施の形態に係る作業指示装置１０は、例えば、組立作業等において一人で複数の作業を受け持たせる一人組立作業を行う作業者に対して、作業指示及び作業間違いの検出等を行う。なお、作業者が行う作業は、例えば、工具（例えば、ドライバ）を用いる作業と、工具を用いない作業とを含む。工具を用いない作業は、複数の作業のいずれかで使用される工具の全てを用いない作業である。工具を用いない作業は、手作業による作業を含み、例えば、ワッシャを挿入する作業、クリップを締める作業、及び、検査作業などである。なお、作業指示装置１０は、作業者が行う作業における作業内容を表示装置７０に表示するための作業表示装置の一例である。

【0016】

作業指示装置１０は、通信部１１と、制御部１２と、記憶部１３とを有する。

【0017】

通信部１１は、作業指示システム１が備える各種装置と無線通信又は有線通信を介して通信可能に接続される通信インターフェースである。通信部１１は、例えば、制御部１２によって生成されたセンサ装置４０を制御するためのセンサ制御情報をセンサ装置４０に出力する。また、通信部１１は、センサ部６０のセンシング結果に基づく情報を、センサ装置４０を介して取得する。このように、通信部１１は、センサ制御情報を出力する出力部、及び、センサ部６０のセンシング結果を取得する取得部として機能する。

【0018】

また、通信部１１は、複数の作業それぞれの開始を示す開始信号及び終了を示す終了信号を取得してもよい。通信部１１は、例えば、作業がドライバを使用する作業である場合、開始信号及び終了信号の少なくとも一方を第１ドライバ２０又は第２ドライバ３０から取得してもよい。また、通信部１１は、例えば、開始信号及び終了信号の少なくとも一方を作業者の操作（例えば、ボタン及びフットスイッチ（図示しない）に対する操作）により取得してもよい。

【0019】

制御部１２は、作業指示装置１０と接続された各種装置に当該装置が実行する処理に関する情報を生成及び出力し、かつ、各種装置から当該装置が取得した（例えば、計測することで取得した）情報を取得し、当該情報に基づいて所定の処理を行う処理部である。

【0020】

具体的には、制御部１２は、例えば、記憶部１３に格納されている作業用テーブルＴ１（図２Ａ参照）に基づいて、第１ドライバ２０及び第２ドライバ３０を制御するドライバ制御情報を第１ドライバ２０及び第２ドライバ３０に出力する。また、制御部１２は、記憶部１３に格納されている検出用テーブルＴ２（図２Ｂ参照）に基づいて、センサ装置４０が有する各種センサを制御するためのセンサ制御情報をセンサ装置４０に出力する。

【0021】

また、制御部１２は、センサ装置４０から取得した各種センサのセンシング結果に基づいて、作業が正常に行われたか否かを判定する。そして、制御部１２は、判定結果を表示するための情報を、通信部１１を介して表示装置７０に出力する。

【0022】

記憶部１３は、作業指示装置１０が備える制御部、制御部１２が実行する制御プログラムを格納する記憶装置である。また、記憶部１３は、作業用テーブルＴ１及び検出用テーブルＴ２を格納する。また、記憶部１３は、通信部１１を介して取得した情報（例えば、センシング結果など）を格納してもよい。記憶部１３は、例えば、半導体メモリなどによって実現される。

【0023】

ここで、記憶部１３が格納する作業用テーブルＴ１及び検出用テーブルＴ２について、図２Ａ及び図２Ｂを参照しながら説明する。図２Ａは、作業用テーブルＴ１の一例を示す図である。なお、図２Ａでは、ネジの一例としてビスを締める場合を示している。なお、以下において、ビスを単にネジとも記載する。

【0024】

図２Ａに示すように、記憶部１３は、作業手順と、作業名と、ドライバ名と、ビス本数と、上下限パルスとが対応付けられた作業用テーブルＴ１を格納する。作業手順１、２及び４の作業は、ドライバを用いる作業の一例であり、作業手順２の作業は、ドライバを用いない作業の一例である。言い換えると、作業用テーブルＴ１は、ドライバを用いる作業とドライバを用いない作業とを含む複数の作業を行うためのテーブルである。なお、作業用テーブルＴ１に含まれるドライバを用いる作業及びドライバを用いない作業の数及び順番は、特に限定されない。

【0025】

作業手順は、作業者が行う複数の作業の順番を示す。作業手順は、予め定められている。図２Ａの例では、作業手順１～４がその順番で行われることを示している。

【0026】

作業名は、作業内容を示しており、複数の作業それぞれに設定される。作業者は、作業名を見るだけで、作業の内容を知ることができる。

【0027】

ドライバ名は、作業者がドライバを識別するための名称を示しており、ドライバそれぞれに設定される。ドライバ名は、作業者がドライバを識別できればよく、ドライバの型番等であってもよい。

【0028】

ビス本数は、当該作業においてビス締めするビスの数を示す。

【0029】

上限パルス及び下限パルスは、制御部１２がビスの締め付け情報に基づいてドライバを用いる作業が完了したか否かを判定するために用いられる閾値（パルス数）である。上限パルス及び下限パルスは、例えば、複数人の作業者それぞれの、ビス締め作業（ネジ締め作業）におけるビス締めが適切に完了したときの回転数（又はパルス数）に基づいて、決定される。上限パルス及び下限パルスは、例えば、複数人の作業者それぞれの回転数のうち、所定以上の回転数（例えば、最大回転数）と所定以下の回転数（例えば、最小回転数）とに基づいて決定されてもよい。これにより、複数の作業者それぞれにおいてネジ締め作業におけるネジ締めが適切に完了したときの回転数が異なっていても、上限パルス及び下限パルスを適切に設定することができる。

【0030】

なお、作業用テーブルＴ１は、上限パルス及び下限パルスの少なくとも一方を含んでいればよい。また、作業用テーブルＴ１は、ネジの締め付け情報にトルクの情報が含まれる場合、トルクの上限及び下限の少なくとも一方を含んでいてもよい。また、作業用テーブルＴ１は、ドライバにおいて作業が完了したか否かを判定する場合、上限パネル及び下限パルスの情報は含んでいなくてもよい。

【0031】

作業手順１の作業（以降において、作業１とも記載する）は、ドライバＸを使用してビスＡを２本締める作業であることを示している。ドライバＸは、例えば、第１ドライバ２０である。また、上限パルス及び下限パルスは、ドライバＸを用いてビスＡをビス締めたときに当該ビスＡのビス締めが完了したか否かを判定するための基準であり、ビスＡの回転数に対応する数値である。

【0032】

作業手順２の作業（以降において、作業２とも記載する）は、ドライバＹを使用してビスＢを３本締める作業であることを示している。作業２では、作業１とは異なるドライバが用いられる。ドライバＹは、例えば、第２ドライバ３０である。

【0033】

作業手順３の作業（以降において、作業３とも記載する）は、クリップを１つ取り付ける作業である例を示している。

【0034】

作業手順４の作業（以降において、作業４とも記載する）は、作業手順１と同じドライバを用いてビスＣを４本締める作業である例を示している。

【0035】

上記のように、作業指示装置１０は、ドライバを用いる作業（例えば、ネジ締め作業）とドライバを用いない作業とを含む複数の作業を、作業者が予め定められた作業手順で行うための情報（例えば、作業用テーブルＴ１）を保持している。

【0036】

次に、記憶部１３が格納する検出用テーブルＴ２について説明する。図２Ｂは、検出用テーブルＴ２の一例を示す図である。

【0037】

図２Ｂに示すように、記憶部１３は、作業手順と、作業名と、センサ装置４０に関する情報とが対応づけられた検出用テーブルＴ２を格納する。センサ装置４０に関する情報は、検出ポイント用センサと、禁止ポイント用センサと、停止センサと、検出部位と、検出色と、検出ポイントの形状とを含む。なお、センサ装置４０に関する情報は、少なくとも検出ポイント用センサに関する情報を含んでいればよい。

【0038】

検出ポイント用センサは、現在の作業が正常に行われたか否かを判定するために動作させるセンサを示す。例えば、作業１においては、センサａ～センサｄのうちセンサａを検出ポイント用センサとして動作させる例を示している。

【0039】

禁止ポイント用センサは、現在の作業において作業者の体の一部が通過してはいけない禁止ポイントを当該作業者の体の一部が通過したか否かを判定するために動作させるセンサを示す。例えば、作業１においては、センサａ～センサｄのうちセンサｃを禁止ポイント用センサとして動作させる例を示している。また、例えば、作業２においては、禁止ポイント用センサとしていずれのセンサも動作させない例を示している。

【0040】

停止センサは、現在の作業において、動作を停止するセンサを示す。つまり、停止センサに記載されているセンサは、その作業においてセンシングを行わない。例えば、作業１においては、センサａ～センサｄのうちセンサｃ及びセンサｄの動作を停止させる例を示している。なお、センサ装置４０がセンサ部６０のセンサａ～センサｄの動作の開始及び停止を制御しない場合、検出用テーブルＴ２に停止センサの情報は含まれていなくてもよい。なお、停止センサには、少なくとも１つのセンサが設定される。

【0041】

検出部位は、作業が正常に行われたか否かを判定するための、所定の領域（検出ポイント）を通過する作業者の対象部位を示す。例えば、作業１において当該作業１が正常に行われるには、作業者の右手（作業者の体の一部の一例）が所定の領域を通過する必要があることを示している。

【0042】

なお、センサ制御部５０がセンサ部６０のセンシング結果から作業者の体の部位を特定する機能を有していない場合、検出部位の項目は検出用テーブルＴ２に含まれていなくてもよい。

【0043】

検出色は、作業が正常に行われたか否かを判定するための検出対象の色を示す。例えば、作業２において当該作業２が正常に行われるには、検出対象の色が青である必要があることを示している。検出対象は、作業者の体の一部であってもよいし、その作業で用いる部品であってもよい。すなわち、検出対象の色は、作業者の体の一部の色であってもよいし、部品の色であってもよい。なお、ここでの作業者の体の一部の色は、手を例に説明すると、その作業が素手で行われる場合は、肌の色であり、手袋等を装着して行われる場合は、手袋の色である。また、センサ部６０からのセンシング結果に色の情報が含まれていない場合、検出色に関する項目は検出用テーブルＴ２に含まれていなくてもよい。

【0044】

検出ポイントの形状は、センサ部６０がセンシングする対象エリアの形状を示す。検出ポイントの形状は、点状、線状、及び、面状を含む。例えば、作業１においては、センサａ（検出ポイント用センサ）の検出ポイントが点状である例を示している。なお、検出ポイントが面状である場合、面状の領域における作業者の体の一部の専有面積に関する情報を含んでいてもよい。図２Ｂでは、専有面積に関する情報が、面状の領域の面積に対する、当該面状の領域のうち作業者の体の一部が通過した面積の割合を示す専有面積の割合（例えば、図２Ｂに示す「８０％以上」）である例を示している。

【0045】

図１を再び参照して、第１ドライバ２０及び第２ドライバ３０は、作業者が工具を用いる作業で使用する動力によって作動可能な工具の一例である。なお、ここでの工具とは、例えば、電動工具を意味する。また、動力とは、電気又はエアなどである。第１ドライバ２０は、例えば、ビスＡ及びビスＣのネジ締めに用いる締結工具であり、第１工具の一例である。第２ドライバ３０は、第１ドライバ２０とは異なる締結工具である。第２ドライバ３０は、例えば、ビスＢのネジ締めに用いる締結工具であり、第２工具の一例である。なお、作業指示装置１０と接続されるドライバの数及び種類は特に限定されない。

【0046】

なお、図示しないが、第１ドライバ２０及び第２ドライバ３０のそれぞれは、作業指示装置１０と通信するための通信部と、ドライバの回転数を計測するパルス計測部と、トルクアップ、回転開始及び回転終了を検出する検出部とを有する。パルス計測部は、例えば、ドライバのモータ（図示しない）に組み込まれてエンコーダ（図示しない）の発するパルス信号を計測可能な回路を有し、パルス信号の計測結果から回転数を検出する。エンコーダは、モータが回転すると、これに応じた回転信号としてパルス信号を発する。検出部は、例えば、ドライバの消費電流を計測することで、トルクアップ、回転開始及び回転終了を検出する。通信部は、パルス計測部が計測した計測結果、及び、検出部が検出した検出結果（例えば、回転開始及び回転終了の検出結果であり、開始信号及び終了信号の一例）の少なくとも１つを作業指示装置１０に出力する。

【0047】

なお、第１ドライバ２０及び第２ドライバ３０のそれぞれは、パルス計測部が計測した回転数に基づいて、ネジ締めが完了したか否かを判定する処理部を有していてもよい。

【0048】

センサ装置４０は、作業指示装置１０からのセンサ制御情報に基づいて検出ポイントのセンシングを行い、かつ、センシング結果を作業指示装置１０に出力する。センサ装置４０は、センサ制御部５０と、センサ部６０とを有する。

【0049】

センサ制御部５０は、作業指示装置１０からのセンサ制御情報に基づいて、センサ部６０を制御する処理部である。また、センサ制御部５０は、センサ部６０からのセンシング結果を取得し、取得したセンシング結果に基づく情報を作業指示装置１０に出力する。

【0050】

センシング結果に基づく情報は、センシング結果そのものを含んでいてもよいし、センシング結果を解析した解析結果（例えば、センシング結果が画像である場合、画像解析結果）を含んでいてもよい。センサ制御部５０は、センシング結果が画像である場合、当該画像に基づいて、作業者の体の部位（例えば、頭、手（右手、左手など）、腕（右腕、左腕など）、脚など）を検出する機能を有していてもよい。つまり、センサ装置４０は、いわゆるモーションセンサであってもよい。また、センサ制御部５０は、検出ポイントが面状である場合、センシング結果である画像に基づいて、上記の専有面積を算出する機能を有していてもよい。作業者の体の部位、及び、専有面積は、解析結果の一例である。

【0051】

センサ制御部５０は、例えば、マイクロコンピュータにより実現される。センサ制御部５０は、内蔵する記憶部から制御プログラムを読み出し、読み出したプログラムを実行する。

【0052】

センサ部６０は、作業者の体の一部が検出ポイントを通過したか否かを検出するための１以上のセンサを有する。本実施の形態では、センサ部６０は、センサａ～センサｄにより構成される。センサａ～センサｄはそれぞれ、センサごとに設定された検出ポイントのセンシングを行い、センシング結果をセンサ制御部５０に出力する。

【0053】

センサａ～センサｄは、作業者の体の一部が検出ポイントを通過したか否かを判定するためのセンシング結果を取得できるセンサであればよく、撮像装置であってもよいし、物体の有無を遮光により検出する光センサ又はエリアセンサであってもよいし、それらの組み合わせであってもよい。また、センサａ～センサｄのそれぞれは、同じ種類のセンサであってもよいし、互いに異なる種類のセンサであってもよい。センサａ～センサｄは、例えば、作業内容、検出精度及び検出ポイントの形状等に応じて適宜決定されるとよい。なお、センサ部６０が有するセンサの数は特に限定されない。

【0054】

なお、センサ装置４０は、センサ制御部５０を有していなくてもよい。この場合、作業指示装置１０は、例えば、センサ制御部５０が有する機能を有していてもよい。作業指示装置１０は、通信部１１を介してセンサ部６０の各センサに対して、センサ制御情報を出力し、かつ、センサ部６０の各センサのそれぞれからセンシング結果を取得してもよい。

【0055】

図２Ｂに示すように、本実施の形態では、センサａは、作業１における検出ポイント（第１領域の一例）を作業者の体の一部が通過したかを判定するためのセンサである。センサｂは、作業２における検出ポイント（第２領域の一例）を作業者の体の一部が通過したかを判定するためのセンサである。センサｃは、作業３における検出ポイント（第３領域の一例）を作業者の体の一部が通過したかを判定するためのセンサである。センサｄは、作業４における検出ポイント（第４領域の一例）を作業者の体の一部が通過したかを判定するためのセンサである。第１領域～第４領域は、例えば、互いに重ならない領域である。

【0056】

作業１は、作業者の体の一部が第１領域を通過し、かつ、第１領域と異なる第２領域を通過しない作業（第１作業の一例）である。作業２は、作業者の体の一部が第２領域を通過し、かつ、第１領域を通過しない作業（第２作業の一例）である。また、第１作業においては、作業者の体の一部が第３領域を通過することが禁止されており、作業３においては、作業者の体の一部が第４領域を通過することが禁止されている。そのため、第１作業においては、禁止ポイント用センサにセンサｃが設定されており、第３作業においては、禁止ポイント用センサにセンサｄが設定されている。

【0057】

なお、センサが撮像装置であり、かつ、当該撮像装置の画角が複数の検出ポイントのそれぞれ及び作業者を撮影できている場合などにおいては、センサ部６０が当該撮像装置のみで構成されていてもよい。

【0058】

ここで、センサ部６０の検出ポイントについて、図３を参照しながら説明する。図３は、実施の形態に係る検出ポイントを示す模式図である。図３は、検出ポイントｄ１～ｄ７が設定されており、作業者Ｈの左腕Ａが検出ポイントｄ２を通過している状態を示している。

【0059】

図３に示すように、検出ポイントｄ１は、形状が点状である検出ポイントである。検出ポイントｄ１は、例えば、作業１に対応する検出ポイントであり、センサａによりセンシングされる。検出ポイントｄ２及びｄ３は、形状が線状である検出ポイントである。検出ポイントｄ２は、例えば、作業２に対応する検出ポイントであり、センサｂによりセンシングされる。検出ポイントｄ３は、例えば、作業３に対応する検出ポイントであり、センサｃによりセンシングされる。検出ポイントｄ４は、形状が面状である検出ポイントである。検出ポイントｄ４は、例えば、作業４に対応する検出ポイントであり、センサｄによりセンシングされる。検出ポイントｄ５～ｄ１３においては、作業１～４以外の作業に対応する検出ポイントである。

【0060】

検出ポイントは、例えば、作業において所定の部品（図示しない）を取るために通過する領域であってもよい。図３に示すように、作業者Ｈの周囲には、部品が収容されるケースが複数配置される。検出ポイントは、例えば、作業において用いる部品が収容されているケースから当該部品を取るために作業者Ｈの体の一部が通過する領域であって、かつ、他の作業において作業者Ｈの体の一部が通過しない領域であるとよい。また、検出ポイントは、例えば、作業において工具（例えば、ドライバ）を用いる場合、当該工具を取るために作業者Ｈの体の一部が通過する領域であって、かつ、他の工具を用いる作業において作業者Ｈの体の一部が通過しない領域であってもよい。また、検出ポイントは、例えば、作業が所定の操作部を操作する（例えば、ボタンを押す）ことを含む場合、当該操作部を操作するために作業者Ｈの体の一部が通過する領域であって、かつ、他の操作部を操作する作業において作業者Ｈの体の一部が通過しない領域であってもよい。

【0061】

また、検出ポイントｄ３は、例えば、作業１に対応する禁止ポイントであり、センサｃによりセンシングされる。検出ポイントｄ４は、例えば、作業３に対応する禁止ポイントであり、センサｄによりセンシングされる。

【0062】

禁止ポイントは、例えば、作業において所定の部品を取るために通過してはいけない領域であってもよい。禁止ポイントは、例えば、作業において用いる部品と外観等が類似した部品が収容されているケースから当該類似した部品を取るために作業者Ｈの体の一部が通過する領域であって、かつ、作業において用いる部品を取るために作業者Ｈの体の一部が通過する領域以外の領域であってもよい。このように、禁止ポイントは、作業において作業者Ｈが誤った部品を取ることを検出するためのポイントであってもよい。また、禁止ポイントは、作業において作業者Ｈが誤った工具を取ること、又は、誤った操作部を操作することを検出するためのポイントであってもよい。

【0063】

なお、センサが図３に示す画角で撮影を行う撮像装置である場合、つまり当該撮像装置が作業者Ｈ、及び、複数の検出ポイントｄ１～ｄ７の全てを撮影可能である場合、センサ部６０は、当該センサのみで構成されていてもよい。

【0064】

図１を再び参照して、表示装置７０は、作業指示装置１０から取得した情報を画像として表示する。画像は、写真、動画、イラスト、文字等を含む。表示装置７０は、液晶ディスプレイ等により実現される。表示装置７０が出力した画像は作業者によって視認され、作業内容及び判定結果の確認等に用いられる。表示装置７０は、判定結果として、現在行っている作業が正常に行われたことを示す情報、当該作業が正常に行われなかったことを示す情報、及び、当該作業が行われなかったことを示す情報などを表示する。

【0065】

また、表示装置７０は、現在行っている作業に関する情報を表示する。表示装置７０は、例えば、作業手順、用いるドライバを特定する情報（例えば、ドライバ名）、ネジ締めを行う本数、ネジ締めの判定結果、及び、作業経過時間の少なくとも１つを表示する。表示装置７０は、作業者が作業する上で邪魔にならない位置に配置される。

【0066】

表示装置７０は、作業指示装置１０から取得した情報を出力する出力装置の一例である。なお、作業指示システム１は、出力装置として、表示装置７０に替えて又は表示装置７０とともに、出音装置（例えば、スピーカ）、プロジェクタなどの対象物（例えば、スクリーン）に情報を表示する装置、発光装置などの光（例えば、光の色）で情報を出力する装置などを有していてもよい。

【0067】

［２．作業指示システムの基本動作］
次に、上記のような作業指示システム１における基本動作について、図４Ａ～図４Ｃを参照しながら説明する。具体的には、作業指示装置１０が作業者に作業指示する動作について説明する。作業指示装置１０の各処理部が所定のアプリケーションプログラム（以降に置いて、専用アプリとも記載する）を実行することによって実現される。

【0068】

まずは、記憶部１３に格納されている作業指示画像等を用いて行われる基本動作について説明する。図４Ａは、実施の形態に係る作業指示装置１０の基本動作を説明するための第１図である。

【0069】

図４Ａに示すように、作業者は、まず専用アプリを起動させ、メニューに表示される項目に所定の情報を入力する。所定の情報とは、例えば、作業者及び作業者が行う作業を特定するための情報を含む。メニューに表示される項目は、例えば、作業者を特定する情報を入力する「作業者入力」、使用する作業端末を特定する「端末Ｎｏ．入力」、及び、作業する製品の品番を入力する「製品番号入力」である。また、メニューに表示される項目には、さらに過去に作業した際に取得した実績データの取り扱い、及び、画面のレイアウトの調整などが含まれる。

【0070】

所定の情報が入力されると、表示装置７０に作業に応じた画像が表示される。図４Ｂは、実施の形態に係る作業指示装置１０の基本動作を説明するための第２図である。具体的には、作業指示装置１０が表示装置７０に表示する作業指示画像Ｐを示している。

【0071】

図４Ｂに示すように、製品品種を設定（図４Ｂでは、「ＤＥＭＯ－２０１７」を設定）すると、表示装置７０に作業指示画像Ｐが表示される。作業指示装置１０は、作業者から操作を取得すると、当該操作に応じた作業指示画像Ｐを表示装置７０に表示させる。作業指示画像Ｐには、製品品種、作業名ｐ１（図４Ｂでは、「部品Ａを取る」）、作業時の注意事項ｐ２（図４Ｂでは、「確実に取ること」）、作業を説明する説明画像ｐ３、及び、部品名ｐ４（図４Ｂでは「部品Ａ」）などが表示される。また、図示していないが、作業指示システム１は、出音装置を備えており、当該出音装置から説明画像ｐ３に対応した作業指示が音声で出音される。なお、説明画像ｐ３は、例えば動画である。また、作業名ｐ１（作業内容）、注意事項ｐ２、説明画像ｐ３、及び、部品名ｐ４などは、複数の作業それぞれに作成される。

【0072】

これにより、作業者は、作業指示画像Ｐと音声とによる作業指示を受けることになる。作業指示装置１０は、説明画像ｐ３と音声とによる作業指示、文字による作業指示、及び、注意事項ｐ２の表示等により、作業者の作業ミスの防止を支援することができる。また、例えば、作業者が熟練者である場合、表示装置７０の説明画像ｐ３を見なくても出音装置による音声指示で作業を行うことができる。また、例えば作業者が当該作業に慣れていない場合、表示装置７０の説明画像ｐ３を必要なときだけ見ることで作業を円滑に進めることができる。よって、作業指示装置１０によれば、作業ミスの防止と習熟支援とを実現することができる。

【0073】

なお、例えば、作業がドライバを用いる作業である場合、作業名ｐ１は、使用するドライバ、ビスの種類、及び、ビス本数を含み、例えば「ドライバＸで、ビス１を２ヶ所締付ける」と表示される。

【0074】

また、作業指示画像Ｐには、さらに作業者の熟練度に応じて作業者区分を選択する選択画像が表示されていてもよい。図４Ｃは、実施の形態に係る作業指示装置１０の基本動作を説明するための第３図である。

【0075】

図４Ｃに示すように、作業者が作業を開始する前又は作業中に、ドロップダウンメニューなどをクリックすると、作業者の作業者区分を選択するための選択画像ｐ５が表示される。図４Ｃの例では、「新人」、「通常」及び「熟練」の３つの区分が表示されている例を示しているが、作業者区分の数は特に限定されず、２以上であればよい。作業者が自身の作業者区分を選択することで、表示装置７０における出力内容が変更されてもよい。作業指示装置１０は、例えば、「新人」が選択されると、記憶部１３に格納されている作業指示の全てを出力する。また、作業指示装置１０は、例えば「通常」又は「熟練」が選択されると、複数の作業のうち予め設定された作業の作業指示の出力を行わなくてもよい。これにより、作業指示システム１は、作業者の熟練度に適した作業指示画像Ｐを出力することができる。

【0076】

図４Ｂを再び参照して、作業指示画像Ｐには、経過時間表示バーｐ６が表示される。経過時間表示バーｐ６には、複数の作業の進捗率を示すバーと、進捗時間とが表示される。進捗率を示すバーには、現在作業中の作業の経過時間（経過時間表示バーｐ６の上段に示す「作業単位進捗」）、複数の作業それぞれの標準作業時間の累計（経過時間表示バーｐ６の中段に示す「累積作業ベース」）、及び、１サイクル動作中の経過時間（経過時間表示バーｐ６の下段に示す「全作業進捗」）が含まれる。標準作業時間は、予め設定されている。なお、作業者が行う複数の作業を要素作業とも記載する。１サイクル動作中とは、作業者が複数の作業を作業手順に沿って一通り行うことを１サイクルとした場合、作業者が複数の作業を作業手順に沿って行っている最中であることを意味する。

【0077】

これにより、作業者は、経過時間表示バーｐ６を確認することで、標準時間が守れているか否かを確認することができ、作業ペースの維持に役立つ。よって、作業指示装置１０によれば、作業者が作業時間を遵守することを支援することができる。なお、作業指示装置１０は、作業中の経過時間が当該作業の標準時間の所定割合を超えると、作業者に注意を促してもよい。作業指示装置１０は、例えば、作業単位進捗バー及び進捗時間の色を変化させることで注意を促してもよいし、出音装置に音声を出音させることで注意を促してもよい。作業指示装置１０は、例えば、作業中の経過時間が当該作業の標準時間の７０％を経過すると作業単位進捗バー及び進捗時間の色をオレンジ色とし、作業中の経過時間が当該作業の標準時間を経過すると作業単位進捗バー及び進捗時間の色をさらに注意を促す赤色にしてもよい。

【0078】

なお、説明画像ｐ３に示すように、ワッシャが複数種類あり、複数種類のワッシャのそれぞれが異なるケースに収容されている場合、説明画像ｐ３において作業者が当該作業で取るワッシャが入ったケースが強調して表示されてもよい。

【0079】

作業指示装置１０は、現在の作業が正常に行われるたびに、次の作業に対応した作業指示画像Ｐを表示装置７０に表示する。

【0080】

作業指示装置１０は、１サイクルの作業（作業者に割り当てられた複数の作業）が完了すると、作業結果を表示装置７０に表示させてもよい。図４Ｄは、実施の形態に係る作業指示装置１０の基本動作を説明するための第４図である。

【0081】

図４Ｄに示すように、作業指示装置１０は、１サイクルの完了時の作業時間を表示装置７０に表示させてもよい。また、作業指示装置１０は、さらに１サイクルの標準時間を合わせて表示装置７０に表示させてもよい。

【0082】

図４Ｂを再び参照して、作業指示画像Ｐには、作業の実績を示す実績情報ｐ７が表示される。図４Ｂは、作業がドライバを用いる作業であり、作業指示画像Ｐには、ドライバを用いる作業における実績などを示す実績情報ｐ７が表示されている例を示している。つまり、図４Ｂに示す実績情報ｐ７を含む作業指示画像Ｐは、ドライバを用いる作業を行うときに表示される、ドライバ連携時の画像である。実績情報ｐ７として、例えば、作業結果（図４Ｂに示す「ＯＫ」）、当該作業に用いるドライバ名（図４Ｂに示す「ドライバＸ」）、パルス、カウント、及び、ＮＧ回数が表示される。

【0083】

作業結果は、ビス締めが成功したか否かの判定結果を示す。作業結果には、例えば、制御部１２によりビスが適切に締め付けられた又は締め付けられていないと判定されるたびに、当該ビス締めに対する判定結果が表示される。作業結果は、例えば、ビス１本ごとに表示される。

【0084】

ドライバ名は、当該ドライバを用いる作業で使用されるドライバを特定する情報を示す。ドライバ名に表示されているドライバのみが、動作可能な状態となっている。

【0085】

パルスは、ビス締め作業ごとに表示される実績のパルス数である。

【0086】

カウントは、制御部１２によりビスが締め付けられたと判定された（例えば、ＯＫと判定された）数を示す。具体的には、カウントには、「ＯＫ」判定されたビスの本数である実績本数（図４Ｂに示す「０」）と、当該作業において取り付けるビスの総数である計画本数（図４Ｂに示す「３」）とが表示される。

【0087】

ＮＧ回数は、ビスの締め付けが失敗した回数である。ＮＧ回数は、制御部１２によりビス締め付けが失敗したと判定されると、カウントアップされる。

【0088】

このように実績情報ｐ７が表示されることで、作業者は、ドライバを用いる作業における実績を確認することができる。また、作業者は、表示装置７０に作業結果及びドライバ名等が表示されるので、作業結果及び使用するドライバの情報を容易に知ることができる。

【0089】

なお、ドライバを用いない作業における実績情報ｐ７は、現在行っている作業が正常に行われたことを示す情報、当該作業が正常に行われなかったことを示す情報、及び、当該作業が行われなかったことを示す情報などを含む。

【0090】

また、作業指示画像Ｐには、説明画像ｐ３の切り替えなど操作を行うための操作画像ｐ８が表示される。例えば、マウス等で操作画像ｐ８の所定のボタンを選択すると、当該ボタンに応じて説明画像ｐ３等が切り替わる。操作画像ｐ８のボタンは、例えば、現在表示されている説明画像ｐ３を停止する又は停止した説明画像ｐ３を再開するボタン、次の作業に進めるボタン、前の作業に戻すボタン、音声指示の読み上げを開始又は停止するボタンなどが含まれる。

【0091】

なお、上記ボタンの替わりにキーボードで簡単に操作ができるようにショートカットキーが割り当てられていてもよい。また、作業指示システム１が収音装置（図示しないが、例えばマイクロフォン）を備えており、作業指示装置１０は当該収音装置が取得した作業者の音声に基づいて、作業指示画像Ｐに表示される内容を変更してもよい。

【0092】

これにより、作業者は、作業の進捗状況などに応じて作業指示画像Ｐの表示内容等を変更することができる。例えば、わかりにくかった部分の説明画像ｐ３を再度表示することで、作業ミスの防止につながる。また、例えば、説明画像ｐ３の説明が終了する前に作業が完了したときは、次に作業に進めることで、作業を円滑に進めることができる。

【0093】

また、作業指示画像Ｐには、１サイクルの要素作業の一覧を示す作業一覧ｐ９等の情報が表示されてもよい。

【0094】

これにより、作業者は、現在の作業の前に行った作業及び現在の作業の後に行う作業の情報を知ることができる。

【0095】

作業指示装置１０は、例えば、現在行っている作業が終了したことを検出する（例えば、センサ装置４０からのセンシング結果に基づいて検出する）と、表示装置７０に出力する情報を次に行う作業の情報に自動的に切り替える。作業指示装置１０は、例えば、表示装置７０に表示する作業指示画像Ｐを次に行う作業の作業指示画像Ｐに自動で切り替える。なお、作業指示装置１０は、作業指示画像Ｐ等を自動で切り替えることに限定されず、作業者からの操作（例えば、フットスイッチの操作）により、作業指示画像Ｐ等を切り替えてもよい。

【0096】

［３．作業指示システムの動作］
次に、上記のような作業指示システム１の動作について、図５を参照しながら説明する。図５は、実施の形態に係る作業指示システム１の動作を示すシーケンス図である。なお、以下では、禁止ポイントが設定されていない例について説明する。また、作業手順は、作業１～作業ｎまであるとする。Ｎ番目の作業を作業Ｎとも記載する。

【0097】

図５に示すように、作業指示装置１０は、作業者の操作により、専用アプリを起動して所定の情報が入力されることで作業手順（１～ｎ）を読み込む（Ｓ１１）。作業指示装置１０は、「作業者」及び「製品番号」が入力されることで、当該作業者が当該製造番号の作業を行う作業者であるか否かを判定することができる。作業指示装置１０は、記憶部１３に格納された複数の作業指示画像及び情報テーブルの中から所定の情報に応じた作業指示画像Ｐ、作業用テーブルＴ１、及び、検出用テーブルＴ２を取り出す。なお、読み込みには、作業指示装置１０の外部の記録媒体（ＣＤ－ＲＯＭ又はＵＳＢメモリなど）から作業指示画像Ｐ、作業用テーブルＴ１、及び、検出用テーブルＴ２を読み込みことも含まれる。また、読み込みには、通信部１１が外部の機器から通信により作業指示画像Ｐ、作業用テーブルＴ１、及び、検出用テーブルＴ２を取得することも、作業手順を読み込むことに含まれる。

【0098】

次に、作業指示装置１０は、作業Ｎの情報を読み出し、表示装置７０に出力する（Ｓ１２）。作業Ｎは、これから行う作業である。制御部１２は、ステップＳ１２において、作業Ｎに対応する作業指示画像Ｐ、及び、検出用テーブルＴ２から作業１で動作させるセンサに関する情報（例えば、検出ポイント用センサ）を取得する。そして、制御部１２は、作業Ｎに対応する作業指示画像Ｐを表示装置７０に出力する。

【0099】

表示装置７０は、作業指示装置１０から作業Ｎの情報を取得し、当該情報を表示する（Ｓ１３）。これにより、作業者は、表示装置７０を確認してから、又は、確認しつつ作業を行うことができる。なお、例えば、作業指示システム１が出力装置として出音装置を備える場合、ステップＳ１４において、取得した情報に基づく音声が出力されてもよい。

【0100】

次に、作業指示装置１０は、作業Ｎにおけるセンサ制御情報をセンサ制御部５０に出力する（Ｓ１４）。具体的には、作業指示装置１０は、検出用テーブルＴ２に基づいて当該作業Ｎにおいてセンシング結果を取得するセンサを特定するための情報を含むセンサ制御情報を生成し、センサ制御部５０に出力する。

【0101】

本実施の形態では、作業指示装置１０は、作業１を例に説明すると、作業１における検出ポイント（第１領域の一例）をセンシングするためにセンサａを動作させ、かつ、それ以外の作業における検出ポイント（例えば、作業２のおける検出ポイントであり、第２領域の一例）のセンシングを停止するためにセンサ（例えば、センサｂ）の動作を停止することを示すセンサ制御情報を生成し、センサ制御部５０に出力する。これは、第１領域における作業者の体の一部が通過するか否かの検出を有効とし、かつ、第２領域における作業者の体の一部が通過するか否かの検出を無効とすることの一例である。

【0102】

センサ制御部５０は、センサ制御情報を取得し、取得したセンサ制御情報に基づいてセンサ部６０を制御する（Ｓ１５）。本実施の形態では、センサ制御部５０は、センサ制御情報に基づいて、作業Ｎに対応するセンサのみを動作させるようにセンサ部６０を制御する。なお、センサ制御部５０によるセンサ部６０の制御は、これに限定されない。センサ制御部５０は、作業Ｎに対応するセンサ以外のセンサを動作させてもよい。

【0103】

センサ部６０は、作業Ｎに対応するセンサのみ動作し（Ｓ１６）、作業Ｎに対応する検出ポイント（領域）をセンシングしたセンシング結果をセンサ制御部５０に出力する（Ｓ１７）。センシング結果は、作業Ｎに対応するセンサが光センサ又はエリアセンサである場合、例えば、検出ポイントが遮光されたか否か、及び、遮光された回数の少なくとも一方を含む。また、センシング結果は、作業Ｎに対応するセンサが撮像装置である場合、画像を含む。なお、センシング結果の出力は、逐次実行されてもよいし、所定時間ごとに実行されてもよい。

【0104】

センサ制御部５０は、センサ部６０からセンシング結果を取得し（Ｓ１８）、取得したセンシング結果を解析する（Ｓ１９）。センサ制御部５０は、センシング結果が画像である場合、当該画像の画像解析により作業者の体の部位を検出する。体の部位は、解析結果の一例である。そして、センサ制御部５０は、センシング結果及び解析結果を作業指示装置１０に出力する（Ｓ２０）。センシング結果及び解析結果の出力は、逐次実行されてもよいし、所定時間ごとに実行されてもよい。

【0105】

なお、センサ制御部５０は、センシング結果に対して解析を行わなくてもよい。センサ制御部５０は、例えば、センサ部６０からセンシング結果を取得し、取得したセンシング結果を作業指示装置１０に出力する中継装置として機能してもよい。

【0106】

また、センサ制御部５０は、図５に示すステップＳ１５において作業Ｎに対応するセンサ以外のセンサも動作させている場合（例えば、全てのセンサを動作させている場合）、ステップＳ２０において、作業Ｎに対応するセンサ及び当該センサ以外のセンサのセンシング結果から作業Ｎに対応するセンサのセンシング結果のみを作業指示装置１０に出力してもよい。このように、センサ制御部５０は、センサ部６０から取得した複数のセンサのセンシング結果の中から、作業Ｎに対応するセンサのセンシング結果を抽出し、作業指示装置１０に出力してもよい。センサ制御部５０が作業Ｎ（例えば、作業１）に対応するセンサのセンシング結果のみを作業指示装置１０に出力することは、第１領域における作業者の体の一部が通過するか否かの検出を有効とし、かつ、第２領域における作業者の体の一部が通過するか否かの検出を無効とすることの一例である。

【0107】

また、センサ制御部５０は、センサ部６０が撮像装置を有する場合、当該撮像装置から取得した画像（例えば、図３に示す画角の画像）を用いて、作業Ｎに対応する領域（第１領域の一例）において作業者の体の一部が通過したか否かを検出し、当該検出結果を作業指示装置１０に出力してもよい。言い換えると、作業Ｎにおいて、作業Ｎに対応する領域と異なる領域（第２領域の一例）を作業者の体の一部が通過したか否かの検出結果は、作業指示装置１０に出力されない。センサ制御部５０が画像から作業Ｎに対応する領域の検出結果のみを作業指示装置１０に出力することは、第１領域における作業者の体の一部が通過するか否かの検出を有効とし、かつ、第２領域における作業者の体の一部が通過するか否かの検出を無効とすることの一例である。

【0108】

次に、作業指示装置１０は、センサ装置４０から作業Ｎに対応するセンシング結果及び解析結果を取得する（Ｓ２１）。作業指示装置１０は、取得したセンシング結果及び解析結果に基づいて、作業Ｎが正常に行われたか否かを判定する（Ｓ２２）。当該判定においては、後述する。そして、作業指示装置１０は、判定した判定結果を表示装置７０に出力する（Ｓ２３）。判定結果（例えば、作業Ｎが正常に行われたことを示す情報）は、作業内容に含まれる。本実施の形態に係る作業内容は、少なくとも判定結果を含む。

【0109】

表示装置７０は、判定結果を取得し、取得した判定結果を表示する（Ｓ２４）。これにより、作業者に作業Ｎが正常に行われたか否かを知らせることができる。

【0110】

作業用テーブルＴ１に含まれる作業手順（例えば、作業１～作業ｎ）の全てが終了するまで、ステップＳ１２～Ｓ２４の処理が繰り返し実行される。なお、作業指示装置１０は、ステップＳ２２において、作業Ｎが正常に行われていないと判定した場合、作業Ｎが正常に行われていないことを示す判定結果を表示装置７０に出力する。そして、作業指示装置１０は、次の作業におけるステップＳ１２以降の処理を実行しない。つまり、それ以降の作業は、行われない。

【0111】

なお、上記では、作業指示装置１０は、判定結果を表示装置７０に直接出力する例について説明したが、作業指示装置１０と表示装置７０との通信を中継する中継装置（例えば、サーバ装置）に出力してもよい。作業指示装置１０が当該中継装置に判定結果を出力することは、判定結果を表示装置７０に出力することに含まれる。

【0112】

なお、作業指示装置１０は、判定結果を当該作業における作業指示画像Ｐに重ねて表示装置７０に表示させてもよい。

【0113】

次に、作業指示装置１０の動作について、図６を参照しながら説明する。図６は、実施の形態に係る作業指示装置１０の動作を示すフローチャートである。なお、図６に示す各ステップは、作業者に対する作業内容を表示するための表示ステップの一例である。

【0114】

図６に示すように、制御部１２は、作業手順の読み込みを行う（Ｓ３１）。ステップＳ３１は、図５に示すステップＳ１１に相当する。そして、制御部１２は、読み込んだ作業手順において、これから行う作業Ｎを作業１に設定する。つまり、制御部１２は、Ｎ＝１に設定する（Ｓ３２）。ステップＳ３４以降においては、主にＮ＝１である場合について説明する。

【0115】

次に、制御部１２は、作業１の情報を読み出し、読み出した作業１の情報を表示装置７０に出力する（Ｓ３３）。具体的には、制御部１２は、作業１に対応する作業指示画像Ｐを表示装置７０に出力する。

【0116】

次に、制御部１２は、作業１の検出ポイントを有効に設定する（Ｓ３４）。作業１の検出ポイントを有効にするとは、作業指示装置１０がセンシング結果として、作業１の検出ポイントをセンシングするセンサのセンシング結果を用いて、ステップＳ３６の判定を行うことを意味する。言い換えると、作業１の検出ポイント以外の検出ポイントをセンシングするセンサのセンシング結果を用いずに、後述べるステップＳ３６の判定を行うことを意味する。ステップＳ３４は、作業１の検出ポイント（第１領域の一例）における作業者の体の一部が通過するか否かの検出を有効とし、かつ、作業２などの検出ポイント（第２領域の一例）における作業者の体の一部が通過するか否かの検出を無効とすることの一例である。

【0117】

具体的には、制御部１２は、検出用テーブルＴ２に基づいて、センサ制御情報を生成し、センサ装置４０に出力する。ここでのセンサ制御情報は、作業１においてセンシング結果を取得するセンサであるセンサａを特定するための情報を含んでもよい。センサ制御情報は、例えば、センサａ～センサｄのうちセンサａのみを動作させる指示を含んでいてもよい。ステップＳ３４は、図５に示すステップＳ１３に相当する。

【0118】

次に、制御部１２は、センサ装置４０から作業１に対する検出結果を取得する（Ｓ３５）。制御部１２は、例えば、検出結果として、センシング結果及び解析結果を取得する。具体的には、制御部１２は、センサａのセンシング結果と、当該センシング結果における解析結果とを取得する。なお、制御部１２は、少なくともセンシング結果のみを取得すればよい。以降では、制御部１２は、ステップＳ３５において、センシング結果のみを取得した例について説明する。ステップＳ３５は、図５に示すステップＳ２１に相当する。なお、ステップＳ３５は、例えば、作業ごとに複数回行われてもよい。

【0119】

次に、制御部１２は、センシング結果に基づいて、作業者の体の一部が検出ポイントを通過したか否かを判定する（Ｓ３６）。作業１に対応する検出ポイントは、第１領域の一例である。ステップＳ３６は、図５に示すステップＳ２２に相当する。

【0120】

制御部１２は、センシング結果が作業１に対応する検出ポイントで作業者の体の一部を検出したことを示す場合、作業者の体の一部が検出ポイントを通過したと判定する。制御部１２は、検出ポイントを通過したと判定した場合（Ｓ３６でＹｅｓ）、作業１が正常に行われたことを示す情報を出力する（Ｓ３７）。制御部１２は、例えば、当該情報を表示装置７０に出力する。ステップＳ３７は、図５に示すステップＳ２３に相当する。また、作業１が正常に行われたことを示す情報は、第１作業内容の一例である。

【0121】

そして、制御部１２は、読み出した作業手順に含まれる作業の全てが終了したか否かを判定する。具体的には、制御部１２は、Ｎ＝ｎであるか否かを判定する（Ｓ３８）。制御部１２は、Ｎ＝ｎである場合（Ｓ３８でＹｅｓ）、処理を終了する。また、制御部１２は、Ｎ＝ｎではない場合（Ｓ３８でＮｏ）、次の作業へ進む（Ｓ３９）。具体的には、制御部１２は、Ｎ＝ｎ+１に設定し、ステップＳ３３以降の処理を継続する。例えば、作業１の後に、作業２が行われる。例えば、ステップＳ３７における作業２が正常に行われたことを示す情報は、第２作業内容の一例である。

【0122】

これにより、作業Ｎ（例えば第１作業の一例）における検出ポイントにおいて、作業者の体の一部が通過したことが検出された場合に、次の作業（例えば、第２作業の一例）を行うための情報が表示装置７０に出力される。言い換えると、作業Ｎにおける検出ポイントにおいて、作業者の体の一部が通過したことが検出されなかった場合に、次の作業を行うための情報が表示装置７０に出力されない。

【0123】

また、制御部１２は、検出ポイントを通過していないと判定した場合（Ｓ３６でＮｏ）、さらに、所定時間経過したか否かを判定する（Ｓ４０）。所定期間は、作業１を開始してからの経過時間であり、例えば、ステップＳ３４において作業１の検出ポイントを有効に設定したときからの経過時間であってもよい。

【0124】

制御部１２は、所定時間経過した場合（Ｓ４０でＹｅｓ）、作業１が行われなかったことを示す情報を出力する（Ｓ４１）。制御部１２は、例えば、当該情報を表示装置７０に出力する。そして、制御部１２は、処理を終了する。ステップＳ４１は、図５に示すステップＳ２３に相当する。また、制御部１２は、所定時間経過していない場合（Ｓ４０でＮｏ）、ステップＳ３５に戻り処理を継続する。なお、作業１が行われなかったことを示す情報は、第１作業内容の一例である。

【0125】

上記のように、作業指示装置１０は、作業に応じた検出ポイントを有効に設定し、当該検出ポイントをセンシングセンサのセンシング結果に基づいて、作業が正常に行われたか否かを判定する。また、作業指示装置１０は、作業に応じた検出ポイント以外の検出ポイントを無効に設定する。つまり、作業指示装置１０は、作業に応じた検出ポイント以外の検出ポイントのセンシング結果を用いずに、上記の判定を行う。

【0126】

［４．効果など］
以上説明したように、本実施の形態に係る作業指示方法（作業表示方法の一例）は、作業者の体の一部が第１領域を通過し、かつ、第１領域と異なる第２領域を通過しない作業である第１作業と、作業者の体の一部が第２領域を通過し、かつ、第１領域を通過しない作業である第２作業とを含む複数の作業を行う作業者に対して作業内容を表示するための作業表示方法である。作業表示方法は、第１作業における第１作業内容を表示するための第１表示ステップと、第２作業における第２作業内容を表示するための第２表示ステップとを含む。第１表示ステップは、第１領域における作業者の体の一部が通過するか否かの検出を有効とし、かつ、第２領域における作業者の体の一部が通過するか否かの検出を無効とし（Ｓ３４）、センサ部６０から取得したセンシング結果に基づいて第１領域において作業者の体の一部が検出された場合に、第１作業が正常に行われたことを示す情報を第１作業内容として表示装置７０に出力する（Ｓ３７）。また、第２表示ステップは、第２領域における作業者の体の一部が通過するか否かの検出を有効とし、かつ、第１領域における作業者の体の一部が通過するか否かの検出を無効とし（Ｓ３４）、センサ部６０から取得したセンシング結果に基づいて第２領域において作業者の体の一部が検出された場合に、第２作業が正常に行われたことを示す情報を第２作業内容として表示装置７０に出力する（Ｓ３７）。

【0127】

なお、第１領域は、例えば、検出ポイント１であり、第２領域は、例えば、検出ポイント２である。また、第１作業は、例えば、作業１であり、第２作業は、例えば、作業２である。また、第１表示ステップは、例えば、作業１に対して実行される図６に示す各ステップであり、第２表示ステップは、作業２に対して実行される図６に示す各ステップである。

【0128】

例えば、第１作業を行う場合に、第２領域における作業者の体の一部が通過するか否かの検出が有効であると、第１領域及び第２領域のそれぞれのセンシング結果に基づいて、第１作業が正常に行われたか否かが判定される。この場合、第１作業が正常に行われていたとしても、第２領域において作業者の体の一部が通過したことが検出された場合、第１作業が正常に行われなかったと判定される場合がある。つまり、誤検出される場合がある。

【0129】

一方、本実施の形態に係る作業指示方法（作業表示方法の一例）は、第１作業を行う場合に、第２領域における作業者の体の一部が通過するか否かの検出を無効にするので、第１領域及び第２領域のうち第１領域のみをセンシングしたセンシング結果に基づいて、第１作業が正常に行われたか否かを判定することができる。つまり、作業表示方法は、第１作業を行う場合に、当該第１作業において通過しない第２領域におけるセンシング結果の影響を受けずに上記の判定を行うことができる。よって、本実施の形態に係る作業表示方法によれば、誤検出を抑制することができる。

【0130】

また、センサ部６０は、センシング結果として、第１領域及び第２領域を含む画像を撮影する撮像装置を有する。

【0131】

これにより、撮像装置により撮影された画像（センシング結果）に基づいて、作業が正常に行われたか否かを判定することができる。例えば、画像の画像解析結果（例えば、作業者の体の部位、色など）を用いる場合、作業が正常に行われたか否かの判定をより正確に行うことができる。言い換えると、作業表示方法によれば、誤検出をより抑制することができる。

【0132】

また、第１領域及び第２領域のそれぞれは、点状、線状、及び、面状のうち少なくとも１つで設定される。

【0133】

これにより、第１領域及び第２領域が、例えば、作業又は作業者に応じた形状に設定されることで、誤検出をより抑制することができる。

【0134】

また、第２作業は、第１作業の後に続けて行われる作業であり、第１表示ステップは、さらに、表示装置７０に第１作業を行うための画像を表示し、第２表示ステップは、さらに、第１表示ステップにおいて、作業者の体の一部が第１領域を通過したことが検出された場合、表示装置７０に第２作業を行うための画像を表示する。

【0135】

これにより、第１作業が正常に行われた場合、次の作業を行うための画像が自動で表示されるので、作業効率が向上する。

【0136】

また、以上説明したように、本実施の形態に係る作業指示装置１０（作業表示装置の一例）は、作業者の体の一部が第１領域を通過し、かつ、第１領域と異なる第２領域を通過しない作業である第１作業と、作業者の体の一部が第２領域を通過し、かつ、第１領域を通過しない作業である第２作業とを含む複数の作業を行う作業者に対して作業内容を表示するための作業表示装置である。作業指示装置１０は、第１作業が行われる場合に、第１領域における作業者の体の一部が通過するか否かの検出を有効とし、かつ、第２領域における作業者の体の一部が通過するか否かの検出を無効とする、及び、第２作業が行われる場合に、第２領域における作業者の体の一部が通過するか否かの検出を有効とし、かつ、第１領域における作業者の体の一部が通過するか否かの検出を無効とする制御部１２と、第１作業が行われる場合に、センサ部６０から取得したセンシング結果に基づいて第１領域において作業者の体の一部が検出されたときに、第１作業が正常に行われたことを示す情報を第１作業内容として表示装置７０に出力し、かつ、第２作業が行われる場合に、センサ部６０から取得したセンシング結果に基づいて第２領域において作業者の体の一部が検出されたときに、第２作業が正常に行われたことを示す情報を第２作業内容として表示装置７０に出力する通信部１１（出力部の一例）とを備える。

【0137】

これにより、上記の作業指示方法と同様の効果を奏する。

【0138】

（実施の形態の変形例１）
次に、実施の形態の変形例１に係る作業指示方法について、図７を参照しながら説明する。図７は、実施の形態の変形例１に係る作業指示装置１０の動作を示すフローチャートである。なお、図７に示す各ステップは、作業者に対する作業内容を表示するための表示ステップの一例である。

【0139】

なお、作業指示装置１０の構成は実施の形態に係る作業指示装置１０と同様であり、説明を省略する。また、図７におけるフローチャートにおいても、図６におけるフローチャートと同様の処理については、同一の符号を付し、説明を省略又は簡略する。なお、後述する実施の形態の変形例２～４においても、同様である。

【0140】

図７に示すように、制御部１２は、ステップＳ３３で作業Ｎの読み出しを行った後、作業１の検出ポイント及び禁止ポイントを有効に設定する（Ｓ１３４）。作業１の検出ポイント及び禁止ポイントを有効にするとは、作業指示装置１０がセンシング結果として、作業１の検出ポイント及び禁止ポイントをセンシングするセンサのセンシング結果を用いて、後述するステップＳ１３６及びＳ１４２の判定を行うことを意味する。ステップＳ１３４は、作業１の検出ポイント（第１領域の一例）における作業者の体の一部が通過するか否かの検出を有効とし、かつ、作業２などの検出ポイント（第２領域の一例）における作業者の体の一部が通過するか否かの検出を無効とし、さらに、作業１の禁止ポイント（第３領域の一例）における作業者の体の一部が通過するか否かの検出を有効とすることの一例である。

【0141】

具体的には、制御部１２は、検出用テーブルＴ２に基づいて、センサ制御情報を生成し、センサ装置４０に出力する。ここでのセンサ制御情報は、作業１に対応するセンサであるセンサａ及びセンサｃのそれぞれのセンシング結果を作業指示装置１０に出力する指示を含んでもよい。センサ制御情報は、例えば、センサａ～センサｄのうちセンサａ及びセンサｃのみを動作させる指示を含んでいてもよい。ステップＳ１３４は、図５に示すステップＳ１３に相当する。

【0142】

次に、制御部１２は、センサ装置４０から作業１に対する検出結果を取得する（Ｓ１３５）。制御部１２は、例えば、センシング結果及び解析結果を取得する。具体的には、制御部１２は、センサａ及びセンサｃのそれぞれのセンシング結果と、当該センシング結果における解析結果とを取得する。なお、制御部１２は、少なくともセンシング結果のみを取得すればよい。以降では、制御部１２は、ステップＳ１３５において、センシング結果のみを取得した例について説明する。ステップＳ１３５は、図５に示すステップＳ２１に相当する。なお、ステップＳ１３５は、例えば、作業ごとに複数回行われてもよい。

【0143】

次に、制御部１２は、センシング結果に基づいて、作業者の体の一部が検出ポイントを通過したか否かを判定する（Ｓ３６）。具合的には、制御部１２は、センサａのセンシング結果に基づいて、作業者の体の一部が検出ポイントを通過したか否かを判定する。作業１に対応する検出ポイントは、第１領域の一例である。

【0144】

制御部１２は、センサａのセンシング結果が作業１に対応する検出ポイントで作業者の体の一部を検出したことを示す場合、作業者の体の一部が検出ポイントを通過したと判定する。そして、制御部１２は、検出ポイントを通過したと判定した場合（Ｓ３６でＹｅｓ）、さらに、センシング結果に基づいて、作業者の体の一部が禁止ポイントを通過したか否かを判定する（Ｓ１４２）。

【0145】

具合的には、制御部１２は、センサｃのセンシング結果に基づいて、作業者の体の一部が禁止ポイントを通過したか否かを判定する。作業１に対応する禁止ポイントは、第３領域の一例である。なお、ステップＳ３６における体の一部と、ステップＳ１４２における体の一部とは、同一の部位であってもよいし、互いに異なる部位であってもよい。ステップＳ３６及びＳ１４２は、図５に示すステップＳ２２に相当する。

【0146】

制御部１２は、センサｃのセンシング結果が作業１に対応する禁止ポイントで作業者の体の一部を検出していないことを示す場合、禁止ポイントを通過していないと判定する。制御部１２は、禁止ポイントを通過していないと判定した場合（Ｓ１４２でＮｏ）、作業１が正常に行われたことを示す情報を出力する（Ｓ３７）。制御部１２は、例えば、当該情報を表示装置７０に出力する。

【0147】

また、制御部１２は、禁止ポイントを通過したと判定した場合（Ｓ１４２でＹｅｓ）、作業１が正常に行われなかったことを示す情報を出力する（Ｓ１４３）。そして、制御部１２は、処理を終了する。なお、ステップＳ３７、Ｓ４１、及び、Ｓ１４３は、図５に示すステップＳ２３に相当する。また、作業１が正常に行われなかったことを示す情報は、第１作業内容の一例である。

【0148】

上記のように、作業指示装置１０は、作業に応じた検出ポイント及び禁止ポイントを有効に設定し、当該検出ポイントをセンシングするセンサ、及び、当該禁止ポイントをセンシングするセンサのみのセンシング結果に基づいて、作業が正常に行われたか否かを判定する。また、作業指示装置１０は、作業に応じた検出ポイント及び禁止ポイント以外の検出ポイントを無効に設定する。

【0149】

なお、図２Ｂに示すように、禁止ポイント用センサが設定されていない作業（例えば、作業２など）においては、ステップＳ１４２の処理は行われなくてもよい。この場合、ステップＳ３６でＹｅｓであった場合、ステップＳ３７に進む。制御部１２は、例えば、ステップＳ３６でＹｅｓであった場合、検出用テーブルＴ２に基づいて（例えば、当該作業において禁止ポイント用センサが設定されているか否かに基づいて）、ステップＳ１４２の判定処理を実行するか否かの判定を行ってもよい。

【0150】

以上説明したように、本変形例に係る作業指示方法（作業表示方法の一例）は、第１領域及び第２領域と異なる第３領域であって、第１作業において作業者の体の一部の通過が禁止されている第３領域を含み、第１表示ステップは、さらに、第３領域における作業者の体の一部が通過するか否かの検出を有効とし（Ｓ１３４）、センサ部６０から取得したセンシング結果に基づいて第３領域において作業者の体の一部が検出されていない場合（Ｓ１４２でＮｏ）に、第１作業が正常に行われたことを示す情報を第１作業内容として表示装置７０に出力する（Ｓ３７）。

【0151】

これにより、作業が正常に行われたか否かの判定を、さらに、作業者の体の一部が禁止ポイントを通過したか否かに基づいて行うことができる。例えば、第１領域及び第３領域の双方において、作業者の体の一部が検出された場合、作業者は、誤った作業を行っている（例えば、誤った部品を取っている）可能性がある。本変形例に係る作業表示方法によれば、作業者の体の一部が第３領域を通過しなかった場合、つまり誤った作業を行っている可能性がない場合に、作業が正常に行われたと判定する。よって、作業が正常に行われたか否かをより正確に判定することができる。

【0152】

また、第１表示ステップは、さらに、第３領域において作業者の体の一部が検出された場合（Ｓ１４２でＹｅｓ）に、第１作業が正常に行われなかったことを示す情報を第１作業内容として表示装置７０に出力する（Ｓ１４３）。

【0153】

これにより、作業者に作業が正常に行われなかったことを知らせることができる。また、作業が正常に行われなかったことを示す情報に、禁止ポイントを通過したことを示す情報が含まれる場合、作業者は体の一部が禁止ポイントを通過したことにより作業が正常に行われなかったと判定されたことを知ることができる。例えば、禁止ポイントが作業で用いる部品と類似する部品を取るために通過するポイントである場合、作業者は、部品の取り間違いをしていないかを確認することができる。

【0154】

（実施の形態の変形例２）
次に、実施の形態の変形例２に係る作業指示方法について、図８を参照しながら説明する。図８は、実施の形態の変形例２に係る作業指示装置１０の動作を示すフローチャートである。図８に示すフローチャートは、例えば、センサ部６０が撮像装置を有する場合に行われる。なお、図８に示す各ステップは、作業者に対する作業内容を表示するための表示ステップの一例である。

【0155】

図８に示すように、制御部１２は、ステップＳ３４で作業Ｎの検出ポイントを有効に設定した後、センサ装置４０から作業１に対する検出結果を取得する（Ｓ２３５）。制御部１２は、例えば、センシング結果及び解析結果を取得する。ここでの解析結果は、例えば、作業者の体の部位を検出した結果である。つまり、制御部１２は、ステップＳ２３５において、解析結果として作業者の体の部位に関する情報を取得する。当該情報は、作業者の体の部位であって、センサａの検出ポイントを通過した部位に関する情報を含んでいればよい。ステップＳ２３５は、図５に示すステップＳ２１に相当する。なお、ステップＳ２３５は、例えば、作業ごとに複数回行われてもよい。また、センシング結果の取得と、解析結果の取得とは、同じタイミングで行われてもよいし、互いに異なるタイミングで行われてもよい。

【0156】

なお、ステップＳ２３５において、制御部１２は、さらに、センサｃのセンシング結果と、当該センシング結果における解析結果とを取得してもよい。

【0157】

次に、制御部１２は、センシング結果及び解析結果に基づいて、作業者の体の所定の部位が検出ポイントを通過したか否かを判定する（Ｓ２３６）。具合的には、制御部１２は、センサａのセンシング結果及び解析結果と検出用テーブルＴ２とに基づいて、作業者の体の所定の部位が作業Ｎに対応する検出ポイントを通過したか否かを判定する。図２Ｂに示すように、作業１に対応する所定の部位は、右手であり、第１作業に関連付けられた部位の一例である。

【0158】

制御部１２は、センサａのセンシング結果及び解析結果が作業１に対応する検出ポイントで作業者の体の所定の部位を検出したことを示す場合、所定の部位が検出ポイントを通過したと判定する。そして、制御部１２は、所定の部位が検出ポイントを通過したと判定した場合（Ｓ２３６でＹｅｓ）、Ｓ３７に進み、以降の処理を実行する。また、制御部１２は、所定の部位が検出ポイントを通過していないと判定した場合（Ｓ２３６でＮｏ）、ステップＳ４０に進み、以降の処理を実行する。

【0159】

上記のように、作業指示装置１０は、作業に応じた検出ポイントを有効に設定し、当該検出ポイントにおいて当該作業に対応する所定の部位が通過したか否かを示す検出結果に基づいて作業が正常に行われたか否かを判定するための制御を行う。

【0160】

なお、センサ制御部５０が作業者の体の部位を検出（認識）する方法は特に限定されないが、例えば、センシング結果（例えば、画像）から作業者の姿勢を推定することにより行われてもよい。センサ制御部５０は、例えば、画像から作業者の複数の部位を認識する。

【0161】

なお、図２Ｂに示すように、検出部位が設定されていない作業（例えば、作業２など）においては、ステップＳ２３６で検出ポイントを通過したか否かのみの判定が行われてもよい。この場合、作業者の体の一部が検出ポイントを通過した場合（Ｓ２３６でＹｅｓ）、ステップＳ３７に進む。制御部１２は、例えば、検出用テーブルＴ２に基づいて（例えば、当該作業において検出部位が設定されているか否かに基づいて）、ステップＳ２３６において、所定の部位であるか否かの判定を実行するか否かを判定してもよい。

【0162】

以上説明したように、本変形例に係る作業指示方法（作業表示方法の一例）の第１表示ステップは、さらに、第１表示ステップにおいて撮影された画像から作業者の体の複数の部位を検出した検出結果に基づいて、第１領域において検出された作業者の体の部位が第１作業に関連付けられた部位である場合（Ｓ２３６でＹｅｓ）に、第１作業が正常に行われたことを示す情報を第１作業内容とし表示装置７０に出力する（Ｓ３７）。また、第２表示ステップは、さらに、第２表示ステップにおいて撮影された画像から作業者の体の複数の部位を検出した検出結果に基づいて、第２領域において検出された作業者の体の部位が第２作業に関連付けられた部位である場合（Ｓ２３６でＹｅｓ）に、第２作業が正常に行われたことを示す情報を第２作業内容として表示装置７０に出力する（Ｓ３７）。

【0163】

これにより、第１作業が所定の部位（例えば、右手など）を用いて行う作業である場合に、第１領域において当該所定の部位が検出されたときに当該作業が正常に行われたと判定することができる。よって、作業が正常に行われたか否かをより正確に判定することができる。また、例えば、第１作業に禁止ポイント及び当該禁止ポイントを通過する部位が設定されている場合、禁止ポイントにおいて当該部位が通過しなかった（当該部位以外の部位は通過した）ときでも作業が正常に行われたと判定されるので、誤検出をより抑制することができる。

【0164】

（実施の形態の変形例３）
次に、実施の形態の変形例３に係る作業指示方法について、図９を参照しながら説明する。図９は、実施の形態の変形例３に係る作業指示装置１０の動作を示すフローチャートである。なお、図９に示す各ステップは、作業者に対する作業内容を表示するための表示ステップの一例である。

【0165】

図９に示すように、制御部１２は、ステップＳ３４で作業Ｎの検出ポイントを有効に設定した後、センサ装置４０から作業１に対する検出結果を取得する（Ｓ３３５）。制御部１２は、例えば、センシング結果及び解析結果を取得する。具体的には、制御部１２は、センサａのセンシング結果と、当該センシング結果における解析結果とを取得する。ここでの解析結果は、例えば、検出ポイントを通過した作業者の体の一部の色、又は、当該作業において作業者が用いた部品の色に関する情報である。つまり、制御部１２は、ステップＳ３３５において、解析結果として作業者の体の一部又は部品の色に関する情報を取得する。ステップＳ３３５は、図５に示すステップＳ２１に相当する。

【0166】

なお、ステップＳ３３５において、制御部１２は、さらに、センサｃのセンシング結果と、当該センシング結果における解析結果とを取得してもよいし、作業者の体の部位に関する情報を取得してもよい。

【0167】

次に、制御部１２は、センシング結果に基づいて、作業者の体の一部が検出ポイントを通過したか否かを判定する（Ｓ３６）。制御部１２は、検出ポイントを通過したと判定した場合（Ｓ３６でＹｅｓ）、さらに、解析結果に基づいて、所定の色を検出したか否かを判定する（Ｓ３４２）。具合的には、制御部１２は、センサａのセンシング結果に対する解析結果と検出用テーブルＴ２とに基づいて、所定の色を検出したか否かを判定する。

【0168】

作業２を例に説明すると、制御部１２は、検出色が作業者の体の一部の色である場合、作業２に対応する検出ポイント（第１領域の一例）を通過した作業者の体の一部の色が検出用テーブルＴ２に示す検出色と同じである場合に、所定の色を検出したと判定する。また、制御部１２は、検出色が作業２において用いる部品の色である場合、所定の位置に配置されたビスＢの色が検出用テーブルＴ２に示す検出色と同じである場合に、所定の色を検出したと判定する。ステップＳ３６及びＳ３４２は、図５に示すステップＳ２２に相当する。

【0169】

制御部１２は、所定の色を検出した場合（Ｓ３４２でＹｅｓ）、ステップＳ３７に進み、以降の処理を実行する。また、制御部１２は、所定の色を検出しなかった場合（Ｓ３４２でＮｏ）、作業１が正常に行われなかったことを示す情報を出力する（Ｓ３４３）。そして、制御部１２は、処理を終了する。なお、ステップＳ３７、Ｓ４１、及び、Ｓ３４３は、図５に示すステップＳ２３に相当する。

【0170】

上記のように、作業指示装置１０は、作業に応じた検出ポイントを通過したか否か、及び、所定の色を検出したか否かにより、作業が正常に行われたか否かを判定するための制御を行う。

【0171】

なお、図２Ｂに示すように、検出色が設定されていない作業（例えば、作業１など）においては、ステップＳ３６で検出ポイントを通過したか否かのみの判定が行われてもよい。この場合、検出ポイントを通過した場合（Ｓ３６でＹｅｓ）、ステップＳ３７に進む。制御部１２は、例えば、検出用テーブルＴ２に基づいて（例えば、当該作業において検出色が設定されているか否かに基づいて）、ステップＳ３４２の判定処理を実行するか否かの判定を行ってもよい。

【0172】

上記のように、作業指示装置１０は、作業に応じた検出ポイントを有効に設定し、当該検出ポイントにおいて当該作業に対応する所定の色が検出された否かに基づいて作業が正常に行われたか否かを判定するための制御を行う。

【0173】

以上説明したように、本変形例に係る作業指示方法（作業表示方法の一例）における画像は、第１領域及び第２領域における色に関する情報を含む。

【0174】

これにより、色の情報を用いて作業が正常に行われたか否かを判定することができるので、より正確に上記判定を行うことができる。また、例えば、禁止ポイントが設定されている場合に、禁止ポイントにおいて所定の色が検出されなかった場合に作業が正常に行われたと判定されることで、誤検出をより抑制することができる。

【0175】

また、色に関する情報は、作業者の体の一部の色を含む。

【0176】

これにより、例えば、作業に対応する作業者の体の部位以外の部位が当該検出ポイントを通過したときに、部位の色により検出することができる。例えば、作業者が手と腕とで互いに異なる色の着衣を身に付けているときなどに、上記検出を行うことができる。よって、作業が正常に行われたか否かをさらに正確に判定することができる。

【0177】

また、色に関する情報は、第１作業及び第２作業の少なくとも一方において用いられる部品の色を含む。

【0178】

これにより、例えば、作業者が作業において誤った部品を取った場合に、部品の色により検出することができる。よって、作業が正常に行われたか否かをさらに正確に判定することができる。

【0179】

（実施の形態の変形例４）
次に、実施の形態の変形例４に係る作業指示方法について、図１０を参照しながら説明する。図１０は、実施の形態の変形例４に係る作業指示装置１０の動作を示すフローチャートである。図１０に示すフローチャートは、例えば、センサ部６０が撮像装置を有する場合に行われる。なお、図１０に示す各ステップは、作業者に対する作業内容を表示するための表示ステップの一例である。

【0180】

図１０に示すように、制御部１２は、ステップＳ３４で作業Ｎの検出ポイントを有効に設定した後、センサ装置４０から作業Ｎに対する検出結果を取得する（Ｓ４３５）。制御部１２は、例えば、センシング結果及び解析結果を取得する。具体的には、制御部１２は、センサａのセンシング結果と、当該センシング結果における解析結果とを取得する。ここでの解析結果は、例えば、検出ポイントが面状である場合、面状の領域における作業者の体の一部の専有面積に関する情報を含んでいてもよい。なお、検出ポイントの形状は、例えば、センサ部６０が撮像装置を有する場合、当該撮像装置の撮影方向から見たときの形状である。

【0181】

専有面積に関する情報は、例えば、面状の領域の面積に対する作業者の体の一部が通過した面積の割合である専有割合を含んでもよい。つまり、制御部１２は、ステップＳ４３５において、解析結果として専有割合を取得する。ステップＳ４３５は、図５に示すステップＳ２１に相当する。

【0182】

次に、制御部１２は、センシング結果に基づいて、作業者の体の一部が検出ポイントを通過したか否かを判定する（Ｓ３６）。制御部１２は、検出ポイントを通過したと判定した場合（Ｓ３６でＹｅｓ）、さらに、検出ポイントの形状が面状であるか否かを判定する（Ｓ４４２）。制御部１２は、例えば、検出用テーブルＴ２に基づいて、当該作業の検出ポイントの形状が面状であるか否かを判定してもよい。

【0183】

制御部１２は、当該作業における検出ポイントが面状ではないと判定した場合（Ｓ４４２でＮｏ）、ステップＳ３７に進み、以降の処理を実行する。また、制御部１２は、当該作業における検出ポイントが面状であると判定した場合（Ｓ４４２でＹｅｓ）、さらに、専有面積が閾値以上であるか否かを判定する（Ｓ４４３）。制御部１２は、例えば、専有割合と検出用テーブルＴ２とに基づいて、ステップＳ４４３の判定処理を実行する。

【0184】

作業４を例に説明すると、ステップＳ４３５で取得した解析結果に含まれる専有割合が、検出用テーブルＴ２に含まれる閾値以上（図２Ｂの例では、８０％以上）である場合（Ｓ４４３でＹｅｓ）、ステップＳ３７に進み、以降の処理を実行する。また、ステップＳ４３５で取得した解析結果に含まれる専有割合が、検出用テーブルＴ２に含まれる閾値より小さい（図２Ｂの例では、８０％より小さい）場合（Ｓ４４３でＮｏ）、作業４が正常に行われなかったことを示す情報を出力する（Ｓ４４４）。そして、制御部１２は、処理を終了する。なお、ステップＳ３７、Ｓ４１、及び、Ｓ４４４は、図５に示すステップＳ２３に相当する。

【0185】

上記のように、作業指示装置１０は、作業に応じた検出ポイントを有効に設定し、当該検出ポイントの形状が面状である場合、さらに当該検出ポイントにおける作業者の体の一部の専有面積に基づいて作業が正常に行われたか否かを判定するための制御を行う。

【0186】

これにより、制御部１２は、例えば、複数の作業者ごとに体の一部の動きにバラつきがある場合であっても、検出ポイントを面状とすることで、当該バラつきの影響を抑制しつつ、作業者の体の一部が当該検出ポイントを通過したか否かを判定することができる。

【0187】

（その他の実施の形態）
以上、実施の形態及び各変形例（以降において、実施の形態等とも記載する）について説明したが、本発明は、このような実施の形態等に限定されるものではない。

【0188】

例えば、上記実施の形態等では、１つの作業に対する検出ポイントが１つである例について説明したが、検出ポイントは複数あってもよい。また、禁止ポイントも同様であり、１つの作業に複数の禁止ポイントがあってもよい。

【0189】

また、上記実施の形態等では、禁止ポイントには、検出ポイントのうち現在の作業以外の検出ポイントが設定される例について説明したが、これに限定されない。禁止ポイントは、検出ポイントとは別に設定されてもよい。つまり、禁止ポイントと検出ポイントとは、互いに異なる領域であってもよい。

【0190】

また、上記実施の形態等における作業指示装置１０の動作（図６～図１０に示す動作）は、検出用テーブルＴ２に含まれる情報に基づいて、作業ごとに決定されてもよい。例えば、作業１においては、禁止ポイント用センサの情報が含まれるので、図７に示す判定処理（Ｓ３６以降の処理）が実行され、作業２においては、検出色の情報が含まれているので、図９に示す判定処理（Ｓ３６以降の処理）が実行されてもよい。

【0191】

また、上記実施の形態等では、センサ制御部５０がセンシング結果に対して解析処理を行う例について説明したが、作業指示装置１０の制御部１２が当該解析処理を行ってもよい。

【0192】

また、上記実施の形態等では、作業指示装置１０は、読み出した作業Ｎの情報を表示装置７０に出力する（例えば、図６に示すＳ３３を参照）例について説明したが、これに限定されない。作業指示装置１０は、作業Ｎに対応する作業指示画像Ｐを表示装置７０に出力しなくてもよい。

【0193】

また、上記実施の形態等では、作業指示装置１０と接続される表示装置７０が１台である例について説明したが、これに限定されない。例えば、作業者が作業１～４のそれぞれを異なる作業台等で行う場合、作業台のそれぞれに表示装置７０が配置されていてもよい。

【0194】

また、上記実施の形態等では、作業者が行う作業は、工具（例えば、ドライバ）を用いる作業と、工具を用いない作業とを含む例について説明したが、これに限定されない。作業者が行う作業は、例えば、工具を用いない作業のみであってもよい。

【0195】

また、上記実施の形態等では、工具はドライバである例について説明したが、これに限定されない。工具は、作業指示装置１０と通信可能に接続され、作業指示装置１０からの制御情報により制御可能なものであればよい。工具は、例えば、ドライバ以外の工具（例えば、電動工具）であってもよいし、治具（例えば、検査治具など）であってもよい。

【0196】

また、図１に示すブロック図における機能ブロックの分割は一例であり、複数の機能ブロックを１つの機能ブロックとして実現したり、１つの機能ブロックを複数に分割したり、一部の機能を他の機能ブロックに移してもよい。また、類似する機能を有する複数の機能ブロックの機能を単一のハードウェア又はソフトウェアが並列又は時分割に処理してもよい。

【0197】

また、上記実施の形態等では、作業指示装置及びセンサ装置は、単一の装置で実現されていたが、互いに接続された複数の装置で実現されてもよい。

【0198】

また、上記実施の形態等における作業指示システムが備える装置間の通信方法については特に限定されるものではない。装置間では、無線通信が行われてもよいし、有線通信が行われてもよい。

【0199】

また、上記実施の形態等における作業指示装置が備える構成要素の一部または全部は、１個のシステムＬＳＩ（Large Scale Integration：大規模集積回路）から構成されているとしてもよい。例えば、作業指示装置は、制御部の処理部を有するシステムＬＳＩから構成されてもよい。

【0200】

システムＬＳＩは、複数の構成部を１個のチップ上に集積して製造された超多機能ＬＳＩであり、具体的には、マイクロプロセッサ、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）などを含んで構成されるコンピュータシステムである。ＲＯＭには、コンピュータプログラムが記憶されている。マイクロプロセッサが、コンピュータプログラムに従って動作することにより、システムＬＳＩは、その機能を達成する。

【0201】

なお、ここでは、システムＬＳＩとしたが、集積度の違いにより、ＩＣ、ＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩと呼称されることもある。また、集積回路化の手法はＬＳＩに限るものではなく、専用回路または汎用プロセッサで実現してもよい。ＬＳＩ製造後に、プログラムすることが可能なＦＰＧＡ（Field Programmable Gate Array）、あるいはＬＳＩ内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサを利用してもよい。

【0202】

さらには、半導体技術の進歩または派生する別技術によりＬＳＩに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術の適用等が可能性としてありえる。

【0203】

また、本発明の一態様は、作業指示方法に含まれる特徴的な各ステップをコンピュータに実行させるコンピュータプログラムであってもよい。また、本発明の一態様は、そのようなコンピュータプログラムが記録された、コンピュータ読み取り可能な非一時的な記録媒体であってもよい。

【0204】

なお、上記実施の形態等において、各構成要素は、専用のハードウェアで構成されるか、各構成要素に適したソフトウェアプログラムを実行することによって実現されてもよい。各構成要素は、ＣＰＵまたはプロセッサなどのプログラム実行部が、ハードディスクまたは半導体メモリなどの記録媒体に記録されたソフトウェアプログラムを読み出して実行することによって実現されてもよい。

【0205】

その他、実施の形態に対して当業者が思いつく各種変形を施して得られる形態、または、本発明の趣旨を逸脱しない範囲で各実施の形態における構成要素及び機能を任意に組み合わせることで実現される形態も本発明に含まれる。

【符号の説明】

【0206】

１ 作業指示システム（作業表示システム）
１０ 作業指示装置（作業表示装置）
１１ 通信部（取得部、出力部）
１２ 制御部
１３ 記憶部
２０ 第１ドライバ
３０ 第２ドライバ
４０ センサ装置
５０ センサ制御部
６０ センサ部
７０ 表示装置
ｄ１～ｄ１３ 検出ポイント
Ｈ 作業者
Ｐ 作業指示画像
ｐ１ 作業内容
ｐ２ 注意事項
ｐ３ 説明画像
ｐ４ 部品名
ｐ５ 選択画像
ｐ６ 経過時間表示バー
ｐ７ 実績情報
ｐ８ 操作画像
ｐ９ 作業一覧
Ｔ１ 作業用テーブル
Ｔ２ 検出用テーブル

【図1】

【図2A】

【図2B】

【図3】

【図4A】

【図4B】

【図4C】

【図4D】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】