知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B1)
(11)【特許番号】
(24)【登録日】2025-05-15
(45)【発行日】2025-05-23
(54)【発明の名称】作業支援装置、作業支援方法及び作業支援システム
(51)【国際特許分類】
G06Q 10/0639 20230101AFI20250516BHJP
【ＦＩ】
G06Q10/0639
【請求項の数】
14
(21)【出願番号】P 2024526467
(86)(22)【出願日】2023-10-12
(86)【国際出願番号】 JP2023036943
【審査請求日】2024-05-02
【早期審査対象出願】
(73)【特許権者】
【識別番号】000006013
【氏名又は名称】三菱電機株式会社
(74)【代理人】
【識別番号】110003166
【氏名又は名称】弁理士法人山王内外特許事務所
(72)【発明者】
【氏名】秋山 朝子
(72)【発明者】
【氏名】橘 温希
(72)【発明者】
【氏名】加藤 伸一
(72)【発明者】
【氏名】佐藤 聡
(72)【発明者】
【氏名】大橋 佳恵
(72)【発明者】
【氏名】平井 由香
【審査官】貝塚 涼
(56)【参考文献】
【文献】特開２０２０－０３５１２７（ＪＰ，Ａ）
【文献】特開２０１８－１８１２３７（ＪＰ，Ａ）
【文献】特開２０２１－１３５８７８（ＪＰ，Ａ）
【文献】国際公開第２０１７／１８３０６４（ＷＯ，Ａ１）
【文献】特開２０１８－０４９４２１（ＪＰ，Ａ）
【文献】特開２０２２－１５５５５３（ＪＰ，Ａ）
【文献】特開２０２０－１７７５３４（ＪＰ，Ａ）
【文献】国際公開第２０１７／０９０１３０（ＷＯ，Ａ１）
【文献】特開２０２０－００９２３９（ＪＰ，Ａ）
【文献】特開２００７－２９９３７０（ＪＰ，Ａ）
【文献】特開２０１６－１８２２４８（ＪＰ，Ａ）
【文献】特開２０１７－０４１０２８（ＪＰ，Ａ）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｇ０６Ｑ １０／００ － ９９／００
(57)【特許請求の範囲】
【請求項1】
作業者による作業の実施状況を監視するセンサから、前記作業の実施状況を示すセンシングデータを取得するセンシングデータ取得部と、前記センシングデータ取得部により取得されたセンシングデータに基づいて、前記作業の実施状況に対応するＡＲ（Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）コンテンツを生成するＡＲコンテンツ生成部と、
前記ＡＲコンテンツ生成部により生成されたＡＲコンテンツを示す表示データを出力する表示データ出力部と
を備え、
前記ＡＲコンテンツ生成部は、
前記センシングデータ取得部により取得されたセンシングデータに基づいて、前記作業の実施状況として、前記作業者による作業の達成率を算出し、現在の季節および前記作業の達成率の両方に対応するＡＲコンテンツを生成することを特徴とする作業支援装置。
【請求項2】
前記センサが、前記作業の実施状況を撮像する撮像センサであり、前記センシングデータ取得部は、
前記作業の実施状況を示すセンシングデータとして、前記撮像センサの撮像結果を示す撮像データを取得し、
前記表示データ出力部は、
前記撮像データに対して、前記ＡＲコンテンツ生成部により生成されたＡＲコンテンツを示す表示データを重畳させ、前記表示データ重畳後の撮像データを出力することを特徴とする請求項１記載の作業支援装置。
【請求項3】
前記表示データ出力部は、前記ＡＲコンテンツ生成部により生成されたＡＲコンテンツによって、前記作業者による前記作業の実施状況が見えなくならないように、前記撮像データに対して、前記ＡＲコンテンツを示す表示データを重畳させることを特徴とする請求項２記載の作業支援装置。
【請求項4】
前記ＡＲコンテンツ生成部は、前記作業の実施状況に対応するＡＲコンテンツを生成する前に、生成対象のＡＲコンテンツの選択を受け付けることを特徴とする請求項１記載の作業支援装置。
【請求項5】
前記ＡＲコンテンツ生成部は、前記作業の実施状況に対応するＡＲコンテンツを生成するほかに、現在の時刻に対応するＡＲコンテンツを生成することを特徴とする請求項１記載の作業支援装置。
【請求項6】
前記ＡＲコンテンツ生成部は、前記作業の実施状況に対応するＡＲコンテンツを生成するほかに、現在の季節に対応するＡＲコンテンツを生成することを特徴とする請求項１記載の作業支援装置。
【請求項7】
前記ＡＲコンテンツ生成部は、前記作業の実施状況に対応するＡＲコンテンツを生成するほかに、前記作業の実施時間に対応するＡＲコンテンツを生成することを特徴とする請求項１記載の作業支援装置。
【請求項8】
前記ＡＲコンテンツ生成部は、前記作業の実施状況に対応するＡＲコンテンツを生成するほかに、現在の天候に対応するＡＲコンテンツを生成することを特徴とする請求項１記載の作業支援装置。
【請求項9】
前記ＡＲコンテンツ生成部は、前記作業の実施状況に対応するＡＲコンテンツを生成するほかに、前記作業が行われている施設内の清掃状況に対応するＡＲコンテンツを生成することを特徴とする請求項１記載の作業支援装置。
【請求項10】
前記ＡＲコンテンツ生成部は、前記作業の実施状況に対応するＡＲコンテンツを生成するほかに、前記作業の実施内容を案内するキャラクタを示すＡＲコンテンツを生成することを特徴とする請求項１記載の作業支援装置。
【請求項11】
前記ＡＲコンテンツ生成部は、前記作業者の技量、又は、前記作業者の体調のいずれかに応じて、前記キャラクタが案内する前記実施内容が示す作業のスピードを調整することを特徴とする請求項１０記載の作業支援装置。
【請求項12】
前記ＡＲコンテンツ生成部は、前記作業の実施状況に対応するＡＲコンテンツを生成するほかに、前記作業についての熟練工の動作を示すＡＲコンテンツを生成することを特徴とする請求項１記載の作業支援装置。
【請求項13】
センシングデータ取得部が、作業者による作業の実施状況を監視するセンサから、前記作業の実施状況を示すセンシングデータを取得し、ＡＲコンテンツ生成部が、前記センシングデータ取得部により取得されたセンシングデータに基づいて、前記作業の実施状況に対応するＡＲ（Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）コンテンツを生成し、
表示データ出力部が、前記ＡＲコンテンツ生成部により生成されたＡＲコンテンツを示す表示データを出力する
作業支援方法であって、
前記ＡＲコンテンツ生成部は、
前記センシングデータ取得部により取得されたセンシングデータに基づいて、前記作業の実施状況として、前記作業者による作業の達成率を算出し、現在の季節および前記作業の達成率の両方に対応するＡＲコンテンツを生成する作業支援方法。
【請求項14】
作業者による作業の実施状況を監視するセンサと、前記センサから、前記作業の実施状況を示すセンシングデータを取得するセンシングデータ取得部と、
前記センシングデータ取得部により取得されたセンシングデータに基づいて、前記作業の実施状況に対応するＡＲ（Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）コンテンツを生成するＡＲコンテンツ生成部と、
前記ＡＲコンテンツ生成部により生成されたＡＲコンテンツを示す表示データを出力する表示データ出力部と、
前記表示データ出力部から出力された表示データに従ってＡＲコンテンツを表示する表示デバイスと
を備え、
前記ＡＲコンテンツ生成部は、
前記センシングデータ取得部により取得されたセンシングデータに基づいて、前記作業の実施状況として、前記作業者による作業の達成率を算出し、現在の季節および前記作業の達成率の両方に対応するＡＲコンテンツを生成する作業支援システム。
【発明の詳細な説明】
【技術分野】
【0001】
本開示は、作業支援装置、作業支援方法及び作業支援システムに関するものである。
【背景技術】
【0002】
作業者による作業を支援する作業支援装置がある。
このような作業支援装置として、例えば、特許文献１には、カメラと画像表示部とを備えるフォーク位置決め支援装置が開示されている。
当該カメラは、フォークリフトの前方を撮影し、前方の画像を示す画像データを画像表示部に出力する。当該カメラによる前方の撮影エリアは、フォークリフトによって搬送されるパレットと、フォークリフトのフォークとを含むエリアである。当該画像表示部は、カメラから出力された画像データが示す画像をディスプレイに表示させる。
このような作業支援装置として、例えば、特許文献１には、カメラと画像表示部とを備えるフォーク位置決め支援装置が開示されている。
当該カメラは、フォークリフトの前方を撮影し、前方の画像を示す画像データを画像表示部に出力する。当該カメラによる前方の撮影エリアは、フォークリフトによって搬送されるパレットと、フォークリフトのフォークとを含むエリアである。当該画像表示部は、カメラから出力された画像データが示す画像をディスプレイに表示させる。
【先行技術文献】
【特許文献】
【0003】
【文献】特開２０１３－８６９５９号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
特許文献１に開示されているフォーク位置決め支援装置では、フォークリフトを運転する作業者が、ディスプレイを見れば、パレットとフォークとの相対位置を確認できるものの、パレットの搬送作業の実施状況として、パレットの搬送作業が、どの程度、進んでいるのかを確認することができないという課題があった。
【0005】
本開示は、上記のような課題を解決するためになされたもので、作業者が作業の実施状況を確認することができる作業支援装置を得ることを目的とする。
【課題を解決するための手段】
【0006】
本開示に係る作業支援装置は、作業者による作業の実施状況を監視するセンサから、作業の実施状況を示すセンシングデータを取得するセンシングデータ取得部と、センシングデータ取得部により取得されたセンシングデータに基づいて、作業の実施状況に対応するＡＲ（Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）コンテンツを生成するＡＲコンテンツ生成部と、ＡＲコンテンツ生成部により生成されたＡＲコンテンツを示す表示データを出力する表示データ出力部とを備えている。
【発明の効果】
【0007】
本開示によれば、作業者が作業の実施状況を確認することができる。
【図面の簡単な説明】
【0008】
【図1】実施の形態１に係る作業支援装置２を含む作業支援システムを示す構成図である。
【図2】実施の形態１に係る作業支援装置２のハードウェアを示すハードウェア構成図である。
【図3】作業支援装置２が、ソフトウェア又はファームウェア等によって実現される場合のコンピュータのハードウェア構成図である。
【図4】作業支援装置２の処理手順である作業支援方法を示すフローチャートである。
【図5】ベルトコンベアによって搬送されてくる製品を示す説明図である。
【図6】作業の達成率Ａｃｒに対応するＡＲコンテンツの一例を示す説明図である。
【図7】作業の達成率Ａｃｒに対応するＡＲコンテンツの一例を示す説明図である。
【図8】作業の達成率Ａｃｒに対応するＡＲコンテンツの一例を示す説明図である。
【図9】作業の達成率Ａｃｒに対応するＡＲコンテンツの一例を示す説明図である。
【図10】現在の時刻が作業時間内であることを示すＡＲコンテンツの一例を示す説明図である。
【図11】現在の時刻が休憩時間内であることを示すＡＲコンテンツの一例を示す説明図である。
【図12】現在の季節に対応するＡＲコンテンツの一例として、夏を連想させるＡＲコンテンツを示す説明図である。
【図13】作業の実施時間に対応するＡＲコンテンツの一例を示す説明図である。
【図14】現在の天候に対応するＡＲコンテンツの一例を示す説明図である。
【図15】実施の形態６に係る作業支援装置２を含む作業支援システムを示す構成図である。
【図16】実施の形態６に係る作業支援装置２のハードウェアを示すハードウェア構成図である。
【図17】ゴミが溜まっていることを示すＡＲコンテンツの一例を示す説明図である。
【図18】実施の形態７に係る作業支援装置２を含む作業支援システムを示す構成図である。
【図19】実施の形態７に係る作業支援装置２のハードウェアを示すハードウェア構成図である。
【図20】作業の実施内容を案内するキャラクタを示すＡＲコンテンツの一例を示す説明図である。
【図21】実施の形態８に係る作業支援装置２を含む作業支援システムを示す構成図である。
【図22】実施の形態８に係る作業支援装置２のハードウェアを示すハードウェア構成図である。
【図23】熟練工の動作を示すＡＲコンテンツの一例を示す説明図である。
【発明を実施するための形態】
【0009】
以下、本開示をより詳細に説明するために、本開示を実施するための形態について、添付の図面に従って説明する。
【0010】
実施の形態１．
図１は、実施の形態１に係る作業支援装置２を含む作業支援システムを示す構成図である。
図２は、実施の形態１に係る作業支援装置２のハードウェアを示すハードウェア構成図である。
図１に示す作業支援システムは、センサ１、作業支援装置２及び表示デバイス３を備えている。
図１は、実施の形態１に係る作業支援装置２を含む作業支援システムを示す構成図である。
図２は、実施の形態１に係る作業支援装置２のハードウェアを示すハードウェア構成図である。
図１に示す作業支援システムは、センサ１、作業支援装置２及び表示デバイス３を備えている。
【0011】
センサ１は、例えば、カメラ、又は、ライダ装置によって実現される。
センサ１は、作業者による作業の実施状況を監視し、作業の実施状況を示すセンシングデータを作業支援装置２に出力する。
カメラ及びライダ装置のそれぞれは、作業の実施状況を撮像する撮像センサである。特に、ライダ装置は、レーザ光を対象物に向けて照射し、対象物によるレーザ光の反射光を受信し、反射光に基づいて対象物の形状を検知できる装置である。
センサ１は、作業者による作業の実施状況を監視し、作業の実施状況を示すセンシングデータを作業支援装置２に出力する。
カメラ及びライダ装置のそれぞれは、作業の実施状況を撮像する撮像センサである。特に、ライダ装置は、レーザ光を対象物に向けて照射し、対象物によるレーザ光の反射光を受信し、反射光に基づいて対象物の形状を検知できる装置である。
【0012】
作業者による作業としては、例えば、ベルトコンベアによって搬送されてくる製品を作業者が受け取る作業、ベルトコンベアによって搬送されてくる製品を分別する作業、作業者が製品を組み立てる作業、作業者がロボットを操作することによって製品を組み立てる作業、作業者が製品の良否を判定する作業、作業者がロボットを操作することによって製品の良否を判定する作業、又は、作業者がフォークリフトを操作することによってパレットを搬送する作業がある。
【0013】
作業の実施状況としては、例えば、作業者による作業の達成率、作業者による作業の達成回数、作業者による作業の実施日数、作業者による作業の進捗状況、又は、作業者による作業の正確性がある。
作業者による作業が、例えば、作業者が製品を受け取る作業であれば、作業の達成率としては、例えば、目標の受け取り数に対する現時点までの製品の受け取り数の割合がある。また、作業の達成回数としては、例えば、現時点までの製品の受け取り数がある。
作業者による作業が、例えば、パレットを搬送する作業であれば、作業の達成率としては、例えば、目標のパレット搬送数に対する現時点までのパレット搬送数の割合がある。また、作業の達成回数としては、例えば、現時点までのパレット搬送数がある。
作業者による作業が、例えば、作業者が製品を組み立てる作業であれば、作業の進捗状況としては、例えば、製品の組み立てを開始してから製品が完成するまでに要する複数の作業要素のうち、実施済みの作業要素を示すものがある。
作業者による作業が、例えば、作業者が製品を受け取る作業であれば、作業の達成率としては、例えば、目標の受け取り数に対する現時点までの製品の受け取り数の割合がある。また、作業の達成回数としては、例えば、現時点までの製品の受け取り数がある。
作業者による作業が、例えば、パレットを搬送する作業であれば、作業の達成率としては、例えば、目標のパレット搬送数に対する現時点までのパレット搬送数の割合がある。また、作業の達成回数としては、例えば、現時点までのパレット搬送数がある。
作業者による作業が、例えば、作業者が製品を組み立てる作業であれば、作業の進捗状況としては、例えば、製品の組み立てを開始してから製品が完成するまでに要する複数の作業要素のうち、実施済みの作業要素を示すものがある。
【0014】
作業支援装置２は、センシングデータ取得部１１、ＡＲコンテンツ生成部１２及び表示データ出力部１３を備えている。
作業支援装置２は、作業の実施状況に対応するＡＲ（Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）コンテンツを生成し、ＡＲコンテンツを示す表示データを表示デバイス３に出力する。
作業支援装置２は、作業の実施状況に対応するＡＲ（Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）コンテンツを生成し、ＡＲコンテンツを示す表示データを表示デバイス３に出力する。
【0015】
表示デバイス３は、例えば、ＡＲグラス、タブレット、又は、スマートフォンによって実現される。
表示デバイス３は、作業支援装置２から出力された表示データに従ってＡＲコンテンツを表示する。
表示デバイス３は、作業支援装置２から出力された表示データに従ってＡＲコンテンツを表示する。
【0016】
センシングデータ取得部１１は、例えば、図２に示すセンシングデータ取得回路２１によって実現される。
センシングデータ取得部１１は、センサ１から、作業の実施状況を示すセンシングデータを取得する。センサ１が、作業の実施状況を撮像する撮像センサであれば、センシングデータ取得部１１は、作業の実施状況を示すセンシングデータとして、撮像センサの撮像結果を示す撮像データを取得する。
センシングデータ取得部１１は、センシングデータをＡＲコンテンツ生成部１２及び表示データ出力部１３のそれぞれに出力する。
センシングデータ取得部１１は、センサ１から、作業の実施状況を示すセンシングデータを取得する。センサ１が、作業の実施状況を撮像する撮像センサであれば、センシングデータ取得部１１は、作業の実施状況を示すセンシングデータとして、撮像センサの撮像結果を示す撮像データを取得する。
センシングデータ取得部１１は、センシングデータをＡＲコンテンツ生成部１２及び表示データ出力部１３のそれぞれに出力する。
【0017】
ＡＲコンテンツ生成部１２は、例えば、図２に示すＡＲコンテンツ生成回路２２によって実現される。
ＡＲコンテンツ生成部１２は、センシングデータ取得部１１から、センシングデータを取得する。
ＡＲコンテンツ生成部１２は、センシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１２は、ＡＲコンテンツを示す表示データを表示データ出力部１３に出力する。
ＡＲコンテンツ生成部１２は、センシングデータ取得部１１から、センシングデータを取得する。
ＡＲコンテンツ生成部１２は、センシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１２は、ＡＲコンテンツを示す表示データを表示データ出力部１３に出力する。
【0018】
表示データ出力部１３は、例えば、図２に示す表示データ出力回路２３によって実現される。
表示データ出力部１３は、センシングデータ取得部１１からセンシングデータを取得し、ＡＲコンテンツ生成部１２から、ＡＲコンテンツを示す表示データを取得する。
表示デバイス３が例えばＡＲグラスであり、ＡＲグラスを装着している作業者が、ＡＲグラスを通じて、作業の実施状況を肉眼で見ることが可能であれば、表示データ出力部１３は、ＡＲコンテンツを示す表示データのみを取得して、表示データを表示デバイス３に出力する。
表示データ出力部１３は、センシングデータ取得部１１からセンシングデータを取得し、ＡＲコンテンツ生成部１２から、ＡＲコンテンツを示す表示データを取得する。
表示デバイス３が例えばＡＲグラスであり、ＡＲグラスを装着している作業者が、ＡＲグラスを通じて、作業の実施状況を肉眼で見ることが可能であれば、表示データ出力部１３は、ＡＲコンテンツを示す表示データのみを取得して、表示データを表示デバイス３に出力する。
【0019】
ＡＲグラスを装着している作業者が、ＡＲグラスを通じて、作業の実施状況を肉眼で見ることが不可能であれば、表示データ出力部１３は、ＡＲコンテンツを示す表示データとセンシングデータとの双方を取得する。
表示デバイス３が、例えば、タブレット、又は、スマートフォンである場合も、表示データ出力部１３は、ＡＲコンテンツを示す表示データとセンシングデータとの双方を取得する。
表示データ出力部１３は、センシングデータである撮像データに対して、ＡＲコンテンツを示す表示データを重畳させ、表示データ重畳後の撮像データを表示デバイス３に出力する。
表示デバイス３が、例えば、タブレット、又は、スマートフォンである場合も、表示データ出力部１３は、ＡＲコンテンツを示す表示データとセンシングデータとの双方を取得する。
表示データ出力部１３は、センシングデータである撮像データに対して、ＡＲコンテンツを示す表示データを重畳させ、表示データ重畳後の撮像データを表示デバイス３に出力する。
【0020】
図１では、作業支援装置２の構成要素であるセンシングデータ取得部１１、ＡＲコンテンツ生成部１２及び表示データ出力部１３のそれぞれが、図２に示すような専用のハードウェアによって実現されるものを想定している。即ち、作業支援装置２が、センシングデータ取得回路２１、ＡＲコンテンツ生成回路２２及び表示データ出力回路２３によって実現されるものを想定している。
センシングデータ取得回路２１、ＡＲコンテンツ生成回路２２及び表示データ出力回路２３のそれぞれは、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ－Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）、又は、これらを組み合わせたものが該当する。
センシングデータ取得回路２１、ＡＲコンテンツ生成回路２２及び表示データ出力回路２３のそれぞれは、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ－Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）、又は、これらを組み合わせたものが該当する。
【0021】
作業支援装置２の構成要素は、専用のハードウェアによって実現されるものに限るものではなく、作業支援装置２が、ソフトウェア、ファームウェア、又は、ソフトウェアとファームウェアとの組み合わせによって実現されるものであってもよい。
ソフトウェア又はファームウェアは、プログラムとして、コンピュータのメモリに格納される。コンピュータは、プログラムを実行するハードウェアを意味し、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、中央処理装置、処理装置、演算装置、マイクロプロセッサ、マイクロコンピュータ、プロセッサ、あるいは、ＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）が該当する。
ソフトウェア又はファームウェアは、プログラムとして、コンピュータのメモリに格納される。コンピュータは、プログラムを実行するハードウェアを意味し、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、中央処理装置、処理装置、演算装置、マイクロプロセッサ、マイクロコンピュータ、プロセッサ、あるいは、ＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）が該当する。
【0022】
図３は、作業支援装置２が、ソフトウェア又はファームウェア等によって実現される場合のコンピュータのハードウェア構成図である。
作業支援装置２が、ソフトウェア又はファームウェア等によって実現される場合、センシングデータ取得部１１、ＡＲコンテンツ生成部１２及び表示データ出力部１３におけるそれぞれの処理手順をコンピュータに実行させるためのプログラムがメモリ３１に格納される。そして、コンピュータのプロセッサ３２がメモリ３１に格納されているプログラムを実行する。
作業支援装置２が、ソフトウェア又はファームウェア等によって実現される場合、センシングデータ取得部１１、ＡＲコンテンツ生成部１２及び表示データ出力部１３におけるそれぞれの処理手順をコンピュータに実行させるためのプログラムがメモリ３１に格納される。そして、コンピュータのプロセッサ３２がメモリ３１に格納されているプログラムを実行する。
【0023】
また、図２では、作業支援装置２の構成要素のそれぞれが専用のハードウェアによって実現される例を示し、図３では、作業支援装置２がソフトウェア又はファームウェア等によって実現される例を示している。しかし、これは一例に過ぎず、作業支援装置２における一部の構成要素が専用のハードウェアによって実現され、残りの構成要素がソフトウェア又はファームウェア等によって実現されるものであってもよい。
【0024】
次に、図１に示す作業支援システムの動作について説明する。
図４は、作業支援装置２の処理手順である作業支援方法を示すフローチャートである。
センサ１は、例えば、作業者が装着しているヘルメット、作業者が装着しているＡＲグラス、又は、作業が行われている施設である工場の壁・天井等に設置されている。
センサ１は、作業者による作業の実施状況を監視し、作業の実施状況を示すセンシングデータを作業支援装置２に出力する。
図５は、ベルトコンベアによって搬送されてくる製品を示す説明図である。
以下、作業者による作業が、ベルトコンベアによって搬送されてくる製品を受け取る作業である例を説明する。
図５には、作業者が表示されていないが、作業者は、例えば、ベルトコンベアのサイド、又は、ベルトコンベアの先端近くに立っているものとする。
図４は、作業支援装置２の処理手順である作業支援方法を示すフローチャートである。
センサ１は、例えば、作業者が装着しているヘルメット、作業者が装着しているＡＲグラス、又は、作業が行われている施設である工場の壁・天井等に設置されている。
センサ１は、作業者による作業の実施状況を監視し、作業の実施状況を示すセンシングデータを作業支援装置２に出力する。
図５は、ベルトコンベアによって搬送されてくる製品を示す説明図である。
以下、作業者による作業が、ベルトコンベアによって搬送されてくる製品を受け取る作業である例を説明する。
図５には、作業者が表示されていないが、作業者は、例えば、ベルトコンベアのサイド、又は、ベルトコンベアの先端近くに立っているものとする。
【0025】
センシングデータ取得部１１は、センサ１から、作業の実施状況を示すセンシングデータを取得する（図４のステップＳＴ１）。
ここでは説明の便宜上、センサ１が、作業の実施状況を撮像する撮像センサであり、センシングデータ取得部１１が、作業の実施状況を示すセンシングデータとして、撮像センサの撮像結果を示す撮像データを取得するものとする。
センシングデータ取得部１１は、センシングデータをＡＲコンテンツ生成部１２及び表示データ出力部１３のそれぞれに出力する。
ここでは説明の便宜上、センサ１が、作業の実施状況を撮像する撮像センサであり、センシングデータ取得部１１が、作業の実施状況を示すセンシングデータとして、撮像センサの撮像結果を示す撮像データを取得するものとする。
センシングデータ取得部１１は、センシングデータをＡＲコンテンツ生成部１２及び表示データ出力部１３のそれぞれに出力する。
【0026】
ＡＲコンテンツ生成部１２は、センシングデータ取得部１１から、センシングデータを取得する。
ＡＲコンテンツ生成部１２は、センシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成する（図４のステップＳＴ２）。
ＡＲコンテンツ生成部１２は、ＡＲコンテンツを示す表示データを表示データ出力部１３に出力する。
以下、ＡＲコンテンツ生成部１２によるＡＲコンテンツの生成処理を具体的に説明する。
ＡＲコンテンツ生成部１２は、センシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成する（図４のステップＳＴ２）。
ＡＲコンテンツ生成部１２は、ＡＲコンテンツを示す表示データを表示データ出力部１３に出力する。
以下、ＡＲコンテンツ生成部１２によるＡＲコンテンツの生成処理を具体的に説明する。
【0027】
ＡＲコンテンツ生成部１２は、センシングデータに基づいて、作業者が、ベルトコンベアによって搬送されてきた製品を受け取った数をカウントする。センシングデータである撮像データに基づいて、作業者が製品を受け取った数をカウントする処理自体は、公知の技術であるため詳細な説明を省略する。
ＡＲコンテンツ生成部１２は、製品の受取目標数がＥｎｕｍ、作業者により受け取られた製品の数がＴｎｕｍであるとすれば、以下の式（１）に示すように、作業の達成率Ａｃｒを算出する。
Ａｃｒ＝（Ｔｎｕｍ／Ｅｎｕｍ）×１００％
ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツとして、作業の達成率Ａｃｒに対応するＡＲコンテンツを生成する。ＡＲコンテンツの生成処理自体は、公知の技術であるため詳細な説明を省略する。
ＡＲコンテンツ生成部１２は、製品の受取目標数がＥｎｕｍ、作業者により受け取られた製品の数がＴｎｕｍであるとすれば、以下の式（１）に示すように、作業の達成率Ａｃｒを算出する。
Ａｃｒ＝（Ｔｎｕｍ／Ｅｎｕｍ）×１００％
ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツとして、作業の達成率Ａｃｒに対応するＡＲコンテンツを生成する。ＡＲコンテンツの生成処理自体は、公知の技術であるため詳細な説明を省略する。
【0028】
図６、図７及び図８のそれぞれは、作業の達成率Ａｃｒに対応するＡＲコンテンツの一例を示す説明図である。
図６、図７及び図８のそれぞれは、作業の達成率Ａｃｒに対応するＡＲコンテンツが、チューリップである例を示している。ここでは、作業の達成率Ａｃｒが高いほど、チューリップの開花数が増えている。
図６は、作業の達成率Ａｃｒが低いために、チューリップが全く開花していない例を示している。
図７は、作業の達成率Ａｃｒが少し上昇したために、チューリップが少しだけ開花している例を示している。
図８は、作業の達成率Ａｃｒが１００％に近づいたために、チューリップがほぼ満開である例を示している。
図６、図７及び図８のそれぞれは、作業の達成率Ａｃｒに対応するＡＲコンテンツが、チューリップである例を示している。ここでは、作業の達成率Ａｃｒが高いほど、チューリップの開花数が増えている。
図６は、作業の達成率Ａｃｒが低いために、チューリップが全く開花していない例を示している。
図７は、作業の達成率Ａｃｒが少し上昇したために、チューリップが少しだけ開花している例を示している。
図８は、作業の達成率Ａｃｒが１００％に近づいたために、チューリップがほぼ満開である例を示している。
【0029】
ここでは、作業の実施状況に対応するＡＲコンテンツが、達成率Ａｃｒに応じて開花率が変化するチューリップを示している。しかし、これは一例に過ぎず、ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツとして、例えば、図９に示すように、作業の達成率Ａｃｒを示すＡＲコンテンツを生成するようにしてもよい。
図９は、作業の達成率Ａｃｒに対応するＡＲコンテンツの一例を示す説明図である。
図９は、作業の達成率Ａｃｒに対応するＡＲコンテンツとして、達成率Ａｃｒを示す数字が花によって囲まれているＡＲコンテンツを示している。
図９は、作業の達成率Ａｃｒに対応するＡＲコンテンツの一例を示す説明図である。
図９は、作業の達成率Ａｃｒに対応するＡＲコンテンツとして、達成率Ａｃｒを示す数字が花によって囲まれているＡＲコンテンツを示している。
【0030】
表示データ出力部１３は、センシングデータ取得部１１から、センシングデータを取得し、ＡＲコンテンツ生成部１２から、ＡＲコンテンツを示す表示データを取得する。
表示データ出力部１３は、センシングデータである撮像データに対して、ＡＲコンテンツを示す表示データを重畳させる。
表示データ出力部１３は、撮像データに対して表示データを重畳させる際、ＡＲコンテンツによって、作業者による作業の実施状況が見えなくならないように、撮像データに対して表示データを重畳させる。
即ち、表示データ出力部１３は、図６～図９に示すように、ＡＲコンテンツによって、ベルトコンベアによって搬送されている製品が見えなくならないように、撮像データに対して表示データを重畳させる。
表示データ出力部１３は、表示データ重畳後の撮像データを表示デバイス３に出力する（図４のステップＳＴ３）。
表示データ出力部１３は、センシングデータである撮像データに対して、ＡＲコンテンツを示す表示データを重畳させる。
表示データ出力部１３は、撮像データに対して表示データを重畳させる際、ＡＲコンテンツによって、作業者による作業の実施状況が見えなくならないように、撮像データに対して表示データを重畳させる。
即ち、表示データ出力部１３は、図６～図９に示すように、ＡＲコンテンツによって、ベルトコンベアによって搬送されている製品が見えなくならないように、撮像データに対して表示データを重畳させる。
表示データ出力部１３は、表示データ重畳後の撮像データを表示デバイス３に出力する（図４のステップＳＴ３）。
【0031】
表示デバイス３は、作業支援装置２の表示データ出力部１３から、表示データ重畳後の撮像データを取得する。
表示デバイス３は、表示データ重畳後の撮像データに従ってＡＲコンテンツを表示する。
これにより、表示デバイス３には、例えば、図６～図９のいずれかに示すようなＡＲコンテンツが表示される。
表示デバイス３は、表示データ重畳後の撮像データに従ってＡＲコンテンツを表示する。
これにより、表示デバイス３には、例えば、図６～図９のいずれかに示すようなＡＲコンテンツが表示される。
【0032】
以上の実施の形態１では、作業者による作業の実施状況を監視するセンサ１から、作業の実施状況を示すセンシングデータを取得するセンシングデータ取得部１１と、センシングデータ取得部１１により取得されたセンシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成するＡＲコンテンツ生成部１２と、ＡＲコンテンツ生成部１２により生成されたＡＲコンテンツを示す表示データを出力する表示データ出力部１３とを備えるように、作業支援装置２を構成した。したがって、作業支援装置２では、作業者が作業の実施状況を確認することができる。
なお、作業の実施状況に対応するＡＲコンテンツが表示されることによって、作業者の集中力が維持されるという効果、作業者のやりがいが向上するという効果、又は、作業者の気分転換が促されるという効果も得られる。
なお、作業の実施状況に対応するＡＲコンテンツが表示されることによって、作業者の集中力が維持されるという効果、作業者のやりがいが向上するという効果、又は、作業者の気分転換が促されるという効果も得られる。
【0033】
また、実施の形態１では、ＡＲコンテンツ生成部１２が、センシングデータ取得部１１により取得されたセンシングデータに基づいて、作業の実施状況として、作業者による作業の達成率を算出し、作業の達成率に対応するＡＲコンテンツを生成するように、作業支援装置２を構成した。したがって、作業支援装置２では、作業者が作業の達成率を確認することができる。
【0034】
図１に示す作業支援装置２では、ＡＲコンテンツ生成部１２が、作業の実施状況に対応するＡＲコンテンツとして、作業の達成率Ａｃｒに応じて開花率が変化するチューリップを生成している。しかし、これは一例に過ぎず、ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツを生成する前に、生成対象のＡＲコンテンツの選択を受け付けるようにしてもよい。
具体的には、ＡＲコンテンツ生成部１２は、例えば、ユーザインタフェースを備えており、ユーザがユーザインタフェースを操作することによって、生成対象のＡＲコンテンツとして、例えば、図６～図８に示すように、作業の達成率Ａｃｒに応じて開花率が変化するチューリップを選択すれば、作業の達成率Ａｃｒに応じて開花率が変化するチューリップを生成する。
ＡＲコンテンツ生成部１２は、ユーザがユーザインタフェースを操作することによって、生成対象のＡＲコンテンツとして、例えば、図９に示すように、達成率Ａｃｒを示す数字が花によって囲まれているＡＲコンテンツを選択すれば、達成率Ａｃｒを示す数字が花によって囲まれているＡＲコンテンツを生成する。
具体的には、ＡＲコンテンツ生成部１２は、例えば、ユーザインタフェースを備えており、ユーザがユーザインタフェースを操作することによって、生成対象のＡＲコンテンツとして、例えば、図６～図８に示すように、作業の達成率Ａｃｒに応じて開花率が変化するチューリップを選択すれば、作業の達成率Ａｃｒに応じて開花率が変化するチューリップを生成する。
ＡＲコンテンツ生成部１２は、ユーザがユーザインタフェースを操作することによって、生成対象のＡＲコンテンツとして、例えば、図９に示すように、達成率Ａｃｒを示す数字が花によって囲まれているＡＲコンテンツを選択すれば、達成率Ａｃｒを示す数字が花によって囲まれているＡＲコンテンツを生成する。
【0035】
また、ＡＲコンテンツ生成部１２は、内蔵しているカレンダ、又は、外部のカレンダのいずれかから、現在の季節を取得し、作業の実施状況に対応するＡＲコンテンツを現在の季節によって切り替えるようにしてもよい。
現在の季節が春であれば、ＡＲコンテンツ生成部１２は、図６～図８に示すように、作業の実施状況に対応するＡＲコンテンツとして、例えば、作業の達成率Ａｃｒに応じて開花率が変化するチューリップを生成する。
現在の季節が夏であれば、ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツとして、例えば、作業の達成率Ａｃｒに応じて開花率が変化する桜を生成する。
現在の季節が秋であれば、ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツとして、例えば、作業の達成率Ａｃｒに応じて色付きが変化する紅葉を生成する。
現在の季節が冬であれば、ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツとして、例えば、作業の達成率Ａｃｒに応じて積雪量が変化する積雪を生成する。
現在の季節が春であれば、ＡＲコンテンツ生成部１２は、図６～図８に示すように、作業の実施状況に対応するＡＲコンテンツとして、例えば、作業の達成率Ａｃｒに応じて開花率が変化するチューリップを生成する。
現在の季節が夏であれば、ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツとして、例えば、作業の達成率Ａｃｒに応じて開花率が変化する桜を生成する。
現在の季節が秋であれば、ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツとして、例えば、作業の達成率Ａｃｒに応じて色付きが変化する紅葉を生成する。
現在の季節が冬であれば、ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツとして、例えば、作業の達成率Ａｃｒに応じて積雪量が変化する積雪を生成する。
【0036】
図１に示す作業支援装置２では、ＡＲコンテンツ生成部１２が、作業の実施状況に対応するＡＲコンテンツとして、作業の達成率Ａｃｒに対応するＡＲコンテンツを生成している。しかし、これは一例に過ぎず、ＡＲコンテンツ生成部１２が、作業の実施状況に対応するＡＲコンテンツとして、例えば、作業者による作業の達成回数、作業者による作業の実施日数、作業者による作業の進捗状況、又は、作業者による作業の正確性のいずれかに対応するＡＲコンテンツを生成するようにしてもよい。
作業の進捗状況に対応するＡＲコンテンツを生成する場合、ＡＲコンテンツ生成部１２は、製品の組み立てを開始してから製品が完成するまでに要する複数の作業要素のうち、実施済みの作業要素をカウントすれば、作業の進捗状況を認識することができる。
作業の進捗状況に対応するＡＲコンテンツを生成する場合、ＡＲコンテンツ生成部１２は、製品の組み立てを開始してから製品が完成するまでに要する複数の作業要素のうち、実施済みの作業要素をカウントすれば、作業の進捗状況を認識することができる。
【0037】
図１に示す作業支援装置２では、ＡＲコンテンツ生成部１２が、作業の実施状況に対応するＡＲコンテンツを生成している。ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツを生成するほかに、作業者の理想的な立ち位置を示すＡＲコンテンツを生成するようにしてもよい。作業者の理想的な立ち位置を示す情報は、例えば、ＡＲコンテンツ生成部１２の内部メモリに格納されている。作業者の理想的な立ち位置を示すＡＲコンテンツとしては、例えば、作業者の理想的な立ち位置を示す足跡のイラストがある。
【0038】
実施の形態２．
実施の形態２では、ＡＲコンテンツ生成部１２が、作業の実施状況に対応するＡＲコンテンツを生成するほかに、現在の時刻に対応するＡＲコンテンツを生成する作業支援装置２について説明する。
実施の形態２では、ＡＲコンテンツ生成部１２が、作業の実施状況に対応するＡＲコンテンツを生成するほかに、現在の時刻に対応するＡＲコンテンツを生成する作業支援装置２について説明する。
【0039】
実施の形態２に係る作業支援装置２の構成は、実施の形態１に係る作業支援装置２の構成と同様であり、実施の形態２に係る作業支援装置２を含む作業支援システムを示す構成図は、図１である。
ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツを生成するほかに、現在の時刻に対応するＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツを示す表示データと、現在の時刻に対応するＡＲコンテンツを示す表示データとを表示データ出力部１３に出力する。
ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツを生成するほかに、現在の時刻に対応するＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツを示す表示データと、現在の時刻に対応するＡＲコンテンツを示す表示データとを表示データ出力部１３に出力する。
【0040】
次に、実施の形態２に係る作業支援システムの動作について説明する。ただし、ＡＲコンテンツ生成部１２以外は、図１に示す作業支援システムと同様である。このため、ここでは、主に、ＡＲコンテンツ生成部１２の動作について説明する。
【0041】
ＡＲコンテンツ生成部１２は、センシングデータ取得部１１から、センシングデータを取得する。
ＡＲコンテンツ生成部１２は、実施の形態１と同様に、センシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１２は、実施の形態１と同様に、センシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成する。
【0042】
ＡＲコンテンツ生成部１２は、内蔵しているクロック、又は、外部のクロックのいずれかから、現在の時刻を取得する。
ＡＲコンテンツ生成部１２は、現在の時刻に対応するＡＲコンテンツを生成する。
以下、ＡＲコンテンツ生成部１２による、現在の時刻に対応するＡＲコンテンツの生成処理を具体的に説明する。
ＡＲコンテンツ生成部１２は、現在の時刻に対応するＡＲコンテンツを生成する。
以下、ＡＲコンテンツ生成部１２による、現在の時刻に対応するＡＲコンテンツの生成処理を具体的に説明する。
【0043】
現在の時刻が、例えば、作業時間内の時刻であれば、ＡＲコンテンツ生成部１２は、例えば、図１０に示すように、作業時間中であることを示すＡＲコンテンツを生成する。
図１０は、現在の時刻が作業時間内であることを示すＡＲコンテンツの一例を示す説明図である。
現在の時刻が、例えば、休憩時間内の時刻であれば、ＡＲコンテンツ生成部１２は、例えば、図１１に示すように、休憩時間中であることを示すＡＲコンテンツを生成する。
図１１は、現在の時刻が休憩時間内であることを示すＡＲコンテンツの一例を示す説明図である。
図１１において、コーヒーカップ及び茶碗のそれぞれは、休憩時間中であることを示すＡＲコンテンツである。
図１０は、現在の時刻が作業時間内であることを示すＡＲコンテンツの一例を示す説明図である。
現在の時刻が、例えば、休憩時間内の時刻であれば、ＡＲコンテンツ生成部１２は、例えば、図１１に示すように、休憩時間中であることを示すＡＲコンテンツを生成する。
図１１は、現在の時刻が休憩時間内であることを示すＡＲコンテンツの一例を示す説明図である。
図１１において、コーヒーカップ及び茶碗のそれぞれは、休憩時間中であることを示すＡＲコンテンツである。
【0044】
ここでは、ＡＲコンテンツ生成部１２が、現在の時刻に対応するＡＲコンテンツとして、作業時間中であることを示すＡＲコンテンツ、又は、休憩時間中であることを示すＡＲコンテンツのいずれかを生成している。しかし、これは一例に過ぎず、ＡＲコンテンツ生成部１２は、現在の時刻に対応するＡＲコンテンツとして、例えば、朝であることを示すＡＲコンテンツ、昼であることを示すＡＲコンテンツ、又は、夜であることを示すＡＲコンテンツのいずれかを生成するようにしてもよい。
【0045】
表示データ出力部１３は、センシングデータ取得部１１から、センシングデータを取得する。
また、表示データ出力部１３は、ＡＲコンテンツ生成部１２から、作業の実施状況に対応するＡＲコンテンツ及び現在の時刻に対応するＡＲコンテンツのそれぞれを取得する。
表示データ出力部１３は、センシングデータである撮像データに対して、それぞれのＡＲコンテンツを示す表示データを重畳させる。
表示データ出力部１３は、撮像データに対して表示データを重畳させる際、それぞれのＡＲコンテンツによって、作業者による作業の実施状況が見えなくならないように、撮像データに対して表示データを重畳させる。
即ち、表示データ出力部１３は、図１０～図１１に示すように、ＡＲコンテンツによって、ベルトコンベアによって搬送されている製品が見えなくならないように、撮像データに対して表示データを重畳させる。
表示データ出力部１３は、表示データ重畳後の撮像データを表示デバイス３に出力する。
また、表示データ出力部１３は、ＡＲコンテンツ生成部１２から、作業の実施状況に対応するＡＲコンテンツ及び現在の時刻に対応するＡＲコンテンツのそれぞれを取得する。
表示データ出力部１３は、センシングデータである撮像データに対して、それぞれのＡＲコンテンツを示す表示データを重畳させる。
表示データ出力部１３は、撮像データに対して表示データを重畳させる際、それぞれのＡＲコンテンツによって、作業者による作業の実施状況が見えなくならないように、撮像データに対して表示データを重畳させる。
即ち、表示データ出力部１３は、図１０～図１１に示すように、ＡＲコンテンツによって、ベルトコンベアによって搬送されている製品が見えなくならないように、撮像データに対して表示データを重畳させる。
表示データ出力部１３は、表示データ重畳後の撮像データを表示デバイス３に出力する。
【0046】
表示デバイス３は、作業支援装置２の表示データ出力部１３から、表示データ重畳後の撮像データを取得する。
表示デバイス３は、表示データ重畳後の撮像データに従ってＡＲコンテンツを表示する。
これにより、表示デバイス３には、例えば、図１０～図１１のいずれかに示すようなＡＲコンテンツが表示される。
表示デバイス３は、表示データ重畳後の撮像データに従ってＡＲコンテンツを表示する。
これにより、表示デバイス３には、例えば、図１０～図１１のいずれかに示すようなＡＲコンテンツが表示される。
【0047】
以上の実施の形態２では、ＡＲコンテンツ生成部１２が、作業の実施状況に対応するＡＲコンテンツを生成するほかに、現在の時刻に対応するＡＲコンテンツを生成するように、作業支援装置２を構成した。したがって、作業支援装置２では、作業者が作業の実施状況を確認することができるほか、作業者が現在の時刻の属する時間帯を確認することができる。
【0048】
実施の形態３．
実施の形態３では、ＡＲコンテンツ生成部１２が、作業の実施状況に対応するＡＲコンテンツを生成するほかに、現在の季節に対応するＡＲコンテンツを生成する作業支援装置２について説明する。
実施の形態３では、ＡＲコンテンツ生成部１２が、作業の実施状況に対応するＡＲコンテンツを生成するほかに、現在の季節に対応するＡＲコンテンツを生成する作業支援装置２について説明する。
【0049】
実施の形態３に係る作業支援装置２の構成は、実施の形態１に係る作業支援装置２の構成と同様であり、実施の形態３に係る作業支援装置２を含む作業支援システムを示す構成図は、図１である。
ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツを生成するほかに、現在の季節に対応するＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツを示す表示データと、現在の季節に対応するＡＲコンテンツを示す表示データとを表示データ出力部１３に出力する。
ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツを生成するほかに、現在の季節に対応するＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツを示す表示データと、現在の季節に対応するＡＲコンテンツを示す表示データとを表示データ出力部１３に出力する。
【0050】
次に、実施の形態３に係る作業支援システムの動作について説明する。ただし、ＡＲコンテンツ生成部１２以外は、図１に示す作業支援システムと同様である。このため、ここでは、主に、ＡＲコンテンツ生成部１２の動作について説明する。
【0051】
ＡＲコンテンツ生成部１２は、センシングデータ取得部１１から、センシングデータを取得する。
ＡＲコンテンツ生成部１２は、実施の形態１と同様に、センシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１２は、実施の形態１と同様に、センシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成する。
【0052】
ＡＲコンテンツ生成部１２は、内蔵しているカレンダ、又は、外部のカレンダのいずれかから、現在の季節を取得する。
ＡＲコンテンツ生成部１２は、現在の季節に対応するＡＲコンテンツを生成する。
以下、ＡＲコンテンツ生成部１２による、現在の季節に対応するＡＲコンテンツの生成処理を具体的に説明する。
ＡＲコンテンツ生成部１２は、現在の季節に対応するＡＲコンテンツを生成する。
以下、ＡＲコンテンツ生成部１２による、現在の季節に対応するＡＲコンテンツの生成処理を具体的に説明する。
【0053】
現在の季節が、春であれば、ＡＲコンテンツ生成部１２は、春を連想させるＡＲコンテンツを生成する。春を連想させるＡＲコンテンツとしては、例えば、桜の花を示すＡＲコンテンツ、梅の花を示すＡＲコンテンツ、又は、竹の子を示すＡＲコンテンツがある。
現在の季節が、夏であれば、ＡＲコンテンツ生成部１２は、夏を連想させるＡＲコンテンツを生成する。夏を連想させるＡＲコンテンツとしては、例えば、スイカを示すＡＲコンテンツ、花火を示すＡＲコンテンツ、又は、海水浴場を示すＡＲコンテンツがある。
現在の季節が、秋であれば、ＡＲコンテンツ生成部１２は、秋を連想させるＡＲコンテンツを生成する。秋を連想させるＡＲコンテンツとしては、例えば、紅葉を示すＡＲコンテンツ、栗を示すＡＲコンテンツ、又は、秋刀魚を示すＡＲコンテンツがある。
現在の季節が、冬であれば、ＡＲコンテンツ生成部１２は、冬を連想させるＡＲコンテンツを生成する。冬を連想させるＡＲコンテンツとしては、例えば、雪ダルマを示すＡＲコンテンツ、スキーを示すＡＲコンテンツ、又は、マフラーを示すＡＲコンテンツがある。
図１２は、現在の季節に対応するＡＲコンテンツの一例として、夏を連想させるＡＲコンテンツを示す説明図である。
現在の季節が、夏であれば、ＡＲコンテンツ生成部１２は、夏を連想させるＡＲコンテンツを生成する。夏を連想させるＡＲコンテンツとしては、例えば、スイカを示すＡＲコンテンツ、花火を示すＡＲコンテンツ、又は、海水浴場を示すＡＲコンテンツがある。
現在の季節が、秋であれば、ＡＲコンテンツ生成部１２は、秋を連想させるＡＲコンテンツを生成する。秋を連想させるＡＲコンテンツとしては、例えば、紅葉を示すＡＲコンテンツ、栗を示すＡＲコンテンツ、又は、秋刀魚を示すＡＲコンテンツがある。
現在の季節が、冬であれば、ＡＲコンテンツ生成部１２は、冬を連想させるＡＲコンテンツを生成する。冬を連想させるＡＲコンテンツとしては、例えば、雪ダルマを示すＡＲコンテンツ、スキーを示すＡＲコンテンツ、又は、マフラーを示すＡＲコンテンツがある。
図１２は、現在の季節に対応するＡＲコンテンツの一例として、夏を連想させるＡＲコンテンツを示す説明図である。
【0054】
ここでは、ＡＲコンテンツ生成部１２が、現在の季節に対応するＡＲコンテンツとして、春を連想させるＡＲコンテンツ、夏を連想させるＡＲコンテンツ、秋を連想させるＡＲコンテンツ、又は、冬を連想させるＡＲコンテンツのいずれかを生成している。しかし、これは一例に過ぎず、ＡＲコンテンツ生成部１２は、現在の季節に対応するＡＲコンテンツとして、例えば、１月から１２月までの各月を連想させるＡＲコンテンツを生成するようにしてもよい。
【0055】
表示データ出力部１３は、センシングデータ取得部１１から、センシングデータを取得する。
また、表示データ出力部１３は、ＡＲコンテンツ生成部１２から、作業の実施状況に対応するＡＲコンテンツ及び現在の季節に対応するＡＲコンテンツのそれぞれを取得する。
表示データ出力部１３は、センシングデータである撮像データに対して、それぞれのＡＲコンテンツを示す表示データを重畳させる。
表示データ出力部１３は、撮像データに対して表示データを重畳させる際、それぞれのＡＲコンテンツによって、作業者による作業の実施状況が見えなくならないように、撮像データに対して表示データを重畳させる。
即ち、表示データ出力部１３は、図１２に示すように、ＡＲコンテンツによって、ベルトコンベアによって搬送されている製品が見えなくならないように、撮像データに対して表示データを重畳させる。
表示データ出力部１３は、表示データ重畳後の撮像データを表示デバイス３に出力する。
また、表示データ出力部１３は、ＡＲコンテンツ生成部１２から、作業の実施状況に対応するＡＲコンテンツ及び現在の季節に対応するＡＲコンテンツのそれぞれを取得する。
表示データ出力部１３は、センシングデータである撮像データに対して、それぞれのＡＲコンテンツを示す表示データを重畳させる。
表示データ出力部１３は、撮像データに対して表示データを重畳させる際、それぞれのＡＲコンテンツによって、作業者による作業の実施状況が見えなくならないように、撮像データに対して表示データを重畳させる。
即ち、表示データ出力部１３は、図１２に示すように、ＡＲコンテンツによって、ベルトコンベアによって搬送されている製品が見えなくならないように、撮像データに対して表示データを重畳させる。
表示データ出力部１３は、表示データ重畳後の撮像データを表示デバイス３に出力する。
【0056】
表示デバイス３は、作業支援装置２の表示データ出力部１３から、表示データ重畳後の撮像データを取得する。
表示デバイス３は、表示データ重畳後の撮像データに従ってＡＲコンテンツを表示する。
これにより、表示デバイス３には、例えば、図１２に示すようなＡＲコンテンツが表示される。
表示デバイス３は、表示データ重畳後の撮像データに従ってＡＲコンテンツを表示する。
これにより、表示デバイス３には、例えば、図１２に示すようなＡＲコンテンツが表示される。
【0057】
以上の実施の形態３では、ＡＲコンテンツ生成部１２が、作業の実施状況に対応するＡＲコンテンツを生成するほかに、現在の季節に対応するＡＲコンテンツを生成するように、作業支援装置２を構成した。したがって、作業支援装置２では、作業者が作業の実施状況を確認することができるほか、作業者が現在の季節を確認することができる。
【0058】
実施の形態４．
実施の形態４では、ＡＲコンテンツ生成部１２が、作業の実施状況に対応するＡＲコンテンツを生成するほかに、作業の実施時間に対応するＡＲコンテンツを生成する作業支援装置２について説明する。
実施の形態４では、ＡＲコンテンツ生成部１２が、作業の実施状況に対応するＡＲコンテンツを生成するほかに、作業の実施時間に対応するＡＲコンテンツを生成する作業支援装置２について説明する。
【0059】
実施の形態４に係る作業支援装置２の構成は、実施の形態１に係る作業支援装置２の構成と同様であり、実施の形態４に係る作業支援装置２を含む作業支援システムを示す構成図は、図１である。
ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツを生成するほかに、作業の実施時間に対応するＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツを示す表示データと、作業の実施時間に対応するＡＲコンテンツを示す表示データとを表示データ出力部１３に出力する。
ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツを生成するほかに、作業の実施時間に対応するＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツを示す表示データと、作業の実施時間に対応するＡＲコンテンツを示す表示データとを表示データ出力部１３に出力する。
【0060】
次に、実施の形態４に係る作業支援システムの動作について説明する。ただし、ＡＲコンテンツ生成部１２以外は、図１に示す作業支援システムと同様である。このため、ここでは、主に、ＡＲコンテンツ生成部１２の動作について説明する。
【0061】
ＡＲコンテンツ生成部１２は、センシングデータ取得部１１から、センシングデータを取得する。
ＡＲコンテンツ生成部１２は、実施の形態１と同様に、センシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１２は、実施の形態１と同様に、センシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成する。
【0062】
ＡＲコンテンツ生成部１２は、内蔵しているクロック、又は、外部のクロックのいずれかから、現在の時刻を取得する。
ＡＲコンテンツ生成部１２は、作業者が作業を開始した時刻を記憶している。
ＡＲコンテンツ生成部１２は、作業の実施時間として、作業者が作業を開始した時刻から現在の時刻までの時間を算出する。
ＡＲコンテンツ生成部１２は、例えば、図１３に示すように、作業の実施時間に対応するＡＲコンテンツを生成する。
図１３は、作業の実施時間に対応するＡＲコンテンツの一例を示す説明図である。
ＡＲコンテンツ生成部１２は、作業者が作業を開始した時刻を記憶している。
ＡＲコンテンツ生成部１２は、作業の実施時間として、作業者が作業を開始した時刻から現在の時刻までの時間を算出する。
ＡＲコンテンツ生成部１２は、例えば、図１３に示すように、作業の実施時間に対応するＡＲコンテンツを生成する。
図１３は、作業の実施時間に対応するＡＲコンテンツの一例を示す説明図である。
【0063】
表示データ出力部１３は、センシングデータ取得部１１から、センシングデータを取得する。
また、表示データ出力部１３は、ＡＲコンテンツ生成部１２から、作業の実施状況に対応するＡＲコンテンツ及び作業の実施時間に対応するＡＲコンテンツのそれぞれを取得する。
表示データ出力部１３は、センシングデータである撮像データに対して、それぞれのＡＲコンテンツを示す表示データを重畳させる。
表示データ出力部１３は、撮像データに対して表示データを重畳させる際、それぞれのＡＲコンテンツによって、作業者による作業の実施状況が見えなくならないように、撮像データに対して表示データを重畳させる。
即ち、表示データ出力部１３は、図１３に示すように、ＡＲコンテンツによって、ベルトコンベアによって搬送されている製品が見えなくならないように、撮像データに対して表示データを重畳させる。
表示データ出力部１３は、表示データ重畳後の撮像データを表示デバイス３に出力する。
また、表示データ出力部１３は、ＡＲコンテンツ生成部１２から、作業の実施状況に対応するＡＲコンテンツ及び作業の実施時間に対応するＡＲコンテンツのそれぞれを取得する。
表示データ出力部１３は、センシングデータである撮像データに対して、それぞれのＡＲコンテンツを示す表示データを重畳させる。
表示データ出力部１３は、撮像データに対して表示データを重畳させる際、それぞれのＡＲコンテンツによって、作業者による作業の実施状況が見えなくならないように、撮像データに対して表示データを重畳させる。
即ち、表示データ出力部１３は、図１３に示すように、ＡＲコンテンツによって、ベルトコンベアによって搬送されている製品が見えなくならないように、撮像データに対して表示データを重畳させる。
表示データ出力部１３は、表示データ重畳後の撮像データを表示デバイス３に出力する。
【0064】
表示デバイス３は、作業支援装置２の表示データ出力部１３から、表示データ重畳後の撮像データを取得する。
表示デバイス３は、表示データ重畳後の撮像データに従ってＡＲコンテンツを表示する。
これにより、表示デバイス３には、例えば、図１３に示すようなＡＲコンテンツが表示される。
表示デバイス３は、表示データ重畳後の撮像データに従ってＡＲコンテンツを表示する。
これにより、表示デバイス３には、例えば、図１３に示すようなＡＲコンテンツが表示される。
【0065】
以上の実施の形態４では、ＡＲコンテンツ生成部１２が、作業の実施状況に対応するＡＲコンテンツを生成するほかに、作業の実施時間に対応するＡＲコンテンツを生成するように、作業支援装置２を構成した。したがって、作業支援装置２では、作業者が作業の実施状況を確認することができるほか、作業者が作業の実施時間を確認することができる。
【0066】
実施の形態５．
実施の形態５では、ＡＲコンテンツ生成部１２が、作業の実施状況に対応するＡＲコンテンツを生成するほかに、現在の天候に対応するＡＲコンテンツを生成する作業支援装置２について説明する。
実施の形態５では、ＡＲコンテンツ生成部１２が、作業の実施状況に対応するＡＲコンテンツを生成するほかに、現在の天候に対応するＡＲコンテンツを生成する作業支援装置２について説明する。
【0067】
実施の形態５に係る作業支援装置２の構成は、実施の形態１に係る作業支援装置２の構成と同様であり、実施の形態５に係る作業支援装置２を含む作業支援システムを示す構成図は、図１である。
ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツを生成するほかに、現在の天候に対応するＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツを示す表示データと、現在の天候に対応するＡＲコンテンツを示す表示データとを表示データ出力部１３に出力する。
ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツを生成するほかに、現在の天候に対応するＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１２は、作業の実施状況に対応するＡＲコンテンツを示す表示データと、現在の天候に対応するＡＲコンテンツを示す表示データとを表示データ出力部１３に出力する。
【0068】
次に、実施の形態５に係る作業支援システムの動作について説明する。ただし、ＡＲコンテンツ生成部１２以外は、図１に示す作業支援システムと同様である。このため、ここでは、主に、ＡＲコンテンツ生成部１２の動作について説明する。
【0069】
ＡＲコンテンツ生成部１２は、センシングデータ取得部１１から、センシングデータを取得する。
ＡＲコンテンツ生成部１２は、実施の形態１と同様に、センシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１２は、実施の形態１と同様に、センシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成する。
【0070】
ＡＲコンテンツ生成部１２は、例えば、図示せぬ気象サイトから、現在の天候を示す天候情報を取得する。
ＡＲコンテンツ生成部１２は、例えば、図１４に示すように、天候情報が示す天候に対応するＡＲコンテンツを生成する。
図１４は、現在の天候に対応するＡＲコンテンツの一例を示す説明図である。
図１４の例では、ベルトコンベア等の背景として、現在の天候に対応するＡＲコンテンツが表示されている。図１４の例では、現在の天候が、青空の一部に雲が存在している天候であることを示している。
ＡＲコンテンツ生成部１２は、例えば、図１４に示すように、天候情報が示す天候に対応するＡＲコンテンツを生成する。
図１４は、現在の天候に対応するＡＲコンテンツの一例を示す説明図である。
図１４の例では、ベルトコンベア等の背景として、現在の天候に対応するＡＲコンテンツが表示されている。図１４の例では、現在の天候が、青空の一部に雲が存在している天候であることを示している。
【0071】
表示データ出力部１３は、センシングデータ取得部１１から、センシングデータを取得する。
また、表示データ出力部１３は、ＡＲコンテンツ生成部１２から、作業の実施状況に対応するＡＲコンテンツ及び現在の天候に対応するＡＲコンテンツのそれぞれを取得する。
表示データ出力部１３は、センシングデータである撮像データに対して、それぞれのＡＲコンテンツを示す表示データを重畳させる。
表示データ出力部１３は、撮像データに対して表示データを重畳させる際、それぞれのＡＲコンテンツによって、作業者による作業の実施状況が見えなくならないように、撮像データに対して表示データを重畳させる。
即ち、表示データ出力部１３は、図１４に示すように、ＡＲコンテンツによって、ベルトコンベアによって搬送されている製品が見えなくならないように、撮像データに対して表示データを重畳させる。
表示データ出力部１３は、表示データ重畳後の撮像データを表示デバイス３に出力する。
また、表示データ出力部１３は、ＡＲコンテンツ生成部１２から、作業の実施状況に対応するＡＲコンテンツ及び現在の天候に対応するＡＲコンテンツのそれぞれを取得する。
表示データ出力部１３は、センシングデータである撮像データに対して、それぞれのＡＲコンテンツを示す表示データを重畳させる。
表示データ出力部１３は、撮像データに対して表示データを重畳させる際、それぞれのＡＲコンテンツによって、作業者による作業の実施状況が見えなくならないように、撮像データに対して表示データを重畳させる。
即ち、表示データ出力部１３は、図１４に示すように、ＡＲコンテンツによって、ベルトコンベアによって搬送されている製品が見えなくならないように、撮像データに対して表示データを重畳させる。
表示データ出力部１３は、表示データ重畳後の撮像データを表示デバイス３に出力する。
【0072】
表示デバイス３は、作業支援装置２の表示データ出力部１３から、表示データ重畳後の撮像データを取得する。
表示デバイス３は、表示データ重畳後の撮像データに従ってＡＲコンテンツを表示する。
これにより、表示デバイス３には、例えば、図１４に示すようなＡＲコンテンツが表示される。
表示デバイス３は、表示データ重畳後の撮像データに従ってＡＲコンテンツを表示する。
これにより、表示デバイス３には、例えば、図１４に示すようなＡＲコンテンツが表示される。
【0073】
以上の実施の形態５では、ＡＲコンテンツ生成部１２が、作業の実施状況に対応するＡＲコンテンツを生成するほかに、現在の天候に対応するＡＲコンテンツを生成するように、作業支援装置２を構成した。したがって、作業支援装置２では、作業者が作業の実施状況を確認することができるほか、作業者が現在の天候を確認することができる。
【0074】
実施の形態６．
実施の形態６では、ＡＲコンテンツ生成部１２が、作業の実施状況に対応するＡＲコンテンツを生成するほかに、作業が行われている施設内の清掃状況に対応するＡＲコンテンツを生成する作業支援装置２について説明する。
実施の形態６では、ＡＲコンテンツ生成部１２が、作業の実施状況に対応するＡＲコンテンツを生成するほかに、作業が行われている施設内の清掃状況に対応するＡＲコンテンツを生成する作業支援装置２について説明する。
【0075】
図１５は、実施の形態６に係る作業支援装置２を含む作業支援システムを示す構成図である。図１５において、図１と同一符号は、同一又は相当部分を示すので、詳細な説明を省略する。
図１６は、実施の形態６に係る作業支援装置２のハードウェアを示すハードウェア構成図である。図１６において、図２と同一符号は、同一又は相当部分を示すので、詳細な説明を省略する。
図１５に示す作業支援システムは、センサ１、カメラ４、作業支援装置２及び表示デバイス３を備えている。
カメラ４は、作業が行われている施設内を撮影し、施設内の撮影データを作業支援装置２に出力する。施設内の撮影箇所としては、例えば、ベルトコンベアの周囲、又は、施設の出入口がある。
図１６は、実施の形態６に係る作業支援装置２のハードウェアを示すハードウェア構成図である。図１６において、図２と同一符号は、同一又は相当部分を示すので、詳細な説明を省略する。
図１５に示す作業支援システムは、センサ１、カメラ４、作業支援装置２及び表示デバイス３を備えている。
カメラ４は、作業が行われている施設内を撮影し、施設内の撮影データを作業支援装置２に出力する。施設内の撮影箇所としては、例えば、ベルトコンベアの周囲、又は、施設の出入口がある。
【0076】
ＡＲコンテンツ生成部１４は、例えば、図１６に示すＡＲコンテンツ生成回路２４によって実現される。
ＡＲコンテンツ生成部１４は、センシングデータ取得部１１から、センシングデータを取得し、カメラ４から、施設内の撮影データを取得する。
ＡＲコンテンツ生成部１４は、図１に示すＡＲコンテンツ生成部１２と同様に、センシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１４は、施設内の撮影データに基づいて、施設内にゴミが溜まっているか否かを判定する。
ＡＲコンテンツ生成部１４は、作業が行われている施設内の清掃状況に対応するＡＲコンテンツを生成する。
具体的には、ＡＲコンテンツ生成部１４は、施設内にゴミが溜まっていれば、作業が行われている施設内の清掃状況として、ゴミが溜まっていることを示すＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１４は、作業の実施状況に対応するＡＲコンテンツを示す表示データと、施設内の清掃状況に対応するＡＲコンテンツを示す表示データとを表示データ出力部１３に出力する。
ＡＲコンテンツ生成部１４は、センシングデータ取得部１１から、センシングデータを取得し、カメラ４から、施設内の撮影データを取得する。
ＡＲコンテンツ生成部１４は、図１に示すＡＲコンテンツ生成部１２と同様に、センシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１４は、施設内の撮影データに基づいて、施設内にゴミが溜まっているか否かを判定する。
ＡＲコンテンツ生成部１４は、作業が行われている施設内の清掃状況に対応するＡＲコンテンツを生成する。
具体的には、ＡＲコンテンツ生成部１４は、施設内にゴミが溜まっていれば、作業が行われている施設内の清掃状況として、ゴミが溜まっていることを示すＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１４は、作業の実施状況に対応するＡＲコンテンツを示す表示データと、施設内の清掃状況に対応するＡＲコンテンツを示す表示データとを表示データ出力部１３に出力する。
【0077】
図１５では、作業支援装置２の構成要素であるセンシングデータ取得部１１、ＡＲコンテンツ生成部１４及び表示データ出力部１３のそれぞれが、図１６に示すような専用のハードウェアによって実現されるものを想定している。即ち、作業支援装置２が、センシングデータ取得回路２１、ＡＲコンテンツ生成回路２４及び表示データ出力回路２３によって実現されるものを想定している。
センシングデータ取得回路２１、ＡＲコンテンツ生成回路２４及び表示データ出力回路２３のそれぞれは、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ、ＦＰＧＡ、又は、これらを組み合わせたものが該当する。
センシングデータ取得回路２１、ＡＲコンテンツ生成回路２４及び表示データ出力回路２３のそれぞれは、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ、ＦＰＧＡ、又は、これらを組み合わせたものが該当する。
【0078】
作業支援装置２の構成要素は、専用のハードウェアによって実現されるものに限るものではなく、作業支援装置２が、ソフトウェア、ファームウェア、又は、ソフトウェアとファームウェアとの組み合わせによって実現されるものであってもよい。
作業支援装置２が、ソフトウェア又はファームウェア等によって実現される場合、センシングデータ取得部１１、ＡＲコンテンツ生成部１４及び表示データ出力部１３におけるそれぞれの処理手順をコンピュータに実行させるためのプログラムが図３に示すメモリ３１に格納される。そして、図３に示すプロセッサ３２がメモリ３１に格納されているプログラムを実行する。
作業支援装置２が、ソフトウェア又はファームウェア等によって実現される場合、センシングデータ取得部１１、ＡＲコンテンツ生成部１４及び表示データ出力部１３におけるそれぞれの処理手順をコンピュータに実行させるためのプログラムが図３に示すメモリ３１に格納される。そして、図３に示すプロセッサ３２がメモリ３１に格納されているプログラムを実行する。
【0079】
また、図１６では、作業支援装置２の構成要素のそれぞれが専用のハードウェアによって実現される例を示し、図３では、作業支援装置２がソフトウェア又はファームウェア等によって実現される例を示している。しかし、これは一例に過ぎず、作業支援装置２における一部の構成要素が専用のハードウェアによって実現され、残りの構成要素がソフトウェア又はファームウェア等によって実現されるものであってもよい。
【0080】
次に、図１５に示す作業支援システムの動作について説明する。ただし、カメラ４及びＡＲコンテンツ生成部１４以外は、図１に示す作業支援システムと同様である。このため、ここでは、主に、カメラ４及びＡＲコンテンツ生成部１４の動作について説明する。
【0081】
カメラ４は、作業が行われている施設内を撮影し、施設内の撮影データを作業支援装置２に出力する。
ＡＲコンテンツ生成部１４は、センシングデータ取得部１１から、センシングデータを取得する。
ＡＲコンテンツ生成部１４は、図１に示すＡＲコンテンツ生成部１２と同様に、センシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１４は、センシングデータ取得部１１から、センシングデータを取得する。
ＡＲコンテンツ生成部１４は、図１に示すＡＲコンテンツ生成部１２と同様に、センシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成する。
【0082】
ＡＲコンテンツ生成部１４は、カメラ４から、施設内の撮影データを取得する。
ＡＲコンテンツ生成部１４は、施設内の撮影データに基づいて、施設内にゴミが溜まっているか否かを判定する。
以下、ＡＲコンテンツ生成部１４の判定処理を具体的に説明する。
ＡＲコンテンツ生成部１４は、施設内の撮影データに基づいて、施設内にゴミが溜まっているか否かを判定する。
以下、ＡＲコンテンツ生成部１４の判定処理を具体的に説明する。
【0083】
ＡＲコンテンツ生成部１４は、カメラ４から、施設内の撮影データとして、例えば、ベルトコンベアの周囲の撮影データを取得する。
ＡＲコンテンツ生成部１４の内部メモリ等には、ベルトコンベアの周囲にゴミが溜まっていないときの、ベルトコンベアの周囲を示す画像が格納されている。
ＡＲコンテンツ生成部１４は、ベルトコンベアの周囲の撮影データが示す画像と、ゴミが溜まっていないときのベルトコンベアの周囲を示す画像とを比較する。
ＡＲコンテンツ生成部１４は、両画像の一致度が閾値以上であれば、ベルトコンベアの周囲にゴミが溜まっていないと判定する。
ＡＲコンテンツ生成部１４は、両画像の一致度が閾値未満であれば、ベルトコンベアの周囲にゴミが溜まっていると判定する。閾値は、ＡＲコンテンツ生成部１４の内部メモリに格納されていてもよいし、作業支援装置２の外部から与えられるものであってもよい。
ＡＲコンテンツ生成部１４の内部メモリ等には、ベルトコンベアの周囲にゴミが溜まっていないときの、ベルトコンベアの周囲を示す画像が格納されている。
ＡＲコンテンツ生成部１４は、ベルトコンベアの周囲の撮影データが示す画像と、ゴミが溜まっていないときのベルトコンベアの周囲を示す画像とを比較する。
ＡＲコンテンツ生成部１４は、両画像の一致度が閾値以上であれば、ベルトコンベアの周囲にゴミが溜まっていないと判定する。
ＡＲコンテンツ生成部１４は、両画像の一致度が閾値未満であれば、ベルトコンベアの周囲にゴミが溜まっていると判定する。閾値は、ＡＲコンテンツ生成部１４の内部メモリに格納されていてもよいし、作業支援装置２の外部から与えられるものであってもよい。
【0084】
ＡＲコンテンツ生成部１４は、施設内にゴミが溜まっていれば、作業が行われている施設内の清掃状況として、例えば、図１７に示すように、ゴミが溜まっていることを示すＡＲコンテンツを生成する。ゴミが溜まっていることを示すＡＲコンテンツの生成処理自体は、公知の技術であるため詳細な説明を省略する。
図１７は、ゴミが溜まっていることを示すＡＲコンテンツの一例を示す説明図である。
ＡＲコンテンツ生成部１４は、施設内にゴミが溜まっていなければ、作業が行われている施設内の清掃状況として、ゴミが溜まっていないことを示すＡＲコンテンツを生成する。ゴミが溜まっていないことを示すＡＲコンテンツとしては、例えば、「ゴミなし」を示すメッセージがある。
ここでは、ＡＲコンテンツ生成部１４が、ゴミが溜まっていないことを示すＡＲコンテンツを生成するものとしている。しかし、これは一例に過ぎず、施設内にゴミが溜まっていなければ、ＡＲコンテンツ生成部１４は、施設内の清掃状況に対応するＡＲコンテンツを生成しないようにしてもよい。
ＡＲコンテンツ生成部１４は、作業の実施状況に対応するＡＲコンテンツを示す表示データを表示データ出力部１３に出力する。
ＡＲコンテンツ生成部１４は、施設内の清掃状況に対応するＡＲコンテンツを生成すれば、当該ＡＲコンテンツを示す表示データを表示データ出力部１３に出力する。
図１７は、ゴミが溜まっていることを示すＡＲコンテンツの一例を示す説明図である。
ＡＲコンテンツ生成部１４は、施設内にゴミが溜まっていなければ、作業が行われている施設内の清掃状況として、ゴミが溜まっていないことを示すＡＲコンテンツを生成する。ゴミが溜まっていないことを示すＡＲコンテンツとしては、例えば、「ゴミなし」を示すメッセージがある。
ここでは、ＡＲコンテンツ生成部１４が、ゴミが溜まっていないことを示すＡＲコンテンツを生成するものとしている。しかし、これは一例に過ぎず、施設内にゴミが溜まっていなければ、ＡＲコンテンツ生成部１４は、施設内の清掃状況に対応するＡＲコンテンツを生成しないようにしてもよい。
ＡＲコンテンツ生成部１４は、作業の実施状況に対応するＡＲコンテンツを示す表示データを表示データ出力部１３に出力する。
ＡＲコンテンツ生成部１４は、施設内の清掃状況に対応するＡＲコンテンツを生成すれば、当該ＡＲコンテンツを示す表示データを表示データ出力部１３に出力する。
【0085】
表示データ出力部１３は、センシングデータ取得部１１から、センシングデータを取得する。
また、表示データ出力部１３は、ＡＲコンテンツ生成部１４から、作業の実施状況に対応するＡＲコンテンツを取得する。表示データ出力部１３は、ＡＲコンテンツ生成部１４から、施設内の清掃状況に対応するＡＲコンテンツが出力されれば、当該ＡＲコンテンツを取得する。
表示データ出力部１３は、センシングデータである撮像データに対して、それぞれのＡＲコンテンツを示す表示データを重畳させる。
表示データ出力部１３は、撮像データに対して表示データを重畳させる際、それぞれのＡＲコンテンツによって、作業者による作業の実施状況が見えなくならないように、撮像データに対して表示データを重畳させる。
即ち、表示データ出力部１３は、図１７に示すように、ＡＲコンテンツによって、ベルトコンベアによって搬送されている製品が見えなくならないように、撮像データに対して表示データを重畳させる。
表示データ出力部１３は、表示データ重畳後の撮像データを表示デバイス３に出力する。
また、表示データ出力部１３は、ＡＲコンテンツ生成部１４から、作業の実施状況に対応するＡＲコンテンツを取得する。表示データ出力部１３は、ＡＲコンテンツ生成部１４から、施設内の清掃状況に対応するＡＲコンテンツが出力されれば、当該ＡＲコンテンツを取得する。
表示データ出力部１３は、センシングデータである撮像データに対して、それぞれのＡＲコンテンツを示す表示データを重畳させる。
表示データ出力部１３は、撮像データに対して表示データを重畳させる際、それぞれのＡＲコンテンツによって、作業者による作業の実施状況が見えなくならないように、撮像データに対して表示データを重畳させる。
即ち、表示データ出力部１３は、図１７に示すように、ＡＲコンテンツによって、ベルトコンベアによって搬送されている製品が見えなくならないように、撮像データに対して表示データを重畳させる。
表示データ出力部１３は、表示データ重畳後の撮像データを表示デバイス３に出力する。
【0086】
表示デバイス３は、作業支援装置２の表示データ出力部１３から、表示データ重畳後の撮像データを取得する。
表示デバイス３は、表示データ重畳後の撮像データに従ってＡＲコンテンツを表示する。
これにより、表示デバイス３には、例えば、図１７に示すようなＡＲコンテンツが表示される。
表示デバイス３は、表示データ重畳後の撮像データに従ってＡＲコンテンツを表示する。
これにより、表示デバイス３には、例えば、図１７に示すようなＡＲコンテンツが表示される。
【0087】
以上の実施の形態６では、ＡＲコンテンツ生成部１２が、作業の実施状況に対応するＡＲコンテンツを生成するほかに、作業が行われている施設内の清掃状況に対応するＡＲコンテンツを生成するように、作業支援装置２を構成した。したがって、作業支援装置２では、作業者が作業の実施状況を確認することができるほか、作業者が施設内の清掃状況を確認することができる。
【0088】
実施の形態７．
実施の形態７では、ＡＲコンテンツ生成部１５が、作業の実施状況に対応するＡＲコンテンツを生成するほかに、作業の実施内容を案内するキャラクタを示すＡＲコンテンツを生成する作業支援装置２について説明する。
実施の形態７では、ＡＲコンテンツ生成部１５が、作業の実施状況に対応するＡＲコンテンツを生成するほかに、作業の実施内容を案内するキャラクタを示すＡＲコンテンツを生成する作業支援装置２について説明する。
【0089】
図１８は、実施の形態７に係る作業支援装置２を含む作業支援システムを示す構成図である。図１８において、図１及び図１５と同一符号は、同一又は相当部分を示すので、詳細な説明を省略する。
図１９は、実施の形態７に係る作業支援装置２のハードウェアを示すハードウェア構成図である。図１９において、図２及び図１６と同一符号は、同一又は相当部分を示すので、詳細な説明を省略する。
図１９は、実施の形態７に係る作業支援装置２のハードウェアを示すハードウェア構成図である。図１９において、図２及び図１６と同一符号は、同一又は相当部分を示すので、詳細な説明を省略する。
【0090】
ＡＲコンテンツ生成部１５は、例えば、図１９に示すＡＲコンテンツ生成回路２５によって実現される。
ＡＲコンテンツ生成部１５は、センシングデータ取得部１１から、センシングデータを取得し、作業の実施内容を示す作業情報を取得する。
ＡＲコンテンツ生成部１５は、図１に示すＡＲコンテンツ生成部１２と同様に、センシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１５は、作業情報に基づいて、作業者による作業の実施内容を把握する。
ＡＲコンテンツ生成部１５は、作業の実施内容を案内するキャラクタを示すＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１５は、作業の実施状況に対応するＡＲコンテンツを示す表示データと、キャラクタを示すＡＲコンテンツの表示データとを表示データ出力部１３に出力する。
ＡＲコンテンツ生成部１５は、センシングデータ取得部１１から、センシングデータを取得し、作業の実施内容を示す作業情報を取得する。
ＡＲコンテンツ生成部１５は、図１に示すＡＲコンテンツ生成部１２と同様に、センシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１５は、作業情報に基づいて、作業者による作業の実施内容を把握する。
ＡＲコンテンツ生成部１５は、作業の実施内容を案内するキャラクタを示すＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１５は、作業の実施状況に対応するＡＲコンテンツを示す表示データと、キャラクタを示すＡＲコンテンツの表示データとを表示データ出力部１３に出力する。
【0091】
図１８に示す作業支援装置２は、ＡＲコンテンツ生成部１５が図１に示す作業支援装置２に適用されたものである。しかし、これは一例に過ぎず、ＡＲコンテンツ生成部１５が図１５に示す作業支援装置２に適用されたものであってもよい。
【0092】
図１８では、作業支援装置２の構成要素であるセンシングデータ取得部１１、ＡＲコンテンツ生成部１５及び表示データ出力部１３のそれぞれが、図１９に示すような専用のハードウェアによって実現されるものを想定している。即ち、作業支援装置２が、センシングデータ取得回路２１、ＡＲコンテンツ生成回路２５及び表示データ出力回路２３によって実現されるものを想定している。
センシングデータ取得回路２１、ＡＲコンテンツ生成回路２５及び表示データ出力回路２３のそれぞれは、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ、ＦＰＧＡ、又は、これらを組み合わせたものが該当する。
センシングデータ取得回路２１、ＡＲコンテンツ生成回路２５及び表示データ出力回路２３のそれぞれは、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ、ＦＰＧＡ、又は、これらを組み合わせたものが該当する。
【0093】
作業支援装置２の構成要素は、専用のハードウェアによって実現されるものに限るものではなく、作業支援装置２が、ソフトウェア、ファームウェア、又は、ソフトウェアとファームウェアとの組み合わせによって実現されるものであってもよい。
作業支援装置２が、ソフトウェア又はファームウェア等によって実現される場合、センシングデータ取得部１１、ＡＲコンテンツ生成部１５及び表示データ出力部１３におけるそれぞれの処理手順をコンピュータに実行させるためのプログラムが図３に示すメモリ３１に格納される。そして、図３に示すプロセッサ３２がメモリ３１に格納されているプログラムを実行する。
作業支援装置２が、ソフトウェア又はファームウェア等によって実現される場合、センシングデータ取得部１１、ＡＲコンテンツ生成部１５及び表示データ出力部１３におけるそれぞれの処理手順をコンピュータに実行させるためのプログラムが図３に示すメモリ３１に格納される。そして、図３に示すプロセッサ３２がメモリ３１に格納されているプログラムを実行する。
【0094】
また、図１９では、作業支援装置２の構成要素のそれぞれが専用のハードウェアによって実現される例を示し、図３では、作業支援装置２がソフトウェア又はファームウェア等によって実現される例を示している。しかし、これは一例に過ぎず、作業支援装置２における一部の構成要素が専用のハードウェアによって実現され、残りの構成要素がソフトウェア又はファームウェア等によって実現されるものであってもよい。
【0095】
次に、図１８に示す作業支援システムの動作について説明する。ただし、ＡＲコンテンツ生成部１５以外は、図１に示す作業支援システムと同様である。このため、ここでは、主に、ＡＲコンテンツ生成部１５の動作について説明する。
【0096】
ＡＲコンテンツ生成部１５は、センシングデータ取得部１１から、センシングデータを取得し、作業の実施内容を示す作業情報を取得する。
ＡＲコンテンツ生成部１５は、図１に示すＡＲコンテンツ生成部１２と同様に、センシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１５は、図１に示すＡＲコンテンツ生成部１２と同様に、センシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成する。
【0097】
ＡＲコンテンツ生成部１５は、作業情報に基づいて、作業者による作業の実施内容を把握する。
ＡＲコンテンツ生成部１５は、図２０に示すように、作業の実施内容を案内するキャラクタを示すＡＲコンテンツを生成する。
図２０は、作業の実施内容を案内するキャラクタを示すＡＲコンテンツの一例を示す説明図である。
図２０では、作業の実施内容が「緑色の枠の中にあるフタを取ってください。」である例を示している。
ＡＲコンテンツ生成部１５は、作業の実施状況に対応するＡＲコンテンツを示す表示データと、キャラクタを示すＡＲコンテンツの表示データとを表示データ出力部１３に出力する。
ＡＲコンテンツ生成部１５は、図２０に示すように、作業の実施内容を案内するキャラクタを示すＡＲコンテンツを生成する。
図２０は、作業の実施内容を案内するキャラクタを示すＡＲコンテンツの一例を示す説明図である。
図２０では、作業の実施内容が「緑色の枠の中にあるフタを取ってください。」である例を示している。
ＡＲコンテンツ生成部１５は、作業の実施状況に対応するＡＲコンテンツを示す表示データと、キャラクタを示すＡＲコンテンツの表示データとを表示データ出力部１３に出力する。
【0098】
表示データ出力部１３は、センシングデータ取得部１１から、センシングデータを取得する。
また、表示データ出力部１３は、ＡＲコンテンツ生成部１５から、作業の実施状況に対応するＡＲコンテンツ及びキャラクタを示すＡＲコンテンツのそれぞれを取得する。
表示データ出力部１３は、センシングデータである撮像データに対して、それぞれのＡＲコンテンツを示す表示データを重畳させる。
表示データ出力部１３は、撮像データに対して表示データを重畳させる際、それぞれのＡＲコンテンツによって、作業者による作業の実施状況が見えなくならないように、撮像データに対して表示データを重畳させる。
即ち、表示データ出力部１３は、図２０に示すように、ＡＲコンテンツによって、ベルトコンベアによって搬送されている製品が見えなくならないように、撮像データに対して表示データを重畳させる。
表示データ出力部１３は、表示データ重畳後の撮像データを表示デバイス３に出力する。
また、表示データ出力部１３は、ＡＲコンテンツ生成部１５から、作業の実施状況に対応するＡＲコンテンツ及びキャラクタを示すＡＲコンテンツのそれぞれを取得する。
表示データ出力部１３は、センシングデータである撮像データに対して、それぞれのＡＲコンテンツを示す表示データを重畳させる。
表示データ出力部１３は、撮像データに対して表示データを重畳させる際、それぞれのＡＲコンテンツによって、作業者による作業の実施状況が見えなくならないように、撮像データに対して表示データを重畳させる。
即ち、表示データ出力部１３は、図２０に示すように、ＡＲコンテンツによって、ベルトコンベアによって搬送されている製品が見えなくならないように、撮像データに対して表示データを重畳させる。
表示データ出力部１３は、表示データ重畳後の撮像データを表示デバイス３に出力する。
【0099】
表示デバイス３は、作業支援装置２の表示データ出力部１３から、表示データ重畳後の撮像データを取得する。
表示デバイス３は、表示データ重畳後の撮像データに従ってＡＲコンテンツを表示する。
これにより、表示デバイス３には、例えば、図２０に示すようなＡＲコンテンツが表示される。
表示デバイス３は、表示データ重畳後の撮像データに従ってＡＲコンテンツを表示する。
これにより、表示デバイス３には、例えば、図２０に示すようなＡＲコンテンツが表示される。
【0100】
以上の実施の形態７では、ＡＲコンテンツ生成部１５が、作業の実施状況に対応するＡＲコンテンツを生成するほかに、作業の実施内容を案内するキャラクタを示すＡＲコンテンツを生成するように、作業支援装置２を構成した。したがって、作業支援装置２では、作業者が作業の実施状況を確認することができるほか、作業者が作業の実施内容を確認することができる。
【0101】
図１８に示す作業支援装置２では、ＡＲコンテンツ生成部１５が、作業の実施内容を案内するキャラクタを示すＡＲコンテンツを生成している。このとき、ＡＲコンテンツ生成部１５は、作業者の技量、又は、作業者の体調のいずれかに応じて、キャラクタが案内する実施内容が示す作業のスピードを調整するようにしてもよい。
具体的には、作業の実施内容が、例えば、「ネジを締める作業」であるとすれば、ＡＲコンテンツ生成部１５は、作業者の技量、又は、作業者の体調のいずれかに応じて、実施内容である「ネジを締める作業」の作業スピードを調整する。即ち、作業者の技量が高いほど、ネジを締める作業スピードを速める実施内容として、ＡＲコンテンツ生成部１５は、例えば、「ネジを〇〇秒以内に締める」という案内に決定する。また、作業者の体調が悪ければ、ネジを締める作業スピードを遅らせる実施内容として、ＡＲコンテンツ生成部１５は、例えば、「ネジを△分程度で締める」という案内に決定する。
具体的には、作業の実施内容が、例えば、「ネジを締める作業」であるとすれば、ＡＲコンテンツ生成部１５は、作業者の技量、又は、作業者の体調のいずれかに応じて、実施内容である「ネジを締める作業」の作業スピードを調整する。即ち、作業者の技量が高いほど、ネジを締める作業スピードを速める実施内容として、ＡＲコンテンツ生成部１５は、例えば、「ネジを〇〇秒以内に締める」という案内に決定する。また、作業者の体調が悪ければ、ネジを締める作業スピードを遅らせる実施内容として、ＡＲコンテンツ生成部１５は、例えば、「ネジを△分程度で締める」という案内に決定する。
【0102】
ＡＲコンテンツ生成部１５は、例えば、作業者の技量、又は、作業者の体調のいずれかを図示せぬ学習モデルに与えて、学習モデルから、作業者の技量、又は、作業者の体調のいずれかに対応する作業スピードを示すスピード情報を取得する。
当該学習モデルは、学習時において、作業者の技量、又は、作業者の体調のいずれかと、作業スピードを示す教師データとが与えられると、作業者の技量、又は、作業者の体調のいずれかに対応する作業スピードを学習している。
ＡＲコンテンツ生成部１５は、スピード情報が示す作業スピードで作業を実施するための実施内容を案内するキャラクタを示すＡＲコンテンツを生成する。
当該学習モデルは、学習時において、作業者の技量、又は、作業者の体調のいずれかと、作業スピードを示す教師データとが与えられると、作業者の技量、又は、作業者の体調のいずれかに対応する作業スピードを学習している。
ＡＲコンテンツ生成部１５は、スピード情報が示す作業スピードで作業を実施するための実施内容を案内するキャラクタを示すＡＲコンテンツを生成する。
【0103】
図１８に示す作業支援装置２では、ＡＲコンテンツ生成部１５が、作業の実施内容を案内するキャラクタを示すＡＲコンテンツとして、熊をモチーフとするキャラクタを示すＡＲコンテンツを生成している。しかし、これは一例に過ぎず、ＡＲコンテンツ生成部１５は、作業の実施内容を案内するキャラクタを示すＡＲコンテンツを生成する前に、生成対象のキャラクタを示すＡＲコンテンツの選択を受け付けるようにしてもよい。
具体的には、ＡＲコンテンツ生成部１５は、例えば、ユーザインタフェースを備えており、ユーザがユーザインタフェースを操作することによって、生成対象のキャラクタを示すＡＲコンテンツを選択すれば、当該キャラクタを示すＡＲコンテンツを生成する。
具体的には、ＡＲコンテンツ生成部１５は、例えば、ユーザインタフェースを備えており、ユーザがユーザインタフェースを操作することによって、生成対象のキャラクタを示すＡＲコンテンツを選択すれば、当該キャラクタを示すＡＲコンテンツを生成する。
【0104】
実施の形態８．
実施の形態８では、ＡＲコンテンツ生成部１６が、作業の実施状況に対応するＡＲコンテンツを生成するほかに、当該作業についての熟練工の動作を示すＡＲコンテンツを生成する作業支援装置２について説明する。
実施の形態８では、ＡＲコンテンツ生成部１６が、作業の実施状況に対応するＡＲコンテンツを生成するほかに、当該作業についての熟練工の動作を示すＡＲコンテンツを生成する作業支援装置２について説明する。
【0105】
図２１は、実施の形態８に係る作業支援装置２を含む作業支援システムを示す構成図である。図２１において、図１、図１５及び図１８と同一符号は、同一又は相当部分を示すので、詳細な説明を省略する。
図２２は、実施の形態８に係る作業支援装置２のハードウェアを示すハードウェア構成図である。図２２において、図２、図１６及び図１９と同一符号は、同一又は相当部分を示すので、詳細な説明を省略する。
図２２は、実施の形態８に係る作業支援装置２のハードウェアを示すハードウェア構成図である。図２２において、図２、図１６及び図１９と同一符号は、同一又は相当部分を示すので、詳細な説明を省略する。
【0106】
ＡＲコンテンツ生成部１６は、例えば、図２２に示すＡＲコンテンツ生成回路２６によって実現される。
ＡＲコンテンツ生成部１６は、センシングデータ取得部１１から、センシングデータを取得し、作業者が行う作業についての熟練工の動作を示す動作情報を取得する。
ＡＲコンテンツ生成部１６は、図１に示すＡＲコンテンツ生成部１２と同様に、センシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１６は、動作情報に基づいて、熟練工の動作を把握する。
ＡＲコンテンツ生成部１６は、熟練工の動作を示すＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１６は、作業の実施状況に対応するＡＲコンテンツを示す表示データと、熟練工の動作を示すＡＲコンテンツの表示データとを表示データ出力部１３に出力する。
ＡＲコンテンツ生成部１６は、センシングデータ取得部１１から、センシングデータを取得し、作業者が行う作業についての熟練工の動作を示す動作情報を取得する。
ＡＲコンテンツ生成部１６は、図１に示すＡＲコンテンツ生成部１２と同様に、センシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１６は、動作情報に基づいて、熟練工の動作を把握する。
ＡＲコンテンツ生成部１６は、熟練工の動作を示すＡＲコンテンツを生成する。
ＡＲコンテンツ生成部１６は、作業の実施状況に対応するＡＲコンテンツを示す表示データと、熟練工の動作を示すＡＲコンテンツの表示データとを表示データ出力部１３に出力する。
【0107】
図２１に示す作業支援装置２は、ＡＲコンテンツ生成部１６が図１に示す作業支援装置２に適用されたものである。しかし、これは一例に過ぎず、ＡＲコンテンツ生成部１６が図１５に示す作業支援装置２、又は、図１８に示す作業支援装置２に適用されたものであってもよい。
【0108】
図２１では、作業支援装置２の構成要素であるセンシングデータ取得部１１、ＡＲコンテンツ生成部１６及び表示データ出力部１３のそれぞれが、図２２に示すような専用のハードウェアによって実現されるものを想定している。即ち、作業支援装置２が、センシングデータ取得回路２１、ＡＲコンテンツ生成回路２６及び表示データ出力回路２３によって実現されるものを想定している。
センシングデータ取得回路２１、ＡＲコンテンツ生成回路２６及び表示データ出力回路２３のそれぞれは、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ、ＦＰＧＡ、又は、これらを組み合わせたものが該当する。
センシングデータ取得回路２１、ＡＲコンテンツ生成回路２６及び表示データ出力回路２３のそれぞれは、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ、ＦＰＧＡ、又は、これらを組み合わせたものが該当する。
【0109】
作業支援装置２の構成要素は、専用のハードウェアによって実現されるものに限るものではなく、作業支援装置２が、ソフトウェア、ファームウェア、又は、ソフトウェアとファームウェアとの組み合わせによって実現されるものであってもよい。
作業支援装置２が、ソフトウェア又はファームウェア等によって実現される場合、センシングデータ取得部１１、ＡＲコンテンツ生成部１６及び表示データ出力部１３におけるそれぞれの処理手順をコンピュータに実行させるためのプログラムが図３に示すメモリ３１に格納される。そして、図３に示すプロセッサ３２がメモリ３１に格納されているプログラムを実行する。
作業支援装置２が、ソフトウェア又はファームウェア等によって実現される場合、センシングデータ取得部１１、ＡＲコンテンツ生成部１６及び表示データ出力部１３におけるそれぞれの処理手順をコンピュータに実行させるためのプログラムが図３に示すメモリ３１に格納される。そして、図３に示すプロセッサ３２がメモリ３１に格納されているプログラムを実行する。
【0110】
また、図２２では、作業支援装置２の構成要素のそれぞれが専用のハードウェアによって実現される例を示し、図３では、作業支援装置２がソフトウェア又はファームウェア等によって実現される例を示している。しかし、これは一例に過ぎず、作業支援装置２における一部の構成要素が専用のハードウェアによって実現され、残りの構成要素がソフトウェア又はファームウェア等によって実現されるものであってもよい。
【0111】
次に、図２１に示す作業支援システムの動作について説明する。ただし、ＡＲコンテンツ生成部１６以外は、図１に示す作業支援システムと同様である。このため、ここでは、主に、ＡＲコンテンツ生成部１６の動作について説明する。
【0112】
ＡＲコンテンツ生成部１６は、センシングデータ取得部１１から、センシングデータを取得し、作業者が行う作業についての熟練工の動作を示す動作情報を取得する。
熟練工の動作としては、例えば、熟練工における作業時の動線、又は、熟練工における作業時の身体の動かし方がある。
ＡＲコンテンツ生成部１６は、図１に示すＡＲコンテンツ生成部１２と同様に、センシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成する。
熟練工の動作としては、例えば、熟練工における作業時の動線、又は、熟練工における作業時の身体の動かし方がある。
ＡＲコンテンツ生成部１６は、図１に示すＡＲコンテンツ生成部１２と同様に、センシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成する。
【0113】
ＡＲコンテンツ生成部１６は、動作情報に基づいて、熟練工の動作を把握する。動作情報が、例えば、熟練工における作業時の動線を示していれば、ＡＲコンテンツ生成部１６は、作業時の動線を把握する。動作情報が、例えば、作業時の身体の動かし方を示していれば、ＡＲコンテンツ生成部１６は、作業時の身体の動かし方を把握する。
ＡＲコンテンツ生成部１６は、図２３に示すように、熟練工の動作を示すＡＲコンテンツを生成する。
図２３は、熟練工の動作を示すＡＲコンテンツの一例を示す説明図である。
図２３では、熟練工の動作を示すＡＲコンテンツとして、熟練工における作業時の動線を示すＡＲコンテンツが表示されている。
ＡＲコンテンツ生成部１６は、作業の実施状況に対応するＡＲコンテンツを示す表示データと、熟練工の動作を示すＡＲコンテンツの表示データとを表示データ出力部１３に出力する。
ＡＲコンテンツ生成部１６は、図２３に示すように、熟練工の動作を示すＡＲコンテンツを生成する。
図２３は、熟練工の動作を示すＡＲコンテンツの一例を示す説明図である。
図２３では、熟練工の動作を示すＡＲコンテンツとして、熟練工における作業時の動線を示すＡＲコンテンツが表示されている。
ＡＲコンテンツ生成部１６は、作業の実施状況に対応するＡＲコンテンツを示す表示データと、熟練工の動作を示すＡＲコンテンツの表示データとを表示データ出力部１３に出力する。
【0114】
表示データ出力部１３は、センシングデータ取得部１１から、センシングデータを取得する。
また、表示データ出力部１３は、ＡＲコンテンツ生成部１６から、作業の実施状況に対応するＡＲコンテンツ及び熟練工の動作を示すＡＲコンテンツのそれぞれを取得する。
表示データ出力部１３は、センシングデータである撮像データに対して、それぞれのＡＲコンテンツを示す表示データを重畳させる。
表示データ出力部１３は、撮像データに対して表示データを重畳させる際、それぞれのＡＲコンテンツによって、作業者による作業の実施状況が見えなくならないように、撮像データに対して表示データを重畳させる。
即ち、表示データ出力部１３は、図２３に示すように、ＡＲコンテンツによって、ベルトコンベアによって搬送されている製品が見えなくならないように、撮像データに対して表示データを重畳させる。
表示データ出力部１３は、表示データ重畳後の撮像データを表示デバイス３に出力する。
また、表示データ出力部１３は、ＡＲコンテンツ生成部１６から、作業の実施状況に対応するＡＲコンテンツ及び熟練工の動作を示すＡＲコンテンツのそれぞれを取得する。
表示データ出力部１３は、センシングデータである撮像データに対して、それぞれのＡＲコンテンツを示す表示データを重畳させる。
表示データ出力部１３は、撮像データに対して表示データを重畳させる際、それぞれのＡＲコンテンツによって、作業者による作業の実施状況が見えなくならないように、撮像データに対して表示データを重畳させる。
即ち、表示データ出力部１３は、図２３に示すように、ＡＲコンテンツによって、ベルトコンベアによって搬送されている製品が見えなくならないように、撮像データに対して表示データを重畳させる。
表示データ出力部１３は、表示データ重畳後の撮像データを表示デバイス３に出力する。
【0115】
表示デバイス３は、作業支援装置２の表示データ出力部１３から、表示データ重畳後の撮像データを取得する。
表示デバイス３は、表示データ重畳後の撮像データに従ってＡＲコンテンツを表示する。
これにより、表示デバイス３には、例えば、図２３に示すようなＡＲコンテンツが表示される。
表示デバイス３は、表示データ重畳後の撮像データに従ってＡＲコンテンツを表示する。
これにより、表示デバイス３には、例えば、図２３に示すようなＡＲコンテンツが表示される。
【0116】
以上の実施の形態８では、ＡＲコンテンツ生成部１６が、作業の実施状況に対応するＡＲコンテンツを生成するほかに、作業についての熟練工の動作を示すＡＲコンテンツを生成するように、作業支援装置２を構成した。したがって、作業支援装置２では、作業者が作業の実施状況を確認することができるほか、作業者が熟練工の動作を確認することができる。
【0117】
なお、本開示は、各実施の形態の自由な組み合わせ、あるいは各実施の形態の任意の構成要素の変形、もしくは各実施の形態において任意の構成要素の省略が可能である。
【産業上の利用可能性】
【0118】
本開示は、作業支援装置、作業支援方法及び作業支援システムに適している。
【符号の説明】
【0119】
１ センサ、２ 作業支援装置、３ 表示デバイス、４ カメラ、１１ センシングデータ取得部、１２，１４，１５，１６ ＡＲコンテンツ生成部、１３ 表示データ出力部、２１ センシングデータ取得回路、２２，２４，２５，２６ ＡＲコンテンツ生成回路、２３ 表示データ出力回路、３１ メモリ、３２ プロセッサ。
【要約】
作業者による作業の実施状況を監視するセンサ（１）から、作業の実施状況を示すセンシングデータを取得するセンシングデータ取得部（１１）と、センシングデータ取得部（１１）により取得されたセンシングデータに基づいて、作業の実施状況に対応するＡＲコンテンツを生成するＡＲコンテンツ生成部（１２）と、ＡＲコンテンツ生成部（１２）により生成されたＡＲコンテンツを示す表示データを出力する表示データ出力部（１３）とを備えるように、作業支援装置（２）を構成した。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
【図20】
【図21】
【図22】
【図23】