特開 2022-189393 情報処理装置、情報処理プログラム、及び情報処理システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2022189393

(43)【公開日】2022-12-22

(54)【発明の名称】情報処理装置、情報処理プログラム、及び情報処理システム

(51)【国際特許分類】

   G06Q 50/04 20120101AFI20221215BHJP

   G06F 3/01 20060101ALI20221215BHJP

   G06F 3/0346 20130101ALI20221215BHJP

   G06F 3/038 20130101ALI20221215BHJP

【ＦＩ】

G06Q50/04

G06F3/01 510

G06F3/0346 421

G06F3/038 310A

【審査請求】未請求

【請求項の数】11

【出願形態】ＯＬ

(21)【出願番号】P 2021097945

(22)【出願日】2021-06-11

(71)【出願人】

【識別番号】000005496

【氏名又は名称】富士フイルムビジネスイノベーション株式会社

(74)【代理人】

【識別番号】110001210

【氏名又は名称】弁理士法人ＹＫＩ国際特許事務所

(72)【発明者】

【氏名】神崎 亜実

【テーマコード（参考）】

5B087

5E555

5L049

【Ｆターム（参考）】

5B087AA09

5B087BC05

5B087DD03

5E555BA01

5E555BA06

5E555BB01

5E555BB06

5E555BC04

5E555BD01

5E555BE17

5E555CA42

5E555CA45

5E555CB21

5E555CB23

5E555CB65

5E555CB82

5E555CC03

5E555DA09

5E555DB25

5E555DB41

5E555DC09

5E555DC75

5E555DD06

5E555DD08

5E555EA07

5E555EA25

5E555FA00

5L049CC03

(57)【要約】

【課題】機器が見える位置までユーザが移動する場合、あるいは、機器の状況を管理しているコンピュータにアクセスする操作をユーザが行う場合に比して、当該ユーザから視認できない位置にある機器の状況を当該ユーザが容易に把握可能とする。
【解決手段】位置方向取得部６２は、ウェアラブル端末１４から受信した情報に基づいて、ウェアラブル端末１４の位置、及び、ユーザの視線方向を取得する。表示制御部６４は、機器ＤＢ５６を参照し、ユーザから視認できない位置にある各機器１２の設置場所を示す設置場所情報を参照し、ウェアラブル端末１４の位置からユーザＵの視線方向にある機器１２を特定する。表示制御部６４は、機器ＤＢ５６を参照し、特定した機器１２に関する情報を取得し、当該情報をウェアラブル端末１４のディスプレイ３２に表示させる表示制御信号をウェアラブル端末１４に送信する。
【選択図】図３

【特許請求の範囲】

【請求項1】

プロセッサを備え、
前記プロセッサは、
ユーザの眼前に配置される透過型のディスプレイを有する眼前装着型のウェアラブル端末の位置、及び、前記ユーザの視線方向を取得し、
前記ユーザから直接視認できない位置に存在する機器の設置場所及び状況を示す機器情報に基づいて、前記ウェアラブル端末の位置から前記ユーザの視線方向にある前記機器の状況を前記ディスプレイに表示させる、
ことを特徴とする情報処理装置。

【請求項2】

プロセッサを備え、
前記プロセッサは、
カメラ及びディスプレイを有する携帯端末の位置、及び、前記カメラが向く方向を取得し、
前記カメラから直接視認できない位置に存在する機器の設置場所及び状況を示す機器情報に基づいて、前記携帯端末の位置から前記カメラが向く方向にある前記機器の状況を前記ディスプレイに表示させる、
ことを特徴とする情報処理装置。

【請求項3】

前記機器の状況は、前記カメラが取得した画像に重畳して表示される、
ことを特徴とする請求項２に記載の情報処理装置。

【請求項4】

前記機器の状況は、前記機器を用いて行われる作業の実行状況である、
ことを特徴とする請求項１から３のいずれか１項に記載の情報処理装置。

【請求項5】

前記作業の実行状況は、前記機器を用いた作業の進捗である、
ことを特徴とする請求項４に記載の情報処理装置。

【請求項6】

前記ユーザの作業は、前記機器を用いた作業の前工程又は後工程の作業であり、
前記プロセッサは、前記ユーザの作業の進捗を示すユーザ作業情報を参照し、前記ユーザの作業の進捗と前記機器を用いた作業の進捗との関連性を示す情報を前記ディスプレイに表示させる、
ことを特徴とする請求項５に記載の情報処理装置。

【請求項7】

前記ユーザは、第１生成物及び第２生成物を用いて作業を行い、
前記ユーザと関連する機器は、前記第１生成物を生成する機器及び前記第２生成物を生成する機器である、
ことを特徴とする請求項６に記載の情報処理装置。

【請求項8】

前記機器は複数設けられ、
前記プロセッサは、前記ユーザと前記ユーザに関連する前記機器との関連を示す関連情報に基づいて、複数の前記機器のうち、前記ユーザと関連する機器の状況を前記ディスプレイに表示させる、
ことを特徴とする請求項１から３のいずれか１項に記載の情報処理装置。

【請求項9】

コンピュータに、
ユーザの眼前に配置される透過型のディスプレイを有する眼前装着型のウェアラブル端末の位置、及び、前記ユーザの視線方向を取得させ、
前記ユーザから直接視認できない位置に存在する機器の設置場所及び状況を示す機器情報に基づいて、前記ウェアラブル端末の位置から前記ユーザの視線方向にある前記機器の状況を前記ディスプレイに表示させる、
ことを特徴とする情報処理プログラム。

【請求項10】

コンピュータに、
カメラ及びディスプレイを有する携帯端末の位置、及び、前記カメラが向く方向を取得させ、
前記カメラから直接視認できない位置に存在する機器の設置場所及び状況を示す機器情報に基づいて、前記携帯端末の位置から前記カメラが向く方向にある前記機器の状況を前記ディスプレイに表示させる、
ことを特徴とする情報処理プログラム。

【請求項11】

ユーザの眼前に配置される透過型のディスプレイを有する眼前装着型のウェアラブル端末と、
前記ユーザから直接視認できない位置に存在する機器と、
コンピュータと、
を備え、
前記コンピュータは、
前記ウェアラブル端末の位置、及び、前記ユーザの視線方向を取得し、
前記機器の設置場所及び状況を示す機器情報に基づいて、前記ウェアラブル端末の位置から前記ユーザの視線方向にある前記機器の状況を前記ディスプレイに表示させる、
ことを特徴とする情報処理システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報処理装置、情報処理プログラム、及び情報処理システムに関する。

【背景技術】

【0002】

特許文献１には、眼鏡型などのウェアラブル端末を装着したユーザの目の前にある物体の内部の詳細情報を当該ウェアラブル端末に表示させることが記載されている。また、非特許文献１には、スマートグラス（眼鏡型のウェアラブル端末）を装着したユーザが視認している物体に応じて、当該ユーザが行うべき作業に関する情報を当該スマートグラスに表示させることが記載されている。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０２０－１２９３５６号公報

【非特許文献】

【0004】

【非特許文献1】ＳＡＰジャパン公式ブログ、「ＳＡＰが描く近未来のユーザーエクスペリエンス（ＵＸ） 第２回：ウェアラブルデバイスを業務で活用する３つのシナリオ」（https://www.sapjp.com/blog/archives/10130）

【発明の概要】

【発明が解決しようとする課題】

【0005】

ところで、ユーザは、自分が視認できない位置に存在する機器の状況を把握したい場合がある。そのような場合において、ユーザが当該機器の状況を確認するならば、当該機器が見える位置までユーザが移動するか、あるいは、当該機器の状況を管理しているコンピュータにアクセスする操作をユーザが行う必要がある。

【0006】

本発明の目的は、機器が見える位置までユーザが移動する場合、あるいは、機器の状況を管理しているコンピュータにアクセスする操作をユーザが行う場合に比して、当該ユーザから視認できない位置にある機器の状況を当該ユーザが容易に把握可能とすることにある。

【課題を解決するための手段】

【0007】

請求項１に係る発明は、プロセッサを備え、前記プロセッサは、ユーザの眼前に配置される透過型のディスプレイを有する眼前装着型のウェアラブル端末の位置、及び、前記ユーザの視線方向を取得し、前記ユーザから直接視認できない位置に存在する機器の設置場所及び状況を示す機器情報に基づいて、前記ウェアラブル端末の位置から前記ユーザの視線方向にある前記機器の状況を前記ディスプレイに表示させる、ことを特徴とする情報処理装置である。
請求項２に係る発明は、プロセッサを備え、前記プロセッサは、カメラ及びディスプレイを有する携帯端末の位置、及び、前記カメラが向く方向を取得し、前記カメラから直接視認できない位置に存在する機器の設置場所及び状況を示す機器情報に基づいて、前記携帯端末の位置から前記カメラが向く方向にある前記機器の状況を前記ディスプレイに表示させる、ことを特徴とする情報処理装置である。
請求項３に係る発明は、前記機器の状況は、前記カメラが取得した画像に重畳して表示される、ことを特徴とする請求項２に記載の情報処理装置である。
請求項４に係る発明は、前記機器の状況は、前記機器を用いて行われる作業の実行状況である、ことを特徴とする請求項１から３のいずれか１項に記載の情報処理装置である。
請求項５に係る発明は、前記作業の実行状況は、前記機器を用いた作業の進捗である、
ことを特徴とする請求項４に記載の情報処理装置である。
請求項６に係る発明は、前記ユーザの作業は、前記機器を用いた作業の前工程又は後工程の作業であり、前記プロセッサは、前記ユーザの作業の進捗を示すユーザ作業情報を参照し、前記ユーザの作業の進捗と前記機器を用いた作業の進捗との関連性を示す情報を前記ディスプレイに表示させる、ことを特徴とする請求項５に記載の情報処理装置である。
請求項７に係る発明は、前記ユーザは、第１生成物及び第２生成物を用いて作業を行い、前記ユーザと関連する機器は、前記第１生成物を生成する機器及び前記第２生成物を生成する機器である、ことを特徴とする請求項６に記載の情報処理装置である。
請求項８に係る発明は、前記機器は複数設けられ、前記プロセッサは、前記ユーザと前記ユーザに関連する前記機器との関連を示す関連情報に基づいて、複数の前記機器のうち、前記ユーザと関連する機器の状況を前記ディスプレイに表示させる、ことを特徴とする請求項１から３のいずれか１項に記載の情報処理装置である。
請求項９に係る発明は、コンピュータに、ユーザの眼前に配置される透過型のディスプレイを有する眼前装着型のウェアラブル端末の位置、及び、前記ユーザの視線方向を取得させ、前記ユーザから直接視認できない位置に存在する機器の設置場所及び状況を示す機器情報に基づいて、前記ウェアラブル端末の位置から前記ユーザの視線方向にある前記機器の状況を前記ディスプレイに表示させる、ことを特徴とする情報処理プログラムである。
請求項１０に係る発明は、コンピュータに、カメラ及びディスプレイを有する携帯端末の位置、及び、前記カメラが向く方向を取得させ、前記カメラから直接視認できない位置に存在する機器の設置場所及び状況を示す機器情報に基づいて、前記携帯端末の位置から前記カメラが向く方向にある前記機器の状況を前記ディスプレイに表示させる、ことを特徴とする情報処理プログラムである。
請求項１１に係る発明は、ユーザの眼前に配置される透過型のディスプレイを有する眼前装着型のウェアラブル端末と、前記ユーザから直接視認できない位置に存在する機器と、コンピュータと、を備え、前記コンピュータは、前記ウェアラブル端末の位置、及び、前記ユーザの視線方向を取得し、前記機器の設置場所及び状況を示す機器情報に基づいて、前記ウェアラブル端末の位置から前記ユーザの視線方向にある前記機器の状況を前記ディスプレイに表示させる、ことを特徴とする情報処理システムである。

【発明の効果】

【0008】

請求項１、２、９、１０、又は１１に係る発明によれば、機器が見える位置までユーザが移動する場合、あるいは、機器の状況を管理しているコンピュータにアクセスする操作をユーザが行う場合に比して、当該ユーザから視認できない位置にある機器の状況を当該ユーザが容易に把握することができる。
請求項３に係る発明によれば、現実世界を拡張する形で、ユーザから視認できない位置にある機器の状況をディスプレイに表示させることができる。
請求項４に係る発明によれば、ユーザは、ユーザから視認できない位置にある機器を用いて行われる作業の実況状況を把握することができる。
請求項５に係る発明によれば、ユーザは、ユーザから視認できない位置にある機器における作業進捗を把握することができる。
請求項６に係る発明によれば、ユーザ自身が行う作業の進捗と、当該作業の前工程又は後工程の作業である、ユーザから視認できない位置にある機器を用いた作業の進捗との関連性を把握することができる。
請求項７に係る発明によれば、第１生成物及び第２生成物を用いて行うユーザの作業の進捗と、第１生成物を生成する機器及び第２生成物を生成する機器を用いた作業の進捗との関連性を把握することができる。
請求項８に係る発明によれば、ユーザと関連しない機器の状況をディスプレイに表示させないようにすることができる。

【図面の簡単な説明】

【0009】

【図1】第１実施形態に係る情報処理システムの構成概略図である。

【図2】ウェアラブル端末の構成概略図である。

【図3】サーバの構成概略図である。

【図4】第１実施形態において、ウェアラブル端末を装着したユーザが、ユーザから直接視認できない機器の方向を見た様子の第１の例を示す図である。

【図5】ユーザがウェアラブル端末を通して見る像の第１の例を示す図である。

【図6】第１実施形態において、ウェアラブル端末を装着したユーザが、ユーザから直接視認できない機器の方向を見た様子の第２の例を示す図である。

【図7】ユーザがウェアラブル端末を通して見る像の第２の例を示す図である。

【図8】ユーザがウェアラブル端末を通して見る像の第３の例を示す図である。

【図9】第１実施形態のサーバの処理の流れを示すフローチャートである。

【図10】第２実施形態に係る情報処理システムの構成概略図である。

【図11】携帯端末の構成概略図である。

【図12】第２実施形態において、ユーザが、ユーザから直接視認できない機器の方向に携帯端末のカメラを向けた様子の例を示す図である。

【図13】携帯端末のディスプレイに表示される画面の例を示す図である。

【発明を実施するための形態】

【0010】

＜第１実施形態＞
図１は、第１実施形態に係る情報処理システム１０の構成概略図である。情報処理システム１０は、１又は複数の機器１２、ユーザが装着するウェアラブル端末１４、及び、情報処理装置としてのサーバ１６を含んで構成される。機器１２、ウェアラブル端末１４、及びサーバ１６は、例えばインターネット回線、ＬＡＮ（Local Area Network）あるいは携帯電話通信回線などを含む通信回線１８を介して互いに通信可能に接続される。

【0011】

１又は複数の機器１２の内の少なくとも一部は、ウェアラブル端末１４を装着したユーザから直接視認できない位置に存在している。例えば、機器１２は、ユーザが居る部屋とは異なる部屋に配置されている。また、例えば、機器１２は、ユーザが居るフロア（階）とは異なるフロアに配置されている。また、例えば、機器１２は、パーティションや箱などによりユーザと隔てられた空間に配置されている。

【0012】

本実施形態に係る機器１２は、印刷処理を実行するプリンタ、及び、印刷の前処理又は後処理を行う加工機を含んで構成される。印刷の前処理とは、例えば、印刷に用いる印刷版を作成するプリプレス処理などである。印刷の後処理とは、例えば、印刷済みの用紙を折る折加工処理や製本処理などである。このように、複数の機器１２は、一連の複数の工程のうちの一部をそれぞれ担当するものであってよい。換言すれば、一の機器１２により処理された処理生成物に対して、他の機器１２がさらに処理を行うようにしてもよい。もちろん、機器１２としては、印刷処理や、その前処理及び後処理以外の処理を行うものであってもよい。

【0013】

図２は、ウェアラブル端末１４の構成概略図である。ウェアラブル端末１４は、ユーザが着用することができる装置である。特に、ウェアラブル端末１４は、ユーザの眼前に配置される透過型のディスプレイを有する眼前装着型のウェアラブル端末１４である。このようなウェアラブル端末１４としては、例えば、スマートグラスと呼ばれる眼鏡型のもの、あるいは、ユーザの角膜に接触させて装着されるコンタクトレンズ型のものが挙げられる。

【0014】

通信インターフェース３０は、例えばネットワークモジュールなどを含んで構成される。通信インターフェース３０は、通信回線１８を介してサーバ１６と通信する機能を発揮する。

【0015】

ディスプレイ３２は、例えば有機ＥＬを含んで構成される。ディスプレイ３２は、上述のように透過型のディスプレイである。透過型のディスプレイとは、ディスプレイの向こう側が透けて見えるディスプレイである。このようなディスプレイに画像が表示されると、ユーザからは、ディスプレイの向こう側の背景に当該画像が重畳されたように見える。

【0016】

ＧＰＳセンサ３４は、複数のＧＰＳ衛星からの電波を受信するものである。ＧＰＳセンサ３４が受信した受信情報は、通信インターフェース３０からサーバ１６に送信される。又は、ＧＰＳセンサ３４が、受信情報からウェアラブル端末１４の位置（緯度、経度、高度）を示す位置情報を演算してもよい。その場合は、演算された位置情報がサーバ１６に送信される。

【0017】

視線検出センサ３６は、ウェアラブル端末１４を装着したユーザの視線方向を検出するセンサである。ユーザの視線検出方法としては、既知のアイトラッキング技術を用いることができる。例えば、視線検出センサ３６は、ユーザの角膜上に生じさせた光の反射点を撮影するカメラであってよい。この場合、光の反射点などの特徴に基づいてユーザの視線方向が検出される。また、視線検出センサ３６は、眼球を動かすための筋肉が生じさせる電位を測定する電極であってよい。この場合、当該電極が測定した電位に基づいてユーザの視線方向が検出される。

【0018】

また、ウェアラブル端末１４の姿勢をユーザの視線方向とみなすようにしてもよい。より詳しくは、ディスプレイ３２が向く方向（例えば、ディスプレイ３２に垂直な方向であってユーザ側とは反対側に向く方向）をユーザの視線方向とみなすようにしてもよい。この場合は、視線検出センサ３６としては、例えば、直交する３軸方向におけるウェアラブル端末１４の加速度を検出する加速度センサであってよい。キャリブレーションをした上で、当該加速度センサの検出信号に基づいて、ウェアラブル端末１４（特にディスプレイ３２）の姿勢を検出することができる。加速度センサが検出した姿勢が示す向きをユーザの視線方向とみなすことができる。

【0019】

視線検出センサ３６によって検出されたユーザの視線方向を示す視線方向情報は、通信インターフェース３０からサーバ１６に送信される。

【0020】

メモリ３８は、例えば、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、あるいはフレキシブルメモリ素子などを含んで構成される。メモリ３８には、当該ウェアラブル端末１４を一意に識別する端末ＩＤが記憶されている。

【0021】

プロセッサ４０は、広義的なプロセッサを指し、汎用的なプロセッサ（例えばＣＰＵ（Central Processing Unit）など）、及び、専用の処理装置（例えばＧＰＵ（Graphics Processing Unit）、ＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field-Programmable Gate Array）、あるいは、プログラマブル論理デバイスなど）の少なくとも１つを含んで構成される。プロセッサ４０としては、１つの処理装置によるものではなく、物理的に離れた位置に存在する複数の処理装置の協働により構成されるものであってもよい。プロセッサ４０は、ウェアラブル端末１４の各部を制御する。また、図２に示す通り、プロセッサ４０は表示処理部４２として機能する。

【0022】

表示処理部４２は、通信インターフェース３０がサーバ１６から受信した表示制御信号に従って、種々の画面をディスプレイ３２に表示させる処理を行う。ディスプレイ３２に表示される画面の詳細については後述する。

【0023】

図３は、サーバ１６の構成概略図である。サーバ１６は、例えばサーバコンピュータなどにより構成されるが、以下に説明する機能を発揮する限りにおいてどのような装置であってもよい。また、以下に説明するサーバ１６の機能は、複数のコンピュータにより実現されてもよい。

【0024】

詳しくは後述するが、本実施形態では、サーバ１６は、機器１２を用いて行われる作業を管理する作業管理装置として用いられる。例えば、機器１２を用いた作業のワークフロー（誰が、どの機器１２を用いて、どの工程の作業を行うかなど）や、ワークフローの作業進捗などがサーバ１６に記憶される。また、サーバ１６で管理されているワークフローに関する情報をユーザが閲覧可能となっていてもよい。

【0025】

通信インターフェース５０は、例えばネットワークモジュールなどを含んで構成される。通信インターフェース５０は、通信回線１８を介して、機器１２及びウェアラブル端末１４と通信する機能を発揮する。

【0026】

メモリ５２は、例えば、ＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Drive）、ｅＭＭＣ（embedded MultiMediaCard）、ＲＯＭ、あるいはＲＡＭなどを含んで構成される。メモリ５２には、サーバ１６の各部を機能させるための情報処理プログラムが記憶される。また、図３に示す通り、メモリ５２には、ユーザＤＢ（Data Base）５４、機器情報としての機器ＤＢ５６、及びワークフローＤＢ５８が記憶される。

【0027】

ユーザＤＢ５４には、予めサーバ１６にユーザ登録したユーザに関する情報が記憶される。具体的には、ユーザＤＢ５４には、ユーザを一意に識別するユーザＩＤ、及び、当該ユーザが使用するウェアラブル端末１４を識別する端末ＩＤとが関連付けられて記憶されている。ユーザＤＢ５４に記憶される各情報は、ユーザ登録する際にユーザによってサーバ１６に入力される。

【0028】

機器ＤＢ５６には、機器１２に関する情報が記憶されている。具体的には、機器１２を一意に識別する機器ＩＤ、当該機器１２の製品情報（型番、機能、能力などを示す情報）、当該機器１２を示す画像、当該機器１２が設置されている場所を示す設置場所情報、及び、当該機器１２の状況を示す機器状況情報が関連付けられて記憶される。機器ＤＢ５６に記憶される、機器状況情報以外の情報は、サーバ１６の管理者などによってサーバ１６に入力される。

【0029】

機器状況情報は、各機器１２からサーバ１６へ間欠的に送信される。機器状況情報が示す機器１２の状況とは、例えば、機器１２の状態（例えば正常稼働可能か否かなど）、機器１２を用いて行われる作業の実行状況（例えば機器１２が稼働中であるか否か、どのような作業を行っているかなど）、機器１２を用いて行われる作業の進捗（どこまで進んでいるか、予定通り進んでいるかなど）などを含む概念である。

【0030】

ワークフローＤＢ５８は、機器１２を用いて行われる作業を管理するための情報が記憶される。例えば、ワークフローＤＢ５８には、機器１２を用いた作業のワークフローに関する情報が記憶される。具体的に、複数の工程からなるワークフローであって各工程に関する作業を各機器１２を用いて行うワークフローを、１又は複数のユーザが行う場合を考える。この場合、ワークフローＤＢ５８には、当該ワークフローに含まれる各工程について、当該工程の作業を実行するユーザのユーザＩＤと、当該工程の作業を行う機器１２の機器ＩＤと、当該工程で行われる作業内容とが関連付けられている。その上で、ワークフローＤＢ５８には、各工程の実行順序を示す情報も記憶される。すなわち、ワークフローＤＢ５８においては、誰が、どの機器１２を用いて、どのような作業を、どのような順番で行うかを示す情報が記憶されている。例えば、第１工程として第１の機器１２を用いてユーザＡが作業Ａを行い、その後、第２工程として第２の機器１２を用いてユーザＢが作業Ｂを行う、の如くである。あるいは、第１工程として第１の機器１２及び第２の機器１２により作業Ａ及びＢが行われ、第２工程として、第１工程で第１の機器１２が作業Ａにより出力した第１生成物、及び第１工程で第２の機器１２が作業Ｂにより出力した第２生成物を用いてユーザが作業Ｃを行う、などの如くである。上述のような、ワークフローＤＢ５８に記憶されるワークフローの定義は、ユーザによって登録可能であってよい。

【0031】

また、各工程に係る作業が完了する度に、当該作業を行う機器１２が作業完了通知をサーバ１６へ送信することで、サーバ１６は、ワークフローにおいてどの工程の作業まで完了したのか、すなわち、ワークフローの作業進捗がワークフローＤＢ５８に記憶することができる。

【0032】

プロセッサ６０は、広義的なプロセッサを指し、汎用的なプロセッサ（例えばＣＰＵなど）、及び、専用の処理装置（例えばＧＰＵ、ＡＳＩＣ、ＦＰＧＡ、あるいは、プログラマブル論理デバイスなど）の少なくとも１つを含んで構成される。プロセッサ６０としては、１つの処理装置によるものではなく、物理的に離れた位置に存在する複数の処理装置の協働により構成されるものであってもよい。また、図３に示す通り、プロセッサ６０は、メモリ５２に記憶された情報処理プログラムに従って、位置方向取得部６２、及び、表示制御部６４としての機能を発揮する。

【0033】

位置方向取得部６２は、ウェアラブル端末１４の位置を取得する。具体的には、位置方向取得部６２は、ウェアラブル端末１４のＧＰＳセンサ３４がＧＰＳ衛星から受信した受信情報をウェアラブル端末１４から受信し、当該受信情報に基づいて、ウェアラブル端末１４の位置（緯度、経度、高度）を取得する。あるいは、ＧＰＳセンサ３４がウェアラブル端末１４の位置を演算している場合には、位置方向取得部６２は、ウェアラブル端末１４からウェアラブル端末１４の位置を示す位置情報を取得する。なお、ウェアラブル端末１４の位置は、ユーザの位置であるとも言える。

【0034】

また、位置方向取得部６２は、ウェアラブル端末１４を装着したユーザの視線方向を取得する。具体的には、ウェアラブル端末１４の視線検出センサ３６が検出した視線方向情報をウェアラブル端末１４から受信し、当該視線方向情報に基づいてユーザの視線方向を取得する。

【0035】

さらに、位置方向取得部６２は、ウェアラブル端末１４の位置及びユーザの視線方向に基づいて、ユーザの視野を取得する。ユーザの視野は、ウェアラブル端末１４の位置を基準（基点）とし、ユーザの視線方向を中心とする所定の視野角内の領域である。

【0036】

表示制御部６４は、位置方向取得部６２が取得した、ウェアラブル端末１４の位置からユーザの視線方向にある機器１２の状況を当該ウェアラブル端末１４のディスプレイ３２に表示させる制御を行う。特に、当該機器１２は、当該ユーザから直接視認できない位置に存在する機器１２である。以下、図４～図８を参照しつつ、位置方向取得部６２及び表示制御部６４の処理の詳細を説明する。

【0037】

図４は、ウェアラブル端末１４を装着したユーザＵが機器１２の方向を見た第１の例を示す図である。図４の例では、ユーザＵは建物の２階におり、複数の機器１２は１階に設置されている。２階の床ＦＬは不透明であり、ユーザＵから複数の機器１２を直接視認できなくなっている。

【0038】

この環境において、ユーザＵがウェアラブル端末１４を装着し、その視線方向を機器１２の方向（つまり床ＦＬの方向）に向けたとする。このとき、ウェアラブル端末１４からは、当該ウェアラブル端末１４の端末ＩＤ、ＧＰＳセンサ３４が受信した受信情報(又はウェアラブル端末１４の位置を示す位置情報)、及び、ユーザの視線方向Ｌを示す視線方向情報がサーバ１６に送信される。

【0039】

サーバ１６の位置方向取得部６２は、ウェアラブル端末１４からの情報に基づいて、端末ＩＤが示すウェアラブル端末１４（換言すればユーザＵ）の位置、及び、ユーザＵの視線方向Ｌを取得する。さらに、位置方向取得部６２は、ユーザＵの視野ＦＶｗを取得する。

【0040】

サーバ１６の表示制御部６４は、機器ＤＢ５６に記憶されている各機器１２の設置場所を示す設置場所情報を参照し、ウェアラブル端末１４の位置からユーザＵの視線方向Ｌにある（より詳しくはユーザＵの視野ＦＶｗ内にある）機器１２を特定する。図４の例では、機器１２ａ及び１２ｂが特定される。

【0041】

その上で、表示制御部６４は、機器ＤＢ５６を参照し、特定した機器１２（ここでは機器１２ａ及び１２ｂ）に関する情報を取得し、当該情報をウェアラブル端末１４のディスプレイ３２に表示させる表示制御信号を、受信した端末ＩＤが示すウェアラブル端末１４に送信する。機器１２に関する情報とは、例えば、当該機器１２の製品情報、当該機器１２を示す画像、及び、当該機器１２の機器状況情報などが含まれる。これにより、表示制御部６４は、特定した機器１２に関する情報をディスプレイ３２に表示させる。

【0042】

図５は、ディスプレイ３２に表示される情報の第１の例を示す図である。ウェアラブル端末１４の表示処理部４２は、サーバ１６から受信した表示制御信号に基づいて、ディスプレイ３２に機器１２に関する情報を表示させる。例えば、機器１２の画像７０、機器１２の機器状況情報７２などをディスプレイ３２に表示させる。図５の例では、ディスプレイ３２には、機器１２ａの画像７０ａ、機器１２ａの機器状況情報７２ａ、機器１２ｂの画像７０ｂ、機器１２ｂの機器状況情報７２ｂが表示されている。上述の通り、ディスプレイ３２は透過型のディスプレイであるから、ユーザＵから見ると、ディスプレイ３２を介して見える背景（図５の例では床ＦＬ）に重畳して、これらの情報が表示されているように見える。

【0043】

あたかも床ＦＬを透過して各機器１２に関する情報を見ているようにユーザに感じさせるために、機器１２に関する情報は、ユーザＵから見たときの当該機器１２の設置場所に応じた位置に表示されるとよい。例えば、図４の例では、ユーザＵから見ると、機器１２ａは、機器１２ｂの右側にあるように見える。したがって、表示制御部６４は、機器１２ａに関する情報を機器１２ｂに関する情報の右側に表示させるとよい。また、表示制御部６４は、画像７０の周りに単一色（例えば白）の背景抜き画像７４を表示させるようにしてもよい。

【0044】

図５の例では、機器状況情報７２として、機器１２を用いて行われる作業の実行状況が表示されている。例えば、機器状況情報７２ａによれば、機器１２ａが「作業５の印刷処理中」であることが示され、機器状況情報７２ｂによれば、機器１２ｂが「待機中」であることが示されている。

【0045】

また、機器状況情報７２として、機器１２を用いて行われる作業の進捗が表示されてもよい。例えば、機器状況情報７２ａによれば、機器１２ａを用いて行われる作業の進捗として、「処理完了まで９０分」であることが示されている。

【0046】

なお、機器状況情報７２が示す情報としては、上記のものに限られない。例えば、機器１２の製品情報（型番、機能、能力など）が表示されてもよい。

【0047】

このように、ユーザＵが直接視認できない機器１２の状況がディスプレイ３２に表示されるから、当該機器１２が見える位置までユーザＵが移動する場合、あるいは、当該機器１２の状況を管理しているコンピュータにアクセスする操作をユーザＵが行う場合に比して、当該機器１２の状況をユーザＵが容易に把握することができる。

【0048】

図６は、ウェアラブル端末１４を装着したユーザＵが機器１２の方向を見た第２の例を示す図である。図６の例では、ユーザＵは、機器１２ｄ～１２ｆが設置された部屋とは別の部屋にいる。なお、ユーザがいる部屋には機器１２ｇが設置されている。ユーザがいる部屋と、機器１２ｄ～１２ｆが設置された部屋とを仕切る壁Ｗは不透明であり、ユーザＵから機器１２ｄ～１２ｆを直接視認できなくなっている。

【0049】

図６の例では、機器１２ｄを用いて行われる作業、機器１２ｅを用いて行われる作業、及び、ユーザＵが機器１２ｇを用いて行う作業は、１つのワークフローＸに含まれる作業であるとする。機器１２ｆを用いて行う作業は、当該ワークフローＸに含まれない作業であるとする。ワークフローＸの例としては、例えば、工程Ａ、工程Ａの後に行われる工程Ｂ、工程Ｂの後に行われる工程Ｃを含み、ユーザＵ以外の他のユーザが機器１２ｄを用いて工程Ａの作業を行い、ユーザＵ以外の他のユーザが機器１２ｅを用いて工程Ｂの作業を行い、ユーザＵが機器１２ｇを用いて工程Ｃの作業を行うものである。あるいは、ユーザＵ以外の他のユーザが機器１２ｄを用いて工程Ａの作業を行い、ユーザＵが機器１２ｇを用いて工程Ｂの作業を行い、ユーザＵ以外の他のユーザが機器１２ｅを用いて工程Ｃの作業を行うものである。このように、ユーザＵが行う作業は、機器１２ｄ又は１２ｅを用いた作業の前工程又は後工程の作業であってよい。このようなワークフローＸに関する情報は、上述のように、ワークフローＤＢ５８に記憶されている。ここで、ユーザが行う作業と同じワークフロー（上記例ではワークフローＸ）に属している作業を行う機器（上記例では機器１２ｄ及び機器１２ｅ）は、ユーザＵと関連している機器であると言える。すなわち、ユーザＵが行う作業を含むワークフローＸに関する情報は、ユーザＵと、ユーザＵに関連する機器１２との関連を示す関連情報であると言える。

【0050】

ここでは、ワークフローＸは、くるみ製本処理を行うワークフローであるとする。具体的には、ワークフローＸは、ユーザＵ以外のユーザが、工程Ａとして、機器１２ｄを用いて第１生成物としての表紙の印刷処理を行い、ユーザＵ以外のユーザが、工程Ｂとして、機器１２ｅを用いて第２生成物としての本身の印刷処理を行い、ユーザＵが、工程Ｃとして、機器１２ｇを用いて当該表紙及び当該本身を用いてくるみ製本処理を行うものであるとする。

【0051】

図６の例において、ユーザＵがウェアラブル端末１４を装着し、その視線方向を機器１２の方向（つまり壁Ｗの方向）に向けたとする。このとき、ウェアラブル端末１４からは、当該ウェアラブル端末１４の端末ＩＤ、ＧＰＳセンサ３４が受信した受信情報(又はウェアラブル端末１４の位置を示す位置情報)、及び、ユーザの視線方向Ｌを示す視線方向情報がサーバ１６に送信される。サーバ１６の位置方向取得部６２は、ウェアラブル端末１４（換言すればユーザＵ）の位置、ユーザＵの視線方向Ｌ、及び、ユーザＵの視野ＦＶｗを取得する。

【0052】

サーバ１６の表示制御部６４は、機器ＤＢ５６に記憶されている各機器１２の設置場所を示す設置場所情報を参照し、ユーザＵの視線方向Ｌにある（より詳しくはユーザＵの視野ＦＶｗ内にある）機器１２を特定する。

【0053】

図６の例では、ユーザの視線方向Ｌ（視野ＦＶｗ内）には、機器１２ｄ、機器１２ｅ、及び機器１２ｆの３つの機器１２がある。ここで、サーバ１６の表示制御部６４は、ユーザＵと、ユーザＵに関連する機器１２との関連を示す関連情報に基づいて、ユーザＵの視線方向Ｌにある複数の機器１２のうち、ユーザＵと関連する機器１２の状況をディスプレイ３２に表示させるようにしてもよい。本例では、ワークフローＤＢ５８に記憶されているワークフローＸに関する情報を関連情報として用いる。

【0054】

表示制御部６４は、ユーザＤＢ５４を参照し、ウェアラブル端末１４から取得した端末ＩＤに基づいて、当該ウェアラブル端末１４を装着しているユーザＵのユーザＩＤを特定する。次いで、表示制御部６４は、ワークフローＤＢ５８を参照し、ユーザＵが行う作業が含まれるワークフローＸを特定する。そして、表示制御部６４は、ワークフローＸに関する情報に基づいて、ユーザの視線方向Ｌにある機器１２のうち、ワークフローＸに含まれる作業を行う機器１２を特定する。ここでは、機器１２ｄ及び１２ｅが特定される。そして、表示制御部６４は、特定した機器１２ｄ及び１２ｅに関する情報をウェアラブル端末１４のディスプレイ３２に表示させる表示制御信号をウェアラブル端末１４に送信する。これにより、ディスプレイ３２には、ユーザＵの視線方向Ｌにある複数の機器１２のうち、ユーザＵと関連する機器１２のみの状況が表示される。

【0055】

図７は、ディスプレイ３２に表示される情報の第２の例を示す図である。上述のように、ディスプレイ３２には、ユーザＵに関連する機器１２のみに関する情報が表示される。したがって、図７に示すように、機器１２ｄに関する画像７０ｄ及び機器状況情報７２ｄ、並びに、機器１２ｅに関する画像７０ｅ及び機器状況情報７２ｅがディスプレイ３２に表示されている。ここで、ユーザＵの視線方向Ｌにある機器１２であって、ユーザＵとは関連しない機器１２ｆに関する情報はディスプレイ３２に表示されていないことに留意されたい。

【0056】

これにより、ユーザＵにとって不必要な情報はディスプレイ３２には表示されないため、ディスプレイ３２の表示が煩雑になるのを抑制することができる。

【0057】

なお、上記した、くるみ製本処理を行うワークフローＸの例では、ユーザＵに関連する機器１２は、ワークフローＸに含まれる作業を行う機器１２であったが、ユーザＵに関連する機器１２としてはこれには限られない。例えば、ユーザＵが複数の機器１２の管理者である場合、ユーザＵに関連する機器１２とは、ユーザＵの管理対象の機器１２であってもよい。この場合は、ユーザＤＢ５４には、ユーザＵのユーザＩＤには、ユーザＵの管理対象の機器１２の機器ＩＤが関連付けられている。表示制御部６４は、ユーザＤＢ５４を参照することで、ユーザＵに関連する機器１２（ユーザＵの管理対象の機器１２）を特定することができる。すなわち、この場合、ユーザＤＢ５４に記憶されている情報が関連情報となる。また、例えば、ユーザＵが機器１２の修理担当者である場合、ユーザＵに関連する機器１２とは、故障中の機器１２であってもよい。この場合、表示制御部６４は、機器ＤＢ５６に記憶されている機器１２の状態を参照することで、ユーザＵに関連する機器１２（故障中の機器１２）を特定することができる。すなわち、この場合、機器ＤＢ５６に記憶されている機器１２の状態を示す情報が関連情報となる。

【0058】

ワークフローにおいて、ユーザＵが行う作業が、ユーザＵから視認できない位置にある機器１２を用いて行う作業の前工程又は後工程にある場合、表示制御部６４は、ユーザＵの作業の進捗と、その前工程又は後工程にある、当該機器１２を用いて行う作業の進捗との関連性を示す情報をディスプレイ３２に表示させるようにしてもよい。

【0059】

例えば、上記した、くるみ製本処理を行うワークフローＸの例では、ユーザＵが機器１２ｇを用いて行う作業（工程Ｃ）は、機器１２ｄを用いて行う表紙の印刷処理（工程Ａ）及び機器１２ｅを用いて行う本身の印刷処理（工程Ｂ）の後工程である。この場合、表示制御部６４は、まず、ワークフローＤＢ５８を参照して、ワークフローＸに関する情報（工程の順番、各工程の作業を行うユーザ及び機器１２など）を取得する。次いで、機器ＤＢ５６を参照し、ユーザＵの作業に用いる機器１２ｇ、並びに、その前工程で用いる機器１２ｄ及び１２ｅの機器状況情報から、機器１２ｄ、１２ｅ、及び１２ｇの作業進捗を取得する。ここで、機器ＤＢ５６に記憶されている、ユーザＵの作業に用いる機器１２ｇの機器状況情報が、ユーザの作業の進捗を示すユーザ作業情報に相当する。表示制御部６４は、取得した１２ｇの作業進捗（すなわちユーザＵの作業進捗）と、その前工程で用いる機器１２ｄ及び１２ｅの作業進捗とに基づいて、ディスプレイ３２に、各機器１２を用いて行う作業の進捗の関連性を示す情報を表示させる。

【0060】

図８は、ユーザＵが行う作業の進捗と、その前工程である機器１２を用いた作業の進捗との関連性を示す情報がディスプレイ３２に表示された例を示す図である。例えば、前工程である機器１２ｄ及び１２ｅを用いた作業（すなわち工程Ａ及び工程Ｂ）に対して、その後工程である、ユーザＵが機器１２ｇを用いて行う作業（すなわち工程Ｃ）が遅れている場合、表示制御部６４は、図８に示すように、ディスプレイ３２に、ユーザＵの作業が前工程の作業に比して遅れていることを示す通知メッセージ７６を表示させる。これにより、ユーザＵは、自らの作業が前工程の作業に比して遅れていることを把握することができる。

【0061】

逆に、前工程である機器１２ｄ及び１２ｅを用いた作業（すなわち工程Ａ及び工程Ｂ）に対して、その後工程である、ユーザＵが機器１２ｇを用いて行う作業（すなわち工程Ｃ）が進んでいる場合、表示制御部６４は、ユーザＵの作業が前工程の作業に比して進んでいることを示す通知メッセージを表示させる。これにより、ユーザは、自らの作業が前工程の作業に比して進んでいることを把握することができる。

【0062】

ユーザＵが機器１２ｇを用いて行う作業が、機器１２ｄを用いて行う作業の前工程である場合も同様である。すなわち、後工程である機器１２ｄを用いた作業に対して、その前工程である、ユーザＵが機器１２ｇを用いて行う作業が遅れている（あるいは進んでいる）場合、表示制御部６４は、ユーザＵの作業が遅れている（あるいは進んでいる）ことを示す通知メッセージ７６をディスプレイ３２に表示させる。

【0063】

本例では、ユーザＵの作業の進捗と、その前工程又は後工程にある機器１２を用いて行う作業の進捗との関連性を示す情報が、通知メッセージ７６の形でディスプレイ３２に表示されていたが、当該情報は、通知メッセージ７６以外の方法でディスプレイ３２に表示させてもよい。例えば、ユーザＵの作業の進捗と、前工程又は後工程にある機器１２を用いて行う作業の進捗との関連性に応じて、機器１２の画像７０又は機器状況情報７２の表示態様を変更するようにしてもよい。例えば、ユーザＵの作業の進捗が進んでいる場合には、機器状況情報７２を青色で表示し、ユーザＵの作業の進捗が遅れている場合には、機器状況情報７２を赤色で表示する、の如くである。もちろん、ユーザＵの作業の進捗と、その前工程又は後工程にある機器１２を用いて行う作業の進捗との関連性を示す情報の表示の仕方は、上記に限られるものではない。

【0064】

以下、図９に示すフローチャートに従って、第１実施形態に係るサーバ１６の処理の流れを説明する。

【0065】

ステップＳ１０において、サーバ１６は、端末ＩＤ、ＧＰＳ衛星から受信した受信情報（又はウェアラブル端末１４の位置を示す位置情報）、及び、ユーザの視線方向を示す視線方向情報をウェアラブル端末１４から受信する。位置方向取得部６２は、これらの情報に基づいて、ウェアラブル端末１４の位置、ユーザの視線方向及び視野を取得する。

【0066】

ステップＳ１２において、表示制御部６４は、機器ＤＢ５６の設置場所情報を参照し、ステップＳ１０で取得したユーザの視線方向にある機器１２を特定する。表示制御部６４は、特定された機器１２のうちの１つの機器１２を選択する。

【0067】

ステップＳ１４において、表示制御部６４は、ステップＳ１２で選択された機器１２が、当該ユーザと関連する機器１２であるか否かを判定する。例えば、表示制御部６４は、ユーザＤＢ５４及びステップＳ１０で受信した端末ＩＤに基づいて、当該ウェアラブル端末１４を装着しているユーザのユーザＩＤを特定し、ワークフローＤＢ５８を参照し、当該ユーザが行う作業が含まれるワークフローを特定する。そして、ステップＳ１２で選択した機器１２が、特定したワークフローに含まれる作業を行うものであるか否かを判定する。ステップＳ１２で選択された機器１２が、当該ユーザと関連する機器１２である場合、ステップＳ１６に進み、そうでない場合は、ステップＳ１６をバイパスしてステップＳ１８に進む。

【0068】

ステップＳ１６において、表示制御部６４は、ステップＳ１２で選択した機器１２に関する機器状況情報を機器ＤＢ５６から取得し、当該機器状況情報をウェアラブル端末１４のディスプレイ３２に表示させる。

【0069】

ステップＳ１８において、ユーザの視線方向にある機器１２のうち、ステップＳ１４及びＳ１６の処理を行っていない機器１２が有るか否かを判定する。有る場合は、ステップＳ１２に戻り、ユーザの視線方向にある機器１２のうちの他の機器を選択してステップＳ１４及びＳ１６の処理を繰り返す。無い場合は処理を終了する。

【0070】

＜第２実施形態＞
図１０は、第２実施形態に係る情報処理システム１００の構成概略図である。第２実施形態に係る情報処理システム１００は、第１実施形態に係る情報処理システム１０に比して、ユーザが、ウェアラブル端末１４に代えて、携帯端末１０２を用いる点において異なる。以下、図１０～図１３を用いて第２実施形態を説明するが、第１実施形態と同様な構成要件については、第１実施形態と同じ符号を付し、その説明は省略する。

【0071】

図１１は、携帯端末１０２の構成概略図である。携帯端末１０２は、ユーザが携帯可能な端末であり、例えば、スマートフォンなどのタブレット端末などである。図１１に示す通り、携帯端末１０２は、第１実施形態に係るウェアラブル端末１４と同様の構成要件を含むが、ウェアラブル端末１４と異なる構成要件として、ディスプレイ１０４、カメラ１０６、及び加速度センサ１０８を備える。

【0072】

ディスプレイ１０４は、例えば液晶ディスプレイや有機ＥＬを含んで構成される。第１実施形態のウェアラブル端末１４のディスプレイ３２は透過型のディスプレイであったが、ディスプレイ１０４は、ディスプレイの向こう側が透けて見えない不透過型のディスプレイとなっている。なお、ディスプレイ１０４も透過型のディスプレイであってもよい。また、ディスプレイ１０４は、カメラ１０６が取得した画像をリアルタイムで表示する、いわゆるライブビューモニタとしても機能する。

【0073】

カメラ１０６は、レンズは撮像素子などを含んで構成される。カメラ１０６はデジタルカメラであり、撮影画像を画像データとして取得可能なものである。

【0074】

加速度センサ１０８は、直交する３軸方向における携帯端末１０２の加速度を検出するセンサである。キャリブレーションをした上で、加速度センサ１０８の検出信号に基づいて、携帯端末１０２（特にカメラ１０６）の姿勢を検出することができる。加速度センサ１０８が検出した姿勢に基づいて、カメラ１０６が向く方向（例えば、カメラ１０６のレンズ表面に垂直な方向であって携帯端末１０２から離れる方向）を取得することができる。加速度センサ１０８の検出信号は、通信インターフェース３０からサーバ１６に送信される。

【0075】

図１２は、ユーザＵが携帯端末１０２のカメラ１０６を機器１２の方向に向けた例を示す図である。第１実施形態の図４同様、図１２の例では、ユーザＵは建物の２階におり、複数の機器１２は１階に設置されている。２階の床ＦＬは不透明であり、携帯端末１０２のカメラ１０６から複数の機器１２を直接視認できなくなっている。なお、カメラ１０６から機器１２が直接視認できない、とは、カメラ１０６が機器１２を直接撮影することができないことを意味する。携帯端末１０２はユーザＵにより携帯されているため、カメラ１０６が機器１２を直接視認できない場合、基本的に、ユーザＵも当該機器１２を直接視認できない。

【0076】

この環境において、ユーザＵが、加速度センサ１０８のキャリブレーションをした上で、携帯端末１０２のカメラ１０６を機器１２の方向（つまり床ＦＬの方向）に向けたとする。このとき、携帯端末１０２からは、当該携帯端末１０２の端末ＩＤ、ＧＰＳセンサ３４が受信した受信情報(又は携帯端末１０２の位置を示す位置情報)、及び、加速度センサ１０８の検出信号がサーバ１６に送信される。

【0077】

サーバ１６の位置方向取得部６２は、携帯端末１０２からの情報に基づいて、端末ＩＤが示す携帯端末１０２の位置、及び、カメラ１０６が向く方向Ｄを取得する。さらに、位置方向取得部６２は、カメラ１０６の視野ＦＶｃ（カメラ１０６で撮影可能な範囲）を取得する。カメラ１０６の視野ＦＶｃは、カメラ１０６の位置を基準（基点）とし、カメラ１０６の方向Ｄを中心とする所定の画角内の領域である。

【0078】

サーバ１６の表示制御部６４は、機器ＤＢ５６に記憶されている各機器１２の設置場所を示す設置場所情報を参照し、携帯端末１０２の位置からカメラ１０６が向く方向Ｄにある（より詳しくはカメラ１０６の視野ＦＶｃ内にある）機器１２を特定する。図１２の例では、機器１２ａ及び１２ｂが特定される。

【0079】

その上で、表示制御部６４は、機器ＤＢ５６を参照し、特定した機器１２（ここでは機器１２ａ及び１２ｂ）に関する情報を取得し、当該情報を携帯端末１０２のディスプレイ１０４に表示させる表示制御信号を、受信した端末ＩＤが示す携帯端末１０２に送信する。これにより、表示制御部６４は、特定した機器１２に関する情報をディスプレイ１０４に表示させる。

【0080】

図１３は、ディスプレイ１０４に表示される情報の例を示す図である。携帯端末１０２の表示処理部４２は、サーバ１６から受信した表示制御信号に基づいて、ディスプレイ１０４に機器１２に関する情報を表示させる。図１３の例では、図５の例同様、ディスプレイ１０４には、機器１２ａの画像７０ａ、機器１２ａの機器状況情報７２ａ、機器１２ｂの画像７０ｂ、機器１２ｂの機器状況情報７２ｂが表示されている。

【0081】

上述の通り、ディスプレイ１０４は、カメラ１０６が取得した画像をリアルタイムで表示するライブビューモニタとしても機能する。したがって、図１３の例では、表示制御部６４は、カメラ１０６が撮影した画像を背景画像１１０として表示させ、機器１２に関する情報を背景画像１１０に重畳させて表示させている。

【0082】

あたかも、背景画像１１０として表示されている床ＦＬを透過して各機器１２に関する情報を見ているようにユーザに感じさせるために、表示制御部６４は、機器１２の画像７０の周囲の領域において背景画像１１０を表示させず、白抜き領域１１２とするようにしてもよい。

【0083】

以上、本発明に係る実施形態を説明したが、本発明は上記実施形態に限られるものではなく、本発明の趣旨を逸脱しない限りにおいて種々の変更が可能である。

【0084】

例えば、本実施形態では、ユーザＤＢ５４、機器ＤＢ５６、及びワークフローＤＢ５８がサーバ１６のメモリ５２に記憶されていたが、これらのデータベースは、サーバ１６からアクセス可能な他の装置のメモリに記憶されていてもよい。

【符号の説明】

【0085】

１０，１００ 情報処理システム、１２ 機器、１４ ウェアラブル端末、１６ サーバ、１８ 通信回線、３０，５０ 通信インターフェース、３２，１０４ ディスプレイ、３４ ＧＰＳセンサ、３６ 視線検出センサ、３８，５２ メモリ、４０，６０ プロセッサ、４２，１０８ 表示処理部、５４ ユーザＤＢ、５６ 機器ＤＢ、５８ ワークフローＤＢ、６２ 位置方向取得部、６４ 表示制御部、１０２ 携帯端末、１０６ カメラ、１０８ 加速度センサ。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】