特許 7570453 情報表示方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-10-10

(45)【発行日】2024-10-21

(54)【発明の名称】情報表示方法

(51)【国際特許分類】

   G06Q 10/10 20230101AFI20241011BHJP

   G06F 3/04815 20220101ALI20241011BHJP

   G06F 3/0346 20130101ALI20241011BHJP

   G06F 3/01 20060101ALI20241011BHJP

【ＦＩ】

G06Q10/10

G06F3/04815

G06F3/0346 423

G06F3/01 510

【請求項の数】 8

(21)【出願番号】P 2023060505

(22)【出願日】2023-04-04

(62)【分割の表示】P 2021514783の分割

【原出願日】2019-04-19

(65)【公開番号】P2023097446

(43)【公開日】2023-07-07

【審査請求日】2023-04-04

(73)【特許権者】

【識別番号】000005810

【氏名又は名称】マクセル株式会社

(74)【代理人】

【識別番号】110000442

【氏名又は名称】弁理士法人武和国際特許事務所

(72)【発明者】

【氏名】吉澤 和彦

(72)【発明者】

【氏名】川前 治

(72)【発明者】

【氏名】秋山 仁

(72)【発明者】

【氏名】中出 眞弓

(72)【発明者】

【氏名】藏知 恵

【審査官】上田 威

(56)【参考文献】

【文献】国際公開第２０１８／１５６１９２（ＷＯ，Ａ１）

【文献】特開２００５－０８４９０９（ＪＰ，Ａ）

【文献】特開２０１６－１５７４３５（ＪＰ，Ａ）

【文献】特許第６４１２６６５（ＪＰ，Ｂ１）

【文献】特開２０１４－１９１３３２（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｑ １０／００－９９／００

Ｇ０６Ｆ ３／０４８１５

Ｇ０６Ｆ ３／０３４６

Ｇ０６Ｆ ３／０１

(57)【特許請求の範囲】

【請求項1】

対象物の情報を表示する情報表示装置で実行される情報表示方法であって、
前記情報表示装置は距離センサを備え、
前記情報表示装置の位置情報および方向情報を取得する自装置配置情報取得ステップと、
前記情報表示装置のユーザの視線情報を取得する視線情報取得ステップと、
前記視線情報取得ステップで取得した前記視線情報に基づいて対象物を選択する対象物選択ステップと、
前記対象物選択ステップで選択した前記対象物までの距離情報を、前記距離センサを用いて取得する距離情報取得ステップと、
前記自装置配置情報取得ステップで取得した前記位置情報および前記方向情報と前記視線情報取得ステップで取得した前記視線情報と前記距離情報取得ステップで取得した前記距離情報とに基づいて、前記対象物選択ステップで選択した前記対象物の対象物位置情報を算出する対象物位置情報算出ステップと、
前記対象物位置情報算出ステップで算出した前記対象物位置情報に基づいて、前記対象物と前記対象物に関連する人物を識別する識別情報とを対応づけたテーブルから、前記対象物に関連する人物の識別情報を取得する識別情報参照ステップと、
前記識別情報参照ステップで取得した前記識別情報をサーバに送信し、前記識別情報に対応した人物関連情報を前記サーバから受信する人物関連情報取得ステップと、
前記人物関連情報取得ステップで取得した前記人物関連情報を、前記対象物に関連する人物が不在の場合に、表示部に表示する表示ステップと、
を含む
ことを特徴とする情報表示方法。

【請求項2】

請求項１に記載の情報表示方法であって、
前記人物関連情報は、前記対象物に関連する人物に対して連絡可能なアプリケーションを起動するアイコンを含み、
前記ユーザによる前記アイコンの選択操作を受け付けた場合に前記アプリケーションを起動するアプリケーション起動ステップを更に備える
ことを特徴とする情報表示方法。

【請求項3】

請求項１に記載の情報表示方法であって、
前記情報表示装置の周辺画像を取得する画像取得ステップを更に備え、
前記表示ステップは、
前記人物関連情報取得ステップで取得した前記人物関連情報を前記画像取得ステップで取得した前記周辺画像に重畳して前記表示部に表示する
ことを特徴とする情報表示方法。

【請求項4】

請求項１に記載の情報表示方法であって、
現在時刻情報を取得する現在時刻情報取得ステップを更に備え、
前記表示ステップは、
前記現在時刻情報取得ステップで取得した前記現在時刻情報に基づいて前記人物関連情報取得ステップで取得した前記人物関連情報から抽出した情報を前記表示部に表示する
ことを特徴とする情報表示方法。

【請求項5】

請求項１に記載の情報表示方法であって、
前記表示ステップは、
前記人物関連情報取得ステップで取得した前記人物関連情報に設定された公開レベルに応じて前記表示部への表示が制御される
ことを特徴とする情報表示方法。

【請求項6】

請求項１に記載の情報表示方法であって、
前記情報表示装置が前記ユーザが頭部に装着して使用するヘッドマウントディスプレイである場合に実行される
ことを特徴とする情報表示方法。

【請求項7】

請求項１に記載の情報表示方法であって、
前記情報表示装置が前記ユーザが把持して使用する携帯情報端末である場合に実行される
ことを特徴とする情報表示方法。

【請求項8】

請求項１に記載の情報表示方法であって、
前記情報表示装置の周辺画像を取得する画像取得ステップと、
前記画像取得ステップで取得した前記周辺画像から前記対象物を含む所定領域の被照合画像を取得する被照合画像取得ステップと、
前記被照合画像取得ステップで取得した被照合画像と、予め保持した照合用画像とを照合し、前記対象物に関連する人物が不在かどうかを判別する不在判別ステップと、を更に備える
ことを特徴とする情報表示方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報表示技術に関する。特に、不在者の予定情報の表示技術に関する。

【背景技術】

【0002】

オフィス等において、不在者の行動予定に関する情報を提示する技術がある。例えば、特許文献１には、「撮像手段および表示手段を備えたスマートデバイスを用いる情報処理システムであって、前記撮像手段を用いて撮像したライブ映像内にＡＲマーカが含まれる場合に、前記ＡＲマーカに紐付いた識別子および前記ライブ映像内の座席位置をデータベースから読出す読出手段と、前記ライブ映像に基づいて、前記座席位置に対応する人物が在席しているか不在かを判定する判定手段と、不在と判定された前記人物を、前記識別子を用いて特定し、特定された前記人物のプレゼンス情報を、プレゼンスデータベースから読み出すプレゼンス情報読出手段と、前記表示手段において、前記ライブ映像に重畳して前記プレゼンス情報を表示させる表示制御手段と、を備えた（要約抜粋）」情報処理システムが開示されている。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２０１６－１９２７４６号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、特許文献１に記載の技術によれば、オフィス等の所属員のプレゼンス情報として行動予定を提示机毎、或いは部屋毎に、ＡＲマーカ（バーコード／ＱＲコード（登録商標）等）を予め特定の場所に配置しなければならない。また、ＡＲマーカが物陰に配置される、死角になる位置に配置される、等の場合も含め、ＡＲマーカが撮影範囲外となる場合、正しく動作しない。このように、手間がかかる上に制約が多い。

【0005】

本発明は、上記事情に鑑みてなされたもので、準備の手間や制約を極力低減した、所属員の行動予定情報表示技術を提供することを目的とする。

【課題を解決するための手段】

【0006】

本発明は、対象物の情報を表示する情報表示装置で実行される情報表示方法であって、前記情報表示装置は距離センサを備え、前記情報表示装置の位置情報および方向情報を取得する自装置配置情報取得ステップと、前記情報表示装置のユーザの視線情報を取得する視線情報取得ステップと、前記視線情報取得ステップで取得した前記視線情報に基づいて対象物を選択する対象物選択ステップと、前記対象物選択ステップで選択した前記対象物までの距離情報を、前記距離センサを用いて取得する距離情報取得ステップと、前記自装置配置情報取得ステップで取得した前記位置情報および前記方向情報と前記視線情報取得ステップで取得した前記視線情報と前記距離情報取得ステップで取得した前記距離情報とに基づいて、前記対象物選択ステップで選択した前記対象物の対象物位置情報を算出する対象物位置情報算出ステップと、前記対象物位置情報算出ステップで算出した前記対象物位置情報に基づいて、前記対象物と前記対象物に関連する人物を識別する識別情報とを対応づけたテーブルから、前記対象物に関連する人物の識別情報を取得する識別情報参照ステップと、前記識別情報参照ステップで取得した前記識別情報をサーバに送信し、前記識別情報に対応した人物関連情報を前記サーバから受信する人物関連情報取得ステップと、前記人物関連情報取得ステップで取得した前記人物関連情報を、前記対象物に関連する人物が不在の場合に、表示部に表示する表示ステップと、を含むことを特徴とする。

【0007】

また、前記人物関連情報は、前記対象物に関連する人物に対して連絡可能なアプリケーションを起動するアイコンを含み、前記ユーザによる前記アイコンの選択操作を受け付けた場合に前記アプリケーションを起動するアプリケーション起動ステップを更に備えてもよい。

【発明の効果】

【0008】

本発明によれば、準備の手間や制約を極力低減した、所属員の行動予定情報表示技術を提供できる。上記した以外の課題、構成および効果は、以下の実施形態の説明により明らかにされる。

【図面の簡単な説明】

【0009】

【図1】第一実施形態の行動予定表示システムのシステム構成図である。

【図2】第一実施形態の情報表示装置のハードウェア構成図である。

【図3】（ａ）～（ｃ）は、第一実施形態の情報表示装置がヘッドマウントディスプレイである場合の外観図である。

【図4】（ａ）および（ｂ）は、第一実施形態の情報表示装置がスマートフォンである場合の外観図である。

【図5】第一実施形態の情報表示装置の機能ブロック図である。

【図6】第一実施形態の座席情報テーブルの一例を説明するための説明図である。

【図7】第一実施形態の管理サーバのハードウェア構成図である。

【図8】第一実施形態の所属員データベースの一例を説明するための説明図である。

【図9】第一実施形態の行動予定データベースの一例を説明するための説明図である。

【図10】（ａ）は、第一実施形態の座席情報テーブル生成処理を行う部屋の、（ｂ）は、第一実施形態の入力画像の、それぞれ一例を説明するための説明図である。

【図11】第一実施形態の座席情報テーブル生成処理のフローチャートである。

【図12】（ａ）および（ｂ）は、第一実施形態の方向情報取得手法および位置情報算出手法を説明するための説明図である。

【図13】（ａ）は、第一実施形態の行動予定表示処理を行う部屋の、（ｂ）は、第一実施形態の入力画像の、それぞれ一例を説明するための説明図である。

【図14】第一実施形態の行動予定表示処理のフローチャートである。

【図15】第一実施形態の位置情報算出手法を説明するための説明図である。

【図16】（ａ）および（ｂ）は、第一実施形態の行動予定表示例を説明するための説明図である。

【図17】（ａ）は、第一実施形態の変形例の照合用画像の一例を、（ｂ）および（ｃ）は、第一実施形態の変形例の実空間の例を、それぞれ、説明するための説明図である。

【図18】第一実施形態の変形例の行動予定表示処理のフローチャートである。

【図19】第一実施形態の変形例の座席情報テーブル生成および行動予定表示処理のフローチャートである。

【図20】（ａ）および（ｂ）は、第一実施形態の変形例の座席位置情報算出手法を説明するための説明図である。

【図21】第一実施形態の変形例の空間認識処理のフローチャートである。

【図22】第一実施形態の変形例の行動予定表示処理のフローチャートである。

【図23】（ａ）は第一実施形態の変形例の行動予定表示対象座席の指示例を、（ｂ）は、第一実施形態の変形例の行動予定表示座席位置情報算出手法を、それぞれ、説明するための説明図である。

【図24】（ａ）～（ｇ）は、第一実施形態およびその変形例の行動予定表示態様を、それぞれ、説明するための説明図である。

【図25】第一実施形態の変形例のＰｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ稼働情報テーブルの一例を説明するための説明図である。

【図26】第一実施形態の変形例の行動予定表示処理のフローチャートである。

【図27】（ａ）は、第二実施形態の行動予定表示システムのシステム構成図であり、（ｂ）は、カメラの機能ブロック図である。

【図28】第二実施形態のカメラ配置テーブルの一例を説明するための説明図である。

【図29】第二実施形態の行動予定表示処理のフローチャートである。

【図30】（ａ）および（ｂ）は、それぞれ、第二実施形態の行動予定表示対象座席指定手法を説明するための説明図である。

【図31】（ａ）および（ｂ）は、それぞれ、第二実施形態の行動予定表示対象座席指定時の表示例を説明するための説明図である。

【発明を実施するための形態】

【0010】

＜＜第一実施形態＞＞
以下、本発明の第一実施形態を、図面を用いて説明する。なお、図中で用いる符号は同一符号のものは同一機能や処理を示すものである。

【0011】

本実施形態では、情報表示装置を所持するユーザ（装置使用者）が、特定の座席に情報表示装置を向けた際に、当該座席に座っているべき人が不在の場合、その不在者の現在情報（および未来情報）を自動的に情報表示装置に表示する。使用環境は、例えば、事務所、学校等、予め所属する人（所属員）の座席が決まっている環境である。

【0012】

［システム構成］
図１は、本実施形態の行動予定表示システム９００のシステム構成図である。本図に示すように、本実施形態の行動予定表示システム９００は、情報表示装置１００と、管理サーバ３００とを備える。情報表示装置１００と管理サーバ３００とは、内部ネットワーク（ＬＡＮ）４１０を介して接続される。

【0013】

情報表示装置１００は、例えば、ヘッドマウントディスプレイ（Ｈｅａｄ Ｍｏｕｎｔｅｄ Ｄｉｓｐｌａｙ；ＨＭＤ）１００Ｈ、スマートフォン（Ｓｍａｒｔ Ｐｈｏｎｅ）１００Ｓ等である。

【0014】

なお、本実施形態の情報表示装置１００は、ＧＰＳ衛星４４０から、ＧＰＳ情報を受信し、自身の位置を取得する。また、情報表示装置１００は、ゲートウェイ装置４２０を介して、外部ネットワーク４３０に接続され、外部ネットワーク４３０を介して接続される、携帯情報端末４５０等の他装置とデータの送受信を可能とする。さらに、情報表示装置１００自身が、外部ネットワーク４３０、ゲートウェイ装置４２０、内部ネットワーク４１０を介して、管理サーバ３００と情報の送受信を行ってもよい。

【0015】

以下、情報表示装置１００および管理サーバ３００の詳細を説明する。

【0016】

［情報表示装置］
本実施形態の情報表示装置１００は、ＧＰＳ受信機能と、方向検出機能と、測距機能と、画像取得機能と、表示機能とを備える可搬型の情報処理装置である。上述のように、例えば、ＨＭＤ１００Ｈまたはスマートフォン１００Ｓである。表示機能を実現する表示部は、透過型ＡＲ表示、カメラスルーＡＲ表示、等が可能である。

【0017】

［情報表示装置のハードウェア構成］
図２は、本実施形態の情報表示装置１００のハードウェア構成図である。本図に示すように、本実施形態の情報表示装置１００は、主制御部１０１と、システムバス１０２と、ＲＡＭ１０３と、ストレージ部１１０と、操作受付部１２０と、画像処理部１３０と、音声処理部１４０と、センサ部１５０と、通信処理部１６０と、拡張インタフェース（Ｉ／Ｆ）部１７０と、を備える。

【0018】

主制御部１０１は、所定のプログラムに従って情報表示装置１００全体を制御するＣＰＵ（Ｃｅｎｔｏｒａｌ Ｐｒｏｃｅｓｓｏｒ Ｕｎｉｔ）またはマイクロプロセッサユニット（ＭＰＵ）である。

【0019】

システムバス１０２は、主制御部１０１と情報表示装置１００内の各部との間でデータ送受信を行うためのデータ通信路である。

【0020】

ＲＡＭ１０３は、基本動作プログラムやその他のアプリケーションプログラム実行時のプログラム領域である。また、ＲＡＭ１０３は、各種アプリケーションプログラム実行時に、必要に応じてデータを一時的に保持する一時記憶領域である。ＲＡＭ１０３は、主制御部１０１と一体構成であっても良い。

【0021】

ストレージ部１１０は、情報表示装置１００の各動作設定値や情報表示装置１００の使用者の情報等を記憶する。ストレージ部１１０は、情報表示装置１００で撮影した静止画像データや動画像データ等を記憶してもよい。また、情報表示装置１００は、アプリケーションサーバから、インターネットを介して、新規アプリケーションプログラムをダウンロードすることにより、機能拡張が可能であるものとする。この際、ダウンロードした新規アプリケーションプログラムは、ストレージ部１１０に記憶される。主制御部１０１が、ストレージ部１１０に記憶された新規アプリケーションプログラムをＲＡＭ１０３に展開し、実行することにより、情報表示装置１００は、多種の機能を実現できる。

【0022】

ストレージ部１１０は、情報表示装置１００に電源が供給されていない状態であっても記憶している情報を保持する必要がある。したがって、ストレージ部１１０には、例えばフラッシュＲＯＭやＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）、ＨＤＤ（Ｈａｒｄ Ｄｉｓｃ Ｄｒｉｖｅ）等のデバイスが用いられる。

【0023】

操作受付部１２０は、情報表示装置１００に対する操作指示の入力を受け付ける。本実施形態では、電源キー、音量キー、ホームキー等の操作キー１２１を備える。また、情報表示装置１００が、ＨＭＤ１００Ｈの場合、タッチパッドによる操作指示を受け付けるタッチセンサ１２２を備える。また、情報表示装置１００が、スマートフォン１００Ｓの場合、表示部１３１に重ねて配置されるタッチパネル１２３、を備える。

【0024】

なお、スマートフォン１００Ｓの場合、後述の拡張インタフェース部１７０に接続したキーボード等を介して指示の入力を受け付けてもよい。また、有線通信または無線通信により接続された別体の情報処理端末機器を介して情報表示装置１００の操作を受け付けてもよい。

【0025】

画像処理部１３０は、イメージ（ビデオ）プロセッサであり、表示部１３１と、画像信号処理部１３２と、第一画像取得部１３３と、第二画像取得部１３４と、を備える。

【0026】

表示部１３１は、例えば液晶パネル等の表示デバイス（ディスプレイ）であり、後述する画像信号処理部１３２で処理された画像データを情報表示装置１００の使用者に提示する。情報表示装置１００がＨＭＤ１００Ｈの場合、表示部１３１は、透過型ディスプレイであってもよい。

【0027】

画像信号処理部１３２は、第一画像取得部１３３および第二画像取得部１３４から入力された画像を処理する、イメージ（ビデオ）シグナルプロセッサである。また、画像信号処理部１３２は、主制御部１０１等により作成したオブジェクトを入力画像に重畳して表示部１３１に出力する。

【0028】

第一画像取得部１３３は、情報表示装置１００の周囲の画像を取得する。ＨＭＤ１００Ｈであれば、外部カメラである。スマートフォン１００Ｓであれば、背面カメラ（アウトカメラ）である。

【0029】

第二画像取得部１３４は、第一画像取得部１３３とは異なる領域の画像を取得する。例えば、ユーザの眼を撮影する。ＨＭＤ１００Ｈであれば、内部カメラ（視線検出用カメラ）であり、スマートフォン１００Ｓであれば、前面カメラ（インカメラ）である。

【0030】

音声処理部１４０は、音声を処理するオーディオプロセッサである。音声出力部１４１と、音声信号処理部１４２と、音声入力部１４３と、を備える。音声出力部１４１は、スピーカであり、音声信号処理部１４２で処理した音声信号を外部に出力する。音声信号処理部１４２は、オーディオシグナルプロセッサである。音声入力部１４３はマイクであり、ユーザの声などを音声データに変換して入力する。

【0031】

センサ部１５０は、情報表示装置１００の状態を検出するためのセンサ群である。本実施形態では、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）受信部１５１と、ジャイロセンサ１５２と、地磁気センサ１５３と、加速度センサ１５４と、距離センサ１５５とを備える。これらのセンサ群により、情報表示装置１００の位置、動き、傾き、方角等を検出する。また、距離センサ１５５は、深度センサであり、情報表示装置１００から対象物までの距離情報を取得する。なお、その他のセンサを、さらに、備えていても良い。

【0032】

通信処理部１６０は、通信処理を行うコミュニケーションプロセッサである。ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）通信部１６１、電話網通信部１６２と、ＢＴ（Ｂｌｕｅｔｏｏｔｈ（登録商標））通信部１６３と、を備える。ＬＡＮ通信部１６１はインターネットの無線通信用アクセスポイントと無線通信により接続してデータの送受信を行う。電話網通信部１６２は移動体電話通信網の基地局との無線通信により、電話通信（通話）およびデータの送受信を行う。ＢＴ通信部１６３は、Ｂｌｕｅｔｏｏｔｈ規格により外部装置と通信を行うためのインタフェースである。ＬＡＮ通信部１６１、電話網通信部１６２、ＢＴ通信部１６３は、それぞれ符号化回路や復号回路、アンテナ等を備える。通信処理部１６０は、さらに、赤外線通信部等を備えていても良い。

【0033】

拡張インタフェース部１７０は、情報表示装置１００の機能を拡張するためのインタフェース群であり、本実施形態では、充電端子、映像／音声インタフェース、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）インタフェース、メモリインタフェース等を備える。映像／音声インタフェースは、外部映像／音声出力機器からの映像信号／音声信号の入力、外部映像／音声入力機器への映像信号／音声信号の出力、等を行う。ＵＳＢインタフェースはキーボードやその他のＵＳＢ機器の接続を行う。メモリインタフェースはメモリカードやその他のメモリ媒体を接続してデータの送受信を行う。

【0034】

情報表示装置１００が、ＨＭＤ１００Ｈである場合の、外観および装着態様を説明する。図３（ａ）は、情報表示装置１００の上面図、図３（ｂ）は、正面図、図３（ｃ）は、側面図である。上記ハードウェア構成図で説明した構成の配置を説明する。

【0035】

ＨＭＤ１００Ｈは、ＨＭＤ１００Ｈの各部を支え、ユーザがＨＭＤ１００Ｈを装着するためのフレーム１０９Ｈを備える。

【0036】

表示部１３１は、フレーム１０９Ｈの正面中央に配置される。ユーザ９１０の両目の前となる位置に配置される。

【0037】

タッチセンサ１２２は、フレーム１０９Ｈの側面部に配置される。左右両側面部に配置されてもよいし、いずれか一方であってもよい。

【0038】

ＨＭＤ１００Ｈは、第一画像取得部１３３として、左第一画像取得部（左外部カメラ）１３３Ｌと、右第一画像取得部（右外部カメラ）１３３Ｒとを備える。これらの図に示すように、左第一画像取得部１３３Ｌおよび右第一画像取得部１３３Ｒは、ＨＭＤ１００Ｈのフレーム１０９Ｈの正面の、それぞれ、左および右に配置される。

【0039】

また、ＨＭＤ１００Ｈは、音声出力部１４１として、左音声出力部（左ステレオスピーカ）１４１Ｌと右音声出力部（右ステレオスピーカ）１４１Ｒとを備える。これらの図に示すように、左音声出力部１４１Ｌおよび右音声出力部１４１Ｒは、それぞれ、フレーム１０９Ｈの左側面および右側面に配置される。

【0040】

また、距離センサ１５５は、フレーム１０９Ｈの正面中央に配置される。なお、距離センサ１５５に代替して、左第一画像取得部１３３Ｌと右第一画像取得部１３３Ｒとを用いた視差による距離測定を行っても良い。

【0041】

情報表示装置１００が、スマートフォン１００Ｓである場合の、外観および装着態様を説明する。図４（ａ）は、スマートフォン１００Ｓの前面（正面）図、図４（ｂ）は、背面図である。上記ハードウェア構成図で説明した構成の配置を説明する。

【0042】

スマートフォン１００Ｓは、スマートフォン１００Ｓの各部を内部に納めるケース１０９Ｓを備える。なお、以下の説明において、上下方向、左右方向は、図示する通りである。

【0043】

表示部１３１は、ケース１０９Ｓの前面中央に配置される。なお、スマートフォン１００Ｓの場合、表示部１３１とタッチパネル１２３とを兼ねるタッチスクリーン１８０が配置される。

【0044】

第一画像取得部１３３（背面カメラ／アウトカメラ）は、ケース１０９Ｓの背面に配置される。第二画像取得部１３４（前面カメラ／インカメラ）は、ケース１０９Ｓの前面に配置される。第二画像取得部１３４は、前面の表示部１３１の上方に配置される。

【0045】

また、音声出力部１４１は、例えば、ケース１０９Ｓの前面の、表示部１３１の上方中央および背面下部に配置される。ケース１０９Ｓの前面上部に配置される音声出力部１４１Ｍは、モノラルスピーカであって、音声通話時に使用される。ケース１０９Ｓの背面下部に配置される音声出力部１４１Ｓは、ステレオスピーカであって、動画再生時等に使用される。さらに、音声入力部１４３は、例えば、ケース１０９Ｓの下面に配置される。

【0046】

また、距離センサ１５５は、ケース１０９Ｓの背面、例えば、第一画像取得部１３３横に配置される。

【0047】

その他、操作キー１２１として、例えば、電源スイッチ１２１Ｐがケース１０９Ｓの上面に配置される。また、拡張インタフェース部１７０としてＵＳＢ端子１７０Ｕがケース１０９Ｓの下面に配置される。さらに、ケース１０９Ｓの背面に配置される指紋センサ１２４、ケース１０９Ｓの前面、表示部１３１上方に配置されるＬＥＤ１２５等を備えていてもよい。

【0048】

［機能ブロック］
次に、情報表示装置１００の機能について説明する。図５は、本実施形態の情報表示装置１００の機能ブロック図である。本実施形態の情報表示装置１００は、座席表データを生成し、不在時にその座席に割り当てられた人（座席使用者）の行動予定を表示する。これを実現するため、本実施形態の情報表示装置１００は、在不在判別部２３１と、座席情報テーブル生成部２３２と、行動予定表示部２３３と、を備える。

【0049】

また、各ハードウェアを制御して情報処理を行う、位置情報取得部２１１と、方向情報取得部２１２と、距離情報取得部２１３と、空間認識部２１４と、視線検出部２１５と、座席選択受付部２１６と、座席位置算出部２１７と、識別画像取得部２１８と、識別情報照合部２１９と、座席情報確認部２２０と、行動予定取得部２２１と、表示制御部２２２と、連絡制御部２２３と、を備える。

【0050】

これらの各機能は、主制御部１０１が、ストレージ部１１０に予め格納されたプログラムをＲＡＭ１０３にロードして実行することにより実現される。

【0051】

また、ストレージ部１１０には、座席情報テーブル生成部２３２により生成される座席情報テーブル２５０を備える。

【0052】

座席情報テーブル生成部２３２は、座席情報テーブル２５０を生成する。座席情報テーブル２５０は、各座席の位置情報と、当該座席に割り当てられた正当な使用者（割当使用者）の情報とを対応づけたテーブルである。図６に、座席情報テーブル２５０の一例を示す。本図に示すように、座席情報テーブル２５０は、座席情報２５１と、使用者情報２５６とを備える。

【0053】

座席情報２５１は、各部屋の各座席を特定する情報である。本図に示すように、座席ＩＤ２５２と、部屋ＩＤ２５３と、座席位置情報２５４と、を備える。座席ＩＤ２５２は、各座席の識別情報であり、各座席に一意に付与される。部屋ＩＤ２５３は、部屋の識別情報であり、各部屋に一意に付与される。座席位置情報２５４は、座席位置の座標である。本実施形態では、座席位置の絶対座標が登録される。絶対座標は、例えば、緯度経度高度である。

【0054】

使用者情報２５６は、各座席の、当該座席に割り当てられた正当な使用者を特定する情報である。本図に示すように、氏名２５７と個人ＩＤ２５８とを備える。個人ＩＤ２５８は、使用者を識別する情報であり、使用者毎に一意に付与される。なお、使用者情報２５６は、管理サーバ３００が保持する所属員データベース３１１で個人情報として管理される情報である。

【0055】

位置情報取得部２１１は、ＧＰＳ受信部１５１が受信したＧＰＳ情報に基づいて、情報表示装置１００の位置情報を取得する。また、公知の屋内測位システム等により位置情報を取得しても良い。本実施形態では、例えば、緯度経度高度といった絶対位置情報を算出する。

【0056】

方向情報取得部２１２は、ジャイロセンサ１５２および／または地磁気センサ１５３からの出力情報に基づいて、情報表示装置１００の方向情報を取得する。本実施形態では、情報表示装置１００の第一画像取得部１３３の向く方向を、方向情報として算出する。

【0057】

なお、情報表示装置１００が、透過型の表示部１３１を有するＨＭＤ１００Ｈの場合、表示部１３１の正面の方向情報、すなわち、表示部１３１の中心部の接面の法線方向を方向情報として取得する。また、情報表示装置１００がスマートフォン１００Ｓの場合、第一画像取得部１３３の撮影視野の中心方向を方向情報として取得する。

【0058】

なお、位置情報取得部２１１が取得する位置情報と、方向情報取得部２１２が取得する方向情報とにより、情報表示装置１００の向きも含めた配置が特定される。従って、両者を合わせ、自装置配置情報検出部とも呼ぶ。

【0059】

距離情報取得部２１３は、距離センサ１５５からの出力情報に基づいて、対象物までの距離情報を取得する。なお、対象物が指定されていない場合には、距離センサ１５５を構成するデバイスの中央部に対応する物を対象物とする。

【0060】

空間認識部２１４は、空間認識処理を行う。具体的には、空間認識部２１４は、第一画像取得部１３３が取得した画像を解析して複数の特徴点を検出する。そして、検出した複数の特徴点に対する方向情報を方向情報取得部２１２に取得させる。また、検出した複数の特徴点までの距離情報を距離情報取得部２１３に取得させる。そして、取得した方向情報と距離情報とから検出した複数の特徴点同士の相対的な位置関係を算出する。そして、算出した相対的位置関係に関する情報を、解析した空間（部屋等）を識別する情報に関連付けて記憶する。空間認識部２１４は、これにより、情報表示装置１００が存在する所定の空間（部屋等）を認識する。

【0061】

視線検出部２１５は、第二画像取得部１３４が取得した画像を解析してユーザの視線情報を取得する。ＨＭＤ１００Ｈの場合、ユーザ９１０の視線方向を検出する。すなわち、ユーザ９１０が、表示部１３１を通して見ている方向を検出する。また、スマートフォン１００Ｓの場合は、ユーザ９１０の視線と表示部１３１との交点位置を検出する。すなわち、ユーザ９１０が表示部１３１のどの位置を見ているかを検出する。

【0062】

座席選択受付部２１６は、行動予定を表示させたい人物の使用する座席として、ユーザ９１０の選択を受け付ける。情報表示装置１００がＨＭＤ１００Ｈの場合、第一画像取得部１３３からの入力画像を解析し、視線検出部２１５で検出した視線方向に対応する位置の座席を選択された座席（選択座席）とする。具体的には、視線検出部２１５で検出した視線方向と表示部１３１との交点位置に対応する、第一画像取得部１３３の画像取得範囲内における位置を、選択位置とする。そして、タッチセンサ１２２へのユーザ９１０による操作を受け付けた場合、当該選択を確定する。また、情報表示装置１００がスマートフォン１００Ｓの場合は、タッチパネル１２３が検出したタッチ位置に対応する座席が選択されたものとする。なお、スマートフォン１００Ｓの場合も、視線検出部２１５で検出した視線情報に基づいて選択を受け付けてもよい。この場合、視線方向と表示部１３１との交点を選択位置とする。この場合も、表示部１３１に表示された「確定」アイコンへのタッチで選択を確定する。

【0063】

座席位置算出部２１７は、座席選択受付部２１６が受け付けた選択座席の位置を算出する。座席位置算出部２１７は、位置情報取得部２１１で取得した位置情報と方向情報取得部２１２で取得した方向情報と距離情報取得部２１３で取得した距離情報とに基づいて、選択座席の位置（絶対位置）情報を算出する。また、必要に応じて、空間認識部２１４で空間（部屋等）を認識し、方向情報取得部２１２で取得した方向情報と距離情報取得部２１３で取得した距離情報とに基づいて、選択座席の位置情報として、所定の空間（部屋等）内の基準位置に対する相対位置情報を算出する。

【0064】

識別画像取得部２１８は、入力画像から識別画像を抽出する。本実施形態では、識別画像として人物画像を用いる。抽出は、例えば、パターンマッチング等により行う。

【0065】

識別情報照合部２１９は、後述する所属員データベース３１１を参照することにより、識別画像取得部２１８で取得した人物画像で特定される所属員の識別情報を取得する。なお、所属員データベース３１１は、例えば、管理サーバ３００等に保持される。

【0066】

座席情報確認部２２０は、座席選択受付部２１６が選択した選択座席に関し、予め定めた座席情報確認処理を行う。例えば、選択座席に人物が着座している場合、座席位置算出部２１７で算出した選択座席の位置情報と識別情報照合部２１９で取得した選択座席を使用する所属員の個人ＩＤとを関連付けて、座席情報テーブル２５０に記憶する。なお、前述の処理は、ユーザ９１０の座席選択指示によらず、第一画像取得部１３３の取得画像に含まれる全ての座席に対して行われても良い。すなわち、全ての座席を選択座席として扱っても良い。また、選択座席に人物が不在の場合は、座席位置算出部２１７で算出した選択座席の座席位置情報２５４に対応づけて座席情報テーブル２５０に登録される個人ＩＤ２５８を取得する。この場合、座席情報確認部２２０は、割当使用者情報取得部として機能する。

【0067】

行動予定取得部２２１は、後述の行動予定データベース３１２を参照することにより、座席情報確認部２２０で取得した個人ＩＤ２５８を有する人物の行動予定情報を取得する。なお、行動予定データベース３１２は、予め管理サーバ３００等に保持される。

【0068】

表示制御部２２２は、行動予定取得部２２１で取得した行動予定情報を表示部１３１に表示させる。本実施形態では、選択座席の位置に表示する。選択座席の位置は、情報表示装置１００が、表示部１３１が透過型表示部であるＨＭＤ１００Ｈの場合、ユーザ９１０が表示部１３１を通して選択座席を見る際に、視線が表示部１３１と交差する位置である。情報表示装置１００が、スマートフォン１００Ｓの場合、入力画像の選択座席位置である。スマートフォン１００Ｓの場合、この選択座席位置に、行動予定情報を入力画像に重畳し、表示させる。

【0069】

連絡制御部２２３は、識別情報照合部２１９で取得した個人ＩＤ２５８に基づいて、当該個人ＩＤ２５８で特定される所属員が所有する携帯情報端末４５０と通信経路を確立する処理を行う。本実施形態では、例えば、メールアプリ、ＳＮＳアプリ、ビデオチャットアプリ等の制御を行う。

【0070】

なお、位置情報取得部２１１と、方向情報取得部２１２と、距離情報取得部２１３と、空間認識部２１４と、視線検出部２１５と、座席選択受付部２１６と、座席位置算出部２１７と、識別画像取得部２１８と、識別情報照合部２１９と、座席情報確認部２２０と、行動予定取得部２２１と、表示制御部２２２と、連絡制御部２２３と、の各部は、既存のアルゴリズムを用いて、上記各処理を実現する。

【0071】

座席情報テーブル生成部２３２は、各部を制御し、上述の座席情報テーブル２５０を生成する座席情報テーブル生成処理を行う。座席情報テーブル生成処理の詳細は、後述する。

【0072】

行動予定表示部２３３は、選択座席に、割当使用者が不在時に、その割当使用者の現在の予定（行動予定情報）を表示する。なお、このとき、さらに、未来の行動予定を表示させてもよい。表示手法の詳細は、後述する。

【0073】

在不在判別部２３１は、選択座席に人物が着座しているか否かを判別する在不在判別処理を行う。在不在判別処理の詳細は後述する。なお、本実施形態では、在不在判別部２３１は、なくてもよい。

【0074】

［管理サーバ］
次に、本実施形態の管理サーバ３００について説明する。図７は、本実施形態の管理サーバ３００のハードウェア構成図である。

【0075】

管理サーバ３００は、主制御部３０１と、バス３０２と、ＲＡＭ３０３と、ストレージ部３１０と、操作受付部３２０と、表示部３３１と、画像信号処理部３３２と、ＬＡＮ通信部３６１と、を備える。

【0076】

主制御部３０１は、所定のプログラムに従って、管理サーバ３００全体を制御するＣＰＵまたはＭＰＵである。バス３０２は、主制御部３０１と管理サーバ３００内の各部との間でデータ送受信を行うためのデータ通信路である。ＲＡＭ３０３は、基本動作プログラムやその他のアプリケーションプログラム実行時のプログラム領域である。また、ＲＡＭ３０３は、各種アプリケーションプログラム実行時に、必要に応じてデータを一時的に保持する一時記憶領域である。ＲＡＭ３０３は、主制御部３０１と一体構成であっても良い。

【0077】

操作受付部３２０は、管理サーバ３００に対する操作指示の入力を受け付ける。本実施形態では、キーボード、マウス等を備える。

【0078】

表示部３３１は、例えば液晶パネル等の表示デバイスであり、後述する画像信号処理部３３２で処理された画像データを管理サーバ３００の使用者に提示する。画像信号処理部３３２は、画像を処理する、イメージ（ビデオ）プロセッサである。

【0079】

ＬＡＮ通信部３６１は内部ネットワーク４１０と有線通信により接続してデータの送受信を行う。

【0080】

ストレージ部３１０は、管理サーバ３００の処理に必要な情報を記憶する。主制御部３０１が、ストレージ部３１０に記憶されたアプリケーションプログラムをＲＡＭ３０３に展開し、実行することにより、管理サーバ３００は、多種の機能を実現できる。ストレージ部３１０には、例えば、フラッシュＲＯＭやＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）、ＨＤＤ（Ｈａｒｄ Ｄｉｓｃ Ｄｒｉｖｅ）等のデバイスが用いられる。

【0081】

本実施形態の管理サーバ３００は、情報表示装置１００が上記情報表示処理に必要なデータを管理する。そして、情報表示装置１００からの要求に応じて、必要なデータ（情報）を要求元の情報表示装置１００に提供する。

【0082】

本実施形態では、これを実現するために、ストレージ部３１０には、所属員データベース３１１と、行動予定データベース３１２とが格納される。なお、後述するように、管理サーバ３００で、さらに、ＰＣ稼働情報テーブル３１３および座席情報テーブル３１５を管理してもよい。

【0083】

所属員データベース３１１は、座席を管理する対象の所属員の情報を管理する。所属員データベース３１１の一例を、図８に示す。本図に示すように、所属員データベース３１１には、所属員ごとに、個人情報３１１ａと、認証用顔画像３１１ｄとが登録される。

【0084】

個人情報３１１ａは、各所属員を一意に識別する情報であり、本実施形態では、例えば、氏名３１１ｂと、個人ＩＤ３１１ｃとが登録される。個人ＩＤ３１１ｃは、所属員が登録される毎に付与される。

【0085】

認証用顔画像３１１ｄには、所属員の顔画像が登録される。顔画像は、正面画像、側面画像等、各種方向から取得した顔画像が登録されてもよい。また、認証用顔画像３１１ｄとして、認証用顔画像そのものではなく、認証用顔画像が保存されている場所へのアクセス情報が登録されていてもよい。

【0086】

なお、各所属員について、連絡先情報３１１ｅとして、例えば、携帯機器の電話番号、メールアドレス等がさらに登録されていてもよい。

【0087】

行動予定データベース３１２には、各所属員の行動予定が登録される。行動予定データベース３１２の一例を図９に示す。本図に示すように、行動予定データベース３１２には、所属員ごとに、個人情報３１２ａと、行動予定情報３１２ｊと、が登録される。

【0088】

個人情報３１２ａは、各所属員を一意に識別する情報であり、例えば、氏名３１２ｂと、個人ＩＤ３１２ｃとが登録される。

【0089】

行動予定情報３１２ｊは、各所属員の行動予定である。行動予定情報として、行動予定毎に、例えば、行動予定を識別するＮｏ．３１２ｄと、その開始日時３１２ｅと、終了日時３１２ｆと、内容３１２ｇと、場所３１２ｈと、が登録される。

【0090】

なお、各予定については、公開、非公開のレベルである公開情報３１２ｉを付してもよい。公開情報３１２ｉは、公開対象によって付与される。詳細は、後述する。

【0091】

なお、管理サーバ３００の主制御部３０１は、ストレージ部３１０に登録される情報を、使用者からの指示、あるいは、外部からの信号に従って、適宜更新する。

【0092】

次に、情報表示装置１００の各処理について説明する。

【0093】

［座席情報テーブル生成処理］
まず、座席情報テーブル生成部２３２が前処理（初期処理）として行う座席情報テーブル生成処理について説明する。座席情報テーブル２５０は、例えば、図１０（ａ）に示すように、特定の部屋Ａにおいて、各座席に正当な割当使用者が着座時に、生成される。

【0094】

ユーザ９１０は、このような状態で、情報表示装置１００を用いて部屋Ａを撮影し、座席情報テーブル２５０を生成する。このとき、情報表示装置１００の表示部１３１に表示される画像（入力画像５００）の例を図１０（ｂ）に示す。ここでは、情報表示装置１００として、スマートフォン１００Ｓの場合を例示する。すなわち、スマートフォン１００Ｓのタッチスクリーン１８０の表示例である。

【0095】

本実施形態の座席情報テーブル生成部２３２は、このような入力画像５００を取得すると、座席情報テーブル生成処理を開始する。図１１は、本実施形態の座席情報生成処理の処理フローである。

【0096】

まず、座席情報テーブル生成部２３２は、自装置（情報表示装置）１００の位置情報を取得する（ステップＳ１１０１）。ここでは、位置情報取得部２１１に位置情報を取得させる。

【0097】

次に、座席情報テーブル生成部２３２は、情報表示装置１００の方向情報を取得する（ステップＳ１１０２）。ここでは、方向情報取得部２１２に方向情報を取得させる。ここで、情報表示装置１００の方向情報として取得する方向αを、図１２（ａ）に示す。

【0098】

本図に示すように、方向情報取得部２１２は、例えば、北等の予め定めた基準方向９５８と、第一画像取得部１３３の法線方向９５９との成す角度をαとして算出する。なお、図１２（ａ）では、説明を簡略化するため、水平面内のみを示す。

【0099】

座席情報テーブル生成部２３２は、ユーザ９１０から、座席情報テーブル２５０に登録したい座席（登録対象座席）５１１の指定を受け付ける（ステップＳ１１０３）。登録対象座席５１１は、座席選択受付部２１６を介して指定を受け付ける。

【0100】

座席情報テーブル生成部２３２は、情報表示装置１００から、登録対象座席５１１までの距離Ｌｓを登録座席距離情報として算出する（ステップＳ１１０４）。距離Ｌｓは、距離情報取得部２１３に取得させる。

【0101】

そして、座席情報テーブル生成部２３２は、情報表示装置１００の位置情報および方向情報と、登録対象座席５１１までの距離情報と、を用いて、登録対象座席５１１の絶対座標値を登録座席位置情報として算出する（ステップＳ１１０５）。登録座席位置情報は、座席位置算出部２１７が算出する。

【0102】

登録座席位置情報の算出手法を、図１２（ａ）および図１２（ｂ）を用いて説明する。例えば、基準方向９５８を、絶対座標系のＹ方向とし、情報表示装置１００の絶対座標を（ｘｏ、ｙｏ）とする。また、第一画像取得部１３３の画像センサ内における中心位置ＣＣと登録対象座席５１１の位置とのずれ量から得られる角度をβとする。角度βは、第一画像取得部１３３の画像センサの水平画素数の半分に対する前記画像センサの中心位置ＣＣから登録対象座席５１１までの前記画像センサ上での画素数との比率、及び第一画像取得部１３３の画像センサの撮影視野の画角と前記角度βとの比率、とに基づいて算出する。この場合、図１２（ｂ）に示すように、水平面内での、登録対象座席５１１の登録座席位置情報のＹ座標は、ｙｏ＋Ｌｓｃｏｓ（α－β）である。また、登録座席位置情報のＸ座標は、ｘｏ＋Ｌｓｓｉｎ（α－β）である。

【0103】

次に、座席情報テーブル生成部２３２は、登録対象座席５１１の割当使用者５１２の識別画像として顔画像を取得する（ステップＳ１１０６）。顔画像は、識別画像取得部２１８により取得される。ここでは、図１０（ｂ）に示すように、入力画像５００上で、登録対象座席５１１に対応する領域５２１近傍の、人物の顔領域５２２を特定する。人物の顔領域５２２は、例えば、パターンマッチング等により、特定する。そして、入力画像５００上で、特定した顔領域５２２を含む所定領域５２３を切り取ることにより得る。

【0104】

座席情報テーブル生成部２３２は、管理サーバ３００から、取得した顔画像と一致する所属員の個人ＩＤ３１１ｃを取得する（ステップＳ１１０７）。ここでは、座席情報確認部２２０に個人ＩＤ３１１ｃを取得させる。具体的には、座席情報確認部２２０は、管理サーバ３００の所属員データベース３１１にアクセスし、取得した顔画像を、認証用顔画像３１１ｄと照合する。そして、合致度が所定の閾値以上であり、かつ、最も合致度の高いレコードの個人ＩＤ３１１ｃを抽出する。なお、このとき、併せて氏名３１１ｂも取得してもよい。

【0105】

座席情報テーブル生成部２３２は、登録座席位置情報と、個人ＩＤ３１１ｃとを対応づけて、座席情報テーブル２５０に登録する（ステップＳ１１０８）。登録にあたっては、座席情報２５１に、座席ＩＤ２５２および部屋ＩＤ２５３を対応づける。部屋ＩＤ２５３は、ユーザ９１０による指示で付与される。また、座席ＩＤ２５２は、新たなレコードが登録される毎に、自動的に付与される。

【0106】

座席情報テーブル生成部２３２は、新たな登録対象座席の選択を受け付ける（ステップＳ１１０９）と、ステップＳ１１０４へ戻る。一方、新たな登録対象座席の選択を受け付けない場合、当該入力画像からの座席情報テーブル２５０の生成は、完了したとして、処理を終了する。

【0107】

なお、前述の処理では、ユーザ９１０が指定した登録対象座席に対してのみ座席情報登録処理を行っているが、第一画像取得部１３３で取得した画像内の、使用者が着座中の全ての座席に対して座席情報登録処理を行っても良い。

【0108】

ユーザ９１０は、情報表示装置１００の座席情報テーブル生成部２３２に、前処理として、このような座席情報テーブル生成処理を行わせ、座席情報テーブル２５０を完成させる。なお、本実施形態では、完成後も、情報表示装置１００は、起動中、第一画像取得部１３３が取得したスルー画像を解析し、常に、座席情報テーブル２５０を更新するよう構成してもよい。この場合の処理の詳細は、後述の変形例で説明する。

【0109】

［行動予定表示処理］
次に、行動予定表示処理について説明する。本処理は、ユーザ９１０による指示を契機に実行される。すなわち、ユーザ９１０が、例えば、情報表示装置１００の表示部１３１に表示された入力画像５００上で、所定の座席を選択した場合、実行される。選択は、座席選択受付部２１６によりなされる。

【0110】

図１３（ａ）に、所定の部屋Ａの実空間の様子を示す。本実施形態では、選択された座席５３１の、割当使用者５３２が不在の場合、その割当使用者５３２の予定を表示する。入力画像５００上の、ユーザ９１０が選択した割当使用者５３２の座席位置５４１には、図１３（ｂ）に示すように、ターゲットマーカ１８０Ｍが表示される。

【0111】

図１４は、行動予定表示処理の処理フローである。本処理は、入力画像５００上で、ユーザ９１０が、割当使用者５３２が不在の座席（座席位置５４１）を指定したことを契機に開始される。指定した座席５３１を表示対象座席５３１と呼ぶ。

【0112】

まず、行動予定表示部２３３は、座席情報テーブル生成処理と同様に、情報表示装置１００の、位置情報および方向情報を取得する（ステップＳ１２０１、Ｓ１２０２）。

【0113】

次に、表示対象座席までの距離情報を取得し（ステップＳ１２０３）、表示対象座席の位置情報を表示座席位置情報として算出する（ステップＳ１２０４）。これらの処理も、座席情報テーブル生成処理と同様である。また、表示座席位置情報は、絶対座標である。

【0114】

表示座席位置情報は、表示対象座席の角度情報を用いて算出する。角度情報を算出する際は、まず、図１５に示すように、基準方向９５８と、第一画像取得部１３３の法線方向９５９との成す角度をαとして算出する。なお、図１５では、説明を簡略化するため、水平面内のみを示す。第一画像取得部１３３の画像センサ内における中心位置ＣＣと表示対象座席５３１の位置とのずれ量から得る角度をγとする。角度γの算出手順も座席情報テーブル生成処理と同様である。そして、γとαとの差として表示対象座席５３１の角度情報を得る。

【0115】

行動予定表示部２３３は、表示対象座席５３１の表示座席位置情報を取得すると、座席情報テーブル２５０にアクセスし、その表示座席位置情報に相当する座席位置情報２５４に対応付けられた使用者の個人ＩＤ２５８を抽出する（ステップＳ１２０５）。この個人ＩＤ２５８の抽出は、座席情報確認部２２０によりなされる。

【0116】

行動予定表示部２３３は、管理サーバ３００にアクセスし、行動予定データベース３１２から、個人ＩＤ２５８と同じ個人ＩＤ３１２ｃに対応付けられた行動予定情報を取得する（ステップＳ１２０６）。この行動予定情報の取得は、行動予定取得部２２１によりなされる。なお、ここで、取得する行動予定情報は、その開始日時３１２ｅおよび終了日時３１２ｆ間に現在時刻が含まれるレコードとする。なお、現在時刻以降のレコードを全て抽出してもよい。

【0117】

行動予定表示部２３３は、表示部１３１に抽出した行動予定情報を表示し（ステップＳ１２０７）、処理を終了する。表示は、表示制御部２２２が行う。

【0118】

この時の、表示例を、図１６（ａ）および図１６（ｂ）に示す。情報表示装置１００が、スマートフォン１００Ｓの場合、表示制御部２２２は、図１６（ａ）に示すように、タッチスクリーン１８０上の表示対象座席の座席位置５４１に、行動予定情報１８０Ｓを重畳表示する。行動予定情報１８０Ｓを異なる位置に重畳表示し、座席位置５４１と引出線等で結び付けても良い。一方、ＨＭＤ１００Ｈの場合は、表示制御部２２２は、透過型の表示部１３１の、表示対象座席の位置に行動予定情報１８０Ｓを表示する。なお、この場合の表示対象座席の位置とは、ユーザ９１０の眼と表示対象座席５３１とを結ぶ線分と表示部１３１との交点の位置である。これにより、ユーザは、図１６（ｂ）に示すように、実空間ＡＡと行動予定情報１８０Ｓの表示とを同時に観ることができる。

【0119】

以上説明したように、本実施形態の情報表示装置１００は、座席に予め割り当てられた使用者である割当使用者５１２の行動予定を表示する。そして、情報表示装置１００の位置情報および方向情報を検出する自装置配置情報検出部と、情報表示装置１００から行動予定を表示する割当使用者５３２の座席である表示対象座席５３１までの距離情報を取得する距離情報取得部２１３と、位置情報、方向情報および距離情報を用いて、表示対象座席５３１の位置情報として表示座席位置情報を算出する座席位置算出部２１７と、座席それぞれについて、各座席の位置情報である登録座席位置情報に対応づけて当該座席の割当使用者の情報である割当使用者情報を登録する座席情報テーブル２５０から、表示座席位置情報に最も近い登録座席位置情報に対応づけて登録された割当使用者情報を抽出し、割当使用者情報に対応づけて登録される行動予定のうち、現在の行動予定を取得する行動予定取得部２２１と、取得した行動予定を、情報表示装置１００の表示部１３１に表示する表示制御部２２２と、を備える。

【0120】

このように、本実施形態では、情報表示装置１００が備えるセンサ群等を用いて、自身の位置、向き、および不在の割当使用者の座席位置を算出し、予め保持した座席情報から割当使用者の情報を得る。そして、得られた割当使用者の予定を表示する。従って、本実施形態によれば、予めＡＲマーカを付与する必要がない。よって、このような準備の手間や制約なしに、不在の割当使用者の行動予定を表示できる。

【0121】

さらに、本実施形態の情報表示装置は、前記割当使用者が着座している際に当該割当使用者を含む画像を取得して前記座席情報テーブルを生成する座席情報テーブル生成部２３２を備える。この座席情報テーブル生成部２３２は、登録対象の座席である登録対象座席５１１の割当使用者５１２を特定可能な識別画像を取得する識別画像取得部２１８と、識別画像に対応づけて登録されている個人情報３１１ａを取得し、割当使用者情報とする割当使用者情報取得部と、を備える。そして、距離情報取得部２１３に、登録対象座席５１１までの距離情報を登録座席距離情報として取得させ、座席位置算出部２１７に、位置情報、方向情報および登録座席距離情報を用いて、登録対象座席５１１の位置情報を登録座席位置情報として算出させ、登録座席位置情報と割当使用者情報とを対応づけて登録する。

【0122】

このように、本実施形態によれば、各情報表示装置１００により、前処理として、座席情報テーブル２５０を作成する。このため、例えば、各情報表示装置１００のセンサ部１５０にバイアスが有る場合であっても、精度よく、行動予定を表示したい座席位置を特定することができる。

【0123】

また、本実施形態によれば、行動予定は、表示部１３１上の、表示対象座席位置に相当する位置に表示される。従って、どの割当使用者の行動予定であるかを、ユーザ９１０は、容易に把握できる。

【0124】

また、本実施形態によれば、ユーザ９１０が指定した座席の割当使用者の行動予定が表示される。従って、ユーザ９１０は、所望の情報を効率よく得ることができる。

【0125】

＜変形例１＞
なお、上記実施形態では、ユーザ９１０が意図的に指定した座席（表示対象座席）の割当使用者の行動予定を表示する。しかし、本実施形態は、これに限定されない。

【0126】

例えば、情報表示装置１００のユーザ９１０が、部屋等において、任意の座席の方向に情報表示装置１００を向けた場合に、その座席の位置等から、その座席の割当使用者を特定し、その割当使用者が在席していれば、何の表示も行わず、離席していれば、その割当使用者の行動予定情報を、管理サーバ３００から取得して、その座席位置に（重畳）表示してもよい。

【0127】

情報表示装置１００を向けるとは、具体的には、第一画像取得部１３３の視野範囲の中心近傍（画像センサ内の中心位置ＣＣ近傍）に表示対象座席が配置されるということである。表示対象座席が第一画像取得部１３３の視野範囲の中心近傍に配置されてすぐに割り当て使用者の行動予定情報を表示するようにしても良いし、表示対象座席が第一画像取得部１３３の視野範囲の中心近傍に所定時間以上配置され続けた場合に割り当て使用者の行動予定情報を表示するようにしても良い。

【0128】

この場合、情報表示装置１００は、在不在判別部２３１は必須である。ここでは、在不在判別部２３１は、所定の時間間隔で、情報表示装置１００がスルー画像を取得する毎に、表示対象座席を特定し、在（着座）か不在（非着座）かを判別する。

【0129】

本実施形態では、例えば、在不在判別部２３１は、表示対象座席と判定された座席を含む、予め定めた領域の画像を被照合画像として切り取る。そして、被照合画像を、予めストレージ部１１０に保持する照合用画像と照合し、在不在を判別する。

【0130】

ストレージ部１１０に保持される照合用画像は、例えば、図１７（ａ）に示すように、在席時画像５５１と不在時画像５５２とである。在不在判別部２３１は、被照合画像を、在席時画像５５１および不在時画像５５２とそれぞれ照合し、より合致度の高い方に応じて判別結果を出力する。

【0131】

例えば、座席５６０が表示対象座席とされたものとする。図１７（ｂ）の場合、この部屋Ａを撮影して得られた入力画像５００（不図示）上で、座席５６０を含む破線５６１で囲まれた画像領域を抽出し、被照合画像とする。この被照合画像の場合、在席時画像の５５１方が、一致度が高い。このため、在不在判別部２３１は、在席と判別する。また、図１７（ｃ）の場合、この部屋Ａを撮影して得られた入力画像５００（不図示）上で、破線５６１で囲まれた画像領域を抽出し、被照合画像とする。この被照合画像の場合、不在時画像５５２の方が、一致度が高い。このため、在不在判別部２３１は、不在と判別する。

【0132】

この場合の、行動予定表示処理の流れを、図１８に示す。本処理は、所定の時間間隔で実行される。例えば、情報表示装置１００が、スルー画像を取得する毎に、実行される。

【0133】

在不在判別部２３１は、スルー画像の略中央に配置される座席を含む近傍領域を被照合画像として切り取り（ステップＳ１３０１）、当該座席に関し、使用者が不在であるか否かを判別する（ステップＳ１３０２）。

【0134】

ここで、不在と判別された場合（Ｓ１３０２；Ｙｅｓ）、行動予定表示部２３３は、上記実施形態のステップＳ１２０１以降の処理を行い、その座席の割当使用者の行動予定を表示する。一方、不在でない、すなわち、在席、と判別された場合（Ｓ１３０２；Ｎｏ）、そのまま処理を終了する。

【0135】

本変形例によれば、さらに、ユーザ９１０の手間を低減できる。

【0136】

＜変形例２＞
また、上記実施形態では、座席情報テーブル２５０を生成する座席情報テーブル生成処理と、行動予定表示処理とは、別個独立のものとして実行される。しかし、本実施形態は、これに限定されない。例えば、スルー画像を取得する毎に、割当使用者が在席している座席については、座席情報テーブル２５０を生成し、不在の座席については、行動予定表示処理を行い、両処理を並行して実行させてもよい。

【0137】

この場合、座席情報テーブル２５０に未登録でかつ不在の人物については、その旨、表示する。この場合の機能ブロックは、上記変形例１と同様である。

【0138】

この場合の処理の流れを、図１９に示す。本処理は、スルー画像を取得する毎に実行される。

【0139】

まず、行動予定表示部２３３は、位置情報取得部２１１および方向情報取得部２１２に、スルー画像を取得した際の、自身（情報表示装置１００）の、位置情報および方向情報をそれぞれ、取得させる（ステップＳ１４０１、Ｓ１４０２）。

【0140】

次に、行動予定表示部２３３は、スルー画像内の、座席領域を抽出し（ステップＳ１４０３）、抽出した各座席領域に、１から順に連番を付与する。付与した最後の番号の数字、すなわち、抽出した座席数をｎとする（ｎは、１以上の整数）。座席領域は、例えば、パターンマッチング等により、抽出する。

【0141】

行動予定表示部２３３は、付与した番号が１の座席領域から順に、以下の処理を行う（ステップＳ１４０４）。

【0142】

まず、行動予定表示部２３３は、距離情報取得部２１３に、ｎ番目の座席領域に対応する実空間の座席（以下、対象座席と呼ぶ。）までの距離を取得させる（ステップＳ１４０５）。次に、座席位置算出部２１７に、対象座席の座席位置情報を算出させる（ステップＳ１４０６）。

【0143】

次に、在不在判別部２３１は、対象座席に、使用者が不在であるか否かを判別する（ステップＳ１４０７）。

【0144】

ここで、在席と判別された場合（Ｓ１４０７；Ｎｏ）、座席情報テーブル生成部２３２は、座席情報テーブル生成処理を行う。ここでは、基本的に上記実施形態の座席表生成処理と同様である。ただし、対象座席のレコードが座席情報テーブル２５０に既に登録されている場合は、更新処理を行う。

【0145】

すなわち、まず、座席情報テーブル生成部２３２は、識別画像取得部２１８に、対象座席に着座している人物（着座者）の顔画像を抽出させる（ステップＳ１４０８）。そして、当該顔画像と一致する所属員の個人ＩＤ３１１ｃおよび氏名３１１ｂを所属員データベース３１１から取得する（ステップＳ１４０９）。

【0146】

次に、座席情報テーブル生成部２３２は、座席情報テーブル２５０にアクセスし、上記座席位置情報を有するレコードが既に登録されているか否かを判別する（ステップＳ１４１０）。レコードが登録されていない場合（Ｓ１４１０；Ｎｏ）、座席位置情報と個人ＩＤ３１１ｃとを対応づけて新規レコードとして登録する（ステップＳ１４１１）。レコードが登録されている場合（Ｓ１４１０；Ｙｅｓ）、登録済レコードの更新処理を行う（ステップＳ１４１２）。

【0147】

そして、全ての座席についての処理が終了したか否かを判別する（ステップＳ１４１３）。未処理の座席が有る場合、次の座席について（ステップＳ１４１４）、ステップＳ１４０５に戻る。

【0148】

ステップＳ１４１２で行う更新処理では、座席情報テーブル生成部２３２は、ステップＳ１４０６で特定した、座席位置情報２５４を有するレコードの使用者情報２５６を、ステップＳ１４０９で抽出した個人ＩＤ３１１ｃおよび氏名３１１ｂで上書きする。そして、上書きしたレコード以外に、ステップＳ１４０９で抽出した個人ＩＤ３１１ｃが使用者情報の個人ＩＤ２５８に登録されているレコードがあるか否かを判別する。レコードが有る場合は、当該レコードを削除し、ない場合は、そのまま、ステップＳ１４１３へ移行する。

【0149】

また、ステップＳ１４０７で、不在と判別された場合（Ｓ１４０７；Ｎｏ）、行動予定表示部２３３は、行動予定表示処理を行う。ここでは、基本的に上記実施形態の不在者情報表示処理と同様である。

【0150】

まず、行動予定表示部２３３は、座席情報テーブル２５０にアクセスし、当該座席位置情報に対応付けられた使用者の個人ＩＤ２５８を抽出する（ステップＳ１２０５）。行動予定表示部２３３は、管理サーバ３００にアクセスし、行動予定データベース３１２から、個人ＩＤ２５８と同じ個人ＩＤ３１２ｃに対応付けられた行動予定情報を取得する（ステップＳ１２０６）。そして、行動予定表示部２３３は、表示部１３１に抽出した行動予定情報を表示し（ステップＳ１２０７）、全ての座席について、処理を終えたか判別し、未処理の座席が有る場合は（Ｓ１４１３；Ｎｏ）、ステップＳ１４０４へ戻る。

【0151】

なお、ステップＳ１４１３で、全ての座席について処理を終えたと判別された場合は（Ｓ１４１３；Ｙｅｓ）、行動予定表示部２３３は、処理を終了する。

【0152】

なお、本変形例の場合も、前処理として、一通り、座席情報テーブル２５０を作成し、その後は、既存の座席情報テーブル２５０を更新するよう構成してもよい。

【0153】

このような変形例にすることにより、座席情報テーブル２５０には、常に最新の情報が保持される。席替え等があった場合であっても、対応可能である。

【0154】

＜変形例３＞
なお、上記実施形態および変形例では、座席を、絶対座標の座標値で特定している。しかし、座席を特定する位置情報はこれに限定されない。例えば、所定の部屋内において所定の場所を基準位置とし、当該基準位置に対する所定の部屋内での相対位置情報であってもよい。すなわち、基準位置を原点とする座標系を用いて、座席の位置を特定してもよい。この場合の処理について、上記実施形態等と異なる点に主眼をおいて説明する。

【0155】

まず、空間認識部２１４による空間情報作成処理について説明する。

【0156】

まず、情報表示装置１００により、空間認識を行う所定の部屋の所定の領域の画像を取得する。ここでは、図１０（ａ）と同じ部屋Ａを例にあげて説明する。

【0157】

空間認識部２１４は、取得した画像（入力画像５００）を解析し、その入力画像５００内の各特徴点間の位置関係の取得（空間認識）および基準位置を決定する。空間認識処理及び基準位置の決定手法を、図２０（ａ）および図２０（ｂ）を用いて説明する。ここでは、説明を簡略化するため、水平面内の処理で説明する。また、図２１は、この場合の空間認識処理の処理フローである。

【0158】

空間認識部２１４は、入力画像５００を解析し、複数の特徴点６１１を検出する（ステップＳ１５０１）。複数の特徴点としては、所定の部屋内において、基本的に移動しない、或いは、移動する可能性の少ない構造物の角等を選択する。例えば、柱と天井との接点、固定された机の角、等である。

【0159】

そして、空間認識部２１４は、検出した各特徴点６１１について、方向情報取得部２１２に方向情報を取得させる（ステップＳ１５０２）。この方向情報は、その時点の情報表示装置１００の指向方向に対する相対的な方向であり、第一画像取得部１３３の法線方向９５９に対する角度として得る。

【0160】

また、空間認識部２１４は、各特徴点６１１について、距離情報取得部２１３に、距離情報を取得させる（ステップＳ１５０３）。この距離情報は、その時点の情報表示装置１００の位置からの距離である。

【0161】

空間認識部２１４は、各特徴点６１１のうちの代表的な１つを基準位置６５０とする（ステップＳ１５０４）。例えば、予め定めた条件に合致する特徴点６１１を基準位置６５０とする。予め定めた条件は、例えば、距離情報として得た距離が最も大きい、建築物の構造に係る最も移動する可能性の少ない、等である。本図の例では、情報表示装置１００から最も遠い位置の柱の角（天井との接点）を基準位置６５０とする。基準位置６５０をどこに設定したかを示す情報を、基準位置情報として、各部屋に対応づけてストレージ部１１０に空間情報として保持しておく。

【0162】

そして、空間認識部２１４は、各特徴点６１１について、上記方向情報および距離情報を用いて、基準位置６５０に対する相対位置情報を算出する（ステップＳ１５０５）。そして、算出した相対位置情報を、部屋Ａの空間情報（特徴点マップ）とし、部屋Ａに対応づけてストレージ部１１０に空間情報として登録する（ステップＳ１５０６）。

【0163】

ここで、登録される空間情報６１０の一例を、図２０（ｂ）に示す。破線で示される丸印は空間認識処理で検出された特徴点６１１であり、また、そのうちの代表的な一つが基準位置６５０である。各特徴点６１１はそれぞれ基準位置６５０からの相対位置情報を有する。これらの情報を以て、部屋Ａは他の部屋と識別される。

【0164】

また、座席情報テーブル生成部２３２は、各座席位置情報２５４を、この空間情報内で特定可能な情報として取得し、座席情報テーブル２５０に格納する。この情報を、相対位置情報と呼ぶ。

【0165】

例えば、各座席の座席位置情報を、この基準位置６５０を原点とした座標系で示し、座席情報テーブル２５０の座席位置情報２５４として登録する。なお、この座標系のＸ軸方向Ｙ軸方向は、例えば水平面上で、任意に設定できる。例えば、予め定めた、基準位置以外の特徴点と基準位置とを結ぶ線分の方向をＸ軸方向とし、水平面上のＸ軸に直交する方向をＹ軸方向とする。また、例えば、北等の予め定めた基準方向をＹ軸方向とし、水平面上のＹ軸に直行する方向をＸ軸としても良い。Ｚ軸方向は、鉛直方向とする。この場合、座標系も、特徴点マップとともに、空間情報６１０として登録しておく。

【0166】

基準位置６５０を原点とした、各座席６１２の座標は、以下のように算出する。まず、情報表示装置１００の方向情報取得部２１２が図２０（ａ）に示す、基準位置６５０と、座席６１２との相対角度差情報δを得る。例えば、第一画像取得部１３３の画像センサ内の中心位置ＣＣと、座席６１２の位置とのずれ量から算出する座席６１２の角度と、同様に算出する基準位置６５０の角度との差で算出する。

【0167】

相対角度差情報δと、情報表示装置１００から基準位置６５０までの距離Ｌｓ０と、情報表示装置１００から座席６１２までの距離Ｌｓ１とを用い、基準位置６５０に対する座席６１２の位置情報（相対位置情報）を算出し、座席位置情報２５４として、座席情報テーブル２５０に格納する。

【0168】

座席情報テーブル２５０作成処理の他の処理は、上記実施形態と同様である。

【0169】

なお、特徴点６１１には、例えば、部屋の角、窓枠の角、キャビネットの角等、移動しないもの、あるいは、移動の可能性の低いものを用いる。

【0170】

次に、本変形例の行動予定表示処理について説明する。図２２は、本変形例の行動予定表示処理の処理フローである。この場合も、上記実施形態と異なる処理に主眼をおいて説明する。行動予定表示処理も、対象座席の位置情報の算出手法が異なる。また、本変形例においても、ユーザ９１０が、割当使用者が表示対象座席を指定したことを契機に開始されるものとする。

【0171】

この時、タッチスクリーン１８０の表示例を図２３（ａ）に示す。なお、ユーザ９１０が表示対象座席として選択した位置には、ターゲットマーカ１８０Ｍが表示される。

【0172】

まず、行動予定表示部２３３は、空間認識部２１４に、対象の部屋（部屋Ａ）の空間を認識させ、基準位置情報を取得する（ステップＳ１６０１）。

【0173】

具体的には、空間認識部２１４は、第一画像取得部１３３が取得した入力画像５００を解析して、複数の特徴点を抽出する。そして、抽出した複数の特徴点に対する方向情報を、方向情報取得部２１２に取得させる。また、各特徴点の距離情報を、距離情報取得部２１３に取得させる。そして、取得した方向情報と距離情報とから、各特徴点間の相対的な位置関係を算出する。そして、算出した相対的な位置関係と、ストレージ部１１０に登録される空間情報６１０とを比較することにより、情報表示装置１００の現在位置が部屋Ａであることを特定し、更に部屋Ａの基準位置６５０を特定する。

【0174】

行動予定表示部２３３は、図２３（ｂ）に示すように、方向情報取得部２１２が、基準位置６５０と、表示対象座席６２２との相対角度差情報εを取得する（ステップＳ１６０２）。

【0175】

行動予定表示部２３３は、距離情報取得部２１３により、距離センサ１５５の出力に基づいて、情報表示装置１００から表示対象座席６２２までの、距離情報を取得させる（ステップＳ１６０３）。

【0176】

行動予定表示部２３３は、座席位置算出部２１７に、基準位置６５０に対する表示対象座席６２２の位置情報（相対位置情報）を算出させる（ステップＳ１６０４）。座席位置算出部２１７は、基準位置６５０の方向情報および距離情報と、表示対象座席６２２の相対角度差情報εおよび距離情報と、に基づいて、この相対位置情報を得る。

【0177】

行動予定表示部２３３は、座席情報確認部２２０に、座席情報テーブル２５０から、算出した相対位置情報に対応付けられた使用者の個人ＩＤ２５８を抽出させる（ステップＳ１６０５）。

【0178】

以下は、上記実施形態の行動予定表取得処理と同じである。すなわち、行動予定表示部２３３は、行動予定取得部２２１に、管理サーバ３００の、行動予定データベース３１２から、個人ＩＤ２５８と同じ個人ＩＤ３１２ｃに対応付けられた行動予定情報を取得させる（ステップＳ１２０６）。そして、行動予定表示部２３３は、表示制御部２２２に、抽出した行動予定情報を表示部１３１上に表示させ（ステップＳ１２０７）、処理を終了する。

【0179】

例えば、ＧＰＳの電波等が届かない屋内等においては、情報表示装置１００の絶対値座標が得られない。本変形例によれば、このような場合であっても、所望の座席の割当使用者の行動予定情報を得ることができる。

【0180】

＜変形例４＞
なお、上記実施形態では、図２４（ａ）に示すように、行動予定データベース３１２から該当する行動予定の内容３１２ｇと場所３１２ｈとを抽出して表示している。しかしながら、行動予定の表示態様は、これに限定されない。

【0181】

例えば、図２４（ｂ）に示すように、開始日時３１２ｅおよび終了日時３１２ｆも行動予定データベース３１２から抽出し、併せて表示させてもよい。

【0182】

さらに、上記実施形態では、行動予定表示部２３３が、現在時刻が含まれるレコードの行動予定を、行動予定データベース３１２から取得している。しかし、取得する行動予定は、これに限定されない。例えば、現在時刻が含まれるレコードの行動予定とその次の行動予定を抽出し、或いは、現在時刻以降の行動予定を全て抽出し、表示してもよい。この場合の表示例を、図２４（ｃ）に示す。

【0183】

さらに、予定に公開、非公開を設定し、非公開が設定されている場合、予定の内容、場所等を非表示とし、予定があることのみ表示させてもよい。この場合の表示例を、図２４（ｄ）に示す。この場合、行動予定データベース３１２に、各予定（レコード）について、公開、非公開を示す公開情報３１２ｉを付加する。

【0184】

行動予定表示部２３３は、行動予定データベース３１２にアクセスし、行動予定情報を取得する際、公開情報３１２ｉを参照する。公開情報３１２ｉが非公開である場合、行動予定情報を取得しない。そして、行動予定情報として、「予定がある」ことのみを表示させる。あるいは、非公開であることを意味する情報を表示させる。

【0185】

さらに、この場合、要求元の属性に応じて公開非公開のレベルを設定してもよい。例えば、同じ部署のユーザ９１０には、公開し、他部署のユーザ９１０には、公開しない、等である。

【0186】

この場合、公開、非公開のレベルに応じて公開範囲を予め定めておく。そして、行動予定表示部２３３は、対象座席の使用者と、ユーザ９１０との関係に応じて、公開、非公開を判別する。そして、公開と判別された場合、行動予定情報を取得し、表示させる。

【0187】

例えば、情報表示装置１００は、ストレージ部１１０に、所有者の所属部署等の属性を特定する情報（属性情報）を記憶する。また、行動予定データベース３１２の個人情報３１２ａに、属性情報を追加して記憶しておく。行動予定表示部２３３は、ユーザ９１０の属性情報と、対象座席の使用者の属性情報と、公開レベルと、により、公開、非公開を判別する。

【0188】

＜変形例５＞
なお、不在者情報表示には、ユーザ９１０が座席で使用するＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）の稼働情報を加味してもよい。

【0189】

例えば、管理サーバ３００は、各座席に配置されるＰＣの稼働情報（ＰＣ稼働情報）を管理する。ＰＣ稼働情報テーブル３１３は、例えば、図２５に示すように、個人情報３１３ａ（氏名３１３ｂ、個人ＩＤ３１３ｃ）と、ログインＩＤ３１３ｄと、ログインパスワード（ＰＷ）３１３ｅと、稼働状況３１３ｆと、ログアウト時刻３１３ｇとが管理される。

【0190】

ログインＩＤ３１３ｄおよびログインＰＷ３１３ｅは、それぞれ、各ユーザ９１０がＰＣにログインする際に使用するユーザＩＤとパスワードとである。

【0191】

稼働状況３１３ｆは、各ユーザ９１０が使用するＰＣが現在Ｏｎ－Ｌｉｎｅか否かを示す情報が格納される。これは、ＰＣにログイン中であるか否かを示す情報である。

【0192】

ログアウト時刻３１３ｇは、各人物が最後にＰＣからログアウトした時刻に関する情報である。現在時刻と照らし合わせることにより、ＰＣが非稼働になってからの経過時間を算出できる。

【0193】

例えば、行動予定表示部２３３は、行動予定データベース３１２にアクセスし、該当する個人ＩＤ３１２ｃに対応づけて記憶される行動予定がない場合、ＰＣ稼働情報テーブル３１３にアクセスする。そして個人ＩＤ３１３ｃに対応づけて管理されている稼働状況３１３ｆとログアウト時刻３１３ｇを抽出する。

【0194】

そして、稼働状況３１３ｆが稼働中であることを示すものである場合は、図２４（ｅ）に示すように、稼働状況３１３ｆを表示する。一方、稼働状況３１３ｆが非稼働であることを示すものである場合は、ログアウト時刻３１３ｇを表示する。

【0195】

例えば、稼働中であるとの表示により、ユーザ９１０は、実行中の予定がなく、ＰＣが稼働していることを知ることができる。これにより、社内にいる、短期の離席である可能性が高いことを把握できる。一方、最終ログアウト時刻が表示された場合、退社した可能性が高いことを把握できる。

【0196】

なお、ＰＣ稼働情報の利用は、上記に限定されない。例えば、行動予定が登録されている場合であっても、ＰＣ稼働情報テーブル３１３にさらにアクセスしてもよい。この場合、行動予定とともにＰＣ稼働情報テーブル３１３から取得した稼働状況３１３ｆ、および／またはログアウト時刻３１３ｇを表示してもよい。

【0197】

＜変形例６＞
さらに、不在である場合、連絡可能なように構成してもよい。この場合、所属員データベース３１１は、連絡先情報３１１ｅを備える。

【0198】

行動予定表示部２３３は、図２４（ｆ）に示すように、行動予定情報とともに、連絡手段を起動するアイコンを表示部１３１に表示する。ユーザ９１０による選択を受け付けると、選択に応じた連絡先を、所属員データベース３１１の連絡先情報３１１ｅから抽出し、該当するアプリケーションを起動し、通信を行う。

【0199】

連絡手段は、例えば、座席使用者の携帯電話の電話番号、座席使用者の携帯端末のメールアドレス、ＳＮＳ（Ｓｏｃｉａｌ Ｎｅｔｗｏｒｋｉｎｇ Ｓｅｒｖｉｃｅ）の会員ＩＤ等である。

【0200】

例えば、電話が指定された場合は、電話アプリケーションを起動させ、取得した電話番号情報に基づいて、発呼を開始する。また、メールが指定された場合は、取得したメールアドレス情報に基づいて、送信先を指定し、メール作成画面を提示する。

【0201】

＜変形例７＞
また、上記実施形態および変形例では、行動予定表示処理において、座席に不在の使用者（不在者）の行動予定情報１８０Ｓのみを表示しているが、例えば、在席者の行動予定情報１８０Ｓも表示させてもよい。

【0202】

例えば、図２４（ｇ）に示すように、対象座席に割当使用者が在不在に係らず、ターゲットマーカ１８０Ｍで指定された表示対象座席の割当使用者の行動予定情報１８０Ｓを表示させる。

【0203】

例えば、情報表示装置１００のユーザ９１０から遠方の座席に着席している人物の、今後の予定を把握できる。

【0204】

＜変形例８＞
上記実施形態および変形例では、各情報表示装置１００において、座席情報テーブル２５０を生成する。しかしながら、座席情報テーブル２５０は、例えば、管理サーバ３００が、座席情報テーブル３１５としてそのストレージ部３１０において一括して管理してもよい。各情報表示装置１００が管理サーバ３００にアクセスして使用する。

【0205】

この場合、各情報表示装置１００において、個別に座席情報テーブル２５０を生成する処理は行わなくてもよい。何れかの情報表示装置１００が生成した座席情報テーブル２５０が共有され、各情報表示装置１００は座席情報テーブル２５０の情報更新のみを行う。

【0206】

各情報表示装置１００で座席情報テーブル２５０を生成する処理が不要となり、各情報表示装置１００での処理負担が低減する。また、管理サーバ３００で管理することにより、常に最新の情報を保持することができる。また、ユーザ９１０が使用する情報表示装置１００によらず、不在者情報を表示できる。

【0207】

＜変形例９＞
例えば、管理サーバ３００で、座席情報テーブル２５０を管理する場合、各座席の正当な割当使用者が正確に登録される。従って、例えば、上記変形例１において、特定された表示対象座席の着座者が、正当な割当使用者であるか否かを判別する処理をさらに加えてもよい。

【0208】

本変形例の行動予定表示処理の処理フローを、図２６に示す。

【0209】

この場合、行動予定表示部２３３は、近傍領域を被照合画像として切り取った後（ステップＳ１３０１）、在不在判別部２３１が使用者の在不在を確認する前に、Ｓ１２０１～Ｓ１２０５までの処理を行い、表示対象座席の正当な割当使用者の個人ＩＤ２５８を特定する。

【0210】

その後、在不在判別部２３１は、その表示対象座席における人物の在不在を判別する（ステップＳ１６０１）。

【0211】

そして、不在と判別された場合は、行動予定表示部２３３は、ステップＳ１２０６へ進み、行動予定を抽出し、表示させる。

【0212】

一方、ステップＳ１６０１で在席と判別された場合は、在不在判別部２３１は、さらに、着座者が正当な割当使用者であるか否かを判別する（ステップＳ１６０２）。ここでは、識別画像取得部２１８に、人物画像を抽出させる。そして、識別情報照合部２１９に、所属員データベース３１１から個人ＩＤ３１２ｃを取得させる。そして、在不在判別部２３１は、取得した個人ＩＤ３１２ｃと、ステップＳ１２０５で抽出した個人ＩＤ２５８とを比較し、一致すれば、着座者が正当な割当使用者であると判別する。一方、不一致の場合は、着座者は正当な割当使用者ではないと判別する。なお、所属員データベース３１１に当該人物画像に合致（合致度が閾値以上）するレコードが無い場合も、着座者は正当な割当使用者ではないと判別する。

【0213】

行動予定表示部２３３は、在不在判別部２３１がステップＳ１６０１で不在と判別した場合、および、ステップＳＳ１６０２で着座者が正当な割当使用者ではないと判別した場合、すなわち、表示対象座席に、正当な割当使用者が不在と判別された場合、ステップＳ１２０６へ進み、表示対象座席の正当な割当使用者の行動予定を表示させる。

【0214】

一方、表示対象座席に正当な割当使用者が在席している場合は、行動予定表示部２３３は、そのまま処理を終了する。

【0215】

本変形例により、表示対象座席に、当該座席の正当な割当使用者以外が一時的に着座している場合であっても、確実に正当な割当使用者が不在と判別でき、ユーザ９１０に必要な情報を提示できる。

【0216】

＜変形例１０＞
また、上記実施形態では、座席情報データベース作成時に、顔画像を用い、個人を特定している。しかし、個人の特定手法はこれに限定されない。例えば、着席者が携帯している社員証等、個々人を特定可能な情報を解析し、抽出することにより、特定してもよい。

【0217】

＜＜第二実施形態＞＞
次に、本発明の第二実施形態について説明する。本実施形態の行動予定表示システム９００ａは、図２７（ａ）に示すように、第一実施形態の行動予定表示システム９００に、さらに、カメラ８００を備える。

【0218】

カメラ８００は、各空間（部屋）に１台以上設置される。カメラ８００は、行動予定表示対象の全使用者の座席が撮影範囲に入るよう、１台以上設置される。これにより、情報表示装置１００は、壁やパーティション、家具等の遮蔽物が有る場合であっても、所望の使用者の座席の現状を把握することができる。

【0219】

各カメラ８００は、固定され、固定の撮影範囲を所定の時間間隔で撮影する固定カメラである。本実施形態のカメラ８００は、図２７（ｂ）に示すように、画像を取得（撮影）する撮影部８１１と、距離情報を取得する距離情報取得部８１２とを備える。なお、各カメラ８００は、これらの機能部を実現するハードウェア構成として、ＣＣＤ等の撮像素子、距離センサ、ＣＰＵ、ＲＯＭ、ＲＡＭ等を備える。

【0220】

撮影部８１１が取得した（撮影した）画像は、管理サーバ３００に保持される。なお、管理サーバ３００には、最新の画像のみ保持するよう構成してもよい。また、距離情報取得部８１２は、カメラ８００の撮影範囲に対応する空間の、各対象物までの距離情報を取得する空間内距離情報取得部である。本実施形態では、カメラ８００から表示対象座席までの距離情報を取得する。

【0221】

管理サーバ３００は、そのストレージ部３１０に、カメラ配置テーブル３１４をさらに備える。カメラ配置テーブル３１４は、図２８に示すように、各部屋のカメラ８００の配置情報と、各カメラ８００が撮影した最新の画像へのアクセス情報と、が保持される。

【0222】

具体的には、カメラ８００毎に、カメラ８００の識別情報であるカメラＩＤ３１４ｂと、カメラ８００が配置される部屋を識別する情報である部屋ＩＤ３１４ａと、カメラ配置情報３１４ｃと、最新の画像へのアクセス情報である画像保存アドレス３１４ｆと、が登録される。なお、カメラ配置情報３１４ｃは、絶対値座標で特定されるカメラ位置情報３１４ｄと、カメラ８００のレンズ面の法線方向（撮影面の向き）であるカメラ方向情報３１４ｅとを含む。

【0223】

第二実施形態の他の構成は、基本的に第一実施形態およびその変形例と同じである。以下、本実施形態について、第一実施形態またはその変形例と異なる構成に主眼をおいて説明する。

【0224】

座席情報テーブル生成部２３２による座席情報テーブル生成処理は、第一実施形態と同様である。絶対座標、相対座標いずれを用いて座席情報テーブルを生成してもよい。

【0225】

次に、本実施形態の行動予定表示処理の流れを説明する。

【0226】

図２９は、本実施形態の行動予定表示処理の処理フローである。本処理は、入力画像５００上で、ユーザ９１０が、所定の位置（指定位置）を指定したことを契機に開始される。例えば、図３０（ａ）に示す部屋Ａにユーザ９１０がいる場合を例に説明する。例えば、ユーザ９１０は、図３０（ｂ）に示すように、タッチスクリーン１８０上で、所定の位置を指定する。指定された位置には、ターゲットマーカ１８０Ｍが表示される。

【0227】

まず、行動予定表示部２３３は、座席表生成処理と同様に、情報表示装置１００の、位置情報および方向情報を取得する（ステップＳ１２０１、Ｓ１２０２）。

【0228】

次に、指定位置までの距離情報を取得し（ステップＳ２１０１）、指定位置の位置情報を算出する（ステップＳ２１０２）。これらの処理も、第一実施形態の表示対象座席の距離情報取得処理および位置情報取得処理と同様である。

【0229】

次に、本実施形態では、行動予定表示部２３３は、指定位置が座席であるか否かを判別する（ステップＳ２１０３）。指定位置の位置情報と、座席情報テーブル２５０の座席位置情報とを照合し、一致するものがある場合は、座席と、一致するものがない場合は、座席でないと判別する。

【0230】

座席であると判別された場合は（ステップＳ２１０３；Ｙｅｓ）、第一実施形態同様、当該座席の使用者の個人ＩＤ２５８を抽出し（ステップＳ１２０５）、行動予定情報を行動予定データベース３１２から取得し（ステップＳ１２０６）、座席位置に表示し（ステップＳ１２０７）、処理を終了する。

【0231】

一方、座席でないと判別された場合は（ステップＳ２１０３；Ｎｏ）、行動予定表示部２３３は、表示制御部２２２に、ターゲットマーカ１８０Ｍを消去させる。なお、座席でない場合とは、例えば、図３０（ｂ）に示すように、壁等の座席以外の位置が指定位置として指定された場合である。

【0232】

そして、行動予定表示部２３３は、管理サーバ３００から、各カメラ８００が取得した画像の一覧情報１８０Ｌを取得し、表示制御部２２２に、表示させる（ステップＳ２１０４）。この場合の表示例を図３１（ａ）に示す。ここでは、一覧情報１８０Ｌとして、カメラＩＤ３１４ｂを表示してもよいし、各画像からサムネイル画像を生成し、表示してもよい。これらは、ユーザ９１０から、表示したい画像の選択を受け付けるために表示される。

【0233】

ユーザ９１０から表示する画像の選択を受け付けると、行動予定表示部２３３は、選択を受け付けた画像を取得し、表示制御部２２２に、表示部１３１に表示される入力画像５００上に重畳表示させる（ステップＳ２１０５）。この時の表示部１３１に表示の様子を、図３１（ｂ）に示す。画像１８０Ｒは、所定の時間間隔で受信する。そして、受信する毎に更新される。

【0234】

なお、画像１８０Ｒは、ＬＡＮ４１０経由で、指定したカメラ８００から直接受信してもよい。

【0235】

その後は、行動予定表示部２３３は、当該画像１８０Ｒ上で、ユーザ９１０から、行動予定を表示したい座席として表示対象座席の指定を受け付け（ステップＳ２１０６）、その表示対象座席の位置情報を算出し（ステップＳ２１０７）、ステップＳ１２０５以降の処理を行い、を選択し、上記同様、行動予定情報を表示させる。

【0236】

ここで、Ｓ２１０７における表示対象座席の位置情報は、以下のように算出される。座席位置算出部２１７は、まず、選択された画像を取得したカメラ８００のカメラ配置情報３１４ｃ（カメラ位置情報３１４ｄおよびカメラ方向情報３１４ｅ）を取得する。そして、取得したカメラ位置情報３１４ｄを情報表示装置１００の位置情報の代替として使用する。また、取得したカメラ方向情報３１４ｅを情報表示装置１００の方向情報の代替として使用し、図１４に示した行動予定表示処理と同様の処理を行えばよい。なお、表示対象座席までの距離情報は、カメラ８００が備えた距離情報取得部８１２に取得させればよい。

【0237】

なお、表示対象座席までの距離情報は、各座席が固定である場合、予め各カメラ８００において、距離情報取得部８１２が取得し、カメラ８００内に保持してもよい。

【0238】

以上説明したように、本実施形態の行動予定表示システムは、第一実施形態の構成に、独立した空間毎に固定され、当該空間を撮影する固定されたカメラ８００をさらに備える。そして、管理サーバ３００は、各カメラ８００の位置情報であるカメラ位置情報と、カメラ８００の方向情報であるカメラ方向情報と、を保持し、表示対象座席が、カメラ８００が撮影した画像内の座席である場合、座席位置算出部２１７は、カメラ位置情報およびカメラ方向情報を用いて、表示座席位置情報を算出する。

【0239】

本実施形態によれば、ユーザ９１０が直接見ることができない部屋の座席の割当使用者の予定も知ることができる。

【0240】

なお、第一実施形態の各変形例は、本実施形態にも適用可能である。

【0241】

本発明は上記した実施形態および変形例に限定されるものではなく、様々な変形例が含まれる。例えば、上記した実施形態および変形例は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、ある実施形態または変形例の構成の一部を他の実施形態や変形例の構成に置き換えることが可能である。また、ある実施形態または変形例の構成に他の実施形態または変形例の構成を加えることも可能である。さらに、各実施形態または変形例の構成の一部について、他の構成の追加・削除・置換をすることが可能である。

【0242】

また、上記の各構成、機能、処理部、処理手段等は、それらの一部または全部を、例えば集積回路で設計する等によりハードウェアで実現してもよい。また、上記の各構成、機能等は、プロセッサがそれぞれの機能を実現するプログラムを解釈し、実行することによりソフトウェアで実現してもよい。各機能を実現するプログラム、テーブル、ファイル等の情報は、メモリ部や、ハードディスク、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）等の記録装置、または、ＩＣカード、ＳＤカード、ＤＶＤ等の記録媒体に置くことができる。

【0243】

また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線や情報線を示しているとは限らない。実際には殆ど全ての構成が相互に接続されていると考えてもよい。

【符号の説明】

【0244】

１００：情報表示装置、１００Ｈ：ＨＭＤ、１００Ｓ：スマートフォン、１０１：主制御部、１０２：システムバス、１０３：ＲＡＭ、１０９Ｈ：フレーム、１０９Ｓ：ケース、１１０：ストレージ部、１２０：操作受付部、１２１：操作キー、１２１Ｐ：電源スイッチ、１２２：タッチセンサ、１２３：タッチパネル、１２４：指紋センサ、１２５：ＬＥＤ、１３０：画像処理部、１３１：表示部、１３２：画像信号処理部、１３３：第一画像取得部、１３３Ｌ：左第一画像取得部、１３３Ｒ：右第一画像取得部、１３４：第二画像取得部、１４０：音声処理部、１４１：音声出力部、１４１Ｌ：左音声出力部、１４１Ｒ：右音声出力部、１４１Ｍ：モノラルスピーカ、１４１Ｓ：ステレオスピーカ、１４２：音声信号処理部、１４３：音声入力部、１５０：センサ部、１５１：ＧＰＳ受信部、１５２：ジャイロセンサ、１５３：地磁気センサ、１５４：加速度センサ、１５５：距離センサ、１６０：通信処理部、１６１：ＬＡＮ通信部、１６２：電話網通信部、１６３：ＢＴ通信部、１７０：拡張インタフェース部、１７０Ｕ：ＵＳＢ端子、１８０：タッチスクリーン、１８０Ｌ：一覧情報、１８０Ｍ：ターゲットマーカ、１８０Ｒ：画像、１８０Ｓ：行動予定情報、
２１１：位置情報取得部、２１２：方向情報取得部、２１３：距離情報取得部、２１４：空間認識部、２１５：視線検出部、２１６：座席選択受付部、２１７：座席位置算出部、２１８：識別画像取得部、２１９：識別情報照合部、２２０：座席情報確認部、２２１：行動予定取得部、２２２：表示制御部、２２３：連絡制御部、２３１：在不在判別部、２３２：座席情報テーブル生成部、２３３：行動予定表示部、
２５０：座席情報テーブル、２５１：座席情報、２５２：座席ＩＤ、２５３：部屋ＩＤ、２５４：座席位置情報、２５６：使用者情報、２５７：氏名、２５８：個人ＩＤ、
３００：管理サーバ、３０１：主制御部、３０２：バス、３０３：ＲＡＭ、３１０：ストレージ部、３１１：所属員データベース、３１１ａ：個人情報、３１１ｂ：氏名、３１１ｃ：個人ＩＤ、３１１ｄ：認証用顔画像、３１１ｅ：連絡先情報、３１２：行動予定データベース、３１２ａ：個人情報、３１２ｂ：氏名、３１２ｃ：個人ＩＤ、３１２ｄ：識別Ｎｏ．、３１２ｅ：開始日時、３１２ｆ：終了日時、３１２ｇ：内容、３１２ｈ：場所、３１２ｉ：公開情報、３１２ｊ：行動予定情報、３１３：ＰＣ稼働情報テーブル、３１３ａ：個人情報、３１３ｂ：氏名、３１３ｃ：個人ＩＤ、３１３ｄ：ログインＩＤ、３１３ｅ：ログインＰＷ、３１３ｆ：稼働状況、３１３ｇ：ログアウト時刻、３１４：カメラ配置テーブル、３１４ａ：部屋ＩＤ、３１４ｂ：カメラＩＤ、３１４ｃ：カメラ配置情報、３１４ｄ：カメラ位置情報、３１４ｅ：カメラ方向情報、３１４ｆ：画像保存アドレス、３１５：座席情報テーブル、３２０：操作受付部、３３１：表示部、３３２：画像信号処理部、３６１：ＬＡＮ通信部、
４１０：内部ネットワーク、４２０：ゲートウェイ装置、４３０：外部ネットワーク、４４０：ＧＰＳ衛星、４５０：携帯情報端末、
５００：入力画像、５１１：登録対象座席、５１２：割当使用者、５２１：領域、５２２：顔領域、５２３：所定領域、５３１：表示対象座席、５４１：座席位置、５５１：在席時画像、５５２：不在時画像、５６０：座席、５６１：破線、６１０：空間情報、６１１：特徴点、６１２：座席、６２２：表示対象座席、６５０：基準位置、８００：カメラ、８１１：撮影部、８１２：距離情報取得部、
９００：行動予定表示システム、９００ａ：行動予定表示システム、９１０：ユーザ、９５８：基準方向、９５９：法線方向、Ａ：部屋、ＡＡ：実空間、ＣＣ：画像センサ中心位置、Ｌｓ：距離、Ｌｓ０：距離、Ｌｓ１：距離

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】

【図20】

【図21】

【図22】

【図23】

【図24】

【図25】

【図26】

【図27】

【図28】

【図29】

【図30】

【図31】