特開 2023-123088 美術セット建て込み支援システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2023123088

(43)【公開日】2023-09-05

(54)【発明の名称】美術セット建て込み支援システム

(51)【国際特許分類】

   G06T 19/00 20110101AFI20230829BHJP

   G09G 5/00 20060101ALI20230829BHJP

   G09G 5/38 20060101ALI20230829BHJP

   G09G 5/377 20060101ALI20230829BHJP

   G06F 3/01 20060101ALN20230829BHJP

【ＦＩ】

G06T19/00 600

G09G5/00 550C

G09G5/00 530M

G09G5/38 Z

G09G5/36 520L

G06F3/01 510

【審査請求】未請求

【請求項の数】6

【出願形態】ＯＬ

(21)【出願番号】P 2022026962

(22)【出願日】2022-02-24

(71)【出願人】

【識別番号】000003757

【氏名又は名称】東芝ライテック株式会社

(74)【代理人】

【識別番号】110003708

【氏名又は名称】弁理士法人鈴榮特許綜合事務所

(74)【代理人】

【識別番号】100108855

【弁理士】

【氏名又は名称】蔵田 昌俊

(74)【代理人】

【識別番号】100179062

【弁理士】

【氏名又は名称】井上 正

(74)【代理人】

【識別番号】100075672

【弁理士】

【氏名又は名称】峰 隆司

(74)【代理人】

【識別番号】100153051

【弁理士】

【氏名又は名称】河野 直樹

(74)【代理人】

【識別番号】100162570

【弁理士】

【氏名又は名称】金子 早苗

(72)【発明者】

【氏名】太田 慎二

【テーマコード（参考）】

5B050

5C182

5E555

【Ｆターム（参考）】

5B050BA09

5B050BA13

5B050CA07

5B050DA01

5B050DA10

5B050EA07

5B050EA18

5B050EA19

5B050EA27

5B050EA28

5B050FA02

5B050FA09

5B050GA08

5C182AB08

5C182AB33

5C182AC03

5C182AC13

5C182BA14

5C182BA46

5C182BA47

5C182BA68

5C182BC01

5C182CB41

5C182CB54

5E555AA11

5E555AA27

5E555BA02

5E555BB02

5E555BE17

5E555CA42

5E555CA44

5E555CA45

5E555DA08

5E555DA11

5E555DB41

5E555DB53

5E555DB56

5E555DC09

5E555DC43

5E555EA22

5E555FA00

(57)【要約】

【課題】美術セットを設計通りに建て込めるように作業者を支援する美術セット建て込み支援システムを提供すること。
【解決手段】実施形態によれば、美術セット建て込み支援システムは、閲覧端末、計測部、計算部、生成部及び表示制御部を備える。閲覧端末は、カメラとディスプレイとを備え、閲覧者が携帯する。計測部は、決められた範囲の実空間内でカメラを向けている方位と仰角を計測する。計算部は、計測部の計測結果に基づいて、カメラで撮影されてディスプレイに表示される実空間内の範囲である閲覧範囲を計算する。生成部は、実空間内に建て込む美術セットの３次元形状及び建て込みの３次元位置を示す美術セット設計情報と、計算された閲覧範囲とに基づいて、美術セットの３次元表示データを生成する。表示制御部は、ディスプレイに、生成された３次元表示データに基づく３次元画像を表示させる。
【選択図】図１１

【特許請求の範囲】

【請求項1】

カメラとディスプレイとを備え、閲覧者が携帯する閲覧端末と；
決められた範囲の実空間内で前記カメラを向けている方位と仰角を計測する計測部と；
前記計測部の計測結果に基づいて、前記カメラで撮影されて前記ディスプレイに表示される前記実空間内の範囲である閲覧範囲を計算する計算部と；
前記実空間内に建て込む美術セットの３次元形状及び建て込みの３次元位置を示す美術セット設計情報と、前記計算された閲覧範囲と、に基づいて、前記ディスプレイに表示するべき前記美術セットの３次元表示データを生成する生成部と；
前記ディスプレイに、前記生成された３次元表示データに基づく３次元画像を表示させる表示制御部と；
を備える、美術セット建て込み支援システム。

【請求項2】

前記計測部は、さらに、前記実空間内での前記閲覧端末の位置を計測する
請求項１記載の美術セット建て込み支援システム。

【請求項3】

前記生成部は、移動配置可能な照明器具の３次元形状と前記美術セットの建て込み終了後の時点における前記照明器具の３次元位置とを示す照明器具設計情報に基づく前記照明器具の３次元表示データを生成する
請求項１記載の美術セット建て込み支援システム。

【請求項4】

前記照明器具設計情報は、前記美術セットの建て込み終了後の時点における前記照明器具の前記３次元位置での照射方向を示す照射方向情報を含み、
前記生成部は、さらに、前記照射方向情報に基づくベクトルの３次元表示データを生成する
請求項３記載の美術セット建て込み支援システム。

【請求項5】

前記生成部は、さらに、前記実空間内に固定配置されている付帯設備の３次元位置に基づく前記付帯設備の３次元表示データを生成する
請求項１記載の美術セット建て込み支援システム。

【請求項6】

前記表示制御部は、前記閲覧端末に含まれ、
前記計算部及び前記生成部は、前記閲覧端末と通信可能な管理装置に含まれ、
前記生成部は、前記閲覧範囲を包含する拡大範囲に基づいて、前記３次元表示データを生成し、
前記表示制御部は、前記閲覧範囲に基づいて前記３次元表示データを調整し、調整後の３次元表示データに基づく３次元画像を前記ディスプレイに表示させる
請求項１乃至５の何れか１項記載の美術セット建て込み支援システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明の実施形態は、美術セット建て込み支援システムに関する。

【背景技術】

【0002】

テレビ局のスタジオ、劇場の舞台、ホール等の施設では、様々な美術セットが、短期間または長期間の間、設置されるが、この美術セットの建て込み及び撤収の作業自体は、短時間で実施されることが要求される。

【0003】

このような美術セットの建て込み作業は、照明設定及び音響設定に先立って実施される。従来、建て込み作業は、美術セット用の作業者が、紙に出力された配置図面を基に行う。

【0004】

そのため、以下のような問題が有った。

【0005】

（１）設置した美術セットが、照明器具を取り付ける照明用バトンと交差することが有り、照明設計に基づいて照明器具担当の作業者が照明用バトンを降下させて照明器具を交換したり照射方向の調整を行おうとしたりしたとき、美術セットが邪魔となって照明用バトンを降下させられず、照明器具についての作業を実施することができなくなってしまう。本来、美術セットの形状及び建て込み位置は、照明用バトンという施設の付帯設備についての情報及び使用する照明器具の照射位置や照射方向といった照明設計を考慮して設計されているので、このような自体は発生しないはずである。しかしながら、美術セットが配置図面通りに建て込まれなかった場合、このような不具合が発生し、照明用バトンを降下できるようにするために、建て込まれた美術セットを移動する等の付加作業を行わなければならない場合が有る。

【0006】

（２）美術セットが配置図面通りに建て込まれなかった場合、他の付帯施設にも影響を及ぼすことが有る。例えば、設置した美術セットが、床面または壁面に配置されている電源コンセント、音声コネクタ、等を塞いでしまい、当該付帯設備を使用できなくしてしまうことが有る。コンセントや音声コネクタを利用するために、建て込み後に美術セットの移動等の作業を行わなければならない場合が有る。

【0007】

（３）さらには、火を扱うセットや火を放つ火器の近くに美術セットが設置されてしまう場合も有り、火気利用時の安全確保のために、建て込み後に美術セットの移動等の作業を行わなければならない場合が有る。

【0008】

（４）美術セットが大型である場合には、上記（１）、（２）または（３）のような不具合が有ったとしても、美術セットの移動を行うことが難しくなる。

【0009】

以上の問題は、美術セットを設計通り確実に建て込むことができれば発生しない。

【先行技術文献】

【特許文献】

【0010】

【特許文献1】特開２０２１－０３４３１３号公報

【発明の概要】

【発明が解決しようとする課題】

【0011】

本発明が解決しようとする課題は、美術セットを設計通りに建て込めるように作業者を支援する美術セット建て込み支援システムを提供することである。

【課題を解決するための手段】

【0012】

実施形態によれば、美術セット建て込み支援システムは、閲覧端末、計測部、計算部、生成部及び表示制御部を備える。閲覧端末は、カメラとディスプレイとを備え、閲覧者が携帯する。計測部は、決められた範囲の実空間内でカメラを向けている方位と仰角を計測する。計算部は、計測部の計測結果に基づいて、カメラで撮影されてディスプレイに表示される実空間内の範囲である閲覧範囲を計算する。生成部は、実空間内に建て込む美術セットの３次元形状及び建て込みの３次元位置を示す美術セット設計情報と、計算された閲覧範囲とに基づいて、ディスプレイに表示するべき美術セットの３次元表示データを生成する。表示制御部は、ディスプレイに、生成された３次元表示データに基づく３次元画像を表示させる。

【発明の効果】

【0013】

本発明によれば、美術セットを設計通りに建て込めるように作業者を支援する美術セット建て込み支援システムが提供される。

【図面の簡単な説明】

【0014】

【図1】図１は、第１の実施形態に係る美術セット建て込み支援システムの一例を示す概略構成図である。

【図2】図２は、図１中の位置マーカの配置の一例を示す模式図である。

【図3】図３は、図１中の管理装置のハードウェア構成の一例を示すブロック図である。

【図4】図４は、図１中の作業者端末のハードウェア構成の一例を示すブロック図である。

【図5】図５は、管理装置の機能的な構成の一例を示すブロック図である。

【図6】図６は、位置マーカと作業者端末の位置関係の一例を示す模式図である。

【図7】図７は、図４中の方位センサの計測範囲を示す模式図である。

【図8】図８は、図４中の角度センサの計測範囲を示す模式図である。

【図9】図９は、図６の位置関係での作業者端末の予想位置の計算手法を説明するための模式図である。

【図10A】図１０Ａは、凝視点の計算手法を説明するための模式図である。

【図10B】図１０Ｂは、凝視点の計算手法を説明するための模式図である。

【図11】図１１は、美術セット建て込み支援システムにおける各部の動作関係を示す模式図である。

【図12】図１２は、作業者と照明器具及び美術セットとの関係を説明するための模式図である。

【図13】図１３は、凝視範囲の一例を示す模式図である。

【図14】図１４は、３次元モデルの表示例を示す模式図である。

【図15】図１５は、作業者端末において実行される処理動作の一例を示すフローチャートである。

【図16】図１６は、管理装置において実行される処理動作の一例を示すフローチャートである。

【図17】図１７は、第２の実施形態に係る美術セット建て込み支援システムにおける各部の動作関係を示す模式図である。

【図18】図１８は、第２の実施形態の作業者端末において実行される処理動作の一例を示すフローチャートである。

【図19】図１９は、第２の実施形態の管理装置において実行される処理動作の一例を示すフローチャートである。

【発明を実施するための形態】

【0015】

実施形態の美術セット建て込み支援システムは、閲覧端末（３）と、計測部（４０，４１）と、計算部（１１３）と、生成部（１１４）と、表示制御部（３１Ａ）と、を備える。閲覧端末（３）は、カメラ（３９）とディスプレイ（３８）とを備え、閲覧者が携帯する。計測部（４０，４１）は、決められた範囲の実空間（ＳＴ）内でカメラ（３９）を向けている方位と仰角を計測する。計算部（１１３）は、計測部（４０，４１）の計測結果に基づいて、カメラ（３９）で撮影されてディスプレイ（３８）に表示される実空間（ＳＴ）内の範囲である閲覧範囲（ＧＲ）を計算する。生成部（１１４）は、実空間（ＳＴ）内に建て込む美術セット（ＡＳ）の３次元形状及び建て込みの３次元位置を示す美術セット設計情報と、計算された閲覧範囲（ＧＲ）と、に基づいて、ディスプレイ（３８）に表示するべき美術セット（ＡＳ）の３次元表示データを生成する。表示制御部（３１Ａ）は、ディスプレイ（３８）に、生成された３次元表示データに基づく３次元画像（ＭＤＳ）を表示させる。これにより、実空間（ＳＴ）内への美術セット（ＡＳ）の建て込み作業時に、建て込んだ美術セット（ＡＳ）上に当該美術セット（ＡＳ）の３次元画像（ＭＤＳ）を拡張現実として重ね合わせ表示することができ、閲覧者（ＷＯ）は、実際の美術セット（ＡＳ）と３次元画像（ＭＤＳ）とのずれ具合を確認することで、設計通りに美術セット（ＡＳ）が設置できたか否かを、容易に判断することができる。したがって、実施形態の美術セット建て込み支援システムによれば、美術セット（ＡＳ）を設計通りに建て込めるように閲覧者（ＷＯ）である作業者を支援することができる。

【0016】

実施形態の美術セット建て込み支援システムでは、計測部（４０，４１，２，３３，１１２）は、さらに、実空間（ＳＴ）内での閲覧端末（３）の位置を計測する。よって、凝視範囲（ＧＲ）を正確に判別することができ、建て込んだ美術セット（ＡＳ）とその３次元画像（ＭＤＳ）との重ね合わせを、より正確に行うことが可能となる。

【0017】

実施形態の美術セット建て込み支援システムでは、生成部（１１４）は、移動配置可能な照明器具（ＬＦ）の３次元形状と美術セットの建て込み終了後の時点における照明器具（ＬＦ）の３次元位置とを示す照明器具設計情報に基づく照明器具（ＬＦ）の３次元表示データを生成する。よって、照明器具（ＬＦ）の３次元画像（ＭＤＬ）も撮影画像に重畳表示されるようになるので、建て込んだ美術セット（ＡＳ）の、照明器具（ＬＦ）との干渉、照明器具（ＬＦ）が取り付けられる照明用バトンとの交差、等を容易に確認することが可能となる。

【0018】

実施形態の美術セット建て込み支援システムでは、照明器具設計情報は、美術セット（ＡＳ）の建て込み終了後の時点における照明器具（ＬＦ）の３次元位置での照射方向（ＢＤ）を示す照射方向情報を含み、生成部（１１４）は、さらに、前記照射方向情報に基づくベクトルの３次元表示データを生成する。よって、照明器具（ＬＦ）から照射される照明の照射方向（ＢＤ）の３次元画像（ＭＤＬ）も撮影画像に重畳表示されるようになるので、建て込んだ美術セット（ＡＳ）への照明状況、或いは、美術セット（ＡＳ）が照明を遮断してしまう状況を容易に確認することが可能となる。

【0019】

実施形態の美術セット建て込み支援システムでは、生成部（１１４）は、さらに、実空間（ＳＴ）内に固定配置されている付帯設備の位置情報に基づく付帯設備の３次元表示データを生成する。よって、付帯設備の３次元画像（ＭＤＥ）も撮影画像に重畳表示されるようになるので、美術セット（ＡＳ）と付帯設備の位置関係を容易に把握することができ、付帯設備の上や前に美術セット（ＡＳ）を建て込んでしまい、当該付帯設備が使用できなくなってしまうことを防止することが可能となる。

【0020】

実施形態の美術セット建て込み支援システムでは、表示制御部（３１Ａ）は、閲覧端末（３）に含まれ、計算部（１１３）及び生成部（１１４）は、閲覧端末（３）と通信可能な管理装置（１）に含まれる。そして、生成部（１１４）は、閲覧範囲（ＧＲ）を包含する拡大範囲（ＭＲ）に基づいて、３次元表示データを生成し、表示制御部（３１Ａ）は、閲覧範囲（ＧＲ）に基づいて３次元表示データを調整し、調整後の３次元表示データに基づく３次元画像（ＭＤＳ；ＭＤＬ；ＭＤＢ；ＭＤＥ）をディスプレイ（３８）に表示させる。よって、高い処理能力を必要とする動作を高性能な装置である管理装置（１）において行うことで、閲覧端末（３）は、処理能力がそれほど高くなくても良いので、安価に構成することができる。そのため、多数の閲覧端末（３）を準備することができ、同時併行して複数の美術セット（ＡＳ）の建て込みを行い得る。また、多数の閲覧端末（３）を使用しても、凝視範囲ＧＲが拡大範囲ＭＲ内での移動となるような凝視点Ｐの移動では、各閲覧端末（３）内での調整だけで良く、管理装置（１）の動作が必要とならない。よって、管理装置（１）における負荷の平準化が実現できる。

【0021】

以下、実施形態について、図面を参照して説明する。なお、以下では、テレビ局のスタジオにおける美術セットの建て込みを例にして説明するが、劇場の舞台、ホール、等の他の施設にも同様に適用可能なことは言うまでもない。

【0022】

（第１の実施形態）
図１は、第１の実施形態における美術セット建て込み支援システムの一例を示す概略構成図である。図１に示すように、美術セット建て込み支援システムは、美術セットを建て込む実空間であるテレビ局のスタジオＳＴ毎に配置された、１台の管理装置１と、３台以上の位置マーカ２と、複数台の作業者端末３と、を備える。

【0023】

管理装置１は、スタジオＳＴ内の決められた位置に配置されていても良いし、スタジオＳＴ内で任意の位置に移動可能としても良い。管理装置１は、例えば、汎用のパーソナルコンピュータ等のコンピュータである。管理装置１は、テレビ局内ネットワーク、インターネット、等の図示しないスタジオ外ネットワークを介して、サーバコンピュータ、ファイルサーバ、等の外部機器から各種データを取得することができる。

【0024】

管理装置１は、各種情報を加味して作業者端末３の３次元（３Ｄ）位置情報を計算する。例えば、管理装置１は、対象となるスタジオＳＴの３次元形状データ、スタジオＳＴ内に建て込む美術セットの３次元設計データ、スタジオＳＴ内のコンセント等の付帯設備の３次元位置データ、向き、照射強さ、等のスタジオＳＴ内の照明器具の３次元設計データ、等を予め保持する。また、管理装置１は、後述するように、作業者端末３から送信されてくる計測データに基づいて、作業者端末３の３次元位置、作業者が凝視している凝視点の３次元位置、作業者の視点方向での３次元形状の見え方、等の計算を行う。

【0025】

位置マーカ２は、スタジオＳＴ内の作業者端末３の３次元位置を計測するための基準となるマーキング機器である。位置マーカ２は、例えば、電波発信源とすることができる。複数の位置マーカ２それぞれは、スタジオＳＴの互いに異なる所定位置に固定される。図２は、位置マーカ２の配置の一例を示す模式図である。この例では、４台の位置マーカ２が、スタジオＳＴの異なる所定位置として、天井の四隅に設置されている。なお、図２におけるＷＯは、スタジオＳＴ内に居る、美術セットの建て込み作業を実施する作業者ＷＯを示している。

【0026】

作業者端末３は、ＡＲ（拡張現実）グラス、スマートフォン、タブレット、等の作業者ＷＯが携帯する携帯型コンピュータである。ＡＲグラスは、作業者ＷＯの作業を妨げないので、作業者端末３とするのに特に適している。以下、作業者端末３は、ＡＲグラスであるとして説明する。作業者端末３は、作業者ＷＯに割り当てられるものであって、配置されるスタジオＳＴは固定されない。すなわち、作業者端末３は、複数のスタジオＳＴの間で自由に行き来できる。管理装置１と作業者端末３のそれぞれとは、スタジオＳＴ内に配備されたネットワークＮＷを経由したデータ通信が可能となっている。すなわち作業者端末３は、スタジオＳＴに入室した際に、ネットワークＮＷを経由して管理装置１との間で所定の認証作業を行い、管理装置１の許可を得て、管理装置１との間でのデータ通信が可能となる。例えば、各位置マーカ２から発信された電波に基づいて自端末のスタジオＳＴ内の位置を計測し、その計測した位置を示す位置データを管理装置１に送信することができる。なお、ネットワークＮＷは、汎用ネットワークであり、作業者端末３とネットワークＮＷの間は無線接続とすることが望ましい。

【0027】

なお、作業者端末３は、美術セットの建て込み作業を実施する複数の作業者ＷＯのそれぞれが携帯している必要は無い。例えば、複数の作業者ＷＯを管理して建て込み作業を監督する監督者一人が携帯するものとしても構わない。よって、図１では、作業者端末３は複数台示しているが、少なくとも１台有れば良い。

【0028】

作業者端末３は、位置マーカ２からの距離、作業者ＷＯが凝視している凝視点方向、等を計測し、計測結果データを管理装置１に送信する。また、作業者端末３は、管理装置１が計算した作業者ＷＯの視点方向での３次元形状の見え方に基づいて、ＡＲ機能により、当該作業者端末３の現在位置からの美術セットの３次元表示データ、現在位置からの照明器具の照射方向の３次元表示データ、等を表示する。複数の作業者端末３は、当該作業者端末３の現在位置、作業者ＷＯが凝視している凝視点方向、等に依存して、個別に異なる表示が行われる。

【0029】

図３は、管理装置１のハードウェア構成の一例を示すブロック図である。管理装置１は、ＣＰＵ（Central Processing Unit）等のプロセッサ１１Ａを有する。プロセッサ１１Ａは、マルチコア／マルチスレッドのものであって良く、複数の処理を並行して実行することができる。そして、管理装置１は、このプロセッサ１１Ａに対し、プログラムメモリ１１Ｂ、データメモリ１２、通信インタフェース１３及び入出力インタフェース１４を、バス１５を介して接続したものとなっている。

【0030】

プログラムメモリ１１Ｂは、記憶媒体として、例えば、ＨＤＤ（Hard Disk Drive）やＳＳＤ（Solid State Drive）等の随時書込み及び読出しが可能な不揮発性メモリと、ＲＯＭ（Read Only Memory）等の不揮発性メモリとを組み合わせて使用したものである。プログラムメモリ１１Ｂは、プロセッサ１１Ａが各種処理を実行するために必要なプログラムを格納する。プログラムは、ＯＳ（Operating System）や様々なアプリケーションプログラムを含み、アプリケーションプログラムの一つとして、詳細は後述するような支援プログラムを含む。

【0031】

データメモリ１２は、記憶媒体として、例えば、ＨＤＤまたはＳＳＤ等の随時書込み及び読出しが可能な不揮発性メモリと、ＲＡＭ（Random Access Memory）等の揮発性メモリとを組み合わせて使用したストレージである。データメモリ１２は、各種処理を行う過程で取得及び作成されたデータを記憶するために用いられる。

【0032】

通信インタフェース１３は、ネットワークＮＷ及び図示しないスタジオ外ネットワークと接続するための有線または無線通信部である。

【0033】

入出力インタフェース１４は、入力装置１６及び出力装置１７とのインタフェースである。

【0034】

入力装置１６は、管理装置１の操作者がプロセッサ１１Ａに対して指示を入力するためのキーボードやポインティングデバイス等を含む。さらに、入力装置１６は、データメモリ１２に格納するべきファイルやデータを、ＵＳＢメモリ等のメモリ媒体から読み出すためのリーダや、そのようなファイルやデータをディスク媒体から読み出すためのディスク装置を含み得る。

【0035】

出力装置１７は、プロセッサ１１Ａからの操作者に提示するべき出力データを表示するディスプレイや、それを印刷するプリンタ等を含む。さらに、出力装置１７は、音声データや音楽データを出力するスピーカを含むことができる。

【0036】

なお、管理装置１は、入力装置１６及び／または出力装置１７を備えていなくても良い。管理装置１は、通信インタフェース１３によりスタジオ外ネットワークを介してスタジオＳＴ外部の情報処理機器と通信して、データメモリ１２に格納するべきファイルやデータを受信したり、ユーザに対して出力するべきデータを送信したりすることができる。

【0037】

図４は、作業者端末３のハードウェア構成の一例を示すブロック図である。作業者端末３は、ＣＰＵ等のプロセッサ３１Ａを有する。プロセッサ３１Ａは、マルチコア／マルチスレッドのものであって良く、複数の処理を並行して実行することができる。そして、作業者端末３は、このプロセッサ３１Ａに対し、プログラムメモリ３１Ｂ、データメモリ３２、通信インタフェース３３、入出力インタフェース３４及びセンサインタフェース３５を、バス３６を介して接続したものとなっている。

【0038】

プログラムメモリ３１Ｂは、記憶媒体として、例えば、ＳＳＤ等の随時書込み及び読出しが可能な不揮発性メモリと、ＲＯＭ等の不揮発性メモリとを組み合わせて使用したものである。プログラムメモリ３１Ｂは、プロセッサ３１Ａが各種処理を実行するために必要なプログラムを格納する。プログラムは、ＯＳや様々なアプリケーションプログラムを含み、アプリケーションプログラムの一つとして、詳細は後述するような支援プログラムを含む。

【0039】

データメモリ３２は、記憶媒体として、例えば、ＳＳＤ等の随時書込み及び読出しが可能な不揮発性メモリと、ＲＡＭ等の揮発性メモリとを組み合わせて使用したストレージである。データメモリ３２は、各種処理を行う過程で取得及び作成されたデータを記憶するために用いられる。

【0040】

通信インタフェース３３は、ネットワークＮＷと接続するための無線通信部である。また、通信インタフェース３３は、位置マーカ２から発信された電波を受信する受信部である。

【0041】

入出力インタフェース３４は、入力装置３７及び出力装置３８とのインタフェースである。

【0042】

入力装置３７は、作業者端末３の操作者がプロセッサ３１Ａに対して指示を入力するためのボタンやキースイッチを含む。さらに、入力装置３７は、データメモリ３２に格納するべきファイルやデータを、ＵＳＢメモリ等のメモリ媒体から読み出すためのリーダを含み得る。

【0043】

出力装置３８は、プロセッサ３１Ａからの操作者に提示するべき出力データを表示するディスプレイを含む。さらに、出力装置３８は、音声データや音楽データを出力するスピーカを含むことができる。

【0044】

センサインタフェース３５は、イメージセンサであるカメラ３９、方位センサ４０、角度センサ４１、等のセンサとのインタフェースである。

【0045】

カメラ３９は、当該作業者端末３の、作業者ＷＯが閲覧するディスプレイと対向する側に配置され、作業者ＷＯが向いている方向を撮影する。特に、当該作業者端末３がＡＲグラスである場合、カメラ３９は、作業者ＷＯが顔を向けている方向に追随して、撮影を行うことができる。

【0046】

方位センサ４０は、カメラ３９を向けている方位、つまり、作業者ＷＯが作業者端末３を向けている東西南北の方位を計測する。当該作業者端末３がＡＲグラスである場合、方位センサ４０は、作業者ＷＯが顔を向けている方位を計測することができる。

【0047】

角度センサ４１は、カメラ３９を向けている仰角、つまり、作業者ＷＯが作業者端末３を向けている上下方向の角度を計測する。当該作業者端末３がＡＲグラスである場合、角度センサ４１は、作業者ＷＯが顔を向けている仰角を計測することができる。

【0048】

図５は、管理装置１の機能的な構成の一例を、図３に示したハードウェア構成と関連付けて示すブロック図である。

【0049】

処理部１１は、上記プロセッサ１１Ａと上記プログラムメモリ１１Ｂとから構成され、ソフトウェアによる処理機能部として、事前情報設定部１１１と、計測データ取得部１１２と、凝視範囲計算部１１３と、表示データ生成部１１４と、表示データ送信部１１５と、を備える。これらの処理機能部は、何れも、プログラムメモリ１１Ｂに格納された支援プログラムを、上記プロセッサ１１Ａに実行させることにより実現される。処理部１１は、また、ＡＳＩＣ（Application Specific Integrated Circuit）、ＧＰＵ（Graphics Processing Unit）、ＦＰＧＡ（field-programmable gate array）、ＤＳＰ（Digital Signal processor）、等の集積回路を含む、他の多様な形式で実現されても良い。

【0050】

また、データメモリ１２の不揮発性メモリの記憶領域は、３Ｄデータ記憶部１２１を備える。また、データメモリ１２の不揮発性メモリまたは揮発性メモリの記憶領域は、計測データ記憶部１２２、凝視範囲データ記憶部１２３及び表示データ記憶部１２４を備える。さらに、データメモリ１２の揮発性メモリの記憶領域は、特に図示はしていないが、処理部１１の処理動作中に生成される様々なデータを一時的に記憶する一時記憶部を備える。

【0051】

処理部１１の事前情報設定部１１１は、通信インタフェース１３により図示しないスタジオ外ネットワークを経由してスタジオＳＴ外部の情報処理機器から、或いは、入出力インタフェース１４により入力装置１６から、各種３次元データを取得して、データメモリ１２の３Ｄデータ記憶部１２１に記憶させる。例えば、事前情報設定部１１１は、３次元データは、例えば、スタジオＳＴの３次元形状を示す３次元形状データ、スタジオＳＴの付帯設備（電源コンセント、音声コンセント、照明用バトン、火器、等）の３次元位置データ、スタジオＳＴ内の各位置マーカ２の３次元位置データ、等の都度変更が発生しない不変データを含む。これら不変データは、マスタ情報ファイルとして準備され、変更が無い限りは一度取得されたものが継続して利用される。また、３次元データは、番組に使用する３次元美術セットの３次元形状データ、スタジオＳＴの３次元形状と美術セットとの位置関係を示す３次元位置データ、美術セットを照射するための照明器具の３次元位置データ、照明器具の照射方向を示す３次元ベクトルデータ、等の番組毎またはシーン毎に変更される可変データを含む。これらの可変データは、番組やシーン毎に設計される。

【0052】

計測データ取得部１１２は、通信インタフェース１３によりネットワークＮＷを経由して各作業者端末３から計測データを取得して、データメモリ１２の計測データ記憶部１２２に記憶させる。計測データは、例えば、位置計測データ、方位計測データ及び角度計測データを含む。

【0053】

位置計測データは、各位置マーカ２から当該作業者端末３までの距離を示す。作業者端末３は、通信インタフェース３３により受信した位置マーカ２からの電波の強度により、当該位置マーカ２までの距離を計測する。位置マーカ２と作業者端末３の位置関係の一例を示す模式図である。今、作業者端末３を携帯する作業者ＷＯが、スタジオＳＴ座標系（ｘ，ｙ，ｚ）における座標（ｘ０，ｙ０，ｚ０）の位置に居るとする。ここでは４つの位置マーカ２のそれぞれの座標（ｘ１，ｙ１，ｚ１）、（ｘ２，ｙ２，ｚ２）、（ｘ３，ｙ３，ｚ３）、（ｘ４，ｙ４，ｚ４）は、既知であり、管理装置１の３Ｄデータ記憶部１２１に記憶されている。作業者端末３は、これら４つの位置マーカ２からの距離Ｌ１，Ｌ２，Ｌ３，Ｌ４を同時に計測し、計測した距離を位置計測データとして管理装置１に送信する。

【0054】

方位計測データは、作業者端末３が方位センサ４０により計測した方位を示す。図７は、方位センサ４０の計測範囲を示す模式図である。方位センサ４０は、ＡＲグラスである作業者端末３のカメラ３９を向けている方位、つまり作業者端末３を装着した作業者ＷＯが顔を向けて凝視している凝視点Ｐの方位を計測する。方位センサ４０は、この方位を基準方向ＤＲ１（例えば北）からの角度α°として計測する。ここで、α°＝０°～３６０°である。作業者端末３は、計測した方位角度α°を、方位計測データとして管理装置１に送信する。

【0055】

角度計測データは、作業者端末３が角度センサ４１により計測した仰角を示す。図８は、角度センサ４１の計測範囲を示す模式図である。角度センサ４１は、ＡＲグラスである作業者端末３を装着した作業者ＷＯが顔を向けている方位である凝視点Ｐの仰角を計測する。角度センサ４１は、この仰角を基準方向ＤＲ２（例えばスタジオＳＴの水平面）からの角度β°として計測する。ここで、β°＝－９０°～＋９０°である。作業者端末３は、計測した角度β°を、角度計測データとして管理装置１に送信する。なお、角度β°は、スタジオＳＴの天井方向（垂直方向）を基準方向ＤＲ２として、β°＝０°～１８０°としても良い。

【0056】

凝視範囲計算部１１３は、計測データ取得部１１２での計測データの取得に応答して、作業者端末３が居るであろうスタジオＳＴ内の予想位置と、作業者が見ているであろう凝視範囲とを計算する。凝視範囲は、カメラ３９で撮影されて出力装置３８であるディスプレイに表示されるスタジオＳＴ内の範囲である。

【0057】

図９は、作業者端末３の予想位置の計算手法を説明するための模式図である。凝視範囲計算部１１３は、３Ｄデータ記憶部１２１に記憶されている各位置マーカ２の３次元位置データとしての座標（ｘ１，ｙ１，ｚ１）、（ｘ２，ｙ２，ｚ２）、（ｘ３，ｙ３，ｚ３）、（ｘ４，ｙ４，ｚ４）と、計測データ記憶部１２２に記憶された各位置マーカ２からの距離Ｌ１，Ｌ２，Ｌ３，Ｌ４を用いて、作業者端末３の位置を計算する。すなわち、凝視範囲計算部１１３は、図９に示すように、位置マーカ２の各座標（ｘ１，ｙ１，ｚ１）、（ｘ２，ｙ２，ｚ２）、（ｘ３，ｙ３，ｚ３）、（ｘ４，ｙ４，ｚ４）から距離Ｌ１，Ｌ２，Ｌ３，Ｌ４を半径とする球の交点座標（ｘ０，ｙ０，ｚ０）となる点を計算する。この計算された点が、作業者端末３の予想位置Ｐ０となる。

【0058】

図１０Ａ及び図１０Ｂは、凝視点Ｐの計算手法を説明するための模式図である。凝視範囲計算部１１３は、凝視点ＰのスタジオＳＴ内の３次元位置である座標（Ｘ，Ｙ，Ｚ）を計算する。すなわち、凝視範囲計算部１１３は、計算した作業者端末３の予想位置Ｐ０である座標（ｘ０，ｙ０，ｚ０）と、計測データ記憶部１２２に記憶された方位データである角度α°及び角度データである角度β°で決まるベクトルとに基づいて、凝視点Ｐの座標（Ｘ，Ｙ，Ｚ）を計算する。なおこのとき、ベクトルの長さＬすなわち作業者端末３から凝視点Ｐまでの距離は、予め決められた固定値とする。

【0059】

凝視範囲計算部１１３は、こうして計算した作業者端末３の予想位置Ｐ０の座標（ｘ０，ｙ０，ｚ０）と凝視点Ｐの座標（Ｘ，Ｙ，Ｚ）とに基づいて、凝視範囲ＧＲとして計算する。すなわち、凝視範囲計算部１１３は、作業者端末３の予想位置Ｐ０の座標（ｘ０，ｙ０，ｚ０）から凝視点Ｐの座標（Ｘ，Ｙ，Ｚ）へ向かうベクトルに関して、上下左右に所定角度内の範囲を、凝視範囲ＧＲとして計算する。凝視範囲計算部１１３は、計算した作業者端末３の予想位置Ｐ０の座標（ｘ０，ｙ０，ｚ０）、凝視点Ｐの座標（Ｘ，Ｙ，Ｚ）、及び凝視範囲ＧＲを、凝視範囲データ記憶部１２３に記憶させる。

【0060】

表示データ生成部１１４は、凝視範囲計算部１１３が凝視範囲ＧＲを計算したならば、それに応じた表示データを生成する。すなわち、表示データ生成部１１４は、３Ｄデータ記憶部１２１に記憶されている各種３次元データと、凝視範囲データ記憶部１２３に記憶された凝視範囲ＧＲとに基づいて、美術セット、付帯設備、照射方向ベクトルの３次元表示データを生成する。３次元データは、スタジオＳＴの３次元形状データ、付帯設備の３次元位置データ、美術セットの３次元形状データ及び３次元位置データ、照明器具の３次元位置データ、照射方向の３次元ベクトルデータ、を含む。より詳しくは、表示データ生成部１１４は、凝視範囲ＧＲに基づいて、作業者端末３に送信するべき３次元データを計算して切り出し、さらに、作業者端末３においてそれらを表示した際に閲覧者となる作業者ＷＯにどのように見えるのか、すなわち閲覧者での見え方を計算し、その見え方に応じて、送信するべき３次元表示データを決定する。表示データ生成部１１４は、生成した３次元表示データを表示データ記憶部１２４に記憶させる。

【0061】

表示データ送信部１１５は、表示データ生成部１１４が３次元表示データを生成したならば、通信インタフェース１３によりネットワークＮＷを経由して作業者端末３へ、表示データ記憶部１２４に記憶された３次元表示データを送信する。

【0062】

図１１は、以上のような構成の美術セット建て込み支援システムにおける各部の動作関係を示す模式図である。美術セット建て込み支援システムにおける作業は、「事前作業」、「計測」、「表示」の３つのフェーズに分かれる。

【0063】

「事前作業」フェーズは、スタジオＳＴでの美術セットの建て込み作業を行う前に、管理装置１が行う動作である。なお、この「事前作業」フェーズの開始前に、予め準備されているスタジオＳＴのマスタ情報を記憶したマスタ情報ファイルが３Ｄデータ記憶部１２１に登録されているものとする。マスタ情報には、スタジオＳＴの３次元形状データ、スタジオＳＴの照明用バトン等の付帯設備の３次元位置データ、電源コンセント、音声コンセント、等の付帯設備の３次元位置データ、スタジオＳＴで利用することのできる照明器具の一覧データ、等が含まれる。

【0064】

「事前作業」フェーズでは、設計者、例えば美術設計者が、事前情報設定部１１１により、入力装置１６から、３Ｄデータ記憶部１２１に記憶されているマスタ情報の中に３次元美術セットを設置する美術設計を実施して、美術セットを配置したスタジオＳＴの設計ファイルを作成する。この美術設計においては、設計者、例えば美術設計者は、照明用バトンと美術セットの位置関係、コンセントと美術セットの位置関係、等を考慮して美術セットを配置する。その後、設計者、例えば美術設計者とは異なる照明設計者は、事前情報設定部１１１により、入力装置１６から、照明器具を設置し、さらに、照明器具の照射方向を設定する照明設計を実施することで、設計ファイルを更新する。設計ファイルは、３Ｄデータ記憶部１２１に記憶される。

【0065】

なお、「事前作業」フェーズでは、設計者、例えば美術設計者及び照明設計者が、管理装置１とは別のスタジオＳＴ外部の情報処理機器により設計ファイルを作成し、事前情報設定部１１１により、そこから図示しないスタジオ外ネットワークを経由して設計ファイルを取得して、３Ｄデータ記憶部１２１に記憶させるものであっても良い。

【0066】

「計測」フェーズは、管理装置１、位置マーカ２及び作業者端末３が行う動作である。この「計測」フェーズでは、作業者端末３にて以下に示す各種計測を行い、管理装置１に計測データを送信する。すなわち、作業者端末３は、当該作業者端末３の位置を計測し、管理装置１に送信する。具体的には、作業者端末３は、各位置マーカ２と当該作業者端末３との間の距離（絶対値）を計測し、その計測した距離を位置計測データとして管理装置１に送信する。また、作業者端末３は、方位センサ４０で計測した当該作業者端末３が向いている方位（東西南北方向）を、方位計測データとして管理装置１に送信する。さらに、作業者端末３は、角度センサ４１で計測した当該作業者端末３の向いている角度（上下）を、角度計測データとして管理装置１に送信する。

【0067】

また、この「計測」フェーズにおいて管理装置１は、計測データ取得部１１２により、ネットワークＮＷを経由して作業者端末３から送信されてきた計測データを取得し、計測データ記憶部１２２に記憶する。そして、管理装置１は、凝視範囲計算部１１３により、計測データ記憶部１２２に記憶した計測データに基づいて、作業者端末３のスタジオＳＴ内での３次元位置と作業者端末３が見ている先となる凝視点Ｐとを計算し、さらに、その凝視点Ｐに基づいて、作業者端末３が見ているであろう凝視範囲ＧＲを計算する。

【0068】

図１２は、スタジオＳＴ内での作業者端末３を携帯する作業者ＷＯと照明器具ＬＦ及び美術セットＡＳとの関係を説明するための模式図である。例えば、作業者ＷＯが美術セットＡＳを建て込んだ後、任意の位置で、この美術セットＡＳの方に作業者端末３のカメラ３９を向ける。このとき、カメラ３９の撮影方向を示すベクトルにおける固定の長さＬの地点が凝視点Ｐとなる。図１３は、このときの凝視範囲ＧＲの一例を示す模式図である。凝視範囲ＧＲは、カメラ３９の撮影範囲に相当し、この範囲の画像が出力装置３８であるディスプレイに表示されることとなる。「計測」フェーズにおいて管理装置１は、この作業者端末３の３次元位置である座標（ｘ０，ｙ０，ｚ０）と、凝視点Ｐの座標（Ｘ，Ｙ，Ｚ）とを計算する。そしてさらに、管理装置１は、この計算した作業者端末３の３次元位置である座標（ｘ０，ｙ０，ｚ０）から凝視点Ｐの座標（Ｘ，Ｙ，Ｚ）へ向かうベクトルに関して、上下左右に所定角度内の範囲を、凝視範囲ＧＲとして計算する。なお、図１２には、参考のため、照明器具ＬＦから照射される照明の照射方向ＢＤも示してある。

【0069】

「表示」フェーズは、管理装置１及び作業者端末３が行う動作であり、管理装置１より作業者端末３に対して、拡張現実として重ね合わせるべき３次元表示データを伝送し、作業者端末３にてこれを表示するフェーズである。この「表示」フェーズでは、管理装置１は、表示データ生成部１１４により、作業者端末３に送信するべき３次元表示データを生成する。すなわち、管理装置１は、「計測」フェーズで計算した作業者端末３の３次元位置と凝視点Ｐ及び凝視範囲ＧＲと、「事前作業」フェーズで３Ｄデータ記憶部１２１に記憶させた美術セット及び照明器具の設計ファイルとから、美術セットと照明の照射方向を計算する。具体的には、美術セット及び照明器具、さらには、照射方向、付帯設備、等の３次元形状データ及び／または３次元位置データを、３次元表示データとして切り出す。この切り出しにおいては、作業者端末３の凝視点Ｐを中心とした凝視範囲ＧＲ中の３次元表示データを切り出すのではなく、凝視範囲ＧＲ）よりも広い範囲である拡大範囲中の３次元表示データを切り出す。これは、後述するように、作業者端末３での視点の微妙な変化に追随できるようにするためである。さらに、管理装置１は、３次元表示データの作業者ＷＯでの見え方を計算し、その見え方に応じて、送信するべき３次元表示データを決定する。例えば、美術セットの３次元表示データは、凝視範囲ＧＲ（拡大範囲）内に存在していたとしても見えない場所（例えば、美術セットの裏側、美術セットの内部構造、等）の情報を削除する。こうすることで、送信する３次元表示データのデータサイズの削減と作業者端末３での表示時の負荷低減を図ることができる。こうして表示データ生成部１１４によって生成された３次元表示データは、表示データ記憶部１２４に記憶される。そして、管理装置１は、表示データ送信部１１５により、表示データ記憶部１２４に記憶されている３次元表示データを作業者端末３に送信する。

【0070】

「表示」フェーズにおいて作業者端末３は、出力装置３８であるディスプレイに、カメラ３９で撮影した画像上に管理装置１から送信されてきた３次元表示データに基づく３次元画像である３次元モデルを重畳して表示する。

【0071】

図１４は、３次元モデルの表示例を示す模式図である。前述したように、管理装置１からは、凝視範囲ＧＲよりも広い拡大範囲ＭＲの３次元表示データが送信されてくる。作業者端末３は、凝視範囲ＧＲの３次元データに基づいて、美術セットＡＳの３次元モデルＭＤＳを生成して、カメラ３９の撮影画像に重畳表示する。また、図１４の例では、照明器具ＬＦの３次元モデルＭＤＬが撮影画像に重畳表示されると共に、照明器具ＬＦから照射される照明の照射方向ＢＤの３次元モデルＭＤＢも表示されている。さらに、図１４の例では、スタジオＳＴの付帯設備である電源コンセントの３次元モデルＭＤＥが撮影画像に重畳表示されると共に、その付帯設備についての説明情報ＡＥも表示されている。このように、３次元表示データは、説明情報のデータも含んで良い。

【0072】

また、カメラ３９の撮影画像への美術セットＡＳの３次元モデルＭＤＳの重畳表示時には、撮影画像の特徴的な抽出ポイント（例えばエッジ、突端、辺など）と３次元データの特徴を重ね合わせることにより、３次元モデルＭＤＳの重畳表示の不安定性を軽減させることができる。

【0073】

上記のような「計測」フェーズ及び「表示」フェーズでは、以下の２種類の繰り返し動作が行われ得る。

【0074】

一つは、作業者ＷＯの移動により、作業者端末３の位置が変化した場合の動作である。作業者端末３の位置が変化したか否かの判断は、作業者端末３と位置マーカ２の間の距離計測結果に、予め決められた一定の変化が発生したかどうかを判断することで、行うことができる。作業者端末３の位置が変化した場合、作業者端末３は、管理装置１に、位置計測データ、方位計測データ及び角度計測データの全てを再送信する。これにより、３次元表示データの再計算が行われることになる。

【0075】

もう一つは、作業者ＷＯの凝視点Ｐが変化した場合の動作である。すなわち、作業者ＷＯが固定位置に居る（上記作業者端末３の予め決められた一定以上の位置変化が発生していない）が、作業者ＷＯの凝視点Ｐの変化が有った場合の動作である。この場合には、作業者端末３内にて、方位計測データ及び角度計測データに基づいて表示位置を再計算して、表示位置を調整して表示を行う。すなわち、作業者端末３は、拡大範囲ＭＲ分が送信されてきている３次元表示データの中から、新たな凝視範囲ＧＲの３次元表示データを用いた表示を行う。ただし、作業者ＷＯの位置が変化していない場合でも、例えば後ろを向く等、同一位置での方位方向で拡大範囲ＭＲを超える大きな変化が発生した場合は、上記作業者端末３の位置が変化した場合と同様とする。

【0076】

図１５は、以上のような動作を行うための、作業者端末３において実行される処理動作の一例を示すフローチャートである。作業者端末３のプロセッサ３１Ａは、例えばプログラムメモリ３１Ｂに予め記憶された支援プログラムを実行することで、このフローチャートに示す処理を行うことができる。また、図１６は、同じく、管理装置１において実行される処理動作の一例を示すフローチャートである。管理装置１のプロセッサ１１Ａは、例えばプログラムメモリ１１Ｂに予め記憶された支援プログラムを実行することで、このフローチャートに示す処理を行うことができる。なお、ここでは、「事前作業」フェーズでの設計ファイルの３Ｄデータ記憶部１２１への記憶は終了しているものとして、「計測」フェーズ及び「表示」フェーズでの動作のみを説明する。また、管理装置１は、複数の作業者端末３のそれぞれに対して、図１６に示すような処理動作を実行する。

【0077】

図１５に示すように、「計測」フェーズとして、作業者端末３のプロセッサ３１Ａは、位置計測を行う（ステップＳ３０１）。すなわち、プロセッサ３１Ａは、通信インタフェース３３により各位置マーカ２から受信した電波の強度により、各位置マーカ２までの距離を計測し、計測した各位置マーカ２までの距離を、データメモリ３２に記憶させる。

【0078】

そして、プロセッサ３１Ａは、データメモリ３２に記憶された各位置マーカ２までの距離を、位置計測データとして、通信インタフェース３３によりネットワークＮＷを経由して管理装置１へ送信する（ステップＳ３０２）。

【0079】

また、プロセッサ３１Ａは、角度・方位計測を行う（ステップＳ３０３）。すなわち、プロセッサ３１Ａは、方位センサ４０が計測した方位角度α°をセンサインタフェース３５を介して取得し、データメモリ３２に記憶させる。また、プロセッサ３１Ａは、角度センサ４１が計測した仰角の角度β°をセンサインタフェース３５を介して取得し、データメモリ３２に記憶させる。

【0080】

そして、プロセッサ３１Ａは、データメモリ３２に記憶された方位角度α°を方位計測データとし、また、データメモリ３２に記憶された仰角の角度β°を角度計測データとして、通信インタフェース３３によりネットワークＮＷを経由して管理装置１へ送信する（ステップＳ３０４）。

【0081】

一方、管理装置１のプロセッサ１１Ａは、図１６に示すように、計測データ取得部１１２として動作して、通信インタフェース１３によりネットワークＮＷを経由して該当の作業者端末３から位置計測データを受信したか否か判断する（ステップＳ１０１）。

【0082】

作業者端末３から位置計測データを受信していないと判断した場合、プロセッサ１１Ａは、さらに、通信インタフェース１３によりネットワークＮＷを経由して該当の作業者端末３から角度計測データ及び方位計測データを受信したか否か判断する（ステップＳ１０２）。

【0083】

作業者端末３から角度計測データ及び方位計測データを受信していないと判断した場合、プロセッサ１１Ａは、さらに、位置計測データと角度計測データ及び方位計測データとに更新が有ったか否かを判断する（ステップＳ１０３）。この更新の有無は、例えば、計測データ記憶部１２２に記憶された位置計測データと角度計測データ及び方位計測データが、現在時刻から予め決められた一定時間前の時刻範囲のタイムスタンプを持つか否かを判断することにより行うことができる。

【0084】

計測データに更新が無かったと判断した場合、プロセッサ１１Ａは、上記ステップＳ１０１の処理に移行する。

【0085】

作業者端末３における上記ステップＳ３０２で送信された位置計測データを受信すると、管理装置１のプロセッサ１１Ａは、上記ステップＳ１０１において、作業者端末３から位置計測データを受信したと判断する。この場合には、プロセッサ１１Ａは、その受信した位置計測データを計測データ記憶部１２２に記憶させる（ステップＳ１０４）。そして、プロセッサ１１Ａは、上記ステップＳ１０１の処理に移行する。

【0086】

また、作業者端末３における上記ステップＳ３０４で送信された角度計測データ及び方位計測データを受信すると、管理装置１のプロセッサ１１Ａは、上記ステップＳ１０２において、作業者端末３から角度計測データ及び方位計測データを受信したと判断する。この場合には、プロセッサ１１Ａは、それら受信した角度計測データ及び方位計測データを計測データ記憶部１２２に記憶させる（ステップＳ１０５）。そして、プロセッサ１１Ａは、上記ステップＳ１０１の処理に移行する。

【0087】

こうして位置計測データ、角度計測データ及び方位計測データが計測データ記憶部１２２に記憶されると、プロセッサ１１Ａは、上記ステップＳ１０３において、計測データに更新が有ったと判断する。この場合、プロセッサ１１Ａは、凝視範囲計算部１１３として動作して、作業者端末３の３次元位置及び凝視点Ｐを計算し、さらに、凝視範囲ＧＲを計算する（ステップＳ１０６）。プロセッサ１１Ａは、計算した作業者端末３の３次元位置、凝視点Ｐ及び凝視範囲ＧＲを、凝視範囲データ記憶部１２３に記憶させる。

【0088】

その後、プロセッサ１１Ａは、「表示」フェーズに移行し、表示データ生成部１１４として動作して、凝視範囲データ記憶部１２３に記憶した凝視範囲ＧＲと、３Ｄデータ記憶部１２１に記憶されている美術セット及び照明器具の設計ファイルとから、美術セットと照明の照射方向を計算する（ステップＳ１０７）。具体的には、プロセッサ１１Ａは、凝視点Ｐを中心とした凝視範囲ＧＲよりも広い範囲である拡大範囲ＭＲ中の、美術セット及び照明器具、さらには、照射方向、付帯設備、等の３次元形状データ及び／または３次元位置データを、３次元表示データとして切り出す。

【0089】

その後、プロセッサ１１Ａは、３次元表示データの作業者ＷＯでの見え方を計算し、その見え方に応じて、例えば見えない場所の情報を削除する等、送信するべき３次元表示データを決定する（ステップＳ１０８）。プロセッサ１１Ａは、こうして生成した３次元表示データを表示データ記憶部１２４に記憶させる。

【0090】

そして、プロセッサ１１Ａは、表示データ送信部１１５として動作して、表示データ記憶部１２４に記憶させた３次元表示データを、通信インタフェース１３によりネットワークＮＷを経由して作業者端末３に送信する（ステップＳ１０９）。その後、プロセッサ１１Ａは、上記ステップＳ１０１の処理に移行する。

【0091】

作業者端末３のプロセッサ３１Ａは、上記ステップＳ３０４において計測データを送信した後は、「表示」フェーズに移行して、管理装置１から３次元表示データが送信されてくるのを待っている。３次元表示データが送信されてくると、プロセッサ３１Ａは、図１５に示すように、通信インタフェース１３によりそれを受信し、データメモリ３２に記憶させる（ステップＳ３０５）。

【0092】

そして、プロセッサ３１Ａは、データメモリ３２に記憶させた拡大範囲ＭＲの３次元表示データの中から、凝視範囲ＧＲに該当する部分の３次元表示データを取り出す表示位置調整を行う（ステップＳ３０６）。

【0093】

プロセッサ３１Ａは、取り出した３次元表示データに基づく３次元モデルを生成して、カメラ３９で撮影した画像上に重畳して表示する（ステップＳ３０７）。

【0094】

その後、プロセッサ３１Ａは、「計測」フェーズに移行して、位置計測を行い、各位置マーカ２までの距離をデータメモリ３２に記憶させる（ステップＳ３０８）。この場合、データメモリ３２への記憶は、最新の値に書き換えるのではなく、複数回分を時系列データとして保存しておくようにする。

【0095】

そして、プロセッサ３１Ａは、作業者端末３と位置マーカ２の間の距離計測結果に、予め決められた一定の変化が有るかどうかを判断する（ステップＳ３０９）。一定の変化が有ったと判断した場合、プロセッサ３１Ａは、上記ステップＳ３０２の処理に移行する。これにより、再度、位置計測データ、角度計測データ及び方位計測データが管理装置１に送信されることとなって、作業者ＷＯの移動に応じた新たな３次元表示データを取得することが可能となる。

【0096】

これに対して、作業者端末３と位置マーカ２の間の距離計測結果には一定の変化が無かったと判断した場合、プロセッサ３１Ａは、再度、角度・方位計測を行うことで、方位角度α°及び仰角の角度β°を取得して、データメモリ３２に記憶させる（ステップＳ３１０）。この場合も、データメモリ３２への記憶は、最新の値に書き換えるのではなく、複数回分を時系列データとして保存しておくようにする。

【0097】

そして、プロセッサ３１Ａは、方位角度α°及び／または仰角の角度β°に、予め決められた一定の変化が有ったかどうかを判断する（ステップＳ３１１）。一定の変化が無いと判断した場合には、プロセッサ３１Ａは、上記ステップＳ３０６の処理に移行する。そして、「表示」フェーズに移行して、データメモリ３２に記憶させた拡大範囲ＭＲの３次元表示データの中から、方位角度α°及び／または仰角の角度β°に変化した分だけ移動した凝視範囲ＧＲに該当する部分の３次元表示データに基づく表示を行っていく。

【0098】

また、方位角度α°及び／または仰角の角度β°に、予め決められた一定の変化が有ったと判断した場合には、プロセッサ３１Ａは、データメモリ３２に記憶させた最新の各位置マーカ２までの距離、方位角度α°及び仰角の角度β°を、位置計測データ、角度計測データ及び方位計測データとして、通信インタフェース３３によりネットワークＮＷを経由して管理装置１へ送信する（ステップＳ３１２）。その後、プロセッサ３１Ａは、上記ステップＳ３０５の処理に移行することで、作業者ＷＯが例えば後ろを向く等、同一位置で発生した大きな凝視点変化に応じた新たな３次元表示データを取得することが可能となる。

【0099】

本実施形態では、美術セット建て込み支援システムは、前述のように、計測部である方位センサ４０及び角度センサ４１により、決められた範囲の実空間であるスタジオＳＴ内で、カメラ３９と出力装置３８としてのディスプレイとを備え、閲覧者が携帯する閲覧端末としての作業者端末３のカメラ３９を向けている方位と仰角を計測する。そして、凝視範囲計算部１１３により、方位センサ４０及び角度センサ４１の計測結果に基づいて、カメラ３９で撮影されてディスプレイに表示されるスタジオＳＴ内の範囲である閲覧範囲となる凝視範囲ＧＲを計算し、表示データ生成部１１４によって、スタジオＳＴ内に建て込む美術セットＡＳの３次元形状及び建て込みの３次元位置を示す美術セット設計情報である美術セットＡＳの３次元設計データと、計算された凝視範囲ＧＲと、に基づいて、ディスプレイに表示するべき美術セットＡＳの３次元表示データを生成し、表示制御部となるプロセッサ３１Ａにより、ディスプレイに、生成された３次元表示データに基づく美術セットＡＳの３次元モデルＭＤＳを表示させる。これにより、スタジオＳＴ内への美術セットＡＳの建て込み作業時に、建て込んだ美術セットＡＳ上に当該美術セットＡＳの３次元モデルＭＤＳを拡張現実として重ね合わせ表示することができ、作業者ＷＯは、実際の美術セットＡＳと３次元モデルＭＤＳとのずれ具合を確認することで、設計通りに美術セットＡＳが設置できたか否かを、容易に判断することができる。したがって、実施形態の美術セット建て込み支援システムによれば、美術セットＡＳを設計通りに建て込めるように作業者ＷＯを支援することができる。

【0100】

すなわち、本実施形態の美術セット建て込み支援システムによれば、事前に設計した図面通りの場所に美術セットＡＳを立て込むことが可能となる。よって、美術セットＡＳと電源コンセント、音声コンセント、照明用バトン、火器、等の付帯設備との間の位置関係が確実に確保され、照明用バトンとの交差といった、建て込んだ美術セットＡＳの移動作業が必要となる事態の発生を防止することができる。また、火器使用時の安全も確保される。

【0101】

また、本実施形態では、前述のように、計測データ取得部１１２により、スタジオＳＴ内での作業者端末３の位置を計測する。よって、作業者端末３のカメラ３９が撮影している凝視範囲ＧＲを正確に判別することができ、建て込んだ美術セットＡＳとその３次元モデルＭＤＳとの重ね合わせを、より正確に行うことが可能となる。

【0102】

なお、本実施形態では、前述のように、作業者端末３において、通信インタフェース３３により位置マーカ２からの距離を計測し、管理装置１において、計測データ取得部１１２により、位置マーカ２の既知の位置座標と計測した距離とに基づいて、スタジオＳＴ内での作業者端末３の位置を計測する。このように、位置が既知の位置マーカを利用することで、簡単に、作業者端末３の位置を計測することができる。さらには、閲覧者となる作業者ＷＯの位置及び向きにより、美術セットＡＳの３次元モデルＭＳＤの見え方を変える（閲覧者の位置、向きに応じたモデルが表示される）ことが可能となる。例えば、図１４の例において、作業者ＷＯが美術セットＡＳの３次元モデルＭＤＳの後ろ側に移動した場合、作業者ＷＯは美術セットＡＳの後ろ側（椅子側から見たセット）を確認することができるようになる。これにより、作業者ＷＯはスタジオＳＴ内を移動しながら３次元モデルＭＤＳを各方面から確認できる。そのため、実際の美術セットＡＳと３次元モデルＭＤＳとのずれ具合を確認するだけでなく、例えば美術セットＡＳを立て込む前に作業者ＷＯがスタジオＳＴ内を移動して各方面からのセットの見え方を確認することが可能となる。

【0103】

また、本実施形態では、前述のように、表示データ生成部１１４は、移動配置可能な照明器具ＬＦの３次元形状と美術セットＡＳの建て込み終了後の時点における照明器具ＬＦの３次元位置とを示す照明器具設計情報である照明器具ＬＦの３次元設計データに基づく照明器具ＬＦの３次元表示データを生成する。よって、照明器具ＬＦの３次元モデルＭＤＬも撮影画像に重畳表示されるようになるので、建て込んだ美術セットＡＳの、照明器具ＬＦとの干渉、照明器具ＬＦが取り付けられる照明用バトンとの交差、等を容易に確認することが可能となる。特に、照明器具ＬＦの取り付け及び調整は、美術セットＡＳを建て込んだ後に行われることが多く、美術セットＡＳを設置した状態で照明器具ＬＦとの関係を把握することが難しい。本実施形態では、その時点では実際には存在していない照明器具ＬＦの配置を確認できることで、照明器具ＬＦの設定時に、建て込まれている美術セットＡＳを移動しなければならなくなる可能性を少なくすることができる。

【0104】

さらに、本実施形態では、前述のように、照明器具ＬＦの３次元設計データは、美術セットＡＳの建て込み終了後の時点における照明器具ＬＦの３次元位置での照明の照射方向ＢＤを示す照射方向情報である照射方向ＢＤの３次元ベクトルデータを含み、表示データ生成部１１４は、さらに、この照射方向情報に基づくベクトルの３次元表示データを生成する。よって、照明器具ＬＦから照射される照明の照射方向ＢＤの３次元モデルＭＤＬも撮影画像に重畳表示されるようになるので、建て込んだ美術セットＡＳへの照明状況、或いは、美術セットＡＳが照明を遮断してしまう状況を容易に確認することが可能となる。さらに、閲覧者となる作業者ＷＯの位置及び向きにより、照明の照射方向ＢＤの３次元モデルＭＤＬの見え方も変えることができ、作業者ＷＯはスタジオＳＴ内を移動しながら３次元モデルＭＤＬを各方面から確認できるようになる。よって、建て込んだまたは建て込む前の美術セットＡＳへの照明状況、或いは、美術セットＡＳが照明を遮断してしまう状況を、様々な方向から容易に確認することが可能となる。

【0105】

また、本実施形態では、前述のように、表示データ生成部１１４は、さらに、スタジオＳＴ内に固定配置されている、電源コンセント、音声コンセント、照明用バトン、火器、等の付帯設備の位置情報に基づく付帯設備の３次元表示データを生成する。よって、電源コンセントの３次元モデルＭＤＥ等も撮影画像に重畳表示されるようになるので、美術セットＡＳと付帯設備の位置関係を容易に把握することができ、付帯設備の上や前に美術セットＡＳを建て込んでしまい、当該付帯設備が使用できなくなってしまうことを防止することが可能となる。また、火器からの炎の到達範囲内に美術セットＡＳを建て込むことも防止でき、火器使用時の、安全も確保することが可能となる。

【0106】

さらに、本実施形態では、前述のように、表示データ生成部１１４は、付帯設備についての説明情報の表示データも作成する。よって、付帯設備を説明する説明情報ＡＥも撮影画像に重畳表示されるようになるので、形状だけではどのようなものであるのかを判断しにくい付帯設備について、作業者ＷＯが容易に判断できるようになる。

【0107】

また、本実施形態では、前述のように、美術セット建て込み支援システムは、作業者端末３と通信可能な管理装置１をさらに含み、管理装置１は、少なくとも凝視範囲計算部１１３及び表示データ生成部１１４として動作し、凝視範囲ＧＲを包含する拡大範囲ＭＲに基づいて、３次元表示データを生成する。そして、表示制御部として動作する作業者端末３のプロセッサ３１Ａは、凝視範囲ＧＲに基づいて３次元表示データを調整し、調整後の３次元表示データに基づく３次元モデルＭＤＳ、ＭＤＬ、ＭＤＢまたはＭＤＥをディスプレイに表示させる。よって、高い処理能力を必要とする動作を高性能な装置である管理装置１において行うことで、作業者端末３は、処理能力がそれほど高くなくても良いので、安価に構成することができる。そのため、多数の作業者端末３を準備することができ、同時併行して複数の美術セットＡＳの建て込みを行い得る。また、多数の作業者端末３を使用しても、凝視範囲ＧＲが拡大範囲ＭＲ内での移動となるような凝視点Ｐの移動では、各作業者端末３内での調整だけで良く、管理装置１の動作が必要とならない。よって、管理装置１における負荷の平準化が実現できる。

【0108】

なお、本実施形態では、作業者ＷＯは、美術セットＡＳが凝視範囲ＧＲに入らない方向に凝視点Ｐを移したとしても、その凝視点Ｐを中心とする新たな凝視範囲ＧＲに対応する３次元モデルが、撮影画像に重畳表示される。このように、作業者ＷＯは、自身の作業範囲外の位置に有る情報も見ること可能である。

【0109】

（第２の実施形態）
以下、第２の実施形態について、説明する。なお、以下の第２の実施形態では、第１の実施形態からの変更部分のみを説明し、第１の実施形態と同様の部分については、説明を省略する。

【0110】

第１の実施形態では、「計測」フェーズ及び「表示」フェーズに係る計算を管理装置１で行っているが、本第２の実施形態は、それを作業者端末３で行うようにしたものである。美術セット建て込み支援システムの構成自体は、第１の実施形態と同様である。

【0111】

図１７は、第２の実施形態に係る美術セット建て込み支援システムにおける各部の動作関係を示す模式図である。

【0112】

「事前作業」フェーズにおける管理装置１の動作は、第１の実施形態と同様である。

【0113】

「計測」フェーズにおいては、作業者端末３は、管理装置１から位置マーカ２の３次元位置情報を取得し、また、各位置マーカ２と当該作業者端末３との間の距離（絶対値）を計測する。そして、その計測した距離である位置計測データに基づいて、当該作業者端末３の３次元位置である座標（ｘ０，ｙ０，ｚ０）を計算する。また、作業者端末３は、方位センサ４０により当該作業者端末３が向いている方位（東西南北方向）を、方位計測データとして計測すると共に、角度センサ４１により当該作業者端末３の向いている角度（上下）を、角度計測データとして計測する。そして、作業者端末３は、これら位置計測データ、方位計測データ及び角度計測データに基づいて、作業者端末３のスタジオＳＴ内での３次元位置と作業者端末３が見ている先となる凝視点Ｐとを計算し、さらに、その凝視点Ｐに基づいて、作業者端末３が見ているであろう凝視範囲ＧＲを計算する。

【0114】

「表示」フェーズでは、作業者端末３は、管理装置１から「事前作業」フェーズで設定された、美術セットＡＳの設計ファイル及び照明器具ＬＦの設計ファイルを取得する。美術セットＡＳの設計ファイルは、スタジオＳＴの３次元形状データ、スタジオＳＴ内の照明用バトン、コンセント、火器、等の付帯設備の３次元位置データ、美術セットＡＳの３次元形状データ及び３次元位置データ、等を含む。なお、美術セットＡＳの３次元形状データについては、管理装置１から作業者端末３へ送信する際、内部構造のような作業者から見えない部分については削除したものを送信することで、通信量及び作業者端末３での記憶容量の削減を行う。照明器具の設計ファイルは、照明器具ＬＦの３次元位置データ、照明の照射方向ＢＤ、等を含む。そして、作業者端末３は、「計測」フェーズで計算した作業者端末３の３次元位置と凝視点Ｐ及び凝視範囲ＧＲと、管理装置１から取得した美術セット及び照明器具の設計ファイルとから、美術セットと照明の照射方向を計算する。具体的には、美術セット及び照明器具、さらには、照射方向、付帯設備、等の３次元形状データ及び／または３次元位置データを、３次元表示データとして切り出す。この切り出しにおいて、第２の実施形態では、第１の実施の形態のような拡大範囲ＭＲではなくて、凝視範囲ＧＲ中の３次元表示データを切り出す。さらに、作業者端末３は、３次元表示データの作業者ＷＯでの見え方を計算し、その見え方に応じて、切り出した３次元表示データから不要なデータを削除する。そして、作業者端末３は、出力装置３８であるディスプレイに、カメラ３９で撮影した画像上に３次元表示データに基づく３次元モデルを重畳して表示する。

【0115】

本第２の実施形態では、「計測」フェーズ及び「表示」フェーズでは、作業者ＷＯの移動及び作業者ＷＯの凝視点Ｐの変化に依らずに、１種類の繰り返し動作が行われる。すなわち、作業者端末３は、「計測」フェーズにおいて、予め決められた一定時間毎に、当該作業者端末３の３次元位置、凝視点Ｐ及び凝視範囲ＧＲを繰り返し計算し、「表示」フェーズにおいて、それらに基づいて３次元表示データを切り出して、３次元モデルを更新表示していく。

【0116】

図１８は、以上のような第２の実施形態に係る動作を行うための、作業者端末３において実行される処理動作の一例を示すフローチャートであり、図１９は、同じく、管理装置１において実行される処理動作の一例を示すフローチャートである。

【0117】

図１８に示すように、「計測」フェーズ及び「表示」フェーズとして、作業者端末３のプロセッサ３１Ａは、通信インタフェース３３によりネットワークＮＷを経由して管理装置１に、設計ファイルの送信を要求する（ステップＳ３５１）。

【0118】

図１９に示すように、管理装置１のプロセッサ１１Ａは、通信インタフェース１３により、ネットワークＮＷを経由した該当の作業者端末３から設計ファイルの送信要求が有ったか否か判断する（ステップＳ１５１）。作業者端末３から設計ファイルの送信要求が無いと判断した場合、プロセッサ１１Ａは、このステップＳ１５１の処理を繰り返す。

【0119】

そして、作業者端末３から設計ファイルの送信要求が有ったと判断した場合、プロセッサ１１Ａは、通信インタフェース１３により、ネットワークＮＷを経由して作業者端末３へ設計ファイルを送信する（ステップＳ１５２）。その後、プロセッサ１１Ａは、上記ステップＳ１５１の処理へ移行する。

【0120】

作業者端末３のプロセッサ３１Ａは、上記ステップＳ３５１において設計ファイルの送信要求を送信した後は、管理装置１から設計ファイルが送信されてくるのを待っている。設計ファイルが送信されてくると、プロセッサ３１Ａは、図１８に示すように、通信インタフェース１３によりそれを受信し、データメモリ３２に記憶させる（ステップＳ３５２）。

【0121】

その後、プロセッサ３１Ａは、「計測」フェーズの動作として、位置計測を行う（ステップＳ３０１）。すなわち、プロセッサ３１Ａは、通信インタフェース３３により各位置マーカ２から受信した電波の強度により、各位置マーカ２までの距離を計測し、計測した各位置マーカ２までの距離を、データメモリ３２に記憶させる。

【0122】

また、プロセッサ３１Ａは、角度・方位計測を行う（ステップＳ３０３）。すなわち、プロセッサ３１Ａは、方位センサ４０が計測した方位角度α°をセンサインタフェース３５を介して取得し、方位計測データとしてデータメモリ３２に記憶させる。また、プロセッサ３１Ａは、角度センサ４１が計測した仰角の角度β°をセンサインタフェース３５を介して取得し、角度計測データとしてデータメモリ３２に記憶させる。

【0123】

そして、プロセッサ３１Ａは、作業者端末３の３次元位置及び凝視点Ｐを計算し、さらに、凝視範囲ＧＲを計算する（ステップＳ３５３）。プロセッサ３１Ａは、計算した３次元位置、凝視点Ｐ及び凝視範囲ＧＲを、データメモリ３２に記憶させる。

【0124】

その後、プロセッサ３１Ａは、「表示」フェーズに移行し、データメモリ３２に記憶した凝視範囲ＧＲと、上記ステップＳ３５２で同じくデータメモリ３２に記憶した設計ファイルとから、美術セットと照明の照射方向を計算する（ステップＳ３５４）。具体的には、プロセッサ３１Ａは、凝視点Ｐを中心とした凝視範囲ＧＲ中の、美術セット及び照明器具、さらには、照射方向、付帯設備、等の３次元形状データ及び／または３次元位置データを、３次元表示データとして切り出す。

【0125】

その後、プロセッサ３１Ａは、３次元表示データの作業者ＷＯでの見え方を計算し、その見え方に応じて、例えば見えない場所の情報を削除する等、使用する３次元表示データを決定する（ステップＳ３５５）。プロセッサ３１Ａは、こうして生成した３次元表示データをデータメモリ３２に記憶させる。

【0126】

そして、プロセッサ３１Ａは、このデータメモリ３２に記憶させた３次元表示データに基づく３次元モデルを生成して、カメラ３９で撮影した画像上に重畳して表示する（ステップＳ３０７）。

【0127】

その後、プロセッサ３１Ａは、「計測」フェーズに移行して、上記ステップＳ３０１の処理に移行する。これにより、新たに位置、角度及び方位を取得して、新たな３次元表示データを生成し、重畳表示を更新していくこととなる。

【0128】

本実施形態の美術セット建て込み支援システムでは、前述のように、作業者端末３の方位センサ４０及び角度センサ４１により、カメラ３９を向けている方位と仰角を計測し、作業者端末３のプロセッサ３１Ａにより、方位センサ４０及び角度センサ４１の計測結果に基づいて凝視範囲ＧＲを計算し、管理装置１から取得した３次元設計データと、計算された凝視範囲ＧＲとに基づいて美術セットＡＳの３次元表示データを生成し、この生成した３次元表示データに基づく美術セットＡＳの３次元モデルＭＤＳをディスプレイに表示させる。よって、スタジオＳＴ内への美術セットＡＳの建て込み作業時に、建て込んだ美術セットＡＳ上に当該美術セットＡＳの３次元モデルＭＤＳを拡張現実として重ね合わせ表示することができ、作業者ＷＯは、実際の美術セットＡＳと３次元モデルＭＤＳとのずれ具合を確認することで、設計通りに美術セットＡＳが設置できたか否かを、容易に判断することができる。したがって、本実施形態の美術セット建て込み支援システムによれば、第１の実施形態と同様に、美術セットＡＳを設計通りに建て込めるように作業者ＷＯを支援することができる。

【0129】

また、本実施形態では、処理能力の高い作業者端末３を利用することで、作業者端末３内の処理だけで美術セットＡＳの３次元モデルＭＤＳを表示させることができるので、方位及び仰角の計測後に素早く表示の更新を行うことが可能となる。

【0130】

なお、第１及び第２の実施形態では、スタジオＳＴ内の作業者端末３の３次元位置情報を得るのに、位置マーカ２を利用している。しかしながら、作業者端末３の３次元位置情報は、その他の手法によって取得するようにしても良い。例えば、作業者端末３は、３次元形状認識によりスタジオＳＴの３次元構造を認識して、自位置を推測する方法により、３次元位置情報を取得することができる。

【0131】

また、実空間の画像に拡張現実として重畳表示する対象として、美術セットＡＳ以外に、照明器具ＬＦ、照射方向ＢＤ、付帯設備とその情報を説明したが、その他のものを対象としても構わない。例えば、設置した美術セットＡＳを撤収する際の撤収方向をベクトルの３次元モデルとして表示することができる。美術セットＡＳの建て込み時に、その撤収方向も閲覧できるようにすることで、撤収する際の順番や邪魔になる物を予め確認しておくことが可能となる。また、実際の撤収作業時にも、建て込み時と同様の表示を行うことで、容易に撤収方向を知ることができるようになる。

【0132】

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると共に、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

【符号の説明】

【0133】

１…管理装置、 ２…位置マーカ、 ３…作業者端末、 １１…処理部、 １１Ａ，３１Ａ…プロセッサ、 １１Ｂ，３１Ｂ…プログラムメモリ、 １２，３２…データメモリ、 １３，３３…通信インタフェース、 １４，３４…入出力インタフェース、 １５，３６…バス、 １６，３７…入力装置、 １７，３８…出力装置、 ３５…センサインタフェース、 ３９…カメラ、 ４０…方位センサ、 ４１…角度センサ、 １１１…事前情報設定部、 １１２…計測データ取得部、 １１３…凝視範囲計算部、 １１４…表示データ生成部、 １１５…表示データ送信部、 １２１…３Ｄデータ記憶部、 １２２…計測データ記憶部、 １２３…凝視範囲データ記憶部、 １２４…表示データ記憶部、 ＡＥ…説明情報、 ＡＳ…美術セット、 ＢＤ…照射方向、 ＧＲ…凝視範囲、 ＬＦ…照明器具、 ＭＤＢ…照明の照射方向ＢＤの３次元モデル、 ＭＤＥ…電源コンセントの３次元モデル、 ＭＤＬ…照明器具ＬＦの３次元モデル、 ＭＤＳ…美術セットＡＳの３次元モデル、 ＭＲ…拡大範囲、 ＮＷ…ネットワーク、 Ｐ…凝視点、 Ｐ０…予想位置、 ＳＴ…スタジオ、 ＷＯ…作業者。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10A】

【図10B】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】