(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2022161770
(43)【公開日】2022-10-21
(54)【発明の名称】作業支援システム及び作業支援方法
(51)【国際特許分類】
G06Q 50/08 20120101AFI20221014BHJP
G06T 19/00 20110101ALI20221014BHJP
【ＦＩ】
G06Q50/08
G06T19/00 600
【審査請求】未請求
【請求項の数】2
【出願形態】ＯＬ
(21)【出願番号】P 2021085471
(22)【出願日】2021-05-20
(31)【優先権主張番号】63/173,456
(32)【優先日】2021-04-11
(33)【優先権主張国・地域又は機関】US
(71)【出願人】
【識別番号】000000549
【氏名又は名称】株式会社大林組
(74)【代理人】
【識別番号】100105957
【弁理士】
【氏名又は名称】恩田 誠
(74)【代理人】
【識別番号】100068755
【弁理士】
【氏名又は名称】恩田 博宣
(72)【発明者】
【氏名】中林 拓馬
(72)【発明者】
【氏名】中村 允哉
(72)【発明者】
【氏名】池田 雄一
【テーマコード（参考）】
5B050
5L049
【Ｆターム（参考）】
5B050DA01
5B050EA05
5B050EA13
5B050EA19
5L049CC07
(57)【要約】
【課題】作業現場で、効率的かつ的確な確認作業を支援するための作業支援システム及び作業支援方法を提供する。
【解決手段】作業支援システムＡ１は、ＢＩＭを用いて、仮想空間に要素を配置して設計を行なう設計装置１０と、仮想空間に配置された要素の３次元モデルを表示する作業支援装置３０とを備える。設計装置１０が、ＢＩＭを用いて、仮想空間に第１位置補正マーカを配置する。そして、作業支援装置３０が、現実空間において、カメラ３０ｂにより撮影された第２位置補正マーカと、仮想空間に配置された第１位置補正マーカとの位置関係により、現実空間と仮想空間との位置合わせを行ない、仮想空間に配置された要素の３次元モデルを、カメラ３０ｂによる撮影画像に重畳した複合現実画像を出力する。
【選択図】図１
【解決手段】作業支援システムＡ１は、ＢＩＭを用いて、仮想空間に要素を配置して設計を行なう設計装置１０と、仮想空間に配置された要素の３次元モデルを表示する作業支援装置３０とを備える。設計装置１０が、ＢＩＭを用いて、仮想空間に第１位置補正マーカを配置する。そして、作業支援装置３０が、現実空間において、カメラ３０ｂにより撮影された第２位置補正マーカと、仮想空間に配置された第１位置補正マーカとの位置関係により、現実空間と仮想空間との位置合わせを行ない、仮想空間に配置された要素の３次元モデルを、カメラ３０ｂによる撮影画像に重畳した複合現実画像を出力する。
【選択図】図１
【特許請求の範囲】
【請求項1】
ＢＩＭを用いて、仮想空間に要素を配置して設計を行なう設計装置と、仮想空間に配置された要素の３次元モデルを表示する作業支援装置とを備えた作業支援システムであって、
前記設計装置が、前記ＢＩＭを用いて、前記仮想空間に第１位置補正マーカを配置し、
前記作業支援装置が、
現実空間において、カメラにより撮影された第２位置補正マーカと、前記仮想空間に配置された第１位置補正マーカとの位置関係により、前記現実空間と前記仮想空間との位置合わせを行ない、
前記仮想空間に配置された要素の３次元モデルを、前記カメラによる撮影画像に重畳した複合現実画像を出力することを特徴とする作業支援システム。
前記設計装置が、前記ＢＩＭを用いて、前記仮想空間に第１位置補正マーカを配置し、
前記作業支援装置が、
現実空間において、カメラにより撮影された第２位置補正マーカと、前記仮想空間に配置された第１位置補正マーカとの位置関係により、前記現実空間と前記仮想空間との位置合わせを行ない、
前記仮想空間に配置された要素の３次元モデルを、前記カメラによる撮影画像に重畳した複合現実画像を出力することを特徴とする作業支援システム。
【請求項2】
ＢＩＭを用いて、仮想空間に要素を配置して設計を行なう設計装置と、仮想空間に配置された要素の３次元モデルを表示する作業支援装置とを用いた作業支援システムを用いて、作業支援を行なう方法であって、
前記設計装置が、前記ＢＩＭを用いて、前記仮想空間に第１位置補正マーカを配置し、
前記作業支援装置が、
現実空間において、カメラにより撮影された第２位置補正マーカと、前記仮想空間に配置された第１位置補正マーカとの位置関係により、前記現実空間と前記仮想空間との位置合わせを行ない、
前記仮想空間に配置された要素の３次元モデルを、前記カメラによる撮影画像に重畳した複合現実画像を出力することを特徴とする作業支援方法。
前記設計装置が、前記ＢＩＭを用いて、前記仮想空間に第１位置補正マーカを配置し、
前記作業支援装置が、
現実空間において、カメラにより撮影された第２位置補正マーカと、前記仮想空間に配置された第１位置補正マーカとの位置関係により、前記現実空間と前記仮想空間との位置合わせを行ない、
前記仮想空間に配置された要素の３次元モデルを、前記カメラによる撮影画像に重畳した複合現実画像を出力することを特徴とする作業支援方法。
【発明の詳細な説明】
【技術分野】
【0001】
本開示は、作業現場での確認作業を支援する作業支援システム及び作業支援方法に関する。
【背景技術】
【0002】
現場において、作業者が、現場図面等を参照しながら、現場状況を確認することがある。この場合、コンピュータ端末を用いることもある（例えば、特許文献１参照）。この文献に開示された技術においては、建設中のプラントにおけるプラントの建設や、維持管理作業を支援するため、タブレットは、測定された実位置から、記憶手段に格納されている仮想空間内の立体形状を表示するための仮想カメラの仮想位置を求める。そして、仮想カメラの視点で仮想空間内のオブジェクトを、進捗状態ごとに異なる表示形態にて表示手段に表示する。表示されたオブジェクトのＩＤと、入力されたオブジェクトの検査データとを対応付けて記憶手段に格納する。
【0003】
また、建築物の設計においては、ＢＩＭ（Building Information Modeling）を用いることがある。そして、このＢＩＭを用いて、構造物の検査を行なうこともある（例えば、特許文献２参照）。この文献に開示された技術においては、ユーザ端末の制御部は、現在位置を特定し、現在位置に応じた３次元モデルの仮想画像を、カメラから取得した構造物画像に合わせて重畳表示する。更に、制御部は、構造物画像を用いて、検査対象の評価項目の評価結果を取得し、評価結果を、３次元モデルにおける検査対象の位置に関連付けて、検査情報記憶部に記録する。
【先行技術文献】
【特許文献】
【0004】
【特許文献1】特開２０１５－０１１６２０号公報
【特許文献2】特開２０１９－０２７８５５号公報
【発明の概要】
【発明が解決しようとする課題】
【0005】
しかしながら、仮想空間の３次元モデルと現在位置との位置合わせがずれていると、的確な作業を行なうことができない。また、ＢＩＭデータは、このような位置合わせを考慮して生成されていない。
【課題を解決するための手段】
【0006】
上記課題を解決するための作業支援システムは、ＢＩＭを用いて、仮想空間に要素を配置して設計を行なう設計装置と、仮想空間に配置された要素の３次元モデルを表示する作業支援装置とを備える。前記設計装置が、前記ＢＩＭを用いて、前記仮想空間に第１位置補正マーカを配置する。そして、前記作業支援装置が、現実空間において、カメラにより撮影された第２位置補正マーカと、前記仮想空間に配置された第１位置補正マーカとの位置関係により、前記現実空間と前記仮想空間との位置合わせを行ない、前記仮想空間に配置された要素の３次元モデルを、前記カメラによる撮影画像に重畳した複合現実画像を出力する。
【発明の効果】
【0007】
本開示によれば、作業現場において、効率的かつ的確な確認作業を支援することができる。
【図面の簡単な説明】
【0008】
【図1】実施形態のシステムの説明図。
【図2】実施形態のハードウェア構成の説明図。
【図3】実施形態のＢＩＭ情報記憶部の説明図。
【図4】実施形態の検査情報記憶部の説明図。
【図5】実施形態の処理手順の説明図。
【図6】実施形態の処理手順の説明図。
【図7】実施形態の処理手順の説明図。
【図8】実施形態の処理手順の説明図。
【図9】実施形態の処理手順の説明図。
【図10】実施形態の３次元ＣＡＤ図面の説明図。
【図11】実施形態の表示画面の説明図。
【図12】実施形態の表示画面の説明図。
【図13】実施形態の表示画面の説明図。
【図14】実施形態の表示画面の説明図。
【図15】実施形態の表示画面の説明図。
【図16】実施形態の表示画面の説明図。
【図17】実施形態の表示画面の説明図。
【図18】実施形態の表示画面の説明図。
【図19】実施形態の表示画面の説明図。
【図20】実施形態の表示画面の説明図。
【発明を実施するための形態】
【0009】
以下、図１～図２０を用いて、作業支援システム及び作業支援方法を具体化した一実施形態を説明する。本実施形態では、建物の建築現場において、ＢＩＭ画像と現場状況とを比較しながら検査を行なう場合に用いる作業支援システム及び作業支援方法として説明する。
本実施形態では、図１に示すように、ネットワークを介して相互に接続された設計装置１０、支援サーバ２０、作業支援装置３０を用いる。
本実施形態では、図１に示すように、ネットワークを介して相互に接続された設計装置１０、支援サーバ２０、作業支援装置３０を用いる。
【0010】
（ハードウェア構成の説明）
図２を用いて、設計装置１０、支援サーバ２０、作業支援装置３０を構成する情報処理装置Ｈ１０のハードウェア構成を説明する。情報処理装置Ｈ１０は、通信装置Ｈ１１、入力装置Ｈ１２、表示装置Ｈ１３、記憶装置Ｈ１４、プロセッサＨ１５を備える。なお、このハードウェア構成は一例であり、他のハードウェアにより実現することも可能である。
図２を用いて、設計装置１０、支援サーバ２０、作業支援装置３０を構成する情報処理装置Ｈ１０のハードウェア構成を説明する。情報処理装置Ｈ１０は、通信装置Ｈ１１、入力装置Ｈ１２、表示装置Ｈ１３、記憶装置Ｈ１４、プロセッサＨ１５を備える。なお、このハードウェア構成は一例であり、他のハードウェアにより実現することも可能である。
【0011】
通信装置Ｈ１１は、他の装置との間で通信経路を確立して、データの送受信を実行するインタフェースであり、例えばネットワークインタフェースや無線インタフェース等である。
【0012】
入力装置Ｈ１２は、各種情報の入力を受け付ける装置であり、例えばマウスやキーボード等である。表示装置Ｈ１３は、各種情報を表示するディスプレイ等である。なお、入力装置Ｈ１２及び表示装置Ｈ１３として、タッチパネルディスプレイを用いてもよい。
【0013】
記憶装置Ｈ１４は、設計装置１０、支援サーバ２０、作業支援装置３０の各種機能を実行するためのデータや各種プログラムを格納する記憶装置である。記憶装置Ｈ１４の一例としては、ＲＯＭ、ＲＡＭ、ハードディスク等がある。
【0014】
プロセッサＨ１５は、記憶装置Ｈ１４に記憶されるプログラムやデータを用いて、設計装置１０、支援サーバ２０、作業支援装置３０における各処理を制御する。プロセッサＨ１５の一例としては、例えばＣＰＵやＭＰＵ等がある。このプロセッサＨ１５は、ＲＯＭ等に記憶されるプログラムをＲＡＭに展開して、各処理のための各種プロセスを実行する。
【0015】
プロセッサＨ１５は、自身が実行するすべての処理についてソフトウェア処理を行なうものに限られない。例えば、プロセッサＨ１５は、自身が実行する処理の少なくとも一部についてハードウェア処理を行なう専用のハードウェア回路（例えば、特定用途向け集積回路：ＡＳＩＣ）を備えてもよい。すなわち、プロセッサＨ１５は、以下で構成し得る。
【0016】
〔１〕コンピュータプログラム（ソフトウェア）に従って動作する１つ以上のプロセッサ
〔２〕各種処理のうち少なくとも一部の処理を実行する１つ以上の専用のハードウェア回路
〔３〕それらの組み合わせ、を含む回路（circuitry）
プロセッサは、ＣＰＵ並びに、ＲＡＭ及びＲＯＭ等のメモリを含み、メモリは、処理をＣＰＵに実行させるように構成されたプログラムコード又は指令を格納している。メモリすなわちコンピュータ可読媒体は、汎用又は専用のコンピュータでアクセスできるあらゆる利用可能な媒体を含む。
〔２〕各種処理のうち少なくとも一部の処理を実行する１つ以上の専用のハードウェア回路
〔３〕それらの組み合わせ、を含む回路（circuitry）
プロセッサは、ＣＰＵ並びに、ＲＡＭ及びＲＯＭ等のメモリを含み、メモリは、処理をＣＰＵに実行させるように構成されたプログラムコード又は指令を格納している。メモリすなわちコンピュータ可読媒体は、汎用又は専用のコンピュータでアクセスできるあらゆる利用可能な媒体を含む。
【0017】
（システム構成）
次に、図１を用いて、作業支援システムＡ１の各機能を説明する。
設計装置１０は、ＢＩＭ（Building Information Modeling）を用いて、構造物の設計処理（３次元ＣＡＤ処理）を行なうためのコンピュータ端末である。このＢＩＭでは、建築に用いる要素の形状だけではなく、建物要素の属性（プロパティ）を管理することができる。この設計装置１０は、オペレーティングシステム上で動作するＢＩＭアプリケーションにより、ＢＩＭ実行部１１として機能する。
次に、図１を用いて、作業支援システムＡ１の各機能を説明する。
設計装置１０は、ＢＩＭ（Building Information Modeling）を用いて、構造物の設計処理（３次元ＣＡＤ処理）を行なうためのコンピュータ端末である。このＢＩＭでは、建築に用いる要素の形状だけではなく、建物要素の属性（プロパティ）を管理することができる。この設計装置１０は、オペレーティングシステム上で動作するＢＩＭアプリケーションにより、ＢＩＭ実行部１１として機能する。
【0018】
ＢＩＭ実行部１１は、ＢＩＭ技術により、３次元モデル（オブジェクト）を仮想３次元空間上で配置することにより、３次元ＣＡＤ（computer-aided design）を実現する。各３次元モデルは、建築に関する各種情報を属性として保持している。
【0019】
支援サーバ２０は、複合現実（ＭＲ：Mixed Reality）を利用して、現場状況の管理を支援する処理を実行するコンピュータシステムである。この支援サーバ２０は、制御部２１、ＢＩＭ情報記憶部２２、表示モデル記憶部２３、検査情報記憶部２４を備える。
【0020】
制御部２１は、後述する処理（変換段階、管理段階等を含む処理）を行なう。このための処理プログラムを実行することにより、制御部２１は、変換部２１１、管理部２１２等として機能する。
【0021】
変換部２１１は、３次元ＣＡＤデータを、複合現実の仮想空間に表示可能なデータに変換する。ここでは、ＢＩＭを利用して設計された３次元ＣＡＤデータを、軽量化、ポリゴン化して、作業支援装置３０の表示アプリケーションで利用可能なフォーマットに変換する。
管理部２１２は、作業支援装置３０から現場状況における検査結果を取得し、検査情報記憶部２４に記録する。
管理部２１２は、作業支援装置３０から現場状況における検査結果を取得し、検査情報記憶部２４に記録する。
【0022】
図３に示すように、ＢＩＭ情報記憶部２２には、ＢＩＭにおいて作成したＢＩＭモデル情報２２０が記録される。このＢＩＭモデル情報２２０は、３次元ＣＡＤを用いて、建築物の設計を行なった場合に記録される。ＢＩＭモデル情報２２０は、プロジェクト情報に対して、ＢＩＭモデル（要素モデル、配置情報、属性情報）を含む。
【0023】
プロジェクト情報は、プロジェクトＩＤ、建築現場の名称、経度・緯度、建設現場の方位等に関する情報を含む。
要素モデルは、建築現場を構成する各要素の３次元形状（３次元モデル）に関する情報である。本実施形態では、要素として、建築要素オブジェクト、空間オブジェクト、マーカオブジェクトが用いられる。建築要素オブジェクトは、建築に用いる資機材に関するオブジェクトである。空間オブジェクトは、部屋や領域等を仕切る空間を特定するオブジェクトである。マーカオブジェクトは、仮想空間と現実空間との位置合わせに用いるオブジェクトである。
要素モデルは、建築現場を構成する各要素の３次元形状（３次元モデル）に関する情報である。本実施形態では、要素として、建築要素オブジェクト、空間オブジェクト、マーカオブジェクトが用いられる。建築要素オブジェクトは、建築に用いる資機材に関するオブジェクトである。空間オブジェクトは、部屋や領域等を仕切る空間を特定するオブジェクトである。マーカオブジェクトは、仮想空間と現実空間との位置合わせに用いるオブジェクトである。
【0024】
配置情報は、３次元モデルを配置（仮想空間内の座標）に関する情報を含む。
属性情報は、この要素モデルのオブジェクトＩＤを含む。建築要素オブジェクトには、更に、仕様（資機材の種類、規格、寸法、面積、体積、素材、価格等）、工程に関するプロパティ情報が記録される。マーカオブジェクトには、属性情報としてマーカＩＤが記録される。マップピンオブジェクトには、属性情報として指摘ＩＤが記録される。
属性情報は、この要素モデルのオブジェクトＩＤを含む。建築要素オブジェクトには、更に、仕様（資機材の種類、規格、寸法、面積、体積、素材、価格等）、工程に関するプロパティ情報が記録される。マーカオブジェクトには、属性情報としてマーカＩＤが記録される。マップピンオブジェクトには、属性情報として指摘ＩＤが記録される。
【0025】
表示モデル記憶部２３は、複合現実の仮想空間において表示可能な３次元モデル（ＭＲモデル情報）が記録される。このＭＲモデル情報は、ＢＩＭモデル情報２２０の変換処理を行なった場合に記録される。このＭＲモデル情報にも、ＢＩＭモデル情報２２０と同様に、仮想空間における配置情報、属性情報が記録されている。
【0026】
図４に示すように、検査情報記憶部２４には、現場での検査における指摘に関する検査結果情報２４０が記録される。この検査結果情報２４０は、作業支援装置３０から指摘情報を取得した場合に記録される。検査結果情報２４０は、プロジェクトＩＤ、指摘ＩＤ、指摘箇所座標、カメラ座標、日時、部屋、部位、検査項目、メモ、写真、音声に関する情報を含む。
【0027】
プロジェクトＩＤは、指摘があったプロジェクトを特定するための識別子である。
指摘ＩＤは、このプロジェクトにおける各指摘を特定するための識別子である。
指摘箇所座標情報は、この指摘の位置（仮想空間内の座標）に関する情報を含む。
カメラ座標情報は、この指摘を作成した際のカメラ位置（仮想空間内の座標）に関する情報を含む。
指摘ＩＤは、このプロジェクトにおける各指摘を特定するための識別子である。
指摘箇所座標情報は、この指摘の位置（仮想空間内の座標）に関する情報を含む。
カメラ座標情報は、この指摘を作成した際のカメラ位置（仮想空間内の座標）に関する情報を含む。
【0028】
日時情報は、この指摘が登録された年月日及び時刻に関する情報を含む。
部屋情報は、この指摘が行なわれた空間を特定するための識別子に関する情報を含む。例えば、指摘が行なわれた空間のオブジェクトＩＤを用いてもよい。
部屋情報は、この指摘が行なわれた空間を特定するための識別子に関する情報を含む。例えば、指摘が行なわれた空間のオブジェクトＩＤを用いてもよい。
【0029】
部位情報は、この指摘が行なわれた建築要素に関する情報を含む。例えば、指摘が行なわれた資材（建築要素）のオブジェクトＩＤを用いてもよい。
検査項目情報は、指摘された項目に関する情報を含む。例えば、資材における「キズ」等が記録される。
メモ情報は、検査項目における具体的な説明に関する情報を含む。
写真情報は、必要に応じて、この指摘箇所を撮影した画像である。
音声情報は、必要に応じて、検査項目における具体的な説明の音声、もしくは環境音の録音情報を含む。
検査項目情報は、指摘された項目に関する情報を含む。例えば、資材における「キズ」等が記録される。
メモ情報は、検査項目における具体的な説明に関する情報を含む。
写真情報は、必要に応じて、この指摘箇所を撮影した画像である。
音声情報は、必要に応じて、検査項目における具体的な説明の音声、もしくは環境音の録音情報を含む。
【0030】
図１に示す作業支援装置３０は、現場において構造物の検査を支援するコンピュータ端末（例えば、タブレット端末）である。この作業支援装置３０は、タッチパネルディスプレイ３０ａ、カメラ３０ｂ、位置特定部３０ｃを備える。更に、作業支援装置３０は、作業支援プログラムを実行することにより、ＭＲ処理部３１、検査支援部３２を実現するとともに、表示モデル記憶部３５を備える。
【0031】
タッチパネルディスプレイ３０ａは、各種情報を入力するための入力部として機能するとともに、各種情報を出力するための出力部として機能する。なお、入力部、出力部は、情報の入力や出力が可能なハードウェアであれば、タッチパネルディスプレイ３０ａに限定されるものではない。
【0032】
カメラ３０ｂは、被写体を撮影する撮影部である。
位置特定部３０ｃは、自己位置推定により、作業支援装置３０の現在地を特定する処理を実行する。この自己位置推定には、例えば、カメラ３０ｂで逐次撮影された画像の相対的な変化に応じて移動距離を推定する視覚オドメトリー技術（ＶＯ：visual odometry）を用いることができる。この技術では、位置特定部３０ｃは、撮影画像内の特徴点の検出、特徴点の相関位置関係に応じて、カメラ３０ｂの動きを推定する。なお、位置の特定は、視覚オドメトリー技術を用いる方法に限定されるものではない。例えば、３軸の加速度センサやジャイロセンサ等のＩＭＵ（Inertial Measurement Unit）を用いたり、併用したりして、ＶＩＯ（visual-inertial odometry）を行なうようにしてもよい。
位置特定部３０ｃは、自己位置推定により、作業支援装置３０の現在地を特定する処理を実行する。この自己位置推定には、例えば、カメラ３０ｂで逐次撮影された画像の相対的な変化に応じて移動距離を推定する視覚オドメトリー技術（ＶＯ：visual odometry）を用いることができる。この技術では、位置特定部３０ｃは、撮影画像内の特徴点の検出、特徴点の相関位置関係に応じて、カメラ３０ｂの動きを推定する。なお、位置の特定は、視覚オドメトリー技術を用いる方法に限定されるものではない。例えば、３軸の加速度センサやジャイロセンサ等のＩＭＵ（Inertial Measurement Unit）を用いたり、併用したりして、ＶＩＯ（visual-inertial odometry）を行なうようにしてもよい。
【0033】
ＭＲ処理部３１は、カメラ３０ｂによって撮影した画像に対して、表示モデル記憶部３５に記録されたＭＲモデルを重畳して表示する処理を実行する。
検査支援部３２は、カメラ３０ｂによる撮影画像とＭＲモデルとを比較して、建築要素の検査を支援する処理を実行する。
検査支援部３２は、カメラ３０ｂによる撮影画像とＭＲモデルとを比較して、建築要素の検査を支援する処理を実行する。
【0034】
表示モデル記憶部３５には、支援サーバ２０から取得した表示モデルが記録される。更に、検査において、指摘事項が登録された場合、マップピンオブジェクトの３次元モデルが登録される。このマップピンオブジェクトは、指摘事項の配置を示すオブジェクトである。マップピンオブジェクトは、属性情報として指摘ＩＤ、検査項目を保持する。
【0035】
【0036】
（設計処理）
まず、図５を用いて、設計処理を説明する。
ここでは、設計装置１０のＢＩＭ実行部１１は、ＢＩＭモデル生成処理を実行する（ステップＳ１０１）。具体的には、ユーザは、設計装置１０のＢＩＭ実行部１１を用いて、プロジェクト情報を入力する。この場合、ＢＩＭ実行部１１は、プロジェクト情報を含めたＢＩＭモデル情報２２０を、支援サーバ２０のＢＩＭ情報記憶部２２に記録する。
まず、図５を用いて、設計処理を説明する。
ここでは、設計装置１０のＢＩＭ実行部１１は、ＢＩＭモデル生成処理を実行する（ステップＳ１０１）。具体的には、ユーザは、設計装置１０のＢＩＭ実行部１１を用いて、プロジェクト情報を入力する。この場合、ＢＩＭ実行部１１は、プロジェクト情報を含めたＢＩＭモデル情報２２０を、支援サーバ２０のＢＩＭ情報記憶部２２に記録する。
【0037】
そして、ユーザは、ＢＩＭ実行部１１によって出力されたＣＡＤ画面上で、建物を構成する各要素（オブジェクト）の３次元要素モデルを配置することにより、設計を行なう。各要素についての属性情報が入力された場合、ＢＩＭ実行部１１は、ＢＩＭモデルの属性情報として記録する。そして、ＢＩＭ実行部１１は、作成したＢＩＭモデル情報２２０を、支援サーバ２０のＢＩＭ情報記憶部２２に記録する。
【0038】
次に、設計装置１０のＢＩＭ実行部１１は、位置補正マーカの設置処理を実行する（ステップＳ１０２）。具体的には、ユーザは、設計装置１０のＢＩＭ実行部１１を用いて、建物の所定位置に、所定の向きで、位置補正マーカ（第１位置補正マーカ）を設置する。この位置補正マーカも、ＢＩＭ上での一つのオブジェクトである。この場合、ＢＩＭ実行部１１は、このオブジェクトの属性情報として「マーカ」、「マーカＩＤ」、「マーカ寸法」を設定する。本実施形態では、位置補正マーカを、例えば、通り芯の交点等、現場において、位置決め容易で、配置し易い場所に設定する。
図１０に示すように、ＢＩＭのＣＡＤ図面５００に位置補正マーカ５０１を設置する。
図１０に示すように、ＢＩＭのＣＡＤ図面５００に位置補正マーカ５０１を設置する。
【0039】
次に、支援サーバ２０の制御部２１は、ＭＲ用データ変換処理を実行する（ステップＳ１０３）。具体的には、設計装置１０に設計完了が入力された場合、制御部２１の変換部２１１は、ＢＩＭ情報記憶部２２に記録されたＢＩＭモデル情報２２０のＢＩＭモデルを、複合現実の仮想空間内で表示可能なＭＲモデルに変換する。ここでは、ＢＩＭモデルを軽量化してポリゴン化し、作業支援装置３０のＭＲ処理部３１で表示可能な形式のＭＲモデルを生成する。このＭＲモデルには、建築要素オブジェクト、空間オブジェクト、マーカオブジェクトの３次元モデルが含まれる。
【0040】
（作業開始処理）
次に、図６を用いて、作業開始処理を説明する。ここでは、現場において、ＢＩＭにおいて設定された位置補正マーカに対応する位置に、予め位置補正マーカ（第２位置補正マーカ）を印刷したシートを配置しておく。位置補正マーカとしては、マーカＩＤをコード化した２次元コード画像を用いる。この２次元コード画像は、ＢＩＭで設計した所定の大きさの矩形状の外枠を有しており、ＢＩＭで配置された向きに置く。そして、作業支援装置３０において、作業支援プログラムを実行させて、ＭＲ処理部３１を起動する。
次に、図６を用いて、作業開始処理を説明する。ここでは、現場において、ＢＩＭにおいて設定された位置補正マーカに対応する位置に、予め位置補正マーカ（第２位置補正マーカ）を印刷したシートを配置しておく。位置補正マーカとしては、マーカＩＤをコード化した２次元コード画像を用いる。この２次元コード画像は、ＢＩＭで設計した所定の大きさの矩形状の外枠を有しており、ＢＩＭで配置された向きに置く。そして、作業支援装置３０において、作業支援プログラムを実行させて、ＭＲ処理部３１を起動する。
【0041】
ここでは、作業支援装置３０は、プロジェクト選択処理を実行する（ステップＳ２０１）。具体的には、ユーザは、支援サーバ２０の表示モデル記憶部２３に記録されたプロジェクトを選択する。この場合、ＭＲ処理部３１は、表示モデル記憶部２３から、選択されたプロジェクトのＭＲモデルを取得し、表示モデル記憶部３５に記録する。
【0042】
次に、作業支援装置３０は、位置補正マーカ撮影処理を実行する（ステップＳ２０２）。具体的には、ユーザは、位置補正マーカが配置されている場所まで移動する。そして、タッチパネルディスプレイ３０ａで位置補正マーカを確認する。
【0043】
この場合、タッチパネルディスプレイ３０ａの表示画面において、マーカ位置合わせの作業指示項目ボタンを選択すると、画面に、マーカを特定する四角形枠が表示される。
そして、図１１に示す表示画面５１０のように、現場に配置されたシート５１１を作業支援装置３０のカメラ３０ｂで捉える。シート５１１には、マーカＩＤをコード化した２次元コード画像が所定の大きさで、位置補正マーカとして印刷されている。そして、画面に表示された四角形枠を、シート５１１の位置補正マーカ５１２に重なるように一致させた状態を確認した後、タッチパネルディスプレイ３０ａで撮影する。
そして、図１１に示す表示画面５１０のように、現場に配置されたシート５１１を作業支援装置３０のカメラ３０ｂで捉える。シート５１１には、マーカＩＤをコード化した２次元コード画像が所定の大きさで、位置補正マーカとして印刷されている。そして、画面に表示された四角形枠を、シート５１１の位置補正マーカ５１２に重なるように一致させた状態を確認した後、タッチパネルディスプレイ３０ａで撮影する。
【0044】
次に、作業支援装置３０は、位置補正マーカのデコード処理を実行する（ステップＳ２０３）。具体的には、ＭＲ処理部３１は、位置補正マーカ５１２をデコードして、マーカＩＤ、マーカ寸法を取得する。
【0045】
次に、作業支援装置３０は、位置合わせ処理を実行する（ステップＳ２０４）。具体的には、ＭＲ処理部３１は、撮影された２次元コード画像の撮影画像内の配置（形状、大きさ、向き）を、デコードしたマーカＩＤの仮想空間内の位置補正マーカの配置に対応させる。この対応付けにより、撮影された位置（座標）や向きを特定して、仮想空間内の座標軸を、現実空間内の座標軸に合わせるとともに、マーカ寸法に応じて縮尺を決定する。この結果、取得したＭＲモデルを用いて、作業支援装置３０のカメラ３０ｂを視点とする仮想空間の視野画像を、カメラ３０ｂの撮影画像に写像可能なように位置合わせを実現する。
【0046】
次に、作業支援装置３０は、空間オブジェクトの特定処理を実行する（ステップＳ２０５）。具体的には、ＭＲ処理部３１は、仮想空間内の視点が、空間オブジェクト内に含まれる場合には、この空間オブジェクトの属性情報を、タッチパネルディスプレイ３０ａに出力する。
【0047】
次に、作業支援装置３０は、重畳度に応じて、オブジェクトの表示処理を実行する（ステップＳ２０６）。具体的には、ＭＲ処理部３１は、タッチパネルディスプレイ３０ａに、カメラ３０ｂの撮影画像と、仮想空間の視野内の表示対象のＭＲモデル画像とを重畳させた複合現実画像を表示する。更に、ＭＲ処理部３１は、タッチパネルディスプレイ３０ａに、スライダを表示する。このスライダを用いることにより、タッチパネルディスプレイ３０ａに表示されるＭＲモデル画像の重畳度を調整することができる。
【0048】
図１２の表示画像５２０に示すように、スライダＳＤ１により重畳度「１００％」にすると、ＭＲモデル画像のみとなる。
図１３に示すように、表示画像５３０のスライダＳＤ１により重畳度を下げると、ＭＲモデルが透過するようになり、現場の実像とＭＲモデル画像が重畳した形態で表示される。
図１３に示すように、表示画像５３０のスライダＳＤ１により重畳度を下げると、ＭＲモデルが透過するようになり、現場の実像とＭＲモデル画像が重畳した形態で表示される。
【0049】
図１４に示すように、表示画像５４０のスライダＳＤ１により重畳度「０％」にすると、ＭＲモデルが透明になり、現場の撮影画像のみが表示される。
そして、後述するようにユーザは、作業支援装置３０を携帯して移動しながら、検査を行なう。
そして、後述するようにユーザは、作業支援装置３０を携帯して移動しながら、検査を行なう。
【0050】
また、後述するように、移動後に、新たなシート５１１を見つけることもある。
図１５に示すように、この場合には、再び、マーカ位置合わせの作業指示項目ボタンを選択する。そして、表示画像５５０に表示される四角形枠の位置補正マーカ５５２を用いて、作業支援装置３０は、位置補正マーカ撮影処理（ステップＳ２０２）～位置合わせ処理（ステップＳ２０４）を実行する。
図１５に示すように、この場合には、再び、マーカ位置合わせの作業指示項目ボタンを選択する。そして、表示画像５５０に表示される四角形枠の位置補正マーカ５５２を用いて、作業支援装置３０は、位置補正マーカ撮影処理（ステップＳ２０２）～位置合わせ処理（ステップＳ２０４）を実行する。
【0051】
（作業時処理）
次に、図７を用いて、作業時処理を説明する。ユーザは、検査を行なうために、作業支援装置３０を携帯して移動する。この処理は、継続して実行される。
次に、図７を用いて、作業時処理を説明する。ユーザは、検査を行なうために、作業支援装置３０を携帯して移動する。この処理は、継続して実行される。
【0052】
この場合、作業支援装置３０は、自己位置の推定処理を実行する（ステップＳ３０１）。具体的には、位置特定部３０ｃは、逐次撮影された画像において、自己位置推定により、仮想空間内において、視点の配置（カメラ位置や向き）を特定する。
【0053】
次に、作業支援装置３０は、視野内の指摘事項の表示処理を実行する（ステップＳ３０２）。具体的には、ＭＲ処理部３１は、表示しているプロジェクトＩＤに関連付けられた検査結果情報２４０を、検査情報記憶部２４から取得する。そして、ＭＲ処理部３１は、検査結果情報２４０の指摘箇所座標情報を用いて、指摘の位置を特定する。次に、ＭＲ処理部３１は、検査結果情報２４０の検査項目を取得する。そして、ＭＲ処理部３１は、指摘の位置に、検査項目を表示したマップピンオブジェクトを、仮想空間において、他の３次元オブジェクトと識別できるように、明示的に表示する。なお、このマップピンオブジェクトは、仮想空間と現実空間の重畳度の影響を受けず、視野内に常に表示される。この場合、距離が遠ければマップピンオブジェクトが小さくなるように表示する。
【0054】
次に、作業支援装置３０は、ステップＳ２０５と同様に、空間オブジェクトの特定処理を実行する（ステップＳ３０３）。
次に、作業支援装置３０は、表示対象属性の選択の判定処理を実行する（ステップＳ３０４）。具体的には、仮想空間に特定の種類のオブジェクトのみを表示させる場合には、タッチパネルディスプレイ３０ａにおいて表示対象属性を指定する。
次に、作業支援装置３０は、表示対象属性の選択の判定処理を実行する（ステップＳ３０４）。具体的には、仮想空間に特定の種類のオブジェクトのみを表示させる場合には、タッチパネルディスプレイ３０ａにおいて表示対象属性を指定する。
【0055】
表示対象属性が選択された場合（ステップＳ３０４において「ＹＥＳ」の場合）、表示対象属性に応じてオブジェクトの特定処理を実行する（ステップＳ３０５）。この場合、ＭＲ処理部３１は、表示モデル記憶部３５において、指定された表示対象属性を有するＭＲモデルを表示対象として特定する。
【0056】
一方、表示対象属性が選択されていない場合（ステップＳ３０４において「ＮＯ」の場合）、表示対象属性に応じてオブジェクトの特定処理（ステップＳ３０５）をスキップして、表示モデル記憶部３５において、すべてのＭＲモデルを表示対象として特定する。
【0057】
そして、作業支援装置３０は、ステップＳ２０６と同様に、重畳度に応じてオブジェクトの表示処理を実行する（ステップＳ３０６）。具体的には、ＭＲ処理部３１は、表示モデル記憶部３５において、指定された表示対象のＭＲモデルを表示する。
【0058】
（指摘支援処理）
次に、図８を用いて、指摘支援処理を説明する。
まず、作業支援装置３０は、オブジェクト選択処理を実行する（ステップＳ４０１）。具体的には、ユーザが、検査対象を確認する場合、タッチパネルディスプレイ３０ａにＭＲモデル画像を表示させた状態で、選択するオブジェクトを指で指定する。この場合、ＭＲ処理部３１は、指定されたオブジェクトのオブジェクトＩＤを特定する。
次に、図８を用いて、指摘支援処理を説明する。
まず、作業支援装置３０は、オブジェクト選択処理を実行する（ステップＳ４０１）。具体的には、ユーザが、検査対象を確認する場合、タッチパネルディスプレイ３０ａにＭＲモデル画像を表示させた状態で、選択するオブジェクトを指で指定する。この場合、ＭＲ処理部３１は、指定されたオブジェクトのオブジェクトＩＤを特定する。
【0059】
次に、作業支援装置３０は、属性情報の表示処理を実行する（ステップＳ４０２）。具体的には、ＭＲ処理部３１は、表示モデル記憶部２３から、指定されたオブジェクトの属性情報を取得し、タッチパネルディスプレイ３０ａに出力する。
【0060】
【0061】
次に、作業支援装置３０は、指摘事項の設定処理を実行する（ステップＳ４０３）。具体的には、ユーザが指摘事項を入力する場合、タッチパネルディスプレイ３０ａにおいて、指摘箇所をタッチする。この場合、ＭＲ処理部３１は、指摘事項入力画面５７２をタッチパネルディスプレイ３０ａに出力する。
【0062】
図１８に示すように、表示画面５７０において、タッチ位置にマップピンオブジェクト５７１を配置し、指摘事項入力画面５７２をタッチパネルディスプレイ３０ａに出力する。そして、検査項目が入力された場合、ＭＲ処理部３１は、マップピンオブジェクト５７１の近傍に検査項目を表示する。なお、この段階では、まだ、指摘事項は支援サーバ２０に登録されていないので、マップピンオブジェクト５７１には光彩が付加された形態で、第１色（例えば白色等）で表示される。
更に、指摘箇所を、必要に応じて、カメラ３０ｂを用いて撮影する。この場合、作業支援装置３０は、指摘箇所座標、カメラ座標を特定する。
図１９に示すように、指摘箇所をカメラ３０ｂで撮影した場合には、撮影画像５７３は指摘事項入力画面５７２に設定される。
また、ＭＲ処理部３１は、ユーザの指示に応じて、検査項目における具体的な説明の音声、もしくは環境音を録音し、音声情報として検査情報記憶部２４に記録する。
更に、指摘箇所を、必要に応じて、カメラ３０ｂを用いて撮影する。この場合、作業支援装置３０は、指摘箇所座標、カメラ座標を特定する。
図１９に示すように、指摘箇所をカメラ３０ｂで撮影した場合には、撮影画像５７３は指摘事項入力画面５７２に設定される。
また、ＭＲ処理部３１は、ユーザの指示に応じて、検査項目における具体的な説明の音声、もしくは環境音を録音し、音声情報として検査情報記憶部２４に記録する。
【0063】
次に、作業支援装置３０は、サーバ登録処理を実行する（ステップＳ４０４）。具体的には、ユーザが指摘事項の入力を完了した場合、指摘事項入力画面５７２の「記録を保存」ボタンを選択する。この場合、ＭＲ処理部３１は、指摘事項入力画面５７２の入力内容を支援サーバ２０に送信する。この指摘事項には、タッチ位置に応じた指摘箇所座標、カメラ座標、日時、部屋、部位、検査項目、メモに関するデータを含める。そして、支援サーバ２０の管理部２１２は、指摘ＩＤを付与した検査結果情報２４０を生成し、検査情報記憶部２４に記録する。
【0064】
図２０の表示画面５８０に示すように、登録済みの表示形態（光彩を削除した形態）に変化させたマップピンオブジェクト５８１が表示される。ＭＲ処理部３１は、このマップピンオブジェクト５８１を、指摘項目に応じた第２色（例えば、黄色や赤色）で表示する。
【0065】
【0066】
次に、作業支援装置３０は、撮影画像の取得処理を実行する（ステップＳ５０２）。具体的には、検査支援部３２は、カメラ３０ｂによって撮影した画像において、選択されたオブジェクトに対応する建築要素画像を抽出する。
【0067】
次に、作業支援装置３０は、画像の比較処理を実行する（ステップＳ５０３）。具体的には、検査支援部３２は、建築要素画像の性状と、選択されたオブジェクトのＭＲモデル情報（要素モデル、属性）を用いて、両者の性状を比較する。性状としては、例えば、形状、大きさ、材質、色彩等の少なくとも一つを用いる。
【0068】
次に、作業支援装置３０は、現場状況の正否評価処理を実行する（ステップＳ５０４）。具体的には、検査支援部３２は、資機材画像により特定した性状と、ＭＲモデル情報の性状との一致又は不一致に応じて正否を判定する。
【0069】
次に、作業支援装置３０は、現場状況の登録処理を実行する（ステップＳ５０５）。具体的には、検査支援部３２は、支援サーバ２０に判定結果を送信する。この判定結果には、選択されたオブジェクトのオブジェクトＩＤ、空間オブジェクトのオブジェクトＩＤ、判定結果に関するデータを含める。支援サーバ２０の管理部２１２は、受信した判定結果に対して指摘ＩＤを付与する。そして、管理部２１２は、検査結果情報２４０を生成し、検査情報記憶部２４に記録する。ここで、検査結果情報２４０の日時データ領域には、現在日時を記録する。部屋データ領域には、空間オブジェクトのオブジェクトＩＤを記録する。部位データ領域には、選択されたオブジェクトのオブジェクトＩＤを記録する。検査項目データ領域には、性状相違を示す情報を記録する。メモデータ領域には、性状相違の内容（形状、大きさ、材質、色彩等）を記録する。
【0070】
本実施形態によれば、以下のような効果を得ることができる。
（１）本実施形態では、設計装置１０のＢＩＭ実行部１１は、位置補正マーカの設置処理を実行する（ステップＳ１０２）。そして、作業支援装置３０は、位置補正マーカ撮影処理（ステップＳ２０２）、位置補正マーカのデコード処理（ステップＳ２０３）、位置合わせ処理（ステップＳ２０４）を実行する。これにより、ＢＩＭにより設計されたオブジェクトと、現実空間のオブジェクトとの位置合わせを行なうことができる。
（１）本実施形態では、設計装置１０のＢＩＭ実行部１１は、位置補正マーカの設置処理を実行する（ステップＳ１０２）。そして、作業支援装置３０は、位置補正マーカ撮影処理（ステップＳ２０２）、位置補正マーカのデコード処理（ステップＳ２０３）、位置合わせ処理（ステップＳ２０４）を実行する。これにより、ＢＩＭにより設計されたオブジェクトと、現実空間のオブジェクトとの位置合わせを行なうことができる。
【0071】
（２）本実施形態では、設計装置１０のＢＩＭ実行部１１は、位置補正マーカの設置処理を実行する（ステップＳ１０２）。ここでは、位置補正マーカを、現場において、位置決め容易で、配置し易い場所に設定する。これにより、構造物の設計に用いる基準位置を用いて、位置合わせのためのマーカを配置することができる。例えば、通り芯等の基準位置では、現実空間において墨出し（水平位置や中心位置の表示）が行なわれているので、的確に位置補正マーカが付されたシートを配置することができる。
【0072】
（３）本実施形態では、新たなシート５１１を見つけた場合には、位置補正マーカ５５２により、作業支援装置３０は、位置補正マーカ撮影処理（ステップＳ２０２）～位置合わせ処理（ステップＳ２０４）を実行する。これにより、自己位置推定により生じた誤差を是正することができる。
【0073】
（４）本実施形態では、作業支援装置３０は、視野内の指摘事項の表示処理を実行する（ステップＳ３０２）。これにより、ＭＲモデル画像において視認しにくい位置にある指摘事項を容易に把握することができる。
【0074】
（５）本実施形態では、作業支援装置３０は、サーバ登録処理を実行する（ステップＳ４０４）。これにより、複数の作業支援装置３０を用いる場合にも、指摘事項等の情報共有を行なうことができる。
【0075】
（６）本実施形態では、作業支援装置３０は、撮影画像の取得処理（ステップＳ５０２）、画像の比較処理（ステップＳ５０３）、現場状況の正否評価処理（ステップＳ５０４）を実行する。これにより、現場において、効率的に検査を行なうことができる。
【0076】
本実施形態は、以下のように変更して実施することができる。本実施形態及び以下の変更例は、技術的に矛盾しない範囲で互いに組み合わせて実施することができる。
・上記実施形態では、建物の建築現場において、ＢＩＭ画像と現場状況とを比較しながら検査を行なう場合に用いる。本開示の適用対象は、建築現場に限定されるものではない。すなわち、本開示のＢＩＭは、例えば、土木等の建設設計に用いられるＣＩＭ（Construction Information Modeling）を含む技術である。
・上記実施形態では、建物の建築現場において、ＢＩＭ画像と現場状況とを比較しながら検査を行なう場合に用いる。本開示の適用対象は、建築現場に限定されるものではない。すなわち、本開示のＢＩＭは、例えば、土木等の建設設計に用いられるＣＩＭ（Construction Information Modeling）を含む技術である。
【0077】
・上記実施形態では、設計装置１０、支援サーバ２０及び作業支援装置３０を用いる。ハードウェア構成は、これに限定されるものではない。例えば、設計装置１０や作業支援装置３０において、ＢＩＭモデル情報からＭＲモデル情報に変換するようにしてもよい。この場合には、変換部２１１を各端末に設ける。
【0078】
また、検査情報記憶部２４を、ＢＩＭ情報を管理する支援サーバ２０とは異なる検査管理サーバに設けてもよい。この場合には、作業支援装置３０は、検査結果を検査管理サーバにアップロードする。
【0079】
・上記実施形態では、作業支援装置３０として、タッチパネルディスプレイ３０ａを備えたタブレット端末を用いる。これに代えて、HoloLens（登録商標）等のＨＭＤ（Head Mounted Display）を用いてもよい。この場合には、音声認識、使用者の手を利用したハンドジェスチャー等の操作により、入力を行なう。
【0080】
・上記実施形態では、作業支援装置３０の位置特定部３０ｃは、自己位置推定により、作業支援装置３０の現在地を特定する処理を実行する。作業支援装置３０の現在位置の特定方法は、これに限定されるものではない。例えば、ＧＰＳ（Global Positioning System）を用いてもよい。また、ＬＩＤＡＲ（Light Detection and Ranging）技術を用いてもよい。
【0081】
・上記実施形態では、設計装置１０のＢＩＭ実行部１１は、位置補正マーカの設置処理を実行する（ステップＳ１０２）。ここでは、位置補正マーカを、例えば、通り芯の交点等、現場において、位置決め容易で、配置し易い場所に設定する。これに代えて、設計装置１０が、位置補正マーカを設定するようにしてもよい。例えば、設計装置１０に、現場において基準となる部分を認識するためのマーカ位置選択情報を保持させておく。マーカ位置選択情報としては、複数の通り芯の交点等を用いることができる。また、複数の位置補正マーカを配置する場合には、所定間隔毎に、配置位置を特定する。そして、ＢＩＭ実行部１１が、マーカ位置選択情報を用いて、特定した配置位置に位置補正マーカを設定する。この場合、現場の工程に応じて、位置補正マーカを配置する場所を決定するようにしてもよい。例えば、工程に応じて、外部から視認可能なオブジェクトを特定し、このオブジェクトに応じて、位置補正マーカの配置を決定する。
【0082】
また、位置合わせに用いる位置補正マーカも、２次元コード画像に限定されるものではない。固有の識別子として認識できるものであれば、２次元画像だけでなく３次元形状でもよい。この場合も、ＢＩＭの建築要素オブジェクトにマーカ属性を付与することで、２次元コード画像と同様に位置合わせが可能となる。例えば、現場において、既に配置されている既設オブジェクトを位置補正マーカとして利用してもよい。既設オブジェクトとしては、早い段階で配置される非常灯等を用いることができる。この場合には、位置特定部３０ｃが、画像認識処理により、既設オブジェクトを認識する。そして、位置特定部３０ｃが、認識したオブジェクト配置及び形状と、ＢＩＭモデル情報の要素モデルの配置（形状、大きさ、向き）とを比較して、位置合わせを行なう。
【0083】
・上記実施形態では、位置補正マーカを、床に配置するが、位置補正マーカの配置は、床等の平面に限定されない。例えば、柱の側面に垂直に配置してもよい。床スラブのコンクリートがまだ打設されずに鉄筋だけが組まれているような工程において、位置補正マーカを床スラブ上に配置した場合には、位置補正マーカが歪むことがある。このような施工状況においても、柱の側面は、歪みが少ないため、撮影位置を特定して、位置合わせの誤差を少なくすることができる。
【0084】
・上記実施形態では、作業支援装置３０は、表示対象属性の特定処理を実行する（ステップＳ３０５）。ここで、ＭＲモデル情報に含まれる工程に応じて、表示対象属性を特定するようにしてもよい。例えば、ＭＲモデル情報の工程実施日に基づいて、現在日時の時点で構築されている建築要素を表示対象属性として特定する。また、次の工程において、構築される建築要素を表示対象として特定してもよい。また、工程ごとに建築要素のプリセットを登録できるようにしておき、プリセットに応じて、表示対象を特定するようにしてもよい。
【0085】
更に、後工程で配置される建築要素により、撮影位置から視認できなくなるオブジェクトについては、後工程においても視認可能なオブジェクトと異なる表示形態（例えば、半透明や点線等）に変更して表示するようにしてもよい。
【0086】
・上記実施形態では、作業支援装置３０は、指摘事項の設定処理を実行する（ステップＳ４０３）。ここで、指摘事項入力画面の部屋欄に、空間オブジェクトのオブジェクトＩＤを初期設定するようにしてもよい。
【0087】
・上記実施形態では、作業支援装置３０は、画像の比較処理（ステップＳ５０３）、現場状況の正否評価処理（ステップＳ５０４）を実行する。検査方法は、画像比較に限定されるものではない。例えば、カメラ３０ｂによる撮影画像の画像認識処理を用いてもよい。この場合には、検査支援部３２が画像認識処理により、被写体の形状、大きさ、材質を特定する。そして、検査支援部３２は、表示モデル記憶部３５に記録されたオブジェクトの属性情報と比較して、正否を判定して出力する。
【0088】
・上記実施形態では、作業支援装置３０は、画像の比較処理（ステップＳ５０３）、現場状況の正否評価処理（ステップＳ５０４）を実行する。ここで、正否評価結果に基づいて、ＭＲモデル画像の表示形態を変更するようにしてもよい。例えば、ＭＲモデル画像の配色を変更する。具体的には、検査支援部３２は、ＭＲモデル画像と構造物画像との差異を領域毎に算出し、差異が大きい領域については、濃いはっきりとした配色でＭＲモデル画像を表示する。一方、ＭＲモデル画像と構造物画像との差異が小さい領域については、ＭＲ処理部３１は、ＢＩＭ画像の透明度を高くして表示する。
【0089】
・上記実施形態では、作業支援装置３０は、視野内の指摘事項の表示処理を実行する（ステップＳ３０２）。ここでは、ＭＲ処理部３１は、仮想空間において、指摘の位置に、検査項目を表示したマップピンオブジェクトを表示する。指摘事項の表示は、マップピンオブジェクトを用いる場合に限定されない。例えば、建築要素オブジェクトに指摘事項を表示するようにしてもよい。
【0090】
次に、上記実施形態及び別例から把握できる技術的思想について以下に追記する。
（ａ）ＢＩＭを用いて、仮想空間に配置されたオブジェクトの３次元モデルを記録する表示モデル記憶部に接続された作業支援装置であって、
前記作業支援装置が、
現実空間において、カメラにより撮影された位置補正マーカと、前記ＢＩＭの前記仮想空間に配置された位置補正マーカの３次元モデルとの位置関係により、前記現実空間と前記仮想空間との位置合わせを行ない、
前記仮想空間に配置されたオブジェクトを、前記カメラによる撮影画像に重畳した複合現実画像を出力するＭＲ処理部を備えることを特徴とする作業支援装置。
（ｂ）前記ＭＲ処理部が、
現在位置を特定し、
前記現在地が含まれる空間オブジェクトを特定し、
前記空間オブジェクトの属性情報を出力することを特徴とする（ａ）に記載の作業支援装置。
（ａ）ＢＩＭを用いて、仮想空間に配置されたオブジェクトの３次元モデルを記録する表示モデル記憶部に接続された作業支援装置であって、
前記作業支援装置が、
現実空間において、カメラにより撮影された位置補正マーカと、前記ＢＩＭの前記仮想空間に配置された位置補正マーカの３次元モデルとの位置関係により、前記現実空間と前記仮想空間との位置合わせを行ない、
前記仮想空間に配置されたオブジェクトを、前記カメラによる撮影画像に重畳した複合現実画像を出力するＭＲ処理部を備えることを特徴とする作業支援装置。
（ｂ）前記ＭＲ処理部が、
現在位置を特定し、
前記現在地が含まれる空間オブジェクトを特定し、
前記空間オブジェクトの属性情報を出力することを特徴とする（ａ）に記載の作業支援装置。
【0091】
（ｃ）前記ＭＲ処理部が、
前記仮想空間に配置されたオブジェクトの属性情報において工程を特定し、
前記工程を用いて、前記複合現実画像に出力するオブジェクトを特定することを特徴とする請求項（ａ）又は（ｂ）に記載の作業支援装置。
前記仮想空間に配置されたオブジェクトの属性情報において工程を特定し、
前記工程を用いて、前記複合現実画像に出力するオブジェクトを特定することを特徴とする請求項（ａ）又は（ｂ）に記載の作業支援装置。
【0092】
（ｄ）前記ＭＲ処理部が、前記撮影画像に入力された指摘事項を示すオブジェクトを生成し、前記仮想空間内に表示することを特徴とする請求項（ａ）～（ｃ）の何れか一項に記載の作業支援装置。
【0093】
（ｅ）前記複合現実画像を用いて入力された指摘事項を、前記仮想空間内の位置に関連付けて記録する検査支援部を更に備えることを特徴とする請求項（ａ）～（ｄ）の何れか一項に記載の作業支援装置。
（ｆ）前記検査支援部が、前記撮影画像に含まれるオブジェクトの性状と、仮想空間に配置されたオブジェクトの性状とを比較し、比較結果を出力することを特徴とする（ｅ）に記載の作業支援装置。
（ｆ）前記検査支援部が、前記撮影画像に含まれるオブジェクトの性状と、仮想空間に配置されたオブジェクトの性状とを比較し、比較結果を出力することを特徴とする（ｅ）に記載の作業支援装置。
【0094】
（ｇ）位置補正マーカとして、仮想空間内において、マーカ位置選択情報を用いて選択したオブジェクト又は前記オブジェクトの基準線を設定することを特徴とする（ａ）～（ｆ）の何れか一項に記載の作業支援装置。
【符号の説明】
【0095】
Ａ１…作業支援システム、１０…設計装置、１１…ＢＩＭ実行部、２０…支援サーバ、２１…制御部、２１１…変換部、２１２…管理部、２２…ＢＩＭ情報記憶部、２３…表示モデル記憶部、２４…検査情報記憶部、３０…作業支援装置、３０ａ…タッチパネルディスプレイ、３０ｂ…カメラ、３０ｃ…位置特定部、３１…ＭＲ処理部、３２…検査支援部、３５…表示モデル記憶部
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
【図20】
