特許 7506789 サーバ装置、制御方法、プログラム及び記録媒体

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-06-18

(45)【発行日】2024-06-26

(54)【発明の名称】サーバ装置、制御方法、プログラム及び記録媒体

(51)【国際特許分類】

   G06F 30/13 20200101AFI20240619BHJP

   G06F 30/20 20200101ALI20240619BHJP

   G06T 19/00 20110101ALI20240619BHJP

   G06F 111/02 20200101ALN20240619BHJP

   G06F 111/18 20200101ALN20240619BHJP

【ＦＩ】

G06F30/13

G06F30/20

G06T19/00 A

G06F111:02

G06F111:18

【請求項の数】 8

(21)【出願番号】P 2023048518

(22)【出願日】2023-03-24

(62)【分割の表示】P 2021511740の分割

【原出願日】2019-03-29

(65)【公開番号】P2023097445

(43)【公開日】2023-07-07

【審査請求日】2023-03-24

(73)【特許権者】

【識別番号】391032358

【氏名又は名称】平田機工株式会社

(74)【代理人】

【識別番号】110003281

【氏名又は名称】弁理士法人大塚国際特許事務所

(72)【発明者】

【氏名】泉田 真麻

(72)【発明者】

【氏名】野中 裕二

(72)【発明者】

【氏名】大隅 洋子

【審査官】松浦 功

(56)【参考文献】

【文献】特開２００１－０２２９５８（ＪＰ，Ａ）

【文献】特開２０００－２１５２３０（ＪＰ，Ａ）

【文献】特開２００８－００３９３５（ＪＰ，Ａ）

【文献】特開平１０－０９１０５７（ＪＰ，Ａ）

【文献】LI, M. et al.，Real-time collaborative design with heterogeneous CAD systems based on neutral modeling commands，ASME Journal of Computing and Information Science in Engineering [online]，2007年，Vol. 7, No. 2，[検索日 2022.11.10], インターネット，ＵＲＬ：https://mewangcl.github.io/publication2010.html

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｆ ３０／００ －３０／３９８

Ｇ０６Ｔ １９／００ －１９／２０

(57)【特許請求の範囲】

【請求項1】

複数のクライアント装置が参加可能な、図面情報の検証に係るセッションを確立するサーバ装置であって、
前記セッションにおける検証は、前記図面情報に定義されるオブジェクトを、当該図面情報に対応する配置情報に基づく位置及び姿勢で配置した仮想の３次元空間を介して行われるものであり、
前記サーバ装置は、
クライアント装置からのセッション開始要求の受信に応じて確立した前記セッションについて、当該セッションにおける検証対象の前記３次元空間の状態を示す状態情報を管理する管理手段と、
前記セッションに参加するクライアント装置においてなされた検証用入力の情報を取得する取得手段と、
前記取得手段により取得された前記検証用入力の情報に基づいて、前記図面情報を更新する更新手段と、
複数の前記セッションにおいて、同一のオブジェクトに対する同一内容の前記図面情報の更新が所定回数を超えてなされた場合に、当該オブジェクトを定義した前記図面情報を検証するセッションにおける当該オブジェクトの変更の提案を行う調整手段と、
を有することを特徴とするサーバ装置。

【請求項2】

前記調整手段は、複数の前記セッションにおいて、同一のオブジェクトに対する同一内容の前記図面情報の更新が前記所定回数を越えてなされた場合に、前記所定回数の更新内容に基づいて当該オブジェクトの描画用情報の変更をさらに行うことを特徴とする請求項１に記載のサーバ装置。

【請求項3】

前記サーバ装置は、前記図面情報を格納する記録手段をさらに有し、
前記更新手段は、前記記録手段に格納された前記図面情報を更新する
ことを特徴とする請求項１または２に記載のサーバ装置。

【請求項4】

前記図面情報は、前記セッションへの参加を許可するか否かを示す権限情報を含み、
クライアント装置の前記セッションへの参加は、当該セッションへの参加を許可することを示す前記権限情報を含んだ前記図面情報を当該クライアント装置が格納していることを条件として実現される
ことを特徴とする請求項１乃至３のいずれか１項に記載のサーバ装置。

【請求項5】

複数のクライアント装置が参加可能な、図面情報の検証に係るセッションを確立するサーバ装置の制御方法であって、
前記セッションにおける検証は、前記図面情報に定義されるオブジェクトを、当該図面情報に対応する配置情報に基づく位置及び姿勢で配置した仮想の３次元空間を介して行われるものであり、
前記制御方法は、
クライアント装置からのセッション開始要求の受信に応じて確立した前記セッションについて、当該セッションにおける検証対象の前記３次元空間の状態を示す状態情報を管理する管理工程と、
前記セッションに参加するクライアント装置においてなされた検証用入力の情報を取得する取得工程と、
前記取得工程において取得された前記検証用入力の情報に基づいて、前記図面情報を更新する更新工程と、
複数の前記セッションにおいて、同一のオブジェクトに対する同一内容の前記図面情報の更新が所定回数を超えてなされた場合に、当該オブジェクトを定義した前記図面情報を検証するセッションにおける当該オブジェクトの変更の提案を行う調整工程と、
を有することを特徴とする制御方法。

【請求項6】

前記図面情報は、前記セッションへの参加を許可するか否かを示す権限情報を含み、
クライアント装置の前記セッションへの参加は、当該セッションへの参加を許可することを示す前記権限情報を含んだ前記図面情報を当該クライアント装置が格納していることを条件として実現される
ことを特徴とする請求項５に記載の制御方法。

【請求項7】

コンピュータを、請求項１乃至４のいずれか１項に記載のサーバ装置の各手段として機能させるためのプログラム。

【請求項8】

請求項７に記載のプログラムを記録したコンピュータ読取可能な記録媒体。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、サーバ装置、制御方法、プログラム及び記録媒体に関し、特に設備仕様に基づいて設計された図面情報の検証を両眼立体視映像の提示を用いて実現する技術に関する。

【背景技術】

【0002】

工場に設置する設備機械を新たに導入する、あるいは設備機械を導入した新規の工場を設立する際には、該設備機械を用いて生産される製品や生産工場内の設置場所等を考慮した上で設備仕様書が予め作成され、設備機械の製造企業に対しての発注が行われる。製造企業は、このような生産設備等の設備仕様書に基づいて、要求される仕様を満たすように設備機械やその配置を含めた設計図面を作成する。

【0003】

生産設備の設計図面は、ＣＡＤ等の設計ツールを用いて電子データ（図面データ：図面情報）として作成され、注文主との間で共有され、該図面データを元に、要求した設備仕様が満たされているか等の検証が、注文主と製造企業との間で行われることになる。このような検証をより建設的に行うべく、近年ではネットワークを介してリアルタイムに注文主と製造企業がコミュニケーションをとりつつ、図面情報を変更していくシステムも存在する（特許文献１）。

【先行技術文献】

【特許文献】

【0004】

【文献】特開２００１－１９５４３８号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

ところで、上述したような図面データを参照しての検証は、設備機械導入に係る施工よりも前に行われるものであるが、特に図面データが２次元の設計図面である場合等、複数の設備機械の配置感や動線等を把握することは、設計図面に精通していない者にとって困難となり得る。この点、導入予定の生産設備を注文主が直接見ることができれば、多少は改善し得るが、例えば受発注が国を跨いで行われることも考慮すると、移動にかかる費用や移動にかかる時間等のコストを要する等、現実的ではない。

【0006】

本発明は、上述の問題点に鑑みてなされたものであり、設備仕様に基づいて構成された図面情報の検証を好適に実現するサーバ装置、制御方法、プログラム及び記録媒体を提供することを目的とする。

【課題を解決するための手段】

【0007】

前述の目的を達成するために、本発明のサーバ装置は、複数のクライアント装置が参加可能な、図面情報の検証に係るセッションを確立するサーバ装置であって、セッションにおける検証は、図面情報に定義されるオブジェクトを、当該図面情報に対応する配置情報に基づく位置及び姿勢で配置した仮想の３次元空間を介して行われるものであり、サーバ装置は、クライアント装置からのセッション開始要求の受信に応じて確立したセッションについて、当該セッションにおける検証対象の３次元空間の状態を示す状態情報を管理する管理手段と、セッションに参加するクライアント装置においてなされた検証用入力の情報を取得する取得手段と、取得手段により取得された検証用入力の情報に基づいて、図面情報を更新する更新手段と、複数のセッションにおいて、同一のオブジェクトに対する同一内容の図面情報の更新が所定回数を超えてなされた場合に、当該オブジェクトを定義した図面情報を検証するセッションにおける当該オブジェクトの変更の提案を行う調整手段と、を有することを特徴とする。

【発明の効果】

【0008】

このような構成により本発明によれば、設備仕様に基づいて構成された図面情報の検証を好適に実現することが可能となる。

【図面の簡単な説明】

【0009】

【図1】本発明の実施形態及び変形例に係る図面検証システムの構成を示したシステム図

【図2】本発明の実施形態及び変形例に係るサーバ装置１００の機能構成を示したブロック図

【図3】本発明の実施形態及び変形例に係るクライアント装置２００の機能構成を示したブロック図

【図4】本発明の実施形態及び変形例に係る図面検証システムで図面情報の検証に係り実行される検証処理を例示したフローチャート

【発明を実施するための形態】

【0010】

［実施形態１］
以下、添付図面を参照して実施形態を詳しく説明する。なお、以下の実施形態は特許請求の範囲に係る発明を限定するものでなく、また実施形態で説明されている特徴の組み合わせの全てが発明に必須のものとは限らない。実施形態で説明されている複数の特徴のうち二つ以上の特徴が任意に組み合わされてもよい。また、同一若しくは同様の構成には同一の参照番号を付し、重複した説明は省略する。

【0011】

以下に説明する一実施形態は、図面検証システムの一例としての、設備仕様に基づいて構成された図面情報の検証に係るセッションを確立するサーバ装置と、ネットワークを介した該セッションに接続して情報通信を行う複数のクライアント装置とを含んで構成される図面検証システムに、本発明を適用した例を説明する。しかし、本発明は、通信接続された複数の機器に対して、図面情報の検証に係る機能を提供する任意の機器で構成されるシステムに適用可能である。

【0012】

《図面検証システムの構成》
図１は、本発明の実施形態に係る図面検証システムの構成を示した図である。

【0013】

図示されるように、図面検証システムでは、サーバ装置１００に対して、複数のクライアント装置２００がネットワーク３００を介して接続可能に構成されている。また本実施形態では、サーバ装置１００は、任意のクライアント装置２００からセッション開始要求を受信したことに応じて、複数のクライアント装置２００が参加可能なセッションを確立することで、該セッションに参加中のクライアント装置２００間で情報の送受信を実現する。また詳細は後述するが、サーバ装置１００は、セッション中にいずれか一のクライアント装置２００から情報を受信して所定の処理を行った後、必要に応じて処理後の情報をセッション参加中の他のクライアント装置２００に送信することで、参加中のクライアント装置２００間での情報通信や情報同期を実現し、同じ情報の共有を可能にする。

【0014】

本実施形態の図面検証システムで確立されるセッションは、所定の設備仕様に基づいて設備仕様を満たす様に構成（作図）された図面情報の検証を行う検証セッションである。図面情報とは、例えば対象の施設について、設置する設備機械の情報と、該設備機械の施設内における配置の情報とを少なくとも含んで構成（作図）される図面データである。検証セッションでは、図面情報により示される施設をシミュレーションした仮想の３次元空間の鑑賞を、両眼立体視の態様で各クライアント装置２００のユーザが視認できるように構成されている。従って、各クライアント装置２００は、両眼立体視での情報提示を実現する装置として、ＨＭＤ（Head-mounted Display）２１０が接続されているものとする。

【0015】

また検証セッションに複数のクライアント装置２００が参加している場合、これらのクライアント装置２００間において、同一の図面情報を基に複製した図面情報で検証が可能である。このとき、参加しているクライアント装置２００の各々では、図面情報に係る３次元空間を独立した視点で視認することができ、複数のユーザの同時検証を実現する。複数のクライアント装置２００が参加しての検証では、例えば音声通話も可能に構成されるものであってよい。

【0016】

このような検証を可能ならしめるべく、本実施形態の図面検証システムにおいてクライアント装置２００は、検証対象の設備に係る図面情報を保持している。図面情報は、対象の施設に設置される設備機械に係る３次元ＣＡＤデータもしくはこれを変換した３次元モデルデータであってよい描画オブジェクト情報、設置される各設備機械の配置を示す配置情報、及び検証セッションへの参加許可権限や参加必要権限などの権限情報とで構成される。即ち、セッション開始要求及び検証セッションに参加可能なクライアント装置２００は、参加が許可されていることを示す権限情報を含む図面情報を保持していることが前提となる。セッション開始要求及び検証セッションの参加に必要な権限情報は、図面情報と共に例えば、ＵＳＢメモリ、ＣＤ―ＲやＤＶＤ－Ｒなどの持ち運び可能な記録メディアや電気通信回線を介して入手可能に準備または提供されることによって、クライアント装置２００の記録媒体２０２に記録される。

【0017】

検証セッションに参加中のクライアント装置２００では、図面情報に係る３次元空間を提示すべく、両眼立体視の映像の各眼球に対応する視点で該３次元空間が描画される。より詳しくは、図面情報に含まれる描画オブジェクト情報に係る３次元モデルデータを配置情報に基づいて３次元空間に配置されることで、図面情報と対応する３次元空間の少なくとも一部が構築される。また、別途決定された各眼球用の視点の位置及び方向に基づいて、該構築された３次元空間を描画することで、ＨＭＤ２１０を用いて提示される、両眼立体視を実現する画像群が生成される。

【0018】

ここで、描画オブジェクト情報に係る３次元モデルデータは、設備機械のそれぞれについて設けられるものであり、描画オブジェクト情報が３次元ＣＡＤデータである場合には、該３次元ＣＡＤデータをクライアント装置２００において変換することで生成されるものであってよい。３次元ＣＡＤデータは、その用途上、精細な形状定義が行われ、かつ、設備機械を構成する全ての部品が分離可能に構成されているため、例えば頂点数が多い等、情報量が多いデータとなっている。故に、複数の設備機械を配置した３次元空間を描画する際、３次元ＣＡＤデータは、描画が不要な面や外部からは見えない部品を過大に含んでおり、また描画する面の頂点も多いことから、描画処理の演算量が膨大であり、処理時間が長大化し、現実的でない。従って、外観の表現に影響のない部品の除去、頂点数の間引き及び結束情報の変更、簡易立体形状への置換、複数部品の統合による部品数及び頂点数の削減等の変換処理を３次元ＣＡＤデータに対して行うことで、簡素化された３次元モデルデータを得、これを描画処理に用いるものとする。

【0019】

なお、描画オブジェクト情報は、３次元ＣＡＤデータや３次元モデルデータに限られるものでなく、該３次元モデルデータに適用される各種テクスチャデータ、少なくとも一部のパーツの作動時の動作を規定した動作情報等を含むものであってよい。また描画オブジェクト情報は、３次元モデルデータに対して適用されるシェーダ等の描画用プログラムや、光源種別、光源強度、光源ベクトル等の、該描画用プログラムで用いられる演算用データの指定情報を含んでいてよい。また配置情報は、施設に設置される光源の情報を含むものであってよい。

【0020】

一方、サーバ装置１００は、検証セッションに参加しているクライアント装置２００間での検証内容の同期をとるべく、図面情報に係る３次元空間の情報を管理する。本実施形態では、図面情報に係る３次元空間の描画をクライアント装置２００において行うため、サーバ装置１００は、検証の同期に係る情報のみを管理する。従って、サーバ装置１００は、検証セッションの開始に先立っては、該当の図面情報のうちの配置情報を少なくとも保持していればよい。

【0021】

また、サーバ装置１００は、検証セッション中は図面情報に係る３次元空間の状態を示す状態情報を管理し、順次、クライアント装置２００において検証用になされた操作（検証用入力）に基づいて状態情報を更新する。状態情報に生じた変化の情報（共有情報）は、検証セッションに参加しているクライアント装置２００に送信され、クライアント装置２００において構築されている３次元空間に反映される。これにより、参加中の全てのクライアント装置２００において、同様の状態の３次元空間を基にしてクライアント装置２００に保存される図面情報を同期させた描画オブジェクト情報の鑑賞が実現される。

【0022】

〈サーバ装置の構成〉
次に、このような本実施形態のサーバ装置１００の機能構成について、図２のブロック図を用いて詳細を説明する。なお、以下の説明では、サーバ装置１００とクライアント装置２００において同様の機能を実現する構成要素については、前者の構成要素に対して「サーバ」の接頭文字を付して峻別するものとする。

【0023】

サーバ制御部１０１は、例えばＣＰＵであり、サーバ装置１００が有する各ブロックの動作を制御する。具体的にはサーバ制御部１０１は、例えばサーバ記録媒体１０２に記録されている各ブロックの動作プログラムや検証セッション提供に係るプログラムを読み出し、サーバメモリ１０３に展開して実行することにより各ブロックの動作を制御する。

【0024】

サーバ記録媒体１０２は、例えば不揮発性メモリやＨＤＤ等の恒久的にデータを保持可能な記録装置である。サーバ記録媒体１０２は、サーバ装置１００が有する各ブロックの動作プログラムや検証セッション提供に係るプログラムに加え、各ブロックの動作において必要となるパラメータ等を記録する。サーバメモリ１０３は、例えば揮発性メモリ等の一時的なデータ記憶に使用される記憶装置である。サーバメモリ１０３は、各プログラムの展開領域としてだけでなく、各ブロックの動作において出力されたデータ等を一時的に記憶する格納領域としても用いられる。

【0025】

管理部１０４は、確立中の検証セッション及び終了した検証セッションについて、対応する図面情報に係る３次元空間の状態情報を管理する。状態情報の詳細については後述するが、管理部１０４は、図面情報に基づく配置情報に基づいて構成された初期の状態情報に対し、検証セッション中になされた検証用入力の情報に基づく変更を順次加えた情報を管理する。また管理部１０４は、管理中の状態情報に変更が生じた場合に、各クライアント装置２００に構築されている図面情報に係る３次元空間を同期させるべく、共有情報を生成する。

【0026】

状態変更部１０５は、検証セッションにおいて、参加中のクライアント装置２００においてなされた検証用入力の情報に基づいて、管理部１０４で管理されている状態情報の変更を行う。

【0027】

サーバ通信部１０６は、サーバ装置１００が有する、他の装置との通信を行うための通信インタフェースである。サーバ通信部１０６は、有線無線を問わず、所定の通信方式でネットワーク３００を介して外部機器に接続し、データの送受信を行う。

【0028】

〈クライアント装置の構成〉
次に、本実施形態のクライアント装置２００の機能構成について、図３のブロック図を用いて詳細を説明する。

【0029】

制御部２０１は、例えばＣＰＵであり、クライアント装置２００が有する各ブロックの動作を制御する。具体的には制御部２０１は、例えば記録媒体２０２に記録されている各ブロックの動作プログラムや検証セッション参加に係るプログラムを読み出し、メモリ２０３に展開して実行することにより各ブロックの動作を制御する。

【0030】

記録媒体２０２は、例えば不揮発性メモリやＨＤＤ等の恒久的にデータを保持可能な記録装置である。記録媒体２０２は、クライアント装置２００が有する各ブロックの動作プログラムや検証セッション参加に係るプログラムに加え、各ブロックの動作において必要となるパラメータ等を記録する。メモリ２０３は、例えば揮発性メモリ等の一時的なデータ記憶に使用される記憶装置である。メモリ２０３は、各プログラムの展開領域としてだけでなく、各ブロックの動作において出力されたデータ等を一時的に記憶する格納領域としても用いられる。

【0031】

構築部２０４は、検証セッション参加中における、描画用の図面情報に係る３次元空間の構築を行う。構築部２０４により構築される３次元空間は、図面情報に示される全てを含むものである必要はなく、少なくとも描画を行う視点の視野範囲に含まれる描画オブジェクト群を配置した状態であってよい。具体的には、構築部２０４は、まず設定された視点位置の情報に基づき、予め定められた、視点に応じた構築範囲に配置することが配置情報で規定されているオブジェクト（設備機械、照明等）を特定する。そして構築部２０４は、特定したオブジェクトに係る描画オブジェクト情報を例えばメモリ２０３に展開し、配置情報に基づいて仮想的な３次元空間に配置することで、サーバ装置１００で管理されている３次元空間の少なくとも一部を構築する。

【0032】

上述したように、本実施形態の図面検証システムでは、検証セッションにおいて参加中の複数のクライアント装置２００のそれぞれでなされた検証用入力に基づいて３次元空間の状態が変化する。このため、構築部２０４は、サーバ装置１００において３次元空間の状態に変更が生じた場合に受信する共有情報も反映した上で、３次元空間の構築を行うものとする。3次元空間の構築は、クライアント装置２００毎にそれぞれの視点方向に合わせて行われる。

【0033】

なお、本実施形態では、構築部２０４が３次元空間の構築を行うものとして説明するが、本発明の実施はこれに限られるものではない。３次元空間の構築は、後述する描画部２０６によって行われるものであってもよいし、他の構成により実現されるものであってもよい。

【0034】

決定部２０５は、構築された３次元空間について描画を行う視点の位置及び方向を決定する。本実施形態では、検証セッションにおける３次元空間の鑑賞は、両眼立体視の映像で行われるため、決定部２０５は、左眼用及び右眼用の視点のそれぞれについて位置及び方向を決定する。視点の位置及び方向は、例えば視点移動（並進及び回転の少なくともいずれかの変更）に係る操作入力の検出、及び、ＨＭＤ２１０を装着したユーザの頭部動作（実空間における並進及び回転）の検出の少なくともいずれかに応じて決定されるものであってよい。このとき、例えば２つの視点の中間点に対して検出された移動分を反映させ、基線長方向に眼間距離の半分量ずつシフトさせることで、決定部２０５は左眼用及び右眼用の視点の位置及び方向を決定すればよい。

【0035】

描画部２０６は、例えばＧＰＵ等の描画装置である。描画部２０６は、決定部２０５により決定された視点に基づいて、図面情報に係り構築されている３次元空間を描画し、両眼立体視用の映像の１フレームに係る画像を生成する。描画部２０６により生成された１フレームの画像群は、後述のＨＭＤ２１０に順次出力されて提示される。

【0036】

操作入力部２０７は、例えば検証セッションにおける検証用入力用に設けられたコントローラ、マウスやキーボード等の、クライアント装置２００が有するユーザインタフェースである。操作入力部２０７は、ユーザによりなされた操作入力を検出すると、該操作入力に対応する制御信号を制御部２０１に伝送する。なお、本実施形態では、ＨＭＤ２１０を装着したクライアント装置２００のユーザの頭部位置に応じて、視点変更がなされるものとして説明するため、操作入力部２０７は、ＨＭＤ２１０が有するセンサ２１１のセンサ出力、もしくは該センサ出力を所定の形式に変換した情報も検出するものとする。

【0037】

通信部２０８は、クライアント装置２００が有する、他の装置との通信を行うための通信インタフェースである。通信部２０８は、有線無線を問わず、所定の通信方式でネットワーク３００を介して外部機器に接続し、データの送受信を行う。

【0038】

ＨＭＤ２１０は、本実施形態の検証セッションにおいて、図面情報の検証に係る両眼立体視の映像を提示する表示装置である。本実施形態では、両眼立体視の映像を提示する表示装置としてＨＭＤ２１０を用いるものとして説明するが、本発明の実施はこれに限られるものではなく、両眼立体視での情報提示を可能ならしめる装置であれば、いずれであってもよい。また本実施形態ではＨＭＤ２１０は、例えば加速度センサ及びジャイロセンサであってよいセンサ２１１を有し、検証セッションに係る映像提示中における（ＨＭＤ２１０を装着した）ユーザの頭部動作を検出可能に構成されているものとして説明する。しかしながら、本発明の実施はこれに限られるものではなく、ユーザの頭部動作は、ＨＭＤ２１０に設けられたマーカを、撮像装置等の外部に設けられた検出デバイスによって検出して解析することにより導出されるものであってよい。

【0039】

《検証セッション》
以下、このような構成を持つ本実施形態の図面検証システムにおいて、検証セッションにおいて提供される機能やその動作態様について説明する。

【0040】

検証セッションでは、該セッションに接続しているクライアント装置２００に対して、共通の図面情報について、該図面情報に係る３次元空間における設備機械の配置変更や別の設備機械への変更を含む各種の検証及び調整に係る機能が提供される。本実施形態では、該機能により、図面情報に係る３次元空間の状態が一時的に変更され、検証セッションに接続中のクライアント装置２００の間で共有される。

【0041】

検証セッションに参加する各クライアント装置２００のユーザは、アバターとして３次元空間中に配置され、他のクライアント装置２００の視点において視認可能な描画オブジェクトとして表現される。ここで、少なくともアバターの頭部の３次元空間における位置及び姿勢は、該アバターに対応するクライアント装置２００において両眼立体視を提供している視点と連動するよう構成されているものとする。このように構成することで、検証及び調整に係る機能の提供にあたり、各ユーザが注目している箇所や協議の対象としている描画オブジェクトの把握が容易になる等、円滑なユーザ間のコミュニケーションが実現される。

【0042】

各アバターの挙動制御は、クライアント装置２００において設定されている視点を示す視点情報がサーバ装置１００に送信され、状態変更部１０５が該視点情報に基づいて、管理部１０４が管理している状態情報のうちの対応するアバターの状態を変更し、該変更内容が共有情報として各クライアント装置２００に送信されることにより実現される。即ち、共有情報を受信したクライアント装置２００において、構築部２０４が、該共有情報により示される状態となるように、対応するアバターの位置及び姿勢を変更して配置した３次元空間を構築（変更）し、該３次元空間が描画部２０６によって描画されることになる。このような情報共有により、検証セッション参加中のクライアント装置２００において行われている検証の様子が、他のクライアント装置２００にも提示されることになる。

【0043】

この他、本実施形態の検証セッションでは、各クライアント装置２００において、３次元空間に配置されている描画オブジェクトまたは描画オブジェクトの任意の部位を指示選択する機能が提供される。指示選択された対象は、識別可能なように提示態様が制御され、該提示態様の変化もアバターと同様に共有情報として共有されることで、検証セッション参加中の全てのクライアント装置２００で提示可能になる。該機能により、検証の状況が、他のクライアント装置２００に、より伝わりやすくなる。指示選択された対象を識別可能にならしめる提示態様は、例えば該対象の描画色を異ならせる（色を変えたり、色調を明るくしたり、発光させたりすることも含む）ものであってもよいし、ポインタ等の所定の指標オブジェクトを付近に配置するものであってもよいし、アバターの手等を用いて指し示すものであってもよい。

【0044】

なお、本実施形態の図面検証システムでは、検証対象とする図面情報は、設備仕様に基づく、設備機械群が配置された状態の施設を検証するものとし、クライアント装置２００のユーザには、両眼立体視の映像を介して、あたかも該施設内で検証しているかの如き鑑賞体験を提供する。つまり、ＨＭＤ２１０を介してユーザに提示される両眼立体視の映像において、施設及び配置される設備機械の描画オブジェクトは、実寸大、即ち、現実世界と同等の大きさで鑑賞される。具体的には、各クライアント装置２００における描画のカメラパラメータ（画角）、及び描画オブジェクトの３次元モデルデータのスケーリングの少なくともいずれかが調整されることで、現実世界における該当のオブジェクトが、視点と対応する位置関係から見た場合と同サイズで、ユーザの視界に提示されるよう、本実施形態の図面検証システムは構成されているものとする。

【0045】

〈検証用入力〉
続いて、このような検証セッションに参加するクライアント装置２００において、図面情報に係る３次元空間の状態を変更せしめる入力を示す検証用入力について説明する。

【0046】

検証用入力は、図面情報で定められた施設に配置されるオブジェクトの、別のオブジェクトへの変更を指示するための操作入力を含む。該操作入力は、例えば３次元空間中に配置されたオブジェクトの選択、及び、例えばオブジェクトリストからの、選択されたオブジェクトに代えて配置するオブジェクトの選択を含む。ここで、オブジェクトは、１つの設備機械の全体を変更するものに限られるものでなく、例えば設備機械の一部のアセンブリを、互換性のある別のアセンブリに変更する態様が含まれるものであってもよい。あるいは、本検証用入力は、オブジェクトの配置されていない領域に対する、新たなオブジェクトの配置を指示するための操作入力であってもよい。

【0047】

また検証用入力は、図面情報で定められた施設に配置されるオブジェクトの、位置及び姿勢の少なくともいずれかの変更を指示するための操作入力を含む。該操作入力は、例えば３次元空間中に配置されたオブジェクトの選択、及び該オブジェクトの変更後の位置や姿勢の指示を含む。変更にあたっては、例えばオブジェクトが配置される床面の高さ変更や壁面の形状変更等、施設の内装要素の変更を含むものであってもよい。

【0048】

また検証用入力は、図面情報で定められた施設に配置されるオブジェクトや施設の内装要素について、例えばテキストチャットや音声通話等、検証セッションで行われたユーザ間の協議に係る各入力（テキストや音声）の情報（協議情報）を含む。換言すれば、本態様の検証用入力（協議情報）は、図面情報に係る３次元空間を鑑賞しながら行われた協議内容のログに相当するものであり、例えば図面情報に係る設備仕様の評価、上記変更に係る検証用入力に基づく３次元空間の状態変化についての意見交換の内容等を含むものであってよい。

【0049】

この他、図面情報には直接的に示されるものではないが、各クライアント装置２００に対応するアバターも、検証セッションにおいて３次元空間に配置されて管理される要素である。従って、検証用入力は、対応するクライアント装置２００における視点変更に係る入力（直接的に視点変更を行う操作入力、または、センサ２１１のセンシング出力）に基づいて決定された描画用の視点情報（あるいは、視点変更に係る入力そのもの）、及び検証対象の指示選択状況を示す情報を含む。

【0050】

このように、各クライアント装置２００においてなされた検証用入力の情報は、該クライアント装置２００（もしくはそのユーザ）を識別する識別情報を関連付けて、サーバ装置１００に対して送信される。即ち、検証用入力の情報は、いずれのクライアント装置２００においてなされた入力であるかを識別可能な状態で、サーバ装置１００に対して送信される。

【0051】

〈状態情報の管理〉
このように送信された検証用入力の情報を受信すると、状態変更部１０５は、管理部１０４により管理されている、本検証セッションに係る状態情報を変更する。即ち、協議情報以外の検証用入力の情報については、３次元空間に配置される設備機械やアバターの描画オブジェクトの状態を、該情報により指示される状態に変更するよう制御される。また協議情報の検証用入力の情報については、例えばリスト形式で協議内容を表示するオブジェクトが、３次元空間中の対応する位置に配置されることで提示され、確認可能となるよう制御される。

【0052】

ところで、本実施形態の図面検証システムでは、サーバ装置１００では、検証セッションの検証対象である図面情報について３次元空間の状態のみを管理し、図面情報自体についての変更は行わない。即ち、状態情報の変更は行うが、該変更は図面情報に反映されるものではなく、あくまでも図面情報の検証のために行われる一時的なものである。ここで、検証の位置づけは、現状構成されている図面情報で設備仕様が好適に満たされるか否か、または、図面情報に基づいて施設の施工が行われた場合に不具合（例えば、干渉等）が生じるか否か、または、検証を行った上での改善点が存在するか否かの確認を行うためのものになる。

【0053】

故に、本実施形態の図面検証システムでは、１つの図面情報について行われた検証セッションについて、状態情報は、検証用入力に基づいて行われた変更履歴等を示す履歴情報を含んで構成され、該セッションの終了後に、検証に基づく図面情報の変更や要検討事項が確認可能となるように、該履歴情報が図面情報を識別する情報に関連付けられて管理されるものとする。

【0054】

履歴情報は、上述したように、本実施形態の図面検証システムでは、オブジェクトの変更履歴、オブジェクトの位置及び方向の変更履歴、協議情報に基づく議事録の少なくともいずれかを含んで構成される。また履歴情報は、いずれのクライアント装置２００でなされた検証用入力に起因する変更や発言等であるかを時系列順に参照可能に構成されており、該情報に基づいて後に図面情報を変更する際に、変更内容の確認先の特定や、該変更に係る責任の所在を明らかにすることができる。

【0055】

また履歴情報は、１回の検証セッションごとに、図面情報と対応する状態情報への変更履歴を管理するように構成される態様に限られるものではない。例えば一度終了した検証セッションについて構成された履歴情報は、再度同一の図面情報に基づいて検証セッションを行う際に、履歴ごとに状態情報への反映／非反映を切り替えながら検証できるように構成してもよい。

【0056】

〈共有情報〉
検証用入力の情報に基づいて管理部１０４が管理する状態情報が変更されると、該変更を検証セッションに接続中のクライアント装置２００の構築部２０４が、描画のために構築している３次元空間に反映すべく、サーバ装置１００から各クライアント装置２００に共有情報が送信される。共有情報は、図面情報の配置情報に基づいて管理される初期の状態情報からの変更の全てを示すものである必要はなく、各状態情報の変更タイミングにおいて、直前の状態の状態情報からの差分を示すものであってよい。各クライアント装置２００の構築部２０４は、受信した共有情報に基づいて既に構築している３次元空間を更新することで、検証セッションに接続中のクライアント装置２００による検証用入力に基づいて生じた変更を反映した状態で、ローカルの３次元空間を構築することができる。このようにすることで、検証セッションに接続中のクライアント装置２００間で同期した状態の３次元空間に基づいてそれぞれのクライアント装置２００に保存された図面情報を同期させながら検証を行うことが可能となる。

【0057】

検証セッション確立の時点では、図面情報の配置情報のみに基づけば共有情報の送信は必要ないが、検証セッションにクライアント装置２００が参加して検証を行う際には、各クライアント装置２００のユーザに係るアバターの状態を更新する必要がある。このため、検証セッション中、基本的には検証用入力の情報として、視点情報や指示選択状況の情報が各クライアント装置２００からサーバ装置１００に送信され、状態情報のうちの対応するアバターの状態が該情報に基づいて更新される。そして、該更新に係る共有情報が各クライアント装置２００に送信されることになる。

【0058】

加えて、図面情報の検証に係るその他の検証用入力がなされると、状態変更部１０５は、該検証用入力の情報に基づいて状態情報を更新し、管理部１０４は状態情報に生じた変更を示す情報を共有情報に含め、各クライアント装置２００に送信させる。

【0059】

本実施形態では本仕組みの内容を理解しやすくするため、各クライアント装置２００においてなされた検証用入力の情報はまずサーバ装置１００に送信され、状態変更部１０５によって状態情報に反映された後、その変化分を示す共有情報が検証セッションに接続中の全てのクライアント装置２００に送信され、構築部２０４によって構築されている３次元空間に反映されるという例を一態様として説明する。即ち、各クライアント装置２００において描画される３次元空間を完全同期すべく、検証セッションにおいて生じた状態情報を変更させる全ての情報は、一度、サーバ装置１００において管理されている状態情報に反映され、各クライアント装置２００のローカルに構築された３次元空間が、該状態情報に同期するように更新されるものとして説明する。しかしながら、クライアント装置２００においてなされた検証用入力については、ローカルに構築された３次元空間には共有情報を介さずに適用される構成とし、該検証用入力の情報に基づいて生じる状態情報の変更に係る共有情報は、該クライアント装置２００を除いた他のクライアント装置２００に対してのみ送信される構成としてもよい。

【0060】

《検証処理》
以下、本実施形態の図面検証システムにおいて検証セッションが確立された際に、該セッションに接続中のクライアント装置２００とサーバ装置１００とで検証に係り実行される検証処理について、図４のフローチャートを用いて具体的な処理を説明する。該フローチャートに対応する処理は、サーバ制御部１０１及び制御部２０１が、例えばサーバ記録媒体１０２と記録媒体２０２とのそれぞれに記憶されている対応する処理プログラムを読み出し、サーバメモリ１０３またはメモリ２０３に展開して実行することにより実現することができる。なお、本検証処理は、例えば確立された検証セッションにクライアント装置２００が接続され、該クライアント装置２００において図面情報に基づく３次元空間が構築され、両眼立体視の映像が提示可能なシーケンスまで処理が進行した際に開始されるものとして説明する。

【0061】

Ｓ４０１で、制御部２０１は、検証用入力がなされたか否かを判断する。検証用入力がなされたか否かは、別のオブジェクトへの変更を指示するための操作入力、オブジェクトの位置及び姿勢の変更を指示するための操作入力、協議情報の入力については、それぞれに対応する入力がなされたか否かに応じて判断されるものであってよい。また視点情報や検証対象の指示選択状況に係る検証用入力については、例えば前フレームにおける状態からの変更を生じさせる入力がなされたか否かに応じて判断されるものであってよい。制御部２０１は、検証用入力がなされたと判断した場合は処理をＳ４０２に移し、なされていないと判断した場合は処理をＳ４０６に移す。

【0062】

Ｓ４０２で、制御部２０１は、なされた検証用入力の情報にクライアント装置２００の識別情報を関連付けて通信部２０８に伝送し、サーバ装置１００に送信させる。

【0063】

一方、サーバ装置１００では、サーバ制御部１０１はＳ４０３で、検証セッションに接続中のクライアント装置２００から、例えば１フレーム等の所定の処理期間中に検証用入力の情報を受信したか否かを判断する。サーバ制御部１０１は、所定の処理期間中に、いずれかのクライアント装置２００から検証用入力の情報を受信したと判断した場合は処理をＳ４０４に移す。またサーバ制御部１０１は、所定の処理期間中にいずれのクライアント装置２００からも検証用入力の情報を受信していないと判断した場合は、本フレームに係るサーバ装置１００側の処理が完了したものとして、次のフレームに係る処理を開始するタイミングまで待機した後、次のフレームについての本ステップの処理を再度行う。

【0064】

なお、例えば所定の処理期間中に複数のクライアント装置２００から受信した検証用入力の情報が、同一のオブジェクトを対象として行われる内容である等、状態変更が競合するケースも存在し得る。このような場合、サーバ制御部１０１は、所定の処理期間中に、複数のクライアント装置２００から受信した該当の検証用入力の情報のうちの最初に受信した検証用入力の情報を優先して処理し、他のクライアント装置２００から受信したそれ以外検証用入力の情報による処理は実行しないものとして制御すればよい。

【0065】

Ｓ４０４で、状態変更部１０５はサーバ制御部１０１の制御の下、受信した検証用入力の情報に基づいて、管理部１０４により管理されている状態情報を変更する。具体的には状態変更部１０５は、受信した検証用入力の情報に基づいて３次元空間中の対象のオブジェクトの状態を変更すると共に、該検証用入力の情報に関連付けられた識別情報と検証用入力の情報とに基づく変更履歴を履歴情報に追加して状態情報を変更する。

【0066】

Ｓ４０５で、管理部１０４はサーバ制御部１０１の制御の下、Ｓ４０４において行われた状態情報の変更に係る共有情報を構成してサーバ通信部１０６に伝送し、検証セッションに接続中の各クライアント装置２００に送信させる。

【0067】

またクライアント装置２００では、共有情報の受信が行われるものとして予め定められた処理タイミングまで待機した後、制御部２０１はＳ４０６で、サーバ装置１００から共有情報を受信したか否かを判断する。制御部２０１は、共有情報を受信したと判断した場合は処理をＳ４０７に移し、受信していないと判断した場合は処理をＳ４０８に移す。

【0068】

Ｓ４０７で、構築部２０４は制御部２０１の制御の下、受信した共有情報に基づく変更を加えた状態の３次元空間を構築する。

【0069】

Ｓ４０８で、決定部２０５は制御部２０１の制御の下、本フレームに係る描画を行う視点を決定する。本ステップの処理は、視点変更に係る入力がなされている場合は、該入力を反映した状態に視点を変更して決定し、なされていない場合は、前のフレームに係り描画を行った視点に決定する。

【0070】

Ｓ４０９で、描画部２０６は制御部２０１の制御の下、Ｓ４０８において決定された視点に基づいて、構築されている３次元空間の描画を行い、両眼立体視の映像の１フレームに係る画像群を生成する。

【0071】

Ｓ４１０で、制御部２０１は、Ｓ４０９において生成された画像群をＨＭＤ２１０に伝送して提示させ、次のフレームについての処理を行うべく、処理をＳ４０１に戻す。

【0072】

以上説明したように、本実施形態の図面検証システムでは、複数のクライアント装置２００を参加させた検証セッションにおいて、同期させた３次元空間の両眼立体視の映像の提示を介した図面情報の検証を好適に実現することができる。

【0073】

なお、本実施形態では図面情報に係る３次元空間の状態を変更せしめる検証用入力が、配置オブジェクトへの変更、オブジェクトの配置位置及び姿勢の変更、協議情報の入力、視点情報及び指示選択状況の変更であるものとして説明したが、本発明の実施はこれに限られるものではない。例えば、図面情報の検証に係り、視覚的な検証を行う複数種類の検証項目を予め設ける態様では、検証項目の選択に係る操作入力を検証用入力としてもよい。該態様において、検証セッション参加中のクライアント装置２００において、検証項目の選択に係る操作入力がなされると、該検証項目用のグラフィカルインタフェースを含んだ両眼立体視用の映像提示が行われるように、状態変更部１０５は状態情報を変更すればよい。

【0074】

検証項目としては例えば、配置される設備機器等のオブジェクトの変更、オブジェクトの配置、オブジェクトが配置される領域の設定（ゾーニング）、オブジェクトの配置に基づく製造物やオブジェクト使用者の動線の確認、オブジェクトの動作環境の温度条件の設定、施設における空調配置、オブジェクトの作動時に設定する照明条件、施設における照明配置、オブジェクト群のメンテナンス性、施設におけるカメラ設置箇所、及び設置されるカメラ画角設定の少なくともいずれかが含まれるものであってよい。例えば、オブジェクトの変更に係る検証項目が選択された場合、変更後のオブジェクトをいずれとするかを決定するためのグラフィカルユーザインタフェースが３次元空間中に配置され、両眼立体視の映像として各クライアント装置２００のユーザに提示されるものであってよい。

【0075】

［実施形態２］
上述した実施形態１では、サーバ装置１００は図面情報のうちの配置情報を保持し、図面情報に係る３次元空間の情報のみを管理するものとし、検証セッションの終了時には、履歴情報を図面情報を識別する情報に関連付けて管理するものとして説明したが、本発明の実施はこれに限られるものではない。

【0076】

例えばサーバ装置１００において図面情報を管理し、検証用入力の情報を受信した際、あるいはセッションの終了時には、状態情報に生じた変更を反映した状態に該図面情報を更新するように構成されていてもよい。即ち、検証セッションにおいて行われた検証に基づく図面情報の変更は、実施形態１のように、検証セッションの終了後に履歴情報を参照して例えば設計者が作業するのではなく、行われた検証内容を正として設計者の作業等を要さずにサーバ制御部１０１が図面情報に反映するよう構成されていてもよい。

【0077】

［変形例１］
上述した実施形態２のように、サーバ装置１００に図面情報が保持され、図面情報の変更が可能に構成されている態様では、該変更のために、設置機械のＣＡＤデータ等がサーバ装置１００に格納されている必要がある。換言すれば、このような態様ではサーバ装置１００に図面情報及び図面情報の構成に必要な３次元ＣＡＤデータが保持されているため、クライアント装置２００のそれぞれが図面情報を格納し、配置オブジェクトの変更があった場合にも対応可能なように描画オブジェクト情報を保持している必要はない。

【0078】

従って、クライアント装置２００には検証セッションに係る権限情報のみが、該権限情報が含まれる記録媒体を介して提供され、本検証システムで使用される両眼立体視の映像を提示するために必要となる描画オブジェクト情報及び配置情報は、サーバ装置１００から都度必要に応じて、通信部２０８を介して受信する構成としてもよい。該態様において、例えば配置オブジェクトの別オブジェクトへの変更があった場合には、共有情報に該別オブジェクトに係る描画オブジェクト情報が含められてクライアント装置２００に提供される構成としてもよい。

【0079】

［変形例２］
上述した実施形態２及び変形例１のように、検証セッションにより実質的に図面情報の編集が可能に構成されている態様では、図面情報の検証において配置可能なように、例えば特定の生産機能を実現するために必要な複数種類のオブジェクトについて、これらの描画オブジェクトの組み合わせ及び配置によって構成されたレイアウト情報をテンプレートとして予め設けておくものとしてもよい。該レイアウト情報は、検証時において、他のオブジェクトに差し替える態様で、あるいは新規に配置する態様で、３次元空間中に配置可能に構成される。

【0080】

一方で、このようなレイアウト情報は、設計仕様に必ずしも合致するものでない、あるいは設置する領域の大きさに適合するよう構成されたものではない可能性があり、配置に係る検証用入力がなされた後も、該当の組み合わせに係る描画オブジェクトの位置及び姿勢の変更や、一部オブジェクトの差し替え等の調整がなされ得る。特に、一部の設備機械について規模の異なるバリエーションが提供される、あるいはアップデートされた最新機種等が提供される態様を考慮すると、常に変化する注文主のニーズにレイアウト情報が適合しなくなる可能性も十分あり得る。

【0081】

このため、サーバ制御部１０１は、同一のテンプレートに係るレイアウト情報に基づいて配置された描画オブジェクトに対して、同一内容の変更が所定数を超えてなされる場合には、レイアウト情報に該変更を反映し、反映したものを検証において配置可能に構成するものとしてもよい。また既に該レイアウト情報を採用して構成された図面情報について検証セッションが行われる場合には、該セッションにおいて、該当箇所のオブジェクトの変更提案を行うよう調整してもよい。

【0082】

［その他の実施形態］
本発明は上記実施の形態に制限されるものではなく、本発明の精神及び範囲から逸脱することなく、発明の要旨の範囲内で種々の変形・変更が可能である。また本発明に係る図面検証システムは、１以上のコンピュータを該図面検証システムの各機器として機能させるプログラムによっても実現可能である。該プログラムは、コンピュータが読み取り可能な記録媒体に記録されることにより、あるいは電気通信回線を通じて、提供／配布することができる。

【図1】

【図2】

【図3】

【図4】