特開2023-172893対象物の双方向な三次元表現の制御方法、制御装置及び記録媒体
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2023172893
(43)【公開日】2023-12-06
(54)【発明の名称】対象物の双方向な三次元表現の制御方法、制御装置及び記録媒体
(51)【国際特許分類】
G06T 19/00 20110101AFI20231129BHJP
G06T 15/20 20110101ALI20231129BHJP
H04N 13/189 20180101ALI20231129BHJP
H04N 13/243 20180101ALI20231129BHJP
H04N 13/207 20180101ALI20231129BHJP
【ＦＩ】
G06T19/00 A
G06T15/20 500
H04N13/189
H04N13/243
H04N13/207
【審査請求】有
【請求項の数】7
【出願形態】ＯＬ
(21)【出願番号】P 2023057652
(22)【出願日】2023-03-31
(11)【特許番号】
(45)【特許公報発行日】2023-09-04
(31)【優先権主張番号】202210566832.4
(32)【優先日】2022-05-24
(33)【優先権主張国・地域又は機関】CN
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＭｙＳＱＬ
(71)【出願人】
【識別番号】523079657
【氏名又は名称】四川中▲縄▼矩▲陣▼技▲術▼▲発▼展有限公司
(74)【代理人】
【識別番号】100152180
【弁理士】
【氏名又は名称】大久保 秀人
(72)【発明者】
【氏名】▲陳▼ 政▲権▼
【テーマコード（参考）】
5B050
5B080
【Ｆターム（参考）】
5B050AA08
5B050AA09
5B050BA06
5B050BA09
5B050BA13
5B050CA07
5B050CA08
5B050DA01
5B050EA19
5B050FA02
5B080AA19
5B080BA00
5B080CA00
5B080FA00
5B080GA00
(57)【要約】 （修正有）
【課題】対象物を360度全方位から、高精度で臨場感にあふれた双方向な三次元表現が可能な、対象物の双方向な三次元表現の制御方法、装置及び記憶媒体を提供する。
【解決手段】携帯電話端末、タブレット端末、コンピュータ端末などの端末装置、ネットワーク及びサーバーからなるシステムにおいて、端末装置が実行する対象物の双方向な三次元表現の制御方法は、対象物の制御指示を取得することとＳ１、複数の方位制御パラメータの組み合わせに基づいて、対象物の画像情報を取得することとＳ２、方位制御パラメータと画像情報に基づいて、対象物の双方向な表現を実現することとＳ３、を含み、端末装置から入力されるユーザーの制御指示によって、それに対応する画像情報が出力され、その繰り返しによって三次元表現を制御する。前記制御方法は、サーバーによって実行されてもよいし、端末装置によってローカルにオフラインで実行されてもよい。
【選択図】図２
【解決手段】携帯電話端末、タブレット端末、コンピュータ端末などの端末装置、ネットワーク及びサーバーからなるシステムにおいて、端末装置が実行する対象物の双方向な三次元表現の制御方法は、対象物の制御指示を取得することとＳ１、複数の方位制御パラメータの組み合わせに基づいて、対象物の画像情報を取得することとＳ２、方位制御パラメータと画像情報に基づいて、対象物の双方向な表現を実現することとＳ３、を含み、端末装置から入力されるユーザーの制御指示によって、それに対応する画像情報が出力され、その繰り返しによって三次元表現を制御する。前記制御方法は、サーバーによって実行されてもよいし、端末装置によってローカルにオフラインで実行されてもよい。
【選択図】図２
【特許請求の範囲】
【請求項1】
対象物の制御指示を取得するステップS１と、
複数の方位制御パラメータの組み合わせに基づいて、対象物の画像情報を取得するステップS２と、
方位制御パラメータと画像情報に基づいて、対象物の双方向な表現を実現するステップS３と、
を実行する対象物の双方向な三次元表現の制御方法において、
ステップS１の制御指示には、複数の方位制御パラメータ及び視点制御パラメータが含まれ、
ステップS２の複数の方位制御パラメータには、第１方位制御パラメータ、第２方位制御パラメータ及び時間制御パラメータが含まれ、
ステップS２の画像情報には、第１画像情報が含まれており、
ステップS２は、当該第１画像情報を取得するため、
異なる複数の視点から、対象物の視角境界を特定するステップと、
当該視角境界内の対象物の画像情報を特定するステップと、
当該画像情報を、画像処理によって撮影画像から切り出すことで、対象物の全ての視点における第１画像情報を取得するステップと、
を実行することを特徴とする対象物の双方向な三次元表現の制御方法。
複数の方位制御パラメータの組み合わせに基づいて、対象物の画像情報を取得するステップS２と、
方位制御パラメータと画像情報に基づいて、対象物の双方向な表現を実現するステップS３と、
を実行する対象物の双方向な三次元表現の制御方法において、
ステップS１の制御指示には、複数の方位制御パラメータ及び視点制御パラメータが含まれ、
ステップS２の複数の方位制御パラメータには、第１方位制御パラメータ、第２方位制御パラメータ及び時間制御パラメータが含まれ、
ステップS２の画像情報には、第１画像情報が含まれており、
ステップS２は、当該第１画像情報を取得するため、
異なる複数の視点から、対象物の視角境界を特定するステップと、
当該視角境界内の対象物の画像情報を特定するステップと、
当該画像情報を、画像処理によって撮影画像から切り出すことで、対象物の全ての視点における第１画像情報を取得するステップと、
を実行することを特徴とする対象物の双方向な三次元表現の制御方法。
【請求項2】
前記画像情報には、第２画像情報が含まれており、
当該第２画像情報を取得するため、
撮影装置が、異なる複数の各視点における対象物との間の撮影距離を取得するステップと、
各視点の撮影距離を2以上に分割する分割点を設定し、全ての視点で、分割点でも対象物を撮影し、視点ごとに、視点及び分割点の計２以上の画像情報を取得するステップと、
視点ごとに、２以上の画像情報を合成し、対象物の第２画像情報を作成するステップと、
を実行することを特徴とする請求項１記載の対象物の双方向な三次元表現の制御方法。
当該第２画像情報を取得するため、
撮影装置が、異なる複数の各視点における対象物との間の撮影距離を取得するステップと、
各視点の撮影距離を2以上に分割する分割点を設定し、全ての視点で、分割点でも対象物を撮影し、視点ごとに、視点及び分割点の計２以上の画像情報を取得するステップと、
視点ごとに、２以上の画像情報を合成し、対象物の第２画像情報を作成するステップと、
を実行することを特徴とする請求項１記載の対象物の双方向な三次元表現の制御方法。
【請求項3】
前記の対象物の第２画像情報を取得するステップの後、
対象物の第１画像情報および／または第２画像情報に対して属性番号を設定し、属性番号に従って画像情報を、属性番号に紐づくように予め設定された表示位置に保存する。
ことを特徴とする請求項２記載の対象物の双方向な三次元表現の制御方法。
対象物の第１画像情報および／または第２画像情報に対して属性番号を設定し、属性番号に従って画像情報を、属性番号に紐づくように予め設定された表示位置に保存する。
ことを特徴とする請求項２記載の対象物の双方向な三次元表現の制御方法。
【請求項4】
第１方位制御パラメータ、第２方位制御パラメータ、および／または、視点制御パラメータ、並びに、時間制御パラメータに基づいて、属性番号を取得するステップと、
属性番号に基づいて、対象物の画像情報を、属性番号に紐づくように予め設定された表示位置から取得するステップと、
を実行することを特徴とする請求項３記載の対象物の双方向な三次元表現の制御方法。
属性番号に基づいて、対象物の画像情報を、属性番号に紐づくように予め設定された表示位置から取得するステップと、
を実行することを特徴とする請求項３記載の対象物の双方向な三次元表現の制御方法。
【請求項5】
第１方位制御パラメータ、第２方位制御パラメータ、視点制御パラメータ、および／または時間制御パラメータに基づいて、座標系を確立するステップと、
座標系において、画像情報を用いて対象物の三次元表現を行うステップと、
を実行することを特徴とする請求項４記載の対象物の双方向な三次元表現の制御方法。
座標系において、画像情報を用いて対象物の三次元表現を行うステップと、
を実行することを特徴とする請求項４記載の対象物の双方向な三次元表現の制御方法。
【請求項6】
対象物の制御指示を取得するための第１取得モジュールと、
複数の方位制御パラメータの組み合わせに基づいて対象物の画像情報を取得する第２取得モジュールと、
複数の方位制御パラメータと画像情報に基づいて対象物の双方向に三次元表現する三次元表現モジュール、
を含む、対象物の双方向な三次元表現のための制御装置であって、
第１取得モジュールの制御指示には、複数の方位制御パラメータ及び視点制御パラメータが含まれ、
第２取得モジュールの複数の方位制御パラメータには、第１方位制御パラメータ、第２方位制御パラメータ及び時間制御パラメータが含まれ、
第２取得モジュールの画像情報には、第１画像情報が含まれており、
第２取得モジュールは、当該第１画像情報を取得するため、
異なる複数の視点から、対象物の視角境界を特定し、
当該視角境界内の対象物の画像情報を特定し、
当該画像情報を、画像処理によって撮影画像から切り出すことで、対象物の全ての視点の第１画像情報を取得する
ことを特徴とする対象物の双方向な三次元表現のための制御装置。
複数の方位制御パラメータの組み合わせに基づいて対象物の画像情報を取得する第２取得モジュールと、
複数の方位制御パラメータと画像情報に基づいて対象物の双方向に三次元表現する三次元表現モジュール、
を含む、対象物の双方向な三次元表現のための制御装置であって、
第１取得モジュールの制御指示には、複数の方位制御パラメータ及び視点制御パラメータが含まれ、
第２取得モジュールの複数の方位制御パラメータには、第１方位制御パラメータ、第２方位制御パラメータ及び時間制御パラメータが含まれ、
第２取得モジュールの画像情報には、第１画像情報が含まれており、
第２取得モジュールは、当該第１画像情報を取得するため、
異なる複数の視点から、対象物の視角境界を特定し、
当該視角境界内の対象物の画像情報を特定し、
当該画像情報を、画像処理によって撮影画像から切り出すことで、対象物の全ての視点の第１画像情報を取得する
ことを特徴とする対象物の双方向な三次元表現のための制御装置。
【請求項7】
プロセッサで実行可能なコンピュータプログラムが格納されたメモリと、
当該コンピュータプログラムを実行するプロセッサと、
他の端末装置との間の通信接続を確立するネットワークインターフェースと、
を備え、
当該プロセッサが当該コンピュータプログラムを実行することにより、
請求項1から5のいずれかに記載された対象物の双方向な三次元表現の制御方法を実行することを特徴とするコンピュータ装置。
当該コンピュータプログラムを実行するプロセッサと、
他の端末装置との間の通信接続を確立するネットワークインターフェースと、
を備え、
当該プロセッサが当該コンピュータプログラムを実行することにより、
請求項1から5のいずれかに記載された対象物の双方向な三次元表現の制御方法を実行することを特徴とするコンピュータ装置。
【請求項8】
前記コンピュータプログラムが記録され、
当該コンピュータプログラムが実行されることで、
請求項1から5のいずれかに記載された対象物の双方向な三次元表現の制御方法を実行することを特徴とするコンピュータ装置が読み取り可能な記録媒体。
当該コンピュータプログラムが実行されることで、
請求項1から5のいずれかに記載された対象物の双方向な三次元表現の制御方法を実行することを特徴とするコンピュータ装置が読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、三次元画像の技術に関するものであり、特に対象物の双方向な三次元表現の制御方法、制御装置及び記録媒体に関する。
【背景技術】
【0002】
従来の対象物の三次元データを収集する方法は、オブジェクトの特徴に基づいて、三次元スキャンとモデリングによって行われ、生成されたデータは、面（Surface）またはポイントクラウド（Point cloud）の形式で表現される。
しかし、従来の三次元スキャンおよびモデリングの技術は、オブジェクトの質感、素材感、サイズを正確に収集できないため、三次元表現の精度が劣るという問題がある。
また、三次元表現の制御方法が単一であり、360度の全方位及び高精度で、かつ、双方向な表現には適していない。
しかし、従来の三次元スキャンおよびモデリングの技術は、オブジェクトの質感、素材感、サイズを正確に収集できないため、三次元表現の精度が劣るという問題がある。
また、三次元表現の制御方法が単一であり、360度の全方位及び高精度で、かつ、双方向な表現には適していない。
【0003】
そこで、特許文献１には、高画質の仮想視点画像を得ようとすれば、その生成のための処理負荷が増大する課題に対し、複数のカメラによって異なる視点から撮影された複数視点画像と、撮影シーンにおける背景の三次元形状を表す背景３Ｄデータとを用いて、仮想視点画像を生成するシステムであって、前記カメラからの視点に対応するシミュレーション画像を、前記背景３Ｄデータを用いて生成する生成手段と、前記シミュレーション画像と前記カメラからの前記視点で実際に撮影された画像との差異を検出する検出手段と、検出結果に基づき前記背景３Ｄデータを更新する更新手段と、を備える仮想視点画像生成システムに関する発明が開示されており、人物等の重要なオブジェクトを含む前景画像と、そのようなオブジェクトを含まない背景画像とを分離して処理することで、仮想視点画像の生成に関する処理負荷を抑えつつ、生成される仮想視点画像における特定オブジェクトに該当する部分の高画質な仮想視点画像の生成が可能になる。
【0004】
しかし、例えば、対象物が火炎、煙、水滴、プラズマなどの場合、これらの対象物は、ハイライト、高反転、高透過の特徴をもち、特許文献１にかかる発明を含め、これまでの三次元モデリングや三次元スキャンの技術では、三次元として表現できない。
これは、再現する過程で、仮想視点画像の生成に関する処理負荷を抑えることを優先するばかりに、前景画像から、物理的属性、対象物自体の情報と環境との反応情報などの種々の情報が失われることが原因であり、この解決手段は、特許文献１には一切開示されていない。
これは、再現する過程で、仮想視点画像の生成に関する処理負荷を抑えることを優先するばかりに、前景画像から、物理的属性、対象物自体の情報と環境との反応情報などの種々の情報が失われることが原因であり、この解決手段は、特許文献１には一切開示されていない。
【先行技術文献】
【特許文献】
【0005】
【特許文献1】特開2019-191989公報
【発明の概要】
【発明が解決しようとする課題】
【0006】
そこで、本発明は、前記問題点に鑑み、対象物を360度全方位から、高精度で臨場感にあふれた双方向な三次元表現が可能な、対象物の双方向な三次元表現の制御方法、装置及び記憶媒体を提供することを課題とする。
【課題を解決するための手段】
【0007】
従来技術における問題点を解決するために、本発明は、以下の技術的な解決策を講じている。
なお、本発明の説明において、「内」、「下」、「上」など方位と位置関係を指示する用語は、図面に示される方位や作業中によく置く方位、位置関係に基づくものである。
また、方向または位置関係は、本発明を説明し、説明を簡略化するためのものであり、参照されるデバイスまたは要素が特定の方向を有し、特定の方向で構築または操作されなければならないことを示したり示唆したりするものではない。
さらに、「第１」、「第２」などの用語は、説明を区別するためにのみ使用され、相対的な重要性を示したり、暗示することを意味するものではない。
なお、本発明の説明において、「内」、「下」、「上」など方位と位置関係を指示する用語は、図面に示される方位や作業中によく置く方位、位置関係に基づくものである。
また、方向または位置関係は、本発明を説明し、説明を簡略化するためのものであり、参照されるデバイスまたは要素が特定の方向を有し、特定の方向で構築または操作されなければならないことを示したり示唆したりするものではない。
さらに、「第１」、「第２」などの用語は、説明を区別するためにのみ使用され、相対的な重要性を示したり、暗示することを意味するものではない。
【0008】
本発明にかかる対象物の三次元表現の制御方法は、
対象物の制御指示を取得するステップS１と、
複数の方位制御パラメータの組み合わせに基づいて、対象物の画像情報を取得するステップS２と、
方位制御パラメータと画像情報に基づいて、対象物の双方向な表現を実現するステップS３と、
を実行する対象物の双方向な三次元表現の制御方法において、
ステップS１の制御指示には、複数の方位制御パラメータ及び視点制御パラメータが含まれ、
ステップS２の複数の方位制御パラメータには、第１方位制御パラメータ、第２方位制御パラメータ及び時間制御パラメータが含まれ、
ステップS２の画像情報には、第１画像情報が含まれており、
ステップS２は、当該第１画像情報を取得するため、
異なる複数の視点から、対象物の視角境界を特定するステップと、
当該視角境界内の対象物の画像情報を特定するステップと、
当該画像情報を、画像処理によって撮影画像から切り出すことで、対象物の全ての視点における第１画像情報を取得するステップと、
を実行することを特徴とする。
対象物の制御指示を取得するステップS１と、
複数の方位制御パラメータの組み合わせに基づいて、対象物の画像情報を取得するステップS２と、
方位制御パラメータと画像情報に基づいて、対象物の双方向な表現を実現するステップS３と、
を実行する対象物の双方向な三次元表現の制御方法において、
ステップS１の制御指示には、複数の方位制御パラメータ及び視点制御パラメータが含まれ、
ステップS２の複数の方位制御パラメータには、第１方位制御パラメータ、第２方位制御パラメータ及び時間制御パラメータが含まれ、
ステップS２の画像情報には、第１画像情報が含まれており、
ステップS２は、当該第１画像情報を取得するため、
異なる複数の視点から、対象物の視角境界を特定するステップと、
当該視角境界内の対象物の画像情報を特定するステップと、
当該画像情報を、画像処理によって撮影画像から切り出すことで、対象物の全ての視点における第１画像情報を取得するステップと、
を実行することを特徴とする。
【0009】
本発明にかかる対象物の三次元表現の制御方法は、
前記画像情報には、第２画像情報が含まれており、
当該第２画像情報を取得するため、
撮影装置が、異なる複数の各視点における対象物との間の撮影距離を取得するステップと、
各視点の撮影距離を2以上に分割する分割点を設定し、全ての視点で、分割点でも対象物を撮影し、視点ごとに、視点及び分割点の計２以上の画像情報を取得するステップと、
視点ごとに、２以上の画像情報を合成し、対象物の第２画像情報を作成するステップと、
を実行することを特徴とする。
前記画像情報には、第２画像情報が含まれており、
当該第２画像情報を取得するため、
撮影装置が、異なる複数の各視点における対象物との間の撮影距離を取得するステップと、
各視点の撮影距離を2以上に分割する分割点を設定し、全ての視点で、分割点でも対象物を撮影し、視点ごとに、視点及び分割点の計２以上の画像情報を取得するステップと、
視点ごとに、２以上の画像情報を合成し、対象物の第２画像情報を作成するステップと、
を実行することを特徴とする。
【0010】
本発明にかかる対象物の三次元表現の制御方法は、
前記の対象物の第２画像情報を取得するステップの後、
対象物の第１画像情報および／または第２画像情報に対して属性番号を設定し、属性番号に従って画像情報を、属性番号に紐づくように予め設定された表示位置に保存する
を実行することを特徴とする。
前記の対象物の第２画像情報を取得するステップの後、
対象物の第１画像情報および／または第２画像情報に対して属性番号を設定し、属性番号に従って画像情報を、属性番号に紐づくように予め設定された表示位置に保存する
を実行することを特徴とする。
【0011】
本発明にかかる対象物の三次元表現の制御方法は、
第１方位制御パラメータ、第２方位制御パラメータ、および／または、視点制御パラメータ、並びに、時間制御パラメータに基づいて、属性番号を取得するステップと、
属性番号に基づいて、対象物の画像情報を、属性番号に紐づくように予め設定された表示位置から取得するステップと、
を実行することを特徴とする。
第１方位制御パラメータ、第２方位制御パラメータ、および／または、視点制御パラメータ、並びに、時間制御パラメータに基づいて、属性番号を取得するステップと、
属性番号に基づいて、対象物の画像情報を、属性番号に紐づくように予め設定された表示位置から取得するステップと、
を実行することを特徴とする。
【0012】
本発明にかかる対象物の三次元表現の制御方法は、
第１方位制御パラメータ、第２方位制御パラメータ、視点制御パラメータ、および／または時間制御パラメータに基づいて、座標系を確立するステップと、
座標系において、画像情報を用いて対象物の三次元表現を行うステップと、
を実行することを特徴とする。
第１方位制御パラメータ、第２方位制御パラメータ、視点制御パラメータ、および／または時間制御パラメータに基づいて、座標系を確立するステップと、
座標系において、画像情報を用いて対象物の三次元表現を行うステップと、
を実行することを特徴とする。
【0013】
本発明にかかる対象物の三次元表現の制御装置は、
対象物の制御指示を取得するための第１取得モジュールと、
複数の方位制御パラメータの組み合わせに基づいて対象物の画像情報を取得する第２取得モジュールと、
複数の方位制御パラメータと画像情報に基づいて対象物の双方向に三次元表現する三次元表現モジュール、
を含む、対象物の双方向な三次元表現のための制御装置であって、
第１取得モジュールの制御指示には、複数の方位制御パラメータ及び視点制御パラメータが含まれ、
第２取得モジュールの複数の方位制御パラメータには、第１方位制御パラメータ、第２方位制御パラメータ及び時間制御パラメータが含まれ、
第２取得モジュールの画像情報には、第１画像情報が含まれており、
第２取得モジュールは、当該第１画像情報を取得するため、
異なる複数の視点から、対象物の視角境界を特定し、
当該視角境界内の対象物の画像情報を特定し、
当該画像情報を、画像処理によって撮影画像から切り出すことで、対象物の全ての視点の第１画像情報を取得する
を実行することを特徴とする。
対象物の制御指示を取得するための第１取得モジュールと、
複数の方位制御パラメータの組み合わせに基づいて対象物の画像情報を取得する第２取得モジュールと、
複数の方位制御パラメータと画像情報に基づいて対象物の双方向に三次元表現する三次元表現モジュール、
を含む、対象物の双方向な三次元表現のための制御装置であって、
第１取得モジュールの制御指示には、複数の方位制御パラメータ及び視点制御パラメータが含まれ、
第２取得モジュールの複数の方位制御パラメータには、第１方位制御パラメータ、第２方位制御パラメータ及び時間制御パラメータが含まれ、
第２取得モジュールの画像情報には、第１画像情報が含まれており、
第２取得モジュールは、当該第１画像情報を取得するため、
異なる複数の視点から、対象物の視角境界を特定し、
当該視角境界内の対象物の画像情報を特定し、
当該画像情報を、画像処理によって撮影画像から切り出すことで、対象物の全ての視点の第１画像情報を取得する
を実行することを特徴とする。
【0014】
本発明にかかる対象物の三次元表現を制御するコンピュータ装置は、
プロセッサで実行可能なコンピュータプログラムが格納されたメモリと、
当該コンピュータプログラムを実行するプロセッサと、
他の端末装置との間の通信接続を確立するネットワークインターフェースと、
を備え、
当該プロセッサが当該コンピュータプログラムを実行することにより、
請求項1から5のいずれかに記載された対象物の双方向な三次元表現の制御方法を実行することを特徴とする。
プロセッサで実行可能なコンピュータプログラムが格納されたメモリと、
当該コンピュータプログラムを実行するプロセッサと、
他の端末装置との間の通信接続を確立するネットワークインターフェースと、
を備え、
当該プロセッサが当該コンピュータプログラムを実行することにより、
請求項1から5のいずれかに記載された対象物の双方向な三次元表現の制御方法を実行することを特徴とする。
【0015】
本発明にかかる対象物の三次元表現を制御するプログラムが記録されたコンピュータ装置が読み取り可能な記録媒体は、
前記コンピュータプログラムが記録され、
当該コンピュータプログラムが実行されることで、
前記の対象物の双方向な三次元表現の制御方法を実行すること
を実行することを特徴とする。
前記コンピュータプログラムが記録され、
当該コンピュータプログラムが実行されることで、
前記の対象物の双方向な三次元表現の制御方法を実行すること
を実行することを特徴とする。
【0016】
本発明によれば、次の効果を有する。
（１）ユーザーが双方向的な要求に基づいて入力した複数の制御パラメータの任意の組み合わせを取得することにより、対象物を任意の方向、任意の視点で制御し、事前に設定された三次元表現の制御方法に基づく高精度の画像情報を任意の時間または一定期間内で再生、表現することができる。
これにより、ユーザーは、任意の視点から、対象物を静的または動的に、全方位かつ高精度に観察し、双方向的に制御できるため、臨場感にあふれる三次元表現が可能になる。
（２）同じ視点での対象物と撮影装置の間の撮影距離を2以上に分割して分割点を設定し、全ての分割点で対象物を撮影し、視点ごとに、２以上の画像情報を取得して、複数の画像情報を合成する。これにより、得られる画像情報は、拡大しても縮小しても、ノイズが少なく鮮明であるため、対象物の素材感、サイズなどの情報を保持し、双方向的に対象物を三次元表現できるほか、スムーズで迅速な表示操作が可能であり、三次元表現された対象物の臨場感がさらに向上する。
（１）ユーザーが双方向的な要求に基づいて入力した複数の制御パラメータの任意の組み合わせを取得することにより、対象物を任意の方向、任意の視点で制御し、事前に設定された三次元表現の制御方法に基づく高精度の画像情報を任意の時間または一定期間内で再生、表現することができる。
これにより、ユーザーは、任意の視点から、対象物を静的または動的に、全方位かつ高精度に観察し、双方向的に制御できるため、臨場感にあふれる三次元表現が可能になる。
（２）同じ視点での対象物と撮影装置の間の撮影距離を2以上に分割して分割点を設定し、全ての分割点で対象物を撮影し、視点ごとに、２以上の画像情報を取得して、複数の画像情報を合成する。これにより、得られる画像情報は、拡大しても縮小しても、ノイズが少なく鮮明であるため、対象物の素材感、サイズなどの情報を保持し、双方向的に対象物を三次元表現できるほか、スムーズで迅速な表示操作が可能であり、三次元表現された対象物の臨場感がさらに向上する。
【図面の簡単な説明】
【0017】
【図1】三次元表現の制御装置のシステム構成図
【図2】対象物の双方向な三次元表現の制御方法の一実施例を示すフロー図
【図3】U-V-W座標系の一実施例を示す図
【図4】U-V-W-P座標系の一実施例を示す図
【図5】対象物の双方向な三次元表現のための制御装置の構成を示した図
【図6】対象物の双方向な三次元表現のためのコンピュータ装置の構成要素を示した図
【発明を実施するための形態】
【0018】
本発明の技術的解決策をより明確に説明するために、図面をもとに、以下、本発明の具体的な実施形態や先行技術を説明する。
なお、以下の説明は、本発明の実施形態の一部に過ぎず、説明に使用される「含む」、「構成する」等の用語は、特定の実施形態を説明することのみを意図しており、例示および説明のためにのみ使用され、本発明を記載した実施形態の範囲を限定することを意図するものではない。
本明細書で使用される用語は、本開示を限定することを意図するのではなく、特定の実施形態を説明するためにのみ使用される。ここで使用される用語「含む」、「含む」などは、特徴、ステップ、操作、および／または部品の存在を示しているが、1つ以上の他の特徴、ステップ、操作、または部品の存在または追加を排除するものではない。
なお、以下の説明は、本発明の実施形態の一部に過ぎず、説明に使用される「含む」、「構成する」等の用語は、特定の実施形態を説明することのみを意図しており、例示および説明のためにのみ使用され、本発明を記載した実施形態の範囲を限定することを意図するものではない。
本明細書で使用される用語は、本開示を限定することを意図するのではなく、特定の実施形態を説明するためにのみ使用される。ここで使用される用語「含む」、「含む」などは、特徴、ステップ、操作、および／または部品の存在を示しているが、1つ以上の他の特徴、ステップ、操作、または部品の存在または追加を排除するものではない。
【0019】
図１は、本発明の代表的な実施例にかかるシステム構成図である。
システム構成図100は、端末装置、ネットワーク104及びサーバー105からなる。
端末装置は、携帯電話端末101、タブレット端末102、コンピュータ端末103などである。
ネットワーク104は、端末装置とサーバー105間の通信接続に用いられ、有線、無線または光ファイバーケーブルなどの様々なタイプの通信回線からなる。
システム構成図100は、端末装置、ネットワーク104及びサーバー105からなる。
端末装置は、携帯電話端末101、タブレット端末102、コンピュータ端末103などである。
ネットワーク104は、端末装置とサーバー105間の通信接続に用いられ、有線、無線または光ファイバーケーブルなどの様々なタイプの通信回線からなる。
【0020】
ユーザーは、携帯電話端末101、タブレット端末102、コンピュータ端末103などの各種の端末装置を使用して、メッセージの受信または送信などのために、ネットワーク104を介してサーバー105に接続することができる。
各種の端末装置は、ウェブブラウザ、インスタントメッセンジャー、クライアントアプリ、コマンドラインツール等の様々な通信クライアントアプリケーションが予めインストールされていれば、当該端末装置において、オフラインで実行し、本発明の対象物の双方向な三次元表現を実行できる。
端末装置は、ディスプレイを有し、ウェブブラウジング、APPをサポートする様々な電子機器であってよく、スマートフォン、タブレット、電子ブックリーダー、ポータブルコンピュータ、デスクトップコンピュータなどを含むが、これらに限定されない。
サーバー105は、端末装置に表示されるページまたはAPPのサポートを提供するバックエンドサーバーなど、様々なサービスを提供するサーバーであってもよい。
各種の端末装置は、ウェブブラウザ、インスタントメッセンジャー、クライアントアプリ、コマンドラインツール等の様々な通信クライアントアプリケーションが予めインストールされていれば、当該端末装置において、オフラインで実行し、本発明の対象物の双方向な三次元表現を実行できる。
端末装置は、ディスプレイを有し、ウェブブラウジング、APPをサポートする様々な電子機器であってよく、スマートフォン、タブレット、電子ブックリーダー、ポータブルコンピュータ、デスクトップコンピュータなどを含むが、これらに限定されない。
サーバー105は、端末装置に表示されるページまたはAPPのサポートを提供するバックエンドサーバーなど、様々なサービスを提供するサーバーであってもよい。
【0021】
なお、本実施例で提供される対象物の双方向な三次元表現のための制御方法は、サーバー105によって実行されてもよいし、端末装置によってローカルにオフラインで実行されてもよく、その場合、対象物の双方向な三次元表現のための制御装置をサーバー105または端末装置に設定することができる。
図1における端末装置、ネットワーク104及びサーバー105の数は、例示であり、これに限定されず、任意の数の端末装置、ネットワーク104及びサーバー105を利用できる。
図1における端末装置、ネットワーク104及びサーバー105の数は、例示であり、これに限定されず、任意の数の端末装置、ネットワーク104及びサーバー105を利用できる。
【0022】
図2は、本発明の対象物の双方向な三次元表現の制御方法の一実施例を示すフロー図である。
対象物の双方向な三次元表現の制御方法は、次のステップからなる。
（S1）対象物の制御指示を取得する。
制御指示は、複数の方位制御パラメータを含む。
（S2）複数の方位制御パラメータの組み合わせに基づいて、対象物の画像情報を取得する。
画像情報は、所定の三次元表現の制御方法によって取得される。
（S3）方位制御パラメータ及び画像情報に基づいて、対象物の双方向な表現を実行する。
対象物の双方向な三次元表現の制御方法は、次のステップからなる。
（S1）対象物の制御指示を取得する。
制御指示は、複数の方位制御パラメータを含む。
（S2）複数の方位制御パラメータの組み合わせに基づいて、対象物の画像情報を取得する。
画像情報は、所定の三次元表現の制御方法によって取得される。
（S3）方位制御パラメータ及び画像情報に基づいて、対象物の双方向な表現を実行する。
【0023】
なお、本発明における「双方向」とは、端末装置等から入力されるユーザーの制御指示によって、それに対応する画像情報が出力され、その繰り返しによって三次元表現を制御することを意味する。
【0024】
ユーザーは、図1のシステム構成図100において、端末装置によって対象物の制御指示を入力し、端末装置が本発明にかかる双方向な三次元表現の制御方法を実行することができる。
また、端末装置から送信された対象物の制御指示を、ネットワーク104を介して受信したサーバー105が本発明にかかる双方向な三次元表現の制御方法を実行することもできる。
また、端末装置から送信された対象物の制御指示を、ネットワーク104を介して受信したサーバー105が本発明にかかる双方向な三次元表現の制御方法を実行することもできる。
【0025】
対象物の制御指示として送信される電子情報は、様々なファイル形式を選択でき、例えば、特定のファイル形式（XML、JSON、HTMLなど）であってもよいし、端末のコマンドラインで入力される文字列コマンドであってもよいし、GUI（Graphical User Interface）を介して得られるクリック、ドラッグ、スライドなどのユーザーの操作によるものであってもよい。
【0026】
特定の対象物の制御指示に関する形式や内容は、ユーザーの対話要件に従って予め定義することができる。
そのため、仕様書に従って対応する解析を行い、制御指示の正しい内容を得ることができる。
そのため、仕様書に従って対応する解析を行い、制御指示の正しい内容を得ることができる。
【0027】
対象物の制御指示は、複数の方位制御パラメータを含む。
複数の方位制御パラメータの組み合わせにより、対象物の画像情報を取得し、取得した画像情報に基づいて、対象物の対応する方向への移動及び表現を制御できる。
複数の方位制御パラメータの組み合わせにより、対象物の画像情報を取得し、取得した画像情報に基づいて、対象物の対応する方向への移動及び表現を制御できる。
【0028】
さらに、複数の方位制御パラメータは、第１方位制御パラメータと、第２方位制御パラメータと、時間制御パラメータとを含む。
第１方位制御パラメータは、第１方向への対象物の移動制御及び画像情報の提示に用いられる。
第２方位制御パラメータは、第２方向への対象物の移動制御及び画像情報の提示に用いられる。
第１方向及び第２方向は、三次元空間の直角座標系における対象物の直交する任意の2方向であり、例えば、XYZ座標系におけるX方向及びY方向やX方向及びZ方向またはUVW座標系におけるU方向とV方向が挙げられる。
第１方位制御パラメータは、第１方向への対象物の移動制御及び画像情報の提示に用いられる。
第２方位制御パラメータは、第２方向への対象物の移動制御及び画像情報の提示に用いられる。
第１方向及び第２方向は、三次元空間の直角座標系における対象物の直交する任意の2方向であり、例えば、XYZ座標系におけるX方向及びY方向やX方向及びZ方向またはUVW座標系におけるU方向とV方向が挙げられる。
【0029】
本実施例では、UVW座標系を使用して方位制御パラメータを表し、W方向を使用して、任意の瞬間または一定期間にわたる第１方向および／または第２方向への対象物の移動及び表現を制御する方法を説明する。
【0030】
複数の方位制御パラメータは、別々に使用することができ、例えば、U方向またはV方向の方位制御パラメータのみを使用して、U方向またはV方向の画像情報を取得し、取得したU方向またはV方向の画像情報に基づいて、U方向またはV方向に沿った対象物の移動及び表現を制御することができる。
また、U方向及びV方向の方位制御パラメータの組み合わせを使用して、U方向及びV方向の対象物の画像情報を取得し、取得したU方向及びV方向の画像情報に基づいて、U方向及びV方向に沿った対象物の移動及び表現を制御することができる。
また、U方向及びV方向の方位制御パラメータの組み合わせを使用して、U方向及びV方向の対象物の画像情報を取得し、取得したU方向及びV方向の画像情報に基づいて、U方向及びV方向に沿った対象物の移動及び表現を制御することができる。
【0031】
U方向の方位制御パラメータおよび／またはV方向の方位制御パラメータと、時間制御パラメータとを組み合わせて、U方向および／またはV方向の対象物の移動及び表現を制御することで、ある瞬間にのみ取得したU方向またはV方向の画像情報に基づいて対象物を静的に表現したり、ある一定期間取得したU方向またはV方向の画像情報に基づいて動的に表現することができる。
そのため、ユーザーは対象物自体またはその動きを、静的または動的に多方向から観察できるようになる。
そのため、ユーザーは対象物自体またはその動きを、静的または動的に多方向から観察できるようになる。
【0032】
対象物の制御指示は、さらに、視点制御パラメータを含む。
視点制御パラメータは、対象物の移動及び表現を任意の視点に制御するために使用される。
視点制御パラメータは、方位制御パラメータと時間制御パラメータを組み合わせることで取得した画像情報に基づいて、任意の瞬間または期間における第１方向及び／または第２方向への対象物の移動及び表現を任意の視点で制御できる。
そのため、ユーザーは、必要に応じて、任意の視点から、対象物自体または対象物の動きを、静的または動的に観察することが容易になり、対象物を双方向に制御する際のユーザーの臨場感を向上させることができる。
視点制御パラメータは、対象物の移動及び表現を任意の視点に制御するために使用される。
視点制御パラメータは、方位制御パラメータと時間制御パラメータを組み合わせることで取得した画像情報に基づいて、任意の瞬間または期間における第１方向及び／または第２方向への対象物の移動及び表現を任意の視点で制御できる。
そのため、ユーザーは、必要に応じて、任意の視点から、対象物自体または対象物の動きを、静的または動的に観察することが容易になり、対象物を双方向に制御する際のユーザーの臨場感を向上させることができる。
【0033】
なお、画像情報は、第１画像情報からなり、第１画像情報は、次のステップからなる三次元表現の制御方法によって得られる。
（１）異なる複数の視点から、対象物の視角境界を特定する。
（２）異なる複数の視点から、視角境界内の対象物の画像情報を特定する。
（３）特定した視角境界内の対象物の画像情報を、画像処理によって撮影画像から切り出すことで、全ての視点における対象物の第１画像情報を取得する。
（１）異なる複数の視点から、対象物の視角境界を特定する。
（２）異なる複数の視点から、視角境界内の対象物の画像情報を特定する。
（３）特定した視角境界内の対象物の画像情報を、画像処理によって撮影画像から切り出すことで、全ての視点における対象物の第１画像情報を取得する。
【0034】
対象物の画像情報の取得には、取得装置を用いる。
取得装置は、対象物の画像情報を取得できるものであれば、カメラ、仮想カメラ（仮想カメラは、仮想対象物体の画像情報を取得するために使用できる。）など、どのようなものでも利用できる。
取得装置は、対象物の画像情報を取得できるものであれば、カメラ、仮想カメラ（仮想カメラは、仮想対象物体の画像情報を取得するために使用できる。）など、どのようなものでも利用できる。
【0035】
対象物の画像情報を取得するには、異なる複数の視点から撮影された対象物の撮影画像を取得する。
そのため、画像情報を取得すべき対象物の視点が、例えば、視点１、視点２、視点３、視点４、・・・視点NのようにN個あると仮定した場合、対象物の撮影画像は、視点１からｎまでのｎ枚が作成される。
対象物の撮影画像の取得には、公知の撮影装置を用いる。
そのため、画像情報を取得すべき対象物の視点が、例えば、視点１、視点２、視点３、視点４、・・・視点NのようにN個あると仮定した場合、対象物の撮影画像は、視点１からｎまでのｎ枚が作成される。
対象物の撮影画像の取得には、公知の撮影装置を用いる。
【0036】
また、対象物の画像情報を取得する前に、対象物の画像情報から余計なノイズを除去するため、次のとおり、対象物の撮影画像をもとに、異なる複数の視点での対象物の視角境界を特定する。
【0037】
例えば、視点1から撮影して取得した撮影画像に写る対象物が、矩形である場合、対象物の撮影画像の取得後、撮影画像における矩形（対象物）の中心位置を、撮影画像から公知の画像認識手段によって特定し、矩形（対象物）の中心位置が円の中心になり、かつ、矩形（対象物）が完全に収まる最小の円を、撮影画像から公知の画像認識手段によって特定し、中心位置から当該円の円周までの距離を境界半径として算出する。
【0038】
また、視点２から撮影して取得した撮影画像に写る対象物が、三角形である場合、対象物の撮影画像の取得後、撮影画像における三角形（対象物）の中心位置を、撮影画像から公知の画像認識手段によって特定し、三角形（対象物）の中心位置が円の中心になり、かつ、三角形（対象物）が完全に収まる最小の円を、撮影画像から公知の画像認識手段によって特定し、中心位置から当該円の円周までの距離を境界半径として算出する。
【0039】
視点３以降も、視点１、視点２と同じ方法で、境界半径を算出する。
【0040】
最後に、視点１から視点Nまでの各境界半径を比較し、境界半径が最も長い視点における境界半径を最大境界半径とする。
この最大境界半径によって形成される円の円周を「視角境界」とする。
つまり、視角境界とは、異なる複数の視点から撮影されたそれぞれの撮影画像において、任意の撮影画像における対象物の中心と、その撮影画像における対象物が完全に収まる最小の円と、をつなぐ長さを「境界半径」とし、この境界半径が最も長い視点の最大境界半径によって形成される円の円周を意味する。
この最大境界半径によって形成される円の円周を「視角境界」とする。
つまり、視角境界とは、異なる複数の視点から撮影されたそれぞれの撮影画像において、任意の撮影画像における対象物の中心と、その撮影画像における対象物が完全に収まる最小の円と、をつなぐ長さを「境界半径」とし、この境界半径が最も長い視点の最大境界半径によって形成される円の円周を意味する。
【0041】
なお、視覚境界は、任意の2つ以上の視点の最大境界半径の組み合わせによってできる楕円（または楕円体）の端を視角境界とすることもできる。
【0042】
最大境界半径によって形成される視角境界には、全ての視点から撮影された撮影画像に写る対象物が完全に収まることになる。
そこで、対象物が収められている視角境界内の画像情報を、画像処理によって撮影画像から切り出すことで、対象物の第１画像情報を取得する。
このようにして、視点１からNまでの各視点から撮影された各撮影画像から、視角境界内の画像情報のみを第１画像情報として取得する。
その結果、対象物の画像情報から余計なノイズを除去できる。
そこで、対象物が収められている視角境界内の画像情報を、画像処理によって撮影画像から切り出すことで、対象物の第１画像情報を取得する。
このようにして、視点１からNまでの各視点から撮影された各撮影画像から、視角境界内の画像情報のみを第１画像情報として取得する。
その結果、対象物の画像情報から余計なノイズを除去できる。
【0043】
対象物が収められている視角境界内の画像情報を、撮影画像から切り出す画像処理は、深層学習に基づく画像分割などの公知の手段を用いて行うことができる。
具体的には、撮影画像から、対象物が収められている視角境界によって形成される領域を特定し、対象物を含まない領域を切断することで、対象物のみを含む領域の画像情報を取得する。
これを、複数の視点で撮影された撮影画像ごとに行うことで、対象物のみを含む画像情報を取得できる。
具体的には、撮影画像から、対象物が収められている視角境界によって形成される領域を特定し、対象物を含まない領域を切断することで、対象物のみを含む領域の画像情報を取得する。
これを、複数の視点で撮影された撮影画像ごとに行うことで、対象物のみを含む画像情報を取得できる。
【0044】
以上の手順により、複数の視点で撮影された撮影画像から、対象物のみを含む第１画像情報を得られ、第１画像情報に含まれる情報量を大幅に減少できる。
その結果、対象物を三次元表現するために必要な画像情報の情報量を大幅に削減でき、対象物を三次元表現する際の画像情報を読み込む情報量を少なくすることができる。
また、対象物を三次元表現する際の画像情報の読み込み時間も短縮でき、対象物の三次元表現の制御効率を向上させ、ユーザーの臨場感も向上させることができる。
その結果、対象物を三次元表現するために必要な画像情報の情報量を大幅に削減でき、対象物を三次元表現する際の画像情報を読み込む情報量を少なくすることができる。
また、対象物を三次元表現する際の画像情報の読み込み時間も短縮でき、対象物の三次元表現の制御効率を向上させ、ユーザーの臨場感も向上させることができる。
【0045】
また、取得した第１画像情報を、複数の副画像情報に分割し、必要に応じて副画像をスティッチング処理することで、対象物の三次元表現を制御する際に、分割した第１画像情報を復元することもできる。
【0046】
複数の視点で撮影された対象物の撮影画像は、全ての視点において、同じであってもよく、一部が同じであってもよく、異なっていてもよく、対象物に対するユーザーのニーズに従って設定できる。
【0047】
また、画像情報は、第２画像情報を含み、第２画像情報は、次のステップからなる三次元表現の制御方法によって得られる。
（１）撮影装置が、異なる複数の各視点における対象物との間の撮影距離を取得する。
（２）各視点の撮影距離を2以上に分割する分割点を設定し、全ての視点で、分割点でも対象物を撮影し、視点ごとに、視点及び分割点の計２以上の画像情報を取得する。
（３）視点ごとに、２以上の画像情報を合成し、対象物の第２画像情報を作成する。
（１）撮影装置が、異なる複数の各視点における対象物との間の撮影距離を取得する。
（２）各視点の撮影距離を2以上に分割する分割点を設定し、全ての視点で、分割点でも対象物を撮影し、視点ごとに、視点及び分割点の計２以上の画像情報を取得する。
（３）視点ごとに、２以上の画像情報を合成し、対象物の第２画像情報を作成する。
【0048】
対象物を撮影する撮影装置は、異なる複数の視点で撮影し、撮影画像を取得する。
その際に、それぞれの視点で、対象物と撮影装置の間の取得距離を取得する。
そして、各視点において、撮影距離を2以上に分割し、少なくとも1以上の分割点を設定する。
全ての視点において、本来の撮影箇所である各視点のほかに、分割点でも、対象物を撮影し、撮影画像を取得する。
つまり、視点ごとに、1以上の分割点で撮影された撮影画像を含む、少なくとも２以上の撮影画像を取得する。
その後、視点ごとに、少なくとも２以上の撮影画像から画像情報を取得し、２以上の画像情報を合成し、合成画像情報を作成する。
この合成画像情報を第２画像情報とする。
その際に、それぞれの視点で、対象物と撮影装置の間の取得距離を取得する。
そして、各視点において、撮影距離を2以上に分割し、少なくとも1以上の分割点を設定する。
全ての視点において、本来の撮影箇所である各視点のほかに、分割点でも、対象物を撮影し、撮影画像を取得する。
つまり、視点ごとに、1以上の分割点で撮影された撮影画像を含む、少なくとも２以上の撮影画像を取得する。
その後、視点ごとに、少なくとも２以上の撮影画像から画像情報を取得し、２以上の画像情報を合成し、合成画像情報を作成する。
この合成画像情報を第２画像情報とする。
【0049】
例えば、視点１、視点２、視点３、視点４、・・・視点Nがあると仮定する。
視点１における対象物と撮影装置の間の撮影距離を、公知の手段で取得する。
予め設定した分割数、例えば、３カットを設定すると、撮影距離を３つに分割するための分割点が２つ決まることになる。
２つの分割点のうち、分割点１で撮影された撮影画像からは画像情報１を、分割点２で撮影された撮影画像からは画像情報２を、それぞれ取得する。
分割点の設定数は、任意であり、例えば、撮影距離が長ければ、分割点を増やし、撮影距離が短ければ、分割点を減らすことができる。
このようにして、本来の撮影箇所である各視点のほかに、分割点でも画像情報を取得する。
視点１における対象物と撮影装置の間の撮影距離を、公知の手段で取得する。
予め設定した分割数、例えば、３カットを設定すると、撮影距離を３つに分割するための分割点が２つ決まることになる。
２つの分割点のうち、分割点１で撮影された撮影画像からは画像情報１を、分割点２で撮影された撮影画像からは画像情報２を、それぞれ取得する。
分割点の設定数は、任意であり、例えば、撮影距離が長ければ、分割点を増やし、撮影距離が短ければ、分割点を減らすことができる。
このようにして、本来の撮影箇所である各視点のほかに、分割点でも画像情報を取得する。
【0050】
視点ごとに、分割点の数だけ余計に取得された画像情報は、本来の撮影箇所である各視点で撮影された撮影画像をもとに取得された画像情報とともに、公知の手段で合成され、合成画像情報が作成される。
この合成画像情報が第２画像情報になる。
これにより、同じ視点から撮影された対象物の撮影画像をもとに取得された画像情報は、拡大しても縮小しても、鮮明に表現でき、対象物の素材感、サイズ等の情報を精度良く表現できる。
このように、画像の精度を向上させ、双方向に三次元表現する制御を、よりスムーズかつ迅速に行うことができるため、ユーザーの臨場感を向上させることができる。
この合成画像情報が第２画像情報になる。
これにより、同じ視点から撮影された対象物の撮影画像をもとに取得された画像情報は、拡大しても縮小しても、鮮明に表現でき、対象物の素材感、サイズ等の情報を精度良く表現できる。
このように、画像の精度を向上させ、双方向に三次元表現する制御を、よりスムーズかつ迅速に行うことができるため、ユーザーの臨場感を向上させることができる。
【0051】
対象物と撮影装置の撮影距離と、撮影距離の分割数は、全ての視点において、同じであってもよく、一部が同じであってもよく、異なっていてもよい。
また、対象物と撮影装置の撮影距離の分割数は、自由に設定でき、画像情報の情報量が多い場合には、分割数を増やしたり、画像情報の情報量が少ない場合には、分割数を減らすこともできる。
また、対象物と撮影装置の撮影距離の分割数は、自由に設定でき、画像情報の情報量が多い場合には、分割数を増やしたり、画像情報の情報量が少ない場合には、分割数を減らすこともできる。
【0052】
さらに、対象物の第１画像情報および／または第２画像情報を取得した後、対象物の第１画像情報および／または第２画像情報に対して属性番号を設定し、属性番号に従って画像情報を、属性番号に紐づくように予め設定された表示位置に保存する。
属性番号は、画像情報を取得した時の視点情報（視点１、視点２、視点３、視点４、・・・視点N）、方向情報（U方向、V方向など。または、視角境界の円周によって形成される球体（または楕円体）の緯度、経度。）、時間情報などで、各視点において取得する画像情報に関連する情報として、P-U-V-Wなどを設定することもでき、入れ子形式のP（W（U（V）））や、1-30-45-5、0001、a＆b＆c＊dなどでもよい。
属性番号の具体的な設定のルールは、現時点での視点及び／または方向の画像情報を表現できるものであれば限定されない。
属性番号は、画像情報を取得した時の視点情報（視点１、視点２、視点３、視点４、・・・視点N）、方向情報（U方向、V方向など。または、視角境界の円周によって形成される球体（または楕円体）の緯度、経度。）、時間情報などで、各視点において取得する画像情報に関連する情報として、P-U-V-Wなどを設定することもでき、入れ子形式のP（W（U（V）））や、1-30-45-5、0001、a＆b＆c＊dなどでもよい。
属性番号の具体的な設定のルールは、現時点での視点及び／または方向の画像情報を表現できるものであれば限定されない。
【0053】
対象物の第１画像情報および／または第２画像情報は、設定された属性番号に従って、データベースまたはメモリの所定の場所に格納される。
例えば、属性番号をインデックス、画像情報をコンテンツとするリレーショナルデータベース（例えばMYSQL）のテーブルや、属性番号をキー、画像情報を値とするキーと値をペアにしたデータ、属性番号P（W（U（V）））の入れ子形式に対応する画像情報などを、メモリ（例えば、非リレーショナルデータベース Redis）やファイルシステム（ハードディスク、ディスクなど）に格納できる。
これにより、属性番号に従って対応するデータを迅速に見つけることが容易になる。
例えば、属性番号をインデックス、画像情報をコンテンツとするリレーショナルデータベース（例えばMYSQL）のテーブルや、属性番号をキー、画像情報を値とするキーと値をペアにしたデータ、属性番号P（W（U（V）））の入れ子形式に対応する画像情報などを、メモリ（例えば、非リレーショナルデータベース Redis）やファイルシステム（ハードディスク、ディスクなど）に格納できる。
これにより、属性番号に従って対応するデータを迅速に見つけることが容易になる。
【0054】
また、例えば、フォルダパスP1／W1／U1／V1、P1／W2／U1／V2が、W1、W2の下のP1に格納できる時間の二つの異なる方向（または同じ方向）の2つの異なる方向でW2を表示することができる。
【0055】
さらに、複数の方位制御パラメータの組み合わせに基づいて対象物の画像情報を取得し、特定の方位制御パラメータと画像情報に基づいて、対象物を三次元的に表現することもできる。
具体的には、以下のステップを実行する。
具体的には、以下のステップを実行する。
【0056】
（１）第１方位制御パラメータ、第２方位制御パラメータ、および／または、視点制御パラメータ、並びに、時間制御パラメータに基づいて、属性番号を取得する。
（２）属性番号に基づいて、対象物の画像情報を、属性番号に紐づくように予め設定された表示位置から取得する。
（３）第１方位制御パラメータ、第２方位制御パラメータ、視点制御パラメータ、および／または時間制御パラメータに基づいて、座標系を確立する。
（４）座標系において、画像情報を用いて対象物の三次元表現を行う。
（２）属性番号に基づいて、対象物の画像情報を、属性番号に紐づくように予め設定された表示位置から取得する。
（３）第１方位制御パラメータ、第２方位制御パラメータ、視点制御パラメータ、および／または時間制御パラメータに基づいて、座標系を確立する。
（４）座標系において、画像情報を用いて対象物の三次元表現を行う。
【0057】
ユーザーによって入力された制御指示における第１方位制御パラメータ（UまたはV）および／または第２方位制御パラメータ（VまたはU）および／または視点制御パラメータ（P）及び時間制御パラメータ（W）に基づいて、特定のP-U-V-W属性番号を形成する。
この属性番号に従って、属性番号に紐づくように予め設定された表示位置から該当する画像情報を取得する。
この属性番号に従って、属性番号に紐づくように予め設定された表示位置から該当する画像情報を取得する。
【0058】
通常は、対象物の重心（上面や下面など他の場所でもよい）を座標原点として、図３のようなU-V-W座標系を確立し、この座標系にU-V-W属性番号に従って得られた画像情報をロードして、対象物を静的または動的に表現するので、ユーザーは必要に応じて多方向から静的または動的に観察しやすくなっている。
そして、この座標系に、対象物や対象物の変化を読み込ませて、対象物を静的または動的に表現することで、ユーザーは必要に応じて対象物自体や対象物の変化を多方向から観察しやすくなる。
そして、この座標系に、対象物や対象物の変化を読み込ませて、対象物を静的または動的に表現することで、ユーザーは必要に応じて対象物自体や対象物の変化を多方向から観察しやすくなる。
【0059】
また、図４に示すように、対象物に対し、任意の視点Pを座標原点として、U-V-W-Pの座標系を構築することもできる。
視点Pは、対象物の表面上の点や、視角境界によって形成される球体上の点にすることもできる。
次に、この座標系にU-V-W-Pの属性番号に従って得られた画像情報をロードすることで、対象物を静止画または動画として三次元に表現される。
視点Pは、対象物の表面上の点や、視角境界によって形成される球体上の点にすることもできる。
次に、この座標系にU-V-W-Pの属性番号に従って得られた画像情報をロードすることで、対象物を静止画または動画として三次元に表現される。
【0060】
視点制御パラメータPと、第１方位制御パラメータU、第２方位制御パラメータV、時間制御パラメータWとの任意の組み合わせにより、任意の視点において取得した高精度な画像情報に基づいて、第１方向（UまたはV）および／または第２方向（VまたはU）の対象物の移動及び表現を、任意の時点または一定期間にわたって、制御できるので、ユーザーは、より容易に、任意の視点から、静的または動的に、全方位的かつ高精度に対象物を観察し、対象物を双方向に制御することができ、これにより、対象物を双方向に制御するユーザーの満足度を高めることができる。
【0061】
以上の実施方法におけるプロセスの全てまたは一部を実現することは、関連するハードウェアに指示するコンピュータプログラムによって可能であり、このプログラムは、コンピュータ装置が読み取り可能な記録媒体に格納することができ、このプログラムを実行することで、上記した実施形態のプロセスを実現できる。
【0062】
また、各フロー図におけるステップは、矢印によって順序が示されているが、必ずしも矢印によって示される順序どおりに実行されなくてもよい。
本明細書に明示的に記載されていない限り、これらのステップが実行される厳密な順序はなく、他の順序で実行することができる。
本明細書に明示的に記載されていない限り、これらのステップが実行される厳密な順序はなく、他の順序で実行することができる。
【0063】
さらに、各フロー図におけるステップの少なくとも一部は、必ずしも同じ瞬間に実行されるとは限らず、異なる瞬間に実行されてもよく、複数のサブステップまたは複数のステージから構成され、それらの実行順序は必ずしも順次ではなく、他のステップまたは他のステップのサブステップまたはステージの少なくとも一部と交互または代替的に実行することもできる。
【0064】
図5は、図2及び上記した三次元表現の制御方法を実現する、対象物の双方向な三次元表現のための制御装置500の構成を示したものである。
制御装置500は、図2及び上記した三次元表現の制御方法の実施手順にしたがい、対象物の双方向な三次元表現のための制御装置であり、具体的には、種々の端末装置に実装できる。
端末装置は、携帯電話端末101、タブレット端末102、コンピュータ端末103などである。
制御装置500は、図2及び上記した三次元表現の制御方法の実施手順にしたがい、対象物の双方向な三次元表現のための制御装置であり、具体的には、種々の端末装置に実装できる。
端末装置は、携帯電話端末101、タブレット端末102、コンピュータ端末103などである。
【0065】
図5に示すように、制御装置500は、対象物の制御指示（複数の方位制御パラメータと視点制御パラメータを含む。）を取得するための第１取得モジュール501と、三次元表現の制御方法にかかる複数の方位制御パラメータの組み合わせに基づいて対象物の画像情報を取得する第２取得モジュール502と、複数の方位制御パラメータと画像情報に基づいて対象物を双方向に三次元表現する三次元表現モジュール503と、を備える。
【0066】
図6は、図2に示した方法の実施形態として、対象物の双方向な三次元表現のためのコンピュータ装置6の構成要素を示したものであり、コンピュータ装置6は、通信可能に接続されたメモリ61、プロセッサ62、ネットワークインターフェース63、を備える。
なお、図６は、これらの構成要素61～63を有するコンピュータ装置６のみが図示されているが、図示されたすべての構成要素を実装する必要はなく、より多くの、またはより少ない構成要素を代わりに実装することができる。
なお、図６は、これらの構成要素61～63を有するコンピュータ装置６のみが図示されているが、図示されたすべての構成要素を実装する必要はなく、より多くの、またはより少ない構成要素を代わりに実装することができる。
【0067】
コンピュータ装置6は、予め設定された、または記憶された命令に従って数値計算および／または情報処理を自動的に行うことができる装置であり、マイクロプロセッサ、特定用途向け集積回路（ASIC）、プログラマブルを含むが、これらに限定されないハードウェアを有し、FPGA（Field-Programmable GateArray）、DSP（Digital Signal Processor）、組み込みデバイスなどを有する。
【0068】
コンピュータ装置6は、デスクトップコンピュータ、ラップトップ、ハンドヘルドコンピュータ及びクラウドサーバーのような装置である。
コンピュータ装置6は、キーボード、マウス、リモートコントロール、タッチパッドまたは音声起動デバイスによって、ユーザーの指示を受けることができる。
コンピュータ装置6は、キーボード、マウス、リモートコントロール、タッチパッドまたは音声起動デバイスによって、ユーザーの指示を受けることができる。
【0069】
メモリ61は、少なくとも1種類の読み取り可能な記憶媒体からなり、読み取り可能な記憶媒体は、フラッシュメモリ、ハードディスク、マルチメディアカード、カード型メモリ（例えば、SDまたはDXメモリなど）、ランダムアクセスメモリ（RAM）、静的ランダムアクセスメモリ（SRAM）、読み取り専用メモリ（ROM）、電気的消去可能プログラム可能読み取り専用メモリ（EEPROM）、プログラム可能読み取り専用メモリ（Programmable Read-only リードオンリーメモリ（PROM）、磁気メモリ、ディスク、CD-ROMなどである。
【0070】
メモリ61は、ハードディスクまたはメモリなどのコンピュータ装置6の内部記憶装置であってもよいし、コンピュータ装置6に装備されたプラグインハードディスク、スマートメディアカード（SMC）、セキュアデジタル（SD）カード、フラッシュカードなどのコンピュータ装置6の外部記憶装置であってもよい。
また、メモリ61は、コンピュータ装置6の内部記憶装置と外部記憶装置の両方を構成することもできる。
また、メモリ61は、コンピュータ装置6の内部記憶装置と外部記憶装置の両方を構成することもできる。
【0071】
メモリ61は、コンピュータ装置6にインストールされているオペレーティングシステムや、対象物の双方向な三次元表現の制御方法のプログラムコード等の各種アプリケーションソフトウェアを格納するために用いられる。
また、メモリ61は、出力された、あるいは出力される予定の各種データを一時的に記憶するために使用することもできる。
また、メモリ61は、出力された、あるいは出力される予定の各種データを一時的に記憶するために使用することもできる。
【0072】
プロセッサ62は、コンピュータ装置6の全体的な動作を制御するために使用されるものであり、例えば、中央処理装置（CPU）、コントローラ、マイクロコントローラ、マイクロプロセッサ、または他のデータ処理チップである。
プロセッサ62は、メモリ61に格納されたプログラムコードを実行するため、またはデータを処理するため、例えば、対象物の双方向な三次元表現のための制御方法のためのプログラムコードを実行するために使用される。
プロセッサ62は、メモリ61に格納されたプログラムコードを実行するため、またはデータを処理するため、例えば、対象物の双方向な三次元表現のための制御方法のためのプログラムコードを実行するために使用される。
【0073】
ネットワークインターフェース63は、コンピュータ装置6と他の端末装置との間の通信接続を確立するために使用されるものであり、無線ネットワークインターフェースまたは有線ネットワークインターフェースで構成することができる。
【0074】
コンピュータ装置が読み取り可能な記録媒体は、対象物の双方向な三次元表現のための制御プログラムを記録し、当該制御プログラムは、少なくとも一つのプロセッサによって実行可能である。
また、ソフトウェアに加えて必要なハードウェアプラットフォームを用いることができる。
本発明にかかる方法または装置は、ソフトウェア製品の形態で具現化することができ、ソフトウェアは、記憶媒体（例えば、ROM／RAM、ディスク、CD-ROM、DVD-ROMなど）に格納され、端末装置（例えば、携帯電話、コンピュータ、サーバー、エアコン、ネットワーク装置など）は、上記した実施例を実行する。
また、ソフトウェアに加えて必要なハードウェアプラットフォームを用いることができる。
本発明にかかる方法または装置は、ソフトウェア製品の形態で具現化することができ、ソフトウェアは、記憶媒体（例えば、ROM／RAM、ディスク、CD-ROM、DVD-ROMなど）に格納され、端末装置（例えば、携帯電話、コンピュータ、サーバー、エアコン、ネットワーク装置など）は、上記した実施例を実行する。
【符号の説明】
【0075】
100 システム構成図
101 携帯電話端末
102 タブレット端末
103 コンピュータ端末
104 ネットワーク
105 サーバー
501 第１取得モジュール
502 第２取得モジュール
503 三次元表現モジュール
6 コンピュータ装置
61 メモリ
62 プロセッサ
63 ネットワークインターフェース
101 携帯電話端末
102 タブレット端末
103 コンピュータ端末
104 ネットワーク
105 サーバー
501 第１取得モジュール
502 第２取得モジュール
503 三次元表現モジュール
6 コンピュータ装置
61 メモリ
62 プロセッサ
63 ネットワークインターフェース
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【手続補正書】
【提出日】2023-06-30
【手続補正1】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項1】
対象物の制御指示を取得するステップS１と、
複数の方位制御パラメータの組み合わせに基づいて、対象物の画像情報を取得するステップS２と、
方位制御パラメータと画像情報に基づいて、対象物の双方向な表現を実現するステップS３と、
を実行する対象物の双方向な三次元表現の制御方法において、
ステップS１の制御指示には、複数の方位制御パラメータ及び視点制御パラメータが含まれ、
ステップS２の複数の方位制御パラメータには、第１方位制御パラメータ、第２方位制御パラメータ及び時間制御パラメータが含まれ、
ステップS２の画像情報には、第１画像情報及び第２画像情報が含まれており、
ステップS２は、
当該第１画像情報を取得するため、
異なる複数の視点から、対象物の視角境界を特定するステップと、
当該視角境界内の対象物の画像情報を特定するステップと、
当該画像情報を、画像処理によって撮影画像から切り出すことで、対象物の全ての視点における第１画像情報を取得するステップと、
当該第２画像情報を取得するため、
撮影装置が、異なる複数の各視点における対象物との間の撮影距離を取得するステップと、
各視点の撮影距離を2以上に分割する分割点を設定し、全ての視点で、分割点でも対象物を撮影し、視点ごとに、視点及び分割点の計２以上の画像情報を取得するステップと、
視点ごとに、２以上の画像情報を合成し、対象物の第２画像情報を作成するステップと、
を実行することを特徴とする対象物の双方向な三次元表現の制御方法。
複数の方位制御パラメータの組み合わせに基づいて、対象物の画像情報を取得するステップS２と、
方位制御パラメータと画像情報に基づいて、対象物の双方向な表現を実現するステップS３と、
を実行する対象物の双方向な三次元表現の制御方法において、
ステップS１の制御指示には、複数の方位制御パラメータ及び視点制御パラメータが含まれ、
ステップS２の複数の方位制御パラメータには、第１方位制御パラメータ、第２方位制御パラメータ及び時間制御パラメータが含まれ、
ステップS２の画像情報には、第１画像情報及び第２画像情報が含まれており、
ステップS２は、
当該第１画像情報を取得するため、
異なる複数の視点から、対象物の視角境界を特定するステップと、
当該視角境界内の対象物の画像情報を特定するステップと、
当該画像情報を、画像処理によって撮影画像から切り出すことで、対象物の全ての視点における第１画像情報を取得するステップと、
当該第２画像情報を取得するため、
撮影装置が、異なる複数の各視点における対象物との間の撮影距離を取得するステップと、
各視点の撮影距離を2以上に分割する分割点を設定し、全ての視点で、分割点でも対象物を撮影し、視点ごとに、視点及び分割点の計２以上の画像情報を取得するステップと、
視点ごとに、２以上の画像情報を合成し、対象物の第２画像情報を作成するステップと、
を実行することを特徴とする対象物の双方向な三次元表現の制御方法。
【請求項2】
前記の対象物の第２画像情報を取得するステップの後、
対象物の第１画像情報および／または第２画像情報に対して属性番号を設定し、属性番号に従って画像情報を、属性番号に紐づくように予め設定された表示位置に保存する。
ことを特徴とする請求項１記載の対象物の双方向な三次元表現の制御方法。
対象物の第１画像情報および／または第２画像情報に対して属性番号を設定し、属性番号に従って画像情報を、属性番号に紐づくように予め設定された表示位置に保存する。
ことを特徴とする請求項１記載の対象物の双方向な三次元表現の制御方法。
【請求項3】
第１方位制御パラメータ、第２方位制御パラメータ、および／または、視点制御パラメータ、並びに、時間制御パラメータに基づいて、属性番号を取得するステップと、
属性番号に基づいて、対象物の画像情報を、属性番号に紐づくように予め設定された表示位置から取得するステップと、
を実行することを特徴とする請求項２記載の対象物の双方向な三次元表現の制御方法。
属性番号に基づいて、対象物の画像情報を、属性番号に紐づくように予め設定された表示位置から取得するステップと、
を実行することを特徴とする請求項２記載の対象物の双方向な三次元表現の制御方法。
【請求項4】
第１方位制御パラメータ、第２方位制御パラメータ、視点制御パラメータ、および／または時間制御パラメータに基づいて、座標系を確立するステップと、
座標系において、画像情報を用いて対象物の三次元表現を行うステップと、
を実行することを特徴とする請求項３記載の対象物の双方向な三次元表現の制御方法。
座標系において、画像情報を用いて対象物の三次元表現を行うステップと、
を実行することを特徴とする請求項３記載の対象物の双方向な三次元表現の制御方法。
【請求項5】
対象物の制御指示を取得するための第１取得モジュールと、
複数の方位制御パラメータの組み合わせに基づいて対象物の画像情報を取得する第２取得モジュールと、
複数の方位制御パラメータと画像情報に基づいて対象物の双方向に三次元表現する三次元表現モジュール、
を含む、対象物の双方向な三次元表現のための制御装置であって、
第１取得モジュールの制御指示には、複数の方位制御パラメータ及び視点制御パラメータが含まれ、
第２取得モジュールの複数の方位制御パラメータには、第１方位制御パラメータ、第２方位制御パラメータ及び時間制御パラメータが含まれ、
第２取得モジュールの画像情報には、第１画像情報及び第２画像情報が含まれており、
第２取得モジュールは、
当該第１画像情報を取得するため、
異なる複数の視点から、対象物の視角境界を特定し、
当該視角境界内の対象物の画像情報を特定し、
当該画像情報を、画像処理によって撮影画像から切り出すことで、対象物の全ての視点の第１画像情報を取得し、
当該第２画像情報を取得するため、
撮影装置が、異なる複数の各視点における対象物との間の撮影距離を取得し、
各視点の撮影距離を2以上に分割する分割点を設定し、全ての視点で、分割点でも対象物を撮影し、視点ごとに、視点及び分割点の計２以上の画像情報を取得し、
視点ごとに、２以上の画像情報を合成し、対象物の第２画像情報を作成する
ことを特徴とする対象物の双方向な三次元表現のための制御装置。
複数の方位制御パラメータの組み合わせに基づいて対象物の画像情報を取得する第２取得モジュールと、
複数の方位制御パラメータと画像情報に基づいて対象物の双方向に三次元表現する三次元表現モジュール、
を含む、対象物の双方向な三次元表現のための制御装置であって、
第１取得モジュールの制御指示には、複数の方位制御パラメータ及び視点制御パラメータが含まれ、
第２取得モジュールの複数の方位制御パラメータには、第１方位制御パラメータ、第２方位制御パラメータ及び時間制御パラメータが含まれ、
第２取得モジュールの画像情報には、第１画像情報及び第２画像情報が含まれており、
第２取得モジュールは、
当該第１画像情報を取得するため、
異なる複数の視点から、対象物の視角境界を特定し、
当該視角境界内の対象物の画像情報を特定し、
当該画像情報を、画像処理によって撮影画像から切り出すことで、対象物の全ての視点の第１画像情報を取得し、
当該第２画像情報を取得するため、
撮影装置が、異なる複数の各視点における対象物との間の撮影距離を取得し、
各視点の撮影距離を2以上に分割する分割点を設定し、全ての視点で、分割点でも対象物を撮影し、視点ごとに、視点及び分割点の計２以上の画像情報を取得し、
視点ごとに、２以上の画像情報を合成し、対象物の第２画像情報を作成する
ことを特徴とする対象物の双方向な三次元表現のための制御装置。
【請求項6】
プロセッサで実行可能なコンピュータプログラムが格納されたメモリと、
当該コンピュータプログラムを実行するプロセッサと、
他の端末装置との間の通信接続を確立するネットワークインターフェースと、
を備え、
当該プロセッサが当該コンピュータプログラムを実行することにより、
請求項1から４のいずれかに記載された対象物の双方向な三次元表現の制御方法を実行することを特徴とするコンピュータ装置。
当該コンピュータプログラムを実行するプロセッサと、
他の端末装置との間の通信接続を確立するネットワークインターフェースと、
を備え、
当該プロセッサが当該コンピュータプログラムを実行することにより、
請求項1から４のいずれかに記載された対象物の双方向な三次元表現の制御方法を実行することを特徴とするコンピュータ装置。
【請求項7】
コンピュータプログラムが記録され、
コンピュータプログラムが実行されることで、
請求項1から４のいずれかに記載された対象物の双方向な三次元表現の制御方法を実行することを特徴とするコンピュータ装置が読み取り可能な記録媒体。
コンピュータプログラムが実行されることで、
請求項1から４のいずれかに記載された対象物の双方向な三次元表現の制御方法を実行することを特徴とするコンピュータ装置が読み取り可能な記録媒体。
【手続補正2】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【0008】
本発明にかかる対象物の三次元表現の制御方法は、
対象物の制御指示を取得するステップS１と、
複数の方位制御パラメータの組み合わせに基づいて、対象物の画像情報を取得するステップS２と、
方位制御パラメータと画像情報に基づいて、対象物の双方向な表現を実現するステップS３と、
を実行する対象物の双方向な三次元表現の制御方法において、
ステップS１の制御指示には、複数の方位制御パラメータ及び視点制御パラメータが含まれ、
ステップS２の複数の方位制御パラメータには、第１方位制御パラメータ、第２方位制御パラメータ及び時間制御パラメータが含まれ、
ステップS２の画像情報には、第１画像情報及び第２画像情報が含まれており、
ステップS２は、
当該第１画像情報を取得するため、
異なる複数の視点から、対象物の視角境界を特定するステップと、
当該視角境界内の対象物の画像情報を特定するステップと、
当該画像情報を、画像処理によって撮影画像から切り出すことで、対象物の全ての視点における第１画像情報を取得するステップと、
当該第２画像情報を取得するため、
撮影装置が、異なる複数の各視点における対象物との間の撮影距離を取得するステップと、
各視点の撮影距離を2以上に分割する分割点を設定し、全ての視点で、分割点でも対象物を撮影し、視点ごとに、視点及び分割点の計２以上の画像情報を取得するステップと、
視点ごとに、２以上の画像情報を合成し、対象物の第２画像情報を作成するステップと、
を実行することを特徴とする。
対象物の制御指示を取得するステップS１と、
複数の方位制御パラメータの組み合わせに基づいて、対象物の画像情報を取得するステップS２と、
方位制御パラメータと画像情報に基づいて、対象物の双方向な表現を実現するステップS３と、
を実行する対象物の双方向な三次元表現の制御方法において、
ステップS１の制御指示には、複数の方位制御パラメータ及び視点制御パラメータが含まれ、
ステップS２の複数の方位制御パラメータには、第１方位制御パラメータ、第２方位制御パラメータ及び時間制御パラメータが含まれ、
ステップS２の画像情報には、第１画像情報及び第２画像情報が含まれており、
ステップS２は、
当該第１画像情報を取得するため、
異なる複数の視点から、対象物の視角境界を特定するステップと、
当該視角境界内の対象物の画像情報を特定するステップと、
当該画像情報を、画像処理によって撮影画像から切り出すことで、対象物の全ての視点における第１画像情報を取得するステップと、
当該第２画像情報を取得するため、
撮影装置が、異なる複数の各視点における対象物との間の撮影距離を取得するステップと、
各視点の撮影距離を2以上に分割する分割点を設定し、全ての視点で、分割点でも対象物を撮影し、視点ごとに、視点及び分割点の計２以上の画像情報を取得するステップと、
視点ごとに、２以上の画像情報を合成し、対象物の第２画像情報を作成するステップと、
を実行することを特徴とする。
【手続補正3】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】削除
【補正の内容】
【手続補正4】
【補正対象書類名】明細書
【補正対象項目名】００１３
【補正方法】変更
【補正の内容】
【0013】
本発明にかかる対象物の三次元表現の制御装置は、
対象物の制御指示を取得するための第１取得モジュールと、
複数の方位制御パラメータの組み合わせに基づいて対象物の画像情報を取得する第２取得モジュールと、
複数の方位制御パラメータと画像情報に基づいて対象物の双方向に三次元表現する三次元表現モジュール、
を含む、対象物の双方向な三次元表現のための制御装置であって、
第１取得モジュールの制御指示には、複数の方位制御パラメータ及び視点制御パラメータが含まれ、
第２取得モジュールの複数の方位制御パラメータには、第１方位制御パラメータ、第２方位制御パラメータ及び時間制御パラメータが含まれ、
第２取得モジュールの画像情報には、第１画像情報及び第２画像情報が含まれており、
第２取得モジュールは、
当該第１画像情報を取得するため、
異なる複数の視点から、対象物の視角境界を特定し、
当該視角境界内の対象物の画像情報を特定し、
当該画像情報を、画像処理によって撮影画像から切り出すことで、対象物の全ての視点の第１画像情報を取得し、
当該第２画像情報を取得するため、
撮影装置が、異なる複数の各視点における対象物との間の撮影距離を取得し、
各視点の撮影距離を2以上に分割する分割点を設定し、全ての視点で、分割点でも対象物を撮影し、視点ごとに、視点及び分割点の計２以上の画像情報を取得し、
視点ごとに、２以上の画像情報を合成し、対象物の第２画像情報を作成する
を実行することを特徴とする。
対象物の制御指示を取得するための第１取得モジュールと、
複数の方位制御パラメータの組み合わせに基づいて対象物の画像情報を取得する第２取得モジュールと、
複数の方位制御パラメータと画像情報に基づいて対象物の双方向に三次元表現する三次元表現モジュール、
を含む、対象物の双方向な三次元表現のための制御装置であって、
第１取得モジュールの制御指示には、複数の方位制御パラメータ及び視点制御パラメータが含まれ、
第２取得モジュールの複数の方位制御パラメータには、第１方位制御パラメータ、第２方位制御パラメータ及び時間制御パラメータが含まれ、
第２取得モジュールの画像情報には、第１画像情報及び第２画像情報が含まれており、
第２取得モジュールは、
当該第１画像情報を取得するため、
異なる複数の視点から、対象物の視角境界を特定し、
当該視角境界内の対象物の画像情報を特定し、
当該画像情報を、画像処理によって撮影画像から切り出すことで、対象物の全ての視点の第１画像情報を取得し、
当該第２画像情報を取得するため、
撮影装置が、異なる複数の各視点における対象物との間の撮影距離を取得し、
各視点の撮影距離を2以上に分割する分割点を設定し、全ての視点で、分割点でも対象物を撮影し、視点ごとに、視点及び分割点の計２以上の画像情報を取得し、
視点ごとに、２以上の画像情報を合成し、対象物の第２画像情報を作成する
を実行することを特徴とする。
【手続補正5】
【補正対象書類名】明細書
【補正対象項目名】００１４
【補正方法】変更
【補正の内容】
【0014】
本発明にかかる対象物の三次元表現を制御するコンピュータ装置は、
プロセッサで実行可能なコンピュータプログラムが格納されたメモリと、
当該コンピュータプログラムを実行するプロセッサと、
他の端末装置との間の通信接続を確立するネットワークインターフェースと、
を備え、
当該プロセッサが当該コンピュータプログラムを実行することにより、
対象物の双方向な三次元表現の制御方法を実行することを特徴とする。
プロセッサで実行可能なコンピュータプログラムが格納されたメモリと、
当該コンピュータプログラムを実行するプロセッサと、
他の端末装置との間の通信接続を確立するネットワークインターフェースと、
を備え、
当該プロセッサが当該コンピュータプログラムを実行することにより、
対象物の双方向な三次元表現の制御方法を実行することを特徴とする。
【手続補正6】
【補正対象書類名】明細書
【補正対象項目名】００１５
【補正方法】変更
【補正の内容】
【0015】
本発明にかかる対象物の三次元表現を制御するプログラムが記録されたコンピュータ装置が読み取り可能な記録媒体は、
コンピュータプログラムが記録され、
コンピュータプログラムが実行されることで、
前記の対象物の双方向な三次元表現の制御方法を実行すること
を実行することを特徴とする。
コンピュータプログラムが記録され、
コンピュータプログラムが実行されることで、
前記の対象物の双方向な三次元表現の制御方法を実行すること
を実行することを特徴とする。