特開 2022-118068 ３Ｄツアー付加情報表示システム及び方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2022118068

(43)【公開日】2022-08-12

(54)【発明の名称】３Ｄツアー付加情報表示システム及び方法

(51)【国際特許分類】

   G06T 19/00 20110101AFI20220804BHJP

   G06F 3/04815 20220101ALI20220804BHJP

   G06F 3/04817 20220101ALI20220804BHJP

【ＦＩ】

G06T19/00 A

G06F3/04815

G06F3/04817

【審査請求】未請求

【請求項の数】10

【出願形態】ＯＬ

(21)【出願番号】P 2022093226

(22)【出願日】2022-06-08

(62)【分割の表示】P 2020181720の分割

【原出願日】2020-10-29

(31)【優先権主張番号】10-2019-0135429

(32)【優先日】2019-10-29

(33)【優先権主張国・地域又は機関】KR

(31)【優先権主張番号】10-2019-0135475

(32)【優先日】2019-10-29

(33)【優先権主張国・地域又は機関】KR

(71)【出願人】

【識別番号】519263110

【氏名又は名称】３アイ インコーポレイテッド

(74)【代理人】

【識別番号】100079049

【弁理士】

【氏名又は名称】中島 淳

(74)【代理人】

【識別番号】100084995

【弁理士】

【氏名又は名称】加藤 和詳

(72)【発明者】

【氏名】ケン キム

(72)【発明者】

【氏名】チ ウク チュン

(57)【要約】

【課題】本発明は、３Ｄツアー付加情報表示システム及び方法に関する技術である。
【解決手段】このとき、上記３Ｄツアー付加情報表示方法は、ユーザー端末と連携された３Ｄツアーサービス提供サーバで実行され、上記ユーザー端末に、特定空間の３Ｄ情報を含む３Ｄツアーを提供する段階、上記ユーザー端末に表示された上記３Ｄツアー上に新たに作成される付加情報標柱の始点及び終点に対する座標情報を受信する段階、上記始点及び上記終点を連結する付加情報標柱を作成する段階、及び作成された上記付加情報標柱を上記３Ｄツアー上にオーバーラップして表示する段階を含む。
【選択図】図２

【特許請求の範囲】

【請求項1】

ユーザー端末と連携された３Ｄツアー管理サーバで行われる３Ｄツアー付加情報表示方法において、
前記ユーザー端末に、特定空間に対する平面図及び３Ｄツアー撮影インタフェースを同時に表示する段階と、前記ユーザー端末から前記特定空間に対する３Ｄツアーの撮影画像を受信する段階と、
前記３Ｄツアーの撮影過程で、前記ユーザー端末を介して付加情報の入力を受ける段階と、
前記３Ｄツアーと入力された前記付加情報を合成する段階と、及び
前記３Ｄツアー又は前記平面図上に前記付加情報を表示する段階を含む、
３Ｄツアー付加情報表示方法。

【請求項2】

前記３Ｄツアーと入力された前記付加情報を合成する段階は、
前記３Ｄツアーの撮影画像の変化をもとに、前記平面図上に追加される前記付加情報の位置座標を抽出する段階と、
前記入力された付加情報を前記抽出された位置座標にマッピングさせる段階を含む、
請求項１に記載の３Ｄツアー付加情報表示方法。

【請求項3】

前記付加情報の位置を抽出する段階は、
前記３Ｄツアーの撮影画像上で、複数個の特徴点を抽出する段階と、
前記撮影画像の変化による前記特徴点の移動方向及び距離を算出し、これをもとに前記付加情報の位置座標を抽出する段階を含む
請求項２に記載の３Ｄツアー付加情報表示方法。

【請求項4】

前記抽出された付加情報の位置座標は２次元座標で構成され、
前記付加情報を前記抽出された位置座標にマッピングさせる段階は、
前記抽出された付加情報の位置座標を前記３Ｄツアー上の３次元座標に変換する段階と、
前記２次元座標を用いて前記平面図上に前記付加情報をマッピングさせ、前記３次元座標を用いて前記３Ｄツアー上に前記付加情報をマッピングさせる段階を含む、
請求項２に記載の３Ｄツアー付加情報表示方法。

【請求項5】

前記付加情報の入力を受ける段階は、
３Ｄ撮影のうち前記平面図上で前記付加情報を挿入する特定位置の入力を受ける段階と、
付加情報挿入インタフェースを介して前記特定位置に挿入される付加情報の入力を受ける段階を含む、
請求項１に記載の３Ｄツアー付加情報表示方法。

【請求項6】

前記ユーザー端末の画面の一側には、前記３Ｄツアーの撮影過程が表示され、
前記ユーザー端末の画面の他側には、前記平面図が表示され、
前記特定位置の入力を受ける段階は、前記平面図上で、ユーザーが選択した位置情報を受信することを含む、
請求項５に記載の３Ｄツアー付加情報表示方法。

【請求項7】

前記付加情報挿入インタフェースは、
メモ、写真、動画、及びインターネットリンクのいずれかの情報種類を選択して、当該情報種類に対応する付加情報の入力を受ける、
請求項５に記載の３Ｄツアー付加情報表示方法。

【請求項8】

前記付加情報を表示する段階は、
前記平面図上の付加情報の挿入位置に付加情報アイコンを表示する段階と、
前記３Ｄツアー上に前記付加情報アイコンに対応する３Ｄ付加情報標柱を表示する段階を含む、
請求項１に記載の３Ｄツアー付加情報表示方法。

【請求項9】

前記３Ｄ付加情報標柱は、
前記３Ｄツアーの床面または壁面上に位置する始点と、
前記付加情報アイコンの位置に対応する終点と、
前記始点と前記終点を連結するボディ部で構成される、
請求項８に記載の３Ｄツアー付加情報表示方法。

【請求項10】

プロセッサと、及び
前記プロセッサによって実行されるプログラムが格納されるメモリを含み、
前記プログラムは、
ユーザー端末に、特定空間に対する平面図及び３Ｄツアー撮影インタフェースを同時に表示するオペレーションと、
前記ユーザー端末から前記特定空間に対する３Ｄツアーを撮影した画像を受信するオペレーションと、
前記３Ｄツアーの撮影過程で、前記ユーザー端末を介して付加情報の入力を受けるオペレーションと、
前記３Ｄツアーと入力された前記付加情報を合成するオペレーションと、
前記３Ｄツアー又は前記平面図上に前記付加情報を表示するオペレーションを含む、
３Ｄツアー付加情報表示システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、３Ｄツアー付加情報表示システム及び方法｛Ｓｙｓｔｅｍ ａｎｄ ｍｅｔｈｏｄ ｆｏｒ ｄｉｓｐｌａｙｉｎｇ ａｄｄｉｔｉｏｎａｌ ｉｎｆｏｒｍａｔｉｏｎ ｏｎ ３ｄ ｔｏｕｒ｝に関するものである。具体的には、本発明は、３次元に構成された３６０度３Ｄツアー付加情報を３Ｄの形態で表現することができるインタフェースを提供するためのシステム及び方法に関するものである。また、本発明は、２Ｄ及び３Ｄの画面を連動して付加情報をタグ付け（ｔａｇｇｉｎｇ）及び表示することができるインタフェースを提供するシステム及び方法に関するものである。

【背景技術】

【0002】

３Ｄ空間を記録するための最も良い方法は、特定地点に対する３６０度全方位を撮影してパノラマ画像として保存し、複数の地点に対するパノラマ画像を結合して一つの３Ｄツアーの形で作る方法である。

【0003】

ここで、３Ｄツアーは複数の地点でそれぞれ３６０度を撮影し、保存されたパノラマ画像（例えば， ３６０度画像）の組み合わせで構成されることができる。このとき、３Ｄツアーはそれぞれの画像が撮影された位置情報を含むことができ、それぞれの位置情報は平面図上にマッピングされてユーザーに提供されることができる。

【0004】

このとき、３Ｄツアーを利用するユーザーには、３Ｄツアーにメモや画像、ビデオなどの付加的な情報を入れて表現しようとするニーズが存在する。

【0005】

ただし、従来の付加情報を表示するインタフェースは、ユーザーが記録したメモや画像などの付加情報を平面図上に２Ｄで表示する機能だけを提供した。このとき、付加情報は平面図上だけに表示されるため、ユーザーはメモしようとする特定の位置に対する付加情報を３Ｄツアーの空間上で明確に示すことが難しい問題があった。

【0006】

また、位置が明確に表現されていないことから、追加された付加情報の意味を他の人が明確に把握することが難しい問題もあった。

【0007】

また、従来の付加情報表示インタフェースの場合、記録された付加情報を特定の位置でのみ認知することができ、３Ｄツアー内の画像を眺める角度が変更された場合、設定された付加情報を確認できなくなるという問題点があった。

【0008】

また、従来の付加情報記録インタフェースは、３Ｄ撮影インタフェースと付加情報入力インタフェースが区分されるため、ユーザーが３Ｄツアー撮影後に平面図に付加情報を別途に入力しなければならない煩わしさがあった。

【0009】

また、従来の付加情報記録インタフェースは、平面図上に入力された情報が３Ｄツアー上に連動しないため、ユーザーが平面図上に入力された付加情報に対応する位置を３Ｄツアー上に別途に入力したり、別々に確認したりするなどの不便さがあった。

【0010】

また、他の人々が平面図上に表示された付加情報の意味を明確に把握することが難しい問題もあった。

【発明の概要】

【発明が解決しようとする課題】

【0011】

本発明の目的は、ユーザーが３Ｄツアーを利用しながら記録しておこうとする様々な形式の付加情報に対し、ユーザーが指定した特定地点に関連する付加情報を３Ｄの形態で表示する３Ｄツアー付加情報表示システム及び方法を提供することである。

【0012】

また、本発明の目的は、付加情報を表示する３６０度の画像らをユーザーが指定することにより、設定された付加情報をユーザーが希望する位置で確認できるようにする３Ｄツアー付加情報表示システム及び方法を提供することである。

【0013】

また、本発明の目的は、３Ｄツアー内の追加された付加情報らの位置を平面図上に一緒に表示することにより、付加情報の標柱の位置が一目で確認できる３Ｄツアー付加情報表示システム及び方法を提供することである。

【0014】

また、本発明の目的は、３Ｄツアー作成のために撮影する際、空間に対する３Ｄ撮影と平面図内に様々な形の付加情報を挿入する作業を同時に進めることができる３Ｄツアー付加情報表示システム及び方法を提供することである。

【0015】

また、本発明の他の目的は、第１画面（例えば、２Ｄ平面図の画面）において、特定の位置に付加情報が挿入される場合、付加情報の位置を自動的に算出し、第２画面（例えば、３Ｄツアー画面）の対応される位置に付加情報が自動的に表示されるようにする３Ｄツアー付加情報表示システム及び方法を提供することである。

【0016】

本発明の目的らは、以上で言及した目的に制限されず、言及されていない本発明の他の目的及び利点は、以下の説明によって理解することができ、本発明の実施例によって、より明確に理解されるだろう。また、本発明の目的及び利点は、特許請求の範囲に示した手段及びその組み合わせによって実現できることが容易に分かるだろう。

【課題を解決するための手段】

【0017】

上記の技術的な課題を達成するための本発明の実施形態に係る３Ｄツアー付加情報表示方法は、ユーザー端末と連携された３Ｄツアーサービス提供サーバで実行され、上記ユーザー端末に、特定空間の３Ｄ情報を含む３Ｄツアーを提供する段階、上記ユーザー端末に表示された上記３Ｄツアー上に新たに作成される付加情報標柱の始点及び終点に対する座標情報を受信する段階、上記始点及び上記終点を連結する付加情報標柱を作成する段階、及び作成された上記付加情報標柱を上記３Ｄツアー上にオーバーラップして表示する段階を含む。

【0018】

また、上記始点及び終点に対する座標情報を受信する段階は、上記ユーザー端末から上記３Ｄツアー上で二つの点を連結する線（ｌｉｎｅ）の入力を受ける場合、入力を受けた上記の線の一端を上記始点に設定し、上記線の他端を上記終点に設定することを含むことができる。

【0019】

また、上記始点及び終点の座標情報を受信する段階は、上記ユーザー端末から上記３Ｄツアー上で一点のみ入力を受ける場合、上記入力された点を終点に設定し、上記入力された点との最短距離に位置する床面または壁面上の点を始点に設定することを含むことができる。

【0020】

また、上記始点及び終点に対する座標情報は、３次元座標で構成することができる。

【0021】

また、上記付加情報標柱を上記３Ｄツアー内の異なる位置で、異なる形状で表示することができる。

【0022】

また、上記３Ｄツアーに含まれている複数の画像撮影地点のうち、上記付加情報標柱が表示される撮影地点を選択されるインタフェースを提供する段階をさらに含み、上記付加情報標柱を上記３Ｄツアー内で、上記選択された撮影地点でのみ表示することができる。

【0023】

また、上記３Ｄツアーは、上記特定空間に対する平面図を含み、上記平面図上には、上記付加情報標柱の位置に対応する付加情報アイコンを表示することができる。

【0024】

また、上記付加情報標柱の色、タイトル、内容、または付加情報を設定するインタフェースを上記ユーザー端末に提供する段階をさらに含み、上記付加情報標柱を、上記インタフェースを介して入力された上記の色、タイトル、内容、または付加情報をもとに作成することができる。

【0025】

また、上記付加情報は、上記付加情報標柱の一側に表示されるか、ユーザーが上記付加情報標柱を選択する場合、別のメッセージウィンドウによって表示することができる。

【0026】

また、上記付加情報は、写真、映像、ＵＲＬリンクのいずれかを含むことができる。

【0027】

上記の技術的課題を達成するための本発明の実施形態に係る３Ｄツアー付加情報表示システムは、プロセッサ、及び上記プロセッサによって実行されるプログラムが格納されているメモリを含み、上記プログラムは、上記ユーザー端末に特定空間の３Ｄ情報を含む３Ｄツアーを提供するオペレーションと、上記３Ｄツアー内で、上記ユーザー端末を介して新たに作成される付加情報標柱の始点及び終点に対する座標情報の入力を受けるオペレーションと、上記始点及び上記終点を連結する上記付加情報標柱を作成するオペレーションと、作成された上記付加情報標柱を上記３Ｄツアー上にオーバーラップして表示するオペレーションを含む。

【0028】

一方、上記の技術的な課題を達成するための本発明の実施形態に係る３Ｄツアー付加情報表示方法は、ユーザー端末と連携された３Ｄツアー管理サーバで行われる３Ｄツアー付加情報表示方法において、上記ユーザー端末に、特定空間に対する平面図及び３Ｄツアー撮影インタフェースを同時に表示する段階、上記ユーザー端末から上記特定空間に対する３Ｄツアーの撮影画像を受信する段階、上記３Ｄツアーの撮影過程で、上記ユーザー端末を介して付加情報の入力を受ける段階、上記３Ｄツアーと入力された上記付加情報を合成する段階、及び上記３Ｄツアー又は上記平面図上に上記付加情報を表示する段階を含む。

【0029】

また、上記３Ｄツアーと入力された上記付加情報を合成する段階は、上記３Ｄツアーの撮影画像の変化をもとに、上記平面図上に追加される上記付加情報の位置座標を抽出する段階と、上記入力された付加情報を上記抽出された位置座標にマッピングさせる段階を含むことができる。

【0030】

また、上記付加情報の位置を抽出する段階は、上記３Ｄツアーの撮影画像上で、複数個の特徴点を抽出する段階と、上記撮影画像の変化による上記特徴点の移動方向及び距離を算出し、これをもとに上記付加情報の位置座標を抽出する段階を含むことができる。

【0031】

また、上記抽出された付加情報の位置座標は２次元座標で構成され、上記付加情報を上記抽出された位置座標にマッピングさせる段階は、上記抽出された付加情報の位置座標を上記３Ｄツアー上の３次元座標に変換する段階と、上記２次元座標を用いて上記平面図上に上記付加情報をマッピングさせ、上記３次元座標を用いて上記３Ｄツアー上に上記付加情報をマッピングさせる段階を含むことができる。

【0032】

また、上記付加情報の入力を受ける段階は、上記３Ｄ撮影のうち上記平面図上で上記付加情報を挿入する特定位置の入力を受ける段階と、付加情報挿入インタフェースを介して上記特定位置に挿入される付加情報の入力を受ける段階を含むことができる。

【0033】

また、上記ユーザー端末の画面の一側には、上記３Ｄツアーの撮影過程が表示され、上記ユーザー端末の画面の他側には、上記平面図が表示され、上記特定位置の入力を受ける段階は、上記平面図上で、ユーザーが選択した位置情報を受信することを含むことができる。

【0034】

また、上記付加情報挿入インタフェースは、メモ、写真、動画、及びインターネットリンクのいずれかの情報種類を選択して、当該情報種類に対応する付加情報の入力を受けることができる。

【0035】

また、上記付加情報を表示する段階は、上記平面図上の付加情報の挿入位置に付加情報アイコンを表示する段階と、上記３Ｄツアー上に上記付加情報アイコンに対応する３Ｄ付加情報標柱を表示する段階を含むことができる。

【0036】

また、上記３Ｄ付加情報標柱は、上記３Ｄツアーの床面または壁面上に位置する始点と、上記付加情報アイコンの位置に対応する終点と、上記始点と上記終点を連結するボディ部で構成することができる。

【0037】

一方、上記の技術的な課題を達成するための本発明の実施形態に係る３Ｄツアー付加情報タグ付けシステムは、プロセッサと、及び上記プロセッサによって実行されるプログラムが格納されるメモリを含み、上記プログラムは、上記ユーザー端末に、特定空間に対する平面図及び３Ｄツアー撮影インタフェースを同時に表示するオペレーションと、上記ユーザー端末から上記特定空間に対する３Ｄツアーを撮影した画像を受信するオペレーションと、上記３Ｄツアーの撮影過程で、上記ユーザー端末を介して付加情報の入力を受けるオペレーションと、上記３Ｄツアーと入力された上記付加情報を合成するオペレーションと、上記３Ｄツアー又は上記平面図上に上記付加情報を表示するオペレーションを含むことができる。

【発明の効果】

【0038】

本発明に係る３Ｄツアー付加情報表示システム及び方法は、ユーザーが希望する位置に３Ｄ形態で付加情報標柱を設定することにより、ユーザーが意図した正確な位置に付加情報を表示することができる。これにより、同じ３Ｄツアーを利用する他のユーザーたちに特定地点に対する明確な説明と意味伝達をすることができる。

【0039】

また、本発明に係る３Ｄツアー付加情報表示システム及び方法は、３Ｄ付加情報の標柱を表示しようとする特定の３６０度画像を選択するインタフェースを提供し、選択された画像だけに当該３Ｄ付加情報標柱を表示することにより、３Ｄツアー内のさまざまな位置から当該付加情報を確認できるようにする。これにより、ユーザーの利便性を向上させることができ、複数のユーザーに付加情報の表示意図を明確に伝えることができる。

【0040】

また、本発明に係る３Ｄツアー付加情報の表示システム及び方法は、３Ｄツアー内の平面図上に付加情報を表示した位置を自動的に表示することにより、ユーザーが挿入された付加情報の位置を一目で把握できるようにする直観的なインタフェースをユーザーに提供することができる。

【0041】

また、本発明に係る３Ｄツアー付加情報表示システム及び方法は、３Ｄツアーの撮影と平面図内の付加情報の挿入を同時に可能にすることにより、３Ｄツアー撮影後にユーザーが付加情報を挿入する別の作業を実行しなければならない不便さを軽減することができる。

【0042】

また、本発明に係る３Ｄツアー付加情報表示システムおよび方法は、平面図上に挿入された付加情報を３Ｄツアー内の対応する位置に付加情報標柱の形で自動的に表示することによって、ユーザーの利便性を向上させることができる。

【0043】

また、本発明に係る３Ｄツアー付加情報表示システム及び方法は、同じ３Ｄツアーを利用する他のユーザーに当該付加情報についての意味伝達を明確にすることができる。

【0044】

本発明の効果は、前述した効果に限定されず、本発明の当業者は、本発明の構成で、本発明の様々な効果を簡単に導き出すことができる。

【図面の簡単な説明】

【0045】

【図1】本発明のいくつかの実施形態に係る３Ｄツアー付加情報表示システムの概略的な構成を説明するためのブロック図である。

【図2】本発明のいくつかの実施形態に係る３Ｄツアー付加情報表示システムの概略的な構成を説明するためのブロック図である。

【図3】本発明の一実施形態に係る３Ｄツアー内で付加情報を追加して表示する方法を説明するための流れ図である。

【図4】本発明の一実施形態に係る３Ｄツアー付加情報表示システムで提供する付加情報の設定インタフェースを説明するための図面である。

【図5】本発明の一実施形態に係る３Ｄツアー付加情報表示システムで提供する付加情報の設定インタフェースを説明するための図面である。

【図6】本発明の一実施形態に係る３Ｄツアー付加情報表示システムで、３Ｄツアーに追加された付加情報が表現される一例を説明するための図面である。

【図7】本発明の一実施形態に係る３Ｄツアー付加情報表示システムで、追加された付加情報を、特定の画像撮影地点でのみ表示するようにする機能を説明するための図面である。

【図8】本発明の一実施形態に係る３Ｄツアー付加情報表示システムで、３Ｄツアーに追加された付加情報が表現される他の例を説明するための図面である。

【図9】本発明の一実施形態に係る３Ｄツアー付加情報表示システムで追加された付加情報に対するアイコンが表示される平面図を示す図である。

【図10】本発明の他の実施形態に係る３Ｄツアー付加情報の表示方法を説明するための流れ図である。

【図11】本発明の他の実施形態に係る３Ｄツアー付加情報表示システムで、空間を撮影する方法を説明するための図面である。

【図12】本発明の他の実施形態に係る付加情報の挿入インタフェースの一例を説明するための図面である。

【図13】図１２の付加情報挿入インタフェースを介して挿入された付加情報のアイコンが表示された平面図を示す図面である。

【図14】本発明の他の実施形態に係る３Ｄツアー付加情報表示システムで、平面図及び３Ｄツアーを合成して付加情報を表現することを説明するための図面である。

【図15】本発明の他の実施形態に係る３Ｄツアー付加情報表示システムで、平面図及び３Ｄツアーを合成して付加情報を表現することを説明するための図面である。

【図16】本発明の他の実施形態に係る３Ｄツアー付加情報表示システムで、実行されるトラッキング方法を説明するための図面である。

【図17】本発明の他の実施形態に係る３Ｄツアー付加情報表示システムで、実行されるトラッキング方法を説明するための図面である。

【発明を実施するための形態】

【0046】

本発明の利点及び特徴、そしてそれらを達成する方法は、添付される図面と共に詳細に後述されている実施例等を参照すると明確になるだろう。しかし、本発明は、以下で開示される実施例に限定されるものではなく、互いに異なる多様な形態で実装されるものであり、単に本実施例は、本発明の開示が完全であるようにし、本発明が属する技術分野において通常の知識を持つ者に発明の範疇を完全に知らせるために提供されているものであり、本発明は、請求項の範疇によって定義されるだけである。明細書全体にわたって同一参照符号は同一の構成要素を指す。

【0047】

本明細書で使用される用語は、実施例を説明するためのものであり、本発明を制限するものではない。本明細書では、単数形は、フレーズで特に言及しない限り、複数形も含む。明細書で使用される「含む（ｃｏｍｐｒｉｓｅｓ）」および／または「含んでいる（ｃｏｍｐｒｉｓｉｎｇ）」は、言及された構成要素、段階、動作、および／または素子は、一つ以上の他の構成要素、段階、動作、および／または素子の存在または追加を排除しない。

【0048】

他の定義がなければ、本明細書で使用されるすべての用語（技術及び科学的用語を含む）は、本発明が属する技術分野で通常の知識を有する者に共通して理解できる意味で使用することができる。また、一般的に使用される事前に定義されている用語は明白に特別に定義されていない限り、理想的にまたは過度に解釈されない。

【0049】

本発明において「３Ｄツアー」は、複数の地点でそれぞれ３６０度に撮影して保存された複数の画像（例えば、パノラマ画像）の組み合わせで構成することができる。このとき、「３Ｄツアー」は、それぞれの画像が撮影された位置情報を含むことができ、それぞれの位置情報は、平面図上にマッピングされ、ユーザーに提供されることができる。

【0050】

以下では、本発明の実施形態に係る３Ｄツアー付加情報表示システム及び方法について図面を参照して、詳細に説明する。

【0051】

図１及び図２は、本発明のいくつかの実施形態に係る３Ｄツアー付加情報表示システムの概略的な構成を説明するためのブロック図である。

【0052】

図１を参照すると、本発明の実施形態に係る３Ｄツアー付加情報表示システムは、３Ｄツアー付加情報を表示するサーバ（１００）（以下、サーバ）及びユーザー端末（２００）を含む。サーバ（１００）とユーザー端末（２００）は、サーバクライアントシステムとして実装することができる。

【0053】

このとき、サーバ（１００）は、３Ｄツアーに含まれている複数の画像の撮影地点のうち、ユーザーが選択した特定地点に対応する画像を選定して、ユーザー端末（２００）に提供することができる。サーバ（１００）は、有線または無線ネットワークを介してユーザー端末（２００）とデータを送受信することができる。

【0054】

図１では、１つのユーザー端末（２００）だけを図示したが、本発明がこれに限定されるものではなく、サーバ（１００）は、複数のユーザー端末（２００）と連動して動作することができる。

【0055】

サーバ（１００）は、互いに異なる複数の３Ｄツアーを保存及び管理することができる。このとき、サーバ（１００）は、ユーザー端末（２００）から付加情報標柱を作成するための座標値を受信し、受信した座標値を利用して、３Ｄツアー上に付加情報標柱を利用して、付加情報を表示することができる。 ３Ｄツアー付加情報表示方法の詳細については、以下で後述するようにする。

【0056】

また、サーバ（１００）は、ユーザーが選択した特定地点に付加情報を挿入し、ユーザー端末（２００）内の平面図及び３Ｄツアー上に付加情報に対するアイコンを表示することができる。サーバ（１００）は、有線または無線ネットワークを介してユーザー端末（２００）とデータを送受信することができる。

【0057】

サーバ（１００）は、ユーザー端末（２００）を介して撮影された３６０度画像、３Ｄツアーに対する平面図、３Ｄ付加情報標柱及び付加情報表示アイコンを保存及び管理することができる。

【0058】

続いて、サーバ（１００）は、３６０度の画像、３Ｄツアー、３Ｄツアーの平面図、３Ｄ付加情報標柱及び付加情報表示アイコンをユーザー端末（２００）に提供することができる。

【0059】

サーバ（１００）は、３Ｄツアー及び３Ｄツアーの平面図に挿入された付加情報をユーザー端末（２００）の画面内に同時に表示することができる。このとき、ユーザー端末（２００）の画面の一側には、３Ｄツアーの撮影過程を表示することができ、他側には３Ｄツアーの平面図が表示されることができる。

【0060】

また、サーバ（１００）は、３Ｄツアーの平面図上に付加情報を入力及び表示するとともに、３Ｄツアー内にも同じ内容の付加情報を入力及び表示することができる。

【0061】

具体的には、サーバ（１００）は、３Ｄツアー撮影中の平面図を介して入力された付加情報の位置座標をもとに、３Ｄツアー内の対応する位置に付加情報標柱を自動的に作成して表示することができる。

【0062】

つまり、サーバ（１００）は、平面図上の付加情報が入力された位置に、付加情報アイコンを表示し、３Ｄツアー内に対応する位置に３Ｄ付加情報標柱を表示することができる。平面図内に付加情報を入力及び表示して、当該付加情報を３Ｄツアー内に挿入及び表示する方法に対する具体的な説明は、以下で詳細に説明する。以下では、サーバ（１００）の構成について詳細に説明する。

【0063】

一方、図２を参照すると、サーバ（１００）は、本発明の技術的思想を実装するためのプログラムが格納されているメモリ（１２０）、上記メモリ（１２０）に格納されたプログラムを実行するためのプロセッサ（１１０）を含む。

【0064】

このとき、メモリ（１２０）には、３Ｄツアー及び上記３Ｄツアーの付加情報に関連するデータを保存することができる。例えば、３Ｄツアーは３６０度の撮影画像、撮影画像に対する撮影位置の座標、当該座標がマッピングされた平面図に関するデータ、３Ｄツアー内に追加された付加情報標柱に関するデータ、付加情報の設定に関するデータを含むことができる。

【0065】

ここでは、付加情報標柱に関するデータは、付加情報の内容、付加情報標柱の色、付加情報標柱の座標、及び当該座標がマッピングされた平面図の位置などを含むことができる。また、付加情報の設定に関するデータは、付加情報の内容、付加情報表現のアイコン、付加情報標柱の座標、及び当該座標がマッピングされた平面図に関するデータを含むことができる。

【0066】

メモリ（１２０）には、３Ｄツアー付加情報表示方法についてのアルゴリズムを保存することができる。ここでは、３Ｄツアー付加情報表示方法は、３次元に構成された３Ｄツアー上に、３Ｄの形で付加情報を設定するためのインタフェース提供方法を示す。このとき、プロセッサ（１１０）は、アルゴリズムの実行主体となることができる。

【0067】

具体的には、サーバ（１００）は、３Ｄツアー上で、ユーザーが３Ｄ形態の付加情報標柱を作成できる３Ｄ付加情報の設定インタフェースを提供することができる。

【0068】

このとき、サーバ（１００）は、付加情報標柱の始点と終点に対する座標値を受信し、付加情報標柱を作成し、ユーザーが入力した付加情報を作成された付加情報標柱にマッピングさせることができる。

【0069】

また、サーバ（１００）は、ユーザーに付加情報標柱が表示される画像の撮影地点を指定するようにすることで、入力された付加情報を特定位置だけで表示するようにするインタフェースを提供することができる。

【0070】

また、サーバ（１００）は、３Ｄツアー内に設定された付加情報の位置を平面図上に一緒に表示することができる。これに対する詳細な説明は、以下の図面を参照して説明する。

【0071】

付加的に、プロセッサ（１１０）は、サーバ（１００）の実装例に応じて、ＣＰＵ、モバイルプロセッサなど、さまざまな名称で命名されることができる。

【0072】

メモリ（１２０）は、プログラムが格納され、プログラムを駆動させるために、プロセッサがアクセスできる任意の形式の記憶装置に実装されてもよい。ハードウェアの実装例に応じてメモリ（１２０）は、いずれかの記憶装置ではなく、複数の記憶装置に実装することもできる。また、メモリ（１２０）は、主記憶装置だけではなく、一時記憶装置を含むこともできる。また、メモリ（１２０）は、揮発性メモリまたは不揮発性メモリに実装されることもあり、プログラムが格納され、プロセッサによって駆動されるように、実装されるすべての形式の情報保存手段を含む意味で定義することができる。

【0073】

また、サーバ（１００）は、実施例によって、Ｗｅｂサーバ、コンピュータ、携帯電話、タブレット、ＴＶ、セットトップボックスなど、さまざまな方法で実装することができ、本明細書で定義される機能を実行することができる任意の形式のデータ処理装置も含む意味で定義することができる。

【0074】

サーバ（１００）は、実施例によって、さまざまな周辺装置（例えば、周辺機器－１（１３１）乃至周辺機器－Ｎ（１３９））をさらに含むことができる。例えば、サーバ（１００）は、３６０度のカメラ、キーボード、モニター、グラフィックカード、通信装置などの周辺機器をさらに含むことができる。

【0075】

以下では、サーバ（１００）で実行される３Ｄツアー付加情報表示方法について具体的に説明する。

【0076】

図３は、本発明の一実施例に係る３Ｄツアー内で付加情報を追加して表示する方法を説明するための流れ図である。

【0077】

図３を参照すると、本発明の実施例に係る３Ｄツアー内に付加情報を３Ｄで表現する３Ｄツアー付加情報表示方法において、まず、サーバ（１００）は、ユーザー端末（２００）に、特定空間に対する３Ｄツアーを提供する（Ｓ１１０）。

【0078】

続いて、サーバ（１００）は、付加情報標柱の始点と終点に対する座標情報を受信する（Ｓ１２０）。このとき、ユーザーは、ユーザー端末（２００）に表示される３Ｄツアー上の特定地点を始点または終点に指定することができる。

【0079】

たとえば、サーバ（１００）は、３Ｄツアー内でマウスクリックまたはタッチ入力を介して付加情報を追加できるメニューを提供することができる。ユーザーは、付加情報の追加メニューの選択を介して付加情報標柱の始点と終点を入力することができる。このとき、付加情報を追加メニューは、ツールのリストビューウィンドウに付加情報を追加ボタンに置き換えられるなど、様々な変形例を介して提供されることができる。

【0080】

また、付加情報標柱の始点と終点は、サーバ（１００）が、ユーザー端末（２００）から入力された３Ｄツアー上で２点を結ぶ線（ｌｉｎｅ）で導出することができる。このとき、ユーザーから入力された線（Ｌｉｎｅ）の一端は、始点に設定され、ラインの他端は、終点に設定することができる。

【0081】

一方、ユーザー端末（２００）から一点だけ入力される場合、サーバ（１００）は、入力された点を終点に設定し、上記入力された点との最短距離に位置する床面または壁面上の一点を始点に設定することができる。

【0082】

このとき、付加情報標柱の始点と終点の座標情報は、３次元空間座標の形で保存されることができる。

【0083】

また、付加情報標柱の終点は、３Ｄツアー内で、多様な形状に表示されることができる。たとえば、付加情報標柱の終点は、円形、三角形、四角形など様々な変形を含むことができる。

【0084】

続いて、ユーザーは、付加情報の設定インタフェースを介し、挿入される付加情報を設定する（Ｓ１３０）。このとき、ユーザーは付加情報設定インタフェースを介し付加情報標柱の色、タイトル、内容などを設定することができ、様々な種類（例えば、写真、映像、ＵＲＬなど）の付加情報を挿入することができる。このとき、付加情報を設定するためのポップアップウィンドウは、付加情報標柱の始点と終点を指定した後に自動的に表示されたり、作成された付加情報標柱をクリックするときに表示されたりすることができる。ただしこれは、一つの例示に過ぎず、本発明がこれに限定されるものではない。

【0085】

続いて、サーバ（１００）は、始点と終点の座標値を用いて付加情報標柱を作成し、作成された付加情報標柱を３Ｄツアー上に表示する（Ｓ１４０）。このとき、入力された始点と終点を、相互に連結し、３Ｄツアー上で３Ｄ形状の付加情報標柱に表現することができる。また、当該付加情報標柱に設定された付加情報は、当該付加情報標柱の近くに別途に表示することができる。

【0086】

続いて、サーバ（１００）は、３Ｄツアー上で付加情報標柱が追加された位置に対応する平面図上に、付加情報アイコンを表示する（Ｓ１５０）。このとき、サーバ（１００）は、追加された付加情報標柱の３次元座標を２次元座標に変換することにより、平面図内に追加された付加情報標柱に対する付加情報のアイコンを表示することができる。付加情報のアイコンは、付加情報の形態に応じて、互いに異なるアイコン（例えば、写真のアイコンまたは動画アイコンなど）で表示することができる。

【0087】

以下では、サーバ（１００）から提供される付加情報の設定インタフェースについて詳細に説明する。

【0088】

図４及び図５は、本発明の一実施例に係る３Ｄツアー付加情報の表示システムで提供する付加情報設定インタフェースを説明するための図面である。

【0089】

図４を参照すると、ユーザーは付加情報設定インタフェースを介して始点（ＳＰ）及び終点（ＥＰ）を設定することができる。

【0090】

たとえば、ユーザーが３Ｄツアー内で特定位置を選択すると、３Ｄツアー内に付加情報標柱の始点（ＳＰ）が設定される。

【0091】

続いて、ユーザーが他の特定位置を選択すると、３Ｄツアー内に付加情報標柱の終点（ＥＰ）が設定される。このとき、付加情報標柱（Ｍ１）の始点（ＳＰ）及び終点（ＥＰ）を３次元座標の形でサーバ（１００）内に保存することができる。

【0092】

続いて、付加情報標柱の始点（ＳＰ）及び終点（ＥＰ）が設定されると、２点を連結するボディ部（ＢＤ）が作成され、これにより、付加情報標柱（Ｍ１）を３Ｄ形式で３Ｄツアー上に表現することができる。

【0093】

また、作成された付加情報標柱（Ｍ１）の始点（ＳＰ）に対応する床面上には第１マーク（ＭＳ）が表示され、終点（ＥＰ）に対応する床面上に第２マーク（ＭＥ）が表示される。第１マーク（ＭＳ）と第２のマーク（ＭＥ）は、３Ｄツアー上の付加情報標柱の位置を明確にするための付加的な表示であり、予め決められた設定値によって省略することができる。

【0094】

ただし、上記の始点（ＳＰ）及び終点（ＥＰ）の入力方法は、一つの例示に過ぎず、始点（ＳＰ）及び終点（ＥＰ）の選択は、マウスクリックまたはドラッグ、連続したタッチ入力、付加情報の追加メニュー入力など、様々な変形を介して設定することができる。

【0095】

図５を参照すると、ユーザーが始点（ＳＰ）及び終点（ＥＰ）を設定した後、付加情報の設定ポップアップ（ＳＢ）を実行することができる。ただし、これは付加情報の設定ポップアップ（ＳＢ）の表示方法の一例であり、付加情報の設定ポップアップ（ＳＢ）は、マウスの右クリックで表示されるか、または付加情報標柱をクリックしたときに表示されるなど、多様に変形して実施することができる。

【0096】

付加情報の設定ポップアップ（ＳＢ）は、標柱の色ボックス（ＣＢ）、文字入力ボックス（ＴＢ）及び付加情報の追加ボックス（ＩＢ）を含むことができる。

【0097】

具体的には、標柱の色ボックス（ＣＢ）は、付加情報標柱の終点（ＥＰ）の色を指定することができる。ユーザーが指定しようとする色をクリックすると、付加情報標柱の終点（ＥＰ）の色が、ユーザーが指定した色に変わることができる。このとき、標柱の色ボックス（ＣＢ）は、多数の色（例えば、赤、黄、緑、空、青、紫など）を含んでおり、標柱の色ボックス（ＣＢ）に含まれる色を多様に変形して配置することができる。

【0098】

文字入力ボックス（ＴＢ）には、付加情報標柱のタイトル（ｔｉｔｌｅ）及び内容（ｄｅｓｃｒｉｐｔｉｏｎ）を入力することができる。ユーザーがタイトル及び内容を入力すると、入力されたタイトル及び内容が付加情報標柱に挿入されて、付加情報標柱の一側に別のメッセージウィンドウに表示することができる。

【0099】

付加情報の追加ボックス（ＩＢ）は、追加される付加情報の様々な形態を指定することができる。たとえば、ユーザーは、付加情報の追加ボックス（ＩＢ）を介して写真、ビデオ、ＵＲＬリンクなどを追加で指定することができる。

【0100】

つまり、付加情報の設定ポップアップ（ＳＢ）を介して、ユーザーは付加情報標柱に具体的な付加情報を追加して表示することができる。

【0101】

これにより、本発明による３Ｄツアー付加情報表示システムは、ユーザーが任意の位置に付加情報標柱を設定するようにすることができ、ユーザーが意図した多様な付加情報を表示することができる。

【0102】

図６は、本発明の一実施例に係る３Ｄツアー付加情報の表示システムで、３Ｄツアーに追加された付加情報が表現される一例を説明するための図面である。

【0103】

図６を参照すると、ユーザーが設定した付加情報標柱は、３Ｄツアー内の多様な位置で確認することができる。

【0104】

たとえば、＜ａ１＞は第１地点から見た付加情報標柱を示し、＜ａ２＞は第２地点から見た付加情報標柱を示し、＜ａ３＞は第３地点から見た付加情報標柱を示す。ここで、第１乃至第３の地点は、互いに異なる画像撮影地点を示す。

【0105】

＜ａ１＞、＜ａ２＞、＜ａ３＞を参照すると、ユーザーは３Ｄツアー内の複数の位置で、予め入力した付加情報標柱の位置及び内容を確認することができ、角度によって付加情報標柱の形状は異なって表示することができる。

【0106】

つまり、付加情報標柱は、ユーザーが指定した３６０度の画像内に３次元座標に設定され、３Ｄ形式で表示することができる。したがって、付加情報標柱は、ユーザーの位置及び視界によって大きさ及び角度が変形して表示することができる。

【0107】

以下では、サーバ（１００）の付加情報標柱を確認できる画像の設定方法について詳しく説明する。

【0108】

図７は、本発明の一実施例に係る３Ｄツアー付加情報表示システムで、追加された付加情報を特定の画像撮影地点のみに表示できるようにする機能を説明するための図面である。

【0109】

図７を参照すると、ユーザーは図５を参照して、説明した付加情報の設定インタフェースを介して、多様な付加情報を入力することができる。また、ユーザーは、付加情報の設定インタフェースで３Ｄツアーに含まれている複数の画像撮影地点のうち、入力された付加情報標柱が表示される３６０度の画像を選択することができる。

【0110】

具体的には、ユーザーが付加情報の設定インタフェース内に備えた画像選択ボタン（ＳＶ）を選択する場合、３Ｄツアーに含まれている複数の３６０度画像が並ぶポップアップウィンドウ（ＰＢ）が開始される。

【0111】

ポップアップウィンドウ（ＰＢ）に備えられたグラフィックボックス（ＧＢ）には、３Ｄツアーに含まれている複数の３６０度画像を表示することができる。ユーザーは、グラフィックボックス（ＧＢ）に表示された複数の３６０度画像のうち、選択された付加情報標柱に表示しようとする特定の３６０度画像を選択することができる。これにより、ユーザーは、設定した付加情報標柱を特定の画像撮影地点だけに表示されるように設定することができる。以後、当該付加情報標柱は、選択された画像の撮影地点のみ表示することで、ユーザーの様々な意図を表現することができる。

【0112】

これにより、本発明による３Ｄツアー付加情報表示システムは、３Ｄ付加情報標柱を表示しようとする特定の３６０度画像を選択して、特定画像のみに３Ｄ付加情報標柱を表示することで、３Ｄツアー内の多様な位置で付加情報を確認できるようにして、ユーザーの利便性を向上させることができる。また、本発明は、ユーザーの付加情報の表示意図を明確に伝えることができる。

【0113】

図８は、本発明の一実施例に係る３Ｄツアー付加情報表示システムで３Ｄツアーに追加された付加情報が表現される他の例を説明するための図面である。

【0114】

図８を参照すると、ユーザーが３Ｄツアー上で一つの点だけを入力する場合、３Ｄツアー付加情報表示システムは、入力された点を終点に設定し、上記入力された点との最短距離に位置する床面または壁面上の点を始点に設定して、付加情報標柱を作成することができる。

【0115】

たとえば、＜ｂ１＞を参照すると、一つの点の入力によって作成された付加情報標柱は、床面から上方に延長される方向に設定することができる。つまり、付加情報標柱は、床面から垂直方向に延長されるように形成することができる。このとき、床面は付加情報標柱の始点に基本設定されていたり、周囲の壁面より入力された点に近くなるように位置したりすることができる。

【0116】

続いて、ユーザーは、作成された付加情報標柱を選択することにより、付加情報の設定インタフェースに進入して、具体的な付加情報を入力することができる。

【0117】

付加情報の入力が完了した後、他のユーザーが当該付加情報標柱（Ｍ２）をクリックする場合、付加情報の入力者が設定しておいた付加情報ウィンドウ（ＩＭ２）（例えば、写真）を付加情報標柱の一側に表示することができる。

【0118】

他の例として、＜ｂ２＞を参照すると、３Ｄ形状の付加情報標柱は壁面から垂直な方向に延びる方向に設定することができる。つまり、付加情報標柱は壁面から水平方向に延びるように形成することができる。このとき、壁面は付加情報標柱の始点に設定されていたり、周囲の床面より入力された点と近くなるように位置したりすることができる。

【0119】

同様に、ユーザーは、作成された付加情報標柱を選択することにより、付加情報の設定インタフェースに進入して、具体的な付加情報を入力することができる。

【0120】

また、付加情報の入力が完了した後、他のユーザーがその付加情報標柱（Ｍ３）をクリックする場合、付加情報の入力者が設定しておいた付加情報ウィンドウ（ＩＭ３）（たとえば、メモ）を付加情報標柱の一側に表示することができる

【0121】

また、＜ｂ１＞と＜ｂ２＞は、付加情報標柱の予め設定された基本形状に該当することができる。もし、ユーザーが平面図上に付加情報を入力する場合、付加情報標柱は、床面又は壁面との隣接度に応じて＜ｂ１＞または＜ｂ２＞に表現することができる。

【0122】

以下では、３Ｄツアー付加情報の表示システムで平面図上の付加情報を表示する方法について説明する。

【0123】

図９は、本発明の一実施例に係る３Ｄツアー付加情報表示システムで、追加された付加情報に対するアイコンが表示される平面図を示す図面である。

【0124】

図９を参照すると、ユーザーが設定した付加情報標柱のアイコンを、３Ｄツアーに含まれている平面図（ＦＰ）上に表示することができる。

【0125】

ユーザーが３Ｄツアー内で付加情報標柱を設定すると、サーバ（１００）は、３次元座標を２次元座標に変換することができる。

【0126】

続いて、サーバ（１００）は、３Ｄツアー内の付加情報標柱が設定された位置に対応する平面図（ＦＰ）上の地点（例えば、ＭＣ１、ＭＣ２、ＭＣ３）に付加情報の種類に応じたアイコン（例えば、写真アイコン、動画アイコン、テキストアイコン）を表示することができる。ユーザーは、当該アイコンをクリックすることにより、予め入力された付加情報を平面図（ＦＰ）上で確認することができる。

【0127】

また、ユーザーが平面図（ＦＰ）内で付加情報を設定する場合、付加情報標柱を平面図（ＦＰ）内の付加情報が設定された位置に対応するように３Ｄツアーの上に作成することができる。

【0128】

平面図（ＦＰ）で追加された付加情報は、３Ｄツアー内で対応される付加情報標柱に形成することができる。このとき、付加情報標柱の始点（ＳＰ）及び終点（ＥＰ）は、自動的に設定することができる。付加情報標柱は平面図（ＦＰ）内に設定された位置と最も隣接した距離の特定平面（例えば、壁、床など）を始点（ＳＰ）にして作成することができる。また、付加情報標柱の終点（ＥＰ）は、特定平面に垂直であり、始点（ＳＰ）との最短距離を持つように予め設定された高さに設定することができる。

【0129】

このとき、作成された付加情報標柱は、図８を参照して、前述したように、床面又は壁面との隣接度によって＜ｂ１＞または＜ｂ２＞の形で形成することができる。

【0130】

まとめると、本発明に係る３Ｄツアー付加情報表示システムは、３Ｄツアー内の平面図上に付加情報を表示しておいた位置に対応する付加情報標柱を３Ｄツアー内で自動的に作成することにより、ユーザーの利便性を向上させることができる。

【0131】

図１０は、本発明の他の実施例に係る３Ｄツアー付加情報表示方法を説明するための流れ図である。

【0132】

図１０を参照すると、本発明の実施例に係る３Ｄツアー付加情報表示方法において、まずサーバ（１００）は、プロジェクトを作成する（Ｓ２１０）。ユーザーは、作成されたプロジェクト内で、３Ｄツアーを撮影する作業と、平面図上に付加情報を挿入する作業を実行することができる。

【0133】

このとき、３Ｄツアーの撮影作業及び平面図内の付加情報の挿入作業は、同じプロジェクト内で一人のユーザーによって順次行われたり、二人以上のユーザーによって同時に行われたりすることができる。

【0134】

たとえば、３Ｄ撮影の作業は、第１ユーザーによって行われ、付加情報の挿入作業は、第１ユーザーと異なる第２ユーザーによって行うことができる。続いて、異なるユーザーによって行われた３Ｄ撮影作業と付加情報の挿入作業は、作業完了後に、同じプロジェクト内で統合することができる。

【0135】

続いて、サーバ（１００）は、３Ｄツアーを撮影する（Ｓ２２０）。このとき、特定の空間に対する３Ｄツアーの撮影画面と上記特定空間の平面図を分割された画面上に同時に表示することができる。 ３Ｄツアー撮影画面及び平面図の画面が分割された画面内に表示されることによって、ユーザーは３Ｄツアーの撮影と同時に平面図上に多様な形態の付加情報を挿入することができる。

【0136】

また、サーバ（１００）は、撮影画面または平面図内の付加情報を追加するボタンを備えたインタフェースをユーザー端末（２００）に提供する。ユーザーがそのボタンをタッチすると、ユーザー端末（２００）には、付加情報の挿入インタフェースを提供することができる。すなわち、ユーザーは付加情報挿入のためのボタンをクリックまたはタッチ入力を介して付加情報の挿入段階に進入することができる。

【0137】

続いて、ユーザーが平面図上で位置を指定する場合、サーバ（１００）は、選択された位置に付加情報を挿入する（Ｓ２３０）。このとき、ユーザーは平面図上のクリックまたはタッチ操作を介して付加情報の挿入位置を指定することができる。

【0138】

続いて、付加情報の挿入位置が指定される場合は、サーバ（１００）は、付加情報の挿入インタフェースを画面に表示する。ユーザーは、付加情報の挿入インタフェースを介して様々な形態の付加情報（例えば、メモ、写真など）を入力することができる。

【0139】

続いて、サーバ（１００）は、入力された付加情報を３Ｄツアー及び平面図と合成する（Ｓ２４０）。このとき、サーバ（１００）は、トラッキングを介して平面図内に挿入された付加情報の２次元位置座標を抽出することができる。続いて、抽出された２次元座標を３次元座標に変換することにより、３Ｄツアー内に表示される付加情報標柱の位置を自動的に設定することができる。

【0140】

続いて、サーバ（１００）は、３Ｄツアーと平面図上に入力された付加情報を一緒に表現する（Ｓ２５０）。このとき、サーバ（１００）は、３Ｄツアー内に挿入された付加情報を３Ｄ形態の付加情報標柱で３Ｄツアー内に表示することができる。

【0141】

以下では、サーバ（１００）内の付加情報のタグ付けインタフェースの付加情報の撮影及びタグ付けする方法について詳しく説明する。

【0142】

図１１は、本発明の他の実施例に係る３Ｄツアー付加情報の表示システムで空間を撮影する方法を説明するための図面である。

【0143】

図１１を参照すると、サーバ（１００）は、同じプロジェクト内で、空間の３Ｄツアーの撮影作業及び平面図内の付加情報の挿入作業を進めることができる。

【0144】

サーバ（１００）は、分割画面を介して、第１画面（Ｄ１）には、平面図（ＧＰ）を提供し、第２画面（Ｄ２）には、空間の３Ｄツアーの撮影過程を提供することができる。

【0145】

このとき、ユーザーは、第１画面（Ｄ１）内平面図（ＧＰ）で位置設定点（ＡＰ）を介して、本人の現在の位置を確認することができる。

【0146】

また、ユーザーは、第２画面（Ｄ２）を介して空間を撮影することができる。ユーザーは、第２画面（Ｄ２）の３Ｄツアー撮影画面（ＴＰ）の下部に備えられた録画ボタン（Ｂ１）を選択することで、３Ｄツアーを作成するための撮影を開始することができる。

【0147】

具体的には、ユーザーが録画ボタン（Ｂ１）を選択した場合は、サーバ（１００）に連結された３６０度カメラモジュール（図示せず）は、当該位置で３６０度の撮影動作を実行して、３Ｄツアーを作成することができる。このとき、３６０度カメラモジュール（図示せず）は、一定の距離間隔又は時間間隔を置いて３６０度の画像を連続して作成することができる。続いて、サーバ（１００）は、撮影された複数の３６０度画像と移動経路をマッピングして３Ｄツアーを作成することができる。ただし、これは一つの例示に過ぎず、３Ｄ撮影中に３６０度カメラモジュール（図示せず）の３Ｄツアーの作成方法は、多様に変形して実施することができる。

【0148】

３６０度カメラモジュール（図示せず）で作成された３６０度画像は、３６０度カメラモジュール（図示せず）に一時的に保存され、ユーザーが撮影を終了する場合、サーバ（１００）に送信することができる。たとえば、ユーザーは、撮影状態で録画ボタン（Ｂ１）を再び選択することにより、撮影を終了することができる。撮影が終了する場合、３６０度カメラモジュール（図示せず）に保存された３６０度の画像はサーバ（１００）に送信することができる。

【0149】

また、サーバ（１００）は、トラッキング技術を通じて、ユーザーの移動経路を抽出することができる。第２画面（Ｄ２）内の３Ｄツアーの撮影過程を見ると、３Ｄツアー撮影画面（ＴＰ）内には、複数の特徴点（ＰＭ）を表示することができる。

【0150】

サーバ（１００）は、複数の特徴点（ＰＭ）を抽出した後、ユーザーの撮影画像の変化による特徴点（ＰＭ）の移動方向及び距離を算出することができる。続いて、サーバ（１００）は、抽出された情報を利用して、ユーザー端末（２００）の移動経路を算出することができる。算出された移動経路は、第１画面（Ｄ１）内の平面図（ＧＰ）上に表示することができる。

【0151】

たとえば、サーバ（１００）は、特徴点（ＰＭ）を介してユーザーが２回目で撮影した３Ｄツアーの位置を第２の撮影地点（Ｐ２）、３回目で撮影した３Ｄツアーの位置を第３の撮影地点（Ｐ３）、及び４番目に撮影された３Ｄツアーの位置を第４の撮影地点（Ｐ４）に設定することができる。

【0152】

続いて、サーバ（１００）は、第２の撮影地点（Ｐ２）、第３の撮影地点（Ｐ３）、及び第４の撮影地点（Ｐ４）を平面図（ＧＰ）上に表示し、ユーザー端末（２００）の移動経路を線で表現することができる。このとき、サーバ（１００）は、第１の撮影地点、第２の撮影地点、第３の撮影地点及び第４の撮影地点の撮影範囲を抽出して平面図（ＧＰ）上に表示することができる。

【0153】

さらに、第２画面（Ｄ２）内の３Ｄツアー撮影画面（ＴＰ）には、３Ｄツアー撮影距離（ＴＤ）を表示することができる。ここで、３Ｄツアー撮影距離（ＴＤ）は、特徴点（ＰＭ）を介して抽出されたユーザー端末（２００）の移動距離を示すことができる。

【0154】

ユーザーは３Ｄツアー撮影を進行している途中、挿入しようとする付加情報が生じる場合、第１画面（Ｄ１）内の平面図内の特定地点を選択することにより、付加情報の挿入インタフェースに画面を切り替えることができる。付加情報の挿入インタフェースの詳細については、図１２及び図１３を介して詳しく説明する。また、トラッキングシステムに関する詳細については、図１６及び図１７を介して詳述する。

【0155】

以下では、サーバ（１００）から提供する付加情報の挿入インタフェースを介して付加情報を挿入する方法を詳細に説明する。

【0156】

図１２は、本発明の他の実施例による付加情報挿入インタフェースの一例を説明するための図面である。

【0157】

図１２を参照すると、ユーザーは画面に表示された平面図上で、特定地点（ＴＰ）を選択することができる。ここでは、特定地点（ＴＰ）は、付加情報が追加される位置を示す。

【0158】

続いて、サーバ（１００）は、ユーザー端末（２００）の画面に付加情報挿入インタフェース（ＩＰ）を表示する。

【0159】

続いて、ユーザーは、付加情報挿入インタフェース（ＩＰ）を介して、付加情報の種類（例えば、写真、動画、書き込みなど）を指定することができる。

【0160】

たとえば、付加情報挿入インタフェース（ＩＰ）は、ビデオ撮影ボタン（ＲＢ）、画像撮影ボタン（ＣＢ）及びメディアアップロードボタン（ＵＢ）を含むことができる。

【0161】

ユーザーがビデオ撮影ボタン（ＲＢ）を選択した場合、付加情報挿入インタフェース（ＩＰ）はビデオ撮影モードに切り替わり、これにより、撮影されたビデオを付加情報として平面図内に挿入することができる。

【0162】

また、ユーザーは、画像撮影ボタン（ＣＢ）を選択して画像を撮影し、撮影された画像を付加情報として平面図内に挿入することができる。また、ユーザーは、メディアアップロードボタン（ＵＢ）を選択して、ユーザーの端末（２００）を含むデバイス及びインターネットサーバ（図示せず）などに保存し、入力されている様々な種類の付加情報を平面図内に挿入することができる。また、ユーザーは、付加情報挿入インタフェース（ＩＰ）に含まれているメモ入力ボックス（ＴＢ）に文字を入力することで、関連するメモを付加情報として平面図に挿入することができる。

【0163】

続いて、ユーザーは、挿入ボタン（ＳＢ）を選択して、付加情報の挿入を完了することができる。挿入された付加情報は、平面図上にアイコン（ＴＩ）の形で表示することができる。ここでは、アイコン（ＴＩ）の形状は、付加情報の種類に応じて異なる形で表示することができる。

【0164】

図面に示されている付加情報挿入インタフェース（ＩＰ）は、一つの例示に過ぎず、付加情報を入力するためのインタフェースを多様に変形し実施することができる。

【0165】

これにより、本発明のサーバ（１００）は、３Ｄツアーの撮影と平面図内の付加情報挿入を同時に可能にする。したがって、本発明は、３Ｄツアーの撮影後、関連付加情報を別途に入力しなければならないユーザーの不便さを解消することができる。

【0166】

図１３は、図１２の付加情報の挿入インタフェースを介して挿入された付加情報のアイコンが表示された平面図を示す図面である。

【0167】

図１３を参照すると、サーバ（１００）は、平面図内にユーザーが挿入した付加情報のアイコンを表示することができる。ユーザーは平面図内の任意の位置を指定し、多様な種類の付加情報（例えば、写真、ビデオ、メモなど）を挿入することで、平面図内に多くの付加情報を保存することができる。平面図上に挿入された付加情報の位置が示されるアイコンを表示することができる。

【0168】

このとき、平面図に表示されるアイコンの模様は、情報の種類に応じて様々な形で表示することができる。たとえば、ユーザーが付加情報の挿入インタフェースを介して画像を撮影したり、保存された画像を挿入したりする場合は、平面図上に写真アイコン（Ｔ１）を表示することができる。また、ユーザーが動画形式の付加情報を挿入する場合は、平面図上には動画アイコン（Ｔ２）を表示することができ、文字の形の付加情報を挿入する場合には、文字のアイコン（Ｔ３）を表示することができる。

【0169】

ただし、本発明がこれに限定されるものではなく、付加情報のアイコンは、さまざまな形及びイメージで表示することができ、ユーザーがアイコンの形を直接指定、あるいは作成するなど様々な変形を含むことができる。

【0170】

本発明に係る３Ｄツアー付加情報を表示する方法は、挿入された付加情報の位置を３Ｄツアー内の平面図上にアイコンで表示することにより、ユーザーが挿入された付加情報の位置を一目で把握できるようにすることができる。

【0171】

図１４及び図１５は、本発明の他の実施例に係る３Ｄツアー付加情報表示システムにおいて、平面図及び３Ｄツアーを合成して付加情報を表現することを説明するための図面である。

【0172】

サーバ（１００）は、付加情報を３Ｄツアーと合成することで、平面図に挿入された付加情報を３Ｄツアーで一緒に表現することができる。ユーザーは３Ｄツアー内平面図では、ユーザーが設定した付加情報の内容を確認することができる。

【0173】

図１４を参照すると、サーバ（１００）は、平面図内に多様な形態の付加情報の内容を表現することができる。また、サーバ（１００）は、３Ｄツアーの平面図上にユーザーが挿入した付加情報の位置を表示することができる。

【0174】

たとえば、＜ｃ１＞を参照すると、第１ツアー（Ｔ１）の第１平面図（ＧＰ１）上には、第１付加情報アイコン（ＩＰ１１）及び第２付加情報アイコン（ＩＰ１２）など複数個の付加情報のアイコンがそれぞれの付加情報を挿入した位置に表示することができる。ユーザーが第１平面図（ＧＰ１）上の第１付加情報アイコン（ＩＰ１１）を選択した場合、付加情報画像を含む付加情報表示窓（ＧＩ１）を表示することができる。

【0175】

＜ｃ２＞を参照すると、第２ツアー（Ｔ２）の第２平面図（ＧＰ２）上には、第３付加情報アイコン（ＩＰ２１）及び第４付加情報アイコン（ＩＰ２２）など複数個の付加情報のアイコンをユーザーが付加情報を挿入した位置に表示することができる。ユーザーが平面図（ＧＰ２）上の第３付加情報アイコン（ＩＰ２１）を選択した場合、付加情報として挿入された動画を含む付加情報表示窓（ＧＩ２）を表示することができる。

【0176】

＜ｃ３＞を参照すると、第３ツアー（Ｔ３）の第３平面図（ＧＰ３）上には、第５付加情報アイコン（ＩＰ３１）及び第６付加情報アイコン（ＩＰ３２）を含む複数個の付加情報のアイコンを表示することができる。ユーザーが平面図（ＧＰ３）上の第１部情報アイコン（ＩＰ３１）を選択すると、ユーザーが挿入した文字を含む付加情報表示窓（ＧＩ３）を表示することができる。

【0177】

図１５を参照すると、サーバ（１００）は、平面図内に挿入された付加情報を３Ｄツアー内で付加情報標柱の形で表示することができる。

【0178】

このとき、サーバ（１００）は、トラッキングを使用して平面図内に挿入された付加情報の位置を抽出した後、これに対応する位置に付加情報標柱を作成して挿入することができる。

【0179】

具体的には、サーバ（１００）は、３Ｄツアーの撮影過程で撮影された画像から複数個の特徴点を抽出することができる。続いて、サーバ（１００）は、特徴点を介して撮影画像の変化による特徴点の移動方向及び距離を算出し、これをもとに付加情報の位置座標を抽出することができる。このとき、抽出された付加情報の位置座標は、２次元座標で構成することができる。

【0180】

続いて、サーバ（１００）は、抽出された付加情報の２次元座標を３Ｄツアー上の３次元座標に変換することができる。

【0181】

続いて、サーバ（１００）は、変換された３次元座標を利用して、３Ｄツアー上に入力された付加情報をマッピング（ｍａｐｐｉｎｇ）することができる。

【0182】

続いて、サーバ（１００）は、３Ｄツアー内のマッピングされた位置に３Ｄ付加情報標柱を表示することができる。

【0183】

このとき、３Ｄ付加情報標柱の始点は、隣接する平面（例えば、床面または壁面）上に位置することができる。また、付加情報標柱の終点は、始点から所定の高さに設定することができる。 ３Ｄ付加情報標柱を始点と終点が連結された直線の形で３Ｄツアー内に表示することができる。ただし、本発明がこれに限定されるものではなく、付加情報標柱の形は、曲線、円形など様々な変形を含むことができる。

【0184】

たとえば、３Ｄツアー画面（ＴＤ）内の平面図（ＧＰ１）上には、第１付加情報アイコン（ＩＰ１）、第２付加情報アイコン（ＩＰ２）、第３付加情報アイコン（ＩＰ３）及び第４付加情報アイコン（ＩＰ４）を含む複数個の付加情報アイコンを表示することができる。

【0185】

続いて、サーバ（１００）は、特徴点抽出を介して平面図内の付加情報の位置座標を抽出し、抽出された２次元座標を３次元座標に変換して３Ｄツアー内の付加情報の挿入位置を選ぶことができる。

【0186】

続いて、サーバ（１００）は、３Ｄツアー内に挿入された付加情報に対応する付加情報標柱を作成して表示することができる。

【0187】

このとき、３Ｄツアー画面（ＴＤ）上の付加情報標柱は、平面図上の付加情報アイコンの位置とそれぞれ対応することができる。

【0188】

例えば、第１部情報標柱（ＩＳ１）を見ると、選定された位置に最も近い平面である机の平面を始点に設定することができる。また、第１付加情報アイコン（ＩＰ１）と対応する地点が終点に設定され、始点と終点を連結することにより付加情報標柱が表示することができる。

【0189】

また、第２付加情報標柱（ＩＳ２）は、第２付加情報標柱（ＩＳ２）が選定された位置に最も近い平面である間仕切りの上部面を始点として表示することができる。また、第２付加情報標柱（ＩＳ２）は、第２付加情報アイコン（ＩＳ２）の位置座標に対応する地点が終点に設定され、始点と終点を連結することにより設定することができる。

【0190】

また、第３付加情報標柱（ＩＳ３）は平面図（ＧＰ１）上の第３付加情報アイコン（ＩＳ３）の位置に最も近い平面である本棚の上のボックスの側面が始点として設定することができる。続いて、第３付加情報標柱（ＩＳ３）は、第３付加情報アイコン（ＩＳ３）の位置座標に対応する地点が終点に設定され、始点と終点を連結することにより、表示することができる。

【0191】

また、第４付加情報標柱（ＩＳ４）は、選定された位置に最も近い平面である床面を始点として表示することができる。続いて、第４付加情報標柱（ＩＳ４）は、第４付加情報アイコン（ＩＰ４）の位置座標に対応する地点が終点と表示され、始点と終点を連結することにより表示することができる。

【0192】

以下では、サーバ（１００）で実行される付加情報の位置座標を抽出するトラッキング方法について詳細に説明する。

【0193】

図１６及び図１７は、本発明の他の実施例に係る３Ｄツアー付加情報の表示システムで実行されるトラッキング方法を説明するための図面である。

【0194】

図１６を参照すると、サーバ（１００）は、トラッキング機能を利用して、平面図内の付加情報の位置座標を抽出することができる。ここでは、トラッキング機能は、ユーザーが動画を撮影するときに、ユーザー端末（２００）の動きを抽出する機能である。

【0195】

トラッキング機能が実行される場合には、動画が撮影されている間、撮影されている動画から特徴点（ＰＭ）を抽出することができる。

【0196】

続いて、サーバ（１００）は、抽出された特徴点（ＰＭ）を介して、撮影画像の変化による特徴点（ＰＭ）の移動方向及び距離を算出することができる。これにより、サーバ（１００）は、付加情報の位置変化及び方向変化を算出することができる。また、サーバー（１００）は、移動距離（ＴＤ）を算出し、３Ｄツアー撮影画面内に表示することができる。

【0197】

続いて、サーバ（１００）は、抽出された位置の変化情報を参照して、現在の位置座標を算出することができる。

【0198】

続いて、サーバ（１００）は、算出された位置座標を用いて、平面図上に挿入された付加情報を３Ｄツアー内の対応する位置に３Ｄ付加情報標柱の形で表示することができる。

【0199】

図１７を参照すると、サーバ（１００）は、ユーザー端末（２００）の画面を分割し、分割された一側には平面図（ＧＰ）を表示し、分割された他側には３Ｄ撮影画面（ＴＰ）を表示することができる。

【0200】

具体的には、ユーザー端末（２００）の第１の領域（Ｄ１）には、平面図（ＧＰ）が提供され、第２の領域（Ｄ２）には、特定空間の３Ｄツアーの撮影ができる３Ｄ撮影画面（ＴＰ）を提供することができる。このとき、平面図（ＧＰ）は、３Ｄツアーを撮影する特定空間の平面図に対応することができる。

【0201】

ユーザーが第２領域（Ｄ２）を介して撮影を進行する場合は、撮影される画像上で特徴点（ＰＭ）を抽出することができる。サーバ（１００）は、抽出された特徴点（ＰＭ）を利用して、ユーザー端末（２００）の現在位置の座標を抽出することができる。

【0202】

続いて、ユーザー端末（２００）の現在位置の座標が抽出されると、サーバ（１００）は、第１画面（Ｄ１）の平面図（ＧＰ）上に、現在撮影されているユーザー端末（２００）の位置（ＡＰ）を表示することができる。また、撮影視点の位置座標を用いて、第１撮影地点（Ｐ１）及び第２撮影地点（Ｐ２）を平面図（ＧＰ）上に表示することができ、複数の撮影地点を連結することにより、移動方向を示すことができる。また、ユーザー端末（２００）が移動した移動経路（ＭＰ）を平面図（ＧＰ）上に表示することができる。

【0203】

これにより、本発明に係る３Ｄツアー付加情報表示システムは、平面図上に挿入された付加情報を３Ｄツアー内の対応する位置に付加情報標柱の形で自動的に表示することによって、ユーザーが挿入した付加情報を平面図及び３Ｄツアー内で一緒に表示できるようにし、ユーザーの利便性を向上させることができる。

【0204】

以上のように、本発明は、たとえ限定された実施例と図面によって説明されたが、本発明は、上記の実施例に限定されるものではなく、これは、本発明が属する分野における通常の知識を有する者であれば、このような記載から多様な修正及び変形が可能である。したがって、本発明の思想は、以下に記載された特許請求の範囲によってのみ把握されるべきで、これの均等または等価的変形すべては、本発明の思想の範疇に属すると言えるだろう。

【符号の説明】

【0205】

１００ サーバ
１１０ プロセッサ
１２０ メモリ

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】