2024-98038 プログラム、記録媒体および情報処理装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024098038

(43)【公開日】2024-07-19

(54)【発明の名称】プログラム、記録媒体および情報処理装置

(51)【国際特許分類】

   H04N 23/60 20230101AFI20240711BHJP

   H04N 23/66 20230101ALI20240711BHJP

   H04N 23/62 20230101ALI20240711BHJP

   H04N 5/77 20060101ALI20240711BHJP

   H04N 5/92 20060101ALI20240711BHJP

   G03B 15/00 20210101ALI20240711BHJP

【ＦＩ】

H04N23/60 300

H04N23/66

H04N23/62

H04N5/77

H04N5/92 010

G03B15/00 W

【審査請求】有

【請求項の数】10

【出願形態】ＯＬ

(21)【出願番号】P 2024080738

(22)【出願日】2024-05-17

(62)【分割の表示】P 2020019934の分割

【原出願日】2020-02-07

(71)【出願人】

【識別番号】000006747

【氏名又は名称】株式会社リコー

(74)【代理人】

【識別番号】110000420

【氏名又は名称】弁理士法人ＭＩＰ

(72)【発明者】

【氏名】福岡 佑介

(72)【発明者】

【氏名】鳥居 理

(72)【発明者】

【氏名】丸本 耕平

(57)【要約】

【課題】 情報処理装置を実現するためのプログラムを提供すること。
【解決手段】 情報処理装置５０は、通信手段（例えば１６４）および撮像手段１６８を備える。プログラムは、コンピュータを、通信手段１６４を介して外部撮像装置１０から広角画像を取得する第１取得手段２２２、撮像手段１６８による撮像機能を呼び出す呼出手段２２６、撮像手段１６８により撮像された撮像画像を取得する第２取得手段２２８、および、第１取得手段２２２により取得した広角画像と、第２取得手段２２８により取得した撮像画像とを関連付けて管理する管理手段２３０として機能させる。
【選択図】図４

【特許請求の範囲】

【請求項1】

通信手段および撮像手段を備えるコンピュータが実行可能なプログラムであって、前記コンピュータを、
前記通信手段を介して外部撮像装置から広角画像を取得する第１取得手段、
前記撮像手段による撮像機能を呼び出す呼出手段、
前記撮像手段により撮像された撮像画像を取得する第２取得手段、および
前記第１取得手段により取得した広角画像と、前記第２取得手段により取得した撮像画像とを関連付けて管理する管理手段
として機能させるためのプログラム。

【請求項2】

前記プログラムは、前記コンピュータを、さらに、
前記外部撮像装置で撮像された広角画像中の所定位置を特定する位置特定手段
として機能させ、前記管理手段は、前記撮像画像を前記広角画像中の前記所定位置に関連付けて管理することを特徴とする、請求項１に記載のプログラム。

【請求項3】

前記コンピュータは、内蔵または外部の表示手段を含み、前記位置特定手段は、前記広角画像中の前記所定位置として、前記広角画像を前記表示手段に表示する際の表示領域の中心領域を特定する、請求項２に記載のプログラム。

【請求項4】

前記コンピュータは、内蔵または外部の表示手段と、入力手段とを含み、前記位置特定手段は、前記広角画像中の前記所定位置として、前記広角画像を前記表示手段に表示する際の表示領域において、前記入力手段により指定された領域を特定する、請求項２に記載のプログラム。

【請求項5】

前記広角画像は、全天球画像または画角が１８０度以上の画像であり、前記表示領域は、前記全天球画像または画角が１８０度以上の画像の一部を平面に投影した画像を表示する領域であり、前記所定位置は、前記全天球画像または画角が１８０度以上の画像上の座標である、請求項３または４に記載のプログラム。

【請求項6】

前記プログラムは、前記コンピュータを、さらに、
前記通信手段を介して前記外部撮像装置を制御する外部装置制御手段であって、前記外部撮像装置に対し、広角画像の撮像を行わせて、撮像された広角画像を前記コンピュータへ送信させる前記外部装置制御手段
として機能させる、請求項１～５のいずれか１項に記載のプログラム。

【請求項7】

前記プログラムは、前記コンピュータを、
前記外部撮像装置に対し撮像を行わせる指示を受け付ける第１指示部を提供する第１の提供手段、および
前記外部撮像装置の撮像がされた後、前記撮像手段による撮像機能を呼び出すための指示を受け付ける第２指示部を提供する第２の提供手段
として機能させる、請求項１～６のいずれか１項に記載のプログラム。

【請求項8】

前記管理手段は、さらに、前記第２取得手段により前記撮像手段から取得した第２の撮像画像を前記広角画像が含まれるコンテンツに関連付けて管理することを特徴とする、請求項１～７のいずれか１項に記載のプログラム。

【請求項9】

前記管理手段は、さらに、前記コンピュータが備える記録媒体に記録された記録画像、および、前記コンピュータが通信可能な画像管理システムから受信した外部取得画像の両方または一方を、前記広角画像にさらに関連付けて管理することを特徴とする、請求項１～８のいずれか１項に記載のプログラム。

【請求項10】

通信手段および撮像手段を備えるコンピュータを実現するためのプログラムを格納した記録媒体であって、前記プログラムは、前記コンピュータを、
前記通信手段を介して外部撮像装置から広角画像を取得する第１取得手段、
前記撮像手段による撮像機能を呼び出す呼出手段、
前記撮像手段により撮像された撮像画像を取得する第２取得手段、および
前記第１取得手段により取得した広角画像と、前記第２取得手段により取得する撮像画像とを関連付けて管理する管理手段
として機能させるためのプログラムである、記録媒体。

【請求項11】

前記プログラムは、前記コンピュータを、さらに、
前記外部撮像装置で撮像された広角画像中の所定位置を特定する位置特定手段
として機能させ、前記管理手段は、前記撮像画像を前記所定位置に関連付けて管理することを特徴とする、請求項１０に記載の記録媒体。

【請求項12】

前記プログラムは、前記コンピュータを、
前記外部撮像装置に対し撮像を行わせる指示を受け付ける第１指示部を提供する第１の提供手段、および
前記外部撮像装置の撮像がされた後、前記撮像手段による撮像機能を呼び出すための指示を受け付ける第２指示部を提供する第２の提供手段
としてさらに機能させる、請求項１０または１１に記載の記録媒体。

【請求項13】

通信手段および撮像手段を備える情報処理装置であって、
前記通信手段を介して外部撮像装置から広角画像を取得する第１取得手段と、
前記撮像手段による撮像機能を呼び出す呼出手段と、
前記撮像手段により撮像された撮像画像を取得する第２取得手段と、
前記第１取得手段により取得した広角画像と、前記第２取得手段により取得した撮像画像とを関連付けて管理する管理手段と
を含む、情報処理装置。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、プログラム、記録媒体および情報処理装置に関する。

【背景技術】

【0002】

従来、観光、不動産、中古車およびウェディングなどの業界において、商品または施設の紹介および宣伝のために静止画や動画が用いられている。また、近年、一般的なカメラで撮影されたスチル画像に加えて、全天球画像といった、より臨場感を伝えることができる広角画像が用いられ始めている。そして、広角画像とスチル画像やテキスト情報とを組み合わせてコンテンツを作成し、上述した目的のために活用されている。そのコンテンツ作成用の広角画像を撮影する方法として、全天球カメラおよびスマートフォンなどの端末上のアプリケーションを組み合わせて用いる方法が知られている。

【0003】

広角画像を用いたコンテンツの作成に関して、非特許文献１に開示される技術が知られている。非特許文献は、コンテンツをより効率的に生成する目的で、広角画像中の任意の場所にシーン移動のためのホットスポットを設定する操作を、撮影しながら行う手法を開示する。

【0004】

しかしながら、良く知られている方法では、広角画像に対してスチル画像を関連付けてコンテンツを作成しようとする場合に、別のデジタルカメラで撮影した画像を端末に複製して、端末上の画像フォルダから広角画像に関連付ける必要がある。そのため、事前に別のデジタルカメラで撮影した上で、端末に複製する等の手間がかかったり、画像フォルダ中から誤った画像を関連付けてしまう蓋然性があり、改善の余地があった。

【発明の概要】

【発明が解決しようとする課題】

【0005】

本開示は、上記従来技術に鑑みてなされたものであり、撮像手段を備えるコンピュータにおいて、外部撮像装置を制御して撮像する機能および上記コンピュータが備える撮像手段で撮影する機能を統合し、撮像された複数種類の画像を一括で管理することを可能とするプログラムを提供することを目的とする。

【課題を解決するための手段】

【0006】

本開示では、上記課題を解決するために、下記特徴を有する、通信手段および撮像手段を備えるコンピュータが実行可能なプログラムを提供する。本プログラムは、コンピュータを、通信手段を介して外部撮像装置から広角画像を取得する第１取得手段として機能させる。プログラムは、また、コンピュータを、撮像手段による撮像機能を呼び出す呼出手段および撮像手段により撮像された撮像画像を取得する第２取得手段として機能させる。プログラムは、さらに、コンピュータを、第１取得手段により取得した広角画像と、第２取得手段により取得した撮像画像とを関連付けて管理する管理手段として機能させる。

【発明の効果】

【0007】

上記構成により、撮像手段を備えるコンピュータにおいて、外部撮像装置を制御して撮像する機能および上記コンピュータが備える撮像手段で撮影する機能を統合し、撮像された複数種類の画像を一括で管理することが可能となる。

【図面の簡単な説明】

【0008】

【図1】図１は、本実施形態による情報端末を含む全天球画像コンテンツ作成システムを示す概略図である。

【図2】図２は、本実施形態による全天球撮像装置の断面図である。

【図3】図３は、本実施形態による（Ａ）全天球撮像装置および（Ｂ）情報端末のハードウェア構成図。

【図4】図４は、本実施形態による情報端末上で実現される全天球画像コンテンツを作成する機能に関する機能ブロック図。

【図5】図５は、本実施形態による情報端末が実行する全天球画像コンテンツを作成するためのメイン処理を示すフローチャートである（１／２）。

【図6】図６は、本実施形態による情報端末が実行する全天球画像コンテンツを作成するためのメイン処理を示すフローチャートである（２／２）。

【図7】図７は、本実施形態による情報端末が実行する間取図を登録するための処理を示すフローチャートである。

【図8】図８は、間取図上の位置への関連付けの仕方を説明する図である。

【図9】図９は、本実施形態による情報端末が実行する全天球画像を登録するための処理を示すフローチャートである。

【図10】図１０は、全天球画像上の位置への関連付けの仕方を説明する図である。

【図11】図１１は、本実施形態による情報端末が実行する通常画像を登録するための処理を示すフローチャートである。

【図12】図１２は、本実施形態による情報端末が生成する全天球画像コンテンツを管理するデータ構造を示す図である。

【図13】図１３は、本実施形態による情報端末が生成する全天球画像コンテンツをエクスポートした際のファイル構造を示す図である。

【図14】図１４は、本実施形態による情報端末が表示する画面を例示する図である。

【図15】図１５は、本実施形態による情報端末が表示する画面を例示する図である。

【図16】図１６は、本実施形態による情報端末が表示する画面を例示する図である。

【図17】図１７は、本実施形態による情報端末が表示する画面を例示する図である。

【図18】図１８は、本実施形態による情報端末が表示する画面を例示する図である。

【発明を実施するための形態】

【0009】

以下、本発明の実施形態について説明するが、本発明の実施形態は、以下に説明する実施形態に限定されるものではない。なお、説明する実施形態では、情報処理装置および該情報処理装置を実現するためのコンピュータが実行可能なプログラムとして、それぞれ、全天球撮像装置と通信する情報端末および該情報端末にインストールされるアプリケーション・プログラムを一例として説明する。

【0010】

図１は、本実施形態による情報端末５０を含む全天球画像コンテンツ作成システム１の概略構成を説明する図である。図１に示す全天球画像コンテンツ作成システム１は、全天球画像を撮影するための全天球撮像装置１０と、上記全天球撮像装置１０と通信可能な情報端末５０とを含み構成される。

【0011】

情報端末５０は、特に限定されるものではないが、スマートフォンやタブレットコンピュータ、ラップトップコンピュータなどの携帯型情報端末が好ましい。情報端末５０上には、全天球撮像装置１０を制御して全天球画像を撮像するとともに、撮像された全天球画像を用いてコンテンツ（以下、全天球画像コンテンツと参照する。）を作成するアプリケーション・プログラムがインストールされている。情報端末５０は、全天球画像コンテンツ作成機能を備えた、本実施形態における情報処理装置またはコンピュータを構成する。また、情報端末５０と、全天球撮像装置１０とを組み合わせて全天球画像コンテンツ作成システム１を構成することができる。

【0012】

図１に示す実施形態において、全天球撮像装置１０と、情報端末５０とは、特に限定されるものではないが、無線ＬＡＮ（Local Area Network）やＢｌｕｅｔｏｏｔｈ（登録商標）などの無線接続により接続されている。全天球撮像装置１０で撮像された所定のフォーマットの画像は、無線通信を介して、情報端末５０に送信され、全天球画像コンテンツ作成機能において、該画像を用いた全天球画像コンテンツの作成が行われる。なお、上記接続形態は、一例であり、有線ＬＡＮやＵＳＢ（Universal Serial Bus）などで有線接続されていてもよい。

【0013】

図１に示す実施形態では、さらに、情報端末５０は、ＬＴＥ（Long-Term Evolution）、５Ｇなどの移動体通信網を介して、または、アクセス・ポイント、モバイル・ルータ、ブロードバンドルータなどの通信機器を介して、インターネット６０に接続されている。

【0014】

図１に示す実施形態において、インターネット６０上には、コンテンツ公開サーバ７０が設けられている。コンテンツ公開サーバ７０は、情報端末５０から送付された全天球画像コンテンツを受信し、受信した全天球画像コンテンツを蓄積および管理するサーバである。コンテンツ公開サーバ７０は、また、情報端末５０や他の情報端末からの全天球画像コンテンツの閲覧要求に応答して、要求された全天球画像コンテンツを要求元装置へ送信する。これにより、要求元装置の表示デバイス上で全天球画像コンテンツが閲覧可能となる。コンテンツ公開サーバ７０は、オンプレミス環境またはクラウド環境上のコンピュータとして構成されてもよい。

【0015】

コンテンツ公開サーバ７０は、特定の実施形態では、ｗｅｂ（アプリケーション）サーバとして構成することができ、ＨＴＴＰ（HyperText Transfer Protocol）に従い、登録対象の全天球画像コンテンツを含むコンテンツ登録要求にかかるリクエストを受信し、その全天球画像コンテンツを適切な記憶領域に蓄積し、例えばデータベースで管理する。コンテンツ公開サーバ７０は、さらに、全天球画像コンテンツが指定された画像閲覧要求にかかるリクエストを受信し、対象となる全天球画像コンテンツを読み出し、該コンテンツを含むレスポンスを応答する。レスポンスを受信した要求元装置では、ウェブブラウザや特定のアプリケーションにより、受信した全天球画像コンテンツが表示デバイス上で閲覧可能となる。本実施形態において、コンテンツまたは全天球画像コンテンツは、１または複数の素材となるデータの集まりである。このコンテンツまたは全天球画像コンテンツの素材としては、全天球画像、通常画像、全天球動画、通常動画、テキスト（文字）、音声などが含まれ得る。また、説明する実施形態では、コンテンツの一例として、少なくとも全天球画像を含む全天球コンテンツを用いて説明するが、全天球画像に代えて、全天球画像以外の広角画像を用いたコンテンツであってもよい。

【0016】

以下、図２および図３を参照しながら、本実施形態による全天球撮像装置１０および情報端末５０の構成について説明する。図２は、本実施形態による全天球撮像装置１０の断面図である。図２に示す全天球撮像装置１０は、撮像体１２と、上記撮像体１２およびコントローラやバッテリなどの部品を保持する筐体１４と、上記筐体１４に設けられた操作ボタン１８とを備える。

【0017】

図２に示す撮像体１２は、２つの結像光学系２０Ａ，２０Ｂと、２つの撮像素子２２Ａ，２２Ｂとを含み構成される。撮像素子２２Ａ，２２Ｂは、ＣＣＤ（Charge Coupled Device）センサやＣＭＯＳ（Complementary Metal Oxide Semiconductor）センサなどである。結像光学系２０は、例えば６群７枚の魚眼レンズとして構成される。上記魚眼レンズは、図２に示す実施形態では、１８０度（＝３６０度／ｎ；光学系数ｎ＝２）より大きい全画角を有し、好適には、１９０度以上の画角を有する。なお、結像光学系２０および撮像素子２２の数は、特に限定されるものではなく、３以上であってもよい。

【0018】

２つの結像光学系２０Ａ，２０Ｂの光学素子（レンズ、プリズム、フィルタおよび開口絞り）は、撮像素子２２Ａ，２２Ｂに対して位置関係が定められる。結像光学系２０Ａ，２０Ｂの光学素子の光軸が、対応する撮像素子２２の受光領域の中心部に直交して位置するように、かつ、受光領域が、対応する魚眼レンズの結像面となるように位置決めが行われる。

【0019】

図２に示す実施形態では、結像光学系２０Ａ，２０Ｂは、同一仕様のものであり、それぞれの光軸が合致するようにして、互いに逆向きに組み合わせられる。撮像素子２２Ａ，２２Ｂは、受光した光分布を画像信号に変換し、コントローラ上の画像処理ブロックに順次、画像フレームを出力する。

【0020】

詳細は後述するが、撮像素子２２Ａ，２２Ｂでそれぞれ撮像された画像は、合成処理されて、これにより、立体角４πステラジアンの画像（以下「全天球画像」と参照する。）が生成される。全天球画像は、撮影地点から見渡すことのできる全ての方向を撮影したものとなる。説明する実施形態では、好ましくは、全天球画像を生成するものとして説明するが、水平面のみ３６０度を撮影したパノラマ画像であってもよく、全天球または水平３６０度の全景のうちの一部を撮影した画像であってもよい。また、全天球画像は、静止画であってもよいし、動画であってもよい。

【0021】

図３（Ａ）は、本実施形態による全天球撮像装置１０のハードウェア構成を示す。全天球撮像装置１０は、ＣＰＵ（Central Processing Unit）１１２と、ＲＯＭ（Read Only Memory）１１４と、画像処理ブロック１１６と、動画圧縮ブロック１１８と、静止画圧縮ブロック１１９と、ＤＲＡＭ（Dynamic Random Access Memory）インタフェース１２０を介して接続されるＤＲＡＭ１３２と、外部センサインタフェース１２４を介して接続される加速度センサ１３６とを含み構成される。

【0022】

ＣＰＵ１１２は、全天球撮像装置１０の各部の動作および全体動作を制御する。ＲＯＭ１１４は、ＣＰＵ１１２が解読可能なコードで記述された制御プログラムや各種パラメータを格納する。画像処理ブロック１１６は、２つの撮像素子１３０Ａ，１３０Ｂ（図２における撮像素子２２Ａ，２２Ｂである。）と接続され、それぞれで撮像された画像の画像信号が入力される。画像処理ブロック１１６は、ＩＳＰ（Image Signal Processor）などを含み構成され、撮像素子１３０Ａ，１３０Ｂから入力された画像信号に対し、シェーディング補正、ベイヤー補間、ホワイト・バランス補正、ガンマ補正などを行う。画像処理ブロック１１６は、さらに、撮像素子１３０Ａ，１３０Ｂから取得された複数の画像を合成処理し、これにより、上述した全天球画像を生成する。

【0023】

動画圧縮ブロック１１８は、ＭＰＥＧ（Moving Picture Experts Group）－４ ＡＶＣ（Advanced Video Coding）／Ｈ．２６４などの動画圧縮および伸張を行うコーデック・ブロックである。動画圧縮ブロック１１８は、生成された全天球画像の動画データを生成するために用いられる。静止画圧縮ブロック１１９は、ＪＰＥＧ（Joint Photographic Experts Group）、ＴＩＦＦ（Tagged Image File Format）などの静止画圧縮および伸張を行うコーデック・ブロックである。静止画圧縮ブロック１１９は、生成された全天球画像の静止画データを生成するために用いられる。ＤＲＡＭ１３２は、各種信号処理および画像処理を施す際にデータを一時的に保存する記憶領域を提供する。加速度センサ１３６は、３軸の加速度成分を検出し、検出された加速度成分は、鉛直方向を検出して全天球画像の天頂補正を施すために用いられる。加速度センサ１３６に限定されず、加速度センサに加えて、３軸角速度センサおよび電子コンパスのいずれかまたは両方の機能を備えてもよい。

【0024】

全天球撮像装置１０は、さらに、外部ストレージインタフェース１２２と、ＵＳＢ（Universal Serial Bus）インタフェース１２６と、シリアルブロック１２８と、映像出力インタフェース１２９とを含み構成される。外部ストレージインタフェース１２２には、外部ストレージ１３４が接続される。外部ストレージインタフェース１２２は、メモリカードスロットに挿入されたメモリカードなどの外部ストレージ１３４に対する読み書きを制御する。

【0025】

ＵＳＢインタフェース１２６には、ＵＳＢコネクタ１３８が接続される。ＵＳＢインタフェース１２６は、ＵＳＢコネクタ１３８を介して接続される、情報端末５０やパーソナル・コンピュータなどの外部機器とのＵＳＢ通信を制御する。シリアルブロック１２８は、情報端末５０やパーソナル・コンピュータなどの外部機器とのシリアル通信を制御し、無線モジュール１４０が接続される。映像出力インタフェース１２９は、ＨＤＭＩ（High-Definition Multimedia Interface，ＨＤＭＩは登録商標である。）などの外部ディスプレイと接続するためのインタフェースであり、撮像した画像を外部ディスプレイなどに映像出力することができる。

【0026】

電源スイッチの操作によって電源がオン状態になると、上記制御プログラムがメインメモリにロードされる。ＣＰＵ１１２は、メインメモリに読み込まれたプログラムに従って、装置各部の動作を制御するとともに、制御に必要なデータをメモリ上に一時的に保存する。これにより、全天球撮像装置１０の後述する各機能部および処理が実現される。

【0027】

図３（Ｂ）は、本実施形態による情報端末５０のハードウェア構成を示す。図３（Ｂ）に示す情報端末５０は、ＣＰＵ１５２と、ＲＡＭ１５４と、内蔵ストレージ１５６と、入力装置１５８と、外部ストレージ１６０と、ディスプレイ１６２と、無線モジュール１６４と、ＵＳＢコネクタ１６６と、内蔵カメラ１６８とを含み構成される。

【0028】

ＣＰＵ１５２は、情報端末５０の各部の動作および全体動作を制御する。ＲＡＭ１５４は、ＣＰＵ１５２の作業領域を提供する。内蔵ストレージ１５６は、ＣＰＵ１５２が解読可能なコードで記述された、オペレーティング・システムや本実施形態による情報端末５０側の処理を担うアプリケーションのプログラム、画像などの各種データを格納する。

【0029】

入力装置１５８は、タッチスクリーンなどの入力装置であり、ユーザインタフェースを提供する、本実施形態における入力手段を構成する。外部ストレージ１６０は、メモリカードスロットなどに装着された着脱可能な記録媒体であり、動画形式の画像データや静止画データなどの各種データを記録する。無線モジュール１６４は、全天球撮像装置１０などの外部機器との無線ＬＡＮ通信の接続を確立する。ＵＳＢコネクタ１６６は、外部機器とのＵＳＢ接続を確立する。

【0030】

なお、以下の説明では、全天球撮像装置１０との通信を行うための通信手段として、無線モジュール１６４を用いるものとして説明するが、特定の規格に限定されるものではなく、Ｂｌｕｅｔｏｏｔｈ（登録商標）やワイヤレスＵＳＢなどの他の無線通信、ＵＳＢコネクタ１６６、有線ＬＡＮ（Local Area Network）などの有線通信で外部機器と接続されてもよい。

【0031】

ディスプレイ１６２は、ユーザが操作するための操作画面の表示、撮影前または撮影中の全天球撮像装置１０による撮像画像のモニタ画像の表示、保存された動画や静止画の再生、閲覧のための表示を行う。ディスプレイ１６２および入力装置１５８により、ユーザは、操作画面を介して全天球撮像装置１０に対する撮影指示や各種設定変更を行うことが可能となる。ディスプレイ１６２は、本実施形態における内蔵の表示手段を構成する。そのほか、情報端末５０にはＨＤＭＩ（登録商標）などの映像インタフェースが設けられていてもよく、映像インタフェースを介して、ディスプレイ装置、プロジェクタ装置などの外部の表示手段に画面を出力することもできる。

【0032】

内蔵カメラ１６８は、当該情報端末５０が備える標準的なカメラであり、通常の静止画または動画を撮像し、静止画データおよび動画データを生成する。内蔵カメラ１６８は、本実施形態における撮像手段を構成する。

【0033】

情報端末５０に電源が投入され電源がオン状態になると、ＲＯＭや内蔵ストレージ１５６から各種プログラムが読み出され、ＲＡＭ１５４にロードされる。ＣＰＵ１５２は、ＲＡＭ１５４に読み込まれたプログラムに従って、装置各部の動作を制御するとともに、制御に必要なデータをメモリ上に一時的に保存する。これにより、情報端末５０の後述する各機能部および処理が実現される。上記アプリケーション・プログラムは、コンピュータを、各手段として動作せるための本実施形態におけるプログラムである。上記プログラムがコンピュータにインストールされて、コンピュータが該プログラムを実行することにより、本実施形態による情報端末５０が実現される。

【0034】

なお、コンテンツ公開サーバ７０のハードウェア構成については、詳細な説明を割愛するが、図３（Ｂ）に示す情報端末５０のハードウェア構成と同様の構成を有しており、適宜、用途に応じて、ハードウェア・コンポーネントの追加、削除または変更がなされればよい。

【0035】

以下、図４を参照しながら、本実施形態による全天球画像コンテンツ作成機能について、より詳細に説明する。図４は、本実施形態による情報端末５０上で実現される全天球画像コンテンツ作成に関連する機能ブロック図である。

【0036】

図４に示すように、情報端末５０の機能ブロック２００は、通信部２０２と、内蔵カメラ制御部２０４と、表示制御部２０６と、入力部２０８と、全天球画像コンテンツ作成部２２０と、コンテンツ格納部２４０とを含み構成される。

【0037】

通信部２０２は、外部機器とのインタフェースである、無線モジュール１６４を制御して、全天球撮像装置１０との通信を実行するブロックである。内蔵カメラ制御部２０４は、上述した撮像手段としての内蔵カメラ１６８を制御するブロックである。

【0038】

表示制御部２０６は、表示手段としてのディスプレイ１６２を制御するブロックである。入力部２０８は、入力手段としての入力装置１５８を制御するブロックである。

【0039】

好適な実施形態において、全天球画像コンテンツ作成部２２０は、全天球撮像装置１０を制御して全天球画像を撮像する機能および当該情報端末５０が備える内蔵カメラ１６８による撮像機能を統合し、これらにより撮像された複数種類の画像（全天球画像および通常画像）を一括管理する、アプリケーションとして提供される。

【0040】

全天球画像コンテンツ作成部２２０は、全天球撮像装置制御部２２２と、内蔵撮像機能呼出部２２６と、画像情報管理部２３０と、ＵＩ（ユーザインタフェース）部２３４とを含み構成される。

【0041】

全天球撮像装置制御部２２２は、通信部２０２を介して、外部の全天球撮像装置１０を制御する。全天球撮像装置制御部２２２は、全天球撮像装置１０に対し指令を発行することにより、全天球画像の撮像を行わせて、かつ、撮像された全天球画像を情報端末５０へ送信させる。全天球撮像装置制御部２２２は、また、通信部２０２を介して、全天球撮像装置１０から全天球画像を取得する。全天球撮像装置制御部２２２は、本実施形態における外部装置制御手段および第１取得手段を構成する。全天球画像は、静止画であってもよいし、動画であってもよいが、以下の説明では、静止画である場合を中心に説明する。

【0042】

内蔵撮像機能呼出部２２６は、内蔵カメラ制御部２０４を用いて、内蔵カメラ１６８による撮像機能を呼び出す。内蔵撮像機能呼出部２２６は、また、内蔵カメラ制御部２０４から、内蔵カメラ１６８で撮像された撮像画像を取得する。内蔵撮像機能呼出部２２６は、本実施形態における呼出手段および第２取得手段を構成する。

【0043】

なお、アプリケーションから内蔵カメラ１６８を直接的または間接的に制御するための実装方法としては、例えば３つある。第１の方法は、内蔵カメラ１６８を用いて撮像するためのカメラ・アプリケーション自体を呼び出す方法である。第２の方法は、内蔵カメラ１６８を用いて撮像するためのカメラ機能を呼び出す方法である。第３の方法は、内蔵カメラ１６８を制御する機能自体を当該全天球画像コンテンツ作成部２２０内で実装する方法である。ユーザの操作性の観点からは、第２の方法および第３の方法が好ましいが、いずれの実装方法も、アプリケーションから内蔵カメラ１６８を直接的または間接的に制御する点では共通する。

【0044】

また、図４は、先に示したいずれの方法にも対応したものであり、内蔵撮像機能呼出部２２６は、カメラ機能としての内蔵カメラ制御部２０４を呼び出し、内蔵カメラ１６８による撮像機能を呼び出す。しかしながら、これに限定されるものではない。

【0045】

なお、説明する実施形態では、内蔵カメラ１６８が撮像する画像として、通常の静止画（スチル画像とも参照する。）が取得されるものとして説明するが、動画であってもよい。また、説明する実施形態において、全天球画像が画像フォルダ（カメラロール）にあった場合に、通常画像を撮影するために内蔵カメラ１６８を用いることができる。

【0046】

画像情報管理部２３０は、全天球撮像装置制御部２２２により取得した全天球画像と、内蔵撮像機能呼出部２２６より取得した通常画像とを関連付けて管理しており、全天球画像コンテンツをコンテンツ格納部２４０に保存する。全天球画像コンテンツは、１以上の全天球画像および１以上の撮像画像で構成されることになる。画像情報管理部２３０は、本実施形態における管理手段を構成する。画像情報管理部２３０は、また、コンテンツ格納部２４０への保存とともに、または保存に代えて、外部のコンテンツ公開サーバ７０に対し、作成した全天球画像コンテンツを送信（いわゆるアップロード）し、登録するよう構成してもよい。

【0047】

図４に示す画像情報管理部２３０は、関連付け位置特定部２３２を含む。関連付け位置特定部２３２は、全天球撮像装置１０で撮像された全天球画像中の所定位置を、上記通常画像などを関連付ける関連付け先として特定することができる。関連付け位置特定部２３２は、本実施形態における位置特定手段を構成する。

【0048】

特定の実施形態において、関連付け位置特定部２３２は、全天球画像中の所定位置として、ディスプレイ１６２に全天球画像を表示した際の表示領域の中心領域を特定することができる。あるいは、別の実施形態においては、関連付け位置特定部２３２は、全天球画像中の所定位置として、ディスプレイ１６２に全天球画像を表示する際の表示領域において、上記入力装置１５８により指定された指定領域を特定することができる。

【0049】

なお、画像情報管理部２３０は、上記通常画像を、全天球画像中の所定の位置に関連付けるほか、全天球画像を含むより上位の単位であるコンテンツに関連付けることもできる。また、図４では省略されているが、画像情報管理部２３０は、内蔵撮像機能呼出部２２６より取得した通常画像のほか、情報端末５０が内蔵する内蔵ストレージ１５６や外部ストレージ１６０に記録された画像、および、情報端末５０が通信可能な画像管理システム（例えば、コンテンツ公開サーバ７０や他のサービス）から受信した外部取得の画像の両方または一方を、全天球画像やコンテンツに関連付けて管理することができる。さらに、画像情報管理部２３０は、第１の全天球画像の所定の位置に、第２の全天球画像を関連付けて管理することもでき、またその場合において、第２の全天球画像の所定の位置に、第１の全天球画像を関連付けて管理することもできる。

【0050】

ＵＩ部２３４は、全天球画像コンテンツ作成に関する画面の遷移を管理するとともに、画面やそれを構成するボタンなどのＧＵＩ（Graphical User Interface）を提供する。ＵＩ部２３４は、ＧＵＩ部品として、全天球撮像装置１０に撮像を行わせる指示を受け付ける第１指示部、および、内蔵カメラ１６８による撮像機能を呼び出すための指示を受け付ける第２指示部を提供する、本実施形態における第１および第２の提供手段を構成する。

【0051】

以下、図５～図１８を参照しながら、本実施形態における全天球画像コンテンツ作成処理について、より具体的に説明する。図５、図６、図７、図９および図１１は、本実施形態における情報端末５０が実行する、全天球画像コンテンツ作成処理を示すフローチャートである。なお、図５、図６、図７、図９および図１１は、本実施形態による複数種類の画像の関連付けにかかわる主要な処理を示しており、他の機能や例外処理についての処理は省略されている点に留意されたい。図１４～図１８は、本実施形態による情報端末５０でディスプレイ１６２上に表示される各種画面を例示する図である。

【0052】

図１４（Ａ）は、全天球画像コンテンツ作成アプリケーションのトップ画面４００を例示する。図１４（Ａ）に示すトップ画面４００には、全天球画像コンテンツの作成を開始するための「コンテンツ作成」ボタン４０２が配置されている。図５および図６に示す処理は、例えば、図１４（Ａ）に示すトップ画面４００において、ユーザにより、「コンテンツ作成」ボタン４０２をタップされたことに応答して、図５に示すステップＳ１００から開始される。

【0053】

ステップＳ１０１では、情報端末５０は、図１４（Ｂ）に示すコンテンツ情報入力画面４１０を表示する。ユーザは、図１４（Ｂ）に示すコンテンツ情報入力画面４１０において、テキストボックス４１２，４１４などを用いて、コンテンツ名称やコンテンツを示す任意の英数字などのコンテンツに関する情報を入力することができる。また、コンテンツ情報入力画面４１０には、間取図の挿入を行うための「マップ挿入」ボタン４１６が配置されている。ユーザは、「マップ挿入」ボタン４１６をタップすることにより、所定の間取図の画像をコンテンツに挿入する処理を呼び出すことができる。コンテンツ情報入力画面４１０には、さらに、コンテンツの基本的情報の入力を終了させて、コンテンツの中身を作成する次の処理へ進むための「ＯＫ」ボタン４１８が配置されている。

【0054】

ステップＳ１０２では、情報端末５０は、図１４（Ｂ）に示すコンテンツ情報入力画面４１０においてユーザから受け付けた指示に応じて、処理を分岐させる。ステップＳ１０２で、「マップ挿入」ボタン４１６がタップされて間取図の挿入の指示を受け付けたと判定した場合（間取図挿入）は、ステップＳ１０３へ処理が分岐される。

【0055】

ステップＳ１０３では、情報端末５０は、図１４（Ｃ）に示すように、間取図のソースの選択を受け付けるソース選択メニューを表示する。ソース選択メニューには、ソースとして内蔵カメラ１６８を選択するための「カメラで撮影」ボタン４２２および情報端末５０内の画像フォルダを選択するための「カメラロールから画像を選択」ボタン４２４が含まれる。いずれかのボタンがタップされると、ステップＳ１０４へ処理が進められる。

【0056】

なお、説明する実施形態では、図１４（Ｃ）に示す画面４１０において、「カメラで撮影」ボタン４２２および「カメラロールから画像を選択」ボタン４２４のみが示されているが、ソースとして、ネットワーク上の外部の画像管理システムを選択するためのボタンなどが設けられてもよい。

【0057】

ステップＳ１０４では、情報端末５０は、間取図登録処理を実行する。ここで、間取図は、アプリケーションにおいて、一連の全天球画像の関連付け先とする基本画像である。なお、本実施形態では、コンテンツ全体を互いに関連付ける基本となる画像として、間取図（フロアマップや見取り図などとも言う）を基本画像としている。しかしながら、間取図以外の画像を基本画像としてもよいし、間取図が無く、コンテンツ全体が、全天球画像と、通常画像の２種類の画像で構成されていても良い。

【0058】

図７は、間取図登録処理を示すフローチャートである。図７に示す処理は、図５に示すステップＳ１０４の処理で呼び出されて、ステップＳ２０１から開始される。ステップＳ２０２では、情報端末５０は、内蔵カメラ１６８での撮影が選択されたか否かを判定する。ステップＳ２０２で、ソース選択メニューにおいて「カメラで撮影」ボタン４２２がタップされており、内蔵カメラ１６８での撮影が選択されたと判定された場合（ＹＥＳ）は、ステップＳ２０３へ処理が進められる。

【0059】

ステップＳ２０３では、情報端末５０は、内蔵撮像機能呼出部２２６により内蔵カメラ制御部２０４を呼び出す。図１４（Ｄ）は、内蔵カメラ制御部２０４の呼び出しに応答して表示される、間取図を内蔵カメラで撮影するための撮影画面４３０を示す。図１４（Ｄ）に示す撮影画面４３０において、撮影ボタン４３２がタップされて、撮像処理の実行が完了すると、ステップＳ２０４へ処理が進められる。ステップＳ２０４では、情報端末５０は、内蔵カメラ１６８で撮像された通常画像を取得する。

【0060】

一方、ステップＳ２０２で、内蔵カメラでの撮影が選択されていないと判定された場合（ＮＯ）は、ステップＳ２０７へ処理が進められる。ステップＳ２０７では、情報端末５０は、情報端末５０がソースとして選択されたか否かを判定する。ステップＳ２０７で、ソース選択メニューにおいて「カメラロールから画像を選択」ボタン４２４がタップされており、情報端末５０が選択されていると判定された場合（ＹＥＳ）は、ステップＳ２０８へ処理が分岐される。

【0061】

ステップＳ２０８では、情報端末５０は、情報端末５０内（例えば画像フォルダ）に保存された画像の一覧を読み出し、選択可能に一覧表示する。ステップＳ２０９では、情報端末５０は、情報端末５０内の画像一覧からの選択を受け付け、選択された画像を取得し、ステップＳ２０５へ処理を進める。

【0062】

ステップＳ２０５では、情報端末５０は、画像が取得された（撮影で取得、または内部または外部から取得）か否かを判定する。ステップＳ２０５で、画像が取得されたと判定された場合（ＹＥＳ）は、ステップＳ２０６へ処理が進められる。ステップＳ２０６では、情報端末５０は、取得した画像を間取図としてコンテンツに関連付けて登録し、間取図「有り」として記録し、ステップＳ２１０で、図５の処理に戻る。この場合、制御がステップＳ１０１に戻され、更新されたコンテンツ情報入力画面が表示される。

【0063】

図１５（Ａ）は、間取図が設定された場合の更新されたコンテンツ情報入力画面４１０を示す。図１５（Ａ）に示すコンテンツ情報入力画面４１０では、新たに間取図の画像４１５が表示されている。なお、説明する実施形態では、間取図は、内蔵カメラ１６８により撮像された画像としているが、これは、手元の図面を撮影する場合であり、写真に限定されず、事前に作図された図面やイラストなどの画像であってもよい。この画像は、例えば画像フォルダ（カメラロール）に保存されたものであってよい。

【0064】

一方、ステップＳ２０５で、撮影や画像の選択が行われずに戻った場合など画像が取得されていないと判定された場合（ＮＯ）は、ステップＳ２１０へ直接処理が進められて、図５の処理に戻される。また、ステップＳ２０７で、ソース選択メニューにおいてボタン４２２，４２４外の領域がタップされるなどし、いずれのソースも選択されていないと判定された場合（ＮＯ）は、ステップＳ２１０へ直接処理が進められ、図５の処理に戻される。なお、ここでソース選択メニューとして、ボタン４２２、４２４以外に、例えば、情報端末５０が通信可能な画像管理システム（例えば、コンテンツ公開サーバ７０や他のサービス）から外部取得の画像を取得できるような構成されても良い。

【0065】

再び図５を参照すると、ステップＳ１０２で、図１４（Ｂ）または図１５（Ａ）に示すコンテンツ情報入力画面４１０において「ＯＫ」ボタン４１８がタップされて、コンテンツの中身を作成するための次の処理へ進める指示を受け付けた判定した場合（次画面へ）は、ステップＳ１０５へ処理が分岐される。

【0066】

ステップＳ１０５では、情報端末５０は、間取図の有無に応じて処理を分岐させる。ステップＳ１０５で、間取図「有り」と判定された場合（ＹＥＳ）は、ステップＳ１０６へ処理が分岐される。

【0067】

ステップＳ１０６では、情報端末５０は、間取図上の位置に関連付けて全天球画像を登録するために、コンテンツ作成画面（間取図有り）４４０を表示する。ステップＳ１０７では、情報端末５０は、コンテンツ作成画面（間取図有り）４４０においてユーザから受け付けた指示に応じて、処理を分岐させる。なお、間取図が登録され、かつ、未だ一つも全天球撮像画像が登録されていない状態では、コンテンツ作成画面（間取図有り）４４０は、図１５（Ｂ）に示すような状態となっている。

【0068】

図１５（Ｂ）に示すコンテンツ作成画面（間取図有り）４４０には、間取図の画像が表示される表示領域４４２が配置されている。この表示領域４４２は、ユーザによりタップなどの位置指定操作を検出した場合に、操作にかかる表示領域４４２上の位置の座標を取得するよう構成されている。なお、任意で、ピンチなどの操作に応答して、表示領域４４２中に表示される間取図の画像を拡大または縮小できるように構成してもよい。

【0069】

図８は、間取図上の位置への関連付けの仕方を説明する図である。表示領域４４２は、所定の大きさでディスプレイ上に表示され、その表示領域４４２内に間取図の画像が所定の縮尺で配置される。そのため、表示領域４４２中の指定位置３０２は、図８に示すような相対位置（Ｘ１／（Ｘ１＋Ｘ２）、Ｙ１／（Ｙ１＋Ｙ２））から、間取図の画像上の座標へ変換することが可能である。コンテンツ作成画面（間取図有り）４４０において、表示領域４４２がタップなどされると、表示領域４４２における操作された指定位置に対応した間取図の画像上の座標値が特定され、その位置への全天球画像の登録の指示が受け付けられる。なお、図８では、左上を原点とし、座標値を０～１の範囲としているが、原点の取り方は、限定されないし、座標値の範囲も限定されるものではない。

【0070】

なお、ステップＳ１０６で示すコンテンツ作成画面（間取図有り）４４０においては、全天球画像の登録（「画像登録」）のほか、コンテンツの「保存」およびコンテンツ内の登録済みの全天球画像の確認（「画像確認」）などを呼び出すことができる。しかしながら、全天球画像が全く未登録の状態では、「画像確認」のためのＧＵＩ部品は表示されない。一方、一時保存が可能なようにコンテンツの「保存」のためのＧＵＩ部品は表示してもよい。

【0071】

ステップＳ１０７で、コンテンツ作成画面（間取図有り）４４０において「画像登録」を受け付けたと判定された場合は、ステップＳ１０８へ処理を分岐させる。ステップＳ１０８では、情報端末５０は、図１５（Ｃ）に示すソース選択メニューを表示する。ソース選択メニューには、ソースとして、外部の全天球撮像装置１０を選択するための「全天球カメラで撮影」ボタン４５２および情報端末５０内の画像フォルダを選択するための「カメラロールから全天球画像を選択」ボタン４５４とが配置されている。いずれかのボタンがタップされると、処理は、ステップＳ１０９へ進められる。なお、「全天球カメラで撮影」ボタン４５２は、本実施形態における第１指示部を構成する。

【0072】

ステップＳ１０９では、情報端末５０は、コンテンツと、指定位置に対応する間取図の画像上の位置座標値とを、これから登録する全天球画像の関連付け先として設定し、ステップＳ１１０では、情報端末５０は、全天球画像登録処理を実行する。

【0073】

一方、ステップＳ１０５で、間取図が無いと判定された場合（ＮＯ）は、ステップＳ１１１へ処理が分岐される。ステップＳ１１１では、情報端末５０は、コンテンツ作成画面（間取図無し）４６０を表示する。ステップＳ１１２では、情報端末５０は、コンテンツ作成画面（間取図無し）４６０においてユーザから受け付けた指示に応じて、処理を分岐させる。なお、間取図が未登録で、かつ、未だ一つも全天球撮像画像が登録されていない状態では、コンテンツ作成画面（間取図無し）４６０は、図１５（Ｄ）に示すような状態となっている。図１５（Ｄ）に示すコンテンツ作成画面（間取図無し）４６０にも、図１５（Ｃ）に示す画面と同様に、「全天球カメラで撮影」ボタン４６２および「カメラロールから全天球画像を選択」ボタン４６４とが配置されている。いずれかのボタンがタップされると、全天球画像の登録（「画像登録」）の指示が受け付けられ、処理は、ステップＳ１１２へ進められる。

【0074】

なお、ステップＳ１１１で示すコンテンツ作成画面（間取図無し）４６０においては、全天球画像の登録（「画像登録」）のほか、コンテンツの「保存」およびコンテンツ内の登録済みの全天球画像の確認（「画像確認」）などを呼び出すことができる。全天球画像未登録の状態では、「画像確認」のためのＧＵＩ部品は表示されないが、一時保存のためコンテンツの「保存」のためのＧＵＩ部品が表示されてもよい。

【0075】

ステップＳ１１２で、コンテンツ作成画面（間取図無し）４６０において「画像登録」を受け付けたと判定された場合は、ステップＳ１１３へ処理を分岐させる。ステップＳ１１３では、情報端末５０は、コンテンツ自体を、これから撮影する全天球画像の関連付け先として設定し、ステップＳ１１０では、情報端末５０は、全天球画像登録処理を実行する。

【0076】

また、説明する実施形態では、図１５（Ｃ）および図１５（Ｄ）に示す画面において、それぞれ、ボタン４５２，４５４およびボタン４６２，４６４のみが示されているが、ソースとして、全天球撮像装置１０内の撮像済みかつ未転送の全天球画像を選択するためのボタンや、ネットワーク上の外部の画像管理システムの全天球画像を選択するためのボタンなどが設けられてもよい。

【0077】

図９は、全天球画像登録処理を示すフローチャートである。図９に示す処理は、図５に示すステップＳ１１０の処理で呼び出されて、ステップＳ３００から開始される。ステップＳ３０１では、情報端末５０は、外部の全天球撮像装置１０での撮影が指定されたか否かを判定する。ステップＳ３０１で、図１５（Ｃ）に示す画面４４０においてソース選択メニューのボタン４５２がタップされたり、または、図１５（Ｄ）に示す画面４６０においてボタン４６２がタップされたりし、全天球撮像装置１０での撮影が選択されたと判定された場合（ＹＥＳ）も、ステップＳ３０２へ処理が進められる。

【0078】

ステップＳ３０２では、情報端末５０は、全天球撮像装置制御部２２２により全天球撮像装置１０を制御して、全天球画像を撮像させる。図１６（Ａ）は、全天球撮像装置１０で撮影するための全天球撮影画面４７０を示す。全天球撮影画面４７０において、撮影ボタン４７２がタップされると、全天球撮像装置制御部２２２から通信部２０２を介して全天球撮像装置１０へ撮像の指令が発行され、全天球撮像装置１０で撮像処理が実行され、撮像が完了すると、情報端末５０への画像転送が開始される。図１６（Ｂ）は、全天球撮像装置１０から情報端末５０へ全天球画像が転送中であることを示す転送画面４８０を示す。ステップＳ３０３では、情報端末５０は、全天球撮像装置制御部２２２により、外部撮像装置である全天球撮像装置１０から転送される全天球画像を取得し、ステップＳ３１３へ処理を進める。

【0079】

一方、ステップＳ３０１で、全天球撮像装置１０での撮影が選択されていないと判定された場合（ＮＯ）は、ステップＳ３０４へ処理が分岐される。ステップＳ３０４では、情報端末５０は、ソースとして、外部撮影装置である全天球撮像装置１０内での撮影済みの画像が選択されているか否かを判定する。ステップＳ３０４で、全天球撮像装置１０内の撮影済み画像がソースとして選択されていると判定された場合（ＹＥＳ）は、ステップＳ３０５へ処理が分岐される。

【0080】

ステップＳ３０５では、情報端末５０は、全天球撮像装置制御部２２２により、全天球撮像装置１０から撮像済み（かつ情報端末５０へ未転送）の全天球画像一覧を取得し、選択可能に一覧表示する。ステップＳ３０６では、情報端末５０は、全天球撮像装置１０内の全天球画像一覧からの所定の画像の選択を受け付け、ステップＳ３０３で、選択された全天球画像を全天球撮像装置１０から受信し、ステップＳ３１３へ処理が進められる。

【0081】

一方、ステップＳ３０４で、外部の全天球撮像装置１０内の撮像済み画像も選択されていないと判定された場合（ＮＯ）は、ステップＳ３０７へ処理が分岐される。なお、ステップＳ３０４の判定は、図１５（Ｃ）に示すメニューおよび図１５（Ｄ）に示す画面４６０において、全天球撮像装置１０内の撮像済み（かつ情報端末５０へ未転送）の全天球画像をソースとして選択するためのボタンが設けられた場合に実施されるが、省略されてもよく、その場合は、直接ステップＳ３０７へ進められてもよい。

【0082】

ステップＳ３０７では、情報端末５０は、情報端末５０内での画像がソースとして選択されているか否かを判定する。ステップＳ３０７で、情報端末５０がソースとして選択されていると判定された場合（ＹＥＳ）は、ステップＳ３０８へ処理が分岐される。

【0083】

ステップＳ３０８では、情報端末５０は、情報端末５０内の全天球画像一覧を読み出す。なお、全天球画像は、ＪＰＥＧなどの一般的な画像と同様のフォーマットであるが、メタ情報として全天球画像であるか否かを識別するための情報が付されている。このメタ情報に基づいて、全天球画像ではない画像が選択された場合に、他の画像を選択するよう促すことができる。あるいは、取得された画像一覧から全天球画像とそれ以外の通常撮影の画像とを区別して表示したり、または、予め全天球画像のみを抽出して、表示する一覧に含めたりすることができる。また、情報端末５０内には、既に撮影済みかつ引き取り済み全天球画像が保存されているものとする。ステップＳ３０９では、情報端末５０は、情報端末５０内の全天球画像一覧からの選択を受け付け、選択された画像を読み出し、ステップＳ３１３へ処理を進める。

【0084】

一方、ステップＳ３０７で、情報端末５０内が選択されていないと判定された場合（ＮＯ）は、ステップＳ３１０へ処理が分岐される。ステップＳ３１０では、情報端末５０は、情報端末５０が通信可能な画像管理システム（例えば、コンテンツ公開サーバ７０）から、ネットワークを介して、全天球画像一覧を取得する。なお、画像管理システムには、既に撮影済みの全天球画像がアップロードされているものとする。ステップＳ３１１では、情報端末５０は、画像管理システム内の全天球画像一覧からの選択を受け付け、ステップＳ３１２で、ネットワークを介して全天球画像を受信し、ステップＳ３１３へ処理を進める。

【0085】

なお、ステップＳ３１０～３１２の処理は、図１５（Ｃ）に示すソース選択メニューおよび図１５（Ｄ）に示す画面４６０において、ネットワーク上の画像管理システムをソースとして選択するためのボタンが設けられた場合に実施されるが、省略されてもよく、その場合は、直接ステップＳ３１６へ進められてもよい。

【0086】

ステップＳ３１３では、情報端末５０は、使用する全天球画像を確定する画面を表示する。ステップＳ３１４で、情報端末５０は、使用する全天球画像が確定されたか否かを判定する。図１６（Ｃ）は、全天球画像を確定するための全天球画像確定画面４９０を示す。全天球画像確定画面４９０には、現在の表示している全天球画像の使用を確定するためのボタン４９４と、撮影や選択のやり直しをするためのボタン４９２とが配置されている。

【0087】

ステップＳ３１４で、全天球画像確定画面４９０においてボタン４９４がタップされて、画像が確定したと判定された場合（ＹＥＳ）は、ステップＳ３１５へと処理が進められる。ステップＳ３１５では、情報端末５０は、確定された全天球画像を、図５のステップＳ１０９またはＳ１１３で設定された関連付け先に関連付けてコンテンツを登録し、ステップＳ３１６で、図５の処理に戻る。なお、この関連付け先の登録は、事後的に任意の位置に移動させることが可能である。一方、ステップＳ３１４で、図１６（Ｃ）に示す全天球画像確定画面４９０においてボタン４９２がタップされて、やり直しが指定された判定された場合（ＮＯ）は、ステップＳ３０１へと処理が戻される。なお、ここでは、同じソースが選択された状態でやり直しを行うものとして説明するが、ソースの選択からやり直してもよい。

【0088】

図９に示す全天球画像登録処理が完了すると、再びステップＳ１０５に戻り、ステップＳ１０６またはステップＳ１１１で、更新されたコンテンツ作成画面が表示される。

【0089】

ここで、ステップＳ１１１で更新された、間取図が未登録で、かつ、１つの全天球撮像画像が登録された状態の場合のコンテンツ作成画面を図１６（Ｄ）に示す。

【0090】

図１６（Ｄ）に示すコンテンツ作成画面（間取図無し）４６０には、全天球画像が表示される表示領域４６６と、コンテンツの保存を行うための「保存」ボタン４６８とが配置されている。表示領域４６６には、全天球画像を撮影した場所を入力する画面を呼び出すためのＧＵＩ部品４６５が配置されている。コンテンツ作成画面（間取図無し）４６０には、さらに、「カメラロールから全天球画像を選択」ボタン４６４と、全天球撮像装置で撮影するためのアイコン４６９とが配置されている。

【0091】

所定の全天球画像の表示領域４６６は、登録済みの全天球画像の確認（「画像確認」）を呼び出すためのＧＵＩ部品である。「保存」ボタン４６８は、コンテンツの保存処理を呼び出すためのＧＵＩ部品である。全天球画像が１以上登録されることで、「画像確認」が表示され、必要に応じてコンテンツの「保存」のＧＵＩ部品が表示される。

【0092】

また、図１８（Ｄ）は、ステップＳ１０６で更新された、間取図の登録があり、かつ、２つの全天球撮像画像が登録された状態の場合のコンテンツ作成画面を示す。

【0093】

図１８（Ｄ）に示すコンテンツ作成画面（間取図有り）４４０は、図１６（Ｄ）に示すコンテンツ作成画面（間取図無し）４６０と同様な全天球撮影画像の表示領域４４６の上部に間取図の表示領域４４２が表示されている。なお、図１８（Ｄ）は、間取図の２つの位置に関連付けてそれぞれ全天球画像が登録された状態を示している。間取図の表示領域４４２上には、２つの位置にマーカ４４２ａ，４４２ｂが付されている。そして、図１８（Ｄ）は、２つのマーカ４４２ａ，４４２ｂのうちの「１」で示す位置のマーカ４４２ｂに対応した全天球画像が選択された状態を示している。

【0094】

表示領域４４６には、選択中の全天球画像が表示され、その撮影場所を入力する画面を呼び出すためのＧＵＩ部品４４５が配置されている。間取図の表示領域４４２には、また、全天球画像の表示中のアングルを示す扇型のアイコン４４２ｃが重畳されている。全天球画像の表示領域４４６は、登録済みかつ選択中の全天球画像の確認（「画像確認」）を呼び出すためのＧＵＩ部品である。図１８（Ｄ）に示すコンテンツ作成画面（間取図有り）４４０には、図１６（Ｄ）と同様に、「保存」ボタン４４８が配置されている。

【0095】

以下、図１６（Ｄ）に示すコンテンツ作成画面（間取図無し）４６０を用いて、全天球画像に通常画像のアノテーションを付与する実施形態について説明するが、先に示したように、コンテンツ作成画面（間取り図有り）４４０でも同様のことが実施される。

【0096】

図１６（Ｄ）に示すコンテンツ作成画面（間取図無し）４６０において、所定の全天球画像に対応する表示領域４６６がタップされると、「画像確認」の指示が受け付けられる。ステップＳ１０７またはステップＳ１１２で、コンテンツ作成画面４４０／４６０において「画像確認」を受け付けたと判定された場合は、図５に示すポイントＢを介して、図６に示すステップＳ１１４へ処理が分岐される。

【0097】

ステップＳ１１４では、情報端末５０は、図１７（Ａ）に示すような指定の全天球画像を確認する画像確認画面５００を表示する。図１７（Ａ）に示す画像確認画面５００は、「戻る」ボタン５０２と、指定の全天球画像を表示する表示領域５０４と、メニューボタン５０８とを含み構成される。この画面において、フリックなどの方向を指示する操作に応答して、表示領域５０４中に表示される全天球画像中の表示部分を移動できるように構成されているものとする。

【0098】

図１７（Ａ）に示す画像確認画面５００において、メニューボタン５０８がタップされると、図１７（Ｂ）に示すように、画像確認画面５００において、画像アノテーションを行うための「アノテーションの追加」ボタン５１０を含むメニューが表示される。「アノテーションの追加」ボタン５１０がタップされると、アノテーション追加の指示が受け付けられる。図１７（Ａ）に示す画像確認画面５００において「戻る」ボタン５０２がタップされると、コンテンツ作成画面（例えば、図１６（Ｄ）のコンテンツ作成画面４６０）へ戻るという指示が受け付けられる。

【0099】

ステップＳ１１５で、図１７（Ｂ）に示す画像確認画面５００において「アノテーション追加」の指示を受け付けたと判定された場合は、ステップＳ１１６へ処理が分岐される。ステップＳ１１６では、情報端末５０は、関連付け位置特定部２３２により、関連付けする位置を特定する。図１７（Ｂ）に示す画像確認画面５００において、メニューボタン５０８を経由してアノテーション追加が呼び出された場合は、全天球画像上の表示領域５０４に現在表示中の部分の略中央に対応する位置が、アノテーションを追加する関連付け位置として特定される。

【0100】

また、上述した説明では、図１７（Ａ）に示す画像確認画面５００において、メニューボタン５０８をタップすることで、「アノテーションの追加」ボタン５１０が表示されものとして説明した。しかしながら、これに限定されるものではなく、図１７（Ａ）に示す画像確認画面５００において、表示領域５０４中の所定位置（例えば５０５）がロングタップ（長押し）されたことに応答して、「アノテーションの追加」ボタン５１０が表示されてもよい。表示領域５０４中の領域のタップを経由してアノテーション追加が呼び出された場合は、表示領域５０４中の領域がタップされた際の位置に対応する全天球画像上の位置が、アノテーションを追加する関連付け位置として特定される。

【0101】

図１０は、全天球画像上の位置への関連付けの仕方を説明する図である。図１０のデータ構造３３０に示すように、全天球画像は、横軸が－１８０度から＋１８０度までの経度、縦軸が－９０度から＋９０度までの緯度で表されるフォーマットで生成される。

【0102】

この全天球画像を、情報端末５０のディスプレイ１６２などの平面デバイスに表示する場合、全天球画像を球体オブジェクト３１０に貼り付けて、例えば球体オブジェクト３１０の中心に仮想カメラ３１２を配置し、その仮想カメラ３１２から観察される投影画像３１４として表示することができる。つまり、表示領域５０４は、所定の大きさでディスプレイ上に表示され、その表示領域５０４内に全天球画像から生成された投影画像３１４が配置される。表示中の投影画像３１４における中心位置に対応する全天球画像上の位置は、仮想カメラ３１２の向きから取得することができる。一方、表示領域５０４中の任意の位置（例えばタップされた位置）３２２は、図１０に示すような相対位置（Ｘ１／（Ｘ１＋Ｘ２）、Ｙ１／（Ｙ１＋Ｙ２））から、球体オブジェクト３１０上の投影画像３１４に対応する範囲における点３１６を経て、全天球画像フォーマット３３０上の座標３３２へ変換することが可能である。なお、図１０では、中心を原点とし、座標値を経度－１８０度～＋１８０度および緯度－９０度～＋９０度の範囲としているが、原点の取り方は、限定されないし、範囲も限定されるものではない。例えば、経度０度から３６０度、緯度０度から１８０度で表現されてもよい。また、広角画像が全天球画像以外の１８０度以上の画角を持つ画像の場合は、先に示した全天球画像の座標に代えて、当該画角にあった形で画像の座標が設定される。

【0103】

再び図６を参照すると、ステップＳ１１７では、情報端末５０は、特定された全天球画像上の位置を関連付け先として設定する。ステップＳ１１８では、情報端末５０は、図１７（Ｃ）に示すアノテーション設定画面５２０を表示する。図１７（Ｃ）に示すアノテーション設定画面５２０には、「画像を選択する」ボタン５２２が配置されている。ユーザは、「画像を選択する」ボタン５２２をタップすることにより、情報端末５０が備える内蔵カメラ１６８による撮像画像を登録する処理を呼び出すことができる。なお、アノテーションとして、画像のみを追加する場合を例示するが、画像と合わせてテキスト入力欄を設けテキストを追加することもできる。

【0104】

ステップＳ１１９では、情報端末５０は、図１７（Ｄ）に示すように、通常画像のソースの選択を受け付けるソース選択メニューを表示する。ソース選択メニューは、ソースとして、内蔵カメラを選択するための「カメラで撮影」ボタン５２４および情報端末５０内の画像フォルダを選択するための「カメラロールから画像を選択」ボタン５２６とが配置されている。いずれかのボタンがタップされると、ステップＳ１２０へ処理が進められる。なお、「カメラで撮影」ボタン５２４は、本実施形態における第２指示部を構成する。

【0105】

ステップＳ１２０では、情報端末５０は、通常画像登録処理を実行する。

【0106】

図１１は、通常画像を登録するための処理を示すフローチャートである。図１１に示す処理は、図５に示すステップＳ１２０の処理で呼び出されて、ステップＳ４００から開始される。ステップＳ４０１では、情報端末５０は、内蔵カメラでの撮影が指定されたか否かを判定する。ステップＳ４０１で、図１７（Ｄ）のソース選択メニューにおいてボタン５２４がタップされており、内蔵カメラ１６８での撮影が選択されたと判定された場合（ＹＥＳ）は、ステップＳ４０２へ処理が進められる。

【0107】

ステップＳ４０２では、情報端末５０は、内蔵撮像機能呼出部２２６により内蔵カメラ制御部２０４を呼び出す。図１８（Ａ）は、内蔵カメラ制御部２０４の呼び出しに応答して表示される、通常画像を内蔵カメラで撮影するための撮影画面５３０を示す。図１８（Ａ）に示す撮影画面５３０において、撮影ボタン５３２がタップされて、撮像処理の実行が完了すると、ステップＳ４１０へ処理が進められる。ステップＳ４０３では、情報端末５０は、内蔵カメラ１６８での撮像された通常画像を取得し、ステップＳ４１０へ処理が進められる。

【0108】

一方、ステップＳ４０１で、内蔵カメラ１６８での撮影が選択されていないと判定された場合（ＮＯ）は、ステップＳ４０４へ処理が分岐される。ステップＳ４０４では、情報端末５０は、情報端末５０がソースとして選択されているか否かを判定する。ステップＳ４０４で、情報端末５０がソースとして選択されていると判定された場合（ＹＥＳ）は、ステップＳ４０５へ処理が分岐される。

【0109】

ステップＳ４０５では、情報端末５０は、情報端末５０内の画像一覧を読み出し、選択可能に一覧表示する。ステップＳ４０６では、情報端末５０は、情報端末５０内の画像一覧からの選択を受け付け、選択された画像を読み出し、ステップＳ４１０へ処理を進める。

【0110】

一方、ステップＳ４０４で、情報端末５０内が選択されていないと判定された場合（ＮＯ）は、ステップＳ４０７へ処理が分岐される。ステップＳ４０７では、情報端末５０は、情報端末５０が通信可能な画像管理システム（例えば、コンテンツ公開サーバ７０）から、ネットワークを介して、通常画像一覧を取得し、一覧表示する。ステップＳ４０８では、情報端末５０は、画像管理システム内の通常画像一覧からの選択を受け付け、ステップＳ４０９で、ネットワークを介して通常画像を受信し、ステップＳ４１０へ処理を進める。なお、ステップＳ４０７～４０９の処理は、図１７（Ｄ）に示すメニューにおいて、画像管理システムをソースとして選択するためのボタンが設けられた場合に実施されるが、省略されてもよく、その場合は、直接ステップＳ４１３へ進められてもよい。

【0111】

ステップＳ４１０では、情報端末５０は、使用する通常画像を確定する画面を表示する。ステップＳ４１０で、情報端末５０は、使用する通常画像が確定されたか否かを判定する。図１８（Ｂ）は、通常画像を確認する画像確定画面５４０を示す。画像確定画面５４０には、現在の表示している画像の使用を確定するためのボタン５４２と、撮影や選択のやり直しをするためのボタン５４４とが配置されている。

【0112】

ステップＳ４１１で、画像確定画面５４０においてボタン５４２がタップされて、画像が確定したと判定された場合（ＹＥＳ）は、ステップＳ４１２へと処理が進められる。ステップＳ４１２では、情報端末５０は、確定された通常画像を関連付け先に関連付けてコンテンツを登録し、ステップＳ４１３で、図６の処理に戻る。ここでの関連付け先は、ステップＳ１１７で特定された全天球画像上の所定の位置の座標値や所定の位置を示す向きとなる。なお、この関連付け先の登録は、事後的に任意の位置に移動させることが可能である。一方、ステップＳ４１１で、画像確定画面５４０においてボタン５４４がタップされて、やり直しが指定された判定された場合（ＮＯ）は、ステップＳ４０１へと処理が戻される。

【0113】

図６の処理に戻ると、ポイントＢを介して、ステップＳ１１４で処理が戻される。ステップＳ１１４では、情報端末５０は、図１８（Ｃ）に示すような更新された画像確認画面５００を表示する。図１８（Ｃ）に示す画像確認画面５００では、全天球画像の表示領域５０４中に、通常画像が関連付けられた位置を示すマーカ５５０が表示される。このマーカ５５０の座標は、ステップＳ４１２で、通常画像を関連付けて登録した際の関連付け先として設定された座標に対応する。また、１以上のアノテーションがあるので、アノテーションを削除するボタン５５２およびアノテーションを編集するためのボタン５５４が表示されるが、アノテーションの削除および編集についてはこれ以上立ち入らない。

【0114】

ステップＳ１１５で、情報端末５０は、図１７（Ａ）または図１８（Ｃ）に示す画像確認画面５００において「戻る」５０２がタップされ、上位の階層へ戻るとの指示を受け付けたと判定された場合は、ポイントＣを介して、図５に示すステップＳ１０５へ処理を分岐させる。この場合は、さらに、コンテンツの間取図上の所定位置またはコンテンツ自体に関連付けて別の全天球画像を登録するための処理が行われることとなる。

【0115】

ここで、図１６（Ｄ）に示すようなコンテンツ作成画面（間取図無し）４６０または全天球画像が間取図の所定位置に登録されたコンテンツ作成画面（間取図有り）４４０が表示された状態とする。ステップＳ１０７またはステップＳ１１２で、コンテンツ作成画面４４０／４６０において「保存」の指示を受け付けたと判定された場合は、ポイントＡを介して、図６に示すステップＳ１２１へ処理が分岐される。

【0116】

ステップＳ１２１では、情報端末５０は、作成した全天球画像コンテンツをコンテンツ格納部２４０に保存し、ステップＳ１２２で本処理を終了させる。なお、コンテンツ格納部２４０への保存に代えて、また、コンテンツ格納部２４０への保存とともに、コンテンツ公開サーバ７０に全天球画像コンテンツをアップロードする形としてもよい。

【0117】

なお、詳細はこれ以上立ち入らないが、全天球画像コンテンツの保存およびアップロードの前に、登録した全天球画像や通常画像の削除および差し替え、全天球画像や通常画像の所定の領域に対するぼかし、スタンプ、縮小などの画像加工、コンテンツや全天球画像の名称の入力、変更、削除を施す機能を備えてもよい。

【0118】

なお、上述した説明では、通常画像をアノテーションとして、全天球画像中の所定位置に関連付けるものとして説明したが、通常画像に限定されず、別の全天球画像を追加してもよいし、テキストや音声などの他の種類の情報をアノテーションとして追加することもできる。また、通常画像を全天球画像中の所定位置に関連付けるものとして説明したが、所定の位置ではなく全天球画像全体に関連付けてもよいし、全天球画像を含む上位の単位であるコンテンツに関連付けてもよい。

【0119】

例えば、不動産物件や設備を紹介するコンテンツにおいて、各部屋の設備を撮影した通常画像は、各部屋を撮影した全天球画像に所定の位置で関連付ける一方で、エントランスやベランダからの眺望などの通常画像を撮影する場合がある。この場合に、通常画像は、各部屋の全天球画像ではなく、コンテンツ全体に関連付けることができる。また、各部屋の全天球画像間を、所定位置（例えばドアに対応する位置）で互いに関連付けてもよい。

【0120】

図１２は、本実施形態による情報端末５０が生成する全天球画像コンテンツを管理するデータ構造を示す図である。図１２（Ａ）は、コンテンツ識別子（ＩＤ）と名称などの情報を対応付けて管理するコンテンツ情報管理テーブルを示す。図１２（Ｂ）は、全天球画像ＩＤとその保存先を対応付けて管理する全天球画像管理テーブルを示す。図１２（Ｃ）は、通常画像ＩＤとその保存先を対応付けて管理する通常画像管理テーブルを示す。

【0121】

図１２（Ｄ）は、部屋ＩＤなどの全天球画像の関連付け対象となるコンテンツ要素のＩＤと、その名称と、関連付けられる全天球画像ＩＤと、間取図上の座標とを対応付けて管理するコンテンツ要素管理テーブルを示す。ここで、間取図上の座標は、先に説明したように例えば図８で説明したように座標が求められて記憶される。なお、テーブル中、Ｎｕｌｌは、値が存在しないことを示している。つまり、コンテンツＩＤ＝１０２は、間取図を含まないコンテンツまたは間取図上の位置と紐付かない部屋（コンテンツ要素）であることを示す。

【0122】

図１２（Ｅ）は、間取図ＩＤと、コンテンツＩＤと、その間取図に対応する通常画像を識別する通常画像ＩＤとを対応付けて管理する間取図管理テーブルを示す。図１２（Ｆ）は、アノテーションＩＤと、そのアノテーションに関連付ける全天球画像ＩＤと、その全天球画像上でアノテーションを配置する座標と、アノテーションの説明と、アノテーションとして付加する通常画像を識別する通常画像ＩＤとを対応付けて管理するアノテーション管理テーブルを示す。ここで、全天球画像上の座標は、図１０で説明した様に座標が求められる。なお、アノテーション管理テーブルにおいて、全天球画像に関連付けることに代えて、コンテンツ全体を関連付けるようなテーブル構成でも良い。

【0123】

図１３は、本実施形態による情報端末５０が生成する全天球画像コンテンツをエクスポートした際のファイル構造を示す図である。図１３においては、コンテンツの名称を有するフォルダの下位に、間取図の画像のファイル、眺望の画像のファイル、全天球画像の名称を有する各フォルダが配置されている。全天球画像の名称を有する各フォルダには、全天球画像のファイルと、全天球画像に関連付けられた通常画像のファイルが配置されている。

【0124】

上述した処理により、全天球画像中の任意の位置と紐付けられた通常画像を有する、図１２に模式的に示すデータ構造を有する全天球画像コンテンツが作成される。そして、全天球画像コンテンツは、ビューアでの閲覧時、アノテーションとして通常画像を全天球画像内に埋め込んで表示することができる。例えば、ビューアにおいて全天球画像中のアノテーション位置に配置された画像要素（マーカ、アイコン、シンボル）に対する所定の操作（例えばタップ、クリックなど）に応答して、その位置に関連付けられた通常画像がポップアップ表示されるように構成される。

【0125】

以上説明したように、上述した実施形態によれば、撮像手段を備える情報処理装置（コンピュータ）において、外部撮像装置を制御して撮像する機能および上記情報処理装置（コンピュータ）が備える撮像手段で撮影する機能を統合し、撮像された複数種類の画像を一括で管理することが可能な情報処理装置を実現するためのプログラム、該プログラムを記録した記録媒体および該情報処理装置を提供することができる。

【0126】

上述した実施形態では、外部撮像装置を制御して撮像する機能および上記情報処理装置自身が備える撮像手段で撮像する機能が単一のアプリケーションに統合されている。このため、ユーザは、外部撮像装置を制御して撮像する機能と、撮像手段で撮像する機能とを別々のアプリケーションで利用する必要がない。

【0127】

また、別々のアプリケーションで個々の撮像機能を利用する場合は、カメラロールなどの画像フォルダに一旦保存して、画像フォルダを経由してコンテンツに登録することとなる。しかしながら、その場合、画像フォルダ内では、時系列で画像が保存される場合があるものの、別々のコンテンツに登録すべき画像が入り乱れて保存されている場合もあり、画像をコンテンツに正しく登録することが難しい場合がある。これに対し、上述した実施形態では、複数種類の画像が一括管理可能であるので、画像フォルダを経由する場合のような紛らわしさが軽減される。

【0128】

そして、コンテンツ作成用の全天球画像の撮影および通常画像の撮影をまとめることにより、作成者の手間を軽減することができる。作成者は、情報端末５０にインストールされたコンテンツ作成アプリケーション上で通常画像の撮影までを行うことができるので、全天球撮像装置１０および情報端末５０があれば、通常のカメラなどの撮影機材が不要になり、従来の通常画像、動画の撮影の手間が不要になる。さらに、コンテンツ、間取図（適宜）、全天球画像および通常画像間の関連付けを手間なくできるので、撮影した通常画像の分類および管理の手間が軽減される。

【0129】

なお、上述までの実施形態では、作成されるコンテンツとして、広角画像として全天球画像を含む全天球画像コンテンツを一例として説明した。しかしながら、広角画像としては、上述した全天球画像に限定されず、水平方向３６０度のパノラマ画像であってもよし、全天球または水平３６０度の全景のうちの一部を撮影した画像であってもよい。ここで、広角画像は、通常画像と比較して相対的に画角が大きい画像をいい、好ましくは、少なくとも水平画角１８０度以上の画角を持つ画像をいう。また、広角画像は、１または複数の撮像装置により撮像される画角の大きな画像であってよい。また、通常画像は、静止画および動画であってよく、広角画像より狭い画角の画像であり、より具体的には、画角が１００～２５度で、好ましくは、７０～４５度の間にある画像であってよい。

【0130】

また、上述までの実施形態では、全天球画像および通常画像は、静止画であるものとして説明した。しかしながら、全天球画像および通常画像は、それぞれ、静止画に限定されず、動画や、一連の静止画を含み構成される半動画（タイムラプス動画、インターバル撮影画像、アニメーション）などであってもよい。その場合は、上述した全天球画像の位置に加えて、時刻やフレームの区間などの時間情報にさらに関連付けて、画像間の関連付けが行われる。

【0131】

上記で説明した実施形態の各機能は、一または複数の処理回路によって実現することが可能である。ここで、本開示における「処理回路」とは、電子回路により実装されるプロセッサのようにソフトウェアによって各機能を実行するようプログラミングされたプロセッサや、上記で説明した各機能を実行するよう設計されたASIC（Application Specific Integrated Circuit）、DSP（digital signal processor）、FPGA（field programmable gate array）や従来の回路モジュール等のデバイスを含むものとする。

【0132】

また上記機能は、アセンブラ、Ｃ、Ｃ＋＋、Ｃ＃、Ｊａｖａ（登録商標）、などのレガシープログラミング言語やオブジェクト指向プログラミング言語などで記述されたコンピュータ実行可能なプログラムにより実現でき、ＲＯＭ、ＥＥＰＲＯＭ、ＥＰＲＯＭ、フラッシュメモリ、フレキシブルディスク、ＣＤ－ＲＯＭ、ＣＤ－ＲＷ、ＤＶＤ－ＲＯＭ、ＤＶＤ－ＲＡＭ、ＤＶＤ－ＲＷ、ブルーレイディスク、ＳＤカード、ＭＯなど装置可読な記録媒体に格納して、あるいは電気通信回線を通じて頒布することができる。

【0133】

これまで本発明の実施形態について説明してきたが、本発明の実施形態は上述した実施形態に限定されるものではなく、他の実施形態、追加、変更、削除など、当業者が想到することができる範囲内で変更することができ、いずれの態様においても本発明の作用・効果を奏する限り、本発明の範囲に含まれるものである。

【符号の説明】

【0134】

１０…全天球撮像装置、１２…撮像体、１４…筐体、１８…操作ボタン、２０…結像光学系、２２…撮像素子、５０…情報端末、６０…インターネット、７０…、コンテンツ公開サーバ、１１２…ＣＰＵ、１１４…ＲＯＭ、１１６…画像処理ブロック、１１８…動画圧縮ブロック、１１９…静止画圧縮ブロック、１２０…ＤＲＡＭインタフェース、１２２…外部ストレージインタフェース、１２４…外部センサインタフェース、１２６…ＵＳＢインタフェース、１２８…シリアルブロック、１２９…映像出力インタフェース、１３０…撮像素子、１３２…ＤＲＡＭ、１３４…外部ストレージ、１３６…加速度センサ、１３８…ＵＳＢコネクタ、１４０…無線モジュール、１５２…ＣＰＵ、１５４…ＲＡＭ、１５６…ＨＤＤ、１５８…入力装置、１６０…外部ストレージ、１６２…ディスプレイ、１６４…無線モジュール、１６６…ＵＳＢコネクタ、１６８…内蔵カメラ、２００…機能ブロック、２０２…通信部、２０４…内蔵カメラ制御部、２０６…表示制御部、２０８…入力部、２２０…全天球画像コンテンツ作成部、２２２…全天球撮像装置制御部、２２６…内蔵撮像機能呼出部、２３０…画像情報管理部、２３２…関連付け位置特定部、２３４…ＵＩ部、２４０…コンテンツ格納部

【先行技術文献】

【非特許文献】

【0135】

【非特許文献1】”Ｈｏｗ ｔｏ ｃａｐｔｕｒｅ ａ ３６０° ｔｏｕｒ”、［ｏｎｌｉｎｅ］、２０１６年７月１９日公開、ｙｏｕｔｏｂｅ、［令和２年２月５日検索］、インターネット＜URL： https://youtu.be/BA3EaMNU_Cw?t=162＞

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【手続補正書】

【提出日】2024-05-30

【手続補正1】

【補正対象書類名】特許請求の範囲

【補正対象項目名】全文

【補正方法】変更

【補正の内容】

【特許請求の範囲】

【請求項1】

通信部および撮像部を備える情報処理装置であって、
前記情報処理装置にはアプリケーションのプログラムがインストールされ、
前記アプリケーションは、
前記通信部を介して外部撮像装置に対し、広角画像の撮像、撮像された広角画像の前記情報処理装置への送信を制御する機能と、
前記撮像部に対し、通常画像の撮像を制御する機能と、
前記外部撮像装置によって撮像された前記広角画像と、前記撮像部によって撮像された少なくとも１つの前記通常画像とを関連付ける機能と、
前記関連付けられた、前記広角画像と、前記少なくとも１つの通常画像とに基づいて、コンテンツを作成する機能であり、前記コンテンツが表示装置に表示される際に、前記通常画像が前記広角画像に関連付けられていることを示す第１の表示部品が前記広角画像上に表示されるように前記コンテンツを作成する機能と
を備える情報処理装置。

【請求項2】

前記アプリケーションは、
前記広角画像中の所定位置を特定する機能を備え、
前記関連付ける機能は、前記通常画像を前記広角画像中に特定された前記所定位置に関連付ける
請求項１に記載の情報処理装置。

【請求項3】

前記作成する機能は、前記コンテンツが前記表示装置に表示される際に、前記第１の表示部品が前記広角画像中の前記特定された所定位置に表示され、前記第１の表示部品に対する操作に応じて、前記所定位置に関連付けられている前記通常画像が表示されるように前記コンテンツを作成する
請求項２に記載の情報処理装置。

【請求項4】

前記所定位置を特定する機能は、前記広角画像中の前記所定位置として、前記広角画像が前記表示装置に表示される際の表示領域の中心位置を特定する
請求項２に記載の情報処理装置。

【請求項5】

前記アプリケーションは、
前記広角画像中の所定位置の指定を受け付ける機能を備え、
前記関連付ける機能は、前記広角画像中の前記所定位置として、前記広角画像が前記表示装置に表示される際の表示領域において、前記受け付ける機能により指定された領域を特定する
請求項２に記載の情報処理装置。

【請求項6】

前記アプリケーションは、
前記基本画像における前記広角画像の前記撮像位置を特定する機能を備え、
前記関連付ける機能は、前記広角画像を前記基本画像中に特定された前記撮像位置に関連付ける
請求項１に記載の情報処理装置。

【請求項7】

前記作成する機能は、前記コンテンツが前記表示装置に表示される際に、前記撮像位置を示す第２の表示部品が前記基本画像上に表示されるように前記コンテンツを作成する
請求項６に記載の情報処理装置。

【請求項8】

前記作成する機能は、前記基本画像が前記表示装置に表示される際に、前記第２の表示部品に対する操作に応じて、前記撮像位置に関連付けられている前記広角画像が表示されるように前記コンテンツを作成する
請求項７に記載の情報処理装置。

【請求項9】

前記関連付ける機能は、前記情報処理装置が備える記録媒体に記録された記録画像、および、前記情報処理装置が通信可能な画像管理システムから受信した外部取得画像の両方または一方を、前記広角画像に関連付けて管理する
請求項７に記載の情報処理装置。

【請求項10】

通信部および撮像部を備える情報処理装置を実現するためのコンピュータ実行可能なプログラムをコンピュータ可読に格納する記録媒体であって、前記プログラムは、前記情報処理装置にインストールされるアプリケーションのプログラムであり、
前記アプリケーションは、
前記通信部を介して外部撮像装置に対し、広角画像の撮像、撮像された広角画像の前記情報処理装置への送信を制御する機能と、
前記撮像部に対し、通常画像の撮像を制御する機能と、
前記外部撮像装置によって撮像された前記広角画像と、前記撮像部によって撮像された少なくとも１つの前記通常画像とを関連付ける機能と、
前記関連付けられた、前記広角画像と、前記少なくとも１つの通常画像とに基づいて、コンテンツを作成する機能であり、前記コンテンツが表示装置に表示される際に、前記通常画像が前記広角画像に関連付けられていることを示す第１の表示部品が前記広角画像上に表示されるように前記コンテンツを作成する機能と
を備える、記録媒体。