特許 6591006 撮像装置、通信システム及び撮像方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6591006

(24)【登録日】2019年9月27日

(45)【発行日】2019年10月16日

(54)【発明の名称】撮像装置、通信システム及び撮像方法

(51)【国際特許分類】

   H04N 5/232 20060101AFI20191007BHJP

   G06F 16/00 20190101ALI20191007BHJP

【ＦＩ】

   H04N5/232 030

   H04N5/232 300

   H04N5/232 220

   H04N5/232 939

   G06F16/00

【請求項の数】5

【全頁数】14

(21)【出願番号】特願2018-131570(P2018-131570)

(22)【出願日】2018年7月11日

(62)【分割の表示】特願2014-94827(P2014-94827)の分割

【原出願日】2014年5月1日

(65)【公開番号】特開2018-191311(P2018-191311A)

(43)【公開日】2018年11月29日

【審査請求日】2018年7月11日

(73)【特許権者】

【識別番号】000000376

【氏名又は名称】オリンパス株式会社

(74)【代理人】

【識別番号】100108855

【弁理士】

【氏名又は名称】蔵田 昌俊

(74)【代理人】

【識別番号】100103034

【弁理士】

【氏名又は名称】野河 信久

(74)【代理人】

【識別番号】100153051

【弁理士】

【氏名又は名称】河野 直樹

(74)【代理人】

【識別番号】100179062

【弁理士】

【氏名又は名称】井上 正

(74)【代理人】

【識別番号】100189913

【弁理士】

【氏名又は名称】鵜飼 健

(74)【代理人】

【識別番号】100199565

【弁理士】

【氏名又は名称】飯野 茂

(72)【発明者】

【氏名】佐藤 明伸

(72)【発明者】

【氏名】鈴木 隆

(72)【発明者】

【氏名】吉田 洋一

(72)【発明者】

【氏名】野中 修

【審査官】 高野 美帆子

(56)【参考文献】

【文献】 特開２０１０−０４４５８０（ＪＰ，Ａ）

【文献】 特開２０１３−１２８２５１（ＪＰ，Ａ）

【文献】 特開２０１１−２２３２５０（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｈ０４Ｎ ５／２２２−５／２５７

Ｇ０６Ｆ １６／００

Ｇ０６Ｆ １７／３０

(57)【特許請求の範囲】

【請求項1】

対象物を撮像して前記対象物に係る画像を取得する撮像部と、
前記撮像部で取得された画像を記録する記録部と、
前記撮像部で取得された画像から特徴情報を認識する画像認識部と、
前記認識された特徴情報からガイド情報を検索する検索部と、
を具備し、
前記検索部は、前記ガイド情報の検索を静止画により行い、成功しなかった場合に動画により行うことを特徴とする撮像装置。

【請求項2】

前記ガイド情報の検索は、前記撮像部によって得られる画像の色、明るさ、ピント状態を前記ガイド情報の検索に適した条件とした後で行われることを特徴とする請求項１に記載の撮像装置。

【請求項3】

撮像装置と、撮像装置と通信される外部装置とを有する通信システムであって、
前記撮像装置は、
対象物を撮像して前記対象物に係る画像を取得する撮像部と、
前記撮像部で取得された画像を記録する記録部と、
前記撮像部で取得された画像から特徴情報を認識する画像認識部と、
前記画像認識部による認識結果を前記外部装置に送信し、前記外部装置からガイド情報を受信する第１の通信部と、
前記ガイド情報の検索を選択的に適用するための操作部と、
を具備し、
前記外部装置は、
前記認識結果を用いて検索して得られる前記ガイド情報を検索する検索部と、
前記撮像装置から前記認識結果を受信し、前記撮像装置に前記ガイド情報を送信する第２の通信部と、
を具備し、
前記検索部は、前記ガイド情報の検索を静止画により行い、成功しなかった場合に動画により行うことを特徴とする通信システム。

【請求項4】

対象物を撮像して前記対象物に係る画像を取得する撮像部で取得された画像を記録部に記録することと、
前記撮像部で取得された画像から特徴情報を認識することと、
前記認識された特徴情報からガイド情報を検索することと、
を具備し、
前記ガイド情報の検索は静止画により行われ、成功しなかった場合に動画により行われることを特徴とする撮像方法。

【請求項5】

対象物を撮像して前記対象物に係る画像を取得する撮像部で取得された画像を記録部に記録することと、
前記撮像部で取得された画像から特徴情報を認識することと、
ガイド情報の検索を選択的に適用するための操作部の操作を受けて、前記認識の結果を外部装置に送信し、外部装置が前記認識の結果を用いて検索して得られる前記ガイド情報を受信することと、
を具備し、
前記外部装置によるガイド情報の検索は静止画により行われ、成功しなかった場合に動画により行われることを特徴とする撮像方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、撮像装置、通信システム及び撮像方法に関する。

【背景技術】

【0002】

近年、ユーザによる撮影操作等をガイドするためのガイド機能を有する撮像装置が提案されてきている。例えば、特許文献１において提案されている撮像装置は、撮像装置の操作釦の機能を予め記憶部に記憶させておき、ユーザによってヘルプ釦が操作された場合に、各操作釦の機能をガイド情報としてユーザに提示するようにしている。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２００１−６６６８４号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

特許文献１では、記憶部に記憶されたガイド情報がユーザに提示される。これに対し、対象物の特徴等の判定結果に応じたガイド情報をユーザに提示したり、撮像装置の外部の機器から取得したガイド情報をユーザに提示したりすることで、ユーザに対する利便性の向上が期待される。その一方で、特徴等を判定する処理のため、撮像装置の負荷が増加し、これによってユーザの撮影操作に影響を与える可能性がある。

【0005】

本発明は、前記の事情に鑑みてなされたもので、有用なガイド情報をユーザの撮影操作に影響を与えることなくユーザに提示可能な撮像装置、通信システム及び撮像方法を提供することを目的とする。

【課題を解決するための手段】

【0006】

前記の目的を達成するために、本発明の第１の態様の撮像装置は、対象物を撮像して前記対象物に係る画像を取得する撮像部と、前記撮像部で取得された画像を記録する記録部と、前記撮像部で取得された画像から特徴情報を認識する画像認識部と、前記認識された特徴情報からガイド情報を検索する検索部とを具備し、前記検索部は、前記ガイド情報の検索を静止画により行い、成功しなかった場合に動画により行うことを特徴とする。

【0007】

前記の目的を達成するために、本発明の第２の態様の通信システムは、撮像装置と、撮像装置と通信される外部装置とを有する通信システムであって、前記撮像装置は、対象物を撮像して前記対象物に係る画像を取得する撮像部と、前記撮像部で取得された画像を記録する記録部と、前記撮像部で取得された画像から特徴情報を認識する画像認識部と、前記画像認識部による認識結果を前記外部装置に送信し、前記外部装置からガイド情報を受信する第１の通信部と、前記ガイド情報の検索を選択的に適用するための操作部とを具備し、前記外部装置は、前記認識結果を用いて検索して得られる前記ガイド情報を検索する検索部と、前記撮像装置から前記認識結果を受信し、前記撮像装置に前記ガイド情報を送信する第２の通信部とを具備し、前記検索部は、前記ガイド情報の検索を静止画により行い、成功しなかった場合に動画により行うことを特徴とする。

【0008】

前記の目的を達成するために、本発明の第３の態様の撮像方法は、対象物を撮像して前記対象物に係る画像を取得する撮像部で取得された画像を記録部に記録することと、前記撮像部で取得された画像から特徴情報を認識することと、前記認識された特徴情報からガイド情報を検索することとを具備し、前記ガイド情報の検索は静止画により行われ、成功しなかった場合に動画により行われることを特徴とする。
前記の目的を達成するために、本発明の第４の態様の撮像方法は、対象物を撮像して前記対象物に係る画像を取得する撮像部で取得された画像を記録部に記録することと、前記撮像部で取得された画像から特徴情報を認識することと、ガイド情報の検索を選択的に適用するための操作部の操作を受けて、前記認識の結果を外部装置に送信し、外部装置が前記認識の結果を用いて検索して得られる前記ガイド情報を受信することとを具備し、前記外部装置によるガイド情報の検索は静止画により行われ、成功しなかった場合に動画により行われることを特徴とする。

【発明の効果】

【0009】

本発明によれば、有用なガイド情報をユーザの撮影操作に影響を与えることなくユーザに提示可能な撮像装置、通信システム及び撮像方法を提供することができる。

【図面の簡単な説明】

【0010】

【図1】本発明の一実施形態に係る撮像装置の機能ブロック図である。

【図2】一実施形態に係る撮像装置の適用例としての撮像装置を含む通信システムの構成を示す図である。

【図3】撮像装置の動作の概要を示す図である。

【図4】撮像装置の制御を示したフローチャートである。

【図5】ガイド情報検索の処理を示したフローチャートである。

【図6】図６（ａ）は変形例の撮像装置の外観を示す図であり、図６（ｂ）は変形例の携帯端末の外観を示す図であり、図６（ｃ）はアタッチメントを介して撮像装置が装着された携帯端末を示す図である。

【発明を実施するための形態】

【0011】

以下、図面を参照して本発明の実施形態を説明する。
図１は、本発明の一実施形態に係る撮像装置の機能ブロック図である。撮像装置１００は、撮像部１０２と、切替部１０４と、記録部１０６と、画像認識部１０８と、検索部１１０と、提示部１１２とを有している。

【0012】

撮像部１０２は、対象物を撮像し、対象物に係る画像を取得する。切替部１０４は、撮像装置１００の動作モードを切り替えることにより、撮像部１０２で取得された画像の用途を切り替える。撮像装置１００は、動作モードとして撮影モードと、ガイド情報検索モードとを有している。撮影モードでは、ユーザによる撮影操作により、記録用の画像が取得される。切替部１０４は、撮影モードにおいては、撮像部１０２で得られた画像を記録できるように、撮像部１０２で得られた画像を記録部１０６に入力する。一方、ガイド情報検索モードでは、ガイド情報が検索され、検索されたガイド情報がユーザに提示される。切替部１０４は、ガイド情報検索モードにおいては、ガイド情報の検索を行うことができるように、撮像部１０２で得られた画像を画像認識部１０８に入力する。

【0013】

記録部１０６は、撮影モードのときに切替部１０４から入力された画像を記録する。

【0014】

画像認識部１０８は、ガイド情報検索モードのときに切替部１０４によって入力された画像を認識する。例えば、この認識は、画像内の対象物の形状や色等を認識する処理、画像内の文字を認識する処理等を含む。また、この認識は、画像が取得された際の対象物までの距離、画像が取得された位置、画像が取得された時刻等の数値化できる情報を認識する処理を含む。

【0015】

検索部１１０は、画像認識部１０８の認識結果を用いてガイド情報を検索する。ガイド情報は、例えば画像認識部１０８で認識された対象物を撮影する際の撮影方法をユーザにガイドするガイド情報である。この他、ガイド情報は、撮影時、観察時のアドバイスであっても良く、撮影、観察時に得られた対象物の名称や解説にとどまらず、その向こうにあるものを教えたり、歴史的背景を教えたり、芸術作品との関係をガイドするものでも良い。

【0016】

提示部１１２は、検索部１１０で検索された情報をユーザに対して提示する。この提示は、例えば表示によって行われる。

【0017】

図２は、図１に示した撮像装置の適用例としての撮像装置を含む通信システムの構成を示す図である。図２に示すように、通信システムは、撮像装置２００と、携帯端末３００と、サーバ４００と有する。撮像装置２００と携帯端末３００とは、互いに通信するように構成されている。また、携帯端末３００とサーバ４００とは、互いに通信するように構成されている。

【0018】

撮像装置２００は、撮像装置１００としての機能を有するものであって、制御部２０２と、撮像部２０４と、表示部２０６と、接眼表示部２０８と、記録部２１０と、操作部２１２と、タッチパネル２１４と、姿勢検出部２１６と、位置検出部２１８と、計時部２２０と、通信部２２２とを有している。撮像装置２００は、例えばデジタルカメラやスマートフォンといった撮像機能を有する各種の機器である。

【0019】

制御部２０２は、例えばＣＰＵやＡＳＩＣで構成されている。制御部２０２は、撮像装置２００の各部の制御を行う。この制御部２０２は、図１で示した撮像装置１００の切替部１０４と、画像認識部１０８と、検索部１１０を有する。この他、制御部２０２は、撮像制御部２０２５と、画像処理部２０２６と、表示制御部２０２７と、通信制御部２０２８とを有している。撮像制御部２０２５は、撮像部２０４による撮像動作を制御する。画像処理部２０２６は、撮像部２０４によって取得された画像に対して表示や記録のために必要な画像処理を施す。この画像処理は、ホワイトバランス補正、階調補正、色補正といった画質に関する補正、リサイズ処理、圧縮処理、伸張処理等を含む。表示制御部２０２７は、表示部２０６への各種の画像の表示を制御する。通信制御部２０２８は、通信部２２２を介して撮像装置２００と外部機器との通信の際の制御をする。通信制御部２０２８により、撮像装置２００は、携帯端末３００と通信自在に接続される。

【0020】

撮像部２０４は、対象物を撮像して対象物に関する画像（画像データ）を取得する。この撮像部２０４は、撮影レンズ２０４１と、撮像素子２０４２と、アナログ／デジタル（Ａ／Ｄ）変換部２０４３とを有している。撮影レンズ２０４１は、対象物からの光束を撮像素子２０４２に集光させる。撮像素子２０４２は、受光面を有する。受光面には、画素が配置されている。画素は、例えばフォトダイオードであり、入射光の光量に応じた電気信号（画像信号）を出力する。Ａ／Ｄ変換部２０４３は、撮像素子２０４２で得られたアナログの画像信号をデジタルの画像信号（画像データ）に変換する。

【0021】

表示部２０６は、例えば液晶ディスプレイや有機ＥＬディスプレイであり、例えば撮像装置２００の背面に設けられている。この表示部２０６は、各種の画像データに基づいて画像を表示する。接眼表示部２０８は、例えば液晶ディスプレイや有機ＥＬディスプレイであり、例えば撮像装置２００の背面に設けられた覗き込み式の表示部である。この接眼表示部２０８は、表示部２０６と同様、各種の画像データに基づいて画像を表示する。ここで、表示部２０６又は接眼表示部２０８における表示に用いられる画像データは、撮像部２０４の撮像によって得られた画像データや記録部２１０に記録された画像データである。

【0022】

記録部２１０は、例えばフラッシュメモリであり、画像データ等をファイルとして記録する。記録部２１０には、接続先データベース（ＤＢ）２１０１と、画像データベース（ＤＢ）２１０２と、ガイド情報データベース（ＤＢ）２１０３とが構築されている。また、記録部２１０の記録領域の一部は、操作ボタンデータ記録部２１０４である。接続先ＤＢ２１０１は、撮像装置２００の通信対象となる機器（携帯端末３００）と通信するために必要なアドレス情報等を記憶したデータベースである。画像ＤＢ２１０２は、画像認識部１０８による画像認識のために必要となる各種の対象物の特徴量データ等を記憶したデータベースである。ガイド情報ＤＢ２１０３は、ガイド情報の検索のためのデータベースである。ガイド情報ＤＢ２１０３は、静止画辞書と動画辞書とを含む。静止画辞書は、静止画に係る特徴情報とガイド情報とを対応付けて記憶した辞書である。静止画に係る特徴情報は、時間変化を伴わない情報である。この時間変化を伴わない情報とは、例えば各撮像時点で得られる対象物の形状といった情報である。動画辞書は、動画に係る特徴情報とガイド情報とを対応付けて記憶した辞書である。動画に係る特徴情報は、時間変化を伴う情報である。この時間変化を伴う特徴とは、例えば複数の撮像時点に亘る対象物の形状の変化といった情報である。操作ボタンデータ記録部２１０４は、タッチパネル２１４によるソフトウェアボタンをユーザが視認できるようにするための例えばアイコンを表示部２０６に表示させるために必要となるアイコンデータを記録するための記録領域である。なお、記録部２１０は、撮像装置２００に内蔵されているものであっても、撮像装置２００に対して着脱自在なものであっても良い。

【0023】

操作部２１２は、ユーザが撮像装置２００の操作を行うための機械式の操作部材である。操作部２１２としては、例えばレリーズボタンや電源スイッチが含まれる。レリーズボタンは、ユーザが撮影動作の実行を指示するためのボタンである。また、電源スイッチは、ユーザが撮像装置２００の電源のオン又はオフを指示するためのスイッチである。

【0024】

タッチパネル２１４は、例えば表示部２０６の表示画面の上に形成されており、ユーザによるタッチ操作を検出する。制御部２０２は、タッチパネル２１４で検出されたタッチ操作に応じた処理を行う。例えば、タッチパネル２１４は、レリーズボタンの代わりとして用いられる。その他、タッチパネル２１４は、表示部２０６の表示画面に表示された画像の特定の部分をユーザが指定するために用いられる。

【0025】

姿勢検出部２１６は、例えば３軸の加速度センサであり、撮像装置２００の姿勢を検出する。位置検出部２１８は、例えばＧＰＳによって撮像装置２００の現在位置を検出する。なお、位置検出部２１８によって撮像装置２００の方位を検出できるようにしても良い。計時部２２０は、現在時刻を取得する。通信部２２２は、通信制御部２０２８による制御に従って携帯端末３００と通信する。通信部２２２は、例えば無線ＬＡＮインタフェースである。通信部２２２は、ＵＳＢ等の有線インタフェースであっても良い。

【0026】

携帯端末３００は、制御部３０２と、記録部３０４と、表示部３０６と、タッチパネル３０８と、通信部３１０と、通信部３１２とを有している。携帯端末３００は、スマートフォン等の各種の機器である。図２の携帯端末３００は、撮像部を有していないが、撮像部を有していても良い。

【0027】

制御部３０２は、例えばＣＰＵで構成されている。この制御部３０２は、携帯端末３００の各部の制御を行う。この制御部３０２は、検索部３０２１と、通信制御部３０２２とを有している。検索部３０２１は、図１で示した検索部１１０と同様の機能を有している。すなわち、検索部３０２１は、撮像装置２００から送信されてくる情報を用いてガイド情報を検索する。検索部３０２１は、サーバ４００からもガイド情報を検索し得る。通信制御部３０２２は、撮像装置２００又はサーバ４００との通信の際の制御をする。

【0028】

記録部３０４は、例えばフラッシュメモリである。この記録部３０４には、ガイド情報データベース（ＤＢ）３０４１が構築されている。ガイド情報ＤＢ３０４１は、ガイド情報の検索のためのデータベースである。ガイド情報は、特徴情報等の各種の情報と対応付けられている。

【0029】

表示部３０６は、例えば液晶ディスプレイや有機ＥＬディスプレイである。この表示部３０６は、各種の画像データに基づいて画像を表示する。タッチパネル３０８は、表示部３０６の表示画面の上に形成されており、ユーザによるタッチ操作を検出する。制御部３０２は、タッチパネル３０８で検出されたタッチ操作に応じた処理を行う。

【0030】

通信部３１０は、通信制御部３０２２による制御に従って撮像装置２００と通信する。通信部３１２は、通信制御部３０２２による制御に従ってサーバ４００と通信する。通信部３１０は、例えば無線ＬＡＮインタフェースである。また、通信部３１２は、例えば携帯電話回線である。

【0031】

サーバ４００は、制御部４０２と、記録部４０４と、通信部４０６とを有している。

【0032】

制御部４０２は、例えばＣＰＵで構成され、サーバ４００の各部の制御を行う。この制御部４０２は、通信制御部４０２１を有している。通信制御部４０２１は、携帯端末３００との通信の際の制御をする。記録部４０４は、例えばハードディスクである。この記録部４０４には、検索部３０２１によって検索される各種情報が記憶されている。通信部４０６は、通信制御部４０２１による制御に従って携帯端末３００と通信する。

【0033】

以下、本実施形態に係る通信システムの動作を説明する。ユーザは、撮像装置２００を所持しているとする。この状態でユーザは、対象物（図では花）を撮影するために、図３（ａ）に示すように、撮像装置２００を対象物に向ける。ここでは、ユーザは、桜を撮影しようとしていたとする。

【0034】

本実施形態では、例えば撮像装置２００の電源がオンされると、図３（ｂ）に示すように、表示部２０６に少なくとも２つのアイコンが表示される。アイコンは、撮影ボタン２０６ａと、ガイド情報検索ボタン２０６ｂを含む。ユーザは、何れかのアイコンを選択する。例えば、撮影ボタン２０６ａが選択された場合には、撮影が実行される。また、ガイド情報検索ボタン２０６ｂが選択された場合には、ガイド情報の検索が実行される。本実施形態では、ガイド情報の検索は、静止画に係る特徴情報と動画に係る特徴情報とを利用して行われる。なお、ユーザが携帯端末３００を所持している場合、ガイド情報の検索は、携帯端末３００によっても行われ得る。

【0035】

ガイド情報の検索中においては、図３（ｃ）に示すように、検索継続中アイコン２０６ｃが表示される。検索継続中アイコン２０６ｃを見ることで、ユーザは、現在、ガイド情報の検索中であることを認識する。また、ガイド情報の検索中には、クリアボタン２０６ｄも表示される。ユーザによってクリアボタン２０６ｄが選択された場合には、動画に係る特徴情報を蓄積した履歴情報がクリアされる。

【0036】

ガイド情報の検索中には、ガイド情報を検索し易くするために必要なアドバイスがユーザに対してなされる。ユーザは、このアドバイスに従って撮像装置２００を操作する。そして、ガイド情報の検索の結果、検索が成功した場合には、検索されたガイド情報が表示部２０６に表示される。また、検索が失敗した場合には、図３（ｃ）に示すような検索不能表示２０６ｅがなされる。

【0037】

このように、本実施形態のガイド情報の検索は、撮影動作等とは独立して行われる。このため、ガイド情報の検索に係る撮像装置２００の負荷を軽減することが可能である。また、ガイド情報検索ボタン２０６ｂが選択されずに撮影ボタン２０６ａが選択された場合には、ガイド情報の検索を経ることなく撮影動作が行われる。この場合も撮像装置２００の負荷は軽減される。また、撮影中にユーザが必要としない情報が表示されることもなく、ユーザに煩わしさを感じさせることもない。

【0038】

以下、本実施形態の撮像装置の動作の詳細を説明する。図４は、撮像装置２００の制御を示したフローチャートである。図４の処理は、制御部２０２に予め記憶されたプログラムに従って行われる。

【0039】

図４において、制御部２０２は、電源スイッチがオンされたか否かを判定する（ステップＳ１０１）。ステップＳ１０１において電源スイッチがオンされていないと判定した場合に、制御部２０２は、撮像装置２００をスタンバイ状態に移行させる。スタンバイ状態では、ステップＳ１０１の判定等の撮像装置２００における必要最低限の機能のみが実行される。

【0040】

ステップＳ１０１において電源スイッチがオンされたと判定した場合に、制御部２０２は、撮像装置２００の動作モードが撮影モードであるか否かを判定する（ステップＳ１０２）。撮影モードは、記録用の画像を撮影するための動作モードである。なお、撮像装置２００の動作モードは、例えばユーザによる操作部２１２の操作やタッチパネル２１４の操作によって決定される。ステップＳ１０２において撮像装置２００の動作モードが撮影モードでないと判定した場合に、制御部２０２は、撮影モード以外の動作モードに応じた処理を行う。撮影モード以外の動作モードは、例えば再生モードである。再生モードの詳細については説明を省略する。

【0041】

ステップＳ１０２において撮像装置２００の動作モードが撮影モードであると判定した場合に、制御部２０２は、スルー画表示を行う（ステップＳ１０３）。スルー画表示は、撮像部２０４の連続動作によって得られる画像をリアルタイムで表示部２０６に表示させる動作である。なお、スルー画表示は、接眼表示部２０８において行われても良い。スルー画表示の後、制御部２０２は、スルー画に操作ボタンを重畳表示させる（ステップＳ１０４）。操作ボタンは、撮影ボタン２０６ａと、ガイド情報検索ボタン２０６ｂを含む。

【0042】

操作ボタンの表示後、制御部２０２は、ユーザによってガイド情報検索ボタン２０６ｂが選択されたか否かを判定する（ステップＳ１０５）。ステップＳ１０５においてガイド情報検索ボタン２０６ｂが選択されていないと判定した場合に、制御部２０２は、処理をステップＳ１０７に移行させる。ステップＳ１０５においてガイド情報検索ボタン２０６ｂが選択されたと判定した場合に、制御部２０２は、ガイド情報検索の処理を開始させる（ステップＳ１０６）。ガイド情報検索の詳細については後で説明する。

【0043】

ステップＳ１０５においてガイド情報検索ボタン２０６ｂが選択されていないと判定した場合又はガイド情報検索の後、制御部２０２は、ユーザによる撮影操作があるか否かを判定する（ステップＳ１０７）。撮影操作は、例えばユーザによるレリーズボタンの押し操作、タッチパネル２１４を用いたタッチレリーズ操作、撮影ボタン２０６ａの選択操作である。ステップＳ１０７においてユーザによる撮影操作がないと判定した場合に、制御部２０２は、処理をステップＳ１０１に戻す。

【0044】

ステップＳ１０７においてユーザによる撮影操作があると判定した場合に、制御部２０２は、撮影動作を行う（ステップＳ１０８）。撮影動作は、撮像部２０４を制御して記録用の画像データを取得する動作である。撮影動作の実行後、制御部２０２は、画像処理部２０２６により、撮影動作により得られた画像データを画像処理する。そして、制御部２０２は、画像処理後の画像データを記録部２１０に記録する（ステップＳ１０９）。この後、制御部２０２は、処理をステップＳ１０１に戻す。

【0045】

図５は、ガイド情報検索の処理を示したフローチャートである。図５において、制御部２０２は、ガイド情報検索のために必要な画像（判定画像）の取得中であるか否かを判定する（ステップＳ２０１）。ステップＳ２０１において判定画像の取得がすでに開始されていると判定した場合に、制御部２０２は、処理をステップＳ２０３に移行させる。ステップＳ２０１において判定画像の取得が開始されていないと判定した場合に、制御部２０２は、撮像部２０４による繰り返しの撮像を開始させる（ステップＳ２０２）。繰り返し撮像によって得られた画像データは、判定画像として制御部２０２に取り込まれる。

【0046】

ステップＳ２０１において判定画像の取得がすでに開始されていると判定した場合又はステップＳ２０２の後、制御部２０２は、判定画像の色及び明るさがガイド情報の検索に適した条件であるか否かを判定する（ステップＳ２０３）。色の条件は、例えば判定画像の色を判別できることである。また、明るさの条件は、例えば判定画像の明るさが判定画像内の対象物の形状を検出可能な所定値を超えていることである。ステップＳ２０３において判定画像の色及び明るさがガイド情報の検索に適した条件であると判定した場合に、制御部２０２は、処理をステップＳ２０５に移行させる。ステップＳ２０３において判定画像の色及び明るさがガイド情報の検索に適した条件でないと判定した場合に、制御部２０２は、判定画像の色及び明るさを調整するようにユーザに対して警告を行う（ステップＳ２０４）。この警告は、例えば表示部２０６による表示によって行われる。ユーザは、警告を受けて撮像装置２００を操作する。例えば、ユーザは、絞り、シャッタスピード、撮像素子の感度を調整する。これにより、判定画像の明るさが調整される。

【0047】

ステップＳ２０３において判定画像の色及び明るさがガイド情報の検索に適した条件であると判定した場合又はステップＳ２０４の後、制御部２０２は、判定画像のピント状態がガイド情報の検索に適した条件であるか否かを判定する（ステップＳ２０５）。ピント状態の条件は、判定画像中の対象物に対してピントがあっていることである。ステップＳ２０５において判定画像のピント状態がガイド情報の検索に適した条件であると判定した場合に、制御部２０２は、処理をステップＳ２０７に移行させる。ステップＳ２０５において判定画像のピント状態がガイド情報の検索に適した条件でないと判定した場合に、制御部２０２は、判定画像のピント状態を調整するようにユーザに対して警告を行う（ステップＳ２０６）。この警告は、例えば表示部２０６による表示によって行われる。ユーザは、警告を受けて撮像装置２００を操作する。例えば、ユーザは、マニュアルフォーカスを利用して特定の対象物にピントを合わせる。

【0048】

ステップＳ２０５において判定画像のピント状態がガイド情報の検索に適した条件であると判定した場合又はステップＳ２０６の後、制御部２０２は、スルー画表示のために得られた現在のフレームの画像の情報をガイド情報ＤＢ２１０３に記憶された静止画辞書と比較することにより、ガイド情報を検索する（ステップＳ２０７）。例えば、対象物の形状、色や、撮像装置２００から対象物までの距離、現在時刻、現在位置といった静止画に係る特徴情報に基づき、これらの特徴情報と対応するガイド情報がガイド情報ＤＢ２１０３から検索される。なお、ガイド情報の検索は、携帯端末３００で行われても良い。また、ガイド情報の検索は、サーバ４００を利用して行われても良い。

【0049】

ステップＳ２０７の後、制御部２０２は、静止画辞書を用いた検索が成功したか否かを判定する（ステップＳ２０８）。ステップＳ２０８において静止画辞書による検索が成功したと判定した場合に、制御部２０２は、検索されたガイド情報を表示部２０６に表示させる（ステップＳ２０９）。その後、制御部２０２は、図５の処理を終了させる。なお、複数のガイド情報が検索された場合、その中から所望のガイド情報をユーザによって選択させるようにしても良い。

【0050】

ステップＳ２０８において静止画辞書による検索が成功しなかったと判定した場合に、制御部２０２は、スルー画表示のために得られた複数フレーム前までの画像の情報をガイド情報ＤＢ２１０３に記憶された動画辞書と比較することにより、ガイド情報を検索する（ステップＳ２１０）。例えば、対象物の形状又は色の変化の履歴、撮像装置２００から対象物までの距離の変化の履歴、時間変化の履歴、現在位置の変化の履歴といった動画に係る特徴情報に基づき、これらの特徴情報と対応するガイド情報がガイド情報ＤＢ２１０３から検索される。なお、ガイド情報の検索は、携帯端末３００で行われても良い。また、ガイド情報の検索は、サーバ４００を利用して行われても良い。

【0051】

ステップＳ２１０の後、制御部２０２は、動画辞書を用いた検索が成功したか否かを判定する（ステップＳ２１１）。ステップＳ２１１において動画辞書による検索が成功したと判定した場合に、制御部２０２は、検索されたガイド情報を表示部２０６に表示させる（ステップＳ２１２）。その後、制御部２０２は、図５の処理を終了させる。なお、複数のガイド情報が検索された場合、その中から所望のガイド情報をユーザによって選択させるようにしても良い。

【0052】

ステップＳ２１１において動画辞書による検索が成功していないと判定した場合に、制御部２０２は、図３（ｃ）で示したような検索継続中アイコン２０６ｃとクリアボタン２０６ｄとを表示させる（ステップＳ２１３）。続いて、制御部２０２は、ユーザによってクリアボタン２０６ｄが選択されたか否かを判定する（ステップＳ２１４）。ステップＳ２１４においてクリアボタン２０６ｄが選択されていないと判定した場合に、制御部２０２は、処理をステップＳ２１６に移行させる。ステップＳ２１４においてクリアボタン２０６ｄが選択された場合に、制御部２０２は、履歴情報をクリアする（ステップＳ２１５）。なお、クリアボタン２０６ｄが選択された場合に図５の処理が終了されるようにしても良い。

【0053】

ステップＳ２１４においてクリアボタン２０６ｄが選択されていないと判定した場合又はステップＳ２１５の後、制御部２０２は、所定時間（例えば１分）が経過したか否かを判定する（ステップＳ２１６）。ステップＳ２１６において所定時間が経過していないと判定した場合に、制御部２０２は、処理をステップＳ２０１に戻す。ステップＳ２１６において所定時間が経過したと判定した場合に、制御部２０２は、図３（ｃ）で示すような検索不能表示２０６ｅを行う（ステップＳ２１７）。その後、図５の処理を終了させる。

【0054】

以上説明したように本実施形態によれば、ガイド情報の検索専用のガイド情報検索モードを設けることにより、撮像装置２００の処理の多くをガイド情報の検索に振り分けることで、ガイド情報の検索に係る撮像装置２００の負荷を軽減することが可能である。また、ガイド情報検索モードでは、ガイド情報の検索のみが行われるので、ガイド情報検索に適した条件（色、明るさ、ピント）でガイド情報の検索が行われる。また、ユーザは、ガイド情報が不要であれば、直接的に撮影操作を行うことができる。このため、ユーザは、撮影操作に専念できる。

【0055】

［変形例］
以下、本実施形態の変形例を説明する。変形例の撮像装置２００は、図６で示すようにして携帯端末３００と連携するようにして使用される。

【0056】

図６（ａ）は、変形例の撮像装置２００の外観を示している。図６（ａ）で示す撮像装置２００は、「交換レンズ状」の撮像装置である。交換レンズ状の筐体の内部に図２で示した撮像装置２００の各処理ブロックが設けられている。なお、交換レンズ状の撮像装置２００の場合、図２で示した全ての処理ブロックが設けられている必要はない。例えば、表示部２０６と、接眼表示部２０８と、タッチパネル２１４と、姿勢検出部２１６と、位置検出部２１８と、計時部２２０とはなくても良い（あっても良い）。一方、図６（ｂ）は、携帯端末３００の外観を示している。変形例の携帯端末３００は、例えばスマートフォンであり、図２で示した携帯端末３００と同じ構成を有している。

【0057】

変形例の撮像装置２００は、図６（ｃ）で示すように、アタッチメント５００を介して携帯端末３００に装着される。このような構成において、撮像装置２００で撮影された画像は携帯端末３００に送信される。すなわち、撮像装置２００と携帯端末３００とが１台のデジタルカメラのように動作する。このとき、スルー画表示は、携帯端末３００の表示部３０６に行われる。したがって、前述した操作ボタンも携帯端末３００の表示部３０６に表示される。ユーザは、タッチパネル３０８によって撮影ボタン２０６ａ又はガイド情報検索ボタン２０６ｂを選択する。撮影ボタン２０６ａが選択された場合には携帯端末３００から撮像装置２００に対して撮影動作の実行が指示される。一方、ガイド情報検索ボタン２０６ｂが選択された場合には、図５で示したガイド情報検索の処理が撮像装置２００と携帯端末３００とによって行われる。例えば、図５における警告表示は、携帯端末３００の表示部３０６において行われる。一方、ガイド情報の検索用の繰り返し撮像は、撮像装置２００によって行われる。

【0058】

このような変形例においても、前述した実施形態と同様の効果が得られる。また、撮像装置２００は、携帯端末３００に比べて、撮像素子や撮影レンズの設計の自由度を高くすることが可能である。このため、携帯端末３００よりも高機能の撮像部を設けることが可能である。高機能の撮像部を設けることにより、撮像装置２００は、携帯端末３００よりも高画質の画像を撮影することが可能である。また、このような高画質の画像を携帯端末３００に送信することにより、高画質のスルー画を携帯端末３００の表示部３０６に表示させたり、高画質の画像を記録部３０４に記録させたりすることが可能である。さらに、高画質の画像によってガイド情報を検索することにより、ガイド情報の検索の精度を向上させることも可能である。さらに、携帯端末３００によるガイド情報の検索も行うことが可能である。

【0059】

以上実施形態に基づいて本発明を説明したが、本発明は上述した実施形態に限定されるものではなく、本発明の要旨の範囲内で種々の変形や応用が可能なことは勿論である。また、前述の各動作フローチャートの説明において、便宜上「まず」、「次に」等を用いて動作を説明しているが、この順で動作を実施することが必須であることを意味するものではない。

【0060】

また、上述した実施形態の技術は、画像表示装置、検査装置、警告装置として、コンシューマ用途以外の例えば産業用機器や医療用機器の分野にも応用され得る。

【0061】

さらに、上記した実施形態には種々の段階の発明が含まれており、開示される複数の構成要件の適当な組合せにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、上述したような課題を解決でき、上述したような効果が得られる場合には、この構成要件が削除された構成も発明として抽出され得る。

【符号の説明】

【0062】

１００ 撮像装置、１０２ 撮像部、１０４ 切替部 １０６ 記録部 １０８ 画像認識部、１１０ 検索部 １１２ 提示部、２００ 撮像装置、２０２ 制御部、２０４ 撮像部、２０６ 表示部、２０８ 接眼表示部、２１０ 記録部、２１２ 操作部、２１４ タッチパネル、２１６ 姿勢検出部、２１８ 位置検出部、２２０ 計時部、２２２ 通信部、３００ 携帯端末、３０２ 制御部、３０４ 記録部、３０６ 表示部、３０８ タッチパネル、３１０ 通信部、３１２ 通信部、４００ サーバ、４０２ 制御部、４０４ 記録部、４０６ 通信部、５００ アタッチメント、２０２５ 撮像制御部、２０２６ 画像処理部、２０２７ 表示制御部、２０２８ 通信制御部、２０４１ 撮影レンズ、２０４２ 撮像素子、２０４３ アナログ／デジタル（Ａ／Ｄ）変換部、２１０１ 接続先データベース（ＤＢ）、２１０２ 画像データベース（ＤＢ）、２１０３ ガイド情報データベース（ＤＢ）、２１０４ 操作ボタンデータ記録部、３０２２ 通信制御部、３０２１ 通信制御部、３０４１ ガイド情報データベース（ＤＢ）

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】