特許 7431609 制御装置及びその制御方法及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-02-06

(45)【発行日】2024-02-15

(54)【発明の名称】制御装置及びその制御方法及びプログラム

(51)【国際特許分類】

   H04N 23/67 20230101AFI20240207BHJP

   G02B 7/28 20210101ALI20240207BHJP

   G03B 13/36 20210101ALI20240207BHJP

   G03B 17/18 20210101ALI20240207BHJP

   G03B 17/20 20210101ALI20240207BHJP

   G03B 13/02 20210101ALI20240207BHJP

   H04N 23/66 20230101ALI20240207BHJP

   H04N 23/63 20230101ALI20240207BHJP

【ＦＩ】

H04N23/67 100

G02B7/28 N

G03B13/36

G03B17/18

G03B17/20

G03B13/02

H04N23/66

H04N23/63 330

【請求項の数】 6

(21)【出願番号】P 2020025400

(22)【出願日】2020-02-18

(65)【公開番号】P2021132254

(43)【公開日】2021-09-09

【審査請求日】2023-02-15

(73)【特許権者】

【識別番号】000001007

【氏名又は名称】キヤノン株式会社

(74)【代理人】

【識別番号】110003281

【氏名又は名称】弁理士法人大塚国際特許事務所

(72)【発明者】

【氏名】大森 慎也

(72)【発明者】

【氏名】川合 良和

(72)【発明者】

【氏名】日高 與佐人

【審査官】門田 宏

(56)【参考文献】

【文献】特表２０１７－５１７９２４（ＪＰ，Ａ）

【文献】特開２００３－２１８６４（ＪＰ，Ａ）

【文献】特開２００６－２２７７２２（ＪＰ，Ａ）

【文献】特開２０１０－２５８５２５（ＪＰ，Ａ）

【文献】特開２００５－２２１６０２（ＪＰ，Ａ）

【文献】特開２００３－１７９７８３（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ５／２２２－ ５／２５７

Ｈ０４Ｎ ２３／００

Ｈ０４Ｎ ２３／４０ －２３／７６

Ｈ０４Ｎ ２３／９０ －２３／９５９

Ｈ０４Ｎ ７／１８

Ｇ０３Ｂ １３／００ －１３／３６

Ｇ０３Ｂ １７／１８ －１７／２０

Ｇ０２Ｂ ７／２８ － ７／４０

(57)【特許請求の範囲】

【請求項1】

撮像装置をリモート制御する制御装置であって、
光学ファインダを有する第１の撮像装置、及び、当該第１の撮像装置が有する前記光学ファインダ内の像を撮像する第２の撮像装置と通信する通信手段と、
前記第１の撮像装置にて選択候補となる複数のＡＦフレームを前記光学ファインダに表示させた状態で、前記第２の撮像装置による撮像で得られた画像を、前記通信手段を介して取得し、表示すると共に、
前記第１の撮像装置の前記選択候補となる複数のＡＦフレームに対応するＡＦフレーム設定ＵＩを表示する表示手段と、
前記ＡＦフレーム設定ＵＩにて選択されたＡＦフレームを特定する情報を含むＡＦフレームの選択コマンドを、前記通信手段を介して前記第１の撮像装置に送信する送信手段と
を有することを特徴とする制御装置。

【請求項2】

前記表示手段は、前記第２の撮像装置による撮像画像と、前記ＡＦフレーム設定ＵＩを並べて表示することを特徴とする請求項１に記載の制御装置。

【請求項3】

前記表示手段は、前記第２の撮像装置による撮像画像と、前記ＡＦフレーム設定ＵＩとを重畳して表示することを特徴とする請求項１に記載の制御装置。

【請求項4】

前記第１の撮像装置の指標となる領域を示す情報を保持する保持手段と、
該保持手段に保持された指標となる領域と、前記第２の撮像装置による撮像画像に映っている前記指標の領域とから、前記第１の撮像装置に対する前記第２の撮像装置のズレ量を求め、当該ズレ量に基づき前記第２の撮像装置による撮像画像に映るべきＡＦフレームと同じ位置とサイズのＡＦフレームに対応する前記ＡＦフレーム設定ＵＩを生成する生成手段とを更に有し、
前記表示手段は、前記第２の撮像装置による撮像画像に、前記生成手段で生成した前記ＡＦフレーム設定ＵＩのＡＦフレームを重畳表示する
ことを特徴とする請求項３に記載の制御装置。

【請求項5】

撮像装置をリモート制御する制御装置であって、光学ファインダを有する第１の撮像装置、及び、当該第１の撮像装置が有する前記光学ファインダ内の像を撮像する第２の撮像装置と通信する通信手段を有する制御装置の制御方法であって、
前記第１の撮像装置にて選択候補となる複数のＡＦフレームを前記光学ファインダに表示させた状態で、前記第２の撮像装置による撮像で得られた画像を前記通信手段を介して取得し、表示すると共に、
前記第１の撮像装置の前記選択候補となる複数のＡＦフレームに対応するＡＦフレーム設定ＵＩを表示する表示工程と、
前記ＡＦフレーム設定ＵＩにて選択されたＡＦフレームを特定する情報を含むＡＦフレームの選択コマンドを、前記通信手段を介して前記第１の撮像装置に送信する送信工程と
を有することを特徴とする制御装置の制御方法。

【請求項6】

コンピュータが読み込み実行することで、前記コンピュータに、請求項５に記載の方法の各工程を実行させるためのプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は撮像装置をリモート制御する制御装置及びその制御方法及びプログラムに関するものである。

【背景技術】

【0002】

近年、カメラ等の撮像装置を無線または有線の通信手段を用いて遠隔操作にて撮影を行う、リモート撮影システムが存在している。例えば、スポーツ会場において高所など、普段は人が入れないような場所からの撮影を行うことで、より付加価値の高い映像を提供することを目的とするような場合がその代表例である。また、パン・チルト・ロールを駆動できる雲台に搭載された撮像装置をあらかじめ会場に設置しておき、競技中は会場内の別の場所や会場外から、雲台および撮像装置を遠隔操作することで撮影を行うことができる。このようなリモート撮影システムは、ネットワーク上に遠隔から操作可能とする制御装置が存在する。このとき、ユーザは接続している撮影装置の撮影操作を行うだけでなく、撮影装置の機能を制御するための設定操作を制御装置で行うことができる。

【0003】

特許文献１は、カメラ本体とは分離された表示装置に、フォーカスエリアの位置を設定するエリア設定手段を設け、遠隔操作でフォーカスエリアの位置設定を行うことができるカメラシステムを開示している。

【0004】

上述のリモート撮影システムでは、撮像装置から送信されるストリーミング映像を遠隔地の制御装置でモニタしながら撮像操作を行う。このストリーミング映像は撮像装置の撮像素子で取得した映像である。以降この撮像装置の動作状態を、ライブビュー撮影と呼ぶこととする。

【0005】

一方、光学ファインダを有する撮像装置で、光学ファインダを用いた撮影をする際の動作状態を、以降光学ファインダ撮影と呼ぶ。光学ファインダを有する撮像装置の多くは、ライブビュー撮影、と光学ファインダ撮影のどちらかを選択することができる。

【0006】

一般的にライブビュー撮影時と光学ファインダ撮影時のＡＦ動作は、ＡＦ制御に使用するセンサが異なり、光学ファインダ撮影時のＡＦ動作の方が、ＡＦ速度などの点では優れている。このことから動きが激しいスポーツ選手を被写体とする撮影においては、光学ファインダ撮影で撮影することを要望するユーザが多い。

【0007】

リモート撮影の際にも光学ファインダ撮影を実現したいという要求に対して、撮像装置の光学ファインダ内を補助カメラで撮像し、補助カメラからのストリーミング映像を制御装置でモニタするようなリモート撮影システムを構成することができる。

【0008】

このリモート撮影システムにおいて、撮像装置のＡＦフレームの位置や種類、ＡＦ動作方式の設定は、遠隔地から制御装置のリモート操作で変更することとなる。

【先行技術文献】

【特許文献】

【0009】

【文献】特開２００２－１９６２２９号公報

【発明の概要】

【発明が解決しようとする課題】

【0010】

本発明は、遠隔制御対象の撮像装置におけるＡＦフレームを、撮像装置が撮像する被写体を確認しながら直感的に指定できる技術を提供しようとするものである。

【課題を解決するための手段】

【0011】

この課題を解決するため、例えば本発明の制御装置は以下の構成を備える。すなわち、
撮像装置をリモート制御する制御装置であって、
光学ファインダを有する第１の撮像装置、及び、当該第１の撮像装置が有する前記光学ファインダ内の像を撮像する第２の撮像装置と通信する通信手段と、
前記第１の撮像装置にて選択候補となる複数のＡＦフレームを前記光学ファインダに表示させた状態で、前記第２の撮像装置による撮像で得られた画像を、前記通信手段を介して取得し、表示すると共に、
前記第１の撮像装置の前記選択候補となる複数のＡＦフレームに対応するＡＦフレーム設定ＵＩを表示する表示手段と、
前記ＡＦフレーム設定ＵＩにて選択されたＡＦフレームを特定する情報を含むＡＦフレームの選択コマンドを、前記通信手段を介して前記第１の撮像装置に送信する送信手段とを有する。

【発明の効果】

【0012】

本発明によれば、遠隔制御対象の撮像装置におけるＡＦフレームを、撮像装置が撮像する被写体を確認しながら直感的に指定できるようになる。

【図面の簡単な説明】

【0013】

【図1】第１の実施形態に係るシステム全体構成の概念図。

【図2】第１の実施形態に係る制御装置のブロック図。

【図3】第１の実施形態に係る撮像装置及び雲台のブロック図。

【図4】第１の実施形態に係る撮像装置の後部外観を示す図。

【図5】第１の実施形態に係る制御装置の表示部に表示される画面の一例を示す図。

【図6】第１の実施形態に係る制御装置の表示部に表示される画面の一例を示す図。

【図7】第１の実施形態に係る制御装置のＡＦフレーム設定処理のフローチャート。

【図8】第２の実施形態に係る制御装置の表示部に表示される画面の一例を示す図。

【図9】第２の実施形態に係る制御装置のＡＦフレーム設定処理のフローチャート。

【発明を実施するための形態】

【0014】

以下、添付図面を参照して実施形態を詳しく説明する。尚、以下の実施形態は特許請求の範囲に係る発明を限定するものでない。実施形態には複数の特徴が記載されているが、これらの複数の特徴の全てが発明に必須のものとは限らず、また、複数の特徴は任意に組み合わせられてもよい。さらに、添付図面においては、同一若しくは同様の構成に同一の参照番号を付し、重複した説明は省略する。

【0015】

［第１の実施形態］
以下、第１の実施形態を図１～図６を参照して説明する。なお以下の説明においては、処理方法を適用する装置全体の構成や動作目的、制御処理の内容、制御する各種装置、処理結果や制御結果などを具体的に説明するが、あくまで理解を容易にするためであって、この発明を限定するものではない点に注意されたい。よって、これら装置の構成や動作目的、制御処理の内容、制御処理に用いるパラメータ、制御する各種装置等は、装置全体の目的に応じて任意に構成したり、設定できるユーザインタフェース（以下ＵＩ）を設けたり、処理アルゴリズム及びプログラムなどを用いて動的に決定したりすることが出来る形態で提供することもできる。

【0016】

図１は、本第１の実施形態に係るシステム全体の構成を示す概略図である。

【0017】

本システムは、光学ファインダを有し、静止画または動画を撮影する撮像装置１０３、撮像装置１０３の光学ファインダ内の像を撮影する補助カメラ１０４、撮像装置１０３及び補助カメラ１０４を保持し、撮像装置１０３の撮像方向（パン、チルト動作）及び撮像装置１０３のズームレンズを駆動する雲台１０５を有する。したがって、補助カメラ１０４は、撮像装置１０３と同一視線方向の被写体を撮像することになる。なお、撮像装置１０３が、光学ファインダに選択可能な複数のフォーカス枠を重畳表示している場合（していない場合もあり得る）には、補助カメラ１０４はそのフォーカス枠が重畳した被写体の像を撮像することになる。また、実施形態における雲台１０５は、パン、チルト、ズームの制御を行うものとしているが、このうち、ズームは撮像装置１０３にて行うようにしても良い。

【0018】

また、本システムは、撮像装置１０３、補助カメラ１０４、及び、雲台１０５と通信して、撮像装置１０３及び補助カメラ１０４からの映像の受信及び表示と、撮像装置１０３及び雲台１０５の各種設定や操作を行う制御装置１０２を有する。そして、本システムは、これが相互通信するためのネットワーク１０１を有する。このネットワーク１０１は、有線、無線を問わない。

【0019】

なお、図１では、撮像装置１０３、補助カメラ１０４、雲台１０５を１セットとする３セット、及び、２台の制御装置１０２がネットワーク１０１に接続されている例を示しているが、この数に特に制限はない。

【0020】

図２は、実施形態における制御装置１０２のブロック構成図である。制御装置１０２は、ＶＲＡＭ２０２と、ＢＭＵ２０３と、入力装置２０４と、ＣＰＵ２０５と、ＲＯＭ２０６と、ＲＡＭ２０７と、外部記憶装置２０８と、通信部２０９、及び、これらを接続するバス２１０を有する。バス２１０は、アドレスバス、データバス及びコントロールバスを含む。表示部２０１にはＬＣＤなどのディスプレイ装置が用いられる。ＶＲＡＭ２０２には、表示部２０１に表示するための画像が描画される。このＶＲＡＭ２０２に生成された画像データは、所定の規定に従って表示部２０１に転送され、これにより表示部２０１に画像が表示される。ＢＭＵ(ビットムーブユニット)２０３は、例えば、メモリ間(例えば、ＶＲＡＭ２０２と他のメモリとの間)のデータ転送や、メモリと各Ｉ／Ｏデバイス(例えば、通信部２０９)間のデータ転送を制御する。入力装置２０４は、文字等を入力するための各種キーを有する。ＣＰＵ２０５は、ＲＯＭ２０６、外部記憶装置２０８に格納された制御プログラムに基づいて、各デバイスを制御する。ＲＯＭ２０６は、各種制御プログラムやデータを保存する。本実施形態における具体的な操作内容や方法については後述する。ＲＡＭ２０７は、ＣＰＵ２０５のワーク領域、エラー処理時のデータの退避領域、制御プログラムのロード領域等を有する。外部記憶装置２０８は、制御装置内で実行される各制御プログラムや各種データを保持している。通信部２０９は、インターネット等のネットワーク回線に接続するためのインタフェースであり、実施形態ではネットワーク１０１との間で通信を行うことになる。

【0021】

図３（Ａ）は、本実施形態における撮像装置１０３の構成を示すブロック図である。撮像装置１０３はデジタルカメラ、デジタルビデオカメラ、監視カメラなど、被写体を撮像し画像データを得る装置を含み、且つ、光学ファインダを含む。撮像装置１０３は、撮像部３０１と、撮像制御部３０２と、ＣＰＵ３０３と、ＲＡＭ３０４と、ＲＯＭ３０５と、記憶媒体３０６と、表示部３０７と、操作部３０８と、通信部３０９で構成されている。撮像部３０１は、レンズ、絞り、撮像素子、及び信号処理回路を備えており画像を生成する。撮像制御部３０２は、撮像部の制御を行う。ＣＰＵ３０３は、入力された信号やプログラムに従って、各種の演算や、撮像装置１０３を構成する各部分の制御を行う。ＲＡＭ３０４は、一時的なデータを記憶し、ＣＰＵ３０３の作業用に使われる。ＲＯＭ３０５は、撮像装置１０３を制御するためのプログラム（ファームウェア）や各種の設定情報、撮像装置１０３の製品名やシリアル番号を記憶する。記憶媒体３０６は、撮影した画像データなどを記憶する。なお、撮影後に記憶媒体３０６は取り外すことが可能であり、パーソナルコンピュータ（以下、ＰＣ）などに装着してデータを読み出すことが可能である。表示部３０７は、撮影時のビューファインダ画像の表示、撮影した画像の表示、対話的な操作のための文字表示などを行う。なお、表示部３０７は撮像装置１０３が備える必要はなく、撮像装置１０３は表示部３０７の表示を制御する表示制御機能を有していればよい。操作部３０８は、使用者の操作を受け付けるためのものである。操作部３０８は例えばボタンやレバー、タッチパネルなどを用いることが可能である。通信部３０９は、外部装置と接続し制御コマンドやデータの送受信を行う。実施形態における通信部３０９は、ネットワーク１０１との間で通知を行うことになる。通信部３０９は、具体的にはイーサネットインタフェースとするが、ＵＳＢ（Universal Serial Bus）でも良い。また、無線ＬＡＮなどの無線通信インタフェースでも構わない。

【0022】

なお、撮像部３０１には、不図示のミラーが設けられている。このミラーの一部は半透明となっていて、この半透明部分を透過した光学像が不図示のフォーカスセンサに供給され、ＡＦが実現される。そして、このミラーが下りている状態では、レンズを透過した光学像がこのミラーで反射され、ハーフミラー等で表示部３０７が表示した画像（フォーカス枠を示す像等）との合成像が光学ファインダに導かれる。また、ミラーが上がった状態では、レンズを透過した像が撮像部３０１の撮像素子に供給され、撮像素子によるフォーカシングと撮像が行われることになる。

【0023】

以上、実施形態における撮像装置１０３の構成を説明した。補助カメラ１０４は、撮像装置１０３と概ね同じ構造であるが、撮像装置１０３の光学ファインダ内映像を撮影し、制御装置１０２に通信して映像を送信する機能を有するものであればよい。

【0024】

図３（Ｂ）は、実施形態における雲台１０５のブロック構成図を示している。雲台１０５は、撮像装置１０３及び補助カメラ１０４を保持するメカニカルな構成を有するが、図３（Ｂ）は電気的な構成を示している点に注意されたい、雲台１０５は、パン駆動部３５１、チルト駆動部３５２、ズーム駆動部３５３、ＲＡＭ３５４、ＣＰＵ３５５、ＲＯＭ３５６、及び、通信部３５７を有する。通信部３５７は、ネットワーク１０１との間で通知を行うことになる。ＣＰＵ３５５は、ＲＯＭ３５６に格納されたプログラムを、ＲＡＭ３５４をワークエリアとして実行する。そして、ＣＰＵ３５５は、このプログラムに従って、通信部３５７を介して、制御装置１０２からの受信した要求に応じて、パン駆動部３５１、チルト駆動部３５２、及び、ズーム駆動部３５３を制御し、撮像装置１０３の視線方向、並び、ズームを制御することになる。なお、ズーム制御を撮像装置１０３側が行うようにしても良い。

【0025】

図４は、実施形態における撮像装置１０３の外観図である。ここでは一般的なデジタルカメラの例を示している。外部モニタ４０１、光学ファインダ４０２、操作ボタン４０３などが存在する。補助カメラ１０４は、光学ファインダ４０２内部の映像を安定して撮影するよう、雲台１０５に、撮像装置１０３と共に固定されることになる。

【0026】

図５（Ａ），（Ｂ）は、制御装置１０２にて、リモート制御アプリケーションを起動した際の表示部２０１に表示される操作画面の一例である。このアプリケーションが起動すると、制御装置１０２はユーザによる設定された各種コマンドを、通信中の撮像装置１０３、雲台１０５等に送信することで、遠隔操作が可能になる。図５（Ａ）、（Ｂ）は、制御装置１０２が、ネットワーク１０１上の特定の１つの撮像装置１０３に対してＡＦフレーム選択操作を行うことを指示するコマンドを送信した際の操作画面であると理解されたい。上記コマンドを受けると、撮像装置１０３は、ＡＦフレームの選択画面を表示部３０７に表示するようにしてもよい。

【0027】

図５（Ａ）は、制御装置１０２におけるネットワーク１０１上の特定の１つの撮像装置１０３のＡＦ測距点設定画面の一例を示している。制御装置１０２にて、ＡＦフレームの設定に係る指示がユーザより入力されると、ＣＰＵ２０５はＡＦ測距点設定に移行させるコマンドを撮像装置１０３に送信する。この結果、撮像装置１０３におけるＣＰＵ３０３は表示部３０７に、選択候補の複数のＡＦフレームを含むＡＦ測距点設定画面を表示することになる。なお、撮像装置１０３は、ＡＦ測距点設定に移行させるコマンドを受信しない場合であっても、装置本体におけるユーザ操作などを受けて、ＣＰＵ３０３により表示部３０７にＡＦ測距点設定画面を表示させることは可能である。

【0028】

像５０２は、補助カメラ１０４によって撮像された映像である。つまり、像５０２は、撮像装置１０３の光学ファインダ映像を補助カメラ１０４がライブビュー映像として撮像した画像である。参照符号５０３はエリアＡＦフレーム、参照符号５０４はＡＦフレームで、これらは撮像装置１０３が表示しているＵＩで、ＡＦフレームを設定する場合に光学ファインダ内にハーフミラーで重畳して見えているものである。エリアＡＦフレーム５０３とＡＦフレーム５０４は、ＡＦ方式により予め決められた位置とサイズのＡＦフレーム５０４を予め決められた個数と配置によりエリアＡＦフレーム５０３内に表示する。ＡＦフレーム５０４は、撮像装置１０３の光学ファインダ内に、どの点を測距点として設定するかを選択可能とする表示となっている。図示は、９点の選択可能なＡＦフレーム５０４をエリアＡＦフレーム５０３内に表示している様を示している。なお、像５０２は、あくまで補助カメラ１０４による撮像画像であるので、ユーザは、そこに映っているＡＦフレーム５０４を直接選択することはできない。この選択は、以下に説明するＡＦフレーム設定ＵＩ５０５により行われる。

【0029】

参照符号５０５はＡＦフレーム設定ＵＩで、制御装置がＡＦフレームを設定する際に描画するＵＩである。図示では、このＡＦフレーム設定ＵＩ５０５は、エリアＡＦフレーム５０６と、その中にＡＦフレーム５０７を含む９個のＡＦフレームを有する。このＡＦフレーム設定ＵＩ５０５の描画に関する情報は、外部記憶装置２０８に予め格納されており、ＣＰＵ２０５がその情報に基づき描画するものである。なお、全ての撮像装置１０３が同じ機種であるとは限らないし、全ての補助カメラ１０４も同じ機種とは限らない。そこて、外部記憶装置２０８には、撮像装置の機種別の仕様情報（ＡＦフレームの個数や配置に係る情報等）が格納されているのものとする。また、制御装置１０２は、撮像装置１０３や補助カメラ１０４と通信を開始した際、それらの機種を特定する情報を要求し、その要求により受信した情報に基づき、外部記憶装置２０８から対応する情報を取得し、ＡＦ測距点設定に係る処理を行う。

【0030】

今、例えばユーザがＡＦフレーム設定ＵＩ５０５内のＡＦフレーム５０９を、不図示のポインティングデバイスに連動するカーソル５０８で指定したとする。この場合、ＣＰＵ２０５は、ＡＦフレーム５０９が選択されたことをユーザに知らせるため、例えばＡＦフレーム５０９を強調表示する（図示の場合は枠を太線で描画する）。そして、ＣＰＵ２０５は、ＡＦフレーム５０９を特定する情報を含むＡＦ測距点の選択コマンドを生成し、撮像装置１０３に送信する。

【0031】

この結果、撮像装置１０３におけるＣＰＵ３０３は、図５（Ｂ）に示すように、対応するＡＦフレーム５１０が選択されたことを強調表示する。補助カメラ１０４は、これを撮像し、制御装置１０２に送信してくる。また、ＣＰＵ３０３は、これ以降、ＡＦフレーム５１０を測距点としてＡＦ処理を行うようになる。

【0032】

次に、実施形態における制御装置１０２のＣＰＵ２０５が実行するリモート制御アプリケーションの一部であるＡＦ設定処理を図７のフローチャートを参照して説明する。なお、このアプリケーションに係るプログラムは、ＲＯＭ２０６に格納されているものする。ただし、プログラムが予め外部記憶装置２０８に格納され、ＣＰＵ２０５は、そのプログラムをＲＡＭ２０７にロードして実行するようにしても良い。

【0033】

Ｓ７０１にて、ＣＰＵ２０５は、通信中の撮像装置１０３から機種に関する情報を取得し、その情報から対応する仕様情報を外部記憶装置２０８から取得する。そして、ＣＰＵ２０５は、取得した仕様情報中のＡＦフレームの個数や配置に関する情報に基づき、ＡＦフレーム設定ＵＩ画面５０５（エリアＡＦフレーム５０６、ＡＦフレームを含む）を表示部２０１に表示する。

【0034】

次いで、Ｓ７０２にて、ＣＰＵ２０５は、通信部２０９を介して補助カメラ１０４から映像情報の受信処理を開始すると共に、受信した映像の像５０２としての表示を開始する。

【0035】

次いで、Ｓ７０３にて、ＣＰＵ２０５は、ユーザによるエリアＡＦフレーム５０６内の１つのＡＦフレームを選択するのを待つ。選択が行われたことを検出すると、ＣＰＵ２０５は、Ｓ７０４にて、選択したＡＦフレームを特定する情報を含む、ＡＦ測距点の選択コマンドを生成し、通信中の撮像装置１０３に送信する。

【0036】

以上説明したように本実施形態によれば、補助カメラによる撮像装置１０３の光学ファインダ内の像を表示すると共に、撮像装置１０３の光学ファインダ内に表示されるＡＦフレーム設定画面に模したＡＦフレーム設定ＵＩ５０５を表示する。この結果、ユーザは、撮像装置１０３の光学ファインダによる被写体（補助カメラの撮像画像に映っている）のどの部分にＡＦフレームを合わせるかを遠隔から指定できるようになる。なお、制御装置１０２が、ＡＦ設定操作を終了すると、ＡＦフレーム設定画面等は表示されない。この場合、補助カメラ１０４は、撮像装置１０３の光学ファインダを通して、被写体を撮像することになる。つまり、補助カメラ１０４は、ズーム倍率やＡＦ処理については撮像装置１０３に任せた上で、被写体を撮像することになる。

【0037】

図５（Ａ）、（Ｂ）の場合、補助カメラ１０４が撮像した像５０２内のエリアＡＦフレーム５０３と、ＡＦフレーム設定ＵＩ５０５内のエリアＡＦフレーム５０６が、左右に並べて表示され、しかもその中に含まれるＡＦフレームも一対一の関係であるように表示されるので、ユーザは、自身が指定したＡＦフレーム５０７に対応するＡＦフレーム５１０が強調表示されるので、正常に撮像装置１０３に設定されたことを知ることができる。

【0038】

なお、上記では、制御装置１０２は、補助カメラ１０４から取得した撮像画像を画面に左側に表示し、生成したエリアＡＦフレーム５０６を画面に右側に表示した。つまり、ユーザは、画面の左側の補助カメラ１０４からの映像に映っている映像中の被写体を確認しながら、画面の右側のエリアＡＦフレーム５０６内のＡＦフレームを選択する作業を行うことになり、ユーザは視線を左右に移動させる必要がある。

【0039】

そこで、図６（Ａ）に示すように、ユーザが、画像取り込みボタン６０１を、ポインティングデバイスに連動するカーソルで選択したとき、ＣＰＵ２０５は、補助カメラ１０４から取得した映像中のエリアＡＦフレーム５０３内の映像を切り取り、その切り取った映像を右側のエリアＡＦフレーム５０６に重畳表示しても良い。この場合、ユーザは、エリアＡＦフレーム５０６を注視するだけで、被写体を確認しながら、ＡＦフレームの指定操作が行えるようになる。

【0040】

また、図６（Ｂ）に示すように、エリアＡＦフレーム５０６の縮小版５０６’を生成し、補助カメラ１０４から取得した映像の、エリアＡＦフレーム５０３とは重ならない位置に合成して表示、すなわち、ＰｉｎＰ（Picture in Picture）表示する。この場合でも、図５（Ａ）、（Ｂ）と比較して、ユーザは視線の移動量を少なくできる。

【0041】

また、ＡＦフレーム設定ＵＩ５０５におけるエリアＡＦフレーム５０６は、補助カメラ１０４が撮像した映像におけるエリアＡＦフレーム５０３を模して表示されるものである。故に、図５（Ａ）に示すように、エリアＡＦフレーム５０３、５０６は同じサイズで、画面上の同じ高さ（垂直方向の同じ位置）に表示されることが望ましい。この場合、図７のＳ７０１の直前に、以下の処理を行うようにすれば良いであろう。

【0042】

まず、ＣＰＵ２０５は、撮像装置１０３、補助カメラ１０４と通信した際にその装置名等、その機種を特定する情報を取得するようにする。そして、ＣＰＵ２０５は、その情報をキーにして、外部記憶装置２０８の中の対応する撮像装置１０３、補助カメラ１０４の仕様情報を特定し、その情報を取得する。取得する情報は、生成しようとするエリアＡＦフレーム５０６のサイズや位置の決定の指標となる情報であれば良く、例えば、撮像装置１０３の光学ファインダの指標となる領域を示す水平、垂直方向のサイズ、補助カメラ１０４の撮像画像の解像度（水平、垂直方向の画素数）等である。そして、ＣＰＵ２０５は、補助カメラ１０４からの映像中に写っている光学ファインダの領域を検出し、エリアＡＦフレーム５０３の位置とサイズを判定する。ＣＰＵ２０５は、これらの情報に基づき、エリアＡＦフレーム５０３と同じサイズ、形状を持つエリアＡＦフレーム５０６を含むＡＦフレーム設定ＵＩ５０５を生成する。

【0043】

図７のＳ７０１では、ＣＰＵ２０５は上記のようにして生成したＡＦフレームＵＩ５０５を、検出したＡＦフレーム５０３に応じた画面の右側の位置に表示すればよい。以降は、説明するまでもないであろう。

【0044】

上記の結果、ユーザから見れば、補助カメラ１０４が撮像した映像におけるエリアＡＦフレーム５０３と同じサイズのエリアＡＦフレーム５０５が並んで表示されるので、それらの内部のＡＦフレームが互いに対応しているものと認識し易くなり、操作性に優れた環境を提供できるようになる。

【0045】

［第２の実施形態］
本第２の実施形態では、補助カメラ１０４による撮像画像上に、エリアＡＦフレーム５０６を重畳表示する。そして、ユーザは、あたかも補助カメラ１０４による撮像画像上のＡＦフレームを直接指定することを可能にする例を第２の実施形態として説明する。

【0046】

ここで考慮しなければならない点は、雲台１０５に撮像装置１０３及び補助カメラ１０４を固定する際に、補助カメラ１０４が目的位置からずれて固定される場合が起こり得るという点である。或いは、当初は正しく雲台１０５に撮像装置１０３及び補助カメラ１０４を固定したものの、その後に何らの外力が加わって、雲台１０５における撮像装置１０３と補助カメラ１０４間の位置が、本来の位置からずれてしまう、ということも起こり得る。このような状況の場合、補助カメラ１０４による撮像画像に、ＣＰＵ２０５が生成したエリアＡＦフレーム５０６を重畳表示すると、エリアＡＦフレーム５０３とエリアＡＦフレーム５０６がずれた位置に表示される。つまり、エリアＡＦフレーム５０３内のＡＦフレーム群と、エリアＡＦフレーム５０６内のＡＦフレーム群がずれた状態で表示され、ユーザに混乱を来すことになる。故に、本第２の実施形態では、撮像装置１０３に対する補助カメラ１０４が本来の位置からずれても、そのずれを相殺して、エリアＡＦフレーム５０３及びそのＡＦフレーム群が、エリアＡＦフレーム５０６及びそのＡＦフレーム群に精度良く一致させ、重畳表示する例を説明する。

【0047】

このため、本第２の実施形態における外部記憶装置２０８には、補助カメラ１０４の機種毎の仕様情報（撮像画像の垂直、水平方向の画素数等）も格納されているものとする。制御装置１０２、撮像装置１０３の構成は第１の実施形態と同じとする。以下、本第２の実施形態における制御装置１０２のＣＰＵ２０５が実行するリモート制御アプリケーションの一部であるＡＦ設定処理を図９のフローチャートを参照して説明する。なお、本処理に先立って、ＣＰＵ２０５は、通信中の撮像装置１０３、補助カメラ１０４から、それらの機種を特定する情報を既に取得しているものする。

【0048】

まずＳ９０１にて、ＣＰＵ２０５は、機種情報に基づき、補助カメラ１０４の情報を外部記憶装置２０８より取得する。取得する情報は、補助カメラ１０４が撮像する画像の解像度（水平、垂直方向の画素数）や、像５０２内の撮像装置１０３のファインダ領域（垂直、水平画素数）等である。撮像装置１０３のファインダ領域は、一例として撮像装置１０３のファインダに分割グリッド表示した映像を画像解析して、ファインダ領域を取得するようにしてもよい。図８は撮像装置１０３のファインダに分割グリッド表示したものを表示した映像画面５０２の例を示す。

【0049】

次に、Ｓ９０２にて、ＣＰＵ２０５は、撮像装置１０３のファインダ領域とＡＦフレーム情報（エリアＡＦフレーム５０３とＡＦフレーム５０４の位置とサイズ）を、外部記憶装置１０８より取得する。

【0050】

そして、Ｓ９０３にて、ＣＰＵ２０５は、撮像装置１０３のファインダ領域と、補助カメラ１０４の映像画面５０２に映る撮像装置１０３のファインダ領域の位置とサイズの差分から、ファインダ領域の差分（ズレ量）を算出し、補助カメラ１０４の映像中の、エリアＡＦフレーム５０３と同じ形状及びサイズのエリアＡＦフレーム５０６を生成する。

【0051】

そして、Ｓ９０４にて、ＣＰＵ２０５は、補助カメラ１０４からの映像の受信と表示を開始させる。また、Ｓ９０５にて、ＣＰＵ２０５は、生成したエリアＡＦフレーム５０６を、補助カメラ１０４による撮像映像中にエリアＡＦフレーム５０３と重なるように表示する。この結果、エリアＡＦフレーム５０３、エリアＡＦフレーム５０６内の全ＡＦフレームも重なるようになる。

【0052】

なお、本第２の実施形態では、補助カメラ１０４からの映像に合わせて、映像内に表示されるべきエリアＡＦフレーム５０３と同じ形状及びサイズでエリアＡＦフレーム５０６を生成されるので、撮像装置１０３におけるエリアＡＦフレーム５０３は非表示にしてもよい。

【0053】

次のＳ９０６にて、ＣＰＵ２０５は、ユーザによるエリアＡＦフレーム５０６内の１つのＡＦフレームを選択するのを待つ。選択が行われたことを検出すると、ＣＰＵ２０５は、処理をＳ９０７に進め、選択したＡＦフレームを特定する情報を含む、ＡＦ測距点の選択コマンドを生成し、通信中の撮像装置１０３に送信する。

【0054】

以上の結果、本第２の実施形態によれば、あたかも補助カメラ１０４による撮像画像を介して、直接的に撮像装置のＡＦフレームの選択を行うのと同等の操作環境をユーザに提示できるようになる。

【0055】

（その他の実施例）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

【符号の説明】

【0056】

１０１…ネットワーク、１０２…制御装置、１０３…撮像装置、１０４…補助カメラ、１０５…雲台、２０１…表示部、２０５…ＣＰＵ、２０８…外部記憶装置

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】