特許 7524762 情報処理装置、情報処理方法および情報処理プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-07-22

(45)【発行日】2024-07-30

(54)【発明の名称】情報処理装置、情報処理方法および情報処理プログラム

(51)【国際特許分類】

   H04N 23/60 20230101AFI20240723BHJP

   G03B 7/091 20210101ALI20240723BHJP

   G03B 17/20 20210101ALI20240723BHJP

   H04N 23/63 20230101ALI20240723BHJP

   H04N 23/661 20230101ALI20240723BHJP

【ＦＩ】

H04N23/60 100

G03B7/091

G03B17/20

H04N23/63 300

H04N23/661

【請求項の数】 13

(21)【出願番号】P 2020540176

(86)(22)【出願日】2019-07-31

(86)【国際出願番号】 JP2019030032

(87)【国際公開番号】W WO2020044924

(87)【国際公開日】2020-03-05

【審査請求日】2022-06-13

(31)【優先権主張番号】P 2018163105

(32)【優先日】2018-08-31

(33)【優先権主張国・地域又は機関】JP

(73)【特許権者】

【識別番号】000002185

【氏名又は名称】ソニーグループ株式会社

(74)【代理人】

【識別番号】100082762

【弁理士】

【氏名又は名称】杉浦 正知

(74)【代理人】

【識別番号】100123973

【弁理士】

【氏名又は名称】杉浦 拓真

(72)【発明者】

【氏名】中塚 盛雄

【審査官】吉川 康男

(56)【参考文献】

【文献】特開２０１１－１０９６５７（ＪＰ，Ａ）

【文献】特開２０１６－１７４２５９（ＪＰ，Ａ）

【文献】特開２０１４－１１６８７８（ＪＰ，Ａ）

【文献】特開２０１１－２１１６７８（ＪＰ，Ａ）

【文献】特開２００５－２１５３７３（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ２３／６０

Ｇ０３Ｂ ７／０９１

Ｇ０３Ｂ １７／２０

Ｈ０４Ｎ ２３／６３

Ｈ０４Ｎ ２３／６６１

(57)【特許請求の範囲】

【請求項1】

撮像装置とネットワークで接続され、
前記ネットワークを介して前記撮像装置から送信された、撮影シーンと類似する類似シーンで得られた撮影画像に対応するライブビュー映像を構成するフレームを表示部に表示し、
前記フレームに対してユーザから入力された位置に前記撮影シーンにおける撮影タイミングを示す目印を設定し、
前記目印は、前記類似シーン後の前記撮影シーンにおけるライブビュー表示に重畳して表示され、表示されている前記目印を確認した前記ユーザからの撮影を指示する入力に基づいて、当該入力に応じた制御信号を前記ネットワークを介して前記撮像装置に送信する
情報処理装置。

【請求項2】

前記類似シーンは、前記撮影シーンよりも前に撮影されたシーンである
請求項１に記載の情報処理装置。

【請求項3】

前記類似シーンで撮影された複数の画像を前記表示部に表示し、前記ユーザからの入力に基づいて、前記複数の画像の中から、前記撮影シーンにおける撮影タイミングを示す撮影タイミング画像を設定する
請求項１に記載の情報処理装置。

【請求項4】

前記表示部に表示される前記ライブビュー映像を構成する前記フレームは、前記撮影タイミング画像に対応するフレームである
請求項３に記載の情報処理装置。

【請求項5】

前記撮影タイミング画像に対応する前記フレームは、前記複数の画像を撮影した連続撮影のフレームレートと、前記ライブビュー映像のフレームレートに基づいて決定される
請求項４に記載の情報処理装置。

【請求項6】

前記撮影タイミングは連写撮影における撮影開始タイミングであり、前記目印は、前記撮影シーンにおける連写撮影開始のタイミングを示す
請求項３に記載の情報処理装置。

【請求項7】

前記撮影タイミングは連写撮影における撮影終了タイミングであり、前記目印は、前記撮影シーンにおける連写撮影終了のタイミングを示す
請求項３に記載の情報処理装置。

【請求項8】

前記目印は前記撮影シーンにおける連写撮影開始タイミングおよび連写撮影終了タイミングを示す
請求項１に記載の情報処理装置。

【請求項9】

前記撮影タイミングは単写撮影における撮影実行のタイミングであり、前記目印は前記撮影シーンにおける撮影実行のタイミングを示す
請求項３に記載の情報処理装置。

【請求項10】

前記ライブビュー映像は前記撮影画像に対して遅延を有する
請求項１に記載の情報処理装置。

【請求項11】

前記遅延は、前記撮像装置でのエンコードに要する時間、前記ネットワークにおける伝送時間、前記ライブビュー映像を表示する装置におけるデコードに要する時間のうちの少なくともいずれかによるものである
請求項１０に記載の情報処理装置。

【請求項12】

ネットワークを介して撮像装置から送信された、撮影シーンと類似する類似シーンで得られた撮影画像に対応するライブビュー映像を構成するフレームを表示部に表示し、
前記フレームに対してユーザから入力された位置に前記撮影シーンにおける撮影タイミングを示す目印を設定し、
前記目印は、前記類似シーン後の前記撮影シーンにおけるライブビュー表示に重畳して表示され、表示されている前記目印を確認した前記ユーザからの撮影を指示する入力に基づいて、当該入力に応じた制御信号を前記ネットワークを介して前記撮像装置に送信する
情報処理方法。

【請求項13】

ネットワークを介して撮像装置から送信された、撮影シーンと類似する類似シーンで得られた撮影画像に対応するライブビュー映像を構成するフレームを表示部に表示し、
前記フレームに対してユーザから入力された位置に前記撮影シーンにおける撮影タイミングを示す目印を設定し、
前記目印は、前記類似シーン後の前記撮影シーンにおけるライブビュー表示に重畳して表示され、表示されている前記目印を確認した前記ユーザからの撮影を指示する入力に基づいて、当該入力に応じた制御信号を前記ネットワークを介して前記撮像装置に送信する
情報処理方法をコンピュータに実行させる情報処理プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本技術は、情報処理装置、情報処理方法および情報処理プログラムに関する。

【背景技術】

【0002】

従来から静止画、動画を撮影するカメラと、そのカメラを制御する端末装置とがネットワークで接続されたカメラシステムが提案されている。そのようなカメラシステムでは遠隔地からの撮影操作を行える、人が直接カメラを持って撮影位置に行くことが難しい場合でも撮影できるなどの利点がある。

【0003】

しかし、そのようなカメラシステムではカメラから端末装置に送信されるライブビュー映像は撮影対象である実際の出来事から遅れて端末装置おいて表示されることになる。この遅延の要因としては、例えば、カメラでの映像のエンコードに要する時間、ネットワーク伝送時間、端末装置におけるデコードに要する時間などがある。

【0004】

そこで、カメラ内でのＯＶＦと実際に撮影された写真の遅れ（シャッタータイムラグ）を把握するためにＯＶＦ上にシャッタータイムラグ分遅れた映像を重ね合わせて表示する方法が提案されている（特許文献１）。

【先行技術文献】

【特許文献】

【0005】

【文献】特開２０１２－９９９８４号公報

【発明の概要】

【発明が解決しようとする課題】

【0006】

特許文献１の手法では、シャッタータイムラグが既知である必要があるため、シャッタータイムラグが未知のカメラシステムには適用できない。また、撮影時に見ることができる映像は遅延のないＯＶＦであるため、遅延のある映像しか見ることができない上述のようなカメラシステムにおいては、問題解決に至っていない。

【0007】

本技術はこのような点に鑑みなされたものであり、ライブビューが遅延していてもそのライブビューを見ながらユーザの所望のシーンを撮影することができる情報処理装置、情報処理方法および情報処理プログラムを提供することを目的とする。

【課題を解決するための手段】

【0008】

上述した課題を解決するために、第１の技術は、撮像装置とネットワークで接続され、ネットワークを介して撮像装置から送信された、撮影シーンと類似する類似シーンで得られた撮影画像に対応するライブビュー映像を構成するフレームを表示部に表示し、フレームに対してユーザから入力された位置に撮影シーンにおける撮影タイミングを示す目印を設定し、目印は、類似シーン後の撮影シーンにおけるライブビュー表示に重畳して表示され、表示されている目印を確認したユーザからの撮影を指示する入力に基づいて、当該入力に応じた制御信号をネットワークを介して撮像装置に送信する情報処理装置である。

【0009】

また、第２の技術は、ネットワークを介して撮像装置から送信された、撮影シーンと類似する類似シーンで得られた撮影画像に対応するライブビュー映像を構成するフレームを表示部に表示し、フレームに対してユーザから入力された位置に撮影シーンにおける撮影タイミングを示す目印を設定し、目印は、類似シーン後の撮影シーンにおけるライブビュー表示に重畳して表示され、表示されている目印を確認したユーザからの撮影を指示する入力に基づいて、当該入力に応じた制御信号をネットワークを介して撮像装置に送信する情報処理方法である。

【0010】

さらに、第３の技術は、ネットワークを介して撮像装置から送信された、撮影シーンと類似する類似シーンで得られた撮影画像に対応するライブビュー映像を構成するフレームを表示部に表示し、フレームに対してユーザから入力された位置に撮影シーンにおける撮影タイミングを示す目印を設定し、目印は、類似シーン後の撮影シーンにおけるライブビュー表示に重畳して表示され、表示されている目印を確認したユーザからの撮影を指示する入力に基づいて、当該入力に応じた制御信号をネットワークを介して撮像装置に送信する情報処理方法をコンピュータに実行させる情報処理プログラムである。

【発明の効果】

【0011】

本技術によれば、ライブビュー映像が遅延していてもそのライブビュー映像を見ながらユーザの所望のシーンを撮影することができる。なお、ここに記載された効果は必ずしも限定されるものではなく、明細書中に記載されたいずれかの効果であってもよい。

【図面の簡単な説明】

【0012】

【図1】カメラシステムの構成を示すブロック図である。

【図2】端末装置の構成を示すブロック図である。

【図3】目印設定用ユーザインターフェースの構成を示す図である。

【図4】目印設定用ユーザインターフェースの構成を示す図である。

【図5】目印設定用ユーザインターフェースの一部分を抽出した図である。

【図6】情報処理装置の構成を示すブロック図である。

【図7】目印設定のためのユーザ入力の流れを示すフローチャートである。

【図8】目印設定処理の流れを示すフローチャートである。

【図9】撮影用ユーザインターフェースの構成を示す図である。

【図10】被写体検出による目印設定の処理を示すフローチャートである。

【図11】被写体に追従して目印が移動する変形例の説明図である。

【図12】雲台を使用する変形例の構成を示す図である。

【図13】雲台を使用する変形例における処理を示すフローチャートである。

【図14】カメラシステムの変形例の構成を示すブロック図である。

【図15】カメラシステムの変形例の構成を示すブロック図である。

【図16】目印の変形例を示す図である。

【図17】目印の変形例を示す図である。

【図18】目印設定用ユーザインターフェースの変形例を示す図である。

【図19】目印設定用ユーザインターフェースの変形例を示す図である。

【発明を実施するための形態】

【0013】

以下、本技術の実施の形態について図面を参照しながら説明する。なお、説明は以下の順序で行う。
＜１．実施の形態＞
［１－１．カメラシステムの構成］
［１－２．端末装置の構成］
［１－３．目印設定用ユーザインターフェースの構成］
［１－４．情報処理装置の構成］
［１－５．情報処理装置における処理］
［１－６．目印を用いた撮影方法］
＜２．変形例＞
［２－１．被写体検出による目印設定］
［２－２．被写体に追従して目印移動］
［２－３．雲台の利用］
［２－４．その他の変形例］

【0014】

＜１．実施の形態＞
［１－１．カメラシステムの構成］
まず、図１を参照してカメラシステム１の構成について説明する。カメラシステム１は、端末装置１０と撮像装置２０から構成され、端末装置１０と撮像装置２０とはネットワーク３０を介して接続されている。

【0015】

本技術は、撮像装置２０と端末装置１０とを用いた遠隔撮影において用いられるものである。遠隔撮影では、撮像装置２０で撮影されたライブビュー映像がネットワーク３０を介して端末装置１０に送信されて端末装置１０において表示される。そして、そのライブビュー映像を見ながらユーザが端末装置１０に対して撮影指示（シャッタ入力）を行い、シャッタ入力に応じた入力信号がネットワーク３０を通じて撮像装置２０に送信されることにより撮影が行われる。なお、端末装置１０と撮像装置２０間の距離は通信可能であればどの程度の距離でも構わない。

【0016】

撮像装置２０は、静止画および動画撮影が可能であり、ネットワーク接続機能を有し、外部装置からの制御で撮影が可能なカメラである。

【0017】

端末装置１０は、ネットワーク接続機能を有するパーソナルコンピュータ、ノートパソコン、タブレット端末、スマートフォンなどである。端末装置１０は、情報処理装置１００としての機能を備える。

【0018】

情報処理装置１００は、端末装置１０において動作し、本技術に係る目印設定用ユーザインターフェースと撮影用ユーザインターフェースの表示制御、ネットワーク３０で接続された撮像装置２０から送信された撮影画像とライブビュー映像の表示制御を行う。また、情報処理装置１００は、撮影シーンにおける撮影開始タイミングを示す目印（以下、撮影開始目印Ｓと称する。）および撮影終了タイミングを示す目印（以下、撮影終了目印Ｅと称する。）の設定などを行うものである。

【0019】

撮影開始目印Ｓと撮影終了目印Ｅの設定は、撮影シーンでの撮影の前に行う類似シーンでの撮影で取得した撮影画像およびライブビュー映像に基づいて行うものである。よって、ユーザは撮影シーンでの撮影の前に類似シーンで撮影を行う必要がある。類似シーンとは、例えば撮影対象が自動車のレースのゴールシーンであり、撮影シーンがそのレースの最終周回である場合にはその最終周回前を撮影すること、撮影シーンで撮影するレースより前に行われる他のレースを撮影することなどである。また、撮影対象が１００ｍ走などの陸上競技のゴールシーンである場合には、撮影シーンで撮影する１００ｍ走より前に行われた予選の１００ｍ走などを撮影することなどである。さらに、撮影対象が映画などの台本に沿った撮影である場合には撮影シーンである本番の前のリハーサルを撮影することなどである。

【0020】

説明の便宜上、本実施の形態は撮影対象が自動車のレースであり、被写体である自動車が目標位置であるゴールラインを到達した時点から連写撮影を開始して、ゴールラインを超えて数秒後のところまでを撮影するものとする。よって、撮影開始目印Ｓは、撮影シーンにおける連写撮影開始のタイミングを示すものであり、撮影終了目印Ｅは、撮影シーンにおける連写撮影終了のタイミングを示すものである。

【0021】

ネットワーク３０は、有線通信、無線ＬＡＮ（Local Area Network）やＷＡＮ（Wide Area Network）、ＷｉＦｉ（Wireless Fidelity）、４Ｇ（第４世代移動通信システム）、Bluetooth（登録商標）、赤外線通信など、データの送受信を行うことができるものであればどのようなものでもよい。

【0022】

［１－２．端末装置の構成］
次に図２を参照して端末装置１０について説明する。端末装置１０は、制御部１１、記憶部１２、通信部１３、表示部１４、入力部１５および情報処理装置１００を備えている。

【0023】

制御部１１は、ＣＰＵ（Central Processing Unit）、ＲＡＭ（Random Access Memory）およびＲＯＭ（Read Only Memory）などから構成されている。ＲＯＭには、ＣＰＵにより読み込まれ動作されるプログラムなどが記憶されている。ＲＡＭは、ＣＰＵのワークメモリとして用いられる。ＣＰＵは、ＲＯＭに記憶されたプログラムに従い様々な処理を実行してコマンドの発行を行うことによって端末装置１０全体の制御を行う。

【0024】

記憶部１２は、例えば、ハードディスク、ＳＤメモリカードなどの大容量記憶媒体である。記憶部１２は、撮像装置２０により撮影された撮影画像、撮影映像などのコンテンツやアプリケーションなどを保存することができる。

【0025】

通信部１３は、ネットワーク３０を介して撮像装置２０、他の装置、インターネットなどと通信するための通信モジュール、通信用コネクタなどである。通信部１３による通信は、ＵＳＢ通信などの有線通信、Wi-Fiなどの無線ＬＡＮ、Bluetooth（登録商標）、ZigBee、４Ｇ（第４世代移動通信システム）、ブロードバンドなどの無線通信どちらであってもよい。

【0026】

表示部１４は、例えば、ＬＣＤ（Liquid Crystal Display）、ＰＤＰ(Plasma Display Panel)、有機ＥＬ(Electro Luminescence)パネルなどにより構成された表示デバイスである。表示部１４には、端末装置１０のユーザインターフェース、記憶部１２に保存された撮影画像、撮影映像などのコンテンツ、本技術に係る目印設定用ユーザインターフェース、撮影用ユーザインターフェースなどが表示される。

【0027】

入力部１５は、ユーザの端末装置１０に対する操作入力を受け付けるものである。入力部１５に対してユーザから入力がなされると、その入力に応じた入力信号が生成されて制御部１１に出力される。そして、制御部１１はその入力信号に対応した演算処理、端末装置１０の制御を行う。入力部１５としては、表示部１４と一体に構成されたタッチパネル、トラックパッドやタッチパッドと称される表示部１４とは一体となっていない平板状のセンサーを指でなぞって操作するポインティングデバイス、キーボード、マウスなどがある。

【0028】

［１－３．目印設定用ユーザインターフェースの構成］
次に図３乃至図５を参照して端末装置１０の表示部１４に表示される目印設定用ユーザインターフェース２００の構成について説明する。目印設定用ユーザインターフェース２００は、画像表示部２０１、第１フレーム表示部２０２、第２フレーム表示部２０３、ライブビュー表示部２０４、ライブビューフレームレート入力部２０５、撮影フレームレート入力部２０６、シャッタボタン２０７を備えて構成されている。

【0029】

画像表示部２０１には、撮像装置２０による連写撮影で取得された連続撮影画像が時系列に沿って表示される。図３、図４の例では、上から下に向けて時間が進んでいくように連続撮影画像が表示されている。なお、画像表示部２０１には例えばスクロールバー２０８のような表示範囲を調整する手段が備えられており、複数の撮影画像が一画面に収まらない枚数である場合、スクロールバー２０８を上下させることで表示させる撮影画像を変更することができる。画像表示部２０１に表示される撮影画像は、撮影フレームレート入力部２０６で入力されて設定されたフレームレートで連写撮影された画像である。

【0030】

図４に示すように画像表示部２０１には、ユーザが撮影開始画像を選択するための第１選択枠２１１が重畳して表示されている。撮影開始画像とは、ユーザが撮影シーンで連写撮影を開始したいタイミングに対応した撮影画像である。例えば図４に示すように、自動車がゴールラインを到達した時点から連写撮影を開始したい場合、撮影開始画像として自動車がゴールラインに到達した時点での撮影画像を選択する。ユーザはこの第１選択枠２１１を移動させることにより画像表示部２０１に表示されている複数の撮影画像から撮影開始画像を選択することができる。

【0031】

また図４に示すように画像表示部２０１には、ユーザが撮影終了画像を選択するための第２選択枠２１２が重畳して表示されている。撮影終了画像とは、ユーザが撮影シーンで連写撮影を終了させたいタイミングに対応した撮影画像である。ユーザはこの第２選択枠２１２を移動させることにより画像表示部２０１に表示されている複数の撮影画像から撮影終了画像を選択することができる。撮影開始画像と撮影終了画像が特許請求の範囲における撮影タイミング画像である。

【0032】

なお、図４では第１選択枠２１１と第２選択枠２１２は実線状と破線状という形状の違いで区別しているが、その他の形状の違い、色の違い、濃淡の違いなどにより区別してもよい。

【0033】

第１フレーム表示部２０２には、撮像装置２０から送信されたライブビュー映像を構成するフレームのうち、第１選択枠２１１により選択された撮影開始画像に対応するフレームが表示される。ライブビュー映像を構成するフレームはフレーム画像であり、特許請求の範囲におけるライブビュー画像はこのライブビュー映像を構成するフレーム画像である。撮像装置２０からのライブビュー映像はネットワーク３０の伝送時間などにより現実の撮影対象の状態からは遅延している。よって第１フレーム表示部２０２に表示されるフレームも現実の撮影対象の状態からは遅延している。撮影開始画像に対応したフレームを求める方法については後述する。

【0034】

第２フレーム表示部２０３には、撮像装置２０から送信されたライブビュー映像を構成するフレームのうち、第２選択枠２１２により選択された撮影終了画像に対応するフレームが表示される。撮像装置２０からのライブビュー映像はネットワーク３０の伝送時間などにより現実の撮影対象の状態からは遅延している。よって第２フレーム表示部２０３に表示されるフレームも現実の撮影対象の状態からは遅延している。撮影終了画像に対応したフレームを求める方法については後述する。

【0035】

ライブビュー表示部２０４は、撮像装置２０により撮影されてネットワーク３０を介して端末装置１０に送信されたライブビュー映像が表示される。

【0036】

ライブビューフレームレート入力部２０５は、類似シーンでの撮影において撮像装置２０で取得されて送信されるライブビュー映像のフレームレートをユーザが入力するためのものである。ユーザは、ライブビューフレームレート入力部２０５に所望のフレームレートの値を入力することによりライブビュー映像のフレームレートを設定することができる。

【0037】

撮影フレームレート入力部２０６は、類似シーンでの撮影において撮像装置２０により連写撮影されて画像表示部２０１に表示される連続する複数の撮影画像の連写フレームレートをユーザが入力するためのものである。ユーザは、撮影フレームレート入力部２０６に所望のフレームレートの値を入力することにより撮像装置２０による連写撮影のフレームレートを設定することができる。

【0038】

シャッタボタン２０７は、カメラが通常備えるハードウェアボタンとしてのシャッタボタンを備えていない端末装置１０においてユーザが撮像装置２０への撮影を指示するためのソフトウェアボタンである。シャッタボタン２０７に対してユーザから入力がなされると、その入力に応じた入力信号が生成されてネットワーク３０を介して撮像装置２０に送信される。その入力信号を受信した撮像装置２０は撮影を行うことにより、撮影画像が取得される。なお、シャッタボタン２０７への入力状態を継続するとその継続している間撮像装置２０は連写撮影を行い、シャッタボタン２０７への入力を終了すると撮像装置２０は連写撮影を終了する。シャッタボタン２０７への入力に基づいて撮像装置２０によって撮影された撮影画像は画像表示部２０１に表示される。なお、シャッタボタン２０７はこのようなソフトウェアボタンに限られず端末装置１０が備えるハードウェアボタンにシャッタ機能を割り当てることにより実現してもよい。

【0039】

目印設定用ユーザインターフェース２００は以上のように構成されている。

【0040】

次に目印設定用ユーザインターフェース２００を用いてユーザが撮影開始目印Ｓと撮影終了目印Ｅを入力する方法について説明する。図５は説明のために目印設定用ユーザインターフェース２００から第１フレーム表示部２０２、第２フレーム表示部２０３、ライブビュー表示部２０４を抜き出して示す図である。

【0041】

撮影開始目印Ｓは第１フレーム表示部２０２に対するユーザの入力に応じて設定されるものである。例えば、端末装置１０の入力部１５としてのマウス、タッチパネルなどによる入力でユーザが撮影開始目印Ｓを設定したい第１フレーム表示部２０２上の位置に入力を行うとそこに撮影開始目印Ｓが設定されて表示される。

【0042】

図３乃至図５に示す例では、ユーザは、自動車がゴールラインに到達した状態から連写撮影を開始したいため、自動車がゴールラインに到達した状態の撮影画像を撮影開始画像として選択し、その撮影開始画像に対応するフレームにおいて自動車の進行方向先端に撮影開始目印Ｓを設定するとよい。

【0043】

また、撮影終了目印Ｅは第２フレーム表示部２０３に対するユーザの入力に応じて設定されるものである。例えば、入力部１５としてのマウス、タッチパネルなどによる入力でユーザが撮影終了目印Ｅを設定したい第２フレーム表示部２０３上の位置に入力を行うとそこに撮影終了目印Ｅが設定されて表示される。

【0044】

なお、撮影開始目印Ｓは第１フレーム表示部２０２においてマウス操作やタッチパネル操作によるドラッグなどで位置を調整することが可能である。同様に撮影終了目印Ｅは第２フレーム表示部２０３においてマウス操作やタッチパネル操作によるドラッグなどで位置を調整することが可能である。また、端末装置１０の入力部１５としてのキーボード操作でその位置を微調整できるようにしてもよい。

【0045】

撮影開始目印Ｓが設定されるとライブビュー表示部２０４における第１フレーム表示部２０２と同じ位置に撮影開始目印Ｓが表示される。また、同様に、撮影終了目印Ｅが設定されるとライブビュー表示部２０４における第２フレーム表示部２０３と同じ位置に撮影終了目印Ｅが表示される。

【0046】

このようにしてユーザは目印設定用ユーザインターフェース２００を用いて撮影開始目印Ｓと撮影終了目印Ｅを設定することができる。

【0047】

［１－４．情報処理装置の構成］
次に図６を参照して情報処理装置１００の構成について説明する。

【0048】

情報処理装置１００は、送受信部１０１、コマンド送信部１０２、画像受信部１０３、画像リポジトリ１０４、画像表示制御部１０５、ライブビュー受信部１０６、ライブビューリポジトリ１０７、ライブビュー表示制御部１０８、ライブビューフレームレート設定部１０９、撮影フレームレート設定部１１０、選択フレーム制御部１１１、第１フレーム表示制御部１１２、第２フレーム表示制御部１１３、目印表示制御部１１４とから構成されている。

【0049】

送受信部１０１は、撮像装置２０からネットワーク３０を介して送信されたデータを受信する。また送受信部１０１は、コマンド送信部１０２から受信したコマンドをネットワーク３０を介して撮像装置２０に送信する処理を行う。

【0050】

コマンド送信部１０２は、シャッタボタン２０７に対するユーザからの入力により生成された入力信号をコマンドに変換して送受信部１０１に供給する。

【0051】

画像受信部１０３は、送受信部１０１を介して撮像装置２０から供給されたデータから撮影画像を抽出して、撮影時が古い画像ほど小さい値が付されるように番号を付して画像リポジトリ１０４に保存する。また画像受信部１０３は、シャッタボタン２０７への入力に応じた入力信号の供給を受けて、シャッタボタン２０７への入力の状態を判定し、入力があった場合には画像リポジトリ１０４に保存されている撮影画像を削除する。

【0052】

画像リポジトリ１０４は、連写撮影により撮影された複数の撮影画像を保存する。

【0053】

画像表示制御部１０５は、画像リポジトリ１０４に保存されている撮影画像を番号の順序に従い目印設定用ユーザインターフェース２００の画像表示部２０１に表示させる。また、画像表示制御部１０５は撮影画像に対して、選択された撮影開始画像と撮影終了画像を検出してそれぞれの番号情報を選択フレーム制御部１１１に供給する。

【0054】

ライブビュー受信部１０６は、送受信部１０１を介して撮像装置２０から供給されたデータから、複数のフレームから構成されるライブビュー映像を抽出してライブビュー表示制御部１０８およびライブビューリポジトリ１０７に供給する。

【0055】

またライブビュー受信部１０６は、シャッタボタン２０７への入力に応じた入力信号からシャッタボタン２０７への入力の状態を判定し、入力があった場合にはライブビューリポジトリ１０７に保存されているフレームを削除し、入力が継続している場合にはライブビューリポジトリ１０７にライブビューを構成するフレームに番号を付加して保存し、入力が終了するとフレームのライブビューリポジトリ１０７への保存を終了する。なお、番号は時刻が古いフレームに小さい値を付して、フレームが新しくなるに従い大きな値が付されるようにする。

【0056】

ライブビューリポジトリ１０７はライブビュー映像を構成するフレームを保存する。

【0057】

ライブビュー表示制御部１０８はライブビュー受信部１０６から供給されたライブビュー映像を目印設定用ユーザインターフェース２００のライブビュー表示部２０４に表示させる。

【0058】

ライブビューフレームレート設定部１０９は、ユーザからライブビューフレームレート入力部２０５に入力されたライブビューフレームレートを保持して選択フレーム制御部１１１に供給する。

【0059】

撮影フレームレート設定部１１０は、ユーザから撮影フレームレート入力部２０６に入力された連写撮影の連写フレームレートを保持して選択フレーム制御部１１１に供給する。

【0060】

選択フレーム制御部１１１は、ライブビューフレームレートと連写フレームレートと撮影開始画像に付された番号とから、撮影開始画像の撮影時刻に対応するライブビューフレーム番号を算出する。

【0061】

また、選択フレーム制御部１１１は、ライブビューフレームレートと連写フレームレートと撮影終了画像に付された番号とから撮影終了画像の撮影時刻に対応するライブビューを構成するフレームの番号（以下、ライブビューフレーム番号）を算出する。

【0062】

ここで、ライブビューフレーム番号の算出方法について説明する。複数の撮影画像のそれぞれに付された番号をｎとし、連写フレームレートをｓｆ、先頭の撮影画像の撮影時刻を０とすると、番号ｎの撮影画像の撮影時刻Ｔ（ｎ）は以下の式１で算出することができる。

【0063】

［式１］
Ｔ（ｎ）＝ｎ×（１／ｓｆ）

【0064】

また、先頭のライブビューフレームの時刻を０としたときのある時刻ｔにおけるライブビューフレーム番号ＬｉはライブビューフレームレートをＬｆとすると以下の式２で算出することができる。

【0065】

［式２］
Ｌｉ＝ｔ×Ｌｆ

【0066】

なお、Ｌｉはライブビューフレーム番号であるため、算出された値が整数でない場合は切り下げまたは切り上げにより整数化する。

【0067】

そして、番号ｎの撮影画像に対応するライブビューフレーム番号Ｌ（ｎ）は式１と式２から求まる下記の式３で算出することができる。

【0068】

［式３］
Ｌ（ｎ）＝Ｔ（ｎ）×Ｌｆ

【0069】

これにより、いかなる番号の撮影画像であってもそれに対応するライブビューフレーム番号を特定することができる。

【0070】

よって、例えば、撮影開始画像の番号をｓとすると、それに対応するライブビューフレーム番号はＴ（ｓ）以下の値でＴ（ｓ）に最も近い時刻を持つものなので、Ｌ（ｓ）を最も近い整数に切り下げたものとなる。

【0071】

また、撮影開始画像の番号をｅとすると、それに対応するライブビューフレーム番号はＴ（ｅ）以下の値でＴ（ｅ）に最も近い時刻を持つものなので、Ｌ（ｅ）を最も近い整数に切り上げたものとなる。

【0072】

第１フレーム表示制御部１１２は、選択フレーム制御部１１１から取得した撮影開始画像に対応するライブビュー映像を構成するフレームをライブビューリポジトリ１０７から読み出して目印設定用ユーザインターフェース２００の第１フレーム表示部２０２に表示する。撮像装置２０からのライブビュー映像は映像のエンコードに要する時間、ネットワーク３０における伝送時間、端末装置１０におけるデコードに要する時間などにより現実の撮影対象の状態からは遅延している。よって、図４に示すように、このようにして第１フレーム表示部２０２に表示される撮影開始画像に対応するライブビューフレームも撮影画像および現実の撮影対象の状態からは遅延している。

【0073】

第２フレーム表示制御部１１３は、選択フレーム制御部１１１から取得した撮影終了画像に対応するライブビュー映像を構成するフレームをライブビューリポジトリ１０７から読み出して目印設定用ユーザインターフェース２００の第２フレーム表示部２０３に表示する。撮像装置２０からのライブビュー映像は現実の撮影対象の状態からは遅延している。よって、図４に示すように、このようにして第２フレーム表示部２０３に表示される撮影終了画像番号に対応するライブビューフレームも撮影画像および現実の撮影対象の状態からは遅延している。

【0074】

目印表示制御部１１４は目印設定用ユーザインターフェース２００のライブビュー表示部２０４における撮影開始目印Ｓおよび撮影終了目印Ｅの表示制御を行うものである。第１フレーム表示制御部１１２はユーザからの入力を受けて第１フレーム表示部２０２に撮影開始目印Ｓを表示する。第１フレーム表示制御部１１２は撮影開始目印Ｓの座標を目印表示制御部１１４に設定する。また、第２フレーム表示制御部１１３はユーザからの入力を受けて第２フレーム表示部２０３に撮影終了目印Ｅを表示する。第２フレーム表示制御部１１３は撮影終了目印Ｅの座標を目印表示制御部１１４に設定する。目印表示制御部１１４は設定された撮影開始目印Ｓの座標、撮影開始目印Ｓの座標をもとにライブビュー表示制御部１０８に対し、ライブビュー表示部２０４における目印表示を指示する。ライビュー表示制御部１０８は目印表示制御部１１４から指示に従い、ライブビュー表示部２０４において表示されるライブビュー上に撮影開始目印Ｓ、撮影開始目印Ｓを重畳表示する。

【0075】

情報処理装置１００は以上のようにして構成されている。情報処理装置１００はプログラムで構成され、そのプログラムは、予め端末装置１０内にインストールされていてもよいし、ダウンロード、記憶媒体などで配布されて、ユーザが自らインストールするようにしてもよい。さらに、情報処理装置１００は、プログラムによって実現されるのみでなく、その機能を有するハードウェアによる専用の装置、回路などを組み合わせて実現されてもよい。

【0076】

［１－５．情報処理装置における処理］
次に図７および図８を参照して情報処理装置１００における処理の流れについて説明する。まず、情報処理装置１００における処理の前提として、図７のフローチャートを参照して情報処理装置１００による目印設定のためのユーザの入力操作の流れについて説明する。

【0077】

まずステップＳ１１で、ユーザはライブビューフレームレート入力部２０５と撮影フレームレート入力部２０６に入力を行うことにより、類似シーンでの撮影におけるライブビューのフレームレートと類似シーンでの撮影の連写撮影のフレームレートを設定する。

【0078】

次にステップＳ１２で、ユーザは類似シーンでの撮影として、撮像装置２０のシャッタボタン２０７に対し入力を行い、ステップＳ１３でシャッタボタン２０７に対する入力を終了する。これにより、シャッタボタン２０７に対して入力を継続している間、連続撮影により複数の撮影画像が取得される。

【0079】

ユーザによる類似シーンでの撮影が終了すると複数の撮影画像が画像表示部２０１に表示されるので、次にステップＳ１４で、ユーザは画像表示部２０１に表示されている撮影画像を確認してその後の撮影において撮影したいシーンと同様のシーンが含まれているかを確認する。

【0080】

撮影したいシーンと同様のシーンが含まれていない場合、ステップＳ１２に戻り、撮影したいシーンと同様のシーンが含まれるまで、ユーザはステップＳ１２乃至ステップＳ１４を繰り返す（ステップＳ１４のＮｏ）。

【0081】

撮影シーンで撮影したいシーンと同様のシーンが含まれている場合、処理はステップＳ１５に進み（ステップＳ１４のＹｅｓ）、ユーザは画像表示部２０１に表示されている複数の撮像画像から撮影開始画像を選択する。この選択は上述したように第１選択枠２１１で複数の撮像画像のいずれかを選択することにより行う。

【0082】

次にステップＳ１６で、ユーザは画像表示部２０１に表示されている複数の撮像画像から撮影終了画像を選択する。この選択は上述したように第２選択枠２１２で複数の撮像画像のいずれかを選択することにより行う。

【0083】

ユーザにより撮影開始画像と撮影終了画像が選択されると、第１フレーム表示部２０２に撮影開始画像に対応したライブビューフレームが表示され、第２フレーム表示部２０３に撮影終了画像に対応したライブビューフレームが表示される。そしてステップ１７で、ユーザは第１フレーム表示部２０２と第２フレーム表示部２０３において撮影開始目印Ｓと撮影終了目印Ｅを入力する。

【0084】

情報処理装置１００による目印設定のためにユーザは以上の入力操作を行う必要がある。

【0085】

次に図８のフローチャートを参照して、情報処理装置１００における処理の流れについて説明する。

【0086】

まずステップＳ２１で、ユーザからのライブビューフレームレート入力部２０５と撮影フレームレート入力部２０６への入力に基づいて、類似シーンの撮影におけるライブビューのフレームレートと、類似シーンでの撮影の連写のフレームレートを設定する。

【0087】

次にステップＳ２２で、撮像装置２０から送信された撮影画像を受信し、画像表示部２０１に表示する。

【0088】

次にステップＳ２３で、ユーザからの第１選択枠２１１と第２選択枠２１２による選択入力に基づいて撮影開始画像と撮影終了画像とを設定する。

【0089】

次にステップＳ２４で、撮影開始画像に対応したライブビューフレームと、撮影終了画像に対応した了ライブビューフレームを算出する。算出方法は情報処理装置１００の構成において説明した方法である。

【0090】

次にステップＳ２５で、撮影開始画像に対応するライブビューフレームと撮影終了画像に対応するライブビューフレームをライブビューリポジトリ１０７から読み出してそれぞれ、第１フレーム表示部２０２と第２フレーム表示部２０３に表示する。

【0091】

次にステップ２６で、ユーザからの入力に応じて撮影開始目印Ｓと撮影終了目印Ｅを設定する。そして、ステップＳ２７で撮影開始目印Ｓを第１フレーム表示部２０２に表示させ、第２フレーム表示部２０３に撮影終了目印Ｅを表示させるとともに、撮影開始目印Ｓと撮影終了目印Ｅの両方をライブビュー表示部２０４に表示する。

【0092】

以上のようにして情報処理装置１００による目印設定処理が行われる。

【0093】

［１－６．目印を用いた撮影方法］
次に上述の情報処理装置１００による処理で設定された撮影開始目印Ｓと撮影終了目印Ｅを用いた撮影方法について説明する。この撮影は類似シーンでの撮影の後に行われる撮影である。また、この撮影は類似シーンでの撮影と同様に、ユーザが端末装置１０に対してシャッタ入力を行い、入力信号がネットワーク３０を通じて撮像装置２０に送信されることにより撮影がなされる遠隔撮影である。

【0094】

図９は類似シーンでの撮影後の撮影において端末装置１０の表示部１４に表示される撮影用ユーザインターフェース３００の一例である。撮影用ユーザインターフェース３００はライブビュー表示部３０１と、シャッタボタン３０２を備えて構成されている。

【0095】

ライブビュー表示部３０１は、ネットワーク３０を介して撮像装置２０から送信されたライブビュー映像が表示される。このライブビュー映像は、エンコード時間、ネットワーク３０における伝送時間、デコード時間などにより現実の撮影対象の状態からは遅延しているものである。また、ライブビュー表示部３０１には、撮影開始目印Ｓと撮影終了目印Ｅとがライブビュー映像に重畳して表示される。この撮影開始目印Ｓと撮影終了目印Ｅは目印設定用ユーザインターフェース２００において設定されて、目印設定用ユーザインターフェース２００のライブビュー表示部２０４に表示されたもの同じ位置に表示される。

【0096】

シャッタボタン３０２はハードウェアボタンとしてのシャッタボタンを備えていない端末装置１０においてユーザが撮像装置２０への撮影を指示するためのソフトウェアボタンである。シャッタボタン３０２に対してユーザから入力がなされると、その入力に応じた制御信号が生成されてネットワーク３０を介して撮像装置２０に送信される。その制御信号を受信した撮像装置２０は撮影を行うことにより、撮影画像が取得される。なお、シャッタボタン３０２への入力状態を継続するとその継続している間撮像装置２０は連写撮影を行い、シャッタボタン３０２への入力を終了すると撮像装置２０は連写撮影を終了する。

【0097】

撮影用ユーザインターフェース３００はこのように構成されており、撮影対象は目印設定用ユーザインターフェース２００の説明におけるものと同様の自動車のレースにおいて被写体である自動車が目標であるゴールラインに到達する前後のシーンである。

【0098】

ライブビュー表示部３０１には撮像装置２０で撮影されている撮影対象のリアルタイムのライブビュー映像が表示され続けている。ユーザはライブビュー表示部３０１を見て被写体である自動車が撮影開始目印Ｓに到達したのを確認したらシャッタボタン３０２に入力を行う。そして、自動車が撮影終了目印Ｅに到達したのを確認したらシャッタボタン３０２への入力を終了する。

【0099】

上述したようにライブビュー映像は実際の撮影対象の状態からは遅延した映像となっている。すなわち、ライブビュー映像内の状態よりも実際の撮影対象の状態の方が進んでいる。よって、ユーザが所望する、「自動車がゴールラインに到達したシーン」である撮影開始画像に対応するライブビュー映像のフレームにおける自動車の位置に自動車が到達（撮影開始目印Ｓに到達）したタイミングでシャッタボタン３０２に入力を行うことにより、自動車がゴールラインに到達した時点から撮影を開始することができる。

【0100】

同様に、ライブビュー映像において目標の被写体が撮影終了目印Ｅに到達したタイミングでシャッタボタン３０２への入力状態を終了することにより、所望の位置に車が到達した時点で撮影を終了させることができる。

【0101】

以上のようにして実施の形態における目印作成と目印を利用した撮影が行われる。

【0102】

本技術によれば、撮像装置２０で撮影されたライブビュー映像が端末装置１０において遅延して表示されても、そのライブビュー映像を見ながらユーザの所望のシーンを撮影することができる。

【0103】

また、所望のシーンを撮影するために所望のシーンの前後を含めて多数の画像を撮影する必要がないため、撮影枚数を減らすことができ、撮影後の撮影画像の確認作業の煩雑さを解消することもできる。

【0104】

＜２．変形例＞
以上、本技術の実施の形態について具体的に説明したが、本技術は上述の実施の形態に限定されるものではなく、本技術の技術的思想に基づく各種の変形が可能である。

【0105】

［２－１．被写体検出による目印設定］
実施の形態では撮影開始目印Ｓと撮影終了目印Ｅはユーザからの入力に基づいて設定したが、情報処理装置１００または端末装置１０が被写体検出を行い、その検出結果に基づいて設定してもよい。

【0106】

この場合の情報処理装置１００における処理について図１０のフローチャートを参照して説明する。

【0107】

まずステップＳ３１で、ユーザの入力に基づいて撮影開始画像と撮影終了画像とを設定する。

【0108】

次にステップＳ３２で、撮影開始画像に対応するライブビューフレーム番号と撮影終了画像に対応するライブビューフレーム番号を算出する。算出方法は実施の形態におけるものと同様である。

【0109】

次にステップＳ３３で撮影開始画像に対応するライブビューフレームに対して被写体検出処理を行う。被写体検出方法としては、テンプレートマッチングによる物体検出技術、被写体の輝度分布情報に基づくマッチング方法、画像に含まれる肌色の部分や人間の顔の特徴量等に基づく方法などを用いてもよい。また、これらの手法を組み合わせて認識精度を高めるようにしてもよい。

【0110】

次にステップＳ３４で、撮影開始画像に対応するライブビューフレームにおいて検出された被写体の位置に基づいて撮影開始目印Ｓを設定する。被写体の位置に基づいて撮影開始目印Ｓを設定する方法としては、検出された被写体の進行方向先端の位置に合わせる、被写体の進行方向後端の位置に合わせる、被写体の中心位置に合わせるなどがある。このように被写体の進行方向先端、後端などを基準にして目印を設定する場合、被写体検出処理に加え、被写体の動き検出、被写体の輪郭検出処理を行うとよい。また、検出された被写体を含む領域を撮影開始目印Ｓとして設定してもよい。同様にして撮影終了ライブビューフレームにおいて検出された被写体の位置に基づいて撮影終了目印Ｅを設定する。

【0111】

以上のようにして被写体検出結果に基づいた目印の設定が行われる。この被写体検出に基づく手法によれば、ユーザは目印設定ための入力を行う必要がないため、容易かつ迅速に目印設定を行うことができる。

【0112】

［２－２．被写体に追従して目印移動］
実施の形態では、動く被写体（自動車）が固定されて動かない目標（ゴールライン）に到達する場面を撮影する例を挙げたが、撮影対象はそれに限られない。例えば図１１に示すテニスのように、動く被写体（ボールＢ）が動く目標（テニスプレーヤＰ）に到達する場面（テニスプレーヤＰがボールＢを打つ場面）もあり得る。

【0113】

この場合、目標（テニスプレーヤＰ）は動くため、撮影開始目印Ｓと目標（テニスプレーヤＰ）との距離が常に変化するものとなる。よって、撮影開始目印Ｓの位置が固定であると、撮影開始目印Ｓに被写体（ボールＢ）が到達した時点でシャッタボタン２０７に入力を行ってもユーザが所望する画像が撮影できるとは限らない。

【0114】

そこで、動く目標の位置の変化に追従させて撮影開始目印Ｓと撮影終了目印Ｅを移動させる（再描画）ことにより、目標が動いても目印に応じた撮影が可能となる。

【0115】

この変形例について図１１を参照して説明する。例えば、図１１Ａに示すように、テニスの試合を撮影する場合において、類似シーンで撮影した撮影映像を用いて撮影開始目印Ｓと撮影終了目印Ｅを設定したとする。撮影開始目印Ｓと撮影終了目印Ｅの設定方法は実施の形態と同様である。図１１Ａの例においては、目標（テニスプレーヤＰ）の３メートル前の位置に撮影開始目印Ｓを設定したとする。

【0116】

この場合、撮影開始目印Ｓの追従対象とする被写体（追従対象被写体と称する。）を設定する。図１１の例では目標（テニスプレーヤＰ）を追従対象被写体と設定している。追従対象被写体の設定はユーザの入力に基づいてもよいし、被写体検出処理により行ってもよい。撮影終了目印Ｅについても同様である。

【0117】

そして撮影シーンでは、図１１Ｂに示すように、撮影用ユーザインターフェース３００においてライブビュー映像を表示する際、被写体検出により追従対象被写体を検出し、その追従対象被写体の動きに追従させて撮影開始目印Ｓと撮影終了目印Ｅを移動させる。これにより追従対象被写体（テニスプレーヤＰ）がどこへ移動しても常に追従対象被写体（テニスプレーヤＰ）と撮影開始目印Ｓと撮影終了目印Ｅとの距離は一定となる。よって、追従対象被写体（テニスプレーヤＰ）がどこに位置していても、被写体（ボールＢ）が撮影開始目印Ｓに到達した時点でシャッタボタン２０７に入力を行い、ボールＢが撮影終了目印Ｅに到達した時点でシャッタボタン２０７への入力を終了することにより、被写体（ボールＢ）が目標（テニスプレーヤＰ）に到達する場面（テニスプレーヤＰがボールＢを打つ場面）を含めた前後の画像を撮影することができる。

【0118】

［２－３．雲台の利用］
また、本技術はユーザが撮像装置２０を手に持って撮影する場合や三脚などで撮像装置２０を固定して撮影する場合の他、撮像装置２０を雲台４０に搭載して撮影する場合にも適用することができる。雲台４０とは、図１２Ａに示すように撮像装置２０を支持した状態でパン・チルト動作を行うことにより撮像装置２０の撮影方向を自動で変更することができる装置である。

【0119】

図１２Ｂに示すように、雲台４０はネットワーク３０と接続されており、制御回路（図示せず）を備え、ネットワーク３０を介して端末装置１０から送信された制御信号に従いパン・チルト動作することができるものである。このような雲台４０を用いることにより撮影開始目印Ｓと撮影終了目印Ｅを用いた撮影において被写体の移動方向に撮像装置２０の撮影方向を追従させることができる。

【0120】

図１３のフローチャートを参照して雲台４０を含めたカメラシステム１の制御処理について説明する。まずステップＳ４１で、情報処理装置１００はシャッタボタン２０７の入力に応じた入力信号を撮像装置２０に送信するのと同時に雲台４０に対して動作開始コマンドを送信する。

【0121】

次にステップＳ４２で、撮像装置２０が連写撮影を開始するとともに、雲台４０が動作開始コマンドに基づいてパン・チルト動作を開始する。

【0122】

雲台４０の動作開始後は情報処理装置１００または撮像装置２０が被写体検出を行い、連写撮影終了まで被写体検出結果に基づき、被写体を追従するようにパン・チルト制御するための動作コマンドを雲台４０に定期的に送信し続ける。これを受けて雲台４０は被写体を追従するようにパン・チルト動作を行う。

【0123】

次にステップＳ４３で、情報処理装置１００はシャッタボタン２０７への入力終了に応じた信号を撮像装置２０に送信するのと同時に雲台４０に対して動作終了コマンドを送信する。

【0124】

そしてステップＳ４４で、撮像装置２０が連写撮影を終了するとともに、雲台４０が動作終了コマンドに基づいてパン・チルト動作を終了する。なお、パン・チルト動作を終了した雲台４０は撮影開始前の状態に戻るようにしてもよい。

【0125】

［２－４．その他の変形例］
カメラシステム１は、図１に示した構成以外の構成でもよい。例えば、撮像装置２０がネットワーク３０に直接接続することができるインタフェースを備えていない場合、図１４に示すように撮像装置２０とネットワーク３０の間に撮像装置２０が備えるインタフェースをネットワーク３０に接続可能なインタフェースに変換する変換装置５０を設けてもよい。

【0126】

また、図１５に示すように、撮影シーンでの撮影用の撮像装置とライブビューを撮影用の撮像装置は別個のものでもよい。その場合、撮影シーン用の第１撮像装置２０とライブビュー撮影用の第２撮像装置６０はそれぞれネットワーク３０を介して端末装置１０と接続する必要がある。このような構成でも、目印設定用ユーザインターフェース２００と撮影用ユーザインターフェース３００による処理は実施の形態と同様である。また、目印作成時に用いる端末装置と本番撮影時に用いる端末装置は異なるものでもよい。

【0127】

類似シーンの映像は、実際に撮像装置２０の前で行われている出来事ではなく、事前に別の撮像装置で撮影を終えて保存されている映像データなどでもよい。

【0128】

撮像装置２０は、一般のユーザが使用するデジタルカメラ、デジタル一眼レフカメラのほか、スマートフォンと連携するいわゆるレンズスタイルカメラ、車載カメラ、ドローンに搭載したカメラ、監視カメラ、暗視カメラ、Ｘ線カメラ（Ｘ線写真）や胃カメラ（内視鏡）などの医療用カメラ、航空カメラ、水中カメラなどでもよい。

【0129】

撮影開始目印Ｓおよび撮影終了目印Ｅは実施の形態に示したように線状に限られず、図１６Ａおよび図１６Ｂに示すように四角形状でもよいし、その他の形状、例えば円状などであってもよい。

【0130】

また、図１７Ａに示すように撮影開始目印Ｓおよび撮影終了目印Ｅは、事前に撮影した被写体のオーバーラップ映像などでもよい。さらに、撮影開始目印Ｓおよび撮影終了目印Ｅは別々のものとして分離したものではなく、図１７Ｂに示すように、一つの図形Ｒとして設定し、その図形Ｒ内に被写体が入っている間は連写を継続するという構成でもよい。この図１７Ｂの場合、一つの目印が撮影開始のタイミングと撮影終了のタイミングを示していることになる。

【0131】

また、連写撮影はユーザがシャッタボタン２０７に対する入力状態を解除したことに応じて終了させるだけでなく、他の方法で終了させてもよい。例えば、目印設定時に選択した撮影開始画像と撮影終了画像間にある撮影画像の枚数と、連写フレームレートとから連写を継続する時間を算出することができるので、撮影開始時からその連写継続時間が経過したら連写を終了するようにしてもよい。

【0132】

また、実施の形態における目印設定用ユーザインターフェース２００では第１フレーム表示部２０２に第１選択枠２１１で選択された撮影開始画像に対応するフレームを表示し、第２フレーム表示部２０３に第２選択枠２１２で選択された撮影終了画像に対応するフレームを表示して、それぞれ撮影開始目印Ｓと撮影終了目印Ｅを設定した。しかし、図１８に示すように、一つのフレーム表示部２２１に撮影開始画像に対応するフレームと撮影終了画像に対応するフレームを重ねてオーバーラップさせて表示して、一つのフレーム表示部２２１上に撮影開始目印Ｓと撮影終了目印Ｅを設定するようにしてもよい。

【0133】

また、撮影を行うのはユーザでなくてもよい。情報処理装置１００または端末装置１０に被写体検出機能を設け、検出した被写体が撮影開始目印Ｓに到達すると自動で撮影を開始し、撮影終了目印Ｅに到達すると自動で撮影を終了するようにしてもよい。

【0134】

また、本技術は連写撮影に限らず単写撮影にも適用することが可能である。単写撮影の場合、撮影タイミングを示す目印さえ設定すればよく、撮影開始終了の目印は必要ない。よって、目印設定用ユーザインターフェース２００は図１９に示すようになる。図１９に示す目印設定用ユーザインターフェース２００では第２フレーム表示部２０３がなく、一つのフレーム表示部２３１に対してユーザは撮影タイミング目印設定のために入力を行う。撮影タイミング目印の設定は実施の形態における撮影開始目印Ｓの設定と同様である。この場合、撮影タイミングは単写撮影における撮影実行のタイミングであり、目印は撮影実行のタイミングを示すものとなる。

【0135】

また、本技術は実施の形態における自動車レースのゴールライン付近のように撮影対象の被写体が直線運動している場合に限られず、移動の軌跡が予め決まっている、一の方向から他の方向へ移動することが決まっている被写体であればどのような動きの被写体にも適用可能である。また、移動経路が曲がっていてもよい。

【0136】

本技術は以下のような構成も取ることができる。
（１）
撮像装置とネットワークで接続され、
前記ネットワークを介して送信された、撮影シーンと類似するシーンの撮影画像と、前記撮影画像に対応するライブビュー画像に基づいて、前記撮影シーンにおける撮影タイミングを示す目印を設定する
情報処理装置。
（２）
前記類似するシーンは、前記撮影シーンよりも前の撮影されたシーンである（１）に記載の情報処理装置。
（３）
前記ライブビュー画像を構成するフレームを表示部に表示し、前記フレームに対するユーザからの入力に基づいて前記目印を設定する（１）または（２）に記載の情報処理装置。
（４）
前記類似するシーンで撮影された複数の画像を前記表示部に表示し、前記ユーザからの入力に基づいて、前記複数の画像の中から、前記撮影シーンにおける撮影タイミングを示す撮影タイミング画像を設定する（３）に記載の情報処理装置。
（５）
前記表示部に表示される前記ライブビュー画像を構成する前記フレームは、前記撮影タイミング画像に対応するフレームである（４）に記載の情報処理装置。
（６）
前記撮影タイミング画像に対応する前記フレームは、前記複数の画像を撮影した連続撮影のフレームレートと、前記ライブビュー画像のフレームレートに基づいて決定される（５）に記載の情報処理装置。
（７）
前記撮影タイミングは連写撮影における撮影開始タイミングであり、前記目印は、前記撮影シーンにおける連写撮影開始のタイミングを示す（４）から（６）のいずれかに記載の情報処理装置。
（８）
前記撮影タイミングは連写撮影における撮影終了タイミングであり、前記目印は、前記撮影シーンにおける連写撮影終了のタイミングを示す（４）から（７）のいずれかに記載の情報処理装置。
（９）
前記目印は前記撮影シーンにおける連写撮影開始タイミングおよび連写撮影終了タイミングを示す（１）から（８）のいずれかに記載の情報処理装置。
（１０）
前記撮影タイミングは単写撮影における撮影実行のタイミングであり、前記目印は前記撮影シーンにおける撮影実行のタイミングを示す（１）から（９）のいずれかに記載の情報処理装置。
（１１）
設定された前記目印を前記表示部において前記ライブビュー画像に重畳して表示する（３）から（１０）のいずれかに記載の情報処理装置。
（１２）
前記ライブビュー画像は前記撮影画像に対して遅延を有する（１）から（１１）のいずれかに記載の情報処理装置。
（１３）
前記遅延は、前記撮像装置でのエンコードに要する時間、前記ネットワークにおける伝送時間、前記ライブビュー画像を表示する装置におけるデコードに要する時間のうちの少なくともいずれかによるものである（１２）に記載の情報処理装置。
（１４）
前記目印は、前記類似するシーン後の前記撮影シーンにおけるライブビュー表示に重畳して表示される（１）から（１３）のいずれかに記載の情報処理装置。
（１５）
前記フレーム中における被写体を、前記目印が追従して移動する追従対象被写体として設定する（３）から（１４）のいずれかに記載の情報処理装置。
（１６）
前記目印は、前記類似するシーン後の前記撮影シーンにおけるライブビュー表示に重畳して表示され、前記追従被写体の移動に追従して移動する（１５）に記載の情報処理装置。
（１７）
前記ライブビュー画像を構成するフレームに対する被写体検出結果に基づき前記目印を設定する（１）から（１６）のいずれか記載の情報処理装置。
（１８）
撮像装置と接続されたネットワークを介して送信された、撮影シーンと類似するシーンの撮影画像と、前記撮影画像に対応するライブビュー画像に基づいて、前記撮影シーンにおける撮影タイミングを示す目印を設定する
情報処理方法。
（１９）
撮像装置と接続されたネットワークを介して送信された、撮影シーンと類似するシーンの撮影画像と、前記撮影画像に対応するライブビュー画像に基づいて、前記撮影シーンにおける撮影タイミングを示す目印を設定する
情報処理方法をコンピュータに実行させる情報処理プログラム。

【符号の説明】

【0137】

１０・・・端末装置
１４・・・表示部
２０・・・撮像装置
３０・・・ネットワーク
１００・・情報処理装置

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】