(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024162791
(43)【公開日】2024-11-21
(54)【発明の名称】制御装置、撮像装置、制御方法およびプログラム
(51)【国際特許分類】
H04N 21/2665 20110101AFI20241114BHJP
H04N 21/258 20110101ALI20241114BHJP
H04N 23/60 20230101ALI20241114BHJP
H04N 23/661 20230101ALI20241114BHJP
【ＦＩ】
H04N21/2665
H04N21/258
H04N23/60 300
H04N23/661
【審査請求】未請求
【請求項の数】25
【出願形態】ＯＬ
(21)【出願番号】P 2023078697
(22)【出願日】2023-05-11
(71)【出願人】
【識別番号】000001007
【氏名又は名称】キヤノン株式会社
(74)【代理人】
【識別番号】110003281
【氏名又は名称】弁理士法人大塚国際特許事務所
(72)【発明者】
【氏名】明神 理恵
(72)【発明者】
【氏名】小川 茂夫
(72)【発明者】
【氏名】矢崎 大朗
(72)【発明者】
【氏名】中山 大嗣
(72)【発明者】
【氏名】星野 宏太
(72)【発明者】
【氏名】瀧田 聡士
(72)【発明者】
【氏名】辻 馨太郎
(72)【発明者】
【氏名】穀田 七海
【テーマコード（参考）】
5C122
5C164
【Ｆターム（参考）】
5C122DA03
5C122EA42
5C122EA63
5C122EA67
5C122FA18
5C122GC06
5C122GC07
5C122GC38
5C122GC52
5C122HA86
5C122HB01
5C164FA07
5C164SA26S
5C164SC04P
5C164SC11P
5C164YA21
(57)【要約】
【課題】複数の撮像装置を適切に切り替えて撮像装置の動作可能時間を延ばす。
【解決手段】制御装置は、複数の撮像装置と通信する通信手段と、前記通信手段により前記複数の撮像装置からメディアデータを受信する制御手段と、を有し、前記制御手段は、前記複数の撮像装置から受信した状態情報に基づいて、前記複数の撮像装置の中で、前記メディアデータの配信に使用する所定の撮像装置を切り替えるための制御情報を生成し、前記制御情報を前記複数の撮像装置に送信する。
【選択図】図２
【解決手段】制御装置は、複数の撮像装置と通信する通信手段と、前記通信手段により前記複数の撮像装置からメディアデータを受信する制御手段と、を有し、前記制御手段は、前記複数の撮像装置から受信した状態情報に基づいて、前記複数の撮像装置の中で、前記メディアデータの配信に使用する所定の撮像装置を切り替えるための制御情報を生成し、前記制御情報を前記複数の撮像装置に送信する。
【選択図】図２
【特許請求の範囲】
【請求項1】
複数の撮像装置と通信する通信手段と、
前記通信手段により前記複数の撮像装置からメディアデータを受信する制御手段と、を有し、
前記制御手段は、前記複数の撮像装置から受信した状態情報に基づいて、前記複数の撮像装置の中で、前記メディアデータの配信に使用する所定の撮像装置を切り替えるための制御情報を生成し、
前記制御情報を前記複数の撮像装置に送信することを特徴とする制御装置。
前記通信手段により前記複数の撮像装置からメディアデータを受信する制御手段と、を有し、
前記制御手段は、前記複数の撮像装置から受信した状態情報に基づいて、前記複数の撮像装置の中で、前記メディアデータの配信に使用する所定の撮像装置を切り替えるための制御情報を生成し、
前記制御情報を前記複数の撮像装置に送信することを特徴とする制御装置。
【請求項2】
前記制御手段は、前記複数の撮像装置の中で前記所定の撮像装置を切り替える切り替えパターンを生成し、
前記状態情報に基づいて予め決められた切り替えパターンを補正することを特徴とする請求項１に記載の制御装置。
前記状態情報に基づいて予め決められた切り替えパターンを補正することを特徴とする請求項１に記載の制御装置。
【請求項3】
前記状態情報は、前記撮像装置がメディアデータの送信を継続できなくなる状態を含むことを特徴とする請求項２に記載の制御装置。
【請求項4】
前記状態情報は、前記撮像装置の電池残量、発熱量およびストレージ残量の少なくともいずれかを含み、
前記制御手段は、前記状態情報が閾値以下である撮像装置が存在すると判定した場合、前記予め決められた切り替えパターンを補正することを特徴とする請求項２に記載の制御装置。
前記制御手段は、前記状態情報が閾値以下である撮像装置が存在すると判定した場合、前記予め決められた切り替えパターンを補正することを特徴とする請求項２に記載の制御装置。
【請求項5】
前記切り替えパターンの補正は、前記状態情報と閾値との比較に基づいて、前記状態情報が閾値以下の撮像装置の使用頻度を低下させることを含むことを特徴とする請求項２に記載の制御装置。
【請求項6】
前記制御手段は、前記補正された切り替えパターンで使用する撮像装置の数が稼働可能な撮像装置の数に達していない場合、前記メディアデータの配信を停止することを特徴とする請求項２に記載の制御装置。
【請求項7】
前記切り替えパターンは、前記撮像装置の動作状態として使用中、使用待機、使用準備を含むことを特徴とした請求項１に記載の制御装置。
【請求項8】
前記撮像装置の動作状態は、前記撮像装置の動作可能時間を延ばすための動作を含むことを特徴とする請求項７に記載の制御装置。
【請求項9】
前記撮像装置の動作可能時間を延ばすための動作は、前記撮像装置の消費電力を低減するための動作、前記撮像装置の発熱量を低減させるための動作、または、前記撮像装置のストレージ残量の低下を抑えるための動作を含むことを特徴とする請求項８に記載の制御装置。
【請求項10】
前記制御手段は、前記状態情報が閾値以下である撮像装置が存在すると判定した場合、当該撮像装置の使用が不可となることをユーザに通知することを特徴とする請求項１に記載の制御装置。
【請求項11】
前記制御手段は、前記メディアデータの記録を行っていない撮像装置のストレージ残量を最大と判定することを特徴とする請求項４に記載の制御装置。
【請求項12】
前記制御手段は、前記所定の撮像装置から受信したメディアデータを配信装置による配信に適したデータ形式に変換し、前記配信装置に送信することを特徴とする請求項１に記載の制御装置。
【請求項13】
前記メディアデータは、前記撮像装置により生成された動画および音声を含むことを特徴とする請求項１に記載の制御装置。
【請求項14】
撮像装置であって、
制御装置と通信する通信手段と、
前記通信手段により前記制御装置にメディアデータを送信する制御手段と、を有し、
前記制御手段は、前記制御装置に状態情報を送信し、
前記制御装置から受信した制御情報に基づいて前記撮像装置の動作状態を制御することを特徴とする撮像装置。
制御装置と通信する通信手段と、
前記通信手段により前記制御装置にメディアデータを送信する制御手段と、を有し、
前記制御手段は、前記制御装置に状態情報を送信し、
前記制御装置から受信した制御情報に基づいて前記撮像装置の動作状態を制御することを特徴とする撮像装置。
【請求項15】
前記制御情報は、前記メディアデータを前記制御装置に送信する撮像装置を切り替える切り替えパターンを含むことを特徴とする請求項１４に記載の撮像装置。
【請求項16】
前記切り替えパターンは、前記撮像装置の動作状態として使用中、使用待機、使用準備を含むことを特徴とした請求項１５に記載の撮像装置。
【請求項17】
前記状態情報は、前記撮像装置がメディアデータの送信を継続できなくなる状態を含むことを特徴とする請求項１４に記載の撮像装置。
【請求項18】
前記状態情報は、前記撮像装置の電池残量、発熱量およびストレージ残量の少なくともいずれかを含むことを特徴とする請求項１７に記載の撮像装置。
【請求項19】
前記撮像装置の動作状態は、前記撮像装置の動作可能時間を延ばすための動作を含むことを特徴とする請求項１６に記載の撮像装置。
【請求項20】
前記撮像装置の動作可能時間を延ばすための動作は、前記撮像装置の消費電力を低減するための動作、前記撮像装置の発熱量を低減させるための動作、または、前記撮像装置のストレージ残量の低下を抑えるための動作を含むことを特徴とする請求項１９に記載の撮像装置。
【請求項21】
前記メディアデータは、前記撮像装置により生成された動画および音声を含むことを特徴とする請求項１４に記載の撮像装置。
【請求項22】
制御装置の制御方法であって、
通信手段により複数の撮像装置からメディアデータを受信するステップを有し、
前記ステップでは、前記複数の撮像装置から受信した状態情報に基づいて、前記複数の撮像装置の中で、前記メディアデータの配信に使用する所定の撮像装置を切り替えるための制御情報を生成し、
前記制御情報を前記複数の撮像装置に送信することを特徴とする制御方法。
通信手段により複数の撮像装置からメディアデータを受信するステップを有し、
前記ステップでは、前記複数の撮像装置から受信した状態情報に基づいて、前記複数の撮像装置の中で、前記メディアデータの配信に使用する所定の撮像装置を切り替えるための制御情報を生成し、
前記制御情報を前記複数の撮像装置に送信することを特徴とする制御方法。
【請求項23】
制御装置と通信する通信手段を有する撮像装置の制御方法であって、
前記通信手段により前記制御装置にメディアデータを送信するステップを有し、
前記ステップでは、前記制御装置に状態情報を送信し、
前記制御装置から受信した制御情報に基づいて前記撮像装置の動作状態を制御することを特徴とする制御方法。
前記通信手段により前記制御装置にメディアデータを送信するステップを有し、
前記ステップでは、前記制御装置に状態情報を送信し、
前記制御装置から受信した制御情報に基づいて前記撮像装置の動作状態を制御することを特徴とする制御方法。
【請求項24】
コンピュータを、請求項１から１３のいずれかに記載された制御装置として機能させるためのプログラム。
【請求項25】
コンピュータを、請求項１４から２１のいずれかに記載された撮像装置として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、複数の撮像装置から受信したメディアデータを配信装置に送信するシステムに関する。
【背景技術】
【0002】
複数の撮像装置により撮影された複数の異なる視点の画像を配信するシステムにおいて、複数の撮像装置の中から配信用の画像を撮影する撮像装置を切り替えることで、複数の視点の画像を配信するマルチアングル配信が知られている。
【0003】
配信用の画像を撮影する撮像装置の切り替えは、専用のオペレータが行ったり、予め設定された順番で自動で行ったりするが、撮像装置に何らかのエラーが発生し、画像の供給ができなくなると、ブラックアウトした画像が配信されてしまう可能性がある。このような背景に鑑み、特許文献１には、複数の撮像装置がネットワークを介して画像を送受信するシステムにおいて、画像を記録する撮像装置の電池残量が低下した場合に、画像を記録する撮像装置を他の撮像装置を切り替える方法が記載されている。
【先行技術文献】
【特許文献】
【0004】
【特許文献1】特開２０１９－９６５１号公報
【発明の概要】
【発明が解決しようとする課題】
【0005】
しかしながら、特許文献１では、撮像装置の電池残量、発熱量、ストレージ残量などの状態を監視し、撮像装置が画像を送信できない状態に至らないように撮像装置ごとに使用時間などを制御することは記載されていない。
【0006】
本発明は、上記課題に鑑みてなされ、その目的は、複数の撮像装置を適切に切り替えて撮像装置の動作可能時間を延ばし、撮像装置から配信用のメディアデータが送信されない状態を低減する技術を実現することである。
【課題を解決するための手段】
【0007】
上記課題を解決し、目的を達成するために、本発明の制御装置は、複数の撮像装置と通信する通信手段と、前記通信手段により前記複数の撮像装置からメディアデータを受信する制御手段と、を有し、前記制御手段は、前記複数の撮像装置から受信した状態情報に基づいて、前記複数の撮像装置の中で、前記メディアデータの配信に使用する所定の撮像装置を切り替えるための制御情報を生成し、前記制御情報を前記複数の撮像装置に送信する。
【発明の効果】
【0008】
本発明によれば、複数の撮像装置を適切に切り替えて撮像装置の動作可能時間を延ばし、撮像装置から配信用のメディアデータが送信されない状態を低減することができる。
【図面の簡単な説明】
【0009】
【図1】本実施形態のシステム構成図。
【図2】本実施形態の制御装置の構成を例示するブロック図。
【図3】本実施形態の撮像装置の構成を例示するブロック図。
【図4】本実施形態の制御装置によるメディアデータの処理シーケンスを例示する図。
【図5】本実施形態の制御装置におけるメディアデータの表示例を示す図。
【図6】本実施形態の制御装置の制御処理を示すフローチャート。
【図7】本実施形態の制御処理における撮像装置の状態情報判定閾値を例示する図。
【図8】本実施形態の制御処理における撮像装置の状態情報の深刻度判定方法を説明する図。
【図9】本実施形態の撮像装置の切り替えパターンを例示する図。
【図10】本実施形態の撮像装置の動作状態および振る舞いを例示する図。
【図11】本実施形態の撮像装置の状態遷移を例示する図。
【発明を実施するための形態】
【0010】
以下、添付図面を参照して実施形態を詳しく説明する。なお、以下の実施形態は特許請求の範囲に係る発明を限定するものではない。実施形態には複数の特徴が記載されているが、これらの複数の特徴の全てが発明に必須のものとは限らず、また、複数の特徴は任意に組み合わせられてもよい。さらに、添付図面においては、同一若しくは同様の構成に同一の参照番号を付し、重複した説明は省略する。
【0011】
＜システム構成＞
図１を参照して、本実施形態のシステムについて説明する。
図１を参照して、本実施形態のシステムについて説明する。
【0012】
本実施形態のシステムは、配信装置１０、制御装置２０、複数の撮像装置３０を含む。複数の撮像装置３０は、第１の撮像装置３０Ａ、第２の撮像装置３０Ｂおよび第３の撮像装置３０Ｃを含むが、本実施形態では、複数の撮像装置３０Ａ，３０Ｂ，３０Ｃを撮像装置３０と総称して説明する場合もある。複数の撮像装置３０Ａ，３０Ｂ，３０Ｃは、撮像装置ごとに異なる視点の画像を撮像し、撮像装置の周辺の音声を収音して画像および音声の少なくともいずれかを含む所定の形式（例えば、ＲＴＭＰ）のメディアデータを生成し、制御装置２０に送信する。制御装置２０は、複数の撮像装置３０Ａ，３０Ｂ，３０Ｃについて、撮像装置ごとに撮影動作や録音動作を制御する。また、制御装置２０は、撮像装置ごとに撮像された画像および／または撮像装置ごとに収音された音声を含む所定の形式（例えば、ＲＴＭＰ）のメディアデータを撮像装置から受信する。そして、制御装置２０は、撮像装置から受信したメディアデータに対して所定のデータ処理を適用して、制御装置２０における再生用のデータまたは配信装置１０の配信用のデータを生成する。配信装置１０は、制御装置２０から配信用のメディアデータを受信し、インタネットやＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）などのＩＰネットワークを通じてユーザ機器などの外部装置に配信する。
【0013】
複数の撮像装置３０Ａ，３０Ｂ，３０Ｃと制御装置２０は、無線ＬＡＮなどの無線接続方式または有線ＬＡＮなどの有線接続方式によりネットワークを通じて通信可能に接続される。無線接続方式の場合には、複数の撮像装置３０Ａ，３０Ｂ，３０Ｃと制御装置２０がＰ２Ｐにより直接接続され、または、ＩＰネットワークを介して接続される。撮像装置３０Ａ，３０Ｂ，３０Ｃから制御装置２０に送信されるメディアデータまたは制御装置２０から配信装置１０に送信されるメディアデータは、画像および音声の少なくともいずれかを含む。画像は、動画または静止画を含み、音声は、音声解析データや字幕データなどを含んでいてもよい。
【0014】
撮像装置３０は、画像を撮影し、音声を収音可能なデジタルカメラであるが、デジタルカメラに限らず、パーソナルコンピュータ（ノートＰＣやタブレットＰＣ）、スマートフォン、監視カメラなどのＷｅｂカメラ、医療用カメラなどでもよい。
【0015】
制御装置２０は、パーソナルコンピュータ（ノートＰＣやタブレットＰＣ）、スマートフォンなどである。制御装置２０は、撮像装置３０から受信したメディアデータに対して図４で後述するデータ変換処理を適用しない再生用のメディアデータを生成し、あるいは、データ変換処理を適用して配信装置１０による配信に適したデータ形式のメディアデータを生成し、配信装置１０に送信する。制御装置２０は、複数の撮像装置３０Ａ，３０Ｂ，３０Ｃのうち、いずれの撮像装置から受信したメディアデータを配信装置１０に送信するのかを決定する機能も備える。
【0016】
配信装置１０は、複数のユーザ端末に対して、メディアデータを同時に配信（例えば、ストリーミング配信）するサービスサイトなどのサーバコンピュータである。サービスサイトは、エンターテインメント、プロモーション、トレーニングなど、様々な目的や用途に応じたサービスが存在する。
【0017】
＜制御装置２０の構成＞
次に、図２を参照して、本実施形態の制御装置２０の構成および機能について説明する。
次に、図２を参照して、本実施形態の制御装置２０の構成および機能について説明する。
【0018】
図２は、本実施形態の制御装置２０の構成を例示するブロック図である。
【0019】
制御部２０１は、制御装置２０の全体を統括して制御するＣＰＵまたはＭＰＵなどの演算処理プロセッサを備え、不揮発性メモリ２０２に格納されたプログラムを実行することで、後述するフローチャートの制御処理を実現する。ワークメモリ２０３はＲＡＭなどであり、制御部２０１の動作用の定数、変数、不揮発性メモリ２０２から読み出したプログラムなどを展開するワークメモリとしても使用される。また、制御部２０１は、後述する表示部２０６の表示制御も行う。
【0020】
不揮発性メモリ２０２には、制御部２０１が実行する基本的なソフトウェアであるＯＳ（オペレーティングシステム）や、このＯＳと協働して応用的な機能を実現するアプリケーションが格納されている。また、本実施形態では、不揮発性メモリ２０２には、撮像装置３０と通信するためのカメラアプリケーションと、配信装置１０と通信するための配信アプリケーションが格納されている。
【0021】
本実施形態の制御装置２０の処理は、アプリケーションにより提供されるソフトウェアを読み込むことにより実現される。なお、アプリケーションは制御装置２０にインストールされたＯＳの基本的な機能を利用するためのソフトウェアを有しているものとする。なお、制御装置２０のＯＳが本実施形態における制御処理を実現するためのソフトウェアを有していてもよい。アプリケーションは、撮像装置３０を遠隔操作してメディアデータを受信する機能、撮像装置３０から受信したメディアデータを配信装置１０に送信する機能を有する。
【0022】
制御部２０１は、制御情報生成部２０１ａおよびデータ処理部２０１ｂを備える。制御情報生成部２０１ａは、通信部２０７により撮像装置３０Ａ，３０Ｂ，３０ｃから受信した状態情報に基づいて、複数の撮像装置３０Ａ，３０Ｂ，３０Ｃの中で、配信装置１０がメディアデータの配信に使用する撮像装置（以下、配信元撮像装置）を切り替えるための切り替えパターンを生成する。データ処理部２０１ｂは、撮像装置３０から受信したメディアデータに図４で後述するデータ変換処理を適用して配信装置１０による配信に適したデータ形式のメディアデータを生成する。
【0023】
タイマー２０４は、各種制御に用いる時間や、内蔵時計の時間を計測する計時部である。
【0024】
操作部２０５は、ユーザからの各種操作を受け付けて、制御部２０１に通知する各種スイッチ、ボタンなどの操作部材からなる。また、操作部２０５は、後述する表示部２０６に一体的に構成されるタッチスクリーンとしてのタッチ入力機能を含む。操作部２０５は、制御装置２０の電源をオンまたはオフし、システムを起動またはシャットダウンする電源スイッチを含む。
【0025】
表示部２０６は、画像の表示、対話的な操作のための文字の表示などを行う。表示部２０６は、例えば、液晶ディスプレイ、有機ＥＬディスプレイなどの表示デバイスである。表示部２０６は、制御装置２０と一体化された構成であっても、制御装置２０に接続された外部装置であってもよい。
【0026】
通信部２０７は、無線アンテナまたは有線ケーブルによって配信装置１０や撮像装置３０などの外部装置と通信可能に接続し、各種の情報やデータの送受信を行う。各種の情報やデータは、例えば、撮像装置３０に送信する制御情報、撮像装置３０から受信する状態情報やメディアデータ、配信装置１０に送信するメディアデータである。通信部２０７は、外部装置と無線ＬＡＮで通信するためのインターフェースを含む。なお、制御装置２０は、通信部２０７により撮像装置３０と直接接続されてもよいし、無線ＬＡＮを介して接続されてもよい。通信部２０７は、無線ＬＡＮに限らず、赤外線通信、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＷｉｒｅｌｅｓｓＵＳＢなどの無線通信モジュール、あるいは、ＵＳＢケーブルやＨＤＭＩ（登録商標）、ＩＥＥＥ１３９４などの有線接続インターフェースを用いてもよい。また、通信部２０７は、４Ｇ／ＬＴＥ、５Ｇなどの広域ネットワーク（ＷＡＮ）を介して無線通信を行うインターフェースであってもよい。
【0027】
電源制御部２０８は、電源部、電池検出回路、ＤＣ－ＤＣコンバータ、通電するブロックを切り替えるスイッチ回路などを備え、制御部２０１の指示に基づいてＤＣ－ＤＣコンバータを制御し、必要な電圧を必要な期間、制御装置２０の各部へ供給する。電源部は、アルカリ電池やリチウム電池等の一次電池やＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉイオン電池等の二次電池、ＡＣアダプタなどを含む。
【0028】
＜撮像装置３０の構成＞
次に、図３を参照して、本実施形態の撮像装置３０の構成および機能について説明する。
次に、図３を参照して、本実施形態の撮像装置３０の構成および機能について説明する。
【0029】
制御部３０１は、撮像装置３０の全体を統括して制御するＣＰＵまたはＭＰＵなどの演算処理プロセッサを備え、不揮発性メモリ３０２に格納されたプログラムを実行することで、制御装置２０との通信処理および制御処理を実現する。なお、制御部３０１が装置全体を制御する代わりに、複数のハードウェアが処理を分担することで、装置全体を制御してもよい。
【0030】
撮像部３０４は、ズームレンズやフォーカスレンズを含むレンズ群、絞り機能を備えるシャッターを含む。また、撮像部３０４は、被写体像を電気信号に変換するＣＣＤやＣＭＯＳなどで構成されるイメージセンサ、イメージセンサから出力されるアナログ画像信号をデジタル信号に変換するＡ／Ｄ変換器を有する。撮像部３０４は、制御部３０１の制御により、撮像部３０４に含まれるレンズにより結像された被写体像光を、イメージセンサにより電気信号に変換し、ノイズ低減処理などを行って、デジタル信号からなる画像データを出力する。
【0031】
音声入力部３０８は、撮像装置３０に内蔵された、または、音声端子を通じて接続された１つまたは複数のマイクであり、撮像装置３０の周辺の音声を収音して生成されたアナログ音声信号をデジタル信号に変換して制御部３０１に出力する。制御部３０１は、音声入力部３０８により生成されたデジタル音声信号に各種の音声処理を行い、音声データを生成する。
【0032】
制御部３０１は、撮像部３０４により撮像された画像データに対し、画素補間、縮小といったリサイズ処理や色変換処理を行う。また、制御部３０１は、画像処理を施した静止画データをＪＰＥＧなどにより圧縮符号化したり、動画データのみまたは音声データと動画データをＨ．２６４／ＭＰＥＧ－４／ＡＶＣなどの動画圧縮方式でエンコードしたりして画像ファイルを生成し、記録媒体３０９に記録する。また、制御部３０１は、撮像した画像データを用いて所定の演算処理を行い、演算結果に基づいて撮像部３０４のフォーカスレンズや絞り、シャッターを制御することで、ＡＦ（オートフォーカス）処理やＡＥ（自動露出）処理を行う。また、制御部３０１は、画像データおよび／または音声データを含むメディアデータから所定のストリーミングデータ（例えば、ＲＴＭＰ（Ｒｅａｌ－Ｔｉｍｅ Ｍｅｓｓａｇｉｎｇ Ｐｒｏｔｏｃｏｌ））を生成し、制御装置２０に送信する。
【0033】
また、制御部３０１は、動作判定部３０１ａおよび撮像制御部３０１ｂを備える。動作判定部３０１ａは、制御装置２０から受信した制御情報に基づいて撮像装置３０の動作状態を判定し、撮像制御部３０１ｂに動作指示を送信する。撮像制御部３０１ｂは、動作判定部３０１ａの動作指示に基づいて撮像装置３０の動作を制御する。
【0034】
不揮発性メモリ３０２は、電気的に消去・記録可能なメモリであり、例えばＥＥＰＲＯＭ等が用いられる。不揮発性メモリ３０２には、制御部３０１の動作用の定数、プログラム等が記録される。ここでいう、プログラムとは、図６で後述する制御処理を実行するためのプログラムのことである。
【0035】
ワークメモリ３０３は、制御部３０１の動作用の定数、変数、不揮発性メモリ３０２から読み出したプログラム等を展開する作業領域として使用される。また、ワークメモリ３０３は、撮像部３０４で撮像された画像データを一時的に保持するバッファメモリや、表示部３０６の画像表示用メモリとして使用される。
【0036】
操作部３０５は、ユーザからの各種操作を受け付ける各種スイッチ、ボタン、タッチスクリーンなどの操作部材からなる。操作部３０５は、撮像装置３０の電源をオンまたはオフし、システムを起動またはシャットダウンする電源スイッチ、画像の撮影を行う撮影スイッチ、撮影画像の再生を行う再生ボタンなどを含む。また、後述する表示部３０６に一体的に形成されるタッチスクリーンも操作部３０５に含まれる。撮影スイッチは、制御部３０１に対して静止画の撮影処理を指示するための静止画撮影スイッチ、制御部３０１に対して動画の撮影処理（記録処理）の開始または停止を指示するための動作撮影スイッチを含む。静止画撮影スイッチまたは動画撮影スイッチの指示を受けて、制御部３０１は撮像部３０４を制御することによりＡＦ処理やＡＥ処理などの撮影準備動作を実行すると共に、撮像部３０４からの信号読み出しから記録媒体３０９に画像データを書き込むまでの一連の撮影動作を実行する。
【0037】
表示部３０６は、ライビュー画像の表示、撮影した画像の表示、対話的な操作のための文字表示等を行う。表示部３０６は、例えば、液晶ディスプレイ、有機ＥＬディスプレイなどの表示デバイスである。表示部３０６は、撮像装置３０と一体化された構成であっても、撮像装置３０に接続された外部装置であってもよい。撮像装置３０は、表示部３０６と接続することができ、表示部３０６の表示を制御可能であればよい。
【0038】
通信部３０７は、無線アンテナまたは有線ケーブルによって制御装置２０などの外部装置と通信可能に接続し、各種の情報やデータの送受信を行う。各種の情報やデータは、例えば、制御装置２０から受信する制御情報、制御装置２０に送信する機能情報やメディアデータである。通信部３０７は、外部装置と無線ＬＡＮで通信するためのインターフェースを含む。なお、撮像装置３０は、通信部３０７により制御装置２０と直接接続されてもよいし、無線ＬＡＮを介して接続されてもよい。通信部３０７は、無線ＬＡＮに限らず、赤外線通信、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＷｉｒｅｌｅｓｓＵＳＢなどの無線通信モジュール、あるいは、ＵＳＢケーブルやＨＤＭＩ（登録商標）、ＩＥＥＥ１３９４などの有線接続インターフェースを用いてもよい。また、通信部２０７は、４Ｇ／ＬＴＥ、５Ｇなどの広域ネットワーク（ＷＡＮ）を介して無線通信を行うインターフェースであってもよい。
【0039】
なお、通信部３０７は、インフラストラクチャモードにおけるアクセスポイント（ＡＰ）として動作するＡＰモードと、インフラストラクチャモードにおけるクライアント（ＣＬ）として動作するＣＬモードとを含む。通信部３０７をＣＬモードで動作させることにより、撮像装置３０は、インフラストラクチャモードにおけるＣＬとして動作することが可能である。撮像装置３０がＣＬとして動作する場合、周辺のＡＰに接続することで、ＡＰが形成するネットワークに参加することが可能である。また、通信部３０７をＡＰモードで動作させることにより、撮像装置３０は、ＡＰの一種ではあるが、より機能が限定された簡易的なＡＰ（以下、簡易ＡＰ）として動作することが可能である。撮像装置３０が簡易ＡＰとして動作する場合、撮像装置３０は自らネットワークを形成する。撮像装置３０の周辺の機器は、撮像装置３０をＡＰと認識し、撮像装置３０が形成したネットワークに参加することが可能となる。また、撮像装置３０をＡＰモードまたはＣＬモードで動作させるためのプログラムは不揮発性メモリ３０２に格納されている。
【0040】
音声入力部３０８は、撮像装置３０に内蔵された、または、音声端子を通じて接続された１つまたは複数のマイクであり、撮像装置３０の周辺の音声を収音して生成されたアナログ音声信号をデジタル信号に変換して制御部３０１に出力する。制御部３０１は、音声入力部３０８により生成されたデジタル音声信号に各種の音声処理を行い、音声データを生成する。
【0041】
記録媒体３０９は、制御部３０１により生成された画像ファイルが記録されたり、記録媒体３０９に既に記録されている画像ファイルが制御部３０１により読み出される。記録媒体３０９は、撮像装置３０に装着されるメモリカードやハードディスクドライブなどであってもよいし、撮像装置３０に内蔵されたフラッシュメモリやハードディスクドライブであってもよい。撮像装置３０は少なくとも記録媒体３０９にアクセス可能であればよい。
【0042】
＜メディアデータの処理シーケンス＞
次に、図４を参照して、本実施形態の制御装置２０によるメディアデータの処理シーケンスについて説明する。
次に、図４を参照して、本実施形態の制御装置２０によるメディアデータの処理シーケンスについて説明する。
【0043】
図４の処理シーケンスは、制御装置２０の制御部２０１がデータ処理部２０１ｂとして機能し、処理前後のデータをワークメモリ２０３から読み出したり、ワークメモリ２０３に書き込むことにより実現される。なお、本実施形態では、複数の撮像装置３０Ａ，３０Ｂ，３０Ｃから受信したストリーミングデータが動画と音声を含み、ストリーミングデータに対してデータ変換処理を適用しない再生用のメディアデータを生成したり、データ変換処理を適用して配信装置１０による配信に適したデータ形式のメディアデータを生成する例を説明する。
【0044】
受信処理４０２では、制御装置２０は、通信部２０７により複数の撮像装置３０Ａ，３０Ｂ，３０Ｃからストリーミングデータを受信し、ワークメモリ２０３に保存する。受信処理４０２において受信するストリーミングデータの形式は、例えばＲＴＭＰである。また、受信処理４０２では、ワークメモリ２０３に保存したストリーミングデータから動画および音声を含むメディアデータを生成する。ストリーミングデータから生成されるメディアデータの形式は、例えばＦＬＶである。
【0045】
ＤＥＭＵＸ（デマルチプレクサ）処理４０３では、受信処理４０２から入力されるメディアデータを動画データと音声データに分離する。メディアデータから分離される動画データの形式は、例えばはＨ．２６４である。メディアデータから分離される音声データの形式は、例えばＡＡＣである。
【0046】
デコード処理４０４，４０５では、ＤＥＭＵＸ処理４０３において分離された動画データおよび音声データを汎用形式に変換する。動画データおよび音声データは高度な符号化処理が適用されているため、デコード処理４０４，４０５において汎用的なデータ形式に復号化することで、再生処理４０６において再生が可能な再生用のメディアデータとして動画データおよび音声データが生成される。
【0047】
エンコード処理４０７，４０８では、デコード処理４０４，４０５において生成された動画データおよび音声データに再度高度な符号化処理を適用して、符号化した動画データおよび音声データを生成する。符号化された動画データの形式は、例えばＨ．２６４である。符号化された音声データの形式は、例えばＡＡＣである。エンコード処理４０７，４０８では、配信装置１０が受信可能なデータ形式の符号化処理が適用される。
【0048】
ＭＵＸ（マルチプレクサ）処理４０９では、エンコード処理４０７，４０８において符号化された動画データおよび音声データを合成したメディアデータを生成する。動画データおよび音声データを合成したメディアデータの形式は、例えばＦＬＶである。
【0049】
送信処理４１０では、ＭＵＸ処理４０９において生成されたメディアデータをストリーミングデータに変換して、配信装置１０に送信する。なお、ＭＵＸ処理４０９および送信処理４１０において適用されるデータ形式は、配信装置１０が受信可能なデータ形式が適用される。
【0050】
なお、図４のデータ処理フローの各処理において適用されるデータ形式は、上述した例に限られない。例えば、動画データおよび音声データの形式は、撮像装置３０が出力するデータ形式と配信装置１０が受信可能なデータ形式に従うだけでなく、復号および符号化の処理速度、動画および音声の品質特性に応じて決定してもよい。
【0051】
【0052】
表示領域５０１は、制御装置２０の表示部２０６の表示画面に対応している。画像５０２は、第１の撮像装置３０Ａから入力された画像である。画像５０３は、第２の撮像装置３０Ｂから入力された画像である。画像５０４は、撮像装置３０Ｃから入力された画像である。
【0053】
画像５０２は、被写体全体を含む画角の画像を例示している。画像５０３，５０４は、画像５０２とは異なる視点の画像であって、画像５０２に対して被写体の一部を拡大した画角の画像を例示している。
【0054】
画像５０２の周囲には太い破線の注目枠が表示されている。注目枠は、複数の撮像装置のうちいずれの撮像装置から受信した画像であるかを示している。なお、注目枠に加えて、注目枠が付加されている画像を出力している撮像装置を識別可能な文字、図形、着色などの情報を付加して表示してもよい。複数の撮像装置から受信したメディアデータのうちいずれを配信装置に送信するかは、図６から図１１で後述する制御処理により決定される。また、ユーザは、画像５０２、画像５０３または画像５０４をタッチすることで配信装置１０が配信に使用するメディアデータを選択することが可能である。
【0055】
【0056】
図６は、本実施形態の制御装置２０の制御処理を示すフローチャートである。図６の処理は、制御部２０１が、不揮発性メモリ２０２に格納されたプログラムをワークメモリ２０３に展開して実行し、制御装置２０の各構成要素を制御することにより実現される。また、図６の処理は、制御装置２０においてカメラアプリケーションが起動され、制御装置２０と複数の撮像装置３０Ａ，３０Ｂ，３０Ｃが通信可能に接続され、複数の撮像装置３０Ａ，３０Ｂ，３０Ｃが撮影待機状態において開始される。
【0057】
本実施形態の制御装置２０は、複数の撮像装置３０Ａ，３０Ｂ，３０Ｃから受信した撮像装置ごとの状態情報に基づいて、複数の撮像装置３０Ａ，３０Ｂ，３０Ｃの中で、配信装置１０がメディアデータの配信に使用する配信元撮像装置を切り替える。
【0058】
制御装置２０は、複数の撮像装置３０Ａ，３０Ｂ，３０Ｃから受信した状態情報を閾値と比較し、比較結果に基づいて配信元撮像装置を切り替えるための制御情報（切り替えパターン）を生成し、切り替えパターンに応じて切り替えられる配信元撮像装置からメディアデータを受信し、配信装置１０に送信する。
【0059】
制御装置２０は、制御情報を複数の撮像装置３０Ａ，３０Ｂ，３０Ｃに通知し、複数の撮像装置３０Ａ，３０Ｂ，３０Ｃは通知に含まれる制御情報に基づいて動作状態を制御する。
【0060】
ステップＳ６０１では、制御部２０１は、撮影装置３０の切り替えパターンの登録を行う。切り替えパターンは、複数の撮像装置３０Ａ，３０Ｂ，３０Ｃについて配信元撮像装置として使用する順番を含む。切り替えパターンは、例えば、制御装置２０のユーザが、表示部２０６に表示されているカメラアプリケーションのＵＩ画面において操作部２０５を操作することにより配信処理開始前に設定される。制御部２０１の制御情報生成部２０１ａは、撮像装置３０の切り替えパターンを不揮発性メモリ２０２に記憶する。撮像装置３０の切り替えパターンは、配信装置１０が自動配信および自動記録を行うメディアデータの配信元撮像装置を選択するための制御情報であり、複数の撮像装置３０Ａ，３０Ｂ，３０Ｃから配信元撮像装置を一定の時間ごとに切り替えるパターンでも、システムがランダムに設定したパターンでも、切り替える時間と撮像装置をユーザが設定したパターンでもよい。切り替えパターンは、稼働可能な撮像装置の最低数を設定することもできる。稼働可能な撮像装置の最低数は、図６で後述するステップＳ６１０の判定処理で使用するパラメータである。稼働可能な撮像装置の最低数が設定されていない場合は初期値を０台とする。
【0061】
ステップＳ６０２では、制御部２０１は、データ処理部２０１ｂが複数の撮像装置３０Ａ，３０Ｂ，３０Ｃからメディアデータの送受信処理を開始する。メディアデータの送受信処理は、複数の撮像装置３０Ａ，３０Ｂ，３０Ｃからメディアデータを受信し、配信元撮像装置から受信したメディアデータを配信装置１０に送信するまでの処理である。制御部２０１は、表示部２０６に表示されているカメラアプリケーションのＵＩ画面においてユーザが操作部２０５を操作することにより配信開始指示を受けると、データ処理部２０１ｂがメディアデータの送受信処理を開始する。なお、配信開始指示は、操作部２０５による表示部２０６のＵＩ画面の操作に限らず、制御装置２０の別の操作部材でも、制御装置２０以外の部材であっても、音声認識による操作であってもよい。撮像装置からメディアデータを受信してから配信装置１０に送信するまでのデータ処理フローは図４で説明した通りである。
【0062】
ステップＳ６０３では、制御部２０１は、複数の撮像装置３０Ａ，３０Ｂ，３０Ｃから状態情報を受信する。制御部２０１の制御情報生成部２０１ａが通信部２０７を介して、複数の撮像装置３０Ａ，３０Ｂ，３０Ｃから状態情報を受信する。状態情報は、電池残量、発熱量、ストレージ残量など、撮像装置３０がメディアデータを送信することができなくなる使用不可状態に関する情報を含む。また、状態情報は、撮像装置の撮影モードなどの動作状態に関する情報を含む。
【0063】
ステップＳ６０４では、制御部２０１は、ステップＳ６０３で複数の撮像装置３０Ａ，３０Ｂ，３０Ｃから受信した状態情報に基づいて、複数の撮像装置３０Ａ，３０Ｂ，３０Ｃのうち、撮影モードがメディアデータを記録するモードである撮像装置があるか否かを判定する。制御部２０１の制御情報生成部２０１ａはステップＳ６０３で受信した状態情報から撮影モードがメディアデータを記録するモードである撮像装置があると判定した場合、当該撮像装置のストレージ残量を最大値としてワークメモリ２０３に保存する。なお、本実施形態ではストレージ残量を最大値としたが、ストレージ残量が最大値である情報を撮像装置３０Ａ，３０Ｂ，３０Ｃから受信してもよく、この場合は、ステップＳ６０４の処理を実行しなくてもよい。
【0064】
ステップＳ６０５では、制御部２０１は、ステップＳ６０３で複数の撮像装置３０Ａ，３０Ｂ，３０Ｃから受信した状態情報と閾値とを比較し、状態情報が閾値以下となる撮像装置が存在するか否かを判定する。制御部２０１の制御情報生成部２０１ａは、ステップＳ６０３で複数の撮像装置３０Ａ，３０Ｂ，３０Ｃから受信した状態情報に基づいて、図７に例示する状態情報のパラメータである電池残量、発熱量、ストレージ残量ごとに、閾値以下のパラメータが存在するか否かを判定する。図７の例では、状態情報のパラメータごとに３段階の閾値Ａ、閾値Ｂ、閾値Ｃが設定されている。制御部２０１は、状態情報が閾値以下となる撮像装置が存在すると判定した場合は処理をステップＳ６０６に進め、存在しないと判定した場合は処理をステップＳ６１１に進める。
【0065】
ステップＳ６０６では、制御部２０１は、閾値以下の状態情報の深刻度を判定する。制御情報生成部２０１ａは、図８に例示する閾値の範囲に基づいて状態情報の深刻度を判定する。図８の例では、図７の閾値範囲と対応する深刻度、深刻度ごとの撮像装置の切り替えパターンが設定されている。例えば、撮像装置から受信した状態情報のうち電池残量が２５％である場合、閾値Ａと閾値Ｂの範囲であるため、深刻度２に相当する。また、例えば、電池残量が３％の場合、閾値Ｃ以上の範囲であるため、深刻度３に相当する。深刻度の値が高いほど深刻度が高くなる。本実施形態では、深刻度３が最も高く、使用不可レベルとなる。
【0066】
ステップＳ６０７では、制御部２０１は、撮像装置３０Ａ，３０Ｂ，３０Ｃの切り替えパターンの補正を行う。制御情報生成部２０１ｂは、ステップＳ６０６で判定した閾値以下の状態情報の深刻度に基づいて、図８を参照して、深刻度が付与された撮像装置３０Ａ，３０Ｂ，３０Ｃの切り替えパターンを補正する。図８の例では、切り替えパターンに基づく使用頻度として回数と割合が例示されている。切り替えパターン１は、配信元撮像装置の使用回数を減少させることで使用頻度を変更するパターンである。切り替えパターン２は、配信元撮像装置の使用割合（使用時間）を減少させることで使用頻度を変更するパターンである。図８は例示であり、必要に応じて数値を変更してもよい。図９は図８の状態情報の深刻度に応じて補正される切り替えパターンを例示している。図９（ａ）はステップＳ６０１で登録された切り替えパターンを例示している。この場合、複数の撮像装置３０Ａ，３０Ｂ，３０Ｃの中で配信元撮像装置が一定の時間ごとに切り替えられる。図９（ａ）は、閾値以下の状態情報がない通常の切り替えパターンである。図９（ｂ）は、図８の切り替えパターン１において閾値以下の状態情報の深刻度が１の場合の切り替え動作を例示している。図９（ｃ）は、図８の切り替えパターン１において閾値以下の状態情報の深刻度が２の場合の切り替え動作を例示している。図９（ｄ）は、図８の切り替えパターン１において閾値以下の状態情報の深刻度が３の場合の切り替え動作を例示している。図９（ｅ）は、状態情報に深刻度が付与された撮像装置が複数ある場合の切り替えパターンを例示している。この場合、撮像装置２のパターンと撮像装置３のパターンを組み合せている。
【0067】
ステップＳ６０８では、制御部２０１は、ステップＳ６０６で判定された状態情報の深刻度の中で使用不可レベルに達している状態情報があるか否かを判定する。制御情報生成部２０１ａは状態情報に深刻度が付与された撮像装置３０Ａ，３０Ｂ，３０Ｃの中で、使用不可レベルに達しているものがあると判定した場合は処理をステップＳ６０９に進め、使用不可レベルに達しているものがないと判定したある場合はステップＳ６１１に進める。使用不可レベルは、図８に示す撮像装置の状態情報の深刻度が、配信装置１０へのメディアデータの送信を継続できない深刻度３に対応する。
【0068】
ステップＳ６０９では、制御部２０１は、ステップＳ６０８で状態情報が使用不可レベルに達している撮像装置が存在することを通知する。状態情報が使用不可レベルに達している場合、撮像装置は配信装置１０にメディアデータの送信を継続できない状態であるため、配信装置１０がメディアデータの配信中であってもユーザは何らかの対策を講じる必要がある。対策としては電池交換、メモリカードの変更、中断あるいはファンによる冷却などが挙げられる。制御情報生成部２０１ａはユーザに対して何らかの対策が必要であることを通知する。通知は、状態情報が使用不可レベルに達している撮像装置３０や制御装置２０でＬＥＤを発光させたり、音声を出力したり、メッセージを表示することなどが挙げられるが、ユーザに認知させる方法であればどのような通知方法であってもよい。
【0069】
ステップＳ６１０では、制御部２０１は、状態情報が使用不可レベルに達していない稼働可能な撮像装置の最低数が所定数以上であるか否かを判定する。制御情報生成部２０１ａはステップＳ６０１で登録された切り替えパターンで設定された最低数とステップＳ６０７で補正された切り替えパターンで使用する撮像装置数とを比較し、稼働可能な撮像装置の最低数が所定数を下回ると判定した場合は処理をステップＳ６１４に進め、稼働可能な撮像装置の最低数が所定数以上であると判定した場合は処理をステップＳ６１１に進める。
【0070】
ステップＳ６１１では、制御部２０１は、複数の撮像装置３０Ａ，３０Ｂ，３０Ｃに対してステップＳ６０１で設定された切り替えパターンまたはステップＳ６０７で補正された切り替えパターンに基づく制御情報を送信する。制御情報生成部２０１ａは、補正後の切り替えパターンに基づいて、図１０に例示する撮像装置の動作状態に対応する制御情報を、複数の撮像装置３０Ａ，３０Ｂ，３０Ｃに送信する。制御情報は、撮像装置の動作状態として、使用中、使用待機、使用準備を含み、各動作状態に対応する振る舞い（動作内容）を、それぞれの動作状態に対応する撮像装置３０Ａ，３０Ｂ，３０Ｃに通知する。使用中は、撮像装置が配信装置１０に配信用のメディアデータを送信中である。使用待機は、次回の使用開始時まで撮像装置が動作を停止または最低限の動作を行い待機している状態である。使用準備は、次回の使用開始時に即座に配信装置１０に配信用のメディアデータの送信を開始できるように準備している状態である。
【0071】
図１１は、切り替えパターンに基づく撮像装置３０Ａ，３０Ｂ，３０Ｃの動作状態の遷移を例示している。図１１の例では、撮像装置３０Ａ，３０Ｂ，３０Ｃは、制御装置２０から切り替えパターンに基づく制御情報が通知される時間間隔ｔ１ごとに動作状態を判定する。制御情報生成部２０１ａは切り替えパターンが更新されたタイミングで、図１１に示すような撮像装置ごとの動作状態を制御情報として撮像装置３０Ａ，３０Ｂ，３０Ｃに通知したり、ステップＳ６１１の処理を実行するごとに切り替えパターンから撮像装置ごとの動作状態を演算し撮像装置３０Ａ，３０Ｂ，３０Ｃに通知してもよい。制御情報の通知時間間隔ｔ１は、使用待機、使用準備、使用中にスムーズに移行できる時間であれば、例えば０．５秒など撮像装置に通知し撮像装置で動作を開始または実行するのに十分な時間であればよい。撮像装置３０Ａ，３０Ｂ，３０Ｃの制御部３０１は、通信部３０７により制御情報を受信すると、撮像装置３０Ａ，３０Ｂ，３０Ｃの動作判定部３０１ａが図１０に示す動作状態を判定し、撮像制御部３０１ｂに動作指示を送信する。撮像制御部３０１ｂは動作判定部３０１ａの動作指示に基づいて撮像装置３０Ａ，３０Ｂ，３０Ｃの動作を制御する。図１０の例では、撮像装置の動作状態ごとの振る舞いとして４つの例が示されている。使用中は、全ての例において、ユーザが指定した画質の動画を送信する。使用準備は、全ての例において、使用待機（スリープ）の状態から使用中に戻す動作である。使用待機は、振る舞い１では最低画質の動画を送信して電池の消費電力を低減して撮像装置の動作可能時間を延ばすための動作であり、振る舞い２ではスリープすることにより電池の消費電力を低減して撮像装置の動作可能時間を延ばすための動作である。振る舞い３では通信状態を維持したままスリープはしないがメディアデータの送信は行わないことにより電池の消費電力を低減して撮像装置の動作可能時間を延ばすための動作である。振る舞い４はメディアデータの記録を行わないことによりストレージ残量の低下を抑えて撮像装置の動作可能時間を延ばすための動作である。振る舞い１～４に加えて、スリープ中にファンによる冷却を行って発熱量の上昇を抑えること、動画のフレームレートを間引くことなどが挙げられる。図１１に例示する振る舞い１～４は適宜組み合わせてもよい。また、電池残量やストレージ残量の低下や発熱量の上昇を抑制する方法であれば、上記以外の方法であってもよい。
【0072】
ステップＳ６１２では、制御部２０１は、制御情報生成部２０１ａが撮像装置３０Ａ，３０Ｂ，３０Ｃから状態情報を受け取るタイミングであるか否かを判定する。制御部２０１は、撮像装置３０Ａ，３０Ｂ，３０Ｃから状態情報を受け取るタイミングであると判定した場合は処理をステップＳ６１７に進める。制御部２０１は、撮像装置３０Ａ，３０Ｂ，３０Ｃから状態情報を受け取るタイミングではないと判定した場合は処理をステップＳ６１１に戻す。状態情報を受け取るタイミングは、例えば５秒など、システムの処理時間の最小時間などから決定される。本実施形態では、制御装置２０が撮像装置３０Ａ，３０Ｂ，３０Ｃに対して適時切り替えパターンに基づく制御情報を通知したが、制御装置２０がステップＳ６０７で補正した切り替えパターンを撮像装置３０Ａ，３０Ｂ，３０Ｃに送信し、制御部３０１の動作判定部３０１ａおよび撮像制御部３０１ｂが切り替えパターンに応じて撮像装置３０Ａ，３０Ｂ，３０Ｃの動作を制御するようにしてもよい。
【0073】
ステップＳ６１３では、制御部２０１は、表示部２０６に表示されているカメラアプリケーションのＵＩ画面においてユーザが操作部２０５を操作することにより配信停止指示を行ったか否かを判定する。制御部２０１は、配信停止指示を受けたと判定した場合は処理をステップＳ６１４に進め、配信停止指示を受けていないと判定した場合は処理をステップＳ６０３に戻し、配信を継続する。
【0074】
ステップＳ６１４では、制御部２０１は、配信停止処理を行う。制御部２０１は、配信装置１０へのメディアデータの送信を停止すると共に、配信装置１０に対してメディアデータの配信停止を指示し、さらに複数の撮像装置３０Ａ，３０Ｂ，３０Ｃに対してメディアデータの送信停止を要求する。
【0075】
上述した実施形態によれば、複数の撮像装置３０Ａ，３０Ｂ，３０Ｃの状態情報に基づいて、配信装置１０がメディアデータの配信に使用する配信元撮像装置を切り替えるための制御情報（切り替えパターン）を補正する。このようにして、複数の撮像装置３０Ａ，３０Ｂ，３０Ｃの中で配信元撮像装置を適切に切り替えて撮像装置の動作可能時間を延ばすことで、配信元撮像装置から配信用のメディアデータが送信されない状態を最小限に抑えることができる。
【0076】
［他の実施形態］
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
【0077】
発明は上記実施形態に制限されるものではなく、発明の精神および範囲から離脱することなく、様々な変更および変形が可能である。従って、発明の範囲を公にするために請求項を添付する。
【0078】
本明細書の開示は、以下の制御装置、撮像装置、制御方法およびプログラムを含む。
［構成１］
複数の撮像装置と通信する通信手段と、
前記通信手段により前記複数の撮像装置からメディアデータを受信する制御手段と、を有し、
前記制御手段は、前記複数の撮像装置から受信した状態情報に基づいて、前記複数の撮像装置の中で、前記メディアデータの配信に使用する所定の撮像装置を切り替えるための制御情報を生成し、
前記制御情報を前記複数の撮像装置に送信することを特徴とする制御装置。
［構成２］
前記制御手段は、前記複数の撮像装置の中で前記所定の撮像装置を切り替える切り替えパターンを生成し、
前記状態情報に基づいて予め決められた切り替えパターンを補正することを特徴とする構成１に記載の制御装置。
［構成３］
前記状態情報は、前記撮像装置がメディアデータの送信を継続できなくなる状態を含むことを特徴とする構成２に記載の制御装置。
［構成４］
前記状態情報は、前記撮像装置の電池残量、発熱量およびストレージ残量の少なくともいずれかを含み、
前記制御手段は、前記状態情報が閾値以下である撮像装置が存在すると判定した場合、前記予め決められた切り替えパターンを補正することを特徴とする構成２または３に記載の制御装置。
［構成５］
前記切り替えパターンの補正は、前記状態情報と閾値との比較に基づいて、前記状態情報が閾値以下の撮像装置の使用頻度を低下させることを含むことを特徴とする構成２から４のいずれか１項に記載の制御装置。
［構成６］
前記制御手段は、前記補正された切り替えパターンで使用する撮像装置の数が稼働可能な撮像装置の数に達していない場合、前記メディアデータの配信を停止することを特徴とする構成２から５のいずれか１項に記載の制御装置。
［構成７］
前記切り替えパターンは、前記撮像装置の動作状態として使用中、使用待機、使用準備を含むことを特徴とした構成１から６のいずれか１項に記載の制御装置。
［構成８］
前記撮像装置の動作状態は、前記撮像装置の動作可能時間を延ばすための動作を含むことを特徴とする構成７に記載の制御装置。
［構成９］
前記撮像装置の動作可能時間を延ばすための動作は、前記撮像装置の消費電力を低減するための動作、前記撮像装置の発熱量を低減させるための動作、または、前記撮像装置のストレージ残量の低下を抑えるための動作を含むことを特徴とする構成８に記載の制御装置。
［構成１０］
前記制御手段は、前記状態情報が閾値以下である撮像装置が存在すると判定した場合、当該撮像装置の使用が不可となることをユーザに通知することを特徴とする構成１から９のいずれか１項に記載の制御装置。
［構成１１］
前記制御手段は、前記メディアデータの記録を行っていない撮像装置のストレージ残量を最大と判定することを特徴とする構成４に記載の制御装置。
［構成１２］
前記制御手段は、前記所定の撮像装置から受信したメディアデータを配信装置による配信に適したデータ形式に変換し、前記配信装置に送信することを特徴とする構成１から１１のいずれか１項に記載の制御装置。
［構成１３］
前記メディアデータは、前記撮像装置により生成された動画および音声を含むことを特徴とする構成１から１２のいずれか１項に記載の制御装置。
［構成１４］
撮像装置であって、
制御装置と通信する通信手段と、
前記通信手段により前記制御装置にメディアデータを送信する制御手段と、を有し、
前記制御手段は、前記制御装置に状態情報を送信し、
前記制御装置から受信した制御情報に基づいて前記撮像装置の動作状態を制御することを特徴とする撮像装置。
［構成１５］
前記制御情報は、前記メディアデータを前記制御装置に送信する撮像装置を切り替える切り替えパターンを含むことを特徴とする構成１４に記載の撮像装置。
［構成１６］
前記切り替えパターンは、前記撮像装置の動作状態として使用中、使用待機、使用準備を含むことを特徴とした構成１５に記載の撮像装置。
［構成１７］
前記状態情報は、前記撮像装置がメディアデータの送信を継続できなくなる状態を含むことを特徴とする構成１４から１６のいずれか１項に記載の撮像装置。
［構成１８］
前記状態情報は、前記撮像装置の電池残量、発熱量およびストレージ残量の少なくともいずれかを含むことを特徴とする構成１７に記載の撮像装置。
［構成１９］
前記撮像装置の動作状態は、前記撮像装置の動作可能時間を延ばすための動作を含むことを特徴とする構成１６に記載の撮像装置。
［構成２０］
前記撮像装置の動作可能時間を延ばすための動作は、前記撮像装置の消費電力を低減するための動作、前記撮像装置の発熱量を低減させるための動作、または、前記撮像装置のストレージ残量の低下を抑えるための動作を含むことを特徴とする構成１９に記載の撮像装置。
［構成２１］
前記メディアデータは、前記撮像装置により生成された動画および音声を含むことを特徴とする構成１４から２０のいずれか１項に記載の撮像装置。
［構成２２］
制御装置の制御方法であって、
通信手段により複数の撮像装置からメディアデータを受信するステップを有し、
前記ステップでは、前記複数の撮像装置から受信した状態情報に基づいて、前記複数の撮像装置の中で、前記メディアデータの配信に使用する所定の撮像装置を切り替えるための制御情報を生成し、
前記制御情報を前記複数の撮像装置に送信することを特徴とする制御方法。
［構成２３］
制御装置と通信する通信手段を有する撮像装置の制御方法であって、
前記通信手段により前記制御装置にメディアデータを送信するステップを有し、
前記ステップでは、前記制御装置に状態情報を送信し、
前記制御装置から受信した制御情報に基づいて前記撮像装置の動作状態を制御することを特徴とする制御方法。
［構成２４］
コンピュータを、構成１から１３のいずれかに記載された制御装置として機能させるためのプログラム。
［構成２５］
コンピュータを、構成１４から２１のいずれかに記載された撮像装置として機能させるためのプログラム。
［構成１］
複数の撮像装置と通信する通信手段と、
前記通信手段により前記複数の撮像装置からメディアデータを受信する制御手段と、を有し、
前記制御手段は、前記複数の撮像装置から受信した状態情報に基づいて、前記複数の撮像装置の中で、前記メディアデータの配信に使用する所定の撮像装置を切り替えるための制御情報を生成し、
前記制御情報を前記複数の撮像装置に送信することを特徴とする制御装置。
［構成２］
前記制御手段は、前記複数の撮像装置の中で前記所定の撮像装置を切り替える切り替えパターンを生成し、
前記状態情報に基づいて予め決められた切り替えパターンを補正することを特徴とする構成１に記載の制御装置。
［構成３］
前記状態情報は、前記撮像装置がメディアデータの送信を継続できなくなる状態を含むことを特徴とする構成２に記載の制御装置。
［構成４］
前記状態情報は、前記撮像装置の電池残量、発熱量およびストレージ残量の少なくともいずれかを含み、
前記制御手段は、前記状態情報が閾値以下である撮像装置が存在すると判定した場合、前記予め決められた切り替えパターンを補正することを特徴とする構成２または３に記載の制御装置。
［構成５］
前記切り替えパターンの補正は、前記状態情報と閾値との比較に基づいて、前記状態情報が閾値以下の撮像装置の使用頻度を低下させることを含むことを特徴とする構成２から４のいずれか１項に記載の制御装置。
［構成６］
前記制御手段は、前記補正された切り替えパターンで使用する撮像装置の数が稼働可能な撮像装置の数に達していない場合、前記メディアデータの配信を停止することを特徴とする構成２から５のいずれか１項に記載の制御装置。
［構成７］
前記切り替えパターンは、前記撮像装置の動作状態として使用中、使用待機、使用準備を含むことを特徴とした構成１から６のいずれか１項に記載の制御装置。
［構成８］
前記撮像装置の動作状態は、前記撮像装置の動作可能時間を延ばすための動作を含むことを特徴とする構成７に記載の制御装置。
［構成９］
前記撮像装置の動作可能時間を延ばすための動作は、前記撮像装置の消費電力を低減するための動作、前記撮像装置の発熱量を低減させるための動作、または、前記撮像装置のストレージ残量の低下を抑えるための動作を含むことを特徴とする構成８に記載の制御装置。
［構成１０］
前記制御手段は、前記状態情報が閾値以下である撮像装置が存在すると判定した場合、当該撮像装置の使用が不可となることをユーザに通知することを特徴とする構成１から９のいずれか１項に記載の制御装置。
［構成１１］
前記制御手段は、前記メディアデータの記録を行っていない撮像装置のストレージ残量を最大と判定することを特徴とする構成４に記載の制御装置。
［構成１２］
前記制御手段は、前記所定の撮像装置から受信したメディアデータを配信装置による配信に適したデータ形式に変換し、前記配信装置に送信することを特徴とする構成１から１１のいずれか１項に記載の制御装置。
［構成１３］
前記メディアデータは、前記撮像装置により生成された動画および音声を含むことを特徴とする構成１から１２のいずれか１項に記載の制御装置。
［構成１４］
撮像装置であって、
制御装置と通信する通信手段と、
前記通信手段により前記制御装置にメディアデータを送信する制御手段と、を有し、
前記制御手段は、前記制御装置に状態情報を送信し、
前記制御装置から受信した制御情報に基づいて前記撮像装置の動作状態を制御することを特徴とする撮像装置。
［構成１５］
前記制御情報は、前記メディアデータを前記制御装置に送信する撮像装置を切り替える切り替えパターンを含むことを特徴とする構成１４に記載の撮像装置。
［構成１６］
前記切り替えパターンは、前記撮像装置の動作状態として使用中、使用待機、使用準備を含むことを特徴とした構成１５に記載の撮像装置。
［構成１７］
前記状態情報は、前記撮像装置がメディアデータの送信を継続できなくなる状態を含むことを特徴とする構成１４から１６のいずれか１項に記載の撮像装置。
［構成１８］
前記状態情報は、前記撮像装置の電池残量、発熱量およびストレージ残量の少なくともいずれかを含むことを特徴とする構成１７に記載の撮像装置。
［構成１９］
前記撮像装置の動作状態は、前記撮像装置の動作可能時間を延ばすための動作を含むことを特徴とする構成１６に記載の撮像装置。
［構成２０］
前記撮像装置の動作可能時間を延ばすための動作は、前記撮像装置の消費電力を低減するための動作、前記撮像装置の発熱量を低減させるための動作、または、前記撮像装置のストレージ残量の低下を抑えるための動作を含むことを特徴とする構成１９に記載の撮像装置。
［構成２１］
前記メディアデータは、前記撮像装置により生成された動画および音声を含むことを特徴とする構成１４から２０のいずれか１項に記載の撮像装置。
［構成２２］
制御装置の制御方法であって、
通信手段により複数の撮像装置からメディアデータを受信するステップを有し、
前記ステップでは、前記複数の撮像装置から受信した状態情報に基づいて、前記複数の撮像装置の中で、前記メディアデータの配信に使用する所定の撮像装置を切り替えるための制御情報を生成し、
前記制御情報を前記複数の撮像装置に送信することを特徴とする制御方法。
［構成２３］
制御装置と通信する通信手段を有する撮像装置の制御方法であって、
前記通信手段により前記制御装置にメディアデータを送信するステップを有し、
前記ステップでは、前記制御装置に状態情報を送信し、
前記制御装置から受信した制御情報に基づいて前記撮像装置の動作状態を制御することを特徴とする制御方法。
［構成２４］
コンピュータを、構成１から１３のいずれかに記載された制御装置として機能させるためのプログラム。
［構成２５］
コンピュータを、構成１４から２１のいずれかに記載された撮像装置として機能させるためのプログラム。
【符号の説明】
【0079】
１０…配信装置、２０…制御装置、３０，３０Ａ，３０Ｂ，３０Ｃ…撮像装置、２０１，３０１…制御部、２０７，３０７…通信部
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】