特許 7311036 画像処理制御装置、画像処理制御プログラム、及び画像処理制御方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-07-10

(45)【発行日】2023-07-19

(54)【発明の名称】画像処理制御装置、画像処理制御プログラム、及び画像処理制御方法

(51)【国際特許分類】

   H04N 21/24 20110101AFI20230711BHJP

【ＦＩ】

H04N21/24

【請求項の数】 15

(21)【出願番号】P 2022512993

(86)(22)【出願日】2020-03-31

(86)【国際出願番号】 JP2020014813

(87)【国際公開番号】W WO2021199283

(87)【国際公開日】2021-10-07

【審査請求日】2022-06-24

(73)【特許権者】

【識別番号】000005223

【氏名又は名称】富士通株式会社

(74)【代理人】

【識別番号】100121083

【弁理士】

【氏名又は名称】青木 宏義

(74)【代理人】

【識別番号】100138391

【弁理士】

【氏名又は名称】天田 昌行

(74)【代理人】

【識別番号】100074099

【弁理士】

【氏名又は名称】大菅 義之

(72)【発明者】

【氏名】河野 美帆

【審査官】富樫 明

(56)【参考文献】

【文献】国際公開第２０２０／００４３８０（ＷＯ，Ａ１）

【文献】特開２０１５－１３２８８７（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ２１／００－２１／８５８

(57)【特許請求の範囲】

【請求項1】

配備対象の画像処理プログラムの処理レートに基づいて、前記配備対象の画像処理プログラムが処理する映像を転送する際に前記映像から抽出される転送データの種類を、動画又は静止画のいずれかに決定する決定部と、
前記転送データの種類に基づいて、複数の情報処理装置の中から、前記配備対象の画像処理プログラムが配備される配備先情報処理装置を選択する選択部と、
を備えることを特徴とする画像処理制御装置。

【請求項2】

前記決定部は、前記処理レートが閾値よりも大きい場合、前記転送データの種類を前記動画に決定し、前記処理レートが前記閾値よりも小さい場合、前記転送データの種類を前記静止画に決定することを特徴とする請求項１記載の画像処理制御装置。

【請求項3】

前記決定部は、前記映像の所定時間範囲に含まれる複数の画像を前記静止画として転送する場合の画像１枚当たりの転送データ量と、前記複数の画像を前記動画として転送する場合の単位時間当たりの転送データ量とを用いて、前記単位時間当たりの転送データ量に対応する前記静止画の画像レートを計算し、前記画像レートを前記閾値として用いることを特徴とする請求項２記載の画像処理制御装置。

【請求項4】

前記選択部は、前記複数の情報処理装置のうち、前記映像を処理する画像処理プログラムが配備されている情報処理装置を、前記配備先情報処理装置として選択することを特徴とする請求項１乃至３のいずれか１項に記載の画像処理制御装置。

【請求項5】

前記選択部は、前記転送データの種類が前記動画に決定された場合、前記映像を処理する画像処理プログラムが配備されている情報処理装置のうち、前記映像が前記動画として転送されている情報処理装置を、前記配備先情報処理装置として選択することを特徴とする請求項４記載の画像処理制御装置。

【請求項6】

前記選択部は、前記転送データの種類が前記静止画に決定された場合、前記映像を処理する画像処理プログラムが配備されている情報処理装置のうち、前記配備対象の画像処理プログラムの処理レートに関する制約条件を満たす情報処理装置を、前記配備先情報処理装置として選択することを特徴とする請求項４記載の画像処理制御装置。

【請求項7】

前記選択部は、前記配備対象の画像処理プログラムが前記配備先情報処理装置に配備された後、前記配備先情報処理装置に入力されるデータの転送レートが所定値よりも大きくなった場合、前記転送データの種類を前記静止画から前記動画に変更して、前記配備対象の画像処理プログラムが再配備される他の情報処理装置を選択することを特徴とする請求項６記載の画像処理制御装置。

【請求項8】

前記選択部は、前記配備対象の画像処理プログラムのデータ転送時間及び処理時間に関する制約条件を満たす情報処理装置を、前記配備先情報処理装置として選択することを特徴とする請求項１乃至７のいずれか１項に記載の画像処理制御装置。

【請求項9】

前記選択部は、前記配備対象の画像処理プログラムの処理リソースに関する制約条件を満たす情報処理装置を、前記配備先情報処理装置として選択することを特徴とする請求項１乃至８のいずれか１項に記載の画像処理制御装置。

【請求項10】

前記選択部は、前記転送データの種類が前記動画に決定され、かつ、前記配備対象の画像処理プログラムの処理リソースに関する制約条件を満たす単一の情報処理装置が存在しない場合、前記映像を処理する画像処理プログラムが配備されている情報処理装置のうち、前記映像が前記動画として転送されている複数の情報処理装置各々を、前記配備先情報処理装置として選択することを特徴とする請求項４記載の画像処理制御装置。

【請求項11】

前記選択部は、前記転送データの種類が前記静止画に決定され、かつ、前記配備対象の画像処理プログラムの処理リソースに関する制約条件を満たす単一の情報処理装置が存在しない場合、前記映像を処理する画像処理プログラムが配備されている情報処理装置のうち、前記配備対象の画像処理プログラムの処理レートに関する制約条件を満たす複数の情報処理装置各々を、前記配備先情報処理装置として選択し、前記配備先情報処理装置の処理リソースに応じて、前記配備先情報処理装置へ転送される前記静止画の画像レートを決定することを特徴とする請求項４記載の画像処理制御装置。

【請求項12】

配備対象の画像処理プログラムの処理レートに基づいて、前記配備対象の画像処理プログラムが処理する映像を転送する際に前記映像から抽出される転送データの種類を、動画又は静止画のいずれかに決定し、
前記転送データの種類に基づいて、複数の情報処理装置の中から、前記配備対象の画像処理プログラムが配備される配備先情報処理装置を選択する、
処理をコンピュータに実行させるための画像処理制御プログラム。

【請求項13】

前記転送データの種類を決定する処理は、前記処理レートが閾値よりも大きい場合、前記転送データの種類を前記動画に決定し、前記処理レートが前記閾値よりも小さい場合、前記転送データの種類を前記静止画に決定する処理を含むことを特徴とする請求項１２記載の画像処理制御プログラム。

【請求項14】

配備対象の画像処理プログラムの処理レートに基づいて、前記配備対象の画像処理プログラムが処理する映像を転送する際に前記映像から抽出される転送データの種類を、動画又は静止画のいずれかに決定し、
前記転送データの種類に基づいて、複数の情報処理装置の中から、前記配備対象の画像処理プログラムが配備される配備先情報処理装置を選択する、
処理をコンピュータが実行することを特徴とする画像処理制御方法。

【請求項15】

前記転送データの種類を決定する処理は、前記処理レートが閾値よりも大きい場合、前記転送データの種類を前記動画に決定し、前記処理レートが前記閾値よりも小さい場合、前記転送データの種類を前記静止画に決定する処理を含むことを特徴とする請求項１４記載の画像処理制御方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、画像処理制御技術に関する。

【背景技術】

【0002】

近年、カメラで撮影された映像を用いた様々な画像処理が行われている。例えば、工場内の映像を用いた画像処理としては、映像中の人物を検出する処理、映像中の人物の人数をカウントする処理、映像中の人物が行っている作業を検出する処理、映像中の人物が扱っている道具又は部品の位置を追跡する処理等が挙げられる。

【0003】

画像処理に関連して、ユーザがフレームレートを段階的に切り替える操作を行うことによって、動画用コーデックと静止画用コーデックを自動的に切り替える画像通信端末装置が知られている（例えば、特許文献１を参照）。

【先行技術文献】

【特許文献】

【0004】

【文献】特開平１０－２８５５８８号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

映像を用いて画像処理を行う際、通信ネットワーク上の複数の情報処理装置（コンピュータ）のいずれかに画像処理プログラムを配備して、処理対象の映像を画像処理プログラムへ転送する運用が行われることがある。この場合、画像処理プログラムの制約条件を満たしつつ、通信ネットワークのトラフィックを低減するように、画像処理プログラムの配備先を決定することが望ましい。

【0006】

１つの側面において、本発明は、画像処理プログラムの配備先として、通信ネットワークのトラフィックが低減されるような情報処理装置を選択することを目的とする。

【課題を解決するための手段】

【0007】

１つの案では、画像処理制御装置は、決定部及び選択部を含む。決定部は、配備対象の画像処理プログラムの処理レートに基づいて、配備対象の画像処理プログラムが処理する映像を転送する際に映像から抽出される転送データの種類を、動画又は静止画のいずれかに決定する。選択部は、転送データの種類に基づいて、複数の情報処理装置の中から、配備対象の画像処理プログラムが配備される配備先情報処理装置を選択する。

【発明の効果】

【0008】

１つの側面によれば、画像処理プログラムの配備先として、通信ネットワークのトラフィックが低減されるような情報処理装置を選択することができる。

【図面の簡単な説明】

【0009】

【図1】画像処理システムを示す図である。

【図2】要求時間を示す図である。

【図3】処理リソースの使用状況を示す図である。

【図4】ビットレートを調整する画像処理システムを示す図である。

【図5】アプリケーションを複数の処理サーバに配備する配備方法を示す図である。

【図6】映像から抽出される動画及び静止画を示す図である。

【図7】転送データの種類に応じた画像処理の開始時刻を示す図である。

【図8】画像処理制御装置の機能的構成図である。

【図9】制御処理のフローチャートである。

【図10】画像処理システムの機能的構成図である。

【図11】制御サーバの機能的構成図である。

【図12】アプリケーションの処理レートと転送データ量との関係を示す図である。

【図13】閾値決定処理のフローチャートである。

【図14A】アプリケーション配備処理のフローチャート（その１）である。

【図14B】アプリケーション配備処理のフローチャート（その２）である。

【図15】高処理レートアプリケーションの配備先処理サーバを示す図である。

【図16】低処理レートアプリケーションの配備先処理サーバを示す図である。

【図17】低処理レートアプリケーションを複数の処理サーバに配備する配備方法を示す図である。

【図18】アプリケーションの制約条件を示す図である。

【図19】処理サーバの処理リソースを示す図である。

【図20】転送データの画像レートを示す図である。

【図21】サーバ間の帯域を示す図である。

【図22】アプリケーションの配備結果を示す図である。

【図23】抽出処理のフローチャートである。

【図24】振分処理のフローチャートである。

【図25】更新処理を示す図である。

【図26】映像のデータ量が変動した場合のアプリケーションの処理レートと転送データ量との関係を示す図である。

【図27】処理サーバの機能的構成図である。

【図28】監視処理のフローチャートである。

【図29】アプリケーション再配備処理のフローチャートである。

【図30】情報処理装置のハードウェア構成図である。

【発明を実施するための形態】

【0010】

以下、図面を参照しながら、実施形態を詳細に説明する。

【0011】

図１は、映像に対する画像処理を行う画像処理システムの例を示している。図１の画像処理システムは、制御サーバ１０１、処理サーバ１０２－１、処理サーバ１０２－２、ＤＢ（database）サーバ１０３－１、及びＤＢサーバ１０３－２を含む。これらのサーバは情報処理装置であり、通信ネットワークを介して互いに通信することができる。画像処理システムに含まれる処理サーバ及びＤＢサーバの台数は、３台以上であってもよい。

【0012】

処理サーバ１０２－１は、抽出部１２１及び振分部１２２を含み、処理サーバ１０２－２は、受信部１２３及び振分部１２４を含む。処理サーバ１０２－１に入力される映像は、複数の時刻それぞれの画像を含む。各時刻の画像は、フレームと呼ばれることもある。処理サーバ１０２－１には、アプリケーションＡが配備されている。アプリケーションＡは、映像を処理する画像処理プログラムの一例である。

【0013】

画像レートは、画像処理システムにおいて単位時間当たりに転送又は処理される画像の枚数を表す。画像レートは、フレームレートと呼ばれることもある。処理サーバ１０２－１に入力される映像の画像レートは、６０ｆｐｓである。ｆｐｓは、１秒当たりのフレーム数を表す単位である。

【0014】

抽出部１２１は、制御サーバ１０１から指示された画像レート及びデータ量で、受信した映像から動画又は静止画の転送データを抽出し、抽出された転送データを振分部１２２へ出力する。振分部１２２は、制御サーバ１０１から指示された画像レートで、転送データをアプリケーションＡへ転送する。図１の例では、アプリケーションＡへ転送される転送データの画像レートは、６０ｆｐｓである。

【0015】

アプリケーションＡは、振分部１２２から受信した転送データを逐次処理し、処理結果１３１－１をＤＢサーバ１０３－１へ送信する。ＤＢサーバ１０３－１は、処理サーバ１０２－１から受信した処理結果１３１－１を記憶する。

【0016】

制御サーバ１０１は、制約条件１１１及び負荷情報１１２を記憶し、配備制御部１１３及び振分制御部１１４を含む。制約条件１１１は、画像処理システム内に配備されているアプリケーション毎の制約条件であり、要求時間及び要求処理リソースを含む。負荷情報１１２は、アプリケーション毎の処理リソースの使用状況を表す。処理リソースは、処理サーバ１０２－１及び処理サーバ１０２－２のＣＰＵ（Central Processing Unit）、メモリ等の計算リソースである。

【0017】

要求時間は、転送データのデータ転送時間及び処理時間の和の上限値を表す。要求時間は、画像処理プログラムのデータ転送時間及び処理時間に関する制約条件の一例である。要求処理リソースは、アプリケーションが転送データの処理に使用する処理リソースを表す。要求処理リソースは、画像処理プログラムの処理リソースに関する制約条件の一例である。

【0018】

図２は、要求時間の例を示している。データ転送時間Ｔ２１は、振分部１２２がアプリケーションＡへ、所定時間当たりの映像に対応する転送データを転送する時間を表す。処理時間Ｔ２２は、所定時間当たりの映像に対応する転送データを、アプリケーションＡが処理する時間を表す。データ転送時間Ｔ２３は、アプリケーションＡがＤＢサーバ１０３－１へ、所定時間当たりの映像に対応する転送データの処理結果を転送する時間を表す。

【0019】

データ転送時間Ｔ２１、処理時間Ｔ２２、及びデータ転送時間Ｔ２３の総和Ｔ２が、アプリケーションＡの要求時間Ｔ１以下である場合、要求時間の制約条件が満たされる。

【0020】

配備制御部１１３は、外部から配備対象のアプリケーションを受け付けて、処理サーバ１０２－１又は処理サーバ１０２－２のいずれかに配備する。この例では、配備対象のアプリケーションは、アプリケーションＢである。アプリケーションＢは、アプリケーションＡと同じ映像を用いて、アプリケーションＡとは異なる画像処理を行う。

【0021】

この場合、配備制御部１１３は、処理サーバ１０２－１及び処理サーバ１０２－２のうち、アプリケーションＢの制約条件１１１を満たす処理サーバ１０２－２を、配備先処理サーバとして選択する。そして、配備制御部１１３は、アプリケーションＢを処理サーバ１０２－２に配備し、アプリケーションＢへ転送される転送データの画像レート及びデータ量を決定する。

【0022】

振分制御部１１４は、処理サーバ１０２－２を、転送データの転送先として処理サーバ１０２－１に通知する。さらに、振分制御部１１４は、転送データの画像レート及びデータ量を処理サーバ１０２－１に通知する。処理サーバ１０２－１の抽出部１２１は、通知された画像レート及びデータ量で、映像から転送データを抽出し、振分部１２２は、通知された画像レートで転送データを処理サーバ１０２－２へ転送する。図１の例では、処理サーバ１０２－２へ転送される転送データの画像レートは、６０ｆｐｓである。

【0023】

処理サーバ１０２－２の受信部１２３は、処理サーバ１０２－１から転送データを受信し、振分部１２４へ出力する。振分部１２４は、６０ｆｐｓの画像レートで、転送データをアプリケーションＢへ転送する。これにより、同じ映像から抽出された転送データが、アプリケーションＡ及びアプリケーションＢに振り分けられる。

【0024】

アプリケーションＢは、振分部１２４から受信した転送データを逐次処理し、処理結果１３１－２をＤＢサーバ１０３－２へ送信する。ＤＢサーバ１０３－２は、処理サーバ１０２－２から受信した処理結果１３１－２を記憶する。

【0025】

しかしながら、転送データを単純に複数のアプリケーションに振り分けるだけでは、各処理サーバの処理リソースを有効に活用することが難しい。

【0026】

図３は、図１の画像処理システムにおいて、アプリケーションＡ及びアプリケーションＢが配備されたときの処理リソースの使用状況の例を示している。処理サーバ１０２－１の使用状況３０１－１は、ＣＰＵに含まれる８個のコアのうち、６個のコアが占有されていることを示す。処理サーバ１０２－２の使用状況３０１－２も、ＣＰＵに含まれる８個のコアのうち、６個のコアが占有されていることを示す。

【0027】

この場合、処理サーバ１０２－１及び処理サーバ１０２－２各々において、２個のコアが使用されていないため、画像処理システム全体の空きリソースは、４個のコアである。この状態において、配備制御部１１３は、配備対象のアプリケーションＣを受け付ける。アプリケーションＣは、アプリケーションＡ及びアプリケーションＢと同じ映像を用いて、アプリケーションＡ及びアプリケーションＢとは異なる画像処理を行う。

【0028】

アプリケーションＣの要求処理リソースが４個のコアである場合、いずれの処理サーバの空きリソースも要求処理リソースの制約条件を満たさないため、配備先の処理サーバが見つからない。したがって、アプリケーションＣはいずれの処理サーバにも配備されず、各処理サーバの空きリソースが活用されない。この場合、画像処理システムにおけるアプリケーションの収容度が低下する。アプリケーションの収容度は、１台の処理サーバ当たりの配備済みアプリケーションの個数を表す。

【0029】

また、図１の画像処理システムでは、処理サーバ１０２－１から処理サーバ１０２－２へ、映像と同じ画像レートで転送データが転送されており、通信ネットワークのトラフィックが増大する。そこで、転送データのビットレートを調整する方法が考えられる。ビットレートは、転送レートの一例である。

【0030】

図４は、転送データのビットレートを調整する画像処理システムの例を示している。図４の画像処理システムは、図１の画像処理システムにおいて、処理サーバ１０２－１を処理サーバ４０１に置き換えた構成を有する。図４において、制御サーバ１０１は省略されている。

【0031】

処理サーバ４０１は、図１の処理サーバ１０２－１において、振分部１２２をビットレート制御部４０２に置き換えた構成を有する。ビットレート制御部４０２は、各アプリケーションへ転送される転送データのデータ量が、各処理サーバの処理リソースによって処理可能な範囲内に収まり、かつ、通信ネットワークの使用帯域内に収まるように、転送データのビットレートを削減する。そして、ビットレート制御部４０２は、転送データをアプリケーションＡ及び処理サーバ１０２－２へ転送する。

【0032】

図４の例では、アプリケーションＡへ転送される転送データのビットレートは、１Ｍｂｐｓに設定されており、処理サーバ１０２－２へ転送される転送データのビットレートは、５００Ｋｂｐｓに削減されている。これにより、通信ネットワークのトラフィックを低減することができる。

【0033】

しかしながら、ビットレートを削減すると、アプリケーションが処理する画像の解像度が低下するため、アプリケーションの処理結果に影響を与える可能性がある。したがって、高精度な処理結果を得るためには、ビットレートの削減は好ましくない。そこで、同じアプリケーションを複数の処理サーバに配備し、転送データを画像単位で分割して、画像処理を並列化する方法が考えられる。

【0034】

図５は、図１の画像処理システムにおいて、アプリケーションを複数の処理サーバに配備する配備方法の例を示している。図３に示した使用状況３０１－１及び使用状況３０１－２の状態において、配備制御部１１３は、配備対象のアプリケーションＣを受け付ける。

【0035】

次に、配備制御部１１３は、振分部１２２からの転送遅延が小さい処理サーバから順に、要求時間の制約条件を満たす処理サーバを、配備先処理サーバとして選択する。そして、配備制御部１１３は、配備先処理サーバの処理リソース及びネットワークリソースを確保し、配備先処理サーバにアプリケーションを配備する。

【0036】

図５の例では、振分部１２２からの転送遅延が最も小さい処理サーバは、処理サーバ１０２－１であり、振分部１２２からの転送遅延が２番目に小さい処理サーバは、処理サーバ１０２－２である。処理サーバ１０２－１及び処理サーバ１０２－２の各々は、２個のコアを空きリソースとして有する。

【0037】

アプリケーションＣの要求処理リソースが４個のコアである場合、配備制御部１１３は、処理サーバ１０２－１及び処理サーバ１０２－２を配備先処理サーバとして選択し、各処理サーバの空きリソースを処理リソースとして確保する。次に、配備制御部１１３は、アプリケーションＣをコピーしてアプリケーションＣ１及びアプリケーションＣ２を生成し、アプリケーションＣ１を処理サーバ１０２－１に配備し、アプリケーションＣ２を処理サーバ１０２－２に配備する。

【0038】

そして、配備制御部１１３は、各処理サーバの処理リソースに応じて、アプリケーションＣ１及びアプリケーションＣ２の処理レートを決定する。処理レートは、単位時間当たりに処理される画像の枚数を表す。

【0039】

図５の例では、アプリケーションＣ１及びアプリケーションＣ２の処理レートが１０ｆｐｓに決定され、処理サーバ１０２－１から処理サーバ１０２－２へ転送される静止画の画像レートが２０ｆｐｓに決定される。

【0040】

振分制御部１１４は、処理サーバ１０２－１及び処理サーバ１０２－２を、静止画の転送先として処理サーバ１０２－１に通知する。さらに、振分制御部１１４は、アプリケーションＣ１及びアプリケーションＣ２の処理レートと、処理サーバ１０２－２へ転送される静止画の画像レートとを、処理サーバ１０２－１に通知する。

【0041】

処理サーバ１０２－１の抽出部１２１は、６０ｆｐｓの画像レートで、映像から静止画の転送データを抽出する。振分部１２２は、６０ｆｐｓの画像レートで、静止画をアプリケーションＡへ転送する。また、振分部１２２は、１０ｆｐｓの画像レートで、静止画をアプリケーションＣ１へ転送し、２０ｆｐｓの画像レートで、静止画を処理サーバ１０２－２へ転送する。

【0042】

処理サーバ１０２－２の受信部１２３は、処理サーバ１０２－１から静止画を受信し、振分部１２４へ出力する。振分部１２４は、１０ｆｐｓの画像レートで、静止画をアプリケーションＣ２へ転送し、２０ｆｐｓの画像レートで、静止画をアプリケーションＢへ転送する。

【0043】

アプリケーションＣ１へ転送される静止画は、例えば、映像に含まれる偶数番目の画像である。アプリケーションＣ２へ転送される静止画は、例えば、映像に含まれる奇数番目の画像である。

【0044】

アプリケーションＣ１は、振分部１２２から受信した静止画を逐次処理し、処理結果をＤＢサーバ１０３－１へ送信する。アプリケーションＣ２は、振分部１２４から受信した静止画を逐次処理し、処理結果をＤＢサーバ１０３－１へ送信する。ＤＢサーバ１０３－１は、アプリケーションＣ１及びアプリケーションＣ２の処理結果を、処理結果１３１－３として記憶する。

【0045】

図５の配備方法によれば、映像が画像単位で分割され、アプリケーションＣ１及びアプリケーションＣ２によって並列に処理される。これにより、各処理サーバの空きリソースが有効に活用され、画像処理システムにおけるアプリケーションの収容度が向上する。また、各処理サーバの処理リソースに応じて、アプリケーションＣ１及びアプリケーションＣ２の処理レートを決定することで、転送データの画像レートを削減することができる。

【0046】

しかしながら、映像を画像単位で振り分ける場合、映像から静止画を抽出する抽出処理の処理レートによっては、静止画のデータ量が動画よりも増加し、通信ネットワークの負荷が大きくなることがある。

【0047】

図６は、映像から抽出される動画及び静止画の例を示している。入力される映像の画像レートが３０ｆｐｓであり、１枚の画像のサイズが１２８０×７２０画素である場合、フォーマットがｙｕｖ４２０ｐである２秒間の非圧縮動画のデータ量は、３６６００ＫＢとなる。

【0048】

転送データの転送先が処理サーバ１０２－２である場合、抽出部１２１は、この２秒間の非圧縮動画を、動画の転送データ６０１、静止画の転送データ６０２、又は静止画の転送データ６０３として抽出する。転送データ６０１は、動画像符号化により圧縮されて転送され、転送データ６０２又は転送データ６０３は、静止画符号化により圧縮されて転送される。

【0049】

例えば、転送データ６０１は、ＭＰ４フォーマットの３０ｆｐｓの圧縮動画として転送され、転送データ６０１のデータ量は５１６ＫＢとなる。転送データ６０２は、ＪＰＥＧ（Joint Photographic Experts Group）フォーマットの１０ｆｐｓの圧縮静止画として転送され、転送データ６０２のデータ量は７２１ＫＢとなる。転送データ６０３は、ＪＰＥＧフォーマットの５ｆｐｓの圧縮静止画として転送され、転送データ６０３のデータ量は４７６ＫＢとなる。

【0050】

この場合、静止画の転送データ６０３のデータ量は、動画の転送データ６０１のデータ量よりも少なくなるが、静止画の転送データ６０２のデータ量は、動画の転送データ６０１のデータ量よりも約４０％多くなる。

【0051】

このように、抽出処理の処理レートによっては、静止画の転送データのデータ量が動画の転送データのデータ量よりも増加することがある。なお、転送データのデータ量は映像の圧縮率に依存し、圧縮率は映像の内容に応じて変化する。

【0052】

映像を動画として転送する場合、単位時間当たりの圧縮率は高くなるが、圧縮動画から各画像を復元する際に、前時刻の画像の情報が用いられる。このため、画像処理を並列化しても転送データのデータ量は削減されず、並列度に応じて通信ネットワーク上を転送される転送データ量が増加するため、通信ネットワークの負荷が大きくなる。

【0053】

また、動画の圧縮が完了するまで、アプリケーションへの転送が開始されないため、画像処理の開始までの待ち時間が長くなる。このため、アプリケーションによっては、処理レートの制約条件が満たされなくなることがある。一方、映像を静止画として転送する場合、画像を１枚ずつ圧縮して転送することができるため、画像処理の開始までの待ち時間は短くなる。

【0054】

図７は、転送データの種類に応じた画像処理の開始時刻の例を示している。映像に含まれる各画像７０１を静止画として転送する場合、画像単位で符号化及び復号が行われるため、時刻ｔ１において、アプリケーションによる画像処理が開始される。

【0055】

一方、映像に含まれる所定枚数の画像群７１１及び画像群７１２それぞれを動画として転送する場合、画像群単位で符号化及び復号が行われる。このため、時刻ｔ１よりも遅い時刻ｔ２において、画像群７１１の画像処理が開始され、時刻ｔ３において、画像群７１２の画像処理が開始される。

【0056】

したがって、映像を静止画として転送した方が、アプリケーションによる画像処理を早く開始することができる。しかし、上述したように、抽出処理の処理レートによっては、転送データのデータ量が動画よりも多くなる。このように、同じアプリケーションを複数の処理サーバに配備して画像処理を並列化するだけでは、アプリケーションの処理レートの制約条件を満たしつつ、通信ネットワークのトラフィックを低減することは難しい。

【0057】

図８は、実施形態の画像処理制御装置の機能的構成例を示している。図８の画像処理制御装置８０１は、決定部８１１及び選択部８１２を含む。

【0058】

図９は、図８の画像処理制御装置８０１が行う制御処理の例を示すフローチャートである。まず、決定部８１１は、配備対象の画像処理プログラムの処理レートに基づいて、配備対象の画像処理プログラムが処理する映像を転送する際に映像から抽出される転送データの種類を、動画又は静止画のいずれかに決定する（ステップ９０１）。次に、選択部８１２は、転送データの種類に基づいて、複数の情報処理装置の中から、配備対象の画像処理プログラムが配備される配備先情報処理装置を選択する（ステップ９０２）。

【0059】

図８の画像処理制御装置８０１によれば、画像処理プログラムの配備先として、通信ネットワークのトラフィックが低減されるような情報処理装置を選択することができる。

【0060】

図１０は、図８の画像処理制御装置８０１を含む画像処理システムの機能的構成例を示している。図１０の画像処理システムは、制御サーバ１００１、処理サーバ１００２－１～処理サーバ１００２－Ｎ、及びＤＢサーバ１００３－１～ＤＢサーバ１００３－Ｍを含む。Ｎは２以上の整数であり、Ｍは１以上の整数である。

【0061】

これらのサーバは情報処理装置であり、通信ネットワーク１００４を介して互いに通信することができる。通信ネットワーク１００４は、例えば、ＬＡＮ（Local Area Network）又はＷＡＮ（Wide Area Network）である。制御サーバ１００１は、図８の画像処理制御装置８０１に対応する。

【0062】

処理サーバ１００２－ｉ（ｉ＝１～Ｎ）は、受信部１０１１－ｉ、抽出部１０１２－ｉ、振分部１０１３－ｉ、及び実行部１０１４－ｉを含む。処理サーバ１００２－１の受信部１０１１－１は、処理対象の映像を受信し、抽出部１０１２－１へ出力する。抽出部１０１２－１は、映像から動画又は静止画の転送データを抽出し、抽出された転送データを振分部１０１３－１へ出力する。

【0063】

振分部１０１３－１は、転送データを実行部１０１４－１又は他の処理サーバ１００２－ｉ（ｉ＝２～Ｎ）へ転送する。転送先が実行部１０１４－１である場合、静止画の転送データが転送される。転送先が他の処理サーバ１００２－ｉである場合、動画又は静止画の転送データが、動画像符号化又は静止画符号化により圧縮されて転送される。

【0064】

実行部１０１４－１は、処理サーバ１００２－１に配備されたアプリケーションを実行することで、静止画に対する画像処理を行い、処理結果をいずれかのＤＢサーバ１００３－ｊ（ｊ＝１～Ｍ）へ送信する。

【0065】

処理サーバ１００２－ｉ（ｉ＝２～Ｎ）の受信部１０１１－ｉは、処理サーバ１００２－１から転送データを受信し、受信した転送データを復号する。転送データが動画である場合、受信部１０１１－ｉは、転送データを抽出部１０１２－ｉへ出力する。転送データが静止画である場合、受信部１０１１－ｉは、転送データを振分部１０１３－ｉへ出力する。

【0066】

抽出部１０１２－ｉは、動画から静止画を抽出して、振分部１０１３－ｉへ出力する。振分部１０１３－ｉは、受信部１０１１－ｉ又は抽出部１０１２－ｉから出力される静止画を、実行部１０１４－ｉへ出力する。実行部１０１４－ｉは、処理サーバ１００２－ｉに配備されたアプリケーションを実行することで、静止画に対する画像処理を行い、処理結果をいずれかのＤＢサーバ１００３－ｊへ送信する。

【0067】

ＤＢサーバ１００３－ｊ（ｊ＝１～Ｍ）は、記憶部１０２１－ｊを含む。記憶部１０２１－ｊは、処理サーバ１００２－ｉ（ｉ＝１～Ｎ）から受信した処理結果を記憶する。

【0068】

実行部１０１４－ｉ（ｉ＝１～Ｎ）は、アプリケーション毎に異なる画像処理を行い、アプリケーション毎に異なる処理結果を生成する。アプリケーションによる画像処理は、画像中の人物を検出する処理、画像中の人物の人数をカウントする処理、画像中の人物が行っている作業を検出する処理、又は画像中の人物が扱っている道具又は部品の位置を追跡する処理であってもよい。

【0069】

図１１は、図１０の制御サーバ１００１の機能的構成例を示している。図１１の制御サーバ１００１は、配備制御部１１０１、振分制御部１１０２、通信部１１０３、及び記憶部１１０４を含む。記憶部１１０４は、制約条件１１１１及び負荷情報１１１２を記憶する。配備制御部１１０１は、図８の決定部８１１及び選択部８１２に対応する。

【0070】

制約条件１１１１は、画像処理システム内に配備されているアプリケーション毎の制約条件であり、要求処理レート、要求時間、及び要求処理リソースを含む。要求処理レートは、アプリケーションが単位時間当たりに処理する画像の枚数を表す。要求処理レートは、画像処理プログラムの処理レートに関する制約条件の一例である。

【0071】

要求時間は、図２に示したように、転送データのデータ転送時間及び処理時間の和の上限値を表す。要求処理リソースは、アプリケーションが転送データの処理に使用する処理リソースを表す。負荷情報１１１２は、アプリケーション毎の処理リソースの使用状況を表す。

【0072】

配備制御部１１０１は、外部から配備対象のアプリケーションを受け付け、配備対象のアプリケーションの要求処理レートに基づいて、配備対象のアプリケーションに対する転送データの種類を、動画又は静止画のいずれかに決定する。そして、配備制御部１１０１は、決定された転送データの種類に基づいて、いずれかの処理サーバ１００２－ｉを配備先処理サーバとして選択し、転送データの画像レート、データ量、及び抽出処理の処理レートを決定する。

【0073】

通信部１１０３は、配備対象のアプリケーションを配備先処理サーバへ送信し、配備先処理サーバは、受信したアプリケーションをインストールする。これにより、配備対象のアプリケーションが配備先処理サーバに配備される。配備先処理サーバの実行部１０１４－ｉは、配備されたアプリケーションを実行する。

【0074】

振分制御部１１０２は、配備対象のアプリケーションに対する転送データの転送先、画像レート、データ量、及び抽出処理の処理レートを示す制御情報を生成し、通信部１１０３は、制御情報を処理サーバ１００２－１へ送信する。これにより、制御情報が処理サーバ１００２－１に通知される。

【0075】

処理サーバ１００２－１の抽出部１０１２－１は、制御情報が示す抽出処理の処理レート及びデータ量で、映像から転送データを抽出し、振分部１０１３－１へ出力する。振分部１０１３－１は、制御情報が示す画像レートで、転送データを実行部１０１４－１又は他の処理サーバ１００２－ｉへ転送する。

【0076】

配備制御部１１０１は、映像を動画として転送する場合と、静止画として転送する場合とで、転送データ量を最小にする並列化方法が異なることを利用して、通信負荷が低下するようにアプリケーションの配備方法を決定する。

【0077】

転送データが動画である場合、並列度が上がると転送データ量が増加するため、配備制御部１１０１は、転送の並列度を下げつつ、要求時間の制約条件を満たす最大のデータ量を決定する。転送データが静止画である場合、配備制御部１１０１は、各処理サーバに対する転送データの画像レートが小さくなり、かつ、複数の処理サーバに対する転送データのデータ量の和が小さくなるように、画像処理を並列化し、転送データを振り分ける。

【0078】

図１２は、アプリケーションの処理レートと転送データ量との関係の例を示している。横軸は、アプリケーションの処理レートを表し、縦軸は、単位時間当たりの転送データ量を表す。水平方向の複数の線分１２０１は、転送データが静止画である場合の単位時間当たりの転送データ量を表し、一点鎖線１２０２は、転送データが動画である場合の単位時間当たりの転送データ量Ｑを表す。

【0079】

線分１２０１が示す転送データ量は、処理レートの増加とともに増加し、一点鎖線１２０２が示す転送データ量Ｑは、処理レートにかかわらず一定である。処理レートが所定値Ｒよりも小さい場合、映像を静止画として転送する方が動画として転送する場合よりも、単位時間当たりの転送データ量が小さくなる。一方、処理レートが所定値Ｒよりも大きい場合、映像を動画として転送する方が静止画として転送する場合よりも、単位時間当たりの転送データ量が小さくなる。

【0080】

そこで、配備制御部１１０１は、所定値Ｒを閾値として用いて、配備対象のアプリケーションに対する転送データの種類を決定する。配備制御部１１０１は、アプリケーションの要求処理レートが閾値よりも大きい場合、転送データを動画に決定し、要求処理レートが閾値よりも小さい場合、転送データを静止画に決定する。

【0081】

図１３は、図１０の制御サーバ１００１が行う閾値決定処理の例を示すフローチャートである。まず、配備制御部１１０１は、配備対象のアプリケーションが処理する映像の登録を受け付ける（ステップ１３０１）。

【0082】

次に、配備制御部１１０１は、受け付けた映像に含まれる画像１枚当たりの転送データ量Ａを、処理サーバ１００２－１から取得する（ステップ１３０２）。次に、配備制御部１１０１は、複数の画像を動画として転送する場合の単位時間当たりの転送データ量Ｑを、処理サーバ１００２－１から取得する（ステップ１３０３）。

【0083】

処理サーバ１００２－１の抽出部１０１２－１は、所定周期で、映像から所定時間範囲に含まれる複数の画像を抽出し、抽出された画像１枚当たりの静止画の転送データ量Ａを計算する。また、抽出部１０１２－１は、抽出された複数の画像を動画として転送する場合の単位時間当たりの転送データ量Ｑを計算する。そして、処理サーバ１００２－１は、転送データ量Ａ及び単位時間当たりの転送データ量Ｑを、制御サーバ１００１に通知する。これにより、配備制御部１１０１は、転送データ量Ａ及び単位時間当たりの転送データ量Ｑを取得することができる。

【0084】

次に、配備制御部１１０１は、転送データ量Ｑをデータ量Ａで除算することで、転送データ量Ｑに対応する静止画の画像レートを計算し、計算された画像レートを閾値に決定する（ステップ１３０４）。

【0085】

図１３の閾値決定処理によれば、映像を静止画として転送する場合の単位時間当たりの転送データ量が、映像を静止画として転送する場合の単位時間当たりの転送データ量と等しくなる画像レートを、閾値に決定することができる。

【0086】

図１４Ａ及び図１４Ｂは、図１０の制御サーバ１００１が行うアプリケーション配備処理の例を示すフローチャートである。まず、配備制御部１１０１は、配備対象のアプリケーションを受け付け（ステップ１４０１）、画像システム内に同一映像処理サーバが存在するか否かをチェックする（ステップ１４０２）。同一映像処理サーバは、配備対象のアプリケーションと同じ映像を処理するアプリケーションが配備されている処理サーバ１００２－ｉである。

【0087】

１台以上の同一映像処理サーバが存在する場合（ステップ１４０２，ＹＥＳ）、配備制御部１１０１は、負荷情報１１１２を参照して、同一映像処理サーバに空きリソースが存在するか否かをチェックする（ステップ１４０３）。

【0088】

いずれかの同一映像処理サーバに空きリソースが存在する場合（ステップ１４０３，ＹＥＳ）、配備制御部１１０１は、空きリソースが存在する１台以上の同一映像処理サーバを、候補処理サーバとして選択する（ステップ１４０４）。

【0089】

同一映像処理サーバを候補処理サーバとして選択することで、既に転送されている転送データを利用することが可能になるため、通信ネットワーク１００４のトラフィックの増加が抑制される。

【0090】

空きリソースを有する処理サーバ１００２－ｉを候補処理サーバとして選択することで、すべての処理リソースを使用している処理サーバ１００２－ｉを、配備先処理サーバの候補から除外することができる。

【0091】

次に、配備制御部１１０１は、配備対象のアプリケーションの制約条件１１１１を満たす配備先処理サーバが決定されたか否かをチェックする（ステップ１４０５）。制約条件１１１１を満たす配備先処理サーバが決定されていない場合（ステップ１４０５，ＮＯ）、配備制御部１１０１は、ステップ１４０６の処理を行う。ステップ１４０６において、配備制御部１１０１は、配備対象のアプリケーションの要求処理レートを、配備対象のアプリケーションが処理する映像の閾値と比較する（ステップ１４０６）。

【0092】

要求処理レートが閾値よりも大きい場合（ステップ１４０６，ＹＥＳ）、配備制御部１１０１は、配備対象のアプリケーションを高処理レートアプリケーションに分類する（ステップ１４０７）。高処理レートアプリケーションは、転送データが動画として転送されるアプリケーションである。

【0093】

次に、配備制御部１１０１は、同一映像高処理レートアプリケーションが配備されている候補処理サーバの中から、配備対象のアプリケーションの要求時間の制約条件を満たす候補処理サーバを検索する（ステップ１４０８）。そして、配備制御部１１０１は、検索対象の候補処理サーバが存在するか否かをチェックする（ステップ１４１１）。

【0094】

同一映像高処理レートアプリケーションは、配備対象のアプリケーションと同じ映像を処理する高処理レートアプリケーションである。ステップ１４０８においては、所定時間として単位時間が用いられ、単位時間当たりの映像に対応する転送データのデータ転送時間と、その転送データの処理結果を転送するデータ転送時間との和が、転送遅延として計算される。そして、転送遅延が要求時間以下である場合、要求時間の制約条件を満たすと判定される。

【0095】

検索対象の候補処理サーバが存在する場合（ステップ１４１１，ＹＥＳ）、配備制御部１１０１は、検索された候補処理サーバの中に、低負荷処理サーバが存在するか否かをチェックする（ステップ１４１２）。低負荷処理サーバは、配備対象のアプリケーションの要求処理リソースの制約条件を満たす処理サーバ１００２－ｉである。処理サーバ１００２－ｉの空きリソースが要求処理リソース以上である場合、要求処理リソースの制約条件が満たされる。

【0096】

低負荷処理サーバが存在する場合（ステップ１４１２，ＹＥＳ）、配備制御部１１０１は、低負荷処理サーバのうち、転送遅延が最も小さい処理サーバ１００２－ｉを、配備先処理サーバに決定する（ステップ１４１３）。そして、配備制御部１１０１は、ステップ１４０５以降の処理を行う。

【0097】

同一映像高処理レートアプリケーションが配備されている候補処理サーバを、配備先処理サーバとして選択することで、既に転送されている動画の転送データを利用することが可能になるため、動画転送の並列度の増加が抑止される。これにより、通信ネットワーク１００４のトラフィックの増加が抑制される。

【0098】

要求時間の制約条件を満たす候補処理サーバを、配備先処理サーバとして選択することで、配備対象のアプリケーションの要求時間の制約条件を満たすことができる。

【0099】

低負荷処理サーバを配備先処理サーバとして選択することで、配備対象のアプリケーションの要求処理リソースの制約条件を満たすことができる。

【0100】

要求処理レートが閾値以下である場合（ステップ１４０６，ＮＯ）、配備制御部１１０１は、配備対象のアプリケーションを低処理レートアプリケーションに分類する（ステップ１４０９）。低処理レートアプリケーションは、転送データが静止画として転送されるアプリケーションである。

【0101】

次に、配備制御部１１０１は、同一映像低処理レートアプリケーションが配備されている候補処理サーバの中から、配備対象のアプリケーションの要求処理レート及び要求時間の制約条件を満たす候補処理サーバを検索する（ステップ１４１０）。そして、配備制御部１１０１は、ステップ１４１１以降の処理を行う。

【0102】

同一映像低処理レートアプリケーションは、配備対象のアプリケーションと同じ映像を処理する低処理レートアプリケーションである。ステップ１４１０においては、ステップ１４０８と同様にして転送遅延が計算され、転送遅延が要求時間以下である場合、要求時間の制約条件を満たすと判定される。また、処理サーバ１００２－ｉへ転送されている転送データの画像レートが要求処理レート以上である場合、要求処理レートの制約条件を満たすと判定される。

【0103】

同一映像低処理レートアプリケーションが配備されている候補処理サーバを、配備先処理サーバとして選択することで、既に転送されている静止画の転送データを利用することが可能になるため、静止画転送の並列度の増加が抑止される。これにより、通信ネットワーク１００４のトラフィックの増加が抑制される。

【0104】

要求処理レートの制約条件を満たす候補処理サーバを、配備先処理サーバとして選択することで、配備対象のアプリケーションの要求処理レートの制約条件を満たすことができる。

【0105】

要求時間の制約条件を満たす候補処理サーバを、配備先処理サーバとして選択することで、配備対象のアプリケーションの要求時間の制約条件を満たすことができる。

【0106】

ステップ１４０６～ステップ１４１０の処理によれば、配備対象のアプリケーションが、要求処理レートに応じて高処理レートアプリケーション又は低処理レートアプリケーションに分類される。これにより、映像を動画として転送する場合と静止画として転送する場合における転送データ量の違いを利用して、最適な配備先処理サーバを決定することが可能になる。

【0107】

低負荷処理サーバが存在しない場合（ステップ１４１２，ＮＯ）、配備制御部１１０１は、配備対象のアプリケーションの要求処理レート及び要求処理リソースを、より小さな値に分割する（ステップ１４１４）。そして、配備制御部１１０１は、分割後の要求処理レート及び要求処理リソースを用いて、ステップ１４０５以降の処理を行う。

【0108】

要求処理レート及び要求処理リソースを分割してステップ１４０５以降の処理を再度行うことで、要求処理リソースの制約条件を満たさない複数台の候補処理サーバを、配備先処理サーバとして選択することが可能になる。

【0109】

制約条件１１１１を満たす１台又は複数台の配備先処理サーバが決定された場合（ステップ１４０５，ＹＥＳ）、通信部１１０３は、配備対象のアプリケーションを配備先処理サーバへ送信する（ステップ１４１６）。そして、配備先処理サーバは、受信したアプリケーションをインストールする。

【0110】

同一映像処理サーバが存在しない場合（ステップ１４０２，ＮＯ）、配備制御部１１０１は、ステップ１４１５の処理を行う。ステップ１４１５において、配備制御部１１０１は、空きリソースを有する処理サーバ１００２－ｉのうち、転送遅延が最も小さい処理サーバ１００２－ｉを、配備先処理サーバに決定する。そして、配備制御部１１０１は、ステップ１４１６の処理を行う。

【0111】

いずれの同一映像処理サーバにも空きリソースが存在しない場合（ステップ１４０３，ＮＯ）、及び検索対象の候補処理サーバが存在しない場合（ステップ１４１１，ＮＯ）も、配備制御部１１０１は、ステップ１４１５及びステップ１４１６の処理を行う。

【0112】

次に、配備制御部１１０１は、配備対象のアプリケーションの分類をチェックする（ステップ１４１７）。配備対象のアプリケーションが高処理レートアプリケーションである場合（ステップ１４１７，ＹＥＳ）、配備制御部１１０１は、ステップ１４１８の処理を行う。

【0113】

ステップ１４１８において、配備制御部１１０１は、配備先処理サーバに配備されている高処理レートアプリケーション毎に、要求時間の制約条件を満たす映像の最大データ量を計算する。最大データ量の計算対象となる高処理レートアプリケーションは、配備先処理サーバに配備されている配備対象のアプリケーション及び同一映像高処理レートアプリケーションである。ステップ１４１８においては、転送データのデータ転送時間及び処理時間の和が要求時間以下である場合、要求時間の制約条件を満たすと判定される。

【0114】

次に、配備制御部１１０１は、計算対象の高処理レートアプリケーションの最大データ量のうち、最も小さい最大データ量を、配備先処理サーバに対する転送データのデータ量として選択する（ステップ１４１９）。

【0115】

次に、振分制御部１１０２は、転送データの種類が動画であることと、転送データのデータ量とを示す抽出制御情報を生成し、通信部１１０３は、生成された抽出制御情報を処理サーバ１００２－１へ送信する（ステップ１４２０）。

【0116】

次に、振分制御部１１０２は、転送データの転送先及び画像レートを示す転送制御情報を生成し、通信部１１０３は、生成された転送制御情報を処理サーバ１００２－１へ送信する（ステップ１４２３）。転送データの転送先としては、配備先処理サーバを示す情報が用いられる。

【0117】

配備対象のアプリケーションが低処理レートアプリケーションである場合（ステップ１４１７，ＮＯ）、制御サーバ１００１は、ステップ１４２１の処理を行う。ステップ１４２１において、振分制御部１１０２は、転送データの種類が静止画であることと、静止画を抽出する抽出処理の処理レートとを示す抽出制御情報を生成し、通信部１１０３は、生成された抽出制御情報を処理サーバ１００２－１へ送信する。

【0118】

配備対象のアプリケーションの要求処理レートが、配備先処理サーバに配備されている同一映像低処理レートアプリケーションの要求処理レートよりも大きい場合、配備制御部１１０１は、転送データの画像レートを更新する（ステップ１４２２）。この場合、配備制御部１１０１は、配備対象のアプリケーションの要求処理レートを、転送データの画像レートとして選択する。そして、制御サーバ１００１は、ステップ１４２３の処理を行う。

【0119】

ステップ１４２２において、配備対象のアプリケーションの要求処理レートが、配備先処理サーバに配備されている同一映像低処理レートアプリケーションの要求処理レート以下である場合、配備制御部１１０１は、転送データの画像レートを更新しない。

【0120】

図１５は、高処理レートアプリケーションの配備先処理サーバの例を示している。処理サーバ１００２－１に入力される映像の画像レートは、６０ｆｐｓである。処理サーバ１００２－３には、アプリケーションＤが配備されており、処理サーバ１００２－４には、アプリケーションＥが配備されている。アプリケーションＦは、配備対象の高処理レートアプリケーションである。アプリケーションＤ及びアプリケーションＥは、同一映像高処理レートアプリケーションである。一方、処理サーバ１００２－２には、同一映像高処理レートアプリケーションが配備されていない。

【0121】

この場合、ステップ１４０８において、同一映像高処理レートアプリケーションが配備されている処理サーバ１００２－３及び処理サーバ１００２－４が選択され、ステップ１４１２において、低負荷処理サーバである処理サーバ１００２－４が選択される。そして、処理サーバ１００２－４が配備先処理サーバに決定され、アプリケーションＦが処理サーバ１００２－４に配備される。

【0122】

処理サーバ１００２－１の振分部１０１３－１は、４０ｆｐｓの画像レートで、動画の転送データを処理サーバ１００２－３及び１００２－４へ転送する。処理サーバ１００２－３の受信部１０１１－３は、受信した転送データを抽出部１０１２－３へ出力し、抽出部１０１２－３は、動画から静止画を抽出して、振分部１０１３－３へ出力する。振分部１０１３－３は、抽出部１０１２－３から出力される静止画を、アプリケーションＤへ出力する。

【0123】

処理サーバ１００２－４の受信部１０１１－４は、受信した転送データを抽出部１０１２－４へ出力し、抽出部１０１２－４は、動画から静止画を抽出して、振分部１０１３－４へ出力する。振分部１０１３－４は、抽出部１０１２－４から出力される静止画を、アプリケーションＥ及びアプリケーションＦへ出力する。

【0124】

このように、同一映像高処理レートアプリケーションが配備されている処理サーバを、配備先処理サーバとして選択することで、動画転送の並列度の増加が抑止され、通信ネットワーク１００４のトラフィックを低減することができる。

【0125】

図１６は、低処理レートアプリケーションの配備先処理サーバの例を示している。処理サーバ１００２－１に入力される映像の画像レートは、６０ｆｐｓである。処理サーバ１００２－２には、アプリケーションＧが配備されており、処理サーバ１００２－３には、アプリケーションＨが配備されている。アプリケーションＩは、配備対象の低処理レートアプリケーションである。アプリケーションＧ及びアプリケーションＨは、同一映像低処理レートアプリケーションである。

【0126】

アプリケーションＧの要求処理レートは２０ｆｐｓであり、アプリケーションＨの要求処理レートは４０ｆｐｓである。この場合、処理サーバ１００２－１の振分部１０１３－１は、２０ｆｐｓの画像レートで、静止画の転送データを処理サーバ１００２－２へ転送し、４０ｆｐｓの画像レートで、静止画の転送データを処理サーバ１００２－３へ転送する。

【0127】

配備対象のアプリケーションＩの要求処理レートが４０ｆｐｓである場合、処理サーバ１００２－２に対する転送データの画像レートは、アプリケーションＩの要求処理レートよりも小さい。このため、処理サーバ１００２－２は、ステップ１４１０の要求処理レートの制約条件を満たさない。一方、処理サーバ１００２－３に対する転送データの画像レートは、アプリケーションＩの要求処理レートと同じであるため、処理サーバ１００２－３は、ステップ１４１０の要求処理レートの制約条件を満たす。

【0128】

この場合、ステップ１４１０において、同一映像低処理レートアプリケーションが配備されている処理サーバ１００２－２及び処理サーバ１００２－３のうち、要求処理レートの制約条件を満たす処理サーバ１００２－３が選択される。そして、処理サーバ１００２－３が配備先処理サーバに決定され、アプリケーションＩが処理サーバ１００２－３に配備される。

【0129】

処理サーバ１００２－２の受信部１０１１－２は、受信した静止画の転送データを振分部１０１３－２へ出力し、振分部１０１３－２は、静止画の転送データをアプリケーションＧへ出力する。処理サーバ１００２－３の受信部１０１１－３は、受信した静止画の転送データを振分部１０１３－３へ出力し、振分部１０１３－３は、静止画の転送データをアプリケーションＨ及びアプリケーションＩへ出力する。

【0130】

このように、同一映像低処理レートアプリケーションが配備されており、かつ、要求処理レートの制約条件を満たす処理サーバを、配備先処理サーバとして選択することで、通信ネットワーク１００４のトラフィックの増加を抑止することができる。

【0131】

図１７は、低処理レートアプリケーションを複数の処理サーバに配備する配備方法の例を示している。処理サーバ１００２－１に入力される映像の画像レートは、４０ｆｐｓであり、ビットレートは、１００Ｍｂｐｓである。ｂｐｓは、１秒当たりのビット数を表す単位である。

【0132】

処理サーバ１００２－２には、アプリケーションＡが配備されており、処理サーバ１００２－３には、アプリケーションＢが配備されている。アプリケーションＣは、配備対象のアプリケーションである。

【0133】

図１８は、アプリケーションＡ～アプリケーションＣの制約条件１１１１の例を示している。図１８の制約条件１１１１は、各アプリケーションの要求処理リソース、要求時間、要求処理レート、及び画像１枚の処理時間を含む。この例では、処理リソースは、処理サーバのＣＰＵに含まれるコアである。

【0134】

図１８（ａ）は、配備済みのアプリケーションＡ及びアプリケーションＢの制約条件１１１１の例を示している。アプリケーションＡの要求処理リソースは、６個のコアであり、要求時間は８秒であり、要求処理レートは４０ｆｐｓであり、画像１枚の処理時間は０．０２５秒である。アプリケーションＢの要求処理リソースは、６個のコアであり、要求時間は１０秒であり、要求処理レートは２０ｆｐｓであり、画像１枚の処理時間は０．０５秒である。

【0135】

図１８（ｂ）は、配備対象のアプリケーションＣの制約条件１１１１の例を示している。アプリケーションＣの要求処理リソースは、４個のコアであり、要求時間は１５秒であり、要求処理レートは４０ｆｐｓであり、画像１枚の処理時間は０．０２５秒である。

【0136】

ステップ１４０６の閾値が４５ｆｐｓである場合、アプリケーションＡ～アプリケーションＣの要求処理レートは閾値よりも小さいため、アプリケーションＡ～アプリケーションＣは、低処理レートアプリケーションに分類される。したがって、アプリケーションＡ及びアプリケーションＢは、同一映像低処理レートアプリケーションである。

【0137】

図１９は、図１７の状態における処理サーバ１００２－２及び処理サーバ１００２－３の処理リソースの例を示している。リソース総量は、各処理サーバが有するコアの個数を表し、空きリソースは、使用されていないコアの個数を表す。

【0138】

処理サーバ１００２－２に配備されているアプリケーションＡの要求処理リソースは６個のコアであるため、リソース総量の８個のコアのうち６個のコアがアプリケーションＡによって使用されている。したがって、処理サーバ１００２－２の空きリソースは、残りの２個のコアである。

【0139】

処理サーバ１００２－３に配備されているアプリケーションＢの要求処理リソースも６個のコアであるため、リソース総量の８個のコアのうち６個のコアがアプリケーションＢによって使用されている。したがって、処理サーバ１００２－３の空きリソースも２個のコアである。

【0140】

図２０は、図１７の状態において、処理サーバ１００２－２及び処理サーバ１００２－３へ転送される転送データの画像レートの例を示している。転送先は、転送データの転送先を表し、最大画像レートは、転送先の処理サーバへ転送される転送データの画像レートの最大値を表す。

【0141】

処理サーバ１００２－２に配備されているアプリケーションＡの要求処理レートは４０ｆｐｓであるため、処理サーバ１００２－２の最大画像レートは、４０ｆｐｓである。一方、処理サーバ１００２－３に配備されているアプリケーションＢの要求処理レートは２０ｆｐｓであるため、処理サーバ１００２－３の最大画像レートは、２０ｆｐｓである。

【0142】

図２１は、サーバ間の帯域の例を示している。送信元は、データの送信元の処理サーバ１００２－ｉを表し、送信先は、データの送信先の処理サーバ１００２－ｉ又はＤＢサーバ１００３－ｊを表す。この例では、いずれのサーバ間の帯域も、１０００Ｍｂｐｓである。

【0143】

処理サーバ１００２－１の振分部１０１３－１は、４０ｆｐｓの画像レートで、静止画の転送データを処理サーバ１００２－２へ転送し、２０ｆｐｓの画像レートで、静止画の転送データを処理サーバ１００２－３へ転送する。

【0144】

処理サーバ１００２－２の受信部１０１１－２は、受信した静止画の転送データを振分部１０１３－２へ出力し、振分部１０１３－２は、静止画の転送データをアプリケーションＡへ出力する。アプリケーションＡは、振分部１０１３－２から受信した転送データを逐次処理し、処理結果１７０１－１をＤＢサーバ１００３－１へ送信する。ＤＢサーバ１００３－１は、処理サーバ１００２－２から受信した処理結果１７０１－１を記憶する。

【0145】

処理サーバ１００２－３の受信部１０１１－３は、受信した静止画の転送データを振分部１０１３－３へ出力し、振分部１０１３－３は、静止画の転送データをアプリケーションＢへ出力する。アプリケーションＢは、振分部１０１３－３から受信した転送データを逐次処理し、処理結果１７０１－２をＤＢサーバ１００３－２へ送信する。ＤＢサーバ１００３－２は、処理サーバ１００２－３から受信した処理結果１７０１－２を記憶する。

【0146】

処理サーバ１００２－２の最大画像レートは、配備対象のアプリケーションＣの要求処理レートと同じであるため、処理サーバ１００２－２は、ステップ１４１０の要求処理レートの制約条件を満たす。一方、処理サーバ１００２－３の最大画像レートは、アプリケーションＣの要求処理レートよりも小さいため、処理サーバ１００２－３は、ステップ１４１０の要求処理レートの制約条件を満たさない。

【0147】

次に、処理サーバ１００２－１に入力される映像のビットレートは１００Ｍｂｐｓであるため、単位時間当たりの映像に対応するデータ量は１００Ｍｂである。処理サーバ１００２－１と処理サーバ１００２－２との間の帯域は１０００Ｍｂｐｓであるため、処理サーバ１００２－１が処理サーバ１００２－２へ１００Ｍｂの転送データを転送するデータ転送時間Ｔ３１は、０．１秒である。

【0148】

処理サーバ１００２－２とＤＢサーバ１００３－１との間の帯域は１０００Ｍｂｐｓであるため、処理サーバ１００２－２がＤＢサーバ１００３－１へ１００Ｍｂの処理結果を転送するデータ転送時間Ｔ３２は、０．１秒である。

【0149】

したがって、データ転送時間Ｔ３１及びデータ転送時間Ｔ３２の和である転送遅延は０．２秒となり、アプリケーションＣの要求時間よりも短いため、処理サーバ１００２－２は、ステップ１４１０の要求時間の制約条件を満たす。

【0150】

次に、処理サーバ１００２－１と処理サーバ１００２－３との間の帯域は１０００Ｍｂｐｓであるため、処理サーバ１００２－１が処理サーバ１００２－３へ１００Ｍｂの転送データを転送するデータ転送時間Ｔ４１は、０．１秒である。

【0151】

処理サーバ１００２－３とＤＢサーバ１００３－２との間の帯域は１０００Ｍｂｐｓであるため、処理サーバ１００２－３がＤＢサーバ１００３－２へ１００Ｍｂの処理結果を転送するデータ転送時間Ｔ４２は、０．１秒である。

【0152】

したがって、データ転送時間Ｔ４１及びデータ転送時間Ｔ４２の和である転送遅延は０．２秒となり、アプリケーションＣの要求時間よりも短いため、処理サーバ１００２－３は、ステップ１４１０の要求時間の制約条件を満たす。

【0153】

この場合、ステップ１４１０において、同一映像低処理レートアプリケーションが配備されている処理サーバ１００２－２及び処理サーバ１００２－３のうち、要求処理レート及び要求時間の制約条件を満たす処理サーバ１００２－２が選択される。しかし、処理サーバ１００２－２の空きリソースは、アプリケーションＣの要求処理リソースよりも少ないため、処理サーバ１００２－２は、ステップ１４１２の低負荷処理サーバには該当しない。

【0154】

そこで、ステップ１４１４において、処理サーバ１００２－２の空きリソースに合わせて、アプリケーションＣの要求処理レート及び要求処理リソースが分割される。処理サーバ１００２－２の空きリソースは、２個のコアであり、アプリケーションＣの要求処理リソースの１／２に該当する。そこで、アプリケーションＣの要求処理レート及び要求処理リソースがそれぞれ２分割され、分割後の要求処理レートは２０ｆｐｓになり、分割後の要求処理リソースは２個のコアになる。

【0155】

分割後の要求処理レート及び要求処理リソースを用いて、ステップ１４０５以降の処理を行うことで、ステップ１４１０において、処理サーバ１００２－２が再び選択される。処理サーバ１００２－２の空きリソースは、アプリケーションＣの分割後の要求処理リソースと同じであるため、処理サーバ１００２－２は、低負荷処理サーバに該当する。そこで、ステップ１４１３において、処理サーバ１００２－２が配備先処理サーバに決定される。

【0156】

しかし、処理サーバ１００２－２のみでは分割前の要求処理リソースの１／２しか確保されないため、ステップ１４０５において、制約条件１１１１を満たす配備先処理サーバが決定されていないと判定される。そして、ステップ１４１０において、同一映像低処理レートアプリケーションが配備されている処理サーバ１００２－３が、要求処理レートの制約条件を満たすか否かがチェックされる。

【0157】

この場合、分割後の要求処理レートは２０ｆｐｓであり、処理サーバ１００２－３の最大画像レートと同じであるため、処理サーバ１００２－３は、要求処理レートの制約条件を満たす。さらに、処理サーバ１００２－３の空きリソースは、分割後の要求処理リソースと同じであるため、処理サーバ１００２－３は、低負荷処理サーバに該当する。そこで、ステップ１４１３において、処理サーバ１００２－３が配備先処理サーバに決定される。

【0158】

これにより、分割前の要求処理リソースが確保されたため、ステップ１４０５において、制約条件１１１１を満たす配備先処理サーバが決定されたと判定される。そこで、ステップ１４１６において、配備制御部１１０１は、アプリケーションＣを、配備先処理サーバである処理サーバ１００２－２及び処理サーバ１００２－３に配備する。

【0159】

図２２は、アプリケーションＣの配備結果の例を示している。配備制御部１１０１は、アプリケーションＣをコピーしてアプリケーションＣ１及びアプリケーションＣ２を生成する。そして、通信部１１０３は、アプリケーションＣ１を処理サーバ１００２－２へ送信し、アプリケーションＣ２を処理サーバ１００２－３へ送信する。これにより、アプリケーションＣ１及びアプリケーションＣ２が、処理サーバ１００２－２及び処理サーバ１００２－３にそれぞれ配備される。

【0160】

次に、ステップ１４２１において、抽出処理の処理レートが、分割後の要求処理レートである２０ｆｐｓに設定され、設定された抽出処理の処理レートを示す抽出制御情報が処理サーバ１００２－１へ送信される。なお、ステップ１４２２において、分割後の要求処理レートは、アプリケーションＡ及びアプリケーションＢの要求処理レート以下であるため、転送データの画像レートは更新されない。

【0161】

処理サーバ１００２－１の抽出部１０１２－１は、４０ｆｐｓの処理レートで、映像から静止画の転送データを抽出する。振分部１０１３－１は、４０ｆｐｓの画像レートで、静止画を処理サーバ１００２－２へ転送し、２０ｆｐｓの画像レートで、静止画を処理サーバ１００２－３へ転送する。

【0162】

処理サーバ１００２－２の受信部１０１１－２は、処理サーバ１００２－１から静止画を受信し、振分部１０１３－２へ出力する。振分部１０１３－２は、４０ｆｐｓの画像レートで、静止画をアプリケーションＡへ転送し、２０ｆｐｓの画像レートで、静止画をアプリケーションＣ１へ転送する。

【0163】

処理サーバ１００２－３の受信部１０１１－３は、処理サーバ１００２－１から静止画を受信し、振分部１０１３－３へ出力する。振分部１０１３－３は、２０ｆｐｓの画像レートで、静止画をアプリケーションＢへ転送し、２０ｆｐｓの画像レートで、静止画をアプリケーションＣ２へ転送する。

【0164】

アプリケーションＣ１は、振分部１０１３－２から受信した静止画を逐次処理し、処理結果をＤＢサーバ１００３－１へ送信する。アプリケーションＣ２は、振分部１０１３－３から受信した静止画を逐次処理し、処理結果をＤＢサーバ１００３－１へ送信する。ＤＢサーバ１００３－１は、アプリケーションＣ１及びアプリケーションＣ２の処理結果を、処理結果１７０１－３として記憶する。

【0165】

図２２の配備結果によれば、映像が画像単位で分割され、アプリケーションＣ１及びアプリケーションＣ２によって並列に処理される。これにより、各処理サーバの空きリソースが有効に活用され、画像処理システムにおけるアプリケーションの収容度が向上する。

【0166】

次に、ステップ１４１８において、要求時間の制約条件を満たす映像の最大データ量を計算する具体例について説明する。配備先処理サーバが処理サーバ１００２－２であり、最大データ量の計算対象となる高処理レートアプリケーションがアプリケーションＪである場合を想定する。処理サーバ１００２－１に入力される映像の画像レートは、４０ｆｐｓであり、ビットレートは、１００Ｍｂｐｓである。

【0167】

映像のビットレートは１００Ｍｂｐｓであるため、ｘ秒間の映像に対応するデータ量は１００ｘＭｂである。処理サーバ１００２－１と処理サーバ１００２－２との間の帯域は１０００Ｍｂｐｓであるため、処理サーバ１００２－１が処理サーバ１００２－２へ１００ｘＭｂの転送データを転送するデータ転送時間Ｔ５１は、０．１ｘ秒である。

【0168】

アプリケーションＪの要求処理レートが２０ｆｐｓである場合、アプリケーションＪがｘ秒間に処理する画像の枚数は２０ｘ枚である。アプリケーションＪの画像１枚の処理時間が０．０２５秒である場合、処理サーバ１００２－２に配備されたアプリケーションＪが２０ｘ枚の画像を処理する処理時間Ｔ５２は、０．５ｘ秒である。

【0169】

処理サーバ１００２－２とＤＢサーバ１００３－１との間の帯域は１０００Ｍｂｐｓであるため、処理サーバ１００２－２がＤＢサーバ１００３－１へ１００ｘＭｂの処理結果を転送するデータ転送時間Ｔ５３は、０．１ｘ秒である。

【0170】

この場合、データ転送時間Ｔ５１、処理時間Ｔ５２、及びデータ転送時間Ｔ５３の総和は、０．７ｘ秒となる。アプリケーションＪの要求時間が１５秒である場合、要求時間の制約条件は、次式により表される。

【0171】

０．７ｘ≦１５ （１）

【0172】

式（１）を満たすｘの最大値は、１５／０．７＝２１．４３となる。映像のビットレートは１００Ｍｂｐｓであるため、要求時間の制約条件を満たす映像の最大データ量は、２１４３Ｍｂとなる。

【0173】

図１４Ａ及び図１４Ｂのアプリケーション配備処理によれば、様々な処理性能のアプリケーションを任意のタイミングで配備する場合に、制約条件１１１１を満たし、かつ、トラフィックの増加を抑制する、配備先処理サーバを決定することができる。

【0174】

図２３は、図１０の処理サーバ１００２－１の抽出部１０１２－１が行う抽出処理の例を示すフローチャートである。まず、抽出部１０１２－１は、制御サーバ１００１から抽出制御情報を受信したか否かをチェックする（ステップ２３０１）。抽出制御情報を受信した場合（ステップ２３０１，ＹＥＳ）、抽出部１０１２－１は、抽出制御情報が示す転送データの種類をチェックする（ステップ２３０２）。

【0175】

転送データの種類が動画である場合（ステップ２３０２，ＹＥＳ）、抽出部１０１２－１は、動画の転送データのデータ量を、抽出制御情報が示すデータ量に更新し（ステップ２３０３）、転送データのデータ量の動画を映像から抽出する（ステップ２３０５）。

【0176】

転送データの種類が静止画である場合（ステップ２３０２，ＮＯ）、抽出部１０１２－１は、実行中の同一映像低処理レートアプリケーションの要求処理レートと、抽出制御情報が示す抽出処理の処理レートのうち、最大の処理レートを求める。そして、抽出部１０１２－１は、静止画の抽出処理の処理レートを、最大の処理レートに更新し（ステップ２３０４）、抽出処理の処理レートで、静止画を映像から抽出する（ステップ２３０５）。

【0177】

次に、抽出部１０１２－１は、抽出完了を振分部１０１３－１に通知し（ステップ２３０６）、ステップ２３０１以降の処理を繰り返す。

【0178】

抽出制御情報を受信していない場合（ステップ２３０１，ＮＯ）、抽出部１０１２－１は、転送データのデータ量又は抽出処理の処理レートを更新することなく、ステップ２３０５以降の処理を行う。

【0179】

図２２に示した配備結果において、実行中の同一映像低処理レートアプリケーションであるアプリケーションＡの要求処理レートは、４０ｆｐｓであり、アプリケーションＢの要求処理レートは、２０ｆｐｓである。また、アプリケーションＣの分割後の要求処理レートは２０ｆｐｓであるため、抽出制御情報が示す抽出処理の処理レートは、２０ｆｐｓである。この場合、ステップ２３０４において、最大の処理レートである４０ｆｐｓが、更新後の抽出処理の処理レートとして設定される。

【0180】

図２４は、図１０の処理サーバ１００２－１の振分部１０１３－１が行う振分処理の例を示すフローチャートである。まず、振分部１０１３－１は、制御サーバ１００１から転送制御情報を受信したか否かをチェックする（ステップ２４０１）。転送制御情報を受信した場合（ステップ２４０１，ＹＥＳ）、振分部１０１３－１は、転送制御情報が示す転送先及び画像レートに応じて、転送データの転送先及び画像レートを更新する（ステップ２４０２）。

【0181】

次に、振分部１０１３－１は、抽出部１０１２－１から出力される転送データの種類をチェックする（ステップ２４０３）。転送データの種類が動画である場合（ステップ２４０３，ＹＥＳ）、振分部１０１３－１は、転送先の処理サーバ毎に、転送データを処理するアプリケーションの要求処理レートを取得する（ステップ２４０４）。

【0182】

次に、振分部１０１３－１は、転送先が他の処理サーバ１００２－ｉであるか否かをチェックする（ステップ２４０５）。転送先が他の処理サーバ１００２－ｉである場合（ステップ２４０５，ＹＥＳ）、振分部１０１３－１は、動画又は静止画の転送データを、転送先の処理サーバ１００２－ｉへ転送する（ステップ２４０５）。このとき、振分部１０１３－１は、転送データを処理するアプリケーションの要求処理レートも、転送データとともに転送する。そして、振分部１０１３－１は、ステップ２４０１以降の処理を繰り返す。

【0183】

転送先が処理サーバ１００２－１である場合（ステップ２４０５，ＮＯ）、振分部１０１３－１は、転送データの画像レートで、静止画の転送データを処理サーバ１００２－１内のアプリケーションへ転送する（ステップ２４０８）。そして、振分部１０１３－１は、ステップ２４０１以降の処理を繰り返す。

【0184】

転送制御情報を受信していない場合（ステップ２４０１，ＮＯ）、振分部１０１３－１は、ステップ２４０３以降の処理を行う。転送データの種類が静止画である場合（ステップ２４０３，ＮＯ）、振分部１０１３－１は、ステップ２４０２で更新された画像レートに基づいて、処理サーバ間の転送データの画像レートを更新し（ステップ２４０７）、ステップ２４０４以降の処理を行う。

【0185】

図２５は、ステップ２４０２における更新処理の例を示している。処理サーバは、転送先の処理サーバ１００２－ｉを表し、アドレスは、転送先の処理サーバ１００２－ｉのアドレスを表し、画像レートは、転送先の処理サーバ１００２－ｉへ転送される転送データの画像レートを表す。

【0186】

図２５（ａ）は、処理サーバ１００２－４に配備されている同一映像低処理レートアプリケーションに対する転送データの転送先及び画像レートの例を示している。転送先の処理サーバ１００２－４のアドレスは“１９２．１６８．０．４０”であり、画像レートは２０ｆｐｓである。

【0187】

図２５（ｂ）は、転送制御情報が示す転送先及び画像レートの例を示している。転送先の処理サーバは処理サーバ１００２－４であり、画像レートは４０ｆｐｓである。図２５（ｃ）は、図２５（ｂ）の転送制御情報に基づく更新結果の例を示している。転送先の処理サーバ１００２－４の画像レートは、図２５（ｂ）の転送制御情報に応じて、２０ｆｐｓから４０ｆｐｓに更新される。

【0188】

図２５（ｄ）は、転送制御情報が示す転送先が処理サーバ１００２－５である場合の更新結果の例を示している。この場合、転送制御情報に応じて、処理サーバ１００２－５を転送先とするエントリが追加される。追加されたエントリのアドレスは“１９２．１６８．０．５０”であり、画像レートは４０ｆｐｓである。

【0189】

ところで、画像に写っている物体の位置の変化が小さい映像は圧縮率が高くなり、物体の位置の変化が大きい映像は圧縮率が小さくなる。このため、処理サーバ１００２－１に入力される映像のデータ量は、画像内の物体の動きに応じて変動する。

【0190】

図２６は、映像のデータ量が変動した場合のアプリケーションの処理レートと転送データ量との関係の例を示している。この例では、図１２に示した複数の線分１２０１が、矢印２６０１が示すように上方へ移動しており、一点鎖線１２０２が、矢印２６０２が示すように上方へ移動している。この場合、所定値Ｒ以下の処理レートの範囲１６０３において、線分１２０１が示す転送データ量が、一点鎖線１２０２が示す転送データ量よりも多くなる。

【0191】

この状態において、所定値Ｒを閾値として用いてアプリケーションを分類すると、範囲１６０３の要求処理レートを有するアプリケーションが低処理レートアプリケーションに分類される。このため、通信ネットワーク１００４における静止画の転送データのトラフィックが想定以上に増加し、サーバ間の帯域が圧迫される。

【0192】

そこで、各処理サーバ１００２－ｉに入力される転送データのビットレートが帯域上限値に近づいた場合、ビットレート増大の原因となっている低処理レートアプリケーションを、他の処理サーバ１００２－ｉに再配備することが望ましい。

【0193】

図２７は、入力される転送データのビットレートを監視する処理サーバ１００２－ｉ（ｉ＝２～Ｎ）の機能的構成例を示している。図２７の処理サーバ１００２－ｉは、図１０の処理サーバ１００２－ｉに監視部２７０１－ｉを追加した構成を有する。監視部２７０１－ｉは、処理サーバ１００２－ｉに入力される転送データのビットレートを監視し、ビットレートが帯域上限値に近づいた場合、処理サーバ１００２－ｉの状態を制御サーバ１００１に通知する。

【0194】

図２８は、図２７の監視部２７０１－ｉが行う監視処理の例を示すフローチャートである。まず、監視部２７０１－ｉは、処理サーバ１００２－ｉに入力される転送データのビットレートを計算し（ステップ２８０１）、計算されたビットレートを所定値ＢＲと比較する（ステップ２８０２）。所定値ＢＲとしては、処理サーバ１００２－ｉが受信する転送データの帯域上限値よりも小さく、かつ、帯域上限値に近い値が用いられる。

【0195】

ビットレートが所定値ＢＲ以下である場合（ステップ２８０２，ＮＯ）、監視部２７０１－ｉは、ステップ２８０１以降の処理を繰り返す。

【0196】

ビットレートが所定値ＢＲよりも大きい場合（ステップ２８０２，ＹＥＳ）、監視部２７０１－ｉは、ビットレート増大の原因となる低処理レートアプリケーションを特定する（ステップ２８０３）。例えば、処理サーバ１００２－ｉに配備されている低処理レートアプリケーションのうち、要求処理レートが最も大きい低処理レートアプリケーションが、原因となる低処理レートアプリケーションとして特定される。

【0197】

次に、監視部２７０１－ｉは、ビットレートが帯域上限値に近づいていることを示す帯域情報を、制御サーバ１００１へ送信する（ステップ２８０４）。帯域情報には、原因となる低処理レートアプリケーションの識別情報が含まれる。そして、監視部２７０１－ｉは、ステップ２８０１以降の処理を繰り返す。

【0198】

図２９は、図１０の制御サーバ１００１が行うアプリケーション再配備処理の例を示すフローチャートである。まず、通信部１１０３は、処理サーバ１００２－ｉから帯域情報を受信する（ステップ２９０１）。

【0199】

次に、配備制御部１１０１は、帯域情報が示す低処理レートアプリケーションと同じ映像を処理している高処理レートアプリケーションが配備されている、他の処理サーバ１００２－ｉを選択する（ステップ２９０２）。

【0200】

次に、配備制御部１１０１は、選択された処理サーバ１００２－ｉのうち、空きリソースを有する処理サーバ１００２－ｉを選択する（ステップ２９０３）。そして、配備制御部１１０１は、選択された処理サーバの中に、低負荷処理サーバが存在するか否かをチェックする（ステップ２９０４）。低負荷処理サーバは、帯域情報が示す低処理レートアプリケーションの要求処理リソースの制約条件を満たす処理サーバ１００２－ｉである。

【0201】

低負荷処理サーバが存在する場合（ステップ２９０４，ＹＥＳ）、配備制御部１１０１は、低負荷処理サーバのうち、転送遅延が最も小さい処理サーバ１００２－ｉを、配備先処理サーバに決定する（ステップ２９０５）。

【0202】

低負荷処理サーバが存在しない場合（ステップ２９０４，ＮＯ）、配備制御部１１０１は、ステップ２９０６の処理を行う。ステップ２９０６において、配備制御部１１０１は、空きリソースを有する処理サーバ１００２－ｉのうち、転送遅延が最も小さい処理サーバ１００２－ｉを、配備先処理サーバに決定する。

【0203】

次に、通信部１１０３は、帯域情報が示す低処理レートアプリケーションを、高処理レートアプリケーションとして配備先処理サーバへ送信する（ステップ２９０７）。そして、配備先処理サーバは、受信したアプリケーションをインストールする。

【0204】

次に、制御サーバ１００１は、ステップ２９０８～ステップ２９１１の処理を行う。ステップ２９０８～ステップ２９１１の処理は、図１４Ｂのステップ１４１８～ステップ１４２０及びステップ１４２３の処理と同様である。

【0205】

図２９のアプリケーション再配備処理によれば、いずれかの処理サーバに入力される転送データのビットレートが増大した場合、アプリケーションを他の処理サーバに再配備して、静止画の転送データのトラフィックを低減することができる。このとき、既に動画の転送データが入力されている他の処理サーバの空きリソースが活用されるため、他のアプリケーションの処理及びデータ転送に影響を与えずに、各アプリケーションの実行を継続することができる。

【0206】

図８の画像処理制御装置８０１の構成は一例に過ぎず、画像処理制御装置８０１の用途又は条件に応じて一部の構成要素を省略又は変更してもよい。

【0207】

図１、図４、及び図１０の画像処理システムの構成は一例に過ぎず、画像処理システムの用途又は条件に応じて一部の構成要素を省略又は変更してもよい。図１１の制御サーバ１００１の構成は一例に過ぎず、画像処理システムの用途又は条件に応じて一部の構成要素を省略又は変更してもよい。図２７の処理サーバ１００２－ｉの構成は一例に過ぎず、画像処理システムの用途又は条件に応じて一部の構成要素を省略又は変更してもよい。

【0208】

図９、図１３、図１４Ａ、図１４Ｂ、図２３、図２４、図２８、及び図２９のフローチャートは一例に過ぎず、画像処理制御装置８０１又は画像処理システムの構成又は条件に応じて、一部の処理を省略又は変更してもよい。

【0209】

図２に示したデータ転送時間Ｔ２１、処理時間Ｔ２２、及びデータ転送時間Ｔ２３は一例に過ぎず、データ転送時間及び処理時間は、入力される映像及びアプリケーションに応じて変化する。図３に示した処理リソースの使用状況は一例に過ぎず、処理リソースの使用状況は、入力される映像及びアプリケーションに応じて変化する。

【0210】

図５、図１５～図１７、及び図２２に示したアプリケーションは一例に過ぎず、配備されるアプリケーションは、画像処理システムの用途又は条件に応じて変化する。図６に示した動画及び静止画は一例に過ぎず、動画及び静止画は、入力される映像に応じて変化する。図７に示した画像処理の開始時刻は一例に過ぎず、画像処理の開始時刻は、入力される映像に応じて変化する。

【0211】

図１２及び図２６に示した転送データ量は一例に過ぎず、転送データ量は、入力される映像に応じて変化する。図１８に示した制約条件は一例に過ぎず、制約条件は、アプリケーションに応じて変化する。

【0212】

図１９に示したリソース総量及び空きリソースは一例に過ぎず、リソース総量及び空きリソースは、処理サーバに応じて変化する。図２０及び図２５に示した画像レートは一例に過ぎず、転送データの画像レートは、配備されているアプリケーションに応じて変化する。図２１に示したサーバ間の帯域は一例に過ぎず、サーバ間の帯域は、通信ネットワークに応じて変化する。

【0213】

図３０は、図８の画像処理制御装置８０１、図１０の制御サーバ１００１、図１０及び図２７の処理サーバ１００２－ｉとして用いられる情報処理装置のハードウェア構成例を示している。図３０の情報処理装置は、ＣＰＵ（Central Processing Unit）３００１、メモリ３００２、入力装置３００３、出力装置３００４、補助記憶装置３００５、媒体駆動装置３００６、及びネットワーク接続装置３００７を含む。これらの構成要素はハードウェアであり、バス３００８により互いに接続されている。

【0214】

メモリ３００２は、例えば、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、フラッシュメモリ等の半導体メモリであり、処理に用いられるプログラム及びデータを格納する。メモリ３００２は、図１１の記憶部１１０４として用いることができる。

【0215】

ＣＰＵ３００１（プロセッサ）は、例えば、メモリ３００２を利用してプログラムを実行することにより、図８の決定部８１１及び選択部８１２として動作する。ＣＰＵ３００１は、プログラムを実行することにより、図１１の配備制御部１１０１及び振分制御部１１０２としても動作する。

【0216】

ＣＰＵ３００１は、プログラムを実行することにより、図１０の受信部１０１１－ｉ、抽出部１０１２－ｉ、振分部１０１３－ｉ、及び実行部１０１４－ｉとしても動作する。ＣＰＵ３００１は、プログラムを実行することにより、図２７の監視部２７０１－ｉとしても動作する。

【0217】

入力装置３００３は、例えば、キーボード、ポインティングデバイス等であり、オペレータ又はユーザからの指示又は情報の入力に用いられる。出力装置３００４は、例えば、表示装置、プリンタ、スピーカ等であり、オペレータ又はユーザへの問い合わせ又は処理結果の出力に用いられる。処理結果は、アプリケーションの処理結果であってもよい。

【0218】

補助記憶装置３００５は、例えば、磁気ディスク装置、光ディスク装置、光磁気ディスク装置、テープ装置等である。補助記憶装置３００５は、フラッシュメモリ又はハードディスクドライブであってもよい。情報処理装置は、補助記憶装置３００５にプログラム及びデータを格納しておき、それらをメモリ３００２にロードして使用することができる。補助記憶装置３００５は、図１１の記憶部１１０４として用いることができる。

【0219】

媒体駆動装置３００６は、可搬型記録媒体３００９を駆動し、その記録内容にアクセスする。可搬型記録媒体３００９は、メモリデバイス、フレキシブルディスク、光ディスク、光磁気ディスク等である。可搬型記録媒体３００９は、ＣＤ－ＲＯＭ（Compact Disk Read Only Memory）、ＤＶＤ（Digital Versatile Disk）、ＵＳＢ（Universal Serial Bus）メモリ等であってもよい。オペレータ又はユーザは、この可搬型記録媒体３００９にプログラム及びデータを格納しておき、それらをメモリ３００２にロードして使用することができる。

【0220】

このように、処理に用いられるプログラム及びデータを格納するコンピュータ読み取り可能な記録媒体は、メモリ３００２、補助記憶装置３００５、又は可搬型記録媒体３００９のような、物理的な（非一時的な）記録媒体である。

【0221】

ネットワーク接続装置３００７は、通信ネットワーク１００４に接続され、通信に伴うデータ変換を行う通信インタフェース回路である。情報処理装置は、プログラム及びデータを外部の装置からネットワーク接続装置３００７を介して受信し、それらをメモリ３００２にロードして使用することができる。ネットワーク接続装置３００７は、図１１の通信部１１０３として用いることができる。

【0222】

なお、情報処理装置が図３０のすべての構成要素を含む必要はなく、用途又は条件に応じて一部の構成要素を省略することも可能である。例えば、ユーザ又はオペレータとのインタフェースが不要である場合は、入力装置３００３及び出力装置３００４を省略してもよい。情報処理装置が可搬型記録媒体３００９を利用しない場合は、媒体駆動装置３００６を省略してもよい。

【0223】

図３０の情報処理装置は、図１０のＤＢサーバ１００３－ｊとして用いることもできる。

【0224】

開示の実施形態とその利点について詳しく説明したが、当業者は、特許請求の範囲に明確に記載した本発明の範囲から逸脱することなく、様々な変更、追加、省略をすることができるであろう。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14A】

【図14B】

【図15】

【図16】

【図17】

【図18】

【図19】

【図20】

【図21】

【図22】

【図23】

【図24】

【図25】

【図26】

【図27】

【図28】

【図29】

【図30】