特許 7400991 サーバ、制御方法、および制御プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-12-11

(45)【発行日】2023-12-19

(54)【発明の名称】サーバ、制御方法、および制御プログラム

(51)【国際特許分類】

   H04N 21/234 20110101AFI20231212BHJP

【ＦＩ】

H04N21/234

【請求項の数】 10

(21)【出願番号】P 2022558736

(86)(22)【出願日】2020-10-30

(86)【国際出願番号】 JP2020040766

(87)【国際公開番号】W WO2022091326

(87)【国際公開日】2022-05-05

【審査請求日】2022-12-21

(73)【特許権者】

【識別番号】000005223

【氏名又は名称】富士通株式会社

(74)【代理人】

【識別番号】100121083

【弁理士】

【氏名又は名称】青木 宏義

(74)【代理人】

【識別番号】100138391

【弁理士】

【氏名又は名称】天田 昌行

(74)【代理人】

【識別番号】100074099

【弁理士】

【氏名又は名称】大菅 義之

(72)【発明者】

【氏名】中尾 鷹詔

(72)【発明者】

【氏名】久保田 智規

(72)【発明者】

【氏名】平▲柳▼ 幸彦

【審査官】大西 宏

(56)【参考文献】

【文献】特開２０１０－１７１６０９（ＪＰ，Ａ）

【文献】特開２０１３－２３９９９５（ＪＰ，Ａ）

【文献】特開２０１７－２０８７０７（ＪＰ，Ａ）

【文献】特開２０２０－１２０１８８（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ２１／００ －２１／８５８

(57)【特許請求の範囲】

【請求項1】

情報処理装置によって圧縮された動画のフレーム画像を受信する受信部と、
前記受信部で受信された前記フレーム画像に対する人工知能による解析結果の確からしさを表す精度情報に基づいて解析精度の劣化の予兆を検出する検出部と、
前記情報処理装置による前記動画の圧縮における圧縮率を上界と下界との間で制御する指示情報を前記情報処理装置に宛てて送信する送信部と、
前記検出部による前記解析精度の劣化の予兆の検出に基づく前記解析精度の安定性に応じて前記上界および前記下界を変更する変更部と、
を含む、サーバ。

【請求項2】

前記変更部は、前記情報処理装置による前記動画の圧縮における前記圧縮率を前記指示情報の送信により前記下界に制御した状態で前記検出部が前記解析精度の劣化の予兆を検出した場合、前記下界を下げるように変更する、請求項１に記載のサーバ。

【請求項3】

前記変更部は、前記下界の変更後に所定期間が経過していれば、前記下界を上げるように変更する、請求項１または２に記載のサーバ。

【請求項4】

前記変更部は、前記情報処理装置による前記動画の圧縮における前記圧縮率を前記指示情報の送信により前記上界に制御した状態で前記解析精度の劣化の予兆が所定条件を満たして検出されない場合、前記上界を上げるように変更する、請求項１から３のいずれか１項に記載のサーバ。

【請求項5】

前記変更部は、過去の前記指示情報の送信で、前記圧縮率の前記上界への制御が所定の変更条件を満たして少ない場合、前記上界を下げるように変更する、請求項１から４のいずれか１項に記載のサーバ。

【請求項6】

前記検出部は、前記動画の第１の期間のフレーム画像から得られた前記人工知能による解析結果の確からしさを表す第１の精度情報と、前記動画において前記第１の期間よりも短い第２の期間のフレーム画像から得られた前記人工知能による解析結果の確からしさを表す第２の精度情報とに基づいて、前記第２の期間のフレーム画像を用いた前記人工知能による解析に前記解析精度の劣化の予兆を検出したか否かを判定する、請求項１に記載のサーバ。

【請求項7】

前記変更部は、過去の前記指示情報の送信で、前記上界および前記下界の値が所定の収束条件を満たして収束している場合に、前記上界および前記下界の変更幅および変更頻度を小さくする、請求項１から請求項６のいずれか一項に記載のサーバ。

【請求項8】

前記変更部は、過去の前記指示情報の送信で、前記上界および前記下界の値が所定の変動条件を満たして変動している場合に、前記上界および前記下界の変更幅および変更頻度を大きくする、請求項１から請求項７のいずれか一項に記載のサーバ。

【請求項9】

情報処理装置によって圧縮された動画のフレーム画像を受信し、
受信した前記フレーム画像に対する人工知能による解析結果の確からしさを表す精度情報に基づいて解析精度の劣化の予兆を検出し、
前記情報処理装置による前記動画の圧縮における圧縮率を上界と下界との間で制御する指示情報を前記情報処理装置に宛てて送信し、
前記解析精度の劣化の予兆の検出に基づく前記解析精度の安定性に応じて前記上界および前記下界を変更する、
ことを含む、コンピュータが実行する制御方法。

【請求項10】

情報処理装置によって圧縮された動画のフレーム画像を受信し、
受信した前記フレーム画像に対する人工知能による解析結果の確からしさを表す精度情報に基づいて解析精度の劣化の予兆を検出し、
前記情報処理装置による前記動画の圧縮における圧縮率を上界と下界との間で制御する指示情報を前記情報処理装置に宛てて送信し、
前記解析精度の劣化の予兆の検出に基づく前記解析精度の安定性に応じて前記上界および前記下界を変更する、
処理をコンピュータに実行させる制御プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、サーバ、制御方法、および制御プログラムに関する。

【背景技術】

【0002】

近年、様々なビジネスの領域において動画データを人工知能（ＡＩ：Artificial Intelligence）で解析する需要が急激に増加している。また、ＡＩ解析のために設置される撮影装置の台数も増加傾向にあり、解析対象となる動画データが増えている。

【0003】

動画データのＡＩによる解析には、例えば、ディープラーニングが利用されている。ディープラーニングは、解析のための処理量が膨大になるため、クラウド上のサーバで実行されることがしばしばある。この場合、撮影装置で撮影された動画データは、例えば、ローカルに配置された情報処理装置からクラウド上に配置されたサーバへと送信される。この場合に、動画データのサイズが大きいため、ネットワーク帯域が逼迫しないように、動画データを圧縮してからサーバへと伝送することも行われている。

【0004】

これに関し、動画の符号化に関連する技術が知られている（例えば、特許文献１から特許文献３）。

【先行技術文献】

【特許文献】

【0005】

【文献】米国特許出願公開第２０１９／０３７１００６号明細書

【文献】米国特許出願公開第２０１９／０３３５１９２号明細書

【文献】米国特許出願公開第２０２０／０２１９２９０号明細書

【発明の概要】

【発明が解決しようとする課題】

【0006】

しかしながら、動画データをサーバに送信する際に、動画データを圧縮しすぎてしまい、画質の劣化によりサーバでのＡＩによる解析精度が劣化してしまうことがある。そのため、例えば、動画データを圧縮してサーバに送信する際に、サーバで実行されるＡＩ解析の解析精度の劣化を抑えつつ、動画データをできるだけ圧縮することのできる技術の提供が望まれている。

【0007】

１つの側面では、本発明は、ＡＩ解析の解析精度の劣化を抑えつつ、動画データの圧縮率を高めることを目的とする。

【課題を解決するための手段】

【0008】

本発明の一つの態様のサーバは、情報処理装置によって圧縮された動画のフレーム画像を受信する受信部と、受信部で受信されたフレーム画像に対する人工知能による解析結果の確からしさを表す精度情報に基づいて解析精度の劣化の予兆を検出する検出部と、情報処理装置による動画の圧縮における圧縮率を上界と下界との間で制御する指示情報を情報処理装置に宛てて送信する送信部と、検出部による解析精度の劣化の予兆の検出に基づく解析精度の安定性に応じて上界および下界を変更する変更部と、を含む。

【発明の効果】

【0009】

ＡＩ解析の解析精度の劣化を抑えつつ、動画データの圧縮率を高めることができる。

【図面の簡単な説明】

【0010】

【図1】実施形態に係るシステムを例示する図である。

【図2】実施形態に係るサーバの機能ブロック構成を例示する図である。

【図3】実施形態に係る情報処理装置の機能ブロック構成を例示する図である。

【図4】例示的な精度情報と量子化値との関係を示す図である。

【図5】実施形態に係る量子化値の制御を例示する図である。

【図6】実施形態に係る指示情報の送信処理の動作フローを例示する図である。

【図7】実施形態に係る量子化値情報を例示する図である。

【図8】実施形態に係る指示情報の決定処理の動作フローを例示する図である。

【図9】実施形態に係る圧縮した動画データの送信処理の動作フローを例示する図である。

【図10】例示的な重要度マップの生成を示す図である。

【図11】実施形態に係る重要度マップを用いた量子化値の設定の例を説明する図である。

【図12】第２の実施形態に係る複数の解析対象が写る動画のフレーム画像に対する量子化値の設定を例示する図である。

【図13】第２の実施形態に係る指示情報の送信処理の動作フローを例示する図である。

【図14】実施形態に係るサーバおよび情報処理装置を実現するためのコンピュータのハードウェア構成を例示する図である。

【発明を実施するための形態】

【0011】

以下、図面を参照しながら、本発明のいくつかの実施形態について詳細に説明する。なお、複数の図面において対応する要素には同一の符号を付す。

【0012】

上述のように、撮影装置で撮影された動画データをサーバへと送信する際に、動画データを圧縮してからサーバへと伝送することが行われている。この場合に、動画データの画質の劣化させすぎてしまい、サーバでのＡＩによる解析精度が劣化してしまうことがある。

【0013】

そのため、ＡＩ解析の解析精度の劣化を抑えつつ、動画データの圧縮率を高めることのできる技術の提供が望まれている。

【0014】

ここで、動画データの圧縮率を決定する一つの手法として、サーバにおけるＡＩ解析の解析結果を利用することが考えられる。例えば、画像を解析するＡＩの多くは、解析において解析結果とともに結果の信頼性を示す精度情報を出力する。例えば、ディープラーニングで得られる学習済みモデルは、対象の検出において、検出結果の確からしさを示す信頼性のスコアを出力する。例えば、このような信頼性のスコアが、解析の確からしさを示す精度情報として用いられてよい。そして、例えば、精度情報に基づいてＡＩ解析の解析精度の劣化を検出し、解析精度が劣化した場合に、圧縮率を下げることが考えられる。

【0015】

しかしながら、この場合、ＡＩ解析の解析精度が劣化してから圧縮率を下げることになる。その結果、例えば、解析精度が劣化している時間帯が長くなってしまうことがある。そのため、動画データのサーバへの送信の際に、サーバでのＡＩ解析の精度劣化を抑えつつ、動画データの圧縮率を高めることのできる技術の提供が望まれている。以下、実施形態を更に詳細に説明する。

【0016】

図１は、実施形態に係るシステム１００を例示する図である。システム１００は、例えば、サーバ１０１、情報処理装置１０２、および撮影装置１０３を含む。

【0017】

サーバ１０１は、例えば、サーバコンピュータなどの動画データにＡＩ解析を実行するコンピュータであってよい。サーバ１０１は、例えば、クラウド上で動作するコンピュータである。

【0018】

情報処理装置１０２は、例えば、パーソナルコンピュータ（ＰＣ）、モバイルコンピュータ、タブレット端末、スマートフォンなどの動画データの処理機能を備えるコンピュータであってよい。情報処理装置１０２は、例えば、エッジコンピューティングにおけるエッジとして動作し、撮影装置１０３で撮影された動画データに圧縮処理などを施してサーバ１０１に送信してよい。

【0019】

撮影装置１０３は、例えば、カメラなどの動画を撮影する装置であり、解析対象の人物などが写る動画を撮影する。近年、ＡＩ解析のために設置される撮影装置１０３の台数は増加傾向にあり、例えば、図１に示すように、複数台の撮影装置１０３が設置されていてもよい。なお、実施形態に係るシステム１００は複数台の撮影装置１０３に限定されるものではなく、実施形態は、例えば、１台の撮影装置１０３で撮影された動画データを情報処理装置１０２からサーバ１０１に送信するために利用されてもよい。また、一例では、情報処理装置１０２と撮影装置１０３とは、一体の装置であってもよい。

【0020】

図２は、実施形態に係るサーバ１０１の機能ブロック構成を例示する図である。サーバ１０１は、例えば、制御部２０１、記憶部２０２、および通信部２０３を含む。制御部２０１は、例えば、受信部２１１、検出部２１２、送信部２１３、および変更部２１４などを含み、またその他の機能部を含んでもよい。サーバ１０１の記憶部２０２は、例えば、後述する量子化値情報７００および情報処理装置１０２から受信した圧縮後の動画データなどの情報を記憶している。これらの各部の詳細および記憶部２０２に格納されている情報の詳細については後述する。

【0021】

図３は、実施形態に係る情報処理装置１０２の機能ブロック構成を例示する図である。情報処理装置１０２は、例えば、制御部３０１、記憶部３０２、および通信部３０３を含む。制御部３０１は、例えば、情報処理装置１０２の各部を制御する。情報処理装置１０２の記憶部３０２は、例えば、撮影装置１０３から取得した動画データ、および後述するようにサーバ１０１から通知される指示情報などを記憶していてよい。これらの各部の詳細および記憶部３０２に格納されている情報の詳細については後述する。

【0022】

続いて、ＡＩ解析における解析精度の劣化の予兆を検出する処理について述べる。

【0023】

＜解析精度の劣化の予兆検出＞
図４は、例示的な精度情報と量子化値との関係を示す図である。図４の例では、縦軸が精度情報であり、横軸が量子化値である。精度情報は、例えば、ＡＩ解析の解析精度を表し、一例では、ＡＩ解析の際に生成される解析結果の確からしさを表す信頼性のスコアであってよい。

【0024】

量子化値は、例えば、動画のフレーム画像の圧縮率を表す値である。量子化値は、例えば、Ｈ．２６４およびＨ．２６５などの動画符号化方式で利用される量子化パラメータ（ＱＰ：Quantization Parameter）であってよい。この場合、量子化値は、例えば、数値が小さいほど圧縮率が低く画質が鮮明になり、数値が高いほど圧縮率が高く画質が荒くなる。

【0025】

また、図４には、動画像のフレーム画像と対応する点４０１が示されている。点４０１は、フレーム画像の圧縮に用いた量子化値と、その量子化値で圧縮されたフレーム画像を用いたＡＩ解析の結果の精度情報との組を表している。図４にはさまざまな量子化値と対応する複数の点４０１が示されている。点４０１の精度情報は、同じ量子化値でもシーンによってさまざまな値を取っており、ばらつきがある。そのため、精度情報に対して閾値を設定しても、閾値を用いて一律に劣化の予兆を検出することは難しい。

【0026】

ここで、図４には複数の点４０１に対して生成した近似曲線４０２が示されている。そして、本出願の発明者らは、近似曲線４０２で示されるように、量子化値と精度情報との関係性において、精度情報は特定の量子化値を境に急激に低下する傾向にあり、境界の付近では量子化値に対する精度情報のばらつきが大きくなることに気が付いた。

【0027】

例えば、図４に示すように、領域４１０では量子化値が精度情報の低下が起きないほど十分に小さく、精度情報のばらつきは小さく抑えられている。また、領域４３０では量子化値が大きくなりすぎて精度情報が低下しきっており、全体的に精度情報が低下しているため精度情報のばらつきは小さい。しかしながら、例えば、領域４２０に示す精度情報の低下が起こり始める領域では、解析精度の劣化はまだ小さく抑えられているが、量子化値に対する精度情報のばらつきは大きくなる。

【0028】

そこで、一実施形態ではサーバ１０１の制御部２０１は、量子化値に対する精度情報のばらつきが大きくなった場合に、解析精度の劣化の予兆ととらえて量子化値を制御する。図４に示すように、領域４２０の量子化値では精度情報は落ち切ってはおらず、解析精度の劣化の予兆を検出した時点で量子化値を下げて圧縮率を下げることで、解析精度の劣化を抑えることが可能である。また、領域４３０のように精度情報が低下しきってから量子化値を変更する場合と比較して、解析精度の劣化に早く対処することができるため、動画データを全体的に高い精度で解析することができる。

【0029】

ここで、例えば、図４の領域４２０に示すような一時的なばらつきの増大は、長期のフレーム画像から得られた精度情報の集合よりも、より短期のフレーム画像から得られた精度情報の集合の方に大きな影響を与える。

【0030】

そのため、制御部２０１は、動画の長期のフレーム画像から得られた精度情報よりも短期のフレーム画像から得られた精度情報のばらつきが大きい場合に、その短期のフレーム画像を用いたＡＩ解析で精度劣化の予兆を検出したと判定してよい。

【0031】

例えば、制御部２０１は、長期のフレーム画像から得られた精度情報の分散と短期のフレーム画像から得られた精度情報の分散とを求める。そして、制御部２０１は、短期の精度情報の分散の方が長期の精度情報の分散よりも大きい場合に、短期のフレーム画像において精度劣化の予兆を検出したと判定してよい。なお、例えば、長期のフレーム画像は、処理対象のフレーム画像から過去の５０フレーム～１０００フレームのフレーム画像であってよく、一例では処理対象のフレーム画像から過去の１００フレームであってよい。また、例えば、短期のフレーム画像は、処理対象のフレーム画像から過去の１０フレーム～５０フレームのフレーム画像あってよく、一例では処理対象のフレーム画像から過去の２０フレームのフレーム画像であってよい。なお、長期および短期の期間は、これらに限定されるものではなく、例えば、ＡＩ解析の対象の動きの早さ、および撮影される動画のフレームレートなどに応じて設定されてよい。

【0032】

また、別の実施形態では制御部２０１は、動画の長期のフレーム画像から得られた精度情報を代表する第１の指標よりも短期のフレーム画像から得られた精度情報を代表する第２の指標が表す精度が劣化しているか否かを判定する。そして、制御部２０１は、第１の指標よりも第２の指標が表す精度が劣化している場合に、短期のフレーム画像を用いたＡＩ解析で精度劣化の予兆を検出したと判定してよい。一例では、制御部２０１は、長期のフレーム画像の精度情報と短期のフレーム画像の精度情報との移動平均を求めて、２つの値の差が開いたら劣化の予兆を検出したと判定してもよい。

【0033】

例えば、以上のようにＡＩ解析の精度劣化の予兆の検出を実行し、予兆を検出した場合に、圧縮率を低下させるなどの制御を行うことで、ＡＩ解析の精度劣化を抑えつつ、動画データの圧縮率を高めることができる。なお、長期のフレーム画像は、例えば、第１の期間のフレーム画像と呼ばれてもよい。短期のフレーム画像は、例えば、第２の期間のフレーム画像と呼ばれてもよい。第２の期間は、第１の期間よりも短い期間であってよい。

【0034】

続いて、実施形態に係る圧縮率の制御について説明する。

【0035】

＜圧縮率の制御＞
以下では、量子化値を用いて圧縮率を制御する例を述べる。例えば、制御部２０１は、量子化値に上界と下界とを設定し、その上界と下界との間で変動するように圧縮に用いる量子化値を制御する。制御部２０１は、例えば、以下のように量子化値を制御してよい。

【0036】

（量子化値の制御）
図５は、実施形態に係る量子化値の制御を例示する図である。図５に示すように、量子化値には上界と下界が設定されている。そして、制御部２０１は、例えば、十分な精度でＡＩ解析が実行されている場合、量子化値を徐々に上昇させてよい。また、制御部２０１は、解析精度の劣化の予兆が検出された場合、一気に下界まで下げるように量子化値を設定してよい。それにより、精度劣化の時間を最小限に収めることができる。また、下界を、解析精度の劣化の予兆が検出されないギリギリの値に設定することで、量子化値を上昇させた後で解析精度の劣化の予兆が検出され、量子化値を下界に下げる場合にも、高い圧縮率を維持することができる。

【0037】

また、図５に示すように、制御部２０１は、例えば、量子化値を徐々に上昇させてゆき上界に到達すると、量子化値を上界で維持する。例えば、上界を設けずに量子化値を上げ続けた場合、最終的には解析精度の劣化の予兆が検出され、量子化値を下界に戻すことになる。そして、予兆の時点では精度情報が下がりきってはいないとしても、解析精度の劣化の予兆が頻繁に検出されてしまうと、解析精度の劣化は生じてしまう。また、この場合、量子化値も頻繁に下界に戻されるため圧縮率の低下を導く。そのため、量子化値に上界を設けて、解析精度の劣化の予兆が低頻度で検出されるギリギリの値に設定することで、高圧縮の状態を維持しつつ精度劣化を抑えることができる。

【0038】

続いて、実施形態に係る上界および下界の変更について説明する。以下で述べる実施形態では制御部２０１は、解析精度の劣化の予兆の検出に基づく解析精度の安定性に応じて上界および下界を変更する。

【0039】

（上界および下界の変更）
例えば、量子化値が上界と等しい状態で長期間十分な解析精度を維持できた場合、更に画質を落としても十分な解析精度を得られる可能性がある。そのため、制御部２０１は、上界を大きくしてよい。

【0040】

一方、例えば、量子化値の上界への制御が少ない場合、量子化値を徐々に上昇させた際に上界に到達する前、または、到達してすぐにＡＩ解析の精度劣化の予兆が検出されていることを示している。この場合、上界が高すぎてＡＩ解析の精度劣化の予兆が検出されていると考えられるため、制御部２０１は、上界を下げてよい。

【0041】

また、例えば、量子化値が下界と等しい状態でＡＩ解析の精度劣化の予兆が検出されたとする。この場合、設定した下界に量子化値を設定して圧縮を行ってもＡＩ解析精度が劣化してしまう恐れがあるため、制御部２０１は、ＡＩ解析の精度劣化が起こらないように下界を小さくしてよい。

【0042】

一方、例えば、量子化値が下界以上の値において所定期間にわたってＡＩ解析の精度劣化の予兆が検出されず、十分な解析精度が出ているとする。この場合、下界を上げることができる可能性があるため、制御部２０１は、下界を大きくしてよい。

【0043】

そして、例えば、以上のように上界および下界の値を変動させることで、ＡＩ解析の解析精度の劣化を抑えつつ、安定して高い圧縮率を維持して動画データを圧縮することができる。

【0044】

また、更に、制御部２０１は、例えば、上界および下界の値が所定の収束条件を満たす場合に上界および下界が収束したと判定して、上界と下界の変更幅や変更頻度を小さくするように制御してよい。例えば、上述の制御に従って上界および下界が同じ値を前後するようになった場合に、制御部２０１は、上界および下界が収束したと判定してよい。

【0045】

一方、制御部２０１は、例えば、上界および下界の値が所定の変動条件を満たす場合に上界および下界が収束しておらず変動している判定して、上界と下界の変更幅や変更頻度を大きくするように制御してよい。例えば、上述の制御に従って上界と下界が同じ方向に所定回数以上で更新され続けた場合に、制御部２０１は、上界および下界が変動していると判定してよい。

【0046】

例えば、以上のように上界と下界の変更幅や変更頻度を制御することで、上界と下界の制御のための処理量を削減したり、上界と下界を早く適切な値に収束させたりすることができる。

【0047】

以上に述べたように、実施形態によれば上界および下界を設定して、動画のシーンや検出対象の変化に応じて量子化値の取り得る範囲を絞り込むことで、ＡＩ解析の解析精度の劣化を抑えつつ、高い圧縮率を維持して動画データを圧縮することができる。

【0048】

続いて、実施形態に係る指示情報の送信処理の例を説明する。サーバ１０１の制御部２０１は、例えば、以下の指示情報の送信処理を実行して、情報処理装置１０２に指示情報を送信することで、情報処理装置１０２から受信する動画のフレーム画像の圧縮率を制御してよい。

【0049】

図６は、実施形態に係る指示情報の送信処理の動作フローを例示する図である。例えば、サーバ１０１の制御部２０１は、情報処理装置１０２から受信した動画データに対するＡＩ解析の実行を開始すると、図６の動作フローを開始してよい。

【0050】

ステップ６０１（以降、ステップを“Ｓ”と記載し、例えば、Ｓ６０１と表記する）において制御部２０１は、上界、下界、および量子化値を設定する。例えば、制御部２０１は、量子化値に、情報処理装置１０２から受信した動画データのフレーム画像に現在適用されている量子化値を設定してよい。また、制御部２０１は、例えば、上界および下界のそれぞれに、予め設定されている所定値を設定してよい。なお、一例では、上界には、下界よりも大きな値が設定されてよい。また、量子化値は、上界および下界の間の値に設定されていてよい。

【0051】

Ｓ６０２において制御部２０１は、情報処理装置１０２から動画のフレーム画像を受信し、受信したフレーム画像に対してＡＩ解析を実行して、解析結果の確からしさを表す精度情報を取得する。

【0052】

Ｓ６０３において制御部２０１は、指示情報の決定処理を実行する。一例では、制御部２０１は、取得した精度情報に基づいて情報処理装置１０２での動画データの圧縮に用いる量子化値を決定してよい。指示情報の決定処理の詳細については、図８を参照して後述する。

【0053】

Ｓ６０４において制御部２０１は、指示情報を情報処理装置１０２に宛てて送信する。指示情報は、例えば、Ｓ６０３の処理で決定した量子化値を含んでいてよい。また、制御部２０１は、情報処理装置１０２に送信する指示情報に含めた量子化値を、図６の動作フローで処理対象としたフレーム画像を識別するフレームＩＤ（Identifier）と対応づけて量子化値情報７００に登録してよい。

【0054】

図７は、実施形態に係る量子化値情報７００を例示する図である。量子化値情報７００には、例えば、Ｓ６０３の指示情報の決定処理で決定される量子化値の履歴が登録されていてよい。図７の例では、フレームＩＤと、量子化値とを対応づけたレコードが登録されている。レコードのフレームＩＤは、動画内のフレーム画像を識別するための識別情報である。また、量子化値情報７００の量子化値は、例えば、レコードのフレームＩＤで識別されるフレーム画像の精度情報を用いて指示情報の決定処理で決定された量子化値が登録されてよい。制御部２０１は、量子化値情報７００を参照することで、過去に設定された量子化値を取得することができる。

【0055】

続いて、Ｓ６０５において制御部２０１は、動画がまだ続くか否かを判定してよい。例えば、情報処理装置１０２からまだ動画の後続のフレーム画像が受信されている場合、制御部２０１は、Ｓ６０５においてＹＥＳと判定しよく、フローはＳ６０２に戻り、制御部２０１は、次のフレーム画像に対して処理を繰り返す。一方、例えば、情報処理装置１０２からの動画データの受信が完了している場合、制御部２０１は、Ｓ６０５においてＮＯと判定しよく、本動作フローは終了する。

【0056】

図６の動作フローによれば制御部２０１は、情報処理装置１０２から受信した動画のフレーム画像に対するＡＩ解析の精度情報に基づいて指示情報を決定し、情報処理装置１０２に宛てて送信することができる。

【0057】

続いて、実施形態に係る指示情報の決定処理について例を説明する。

【0058】

図８は、実施形態に係る指示情報の決定処理の動作フローを例示する図である。サーバ１０１の制御部２０１は、例えば、図６のＳ６０３に進むと、図８の動作フローを開始してよい。

【0059】

Ｓ８０１において制御部２０１は、ＡＩ解析の精度劣化の予兆を検出したか否かを判定する。制御部２０１は、例えば、図４を参照して例示したように、長期のフレーム画像から得られた精度情報と短期のフレーム画像から得られた精度情報のばらつきに基づいて、精度劣化の予兆を検出してよい。そして、ＡＩ解析の精度劣化の予兆を検出していない場合（Ｓ８０１がＮＯ）、フローはＳ８０２に進む。

【0060】

Ｓ８０２において制御部２０１は、量子化値が上界か否かを判定する。例えば、情報処理装置１０２から受信した動画データのフレーム画像に現在適用されている量子化値が、上界と一致していない場合（Ｓ８０２がＮＯ）、フローはＳ８０３に進む。

【0061】

Ｓ８０３において制御部２０１は、量子化値の上界への制御が所定の変更条件を満たして少ないか否かを判定する。例えば、制御部２０１は、量子化値情報７００を参照し、処理対象フレームから過去の所定期間において量子化値が上界と一致していたフレームの割合が、所定の割合以下であるか否かを判定する。そして、量子化値が上界と一致していたフレームの割合が所定の割合以下である場合、制御部２０１は、量子化値の上界への制御が少ないと判定してよく、Ｓ８０３でＹＥＳと判定し、フローはＳ８０４に進む。

【0062】

この場合、量子化値を徐々に上昇させた際に上界に到達する前、または、到達してすぐにＡＩ解析の精度劣化の予兆が検出されていることを示しており、上界が高すぎてＡＩ解析の精度劣化の予兆が検出されていることを表している。そのため、Ｓ８０４において制御部２０１は、上界を下げる制御を実行する。例えば、制御部２０１は、上界として設定する量子化値を所定値だけ下げてよい。

【0063】

一方、Ｓ８０３において、例えば、量子化値が上界と一致していたフレームの割合が所定の割合よりも大きい場合、制御部２０１は、上界への制御が少なくはないと判定してよく、Ｓ８０３においてＮＯと判定し、フローはＳ８０７に進む。

【0064】

また、例えば、Ｓ８０２において情報処理装置１０２から受信した動画データのフレーム画像に現在適用されている量子化値が上界と一致している場合（Ｓ８０２がＹＥＳ）、フローはＳ８０５に進む。

【0065】

Ｓ８０５において制御部２０１は、上界と一致している状態で解析精度の劣化の予兆が所定条件を満たして検出されず、上界と一致している状態が長く続いているか否かを判定する。例えば、制御部２０１は、量子化値情報７００を参照し、処理対象フレームから過去の所定期間以上わたって上界と一致している状態が続いていた場合に、上界と一致している状態が長いと判定してよく、Ｓ８０３でＹＥＳと判定し、フローはＳ８０６に進む。

【0066】

この場合、量子化値を徐々に上昇させて行き、量子化値が上界に到達した後もしばらくＡＩ解析の精度劣化の予兆が検出されず、安定してＡＩ解析ができていることを示しており、上界を更にあげることができる可能性があることを表している。そのため、Ｓ８０６において制御部２０１は、上界を上げる制御を実行する。例えば、制御部２０１は、上界として設定する量子化値を所定値だけ上げてよい。

【0067】

一方、Ｓ８０５において、例えば、処理対象フレームから過去において上界と一致している状態が所定期間以上続いていない場合、上界と一致している状態は長くはない判定してよく、Ｓ８０５でＮＯと判定し、フローはＳ８０７に進む。

【0068】

続いて、Ｓ８０７において制御部２０１は、上界に近づけるように量子化値を設定する。例えば、制御部２０１は、量子化値が低くまだ上界に到達していない場合には、量子化値を所定値だけ上げる制御を実行してよい。

【0069】

また、Ｓ８０１においてＡＩ解析の精度劣化の予兆を検出した場合（Ｓ８０１がＹＥＳ）、フローはＳ８０８に進む。

【0070】

Ｓ８０８において制御部２０１は、量子化値が下界か否かを判定する。例えば、情報処理装置１０２から受信した動画データのフレーム画像に現在適用されている量子化値が、下界と一致していない場合（Ｓ８０８がＮＯ）、フローはＳ８０９に進む。

【0071】

Ｓ８０９において制御部２０１は、現在の下界が設定されてから所定期間が経過しているか否かを判定する。そして、現在の下界が設定されてから所定期間が経過している場合（Ｓ８０９がＹＥＳ）、フローはＳ８１０に進む。

【0072】

この場合、現在の下界が設定されてからしばらく、下界においてＡＩ解析の精度劣化の予兆が検出されておらず、設定した下界では安定してＡＩ解析ができていることを示している。そのため、下界を更にあげることができる可能性があり、Ｓ８１０において制御部２０１は、下界を上げる制御を実行する。例えば、制御部２０１は、Ｓ８１０において下界として設定する量子化値を所定値だけ上げてよい。

【0073】

一方、Ｓ８０９において、例えば、現在の下界が設定されてから所定期間が経過していない場合（Ｓ８０９がＮＯ）、フローはＳ８１２に進む。

【0074】

また、Ｓ８０８において、例えば、情報処理装置１０２から受信した動画データのフレーム画像に現在適用されている量子化値が下界と一致している場合（Ｓ８０８がＹＥＳ）、フローはＳ８１１に進む。

【0075】

この場合、下界においてもＡＩ解析の精度劣化の予兆が検出されており、設定した下界でもＡＩ解析の精度劣化が起こり得ることを示している。そのため、Ｓ８１１において制御部２０１は、下界を下げる制御を実行してよい。なお、下界は、ＡＩ解析の精度劣化が生じないように十分に低い値に設定されることが好ましく、Ｓ８１１では下界を大きく下げてよい。即ち、例えば、制御部２０１は、Ｓ８１１では、Ｓ８０４、Ｓ８０６、およびＳ８１０において上界または下界を調整する所定量よりも大きい値で下界を下げてよい。

【0076】

続いて、Ｓ８１２において制御部２０１は、量子化値を下界に設定する。下界の値は、例えば、ＡＩ解析の精度劣化が生じにくいほど十分に低い値に設定されるように制御されている。そのため、ＡＩ解析の精度劣化の予兆が検出された場合に、量子化値を下界に設定することで、後続のフレームでは高い確率で高精度なＡＩ解析を実行できるフレーム画像が情報処理装置１０２から受信されるように制御することができる。

【0077】

続いて、Ｓ８１３において制御部２０１は、上界および下界の値が所定の収束条件を満たして収束しているか否かを判定し、収束している場合に、上界と下界の変更幅や変更頻度を小さくするように制御する。例えば、制御部２０１は、上界が同じ値を前後するようになり、かつ、下界が同じ値を前後するようになった場合に、収束したと判定してよい。一例として制御部２０１は、処理対象フレームから過去の所定期間において、上界および下界が同じ値に所定の回数以上設定されている場合に、上界および下界が収束したと判定してよい。また、別の例では、制御部２０１は、処理対象フレームから過去の所定期間に上界および下界に設定された値の差が所定範囲に収まっている場合に収束したと判定してもよい。そして、制御部２０１は、上界および下界が収束したと判定した場合、上界と下界の変更幅および変更頻度を小さくするように制御してよい。なお、収束の判定と、変更幅および変更頻度の変更は、上界および下界でそれぞれ個別に実行されてもよい。

【0078】

例えば、以上のように上界と下界の変更幅や変更頻度を制御することで、量子化値が好ましい値に維持される安定性を高めることができる。また、上界と下界の更新にかかる処理量を削減することができる。

【0079】

Ｓ８１４において制御部２０１は、例えば、上界および下界の値が収束しておらず、所定の変動条件を満たして変動しているか否かを判定してよい。そして、上界および下界が変動している場合に、制御部２０１は、上界と下界の変更幅および変更頻度を大きくするように制御してよい。例えば、制御部２０１は、上界と下界が同じ方向に所定の回数以上で連続して更新された場合に、変動していると判定してよい。また、別の例では、制御部２０１は、処理対象フレームから過去の所定期間に上界および下界に設定された値の差が所定範囲を超えている場合に変動していると判定してもよい。そして、制御部２０１は、上界および下界が変動していると判定した場合、上界および下界の変更幅および変更頻度を大きくするように制御してよい。なお、変動の判定と、変更幅および変更頻度の変更は、上界および下界でそれぞれ個別に実行されてもよい。

【0080】

例えば、このように上界と下界の変更幅および変更頻度が大きくなるように制御することで、動画においてシーンなどの変化に伴い適切な量子化値が変わった場合にも、素早く量子化値を好ましい値に設定することが可能になる。シーンの変化は、例えば、動画に写っている人の変化、天候の変化、昼間と夜間での明るさの変化などを含んでよい。

【0081】

そして、Ｓ８１４の処理が完了すると、本動作フローは終了し、フローは図６のＳ６０４に進む。

【0082】

以上で述べたように、図８の動作フローによれば、ＡＩ解析の精度劣化の予兆の検出に基づいて、ＡＩ解析の解析精度の劣化を抑えつつ、動画データをできるだけ圧縮するように量子化値を設定することができる。

【0083】

また、図８の動作フローによれば、ＡＩ解析の精度劣化の予兆の検出に基づいて、ＡＩ解析の解析精度の劣化を抑えつつ、動画データができるだけ圧縮される状態が維持されるように、上界および下界の値を設定することができる。

【0084】

例えば、上述の実施形態に係る制御を実行して、上界をＡＩ解析の精度劣化の予兆が低頻度で検出される値に設定することで、高い圧縮率を維持しつつ、ＡＩ解析の精度を安定させることができる。また、例えば、上述の実施形態に係る制御を実行して、下界をＡＩ解析の精度劣化の予兆が検出されない値に設定することで、ＡＩ解析の精度を安定させつつ、シーンなどの変化にもすばやく対処して量子化値を設定することができる。

【0085】

また、図８の動作フローによれば、上界および下界の収束を検出して、上界および下界の変更幅や変更頻度を低下させることで処理量を削減することができる。一方で、図８の動作フローによれば、上界および下界の変動を検出して上界および下界の変更幅や変更頻度を増加させることで、動画においてシーンなどの変化に伴い適切な量子化値が変わった場合にも、量子化値、上界、および下界に素早く好ましい値を設定することができる。

【0086】

なお、例えば、量子化値としてＨ．２６５およびＨ．２６５などの動画符号化方式で利用される量子化パラメータを利用する場合、量子化値には０～５１の範囲の整数が用いられる。しかしながら、サーバ１０１の制御部２０１は、例えば、量子化値を小数点以下を含む連続値として扱い、Ｓ８０７およびＳ８１２の処理では０．１および０．０５などの１未満の単位で量子化値を変更してもよい。この場合、制御部２０１は、Ｓ６０４の処理で量子化値を含む指示情報を送信する際に、小数点以下の四捨五入などにより量子化値を整数化して圧縮率を制御してもよい。

【0087】

続いて、実施形態に係る情報処理装置１０２の制御部３０１が実行する圧縮した動画データの送信処理の例を説明する。

【0088】

図９は、実施形態に係る圧縮した動画データの送信処理の動作フローを例示する図である。例えば、情報処理装置１０２の制御部３０１は、撮影装置１０３で撮影された動画データのサーバ１０１への送信を開始すると、図９の動作フローを開始してよい。

【0089】

Ｓ９０１において情報処理装置１０２の制御部３０１は、動画のフレーム画像の圧縮に用いる量子化値を所定の値に設定する。一例では、所定の値は、サーバ１０１におけるＡＩ解析が成功するように十分に低い値であってよい。

【0090】

Ｓ９０２において制御部３０１は、サーバ１０１から指示情報を受信したか否かを判定する。指示情報を受信していない場合（Ｓ９０２がＮＯ）、フローはＳ９０４に進む。一方、サーバ１０１から指示情報を受信している場合（Ｓ９０２がＹＥＳ）、フローはＳ９０３に進む。

【0091】

Ｓ９０３において制御部３０１は、サーバ１０１からの指示情報に従って量子化値を設定してよい。例えば、指示情報には図６および図８の動作フローで決定された量子化値が含まれていてよく、情報処理装置１０２の制御部３０１は、サーバ１０１から指示情報で通知された量子化値に、動画のフレーム画像の圧縮に用いる量子化値を設定してよい。

【0092】

Ｓ９０４において制御部３０１は、設定された量子化値に従ってフレーム画像を圧縮する。そして、Ｓ９０５において制御部３０１は、圧縮されたフレーム画像をサーバ１０１に宛てて送信する。

【0093】

Ｓ９０６において制御部３０１は、動画がまだ続くか否かを判定する。例えば、撮影装置１０３から動画の後続のフレーム画像が受信される場合、制御部３０１は、Ｓ９０６においてＹＥＳと判定しよく、フローはＳ９０２に戻り、制御部３０１は、次のフレーム画像に対して処理を繰り返す。一方、例えば、撮影装置１０３からの動画データの受信が完了している場合、制御部３０１は、Ｓ９０６においてＮＯと判定しよく、本動作フローは終了する。

【0094】

以上に述べたように、図９の動作フローによれば、情報処理装置１０２の制御部３０１は、指示情報に従って動画を圧縮することで、サーバ１０１でのＡＩ解析の解析精度の劣化を抑えつつ、動画データをできるだけ圧縮してサーバ１０１に送信することができる。そのため、例えば、動画のＡＩ解析をサーバ１０１などのクラウド上で集約して実行する場合に、ＡＩ解析の解析精度の劣化を抑制しつつも、動画データの伝送に起因するネットワーク帯域の逼迫などを抑制することができる。

【0095】

なお、上述の実施形態では、動画のフレーム画像に量子化値を一律に適用して圧縮を行う例を述べている。しかしながら、実施形態はこれに限定されるものではない。例えば、実施形態は、ＡＩ解析のための動画データの圧縮に関する別の技術とともに利用することで、更に圧縮効果を高めることができる。

【0096】

例えば、画像に対してＡＩ解析を実行する場合に、画像の全ての領域がＡＩ解析に重要なわけではないことが知られている。そのため、例えば、処理対象とするフレーム画像の一部の領域については、圧縮率を高めて画像を劣化させたとしても、ＡＩ解析の結果に影響を与えないことがある。そこで、以下では重要度マップを用いたフレーム画像の圧縮を行う例を述べる。

【0097】

例えば、処理対象のフレーム画像内で各領域を圧縮などにより劣化させた場合に、ＡＩ解析に与える影響を評価することで、フレーム画像内の領域をＡＩ解析に対する重要度で評価した重要度マップを生成することができる。なお、重要度マップには、一例では、遮蔽感度マップ（Occlusion Sensitivity Map）を用いることができる。しかしながら、実施形態に係る重要度マップは、遮蔽感度マップに限定されるものではなく、ＡＩ解析に対する画像内の各領域の重要度を示すマップであれば、その他の手法で生成されたマップであってもよい。例えば、別の実施形態では、情報処理装置１０２の制御部３０１は、画像全体の圧縮率を変えて画質を変化させ、圧縮率を変化させた時のＡＩ解析の結果への影響度を格子状に区切った画像領域ごとに集計して重要度マップを生成してもよい。

【0098】

図１０は、例示的な遮蔽感度マップの生成を示す図である。例えば、図１０（ａ）に示すように、遮蔽感度マップの生成では、制御部３０１は、処理対象のフレーム画像の一部をパッチで遮蔽してＡＩ解析に入力する。この時、遮蔽されたパッチの箇所がＡＩ解析に重要な領域であれば、出力層で正解の精度情報が低下する。一方、遮蔽されたパッチの箇所がＡＩ解析に重要でない領域である場合、出力層で正解の精度情報はあまり変化しない。

【0099】

例えば、図１０（ｂ）および図１０（ｃ）は、ＡＩ解析で表情を検出する場合のパッチの位置に応じた出力層での正解の精度情報への影響を示している。例えば、ＡＩ解析で検出される表情の検出結果には、顔以外の領域を隠しても影響が小さく、図１０（ｂ）では、正解の精度情報の変化は小さい。一方で、例えば、図１０（ｃ）に示すように、唇などの顔の一部をパッチで隠してしまうと、出力層で正解の精度情報が顕著に低下する。

【0100】

制御部３０１は、例えば、画像を走査するようにパッチを移動させながら、パッチの位置に対応づけて出力層で正解の精度情報の変化を記録する。そして、制御部３０１は、画像内で各領域がＡＩ解析での表情の検出に重要な領域であるか否かを示す重要度を、正解の精度情報の低下の度合いから評価し、評価に基づいて重要度マップを生成してよい。なお、上述のように、量子化値は高いほど圧縮率が高くなる。そのため、一例では、重要度マップでは重要でない領域ほど評価値が高くなるように生成されてよい。

【0101】

図１０（ｄ）は、生成した重要度マップを例示している。図１０（ｄ）に示すように、顔の外側の領域は重要度が低いため、重要度マップでは他の領域よりも高い値「１０」が設定されている。一方、顔の目や口元の周りの領域は重要度が高く、重要度マップでは他の領域よりも低い値「０」が設定されている。そして、このようにＡＩ解析における重要度を評価した重要度マップを用いて重要でない領域の圧縮率が高くなるように制御を行うことで、ＡＩ解析精度への影響を抑えつつ、サーバ１０１に動画データを伝送する際のデータ量を更に下げることが可能である。

【0102】

図１１は、実施形態に係る重要度マップを用いた量子化値の設定の例を説明する図である。図１１（ａ）には、上述の実施形態でサーバ１０１から通知された量子化値をそのまま用いて、情報処理装置１０２の制御部３０１が動画のフレーム画像を圧縮する例が示されている。図１１（ａ）に示すように、サーバからは量子化値：２０が通知されており、情報処理装置１０２の制御部３０１は、画像全体に量子化値：２０を適用して画像を圧縮している。

【0103】

一方、図１１（ｂ）は、サーバ１０１から通知された量子化値：２０と、重要度マップとを用いて各領域の量子化値を決定する例を示している。例えば、図１１（ｂ）では、情報処理装置１０２の制御部３０１は、サーバ１０１から通知された量子化値：２０を、重要度マップに加算して量子化値マップを生成している。図１１（ｂ）に示す量子化値マップでは、表情を検出するＡＩ解析に重要な目や口元の周りなどのフレーム画像の領域は、サーバ１０１から通知された量子化値：２０に保たれている。一方で、例えば、表情を検出するＡＩ解析では重要でない顔の外側の領域には、サーバ１０１から通知された量子化値：２０よりも高い量子化値：３０が設定されており、更に圧縮されている。

【0104】

このようにＡＩ解析における画像内での領域の重要度に応じて量子化値を更に高めることで、ＡＩ解析精度への影響を抑えつつ、サーバ１０１に動画データを伝送する際のデータ量を更に削減することが可能である。

【0105】

なお、図１０および図１１では、表情を検出するＡＩ解析を対象に重要度マップを生成する例を述べているが、実施形態はこれに限定されるものではない。情報処理装置１０２の制御部３０１は、実施形態で適用するＡＩ解析のモデルを用いて、そのＡＩ解析において重要な領域を処理対象のフレーム画像で特定して重要度マップを生成することができる。また、重要度マップの生成に用いられるＡＩ解析のモデルは、例えば、サーバ１０１で実行されるＡＩ解析のモデルの一部であってもよい。例えば、サーバ１０１で、動画のフレーム画像からＡＩ解析により人物を検出し、その後に別のＡＩ解析で人体の骨格を検出して姿勢を判定するといったＡＩ解析を実行するとする。この場合、人物を検出するＡＩ解析のモデルを情報処理装置１０２に配備して重要度マップを生成すれば、サーバ１０１に動画データを伝送する際のデータ量の削減の効果を得ることができる。

【0106】

［第２の実施形態］
続いて、第２の実施形態を例示する。例えば、動画のフレーム画像に複数の解析対象が写っていることがある。

【0107】

図１２は、第２の実施形態に係る複数の解析対象が写る動画のフレーム画像に対する量子化値の設定を例示する図である。図１２では、３人の人物が解析対象として検出されている。この場合、サーバ１０１の制御部２０１は、例えば、検出された解析対象のそれぞれに対して上述の量子化値を決定する処理を実行する。例えば、制御部２０１は、解析対象が検出された領域を示す領域１、領域２、および領域３のそれぞれに対して上述の量子化値を決定する処理を実行してよい。そして、制御部２０１は、例えば、複数の解析対象のそれぞれに対して決定された量子化値のうちで最小の量子化値を動画データの圧縮に用いる量子化値として決定してよい。例えば、図１２では、領域１と対応づけて量子化値：３０が決定されており、領域２と対応づけて量子化値：４０が決定されており、また、領域３と対応づけて量子化値：２０が決定されている。この場合に、制御部２０１は、最も小さい量子化値に決定された領域３の量子化値：２０を用いるように情報処理装置１０２に指示情報を送信してもよい。また、別の実施形態では、サーバ１０１の制御部２０１は、解析対象のそれぞれの領域に対して決定された複数の量子化値を、その解析対象の領域に対して用いるように指示する指示情報を情報処理装置１０２に宛てて出力してもよい。この場合、指示情報は、例えば、領域とその領域に対する量子化値とを対応づける複数の組の情報を含んでよい。

【0108】

図１３は、第２の実施形態に係る指示情報の送信処理の動作フローを例示する図である。例えば、サーバ１０１の制御部２０１は、情報処理装置１０２から受信した動画データに対してＡＩ解析の実行を開始すると、図１３の動作フローを開始してよい。

【0109】

Ｓ１３０１においてサーバ１０１の制御部２０１は、上界、下界、および量子化値を設定する。例えば、制御部２０１は、量子化値に、情報処理装置１０２から受信した動画データのフレーム画像に現在適用されている量子化値を設定してよい。また、制御部２０１は、例えば、上界および下界のそれぞれに対して予め設定されている所定値に、上界および下界を設定してよい。

【0110】

Ｓ１３０２において制御部２０１は、情報処理装置１０２から動画のフレーム画像を受信し、フレーム画像から解析対象を検出する。例えば、制御部２０１は、ＡＩ解析などを実行して処理対象のフレーム画像から解析対象を検出してよい。Ｓ１３０３において制御部２０１は、検出された解析対象のうちから未処理の解析対象を１つ選択する。

【0111】

続く、Ｓ１３０４およびＳ１３０５の処理は、Ｓ６０２およびＳ６０３の処理と対応していてよく、制御部２０１は、Ｓ６０２およびＳ６０３と同様の処理を実行してよい。ただし、Ｓ１３０４において制御部２０１は、選択した未処理の解析対象の領域に対して精度情報を取得してよく、Ｓ１３０５においてその領域に対して図８の動作フローを実行して指示情報を決定してよい。

【0112】

Ｓ１３０６において制御部２０１は、未処理の解析対象がまだあるか否かを判定する。未処理の解析対象がある場合（Ｓ１３０６がＹＥＳ）、フローはＳ１３０３に戻り、未処理の解析対象に対して処理を繰り返す。一方、未処理の解析対象がない場合（Ｓ１３０６がＮＯ）、フローはＳ１３０７に進む。

【0113】

Ｓ１３０７において制御部２０１は、情報処理装置１０２に宛てて指示情報を送信する。指示情報は、例えば、解析対象に対して決定された量子化値のうちで最小の値を含んでいてもよいし、別の実施形態では、それぞれの解析対象が検出された領域と、その解析対象の領域に対して決定された量子化値との組を含んでいてもよい。

【0114】

Ｓ１３０８において制御部２０１は、動画がまだ続くか否かを判定してよい。例えば、情報処理装置１０２からまだ動画の後続のフレーム画像が受信されている場合、制御部２０１は、Ｓ１３０８においてＹＥＳと判定しよく、フローはＳ１３０２に戻り、制御部２０１は、次のフレーム画像に対して処理を繰り返す。一方、例えば、情報処理装置１０２からの動画データの受信が完了している場合、制御部２０１は、Ｓ１３０８においてＮＯと判定しよく、本動作フローは終了する。

【0115】

以上で述べたように、第２の実施形態によれば、動画において複数の解析対象が写っている場合にも、ＡＩ解析の解析精度の劣化を抑えつつ、動画データができるだけ圧縮されるように、圧縮率を決定することができる。

【0116】

［変形例］
続いて、実施形態の変形例を説明する。例えば、動画の１枚のフレーム画像に対して複数のＡＩ解析が実行されることがある。

【0117】

例えばＣＰＮ（Cascaded Pyramid Network）を利用して人間の部位を認識するケースなどでは、人間などの１つの解析対象に対して複数のＡＩ解析が実行され、複数のＡＩ解析の精度情報が取得されるケースがある。一例として、複数のＡＩ解析を実行して鼻、右目、左目、右手首、左手首などの人体の各部を検出するケースが挙げられる。この場合に、制御部２０１は、複数のＡＩ解析の精度情報毎に量子化値を求めて、最小の量子化値を指示情報で通知してもよい。

【0118】

この場合、制御部２０１は、第１の実施形態と同様に図６および図８の動作フローを実行してもよい。ただし、制御部２０１は、例えば、Ｓ８０１の処理において複数のＡＩ解析の精度情報のそれぞれについて劣化の予兆検出を実行し、いずれかのＡＩ解析の精度情報で劣化の予兆が検出されるか否かを判定してよい。

【0119】

以上に述べた、変形例によれば解析対象に複数のＡＩ解析を実行する場合にも、ＡＩ解析の解析精度の劣化を抑えつつ、動画データをできるだけ圧縮するように圧縮率を決定することができる。

【0120】

なお、上述の第２の実施形態および変形例は、図１０および図１１を参照して述べた重要度マップに基づく圧縮と組み合わせて実行されてもよい。

【0121】

また、上述の実施形態では、情報処理装置１０２からサーバ１０１に送信する動画データのデータ量を削減するために実施形態を適用する例を述べているが、実施形態はこれに限定されるものではない。例えば、実施形態は動画データを記憶装置に保存する際のデータ量を削減するために利用されてもよい。一例として、撮影した動画データにＡＩ解析を実行した際に、解析結果とともに動画データを証拠として残す場合が考えられる。この場合に、上述の実施形態に係る圧縮率の調整を行うことでＡＩ解析に適した範囲で圧縮された動画データを得ることができ、記憶装置に保存するデータ量を削減することができる。

【0122】

以上において、実施形態を例示したが、実施形態はこれに限定されるものではない。例えば、上述の動作フローは例示であり、実施形態はこれに限定されるものではない。可能な場合には、動作フローは、処理の順番を変更して実行されてもよく、別に更なる処理を含んでもよく、または、一部の処理が省略されてもよい。例えば、図８のＳ８１３およびＳ８１４の処理は実行されなくてもよい。

【0123】

また、例えば、上述の実施形態ではサーバ１０１の制御部２０１が、量子化値を指示情報に含めて情報処理装置１０２に通知し、情報処理装置１０２における動画のフレーム画像の圧縮率を指示情報の量子化値に基づいて制御する例を述べている。しかしながら、実施形態はこれに限定されるものではない。別の実施形態ではサーバ１０１の制御部２０１は、Ｓ６０３において劣化の予兆の検出を実行し、予兆を検出した場合に、Ｓ６０４において劣化の予兆を検出したことを示す指示情報を情報処理装置１０２に通知してもよい。

【0124】

この場合、情報処理装置１０２の制御部３０１は、指示情報の通知を受けると、量子化値を所定値下げる制御を実行してもよい。また、この場合、情報処理装置１０２の制御部３０１は、例えば、サーバ１０１から所定期間にわたって指示情報が通知されなかった場合に、量子化値を所定値だけ上げる処理を繰り返して、量子化値を徐々にあげてゆく制御を実行してもよい。それにより、情報処理装置１０２の制御部３０１は、サーバ１０１からＡＩ解析の精度劣化の予兆の検出に基づいて通知される指示情報に従って、ＡＩ解析の精度が下がりきってしまう前に圧縮率を調整することができる。その結果、ＡＩ解析の解析精度の劣化を抑えつつ、動画データの圧縮率を高めることができる。或いは、別の実施形態では、情報処理装置１０２の制御部３０１は、図８の動作フローを実行してもよい。この場合、情報処理装置１０２の制御部３０１は、例えば、サーバ１０１から通知された劣化の予兆の検出を示す指示情報を受信に基づいて、Ｓ８０１で劣化の予兆の検出の有無を判定し、動画の圧縮に用いる量子化値を制御してもよい。

【0125】

また、上述の実施形態は、量子化値を用いる動画の圧縮方式を例に説明を行っているが、実施形態で利用可能な動画の圧縮方式はこれに限定されるものではなく、その他の動画圧縮方式が利用されてもよい。

【0126】

なお、上述の実施形態において例えばＳ６０２およびＳ１３０２の処理では制御部２０１は、受信部として動作する。また、例えば、Ｓ８０１の処理では制御部２０１は、検出部として動作する。例えば、Ｓ６０４の処理では制御部２０１は、送信部として動作する。例えば、Ｓ８０２からＳ８１４の処理では制御部２０１は、変更部として動作する。

【0127】

図１４は、実施形態に係るサーバ１０１および情報処理装置１０２を実現するためのコンピュータ１４００のハードウェア構成を例示する図である。図１４のサーバ１０１および情報処理装置１０２を実現するためのハードウェア構成は、例えば、プロセッサ１４０１、メモリ１４０２、記憶装置１４０３、読取装置１４０４、通信インタフェース１４０６、および入出力インタフェース１４０７を備える。なお、プロセッサ１４０１、メモリ１４０２、記憶装置１４０３、読取装置１４０４、通信インタフェース１４０６、入出力インタフェース１４０７は、例えば、バス１４０８を介して互いに接続されている。

【0128】

プロセッサ１４０１は、例えば、シングルプロセッサであっても、マルチプロセッサやマルチコアであってもよい。プロセッサ１４０１は、メモリ１４０２を利用して例えば上述の動作フローの手順を記述したプログラムを実行することにより、上述したサーバ１０１の制御部２０１または情報処理装置１０２の制御部３０１の一部または全部の機能を提供する。例えば、サーバ１０１のプロセッサ１４０１は、記憶装置１４０３に格納されているプログラムを読み出して実行することで、受信部２１１、検出部２１２、送信部２１３、および変更部２１４として動作する。

【0129】

メモリ１４０２は、例えば半導体メモリであり、ＲＡＭ領域およびＲＯＭ領域を含んでいてよい。記憶装置１４０３は、例えばハードディスク、フラッシュメモリ等の半導体メモリ、または外部記憶装置である。なお、ＲＡＭは、Random Access Memoryの略称である。また、ＲＯＭは、Read Only Memoryの略称である。

【0130】

読取装置１４０４は、プロセッサ１４０１の指示に従って着脱可能記憶媒体１４０５にアクセスする。着脱可能記憶媒体１４０５は、例えば、半導体デバイス、磁気的作用により情報が入出力される媒体、光学的作用により情報が入出力される媒体などにより実現される。なお、半導体デバイスは、例えば、ＵＳＢ（Universal Serial Bus）メモリである。また、磁気的作用により情報が入出力される媒体は、例えば、磁気ディスクである。光学的作用により情報が入出力される媒体は、例えば、ＣＤ－ＲＯＭ、ＤＶＤ、Blu-ray Disc等（Blu-rayは登録商標）である。ＣＤは、Compact Discの略称である。ＤＶＤは、Digital Versatile Diskの略称である。

【0131】

上述のサーバ１０１の記憶部２０２および情報処理装置１０２の記憶部３０２は、例えばメモリ１４０２、記憶装置１４０３、および着脱可能記憶媒体１４０５を含んでいる。例えば、サーバ１０１の記憶装置１４０３には、量子化値情報７００および情報処理装置１０２から受信した圧縮後の動画データなどが格納されている。また、例えば、情報処理装置１０２の記憶装置１４０３には、撮影装置１０３で撮影された動画データ、およびサーバ１０１から通知される指示情報などが格納されている。

【0132】

通信インタフェース１４０６は、プロセッサ１４０１の指示に従って、他の装置と通信する。通信インタフェース１４０６は、例えば、上述のサーバ１０１の通信部２０３および情報処理装置１０２の通信部３０３の一例である。例えば、サーバ１０１は、通信インタフェース１４０６を介して情報処理装置１０２と通信する。また、情報処理装置１０２は、例えば、通信インタフェース１４０６を介してサーバ１０１および撮影装置１０３と通信する。なお、上述の実施形態におけるサーバ１０１、情報処理装置１０２、および撮影装置１０３などの装置間のデータの送受信は、直接実行されてもよいし、宛先の指定などにより別の更なる装置を介して実行されてもよい。

【0133】

入出力インタフェース１４０７は、例えば、入力装置および出力装置との間のインタフェースであってよい。入力装置は、例えばユーザからの指示を受け付けるキーボード、マウス、タッチパネルなどのデバイスである。出力装置は、例えばディスプレーなどの表示装置、およびスピーカなどの音声装置である。

【0134】

実施形態に係る各プログラムは、例えば、下記の形態でサーバ１０１および情報処理装置１０２に提供される。
（１）記憶装置１４０３に予めインストールされている。
（２）着脱可能記憶媒体１４０５により提供される。
（３）プログラムサーバなどのサーバから提供される。

【0135】

なお、図１４を参照して述べたサーバ１０１および情報処理装置１０２を実現するためのコンピュータ１４００のハードウェア構成は、例示であり、実施形態はこれに限定されるものではない。例えば、上述の構成の一部が、削除されてもよく、また、新たな構成が追加されてもよい。また、別の実施形態では、例えば、上述のサーバ１０１の制御部２０１および情報処理装置１０２の制御部３０１の一部または全部の機能がＦＰＧＡ、ＳｏＣ、ＡＳＩＣ、およびＰＬＤなどによるハードウェアとして実装されてもよい。なお、ＦＰＧＡは、Field Programmable Gate Arrayの略称である。ＳｏＣは、System-on-a-chipの略称である。ＡＳＩＣは、Application Specific Integrated Circuitの略称である。ＰＬＤは、Programmable Logic Deviceの略称である。

【0136】

以上において、いくつかの実施形態が説明される。しかしながら、実施形態は上記の実施形態に限定されるものではなく、上述の実施形態の各種変形形態および代替形態を包含するものとして理解されるべきである。例えば、各種実施形態は、その趣旨および範囲を逸脱しない範囲で構成要素を変形して具体化できることが理解されよう。また、前述した実施形態に開示されている複数の構成要素を適宜組み合わせることにより、種々の実施形態が実施され得ることが理解されよう。更には、実施形態に示される全構成要素からいくつかの構成要素を削除して、または実施形態に示される構成要素にいくつかの構成要素を追加して種々の実施形態が実施され得ることが当業者には理解されよう。

【符号の説明】

【0137】

１００ システム
１０１ サーバ
１０２ 情報処理装置
１０３ 撮影装置
２０１ 制御部
２０２ 記憶部
２０３ 通信部
２１１ 受信部
２１２ 検出部
２１３ 送信部
２１４ 変更部
３０１ 制御部
３０２ 記憶部
３０３ 通信部
１４００ コンピュータ
１４０１ プロセッサ
１４０２ メモリ
１４０３ 記憶装置
１４０４ 読取装置
１４０５ 着脱可能記憶媒体
１４０６ 通信インタフェース
１４０７ 入出力インタフェース
１４０８ バス

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】