特開 2024-61969 画像処理装置、画像処理方法、及び画像処理プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024061969

(43)【公開日】2024-05-09

(54)【発明の名称】画像処理装置、画像処理方法、及び画像処理プログラム

(51)【国際特許分類】

   H04N 7/18 20060101AFI20240430BHJP

   H04N 1/00 20060101ALI20240430BHJP

【ＦＩ】

H04N7/18 D

H04N1/00 127A

H04N7/18 K

【審査請求】未請求

【請求項の数】11

【出願形態】ＯＬ

(21)【出願番号】P 2022169650

(22)【出願日】2022-10-24

(71)【出願人】

【識別番号】000003078

【氏名又は名称】株式会社東芝

(71)【出願人】

【識別番号】598076591

【氏名又は名称】東芝インフラシステムズ株式会社

(74)【代理人】

【識別番号】110002147

【氏名又は名称】弁理士法人酒井国際特許事務所

(72)【発明者】

【氏名】峯邑 隆司

(72)【発明者】

【氏名】会津 宏幸

【テーマコード（参考）】

5C054

5C062

【Ｆターム（参考）】

5C054CA04

5C054CC02

5C054DA09

5C054EA01

5C054EA03

5C054FC12

5C054FC13

5C054GB02

5C054HA19

5C062AA05

5C062AA13

5C062AA25

5C062AA35

5C062AB20

5C062AB25

5C062AB38

5C062AB41

5C062AB42

5C062AB43

5C062AB44

5C062AC02

5C062AC03

5C062AC22

5C062AC23

5C062AC58

5C062AF15

(57)【要約】

【課題】限られたリソースで低解像度画像と、高解像度画像とをそれぞれ伝送する。
【解決手段】実施形態の画像処理装置は、撮像部と、記憶部と、検出部と、制御部と、を備える。前記撮像部は、撮像画像を取得する。前記記憶部は、前記撮像画像を記憶する。前記検出部は、前記撮像部の撮像範囲から動体を検出する。前記制御部は、前記動体が検出された場合に、前記撮像画像から低解像度画像を生成する処理と、当該低解像度画像を伝送させる処理とを含む低解像度処理を処理回路に実行させ、前記動体が検出されていない場合に、前記記憶部に記憶された前記撮像画像から高解像度画像を生成する処理と、当該高解像度画像を伝送させる処理とを含む高解像度処理を前記処理回路に実行させる。
【選択図】図３

【特許請求の範囲】

【請求項1】

撮像画像を取得する撮像部と、
前記撮像画像を記憶する記憶部と、
前記撮像部の撮像範囲から動体を検出する検出部と、
前記動体が検出された場合に、前記撮像画像から低解像度画像を生成する処理と、当該低解像度画像を伝送させる処理とを含む低解像度処理を処理回路に実行させ、前記動体が検出されていない場合に、前記記憶部に記憶された前記撮像画像から高解像度画像を生成する処理と、当該高解像度画像を伝送させる処理とを含む高解像度処理を前記処理回路に実行させる制御部と、
を備える画像処理装置。

【請求項2】

前記制御部は、前記低解像度処理が実行されていない場合に、前記高解像度処理を実行させる、
請求項１に記載の画像処理装置。

【請求項3】

前記制御部は、前記動体が検出された場合に、前記高解像度処理を停止し、前記低解像度処理を実行させる、
請求項１に記載の画像処理装置。

【請求項4】

前記制御部は、前記動体が検出された場合に、前記高解像度処理を停止し、前記高解像度処理の途中のデータを前記記憶部に記憶させ、前記低解像度処理が終了した場合に、当該データを用いて前記高解像度処理を再開させる、
請求項１に記載の画像処理装置。

【請求項5】

前記制御部は、前記高解像度処理において、前記低解像度処理の伝送速度以下で、前記高解像度画像を伝送する、
請求項１に記載の画像処理装置。

【請求項6】

前記制御部は、前記低解像度処理の処理速度以下で、前記高解像度処理を実行する、
請求項１に記載の画像処理装置。

【請求項7】

前記高解像度画像の伝送を要求する高解像度画像伝送要求を受信する通信部を更に備え、
前記通信部は、前記高解像度画像伝送要求を受信してから所定期間内に、前記高解像度画像を送信することができない場合に、伝送不可を示す伝送不可応答を送信させる、
請求項１に記載の画像処理装置。

【請求項8】

前記検出部により前記動体が検出された日時を示すログを生成する生成部と、
前記生成部により生成された前記ログを送信する送信部とを更に備える、
請求項１に記載の画像処理装置。

【請求項9】

他の画像処理装置から動体を検出したことを示す検出情報を受信する受信部を更に備え、
前記制御部は、前記検出情報に基づいて、前記低解像度処理、又は前記高解像度処理を実行させる、
請求項１に記載の画像処理装置。

【請求項10】

撮像部により撮像された撮像画像を取得し、
前記撮像画像を記憶し、
前記撮像部の撮像範囲から動体を検出し、
前記動体が検出された場合に、前記撮像画像から低解像度画像を生成する処理と、当該低解像度画像を伝送させる処理とを含む低解像度処理を処理回路に実行させ、前記動体が検出されていない場合に、記憶部に記憶された前記撮像画像から高解像度画像を生成する処理と、当該高解像度画像を伝送させる処理とを含む高解像度処理を前記処理回路に実行させる、
ことを含む画像処理方法。

【請求項11】

撮像画像を取得する撮像部と、前記撮像画像を記憶する記憶部と、を備える画像処理装置を、
前記撮像部の撮像範囲から動体を検出する検出部と、
前記動体が検出された場合に、前記撮像画像から低解像度画像を生成する処理と、当該低解像度画像を伝送させる処理とを含む低解像度処理を処理回路に実行させ、前記動体が検出されていない場合に、前記記憶部に記憶された前記撮像画像から高解像度画像を生成する処理と、当該高解像度画像を伝送させる処理とを含む高解像度処理を前記処理回路に実行させる制御部と、
して機能させるための画像処理プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明の実施形態は、画像処理装置、画像処理方法、及び画像処理プログラムに関する。

【背景技術】

【0002】

従来、画像処理装置は、監視カメラ等により撮像された撮像画像から低解像度画像を生成する。そして、画像処理装置は、低解像度画像をサーバ装置に伝送していた。また、サーバ装置は、ＡＩ（Artificial Intelligence）等による画像分析を実行する場合がある。サーバ装置は、低解像度画像よりも解像度が高い高解像度画像を用いることで画像分析の精度を高めることができる。

【0003】

そのため、画像処理装置は、低解像度画像と高解像度画像とをサーバ装置に伝送することが求められている。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２００７－２４３２８９号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

しかしながら、画像処理装置は、低解像度画像の生成および伝送と、高解像度画像の生成および伝送と、の両方を同時に実行可能なリソースを有すると製造コストが高くなってしまう。

【0006】

そこで、本発明は、上記事情に鑑みてなされたものであり、限られたリソースで低解像度画像と、高解像度画像とをそれぞれ伝送する画像処理装置、画像処理方法、及び画像処理プログラムを提供することを課題とする。

【課題を解決するための手段】

【0007】

実施形態の画像処理装置は、撮像部と、記憶部と、検出部と、制御部と、を備える。前記撮像部は、撮像画像を取得する。前記記憶部は、前記撮像画像を記憶する。前記検出部は、前記撮像部の撮像範囲から動体を検出する。前記制御部は、前記動体が検出された場合に、前記撮像画像から低解像度画像を生成する処理と、当該低解像度画像を伝送させる処理とを含む低解像度処理を処理回路に実行させ、前記動体が検出されていない場合に、前記記憶部に記憶された前記撮像画像から高解像度画像を生成する処理と、当該高解像度画像を伝送させる処理とを含む高解像度処理を前記処理回路に実行させる。

【図面の簡単な説明】

【0008】

【図1】図１は、第１の実施形態の画像処理システムの概略の一例を示す図である。

【図2】図２は、第１の実施形態に係る画像処理装置のハードウェア構成の一例を示す図である。

【図3】図３は、第１の実施形態に係る画像処理装置が有する機能の一例を示す図である。

【図4】図４は、第１の実施形態に係る画像処理装置が実行する切替処理の一例を示すフローチャートである。

【図5】図５は、第１の実施形態に係る画像処理装置が実行するメモリ制御処理の一例を示すフローチャートである。

【発明を実施するための形態】

【0009】

以下に添付図面を参照して、画像処理装置、画像処理方法、及び画像処理プログラムを詳細に説明する。なお、以下の各実施形態および変形例における説明において、同一の符号が付されている部分は実質的に同一の機能を有しており、重複部分については適宜説明を省略する。

【0010】

（第１の実施形態）
図１は、第１の実施形態の画像処理システム１の概略の一例を示す図である。画像処理システム１は、サーバ装置１０、複数の画像処理装置２０、記憶装置３０、及び表示装置４０を備える。そして、サーバ装置１０、画像処理装置２０、記憶装置３０、及び表示装置４０は、ネットワーク５０を介して通信可能に接続される。図１に示す画像処理システム１は、２台の画像処理装置２０を有している。しかしながら、画像処理システム１が有する画像処理装置２０は、１台であってもよいし、３台以上であってもよい。また、画像処理システム１は、記憶装置３０、又は表示装置４０を有していなくてもよいし、図１に示されていない装置を有していてもよい。

【0011】

画像処理装置２０は、撮像範囲に存在する物体を撮像することにより撮像画像を生成する。また、画像処理装置２０は、撮像画像から低解像度画像又は高解像度画像を生成する。そして、画像処理装置２０は、生成した低解像度画像又は高解像度画像をサーバ装置１０に伝送する。

【0012】

サーバ装置１０は、画像処理装置２０から伝送された低解像度画像又は高解像度画像を受信する。サーバ装置１０は、例えば低解像度画像を記録用の画像として記憶する。また、サーバ装置１０は、例えば高解像度画像をＡＩによる画像分析に使用する。また、サーバ装置１０は、エンコードされた高解像度画像の伝送を要求する高解像度画像伝送要求を画像処理装置２０に送信する。

【0013】

記憶装置３０は、画像処理装置２０から伝送された低解像度画像及び高解像度画像を記憶する装置である。

【0014】

表示装置４０は、画像処理装置２０から伝送された低解像度画像及び高解像度画像を表示する装置である。

【0015】

次に、画像処理装置２０のハードウェア構成について説明する。

【0016】

図２は、第１の実施形態に係る画像処理装置２０のハードウェア構成の一例を示す図である。

【0017】

画像処理装置２０は、制御部２１０、ＲＡＭ（Random Access Memory）２２０、ＲＯＭ（Read Only Memory）２３０、撮像部２４０、バッファメモリ２５０、画像記憶部２６０、画像処理部２７０、エンコード部２８０、及び伝送部２９０を備える。

【0018】

制御部２１０は、ＣＰＵ（Central Processing Unit）等の画像処理装置２０を統括的に制御するプロセッサである。ＲＡＭ２２０は、各種プログラムやパラメータを記憶する不揮発性の主記憶装置である。ＲＯＭ２３０は、制御部２１０の作業領域を提供する揮発性の補助記憶装置である。制御部２１０は、ＲＯＭ２３０等に記憶されたプログラムに従い、ＲＡＭ２２０をワーキングエリアに使用して各種演算処理を実行する。

【0019】

撮像部２４０は、画像センサである。言い換えると、撮像部２４０は、撮像範囲に存在する物体を撮像するカメラである。撮像部２４０は、撮像することにより撮像画像を取得する。そして、撮像部２４０は、撮像画像をバッファメモリ２５０に記憶する。

【0020】

バッファメモリ２５０は、ＤＲＡＭ（Dynamic Random Access Memory）などのデータの書き込み及び読み出しが比較的高速な記憶媒体である。バッファメモリ２５０は、撮像部２４０により撮像された撮像画像を一時保存する揮発性の記憶媒体である。

【0021】

画像記憶部２６０は、ＳＳＤ（Solid State Drive）、ＨＤＤ（Hard Disk Drive）、又はフラッシュメモリなどのデータの書き込み及び読み出しが比較的に低速な記憶媒体である。画像記憶部２６０は、撮像画像を記憶する。また、画像記憶部２６０は、高解像度画像の生成から伝送までにおいて中断した場合に、処理途中のデータを記憶する。すなわち、画像記憶部２６０は、バッファメモリ２５０からのデータを保存する場合と、画像処理部２７０、エンコード部２８０および伝送部２９０の処理途中のデータを保存する場合とがある。

【0022】

画像処理部２７０は、低解像度画像又は高解像度画像を生成する画像処理を実行する回路である。さらに詳しくは、画像処理部２７０は、低解像度画像を生成する。また、画像処理部２７０は、規定の条件が満たされた場合に、高解像度画像を生成する。規定の条件とは、例えば、サーバ装置１０から高解像度画像伝送要求を受信しており、撮像範囲を動く動体が検出されず、且つ、低解像度画像の伝送が完了していることである。

【0023】

さらに詳しくは、画像処理部２７０は、差分画像生成部２７１、動き判定部２７２、及び画像生成部２７３を備える。

【0024】

差分画像生成部２７１は、異なる時点で撮像された少なくとも２つの撮像画像から生成した、差分画像を生成する。例えば、差分画像生成部２７１は、直近に撮像された撮像画像と、この撮像画像よりも過去に撮像された撮像画像との差分画像を生成する。

【0025】

動き判定部２７２は、撮像部２４０の撮像範囲に動体が存在するか否かを判定する。ここで、動体とは、動く物体である。例えば、動体とは、人や動物や機械等である。さらに詳しくは、動き判定部２７２は、差分画像に基づいて、撮像部２４０の撮像範囲に動体が存在するか否かを判定する。動き判定部２７２は、差分画像が示す差分が閾値以上の場合に、撮像部２４０の撮像範囲に動体が存在すると判定する。また、動き判定部２７２は、差分画像が示す差分が閾値未満の場合に、撮像部２４０の撮像範囲に動体が存在しないと判定する。

【0026】

画像生成部２７３は、撮像画像に基づいて、高解像度画像、又は低解像度画像を生成する。低解像度画像とは、撮像画像の解像度を低下させた画像である。例えば、画像生成部２７３は、複数の画素の和をとるとともに、複数の画素の占める面積を１つの画素で置き換える処理をする。画像処理で使われるアフィン変換を利用して低解像度画像を生成してもよいことはもちろんである。

【0027】

高解像度画像とは、低解像度画像よりも解像度が高い画像である。言い換えると、高解像度画像とは、撮像画像の解像度を低下させていない画像としてもよい。例えば、画像生成部２７３は、撮像画像から特定の部分を切り出すなどにより高解像度画像を生成してもよいし、低解像度画像と同じ撮影エリアをカバーする高解像度画像を想定してもよい。いずれにせよ、高解像度画像とは、低解像度画像より、データ量が大きい画像である。

【0028】

エンコード部２８０は、画像生成部２７３により生成された高解像度画像、又は低解像度画像をエンコードすることで規定の形式の画像を生成する回路または、ソフトウエア上の機能である。例えば、エンコード部２８０は、ＪＰＥＧ、ＧＩＦ、ＴＩＦＦ、ＰＮＧなどの形式の画像を生成する。さらに詳しくは、エンコード部２８０は、画像生成部２７３により生成された高解像度画像をエンコードすることで高解像度エンコード画像を生成する。また、エンコード部２８０は、画像生成部２７３により生成された低解像度画像をエンコードすることで低解像度エンコード画像を生成する。

【0029】

伝送部２９０は、ネットワーク５０を介して、サーバ装置１０、記憶装置３０、及び表示装置４０との通信を実行する回路またはソフトウエアによる機能ブロックである。ここでは、データ伝送に必要なヘッダー情報を付与する。例えば、伝送部２９０は、通信インタフェースである。

【0030】

伝送部２９０による伝送線路については、その帯域が問題になる。複数の画像処理装置２０が中継器（図示せず）を介して接続した場合、中継器の入力側あるいは、中継器の後段の伝送線路の帯域がボトルネックとなり、画像の伝送が滞ってしまう場合がある。したがって、画像処理装置２０から伝送する低解像度画像および高解像度画像のデータサイズと送出レートにより、１台の画像処理装置２０からの送出データ量が決まる。中継器を介して接続されている画像処理装置２０間で同期をとっている場合でも、負荷の平準化はされるものの同様のことが発生する。このような場合には、送出レートを下げることが必要となる。

【0031】

ここで、１枚の高解像度画像の生成、エンコード及び伝送に必要な時間をΔＴとする。また、ΔＴ時間の間に、ある確率ρで動体を検出する場合に、高解像度画像の生成、エンコード、及び伝送作業の中断が発生し、処理が完了に要した時間をＴとする。ｋ枚目の高解像度画像の生成、エンコード、伝送の処理に必要な時間をΔＴ（ｋ）にすると、この時間内に動体が検出され、高解像度処理から低解像度処理への切り替えに要する時間、及び再度低解像度処理から高解像度処理に切り替えに要する時間の和、すなわちオーバーヘッド時間をρ（ｋ）とすると、数式（１）が成り立つ。

【0032】

【数1】

【0033】

オーバーヘッドが発生した場合の所用時間と、オーバーヘッドが発生しない場合の所用時間との比を、高解像度画像への変換効率ηと定義すれば、下記の数式（２）が成り立つ。この変換効率ηが１００％から下がる分、オーバーヘッドに伴う電力の損失を生み出すことになる。この電力損失は、電池駆動の画像センサにおいては考慮すべき対象となるが、給電されている場合は考慮すべき問題とならない。

【0034】

【数2】

【0035】

次に、画像処理装置２０が有する機能について説明する。

【0036】

図３は、第１の実施形態に係る画像処理装置２０が有する機能の一例を示す図である。画像処理装置２０の制御部２１０は、ＲＯＭ２３０等に記憶されたプログラムに従い、ＲＡＭ２２０をワーキングエリアに使用して各種処理を実行することで、図３に示す機能を実現する。すなわち、画像処理装置２０は、通信制御部２００１、撮像制御部２００２、検出制御部２００３、画像処理制御部２００４、ログ生成部２００５、及びバッファ制御部２００６を有する。なお、これら機能は、集積回路などのハードウェアにより実現されてもよい。

【0037】

通信制御部２００１は、伝送部２９０を制御することによりサーバ装置１０、記憶装置３０、及び表示装置４０との通信を実行する。例えば、通信制御部２００１は、撮像の開始を要求する撮像開始要求を受信する。

【0038】

また、通信制御部２００１は、エンコードされた高解像度画像である高解像度エンコード画像の伝送を要求する高解像度画像伝送要求を受信する。通信制御部２００１は、通信部の一例である。高解像度画像伝送要求には、伝送対象の高解像度エンコード画像を指定する情報が含まれていてもよい。例えば、高解像度画像伝送要求には、高解像度エンコード画像の元になる撮像画像が撮影された時間帯、高解像度エンコード画像の解像度、伝送する高解像度エンコード画像の枚数などを指定する情報が含まれていてもよい。

【0039】

また、通信制御部２００１は、高解像度画像伝送要求を受信してから所定期間内に、高解像度エンコード画像を送信することができない場合に、伝送不可を示す伝送不可応答を送信する。

【0040】

撮像制御部２００２は、撮像部２４０に撮像画像を撮像させる。例えば、撮像制御部２００２は、通信制御部２００１による撮像開始要求が受信された場合に、撮像部２４０に撮像を開始させる。これにより、撮像部２４０は、規定のフレームレートで撮像画像を撮像する。

【0041】

検出制御部２００３は、撮像部２４０の撮像範囲から動体を検出する。検出制御部２００３は、検出部の一例である。例えば、検出制御部２００３は、動き判定部２７２による判定結果に基づいて、撮像範囲から動体を検出する。

【0042】

画像処理制御部２００４は、検出制御部２００３により動体が検出された場合に、撮像画像から低解像度画像を生成する処理と、低解像度画像を伝送させる処理とを含む低解像度処理を、画像処理部２７０、エンコード部２８０、及び伝送部２９０に実行させる。また、画像処理制御部２００４は、検出制御部２００３により動体が検出されていない場合に、バッファメモリ２５０又は画像記憶部２６０に記憶された撮像画像から高解像度画像を生成する処理と、高解像度画像を伝送させる処理とを含む高解像度処理を、画像処理部２７０、エンコード部２８０、及び伝送部２９０に実行させる。

【0043】

さらに詳しくは、画像処理制御部２００４は、検出制御部２００３により動体が検出された場合に、バッファメモリ２５０に記憶された撮像画像のうち最も古い撮像画像から低解像度画像を生成する処理を画像生成部２７３に実行させる。また、画像処理制御部２００４は、画像生成部２７３により低解像度画像が生成された場合に、低解像度画像をエンコードすることにより低解像度エンコード画像をエンコード部２８０に生成させる。また、画像処理制御部２００４は、エンコード部２８０により低解像度エンコード画像が生成された場合に、低解像度エンコード画像を伝送部２９０に送信させる。

【0044】

画像処理制御部２００４は、通信制御部２００１が高解像度画像伝送要求を受信し、且つ低解像度画像の生成から伝送までの低解像度処理が実行されていない場合に、高解像度処理を実行させる。すなわち、画像処理制御部２００４は、通信制御部２００１が高解像度画像伝送要求を受信した場合に、低解像度処理が実行されているか否かを判定する。画像処理制御部２００４は、低解像度処理が実行されている場合に、低解像度処理が終了するまで待機する。

【0045】

画像処理制御部２００４は、低解像度処理が実行されていない場合に、高解像度画像伝送要求で指定された条件に適合する撮像画像をバッファメモリ２５０又は画像記憶部２６０から取得する。画像処理制御部２００４は、取得した撮像画像から高解像度画像を生成する処理を画像生成部２７３に実行させる。また、画像処理制御部２００４は、画像生成部２７３により高解像度画像が生成された場合に、高解像度画像をエンコードすることにより高解像度エンコード画像をエンコード部２８０に生成させる。また、画像処理制御部２００４は、エンコード部２８０により高解像度エンコード画像が生成された場合に、高解像度エンコード画像を伝送部２９０に送信させる。

【0046】

このようにして、画像処理制御部２００４は、バッファメモリ２５０又は画像記憶部２６０に記憶された撮像画像から高解像度画像を生成する処理と、高解像度画像を伝送させる処理とを含む高解像度処理を実行する。

【0047】

また、画像処理制御部２００４は、高解像度処理の実行中に、検出制御部２００３により動体が検出された場合に、高解像度処理を停止し、低解像度処理を実行させる。すなわち、画像処理制御部２００４は、低解像度処理を優先して実行させる。さらに詳しくは、画像処理制御部２００４は、高解像度処理の実行中において、検出制御部２００３により動体が検出された場合に、高解像度処理の途中のデータを画像記憶部２６０に記憶する。また、画像処理制御部２００４は、低解像度処理を実行する。そして、画像処理制御部２００４は、低解像度処理が終了した場合に、画像記憶部２６０に記憶したデータを用いて高解像度処理を再開する。

【0048】

また、画像処理制御部２００４は、低解像度処理が実行されており、設定時間内に高解像度処理を実行できない場合に、低解像度処理が実行されているために高解像度画像を伝送することができないことを示す伝送不可応答を送信する。

【0049】

また、高解像度処理は、低解像度処理以下の処理速度となる。また、高解像度処理は、低解像度処理以下の伝送速度となる。すなわち、画像処理制御部２００４は、高解像度処理において、低解像度処理の伝送速度以下で、高解像度画像を伝送部２９０に伝送させる、また、画像処理制御部２００４は、低解像度処理の処理速度以下で、高解像度処理を実行させる。

【0050】

また、画像処理制御部２００４は、他の画像処理装置２０による動体の検出結果に基づいて、低解像度処理、又は高解像度処理を実行させてもよい。ここで、動体を頻繁に検出する場合、画像処理制御部２００４は、高解像度処理と低解像度処理との切り替えを頻繁に行うことになる。この場合に、画像処理制御部２００４は、オーバーヘッドが増加することになる。すなわち、画像処理装置２０は、消費電力が増加することになる。そして、撮像範囲が隣接している画像処理装置２０で動体が検出された場合に、画像処理装置２０は、動体を検出する可能性が高い。すなわち、画像処理制御部２００４は、高解像度処理を中止し、低解像度処理を開始する可能性が高い。

【0051】

そこで、通信制御部２００１は、他の画像処理装置２０から動体を検出したことを示す検出情報を受信してもよい。通信制御部２００１は、受信部の一例である。そして、画像処理制御部２００４は、通信制御部２００１が受信した検出情報に基づいて、低解像度処理、又は高解像度処理を実行させる。すなわち、画像処理制御部２００４は、通信制御部２００１が検出情報を受信した場合に、高解像度処理の開始を待機してもよい。これにより、画像処理制御部２００４は、オーバーヘッドの増加を抑制し、消費電力の増加を抑制することができる。

【0052】

ログ生成部２００５は、検出制御部２００３により動体が検出された日時を示すログを生成する。ログ生成部２００５は、生成部の一例である。ここで、動体の検出日時と、動体の検出日時との間は、動体が検出されていない期間を示す。すなわち、ログ生成部２００５は、検出制御部２００３により動体が検出されていない期間を示すログを生成する。そして、通信制御部２００１は、ログ生成部２００５により生成されたログを送信する。通信制御部２００１は、送信部の一例である。例えば、通信制御部２００１は、サーバ装置１０に送信する。

【0053】

ここで、検出制御部２００３により動体が検出されない場合に、画像処理制御部２００４は、高解像度処理を実行し、低解像度処理を実行しない。すなわち、低解像度画像は、生成されず、伝送されない。低解像度画像が無いため、ユーザは、不具合などにより低解像度画像が生成されなかったのか、高解像度処理の期間に動体が無かったのかを判断することができない。そこで、ログ生成部２００５は、動体が検出された期間を示すログをサーバ装置１０に伝送する。ユーザは、ログにより、高解像度処理の期間に動体が無かったことを確認することができる。

【0054】

バッファ制御部２００６は、バッファメモリ２５０および画像記憶部２６０におけるデータの保管を制御する。ここで、バッファメモリ２５０は、撮像部２４０により撮像画像が撮像される毎に、撮像画像を記憶する。バッファ制御部２００６は、バッファメモリ２５０に記憶可能な残りの容量が閾値未満になった場合に、バッファメモリ２５０に記憶された撮像画像を画像記憶部２６０に記憶させる。これにより、バッファ制御部２００６は、バッファメモリ２５０がオーバーフローしてしまうことを抑制する。

【0055】

また、バッファ制御部２００６は、バッファメモリ２５０に記憶可能な残りの容量が閾値未満になった場合に、不要なデータを削除する。不要なデータとは、例えば、サーバ装置１０に伝送済みの画像や、一時的なデータである。例えば、一時的なデータは、高解像度処理を中断した場合に、画像記憶部２６０に記憶されるデータである。このようなデータは、再度、高解像度処理を実行することで取得することができる。これまで述べたブロック図は、構成、機能を説明し、その実現手段としてＨＷによる専用の回路、各種制御回路を実装したワンチップに実装したＳｏＣ（System On a Chip）、またはソフトウエア上の処理により実現する方法であってもよい。

【0056】

次に、第１の実施形態に係る画像処理装置２０が実行する切替処理について説明する。

【0057】

図４は、第１の実施形態に係る画像処理装置２０が実行する切替処理の一例を示すフローチャートである。図４に示すフローチャートは、高解像度処理と低解像度処理との切り替えを説明するための図である。

【0058】

通信制御部２００１は、高解像度画像伝送要求を受信したか否かを判定する（ステップＳ１）。高解像度画像伝送要求を受信していない場合に（ステップＳ１；Ｎｏ）、画像処理装置２０は、切替処理を終了する。

【0059】

高解像度画像伝送要求を受信した場合に（ステップＳ１；Ｙｅｓ）、検出制御部２００３は、撮像部２４０の撮像範囲から動体を検出したか否かを判定する（ステップＳ２）。動体を検出した場合（ステップＳ２；Ｎｏ）、画像処理装置２０は、ステップＳ１に移行する。

【0060】

動体を検出しない場合（ステップＳ２；Ｙｅｓ）、画像処理制御部２００４は、高解像度画像伝送要求により指定された条件に適合する撮像画像が有るか否かを判定する（ステップＳ３）。すなわち、画像処理制御部２００４は、指定された条件に適合する撮像画像がバッファメモリ２５０又は画像記憶部２６０に記憶されているか否かを判定する。指定された条件に適合する撮像画像が無い場合に（ステップＳ３；Ｎｏ）、画像処理装置２０は、ステップＳ２に移行する。

【0061】

指定された条件に適合する撮像画像が有る場合に（ステップＳ３；Ｙｅｓ）、画像処理制御部２００４は、低解像度処理が終了しているか否かを判定する（ステップＳ４）。低解像度処理が終了していない場合に（ステップＳ４；Ｎｏ）、画像処理装置２０は、ステップＳ２に移行する。

【0062】

低解像度処理が終了している場合に（ステップＳ４；Ｙｅｓ）、画像処理制御部２００４は、低解像度処理のリソースを開放する（ステップＳ５）。

【0063】

画像処理制御部２００４は、高解像度処理を実行する（ステップＳ６）。

【0064】

検出制御部２００３は、撮像部２４０の撮像範囲から動体を検出したか否かを判定する（ステップＳ７）。動体を検出した場合（ステップＳ７；Ｙｅｓ）、画像処理制御部２００４は、高解像度処理のリソースを開放する（ステップＳ８）。

【0065】

画像処理制御部２００４は、低解像度処理を実行する（ステップＳ９）。そして、画像処理装置２０は、ステップＳ２に移行する。

【0066】

ステップＳ７において、動体を検出しない場合（ステップＳ７；Ｎｏ）、画像処理制御部２００４は、高解像度処理が終了したか否かを判定する（ステップＳ１０）。高解像度処理が終了していない場合に（ステップＳ１０；Ｎｏ）、画像処理制御部２００４は、ステップＳ６において高解像度処理を継続する。

【0067】

高解像度処理が終了した場合に（ステップＳ１０；Ｙｅｓ）、画像処理装置２０は、切替処理を終了する。

【0068】

次に、第１の実施形態に係る画像処理装置２０が実行するメモリ制御処理について説明する。

【0069】

図５は、第１の実施形態に係る画像処理装置２０が実行するメモリ制御処理の一例を示すフローチャートである。図５に示すフローチャートは、バッファメモリ２５０及び画像記憶部２６０の処理を説明するための図である。

【0070】

バッファ制御部２００６は、バッファメモリ２５０の残りの空き容量が閾値未満であるか否かを判定する（ステップＳ２１）。バッファメモリ２５０の残りの空き容量が閾値以上の場合に（ステップＳ２１；Ｎｏ）、バッファ制御部２００６は、待機する。

【0071】

バッファメモリ２５０の残りの空き容量が閾値未満の場合に（ステップＳ２１；Ｙｅｓ）、バッファ制御部２００６は、撮像部２４０により撮像された撮像画像があるか否かを判定する（ステップＳ２２）。すなわち、バッファ制御部２００６は、バッファメモリ２５０に新たに記憶する撮像画像が有るか否かを判定する。バッファメモリ２５０に新たに記憶する撮像画像が無い場合に（ステップＳ２２；Ｎｏ）、バッファ制御部２００６は、ステップＳ２５に移行する。

【0072】

バッファメモリ２５０に新たに記憶する撮像画像が有る場合に（ステップＳ２２；Ｙｅｓ）、バッファ制御部２００６は、バッファメモリ２５０に記憶された撮像画像を画像記憶部２６０に移動する（ステップＳ２３）。バッファ制御部２００６は、撮像画像の移動に伴い、バッファメモリ２５０の一部を開放する（ステップＳ２４）。

【0073】

バッファ制御部２００６は、バッファメモリ２５０の残りの空き容量が閾値以上であるか否かを判定する（ステップＳ２５）。すなわち、バッファ制御部２００６は、撮像画像の移動によりバッファメモリ２５０の残りの空き容量が閾値未満になったか否かを判定する。

【0074】

バッファメモリ２５０の残りの空き容量が閾値未満の場合に（ステップＳ２５；Ｎｏ）、バッファ制御部２００６は、ステップＳ２３に移行する。

【0075】

バッファメモリ２５０の残りの空き容量が閾値以上の場合に（ステップＳ２５；Ｙｅｓ）、バッファ制御部２００６は、画像記憶部２６０の残りの空き容量が閾値以上であるか否かを判定する（ステップＳ２６）。

【0076】

画像記憶部２６０の残りの空き容量が閾値未満の場合に（ステップＳ２６；Ｎｏ）、バッファ制御部２００６は、画像記憶部２６０に記憶された不要なデータを削除することにより、画像記憶部２６０の一部を開放する（ステップＳ２７）。そして、バッファ制御部２００６は、ステップＳ２６に移行する。

【0077】

画像記憶部２６０の残りの空き容量が閾値以上の場合に（ステップＳ２６；Ｙｅｓ）、
バッファ制御部２００６は、メモリ制御処理を終了する。

【0078】

以上のように、第１の実施形態に係る画像処理装置２０は、撮像画像を取得し、撮像画像を記憶する。画像処理装置２０は、撮像部２４０の撮像範囲から動体が検出された場合に、撮像画像から低解像度画像を生成する処理と、低解像度画像を伝送させる処理とを含む低解像度処理を画像処理部２７０、エンコード部２８０、及び伝送部２９０に実行させる。また、画像処理装置２０は、動体が検出されていない場合に、画像記憶部２６０に記憶された撮像画像から高解像度画像を生成する処理と、高解像度画像を伝送させる処理とを含む高解像度処理を画像処理部２７０、エンコード部２８０、及び伝送部２９０に実行させる。

【0079】

このように、画像処理装置２０は、動体が検出されない場合に、低解像度処理を停止してリソースを開放する。また、画像処理装置２０は、開放されたリソースを活用して高解像度処理を実行する。したがって、画像処理装置２０は、限られたリソースで低解像度画像と、高解像度画像とをそれぞれ伝送することができる。

【0080】

画像処理装置２０は、低解像度画像の生成及び伝送と、高解像度画像の生成及び伝送とを実行することができる。しかしながら、低解像度画像と高解像度画像との撮像日時は同じでも、伝送される日時は一致しない。また、動体が検出された場合に、低解像度画像が保存され、動体が検出されない場合には低解像度画像は保存されない。また、高解像度画像はリアルタイムには伝送されず、蓄積された過去時刻の高解像度画像を伝送することに留意する。

【0081】

（変形例１）
第１の実施形態に係る画像処理装置２０は、低解像度処理の実行中には高解像度処理を実行しない。また、画像処理装置２０は、高解像度処理の実行中には低解像度処理を実行しないと説明した。しかしながら、変形例１に係る画像処理装置２０は、低解像度処理の実行中に余裕がある場合に、高解像度処理を実行してもよい。また、画像処理装置２０は、高解像度処理の実行中に余裕がある場合に、低解像度処理を実行してもよい。

【0082】

（変形例２）
変形例２に係る画像処理装置２０は、高解像度処理の実行中に撮像画像をバッファメモリ２５０または画像記憶部２６０に記憶させる。そして、画像処理装置２０は、高解像度処理が終了した場合に、バッファメモリ２５０または画像記憶部２６０に記憶した撮像画像に対して低解像度処理を実行してもよい。これにより、ユーザは、ログ生成部２００５により生成されたログだけでなく、低解像度画像でも撮像範囲に動体が無いことを確認することができる。

【0083】

また、本実施形態の画像処理装置２０で実行されるプログラムは、インストール可能な形式又は実行可能な形式のファイルで、ＤＶＤ（Digital Versatile Disk）、ＵＳＢ（Universal Serial Bus）メモリ、ＳＳＤ（Solid State Drive）などの半導体記憶装置等のコンピュータで読み取り可能な記録媒体に記録されて提供される。

【0084】

また、当該プログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、当該プログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。

【0085】

また、当該プログラムを、ＲＯＭ等に予め組み込んで提供するように構成してもよい。

【符号の説明】

【0086】

１…画像処理システム、１０…サーバ装置、２０…画像処理装置、３０…記憶装置、４０…表示装置、５０…ネットワーク、２１０…制御部、２２０…ＲＡＭ（Random Access Memory）、２３０…ＲＯＭ（Read Only Memory）、２４０…撮像部、２５０…バッファメモリ、２６０…画像記憶部、２７０…画像処理部、２８０…エンコード部、２９０…伝送部、２７１…差分画像生成部、２７２…動き判定部、２７３…画像生成部、２００１…通信制御部、２００２…撮像制御部、２００３…検出制御部、２００４…画像処理制御部、２００５…ログ生成部、２００６…バッファ制御部。

【図1】

【図2】

【図3】

【図4】

【図5】