特許 6357185 監視カメラシステム及び監視方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6357185

(24)【登録日】2018年6月22日

(45)【発行日】2018年7月11日

(54)【発明の名称】監視カメラシステム及び監視方法

(51)【国際特許分類】

   H04N 7/18 20060101AFI20180702BHJP

【ＦＩ】

   H04N7/18 D

   H04N7/18 E

【請求項の数】5

【全頁数】35

(21)【出願番号】特願2016-69234(P2016-69234)

(22)【出願日】2016年3月30日

(65)【公開番号】特開2017-184045(P2017-184045A)

(43)【公開日】2017年10月5日

【審査請求日】2016年5月10日

(73)【特許権者】

【識別番号】511212077

【氏名又は名称】株式会社ＮＥＸＰＯＩＮＴ

(74)【代理人】

【識別番号】100131451

【弁理士】

【氏名又は名称】津田 理

(74)【代理人】

【識別番号】230104019

【弁護士】

【氏名又は名称】大野 聖二

(74)【代理人】

【識別番号】100174137

【弁理士】

【氏名又は名称】酒谷 誠一

(74)【代理人】

【識別番号】100184181

【弁理士】

【氏名又は名称】野本 裕史

(74)【代理人】

【識別番号】100134533

【弁理士】

【氏名又は名称】伊藤 夏香

(72)【発明者】

【氏名】佐久間 昭弘

【審査官】 秦野 孝一郎

(56)【参考文献】

【文献】 特開２０１３−５１５３４（ＪＰ，Ａ）

【文献】 特開２００６−１９７４８０（ＪＰ，Ａ）

【文献】 特開２０１５−１１８００２（ＪＰ，Ａ）

【文献】 特開２００５−３５２６３１（ＪＰ，Ａ）

【文献】 特開２００４−２８０２０４（ＪＰ，Ａ）

【文献】 特開平５−２６０４７７（ＪＰ，Ａ）

【文献】 特開２００８−１１８４６６（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｈ０４Ｎ ７／１８

(57)【特許請求の範囲】

【請求項1】

計測デバイス群と画像を撮影するカメラ群とにネットワークを介して接続された録画サーバを具備し、
前記計測デバイス群が１又は複数の計測デバイスからなり、
前記カメラ群が１又は複数のカメラからなり、
前記録画サーバは、
前記カメラ群に画像を撮影させ撮影したカメラ画像を前記録画サーバに入力させるカメラ画像取得手段、
前記計測デバイス群にそれぞれ所定の計測をさせて計測データを前記録画サーバに入力させる計測データ取得手段、
入力させた前記計測データをデータベースに蓄積する計測データ保存手段、
蓄積した前記計測データに基づいて、画像に合成する計測情報及び／又はグラフ画像を形成して、入力させた前記カメラ画像から前記計測情報及び／又は前記グラフ画像を合成するためのカメラ画像を抽出し、抽出した前記カメラ画像に前記計測情報及び／又は前記グラフ画像を合成して、一次データとしてデータベースに蓄積する一次データ作成手段、
前記一次データから、合成された計測情報が所定の値の範囲である画像を抽出する画像抽出手段、
前記画像抽出手段で抽出された画像について、連続時間毎にスポット画像として一覧を作成して前記データベースに蓄積する一覧データ保存手段、
前記録画サーバにネットワークを介して接続され画像を表示する端末に前記一覧データを表示して前記端末から表示するスポット画像の選択を受け付けるスポット画像選択受付手段、
前記一次データから、選択された前記スポット画像の画像を検索し、検索されたスポット画像を前記端末に送信するスポット画像送信手段、
を有する
ことを特徴とする監視カメラシステム。

【請求項2】

前記録画サーバは、
前記端末から、スポット画像表示中に、スポット画像からの巻戻し要求を受け付けるスポット画像巻戻し受付手段、
前記巻戻し要求毎に、前記端末に前回送信した画像より一定時間分過去の時点の一次データを抽出して巻戻しスポット画像として前記端末に送信する巻戻しスポット画像送信手段前記端末から、巻戻しスポット画像からの早送り要求を受け付ける巻戻しスポット画像早送り受付手段、
前記早送り要求毎に、前記端末に前回送信した画像より一定時間分未来の時点の一次データを抽出して早送りスポット画像として前記端末に送信する早送りスポット画像送信手段、
をさらに有する
ことを特徴とする請求項１記載の監視カメラシステム。

【請求項3】

１又は複数の営業用の車両に搭載されたカメラ群及び計測デバイス群にネットワークを介して接続された録画サーバを具備し、
前記計測デバイス群が、少なくとも前記車両の速度を計測する計測デバイスを含み、
前記カメラ群が、前記車両の前方周囲の画像を掃影するカメラと前記車両の後方周囲の画像を撮影するカメラと前記車両の車内風景の画像を撮影するカメラとを含み、
前記録画サーバは、
前記カメラ群に画像を撮影させ撮影したカメラ画像を前記録画サーバに入力させるカメラ画像取得手段、
前記計測デバイス群にそれぞれ所定の計測をさせて計測データを前記録画サーバに入力させる計測データ取得手段、
入力させた前記計測データをデータベースに蓄積する計測データ保存手段、
蓄積した前記計測データに基づいて、画像に合成する速度情報を含む計測情報を形成して、入力させた前記カメラ画像から前記計測情報を合成するための第１のカメラ画像を抽出し、抽出した前記第１のカメラ画像に前記計測情報を合成し、かつ、前記第１のカメラ画像以外のカメラ画像から、前記第１のカメラ画像に合成させる１又は複数の合成用カメラ画像を抽出し、前記計測情報を合成した前記第１のカメラ画像に前記合成用カメラ画像を合成して、一次データとしてデータベースに蓄積する一次データ作成手段、
前記一次データから、合成された計測情報が所定の速度以上である画像を抽出する画像抽出手段、
前記画像抽出手段で抽出された画像について、連続時間毎にスポット画像の一覧を作成して前記データベースに蓄積する一覧データ保存手段、
前記録画サーバにネットワークを介して接続され画像を表示する端末に前記一覧データを表示して前記端末から表示するスポット画像の選択を受け付けるスポット画像選択受付手段、
前記一次データから、選択された前記スポット画像の画像を検索し、検索された画像をスポット画像として前記端末に送信するスポット画像送信手段、
前記端末から、スポット画像からの巻戻し要求を受け付けるスポット画像巻戻し受付手段、
前記巻戻し要求毎に、前記端末に前回送信した画像より一定時間分過去の時点の一次データを抽出して巻戻しスポット画像として前記端末に送信する巻戻しスポット画像送信手段、
前記端末から、巻戻しスポット画像からの早送り要求を受け付ける巻戻しスポット画像早送り受付手段、
前記早送り要求毎に、現時点の画像に達するまでは、前記端末に前回送信した画像より一定時間分未来の時点の一次データを抽出して早送りスポット画像として前記端末に送信する早送りスポット画像送信手段
を有する
ことを特徴とする監視カメラシステム。

【請求項4】

１又は複数の動植物育成場に搭載されたカメラ群及び計測デバイス群にネットワークを介して接続された録画サーバを具備し、
前記計測デバイス群が、少なくとも前記動植物育成場の環境値を計測する計測デバイスを含み、
前記カメラ群が、前記動植物育成場の場内の画像を撮影する１又は複数のカメラを含み、
前記録画サーバは、
前記カメラ群に画像を撮影させ撮影したカメラ画像を前記録画サーバに入力させるカメラ画像取得手段、
前記計測デバイス群にそれぞれ所定の計測をさせて計測データを前記録画サーバに入力させる計測データ取得手段、
入力させた前記計測データをデータベースに蓄積する計測データ保存手段、
蓄積した前記計測データに基づいて、画像に合成する環境値情報を含む計測情報と所定の時刻からの前記環境値情報の時系列グラフ画像とを形成して、入力させた前記カメラ画像から前記計測情報及び時系列グラフ画像を合成するための第１のカメラ画像を抽出し、抽出した前記第１のカメラ画像に前記計測情報及び前記時系列グラフ画像を合成するか、又は、抽出した前記第１のカメラ画像に前記計測情報及び前記時系列グラフ画像に加えて前記第１のカメラ画像以外のカメラ画像から前記第１のカメラ画像に合成させる１又は複数の合成用カメラ画像を抽出して前記合成用カメラ画像をも合成し、一次データとしてデータベースに蓄積する一次データ作成手段、
を有することを特徴とする監視カメラシステム。

【請求項5】

計測デバイス群と画像を撮影するカメラ群とにネットワークを介して接続された録画サーバが、前記カメラ群に画像を撮影させ撮影したカメラ画像を前記録画サーバに入力させるカメラ画像取得ステップ、
前記計測デバイス群にそれぞれ所定の計測をさせて計測データを前記録画サーバに入力させる計測データ取得ステップ、
入力させた前記計測データをデータベースに蓄積する計測データ保存ステップ、
蓄積した前記計測データに基づいて、画像に合成する計測情報及び／又はグラフ画像を形成して、入力させた前記カメラ画像から前記計測情報及び／又は前記グラフ画像を合成するためのカメラ画像を抽出し、抽出した前記カメラ画像に前記計測情報及び／又は前記グラフ画像を合成して、一次データとしてデータベースに蓄積する一次データ作成ステップ、
前記一次データから、合成された計測情報が所定の値の範囲である画像を抽出するステップ
を含むことを特徴とする監視方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、防犯や管理等のために、撮影した画像やデータを蓄積し、端末に表示させる監視カメラシステム及び監視方法に関する。

【背景技術】

【0002】

従来、防犯や調査あるいは管理といった目的で、集合住宅などの建物の出入口や店頭あるいは街頭、工場や配送センター等、監視対象となるポイントを監視用カメラにより適時監視し、監視結果をインターネットその他電気通信回線を介して、ユーザ端末のモニターに送出し、モニターするカメラシステムが導入されている。静止画を撮影して表示するカメラシステムも開発されているが（例えば、特許文献１参照）、一般には、カメラで撮影した動画を記録するシステムの方が知られている（例えば、特許文献２参照）。さらに、異常事態をセンサが検出したときに撮影を開始するセキュリティシステムも知られている（例えば、特許文献３参照）。また、テレビの放送などでは、動画ファイルの再生時に別に作成したテキスト情報（例えば地震速報等）を一緒に表示する方法が知られている。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０１３−５１５３４号公報

【特許文献2】特開２００２−７７８８２号公報

【特許文献3】特開２００６−１９０２９４号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかし、例えば、事故が発生したときや実験が成功あるいは失敗したときにその原因を究明したい場合、従来のセキュリティシステムでは、異常事態をセンサが検出してから撮影するため、事故後の状況や失敗した後の状況は把握できるものの、事故原因や実験の成功要因あるいは失敗の原因を検証することができないという問題があった。

【0005】

また、撮影した静止画あるいは動画の画像から作成し保存したファイルの再生時に別に作成した計測データからのテキスト情報を表示する従来の方法では、画像の撮影時に測定した計測データやそのデータを二次的に加工したグラフ等を、画像取得直後にほぼリアルタイムで画像を表示することはできないという問題があった。また、画像取得直後における画像の再生・巻戻し・早送りの際に、計測データやグラフのファイルについて別途、再生等されている画像に合わせて表示する処理が必要となるため、データ処理のための容量を要し処理時間やコストがかかり、また端末において再生等の操作を行ってから再生等が実行されるまでに時間がかかるという問題があった。

【0006】

特に、近年、従来の方法では処理が困難な程に量が膨大で多種類に渡るいわゆるビッグデータを活用しようとする流れの中で、犯罪防止や道路状況把握や原因究明等の面でビッグデータの可視化を考えたとき、上述した従来の方法では処理に容量や時間がかかりすぎ、モニター表示する端末への送信データ量が大きくなりすぎ、タイムラグやフリーズ状態が生じやすくなり、実現困難であるという問題があった。また、ビッグデータの可視化をしようとすると、モニター表示する端末への送信データ量が大きくなるため、モニタールーム等、大容量のコンピュータがあるところで監視しなければならず、場所を移動しながらの作業の傍らでチェックするということが困難で、負担が大きいという問題があった。また、従来の方法では、画像取得直後にほぼリアルタイムで特定のデータ値から画像検索して画像の再生・巻戻し・早送りをすることが困難であるという問題があった。

【0007】

したがって、本発明の第１の目的は、上記した課題を解決し、撮影した画像と、計測データ類から得られる情報及び／又は他の画像を連動させた状態で、ほぼリアルタイムでの再生や巻き戻しや早送りができ、かつデータ量が小さく低コスト化を可能とする監視カメラシステム及び監視方法を提供することにある。また、本発明の第２の目的は、さらに、特定のデータ値を記録した時点の画像からの再生や巻き戻しや早送りも手軽にできる監視カメラシステム及び監視方法を提供することにある。

【課題を解決するための手段】

【0008】

本発明の発明者は、ビッグデータの可視化を念頭に置いて、撮影して保存した静止画・動画の画像の再生時に各種計測データを重ね合わせるのではなく、撮影した画像を保存してから加工するという監視カメラの常識を捨て、多様な応用を考慮し、試行錯誤のうえ、本発明を完成させたものである。

【0009】

本発明の第１の態様は、上記目的を達成するため、計測デバイス群と画像を撮影するカメラ群とにネットワークを介して接続された録画サーバを具備し、
前記計測デバイス群が１又は複数の計測デバイスからなり、
前記カメラ群が１又は複数のカメラからなり、
前記録画サーバは、
前記カメラ群に画像を撮影させ撮影したカメラ画像を前記録画サーバに入力させるカメラ画像取得手段、
前記計測デバイス群にそれぞれ所定の計測をさせて計測データを前記録画サーバに入力させる計測データ取得手段、
入力させた前記計測データをデータベースに蓄積する計測データ保存手段、
蓄積した前記計測データに基づいて、画像に合成する計測情報及び／又はグラフ画像を形成して、入力させた前記カメラ画像から前記計測情報及び／又は前記グラフ画像を合成するためのカメラ画像を抽出し、抽出した前記カメラ画像に前記計測情報及び／又は前記グラフ画像を合成して、一次データとしてデータベースに蓄積する一次データ作成手段、
を有することを特徴とする監視カメラシステムを提供する。

【0010】

本発明の第１の態様によれば、カメラ画像に計測データに基づく計測情報やグラフ画像を合成したうえで一次データが作成されるため、撮影した画像と計測データ類から得られる情報とを連動させた状態で、ほぼリアルタイムでの再生ができ、かつデータ量が小さく低コスト化を可能とする。また、一次データの画像に予め計測情報やグラフ画像が合成されているため、計測情報やグラフ情報を合成した状態で、巻き戻しや早送りができる。さらに、再生・巻戻し・早送りといった操作に対し、レスポンスを素早くすることができる。また、録画サーバからの指示でカメラからのデータ取得を行うので、サーバ側から撮影から送信まで全てコントロールでき、カメラ側にサーバ機能を持たせる必要がなく、ネットワーク上に同時に流れるデータ量が少なく、多台数のカメラを同一ネットワーク上に設置することが可能となる。また、データ転送量が少ないために、画像のクオリティを高く保つことができ、またインターネット回線等を経由してクラウドサーバでのデータ蓄積も可能となる。また、ほぼリアルタイムで画像を見ているときでも、見落とし等気付いたとき、そのまま巻き戻して見直すことで、さかのぼって確認でき、また、過去から現時点までの画像を早送りで確認しながら行うことができる。

【0011】

前記計測デバイス群は、シリアル接続計測デバイス及びＨＴＴＰ接続計測デバイス及びＦＴＰ接続計測デバイスのうち１又は複数種類であることが好ましい。

【0012】

本発明において、「ネットワーク」には、ＬＡＮやインターネット、Ｗｉ−Ｆｉ回線、３Ｇ／ＬＴＥ回線、専用線等の通信網及びそれらの組合せから構成されるネットワークを含む。前記カメラ群は、静止画を撮影するカメラ群及び動画を撮影するカメラ群のいずれか又は両方であって、前記カメラ群に撮影させる画像が、静止画及び動画のいずれか又は両方であってもよい。各カメラは、出力機能と、静止画撮影機能及び／又は動画撮影機能を有する。カメラはＩＰカメラであることが好ましいが、アナログカメラでも可能である。静止画を撮影するカメラ群から取得した画像について、動画への圧縮形式は、現時点で高圧縮であるＨ．２６４であることがさらに好ましい。軽量で、ハードウェア、ソフトウェアいずれであっても実装が容易である。また、前記カメラ群のうち、動画を撮影するカメラは、前記録画サーバとＬＡＮネットワークで接続されていることが好ましい。なお、録画サーバはクラウドサーバであってもよい。

【0013】

さらに、前記録画サーバにネットワークを介して接続され画像を表示する端末を具備し、
前記録画サーバは、
前記端末から、画像を表示するカメラの選択を受け付けるライブ合成画像選択受付手段、
前記ライブ合成画像選択受付手段で選択されたカメラについて、前記一次データの画像をライブ合成画像として前記端末に送信するライブ合成画像送信手段、
前記端末から、ライブ合成画像からの巻戻し要求を受け付けるライブ合成画像巻戻し受付手段、
前記巻戻し要求毎に、前記端末に前回送信した画像より一定時間分過去の時点の一次データを抽出して巻戻しライブ合成画像として前記端末に送信する巻戻しライブ合成画像送信手段、
前記端末から、巻戻しライブ合成画像からの早送り要求を受け付ける巻戻しライブ合成画像早送り受付手段、
前記早送り要求毎に、現時点の画像に達するまでは、前記端末に前回送信した画像より一定時間分未来の時点の一次データを抽出して早送りライブ合成画像として前記端末に送信する早送りライブ合成画像送信手段、
を有し、
前記端末は、
前記録画サーバから送信された画像を表示する画像表示手段、
ライブ合成画像表示中に、カメラから録画サーバへのカメラ画像取得間隔毎に、ライブ合成画像を前記録画サーバに要求するライブ合成画像要求手段、
ライブ合成画像表示中に、巻戻し要求の入力を受け付け、巻戻しライブ合成画像を前記録画サーバに要求する巻戻し開始要求手段、
巻戻しライブ合成画像表示中に、ライブ合成画像の要求間隔より短い一定時間毎に、巻戻しライブ合成画像を前記録画サーバに要求する巻戻し継続要求手段、
巻戻しライブ合成画像表示中に、早送り要求の入力を受け付け、早送りライブ合成画像を前記録画サーバに要求する巻戻しライブ合成画像早送り開始要求手段、
早送りライブ合成画像表示中に、ライブ合成画像の要求間隔より短い一定時間毎に、早送りライブ合成画像を前記録画サーバに要求する巻戻しライブ合成画像早送り継続要求手段、
を有することが好ましい。本発明において、「ライブ合成画像」は、ほぼリアルタイムの一次データの画像を示す。

【0014】

カメラ画像に、予め、計測データに基づく計測情報やグラフ画像を合成した一次データを送信するため、送信するデータ量が少なくて済み、したがって、撮影した画像と、計測データ類から得られる情報及び／又は他の画像を連動させた状態で、端末において、ほぼリアルタイムでの再生や巻き戻しや早送りができる。また可能な機能の多さや利便性に比して低コストを実現できる。

【0015】

さらに、
前記録画サーバは、
前記一次データから、合成された計測情報が所定の値の範囲である画像を抽出する画像抽出手段、
前記画像抽出手段で抽出された画像について、連続時間毎にスポット画像として一覧を作成して前記データベースに蓄積する一覧データ保存手段、
前記端末に前記一覧データを表示して前記端末から表示するスポット画像の選択を受け付けるスポット画像選択受付手段、
前記一次データから、選択された前記スポット画像の画像を検索し、検索されたスポット画像を前記端末に送信するスポット画像送信手段、
を有することが好ましい。

【0016】

さらに、
前記録画サーバは、
前記端末から、スポット画像表示中に、スポット画像からの巻戻し要求を受け付けるスポット画像巻戻し受付手段、
前記巻戻し要求毎に、前記端末に前回送信した画像より一定時間分過去の時点の一次データを抽出して巻戻しスポット画像として前記端末に送信する巻戻しスポット画像送信手段、
前記端末から、巻戻しスポット画像からの早送り要求を受け付ける巻戻しスポット画像早送り受付手段、
前記早送り要求毎に、前記端末に前回送信した画像より一定時間分未来の時点の一次データを抽出して早送りスポット画像として前記端末に送信する早送りスポット画像送信手段
を有し、
前記端末は、
前記録画サーバから送信されたスポット画像を表示するスポット画像表示手段、
スポット画像表示中に、巻戻し要求の入力を受け付け、スポット画像を前記録画サーバに要求する巻戻し開始要求手段、
巻戻しスポット画像表示中に、スポット画像の要求間隔より短い一定時間毎に、巻戻しスポット成画像を前記録画サーバに要求する巻戻し継続要求手段、
巻戻しスポット画像表示中に、早送り要求の入力を受け付け、早送りスポット画像を前記録画サーバに要求する巻戻しスポット画像早送り開始要求手段、
早送りスポット画像表示中に、スポット画像の要求間隔より短い一定時間毎に、早送りスポット画像を前記録画サーバに要求する巻戻しスポット画像早送り継続要求手段
を有することが好ましい。撮影した画像と、計測データ類から得られる情報及び／又は他の画像を連動させた状態で、ほぼリアルタイムでの再生や巻き戻しや早送りができ、かつデータ量が小さく低コスト化を可能とするのみならず、さらに、特定のデータ値を記録した時点の画像からの再生や巻き戻しや早送りも手軽にできる。

【0017】

本発明の第２の態様は、上記目的を達成するため、画像を撮影するカメラ群にネットワークを介して接続された録画サーバと、前記録画サーバにネットワークを介して接続され画像を表示する端末とを具備し、
前記カメラ群が複数のカメラからなり、
前記録画サーバは、
前記カメラ群に画像を撮影させ撮影したカメラ画像を前記録画サーバに入力させるカメラ画像取得手段、
入力させた前記カメラ画像から、他の画像を合成させる第１のカメラ画像と、前記第１のカメラ画像に合成させる１又は複数の合成用カメラ画像とを抽出し、抽出した前記第１のカメラ画像に前記合成用カメラ画像を合成して、一次データとしてデータベースに蓄積する一次データ作成手段、
を有することを特徴とする監視カメラシステムを提供する。

【0018】

本発明の第２の態様によれば、第１のカメラ画像に他のカメラ画像を合成したうえで一次データが作成されるため、撮影した第１のカメラ画像と他のカメラ画像を連動させた状態で、ほぼリアルタイムでの再生ができ、かつデータ量が小さく低コスト化を可能とする。また、一次データの画像に予め複数のカメラ画像が合成されているため、合成した状態で、巻き戻しや早送りができる。さらに、再生・巻戻し・早送りといった操作に対し、レスポンスを素早くすることができる。多数のカメラの画像を１つの画面内で１つの合成画像として再生することを実現できる。

【0019】

また、本発明の第３の態様は、１又は複数の営業用の車両に搭載されたカメラ群及び計測デバイス群にネットワークを介して接続された録画サーバと、前記録画サーバにネットワークを介して接続され画像を表示する端末を具備する監視カメラシステムであって、
前記計測デバイス群が、少なくとも前記車両の速度を計測する計測デバイスを含み、
前記カメラ群が、前記車両の前方周囲の画像を撮影するカメラと前記車両の後方周囲の画像を撮影するカメラと前記車両の車内風景の画像を撮影する１又は複数のカメラとを含み、
前記録画サーバは、
前記カメラ群に画像を撮影させ撮影したカメラ画像を前記録画サーバに入力させるカメラ画像取得手段、
前記計測デバイス群にそれぞれ所定の計測をさせて計測データを前記録画サーバに入力させる計測データ取得手段、
入力させた前記計測データをデータベースに蓄積する計測データ保存手段、
蓄積した前記計測データに基づいて、画像に合成する速度情報を含む計測情報を形成して、入力させた前記カメラ画像から前記計測情報を合成するための第１のカメラ画像を抽出し、抽出した前記第１のカメラ画像に前記計測情報を合成し、かつ、前記第１のカメラ画像以外のカメラ画像から、前記第１のカメラ画像に合成させる１又は複数の合成用カメラ画像を抽出し、前記計測情報を合成した前記第１のカメラ画像に前記合成用カメラ画像を合成して、一次データとしてデータベースに蓄積する一次データ作成手段、
前記一次データから、合成された計測情報が所定の速度以上である画像を抽出する画像抽出手段、
前記画像抽出手段で抽出された画像について、連続時間毎にスポット画像の一覧を作成して前記データベースに蓄積する一覧データ保存手段、
前記端末に前記一覧データを表示して前記端末から表示するスポット画像の選択を受け付けるスポット画像選択受付手段、
前記一次データから、選択された前記スポット画像の画像を検索し、検索された画像をスポット画像として前記端末に送信するスポット画像送信手段、
前記端末から、スポット画像からの巻戻し要求を受け付けるスポット画像巻戻し受付手段、
前記巻戻し要求毎に、前記端末に前回送信した画像より一定時間分過去の時点の一次データを抽出して巻戻しスポット画像として前記端末に送信する巻戻しスポット画像送信手段、
前記端末から、巻戻しスポット画像からの早送り要求を受け付ける巻戻しスポット画像早送り受付手段、
前記早送り要求毎に、現時点の画像に達するまでは、前記端末に前回送信した画像より一定時間分未来の時点の一次データを抽出して早送りスポット画像として前記端末に送信する早送りスポット画像送信手段
を有し、
前記端末は、
前記録画サーバから送信されたスポット画像を表示するスポット画像表示手段、
スポット画像表示中に、巻戻し要求の入力を受け付け、スポット画像を前記録画サーバに要求する巻戻し開始要求手段、
巻戻しスポット画像表示中に、スポット画像の要求間隔より短い一定時間毎に、巻戻しスポット成画像を前記録画サーバに要求する巻戻し継続要求手段、
巻戻しスポット画像表示中に、早送り要求の入力を受け付け、早送りスポット画像を前記録画サーバに要求する巻戻しスポット画像早送り開始要求手段、
早送りスポット画像表示中に、スポット画像の要求間隔より短い一定時間毎に、早送りスポット画像を前記録画サーバに要求する巻戻しスポット画像早送り継続要求手段、
を有することを特徴とする監視カメラシステムを提供する。

【0020】

本発明の第３の態様によれば、第１のカメラ画像に計測した速度情報を含む計測情報及び他のカメラ画像を合成したうえで一次データが作成されるため、撮影した第１のカメラ画像と速度を含む計測情報と他のカメラ画像を連動させた状態で、ほぼリアルタイムでの再生ができ、かつデータ量が小さく低コスト化を可能とする。また、一次データの画像に予め計測情報と複数のカメラ画像が合成されているため、合成した状態で、巻き戻しや早送りができる。さらに、再生・巻戻し・早送りといった操作に対し、レスポンスを素早くすることができる。さらに、所定の速度を記録した時点の画像からの再生や巻き戻しや早送りも手軽にできる。

【0021】

また、本発明の第４の態様は、１又は複数の動植物育成場に搭載されたカメラ群及び計測デバイス群にネットワークを介して接続された録画サーバと、前記録画サーバにネットワークを介して接続され画像を表示する端末を具備する監視カメラシステムであって、
前記計測デバイス群が、少なくとも前記動植物育成場の環境値を計測する計測デバイスを含み、
前記カメラ群が、前記動植物育成場の場内の画像を撮影する１又は複数のカメラを含み、
前記録画サーバは、
前記カメラ群に画像を撮影させ撮影したカメラ画像を前記録画サーバに入力させるカメラ画像取得手段、
前記計測デバイス群にそれぞれ所定の計測をさせて計測データを前記録画サーバに入力させる計測データ取得手段、
入力させた前記計測データをデータベースに蓄積する計測データ保存手段、
蓄積した前記計測データに基づいて、画像に合成する環境値情報を含む計測情報と所定の時刻からの前記環境値情報の時系列グラフ画像とを形成して、入力させた前記カメラ画像から前記計測情報及び時系列グラフ画像を合成するための第１のカメラ画像を抽出し、抽出した前記第１のカメラ画像に前記計測情報及び前記時系列グラフ画像を合成するか、又は、抽出した前記第１のカメラ画像に前記計測情報及び前記時系列グラフ画像に加えて前記第１のカメラ画像以外のカメラ画像から前記第１のカメラ画像に合成させる１又は複数の合成用カメラ画像を抽出して前記合成用カメラ画像をも合成し、一次データとしてデータベースに蓄積する一次データ作成手段、
を有することを特徴とする監視カメラシステムを提供する。

【0022】

本発明の第４の態様によれば、第１のカメラ画像に計測した環境値を含む計測情報や計測した環境値等に基づくグラフ画像又はこれらに加えて他のカメラ画像を合成したうえで一次データが作成されるため、撮影した第１のカメラ画像と計測データ類から得られる情報又はこれらに加えて他のカメラ画像を連動させた状態で、ほぼリアルタイムでの再生ができ、かつデータ量が小さく低コスト化を可能とする。また、一次データの画像に予め計測情報やグラフ等の画像が合成されているため、合成した状態で、巻き戻しや早送りができる。さらに、再生・巻戻し・早送りといった操作に対し、レスポンスを素早くすることができる。

【0023】

また、本発明の第５の態様は、計測デバイス群と画像を撮影するカメラ群とにネットワークを介して接続された録画サーバが、前記カメラ群に画像を撮影させ撮影したカメラ画像を前記録画サーバに入力させるカメラ画像取得ステップ、
前記計測デバイス群にそれぞれ所定の計測をさせて計測データを前記録画サーバに入力させる計測データ取得ステップ、
入力させた前記計測データをデータベースに蓄積する計測データ保存ステップ、
蓄積した前記計測データに基づいて、画像に合成する計測情報及び／又はグラフ画像を形成して、入力させた前記カメラ画像から前記計測情報及び／又は前記グラフ画像を合成するためのカメラ画像を抽出し、抽出した前記カメラ画像に前記計測情報及び／又は前記グラフ画像を合成して、一次データとしてデータベースに蓄積する一次データ作成ステップ、
を含むことを特徴とする監視方法を提供する。

【0024】

本発明の第５の態様によれば、カメラ画像に計測データに基づく計測情報やグラフ画像を合成したうえで一次データが作成されるため、撮影した画像と計測データ類から得られる情報とを連動させた状態で、ほぼリアルタイムでの再生ができ、かつデータ量が小さく低コスト化を可能とする。また、一次データの画像に予め計測情報やグラフ画像が合成されているため、計測情報やグラフ情報を合成した状態で、巻き戻しや早送りができる。さらに、再生・巻戻し・早送りといった操作に対し、レスポンスを素早くすることができる。また、録画サーバからの指示でカメラからのデータ取得を行うので、サーバ側から撮影から送信まで全てコントロールでき、カメラ側にサーバ機能を持たせる必要がなく、ネットワーク上に同時に流れるデータ量が少なく、多台数のカメラを同一ネットワーク上に設置することが可能となる。また、データ転送量が少ないために、画像のクオリティを高く保つことができ、インターネット回線等を経由してクラウドサーバでのデータ蓄積も可能となる。また、ほぼリアルタイムで画像を見ているときでも、見落とし等気付いたとき、そのまま巻き戻して見直すことで、さかのぼって確認でき、また、過去から現時点までの画像を早送りで確認しながら行うことができる。

【発明の効果】

【0025】

本発明によれば、撮影した画像と、計測データ類から得られる情報及び／又は他の画像を連動させた状態で、ほぼリアルタイムでの再生や巻き戻しや早送りができ、かつデータ量が小さく低コスト化を可能とする。

【図面の簡単な説明】

【0026】

【図1】本発明の監視カメラシステムの実施例１のネットワーク構成の一例を示す図である。

【図2】本発明の監視カメラシステムの実施例１の録画サーバの構成図である。

【図3】本発明の監視カメラシステムの実施例１の端末（モバイル）の構成図である。

【図4】本発明の監視カメラシステムの実施例１の端末（ＰＣ）の構成図である。

【図5】本発明の監視カメラシステムの実施例１の計測デバイス（ＨＴＴＰ接続）の構成図である。

【図6】本発明の監視カメラシステムの実施例１の計測デバイス（ＨＴＴＰ接続）から録画サーバへのデータ送信のイメージ図である。

【図7】本発明の監視カメラシステムの実施例１の計測デバイス（ＦＴＰ接続）の構成図である。

【図8】本発明の監視カメラシステムの実施例１の計測デバイス（ＦＴＰ接続）から録画サーバへのデータ送信のイメージ図である。

【図9】本発明の監視カメラシステムの実施例１の計測デバイス（シリアル接続）の構成図である。

【図10】本発明の監視カメラシステムの実施例１におけるカメラ（静止画撮影）と録画サーバとの接続から画像編集までの手順概要を示すフロー図である。

【図11】本発明の監視カメラシステムの実施例１におけるカメラ（動画撮影）と録画サーバとの接続から画像編集までの手順概要を示すフロー図である。

【図12】本発明の監視カメラシステムの実施例１における計測デバイス（ＨＴＴＰ接続）と録画サーバとの接続からデータ保存までの手順概要を示すフロー図である。

【図13】本発明の監視カメラシステムの実施例１における計測デバイス（ＦＴＰ接続）と録画サーバとの接続からデータ保存までの手順概要を示すフロー図である。

【図14】本発明の監視カメラシステムの実施例１における計測デバイス（シリアル接続）と録画サーバとの接続からデータ保存までの手順概要を示すフロー図である。

【図15】本発明の監視カメラシステムの実施例１におけるカメラ画像に計測情報を合成する合成ステップを示すフロー図である。

【図16】本発明の監視カメラシステムの実施例１におけるカメラ画像にグラフ画像を合成する合成ステップを示すフロー図である。

【図17】本発明の監視カメラシステムの実施例１におけるカメラ画像に他のカメラ画像を合成する合成ステップを示すフロー図である。

【図18】本発明の監視カメラシステムの実施例２における合成例を示す説明図である。

【図19】本発明の監視カメラシステムの実施例３における合成例を示す説明図である。

【発明を実施するための形態】

【0027】

以下、本発明について、実施例を用いて本発明を具体的に説明するが、本発明はこれらに限定されるものではない。

【実施例1】

【0028】

本実施例は、ネットワークを介して録画サーバで監視用カメラを作動させて、録画サーバが動画及び静止画のカメラ画像を撮影・収集し、また、ネットワークを介して録画サーバに接続された計測デバイスから計測データを収集・保存し、撮影したカメラ画像に、計測データから得られる計測情報やグラフ画像や他のカメラ画像を合成して編集した合成画像を作成して保存し、録画サーバがユーザの端末に端末からの要求に応じてネットワークを介してモニターする画像を送信するもので、過去の合成画像の再生・巻戻し・早送りもライブ合成画像の再生・巻戻し・早送りもリライブ再生も行うものである。本実施例では、さらに、計測デバイスで特定の値を記録した時点の画像を呼び出して再生・巻戻し・早送りも行うものである。したがって、本実施例では、画像を元にしたプラットフォームを作ることを実現できる。例えば、ある作業室において、計測データの一つである湿度が急に１０％に落ちてしまった際に、従来は、計測したデータを後から分析して発生時刻を調べ、その時刻の画像を別途抽出して再生が可能となるため、時間がかかり、さらに、その後の状況だけでなくその原因を知るにはさらなる解析が必要であった。しかし、本実施例によれば、湿度が１０％に落ちてしまったときに即時にその時点の画像をメール等で送信することができ、さらにその後の再生だけでなく巻戻しもできるので、どういう作業で湿度が１０％に落ちてしまったかをすぐに知ることができる。したがって、本実施例によれば、これまで瞬時に活用することが難しかったビッグデータを、瞬時に業務へ活用することを促進できる。

【0029】

｛構成｝
図１は、本発明の監視カメラシステムの実施例１のネットワーク構成の一例を示す図である。ＬＡＮやインターネット、Ｗｉ−Ｆｉ回線、３Ｇ／ＬＴＥ回線、専用線等の通信網の組み合わせから構成されるネットワーク５００上には、（１）画像を撮影するカメラとして、複数台の監視用カメラ４００Ａ〜Ｄ、（２）ネットワーク５００を介して監視用カメラ４００と接続され、カメラで撮影した画像データを取得し蓄積し端末に送信する録画サーバとして、録画サーバ１００、（３）ネットワーク５００を介して録画サーバ１００と接続され、録画サーバ１００からの画像データを受信して表示する端末として、スマートフォンなどのモバイル端末２００Ａ、Ｂや、デスクトップＰＣ（パーソナルコンピュータ）やノートＰＣなどの閲覧ＰＣ３００Ａ〜Ｃ、（４）ネットワーク５００を介して録画サーバ１００とＨＴＴＰ接続されたＨＴＴＰ接続計測デバイス７００Ａ〜Ｃや、ネットワーク５００を介して録画サーバ１００とＦＴＰ接続されたＦＴＰ接続計測デバイス８００Ａ〜Ｃや、専用線で録画サーバ１００とシリアル接続されたシリアル接続計測デバイス９００が接続されている。各計測デバイスから録画サーバ１００に送信されるデータは録画サーバ１００のデバイス計測情報データベースに格納される。図１中では、ＦＴＰ接続計測デバイス８００で計測されたデータが録画サーバ１００で収集されデバイス計測情報データベースの中のＦＴＰ転送先フォルダに格納されることを点線矢印で図示している。なお、以下、モバイル端末と閲覧ＰＣとをまとめるときは、「端末」又は「Ｖｉｅｗｅｒ」という。

【0030】

録画サーバ１００は、動画を撮影する監視用カメラ４００と同じＬＡＮ内に存在するが、静止画を撮影する監視用カメラ４００が同じＬＡＮ内に存在する場合に限らず、インターネットやＬＡＮ等、複数のネットワークを介して接続されていてもよい。また、同じネットワーク上に複数の録画サーバがあってもよい。本実施例では、監視用カメラ４００と録画サーバ１００との通信がＴＣＰ／ＩＰ方式で、静止画を撮影する監視用カメラ４００では、同じＬＡＮ内にカメラと録画サーバが存在しなくても、確実に画像データの送受信ができ、信頼性が高い。監視用カメラ４００は、本実施例ではＩＰカメラであるが、静止画を撮影する監視用カメラについてはアナログカメラでもよい。画像表示用の端末である閲覧ＰＣ３００も、録画サーバ１００と同じＬＡＮ内に存在する場合に限らず、インターネットやＬＡＮやＷｉ-Ｆｉ回線等、複数のネットワークを介して接続されていてもよい。画像表示用の端末であるモバイル端末２００についても、ＬＡＮ、インターネット、携帯電話用ネットワーク（Ｗｉ−Ｆｉ回線や３Ｇ／ＬＴＥ回線等）等、複数のネットワークを介して接続されていてもよい。ＨＴＴＰ接続計測デバイス７００も、録画サーバ１００と同じＬＡＮ内に存在する場合に限らず、インターネットやＬＡＮ等、複数のネットワークを介して接続されていてもよい。ＦＴＰ接続計測デバイス７００も、録画サーバ１００と同じＬＡＮ内に存在する場合に限らず、インターネットやＬＡＮや３Ｇ／ＬＴＥ回線等、複数のネットワークを介して接続されていてもよい。なお、ＬＡＮとインターネット間やＨＴＴＰ接続計測デバイスとインターネット間や静止画を撮影する監視用カメラとインターネット間はルータ６００を介する。計測デバイス群は、数値データを取得するものの他、例えば、二酸化炭素濃度が所定以上で信号を取得するような、センサ等であってもよい。本実施例では、計測デバイス群は、１台のシリアル接続計測デバイス及び複数台のＨＴＴＰ接続計測デバイス及び複数台のＦＴＰ接続計測デバイスであるが、計測デバイスの台数はこれに限らず、また３種類すべての計測デバイスを含まなくてもよく、シリアル接続計測デバイス及びＨＴＴＰ接続計測デバイス及びＦＴＰ接続計測デバイスのうち１又は複数種類であってもよい。録画サーバと計測デバイスとの接続方法については、上述した３種類のいずれかあるいはそれらの組合せが好ましいが、他の方法でもよい。

【0031】

１台の録画サーバ１００は、複数台の計測デバイス７００、８００、９００から計測データを取得することができ、複数台の監視カメラ４００から画像を取得することができる。従来のＩＰカメラシステムでは、１つの同容量の録画サーバで管理できるカメラの台数はＩＰカメラで２０台程度であるが、本実施例では、静止画を撮影する監視カメラだけであれば、１秒に１回録画する場合でも、同一ネットワーク環境において、１００台のＩＰカメラの接続が可能である。したがって、コスト削減と大規模監視を同時に可能とする。また、録画サーバ側がネットワークトラフィックを自動的に分散させるので、ネットワーク設計が不要で、カメラをポートに繋ぐだけで済むため、作業が非常に簡便となる。

【0032】

図２は、本発明の監視カメラシステムの実施例１の録画サーバの構成図である。録画サーバ１００は、キャッシュメモリであるメモリ１０２を伴うＣＰＵ１０１やデバイスドライバ等を有する制御・演算装置と、ＤＲＡＭ等の主記憶装置やハードディスク等の補助記憶装置を有する記憶装置１１０と、ネットワークインターフェース１０４等の通信制御装置や表示装置としてのディスプレイ１０３、キーボード１０５、マウス１０６、シリアル接続計測デバイス９００とシリアル接続するためのＲＳ２３２Ｃ／ＲＳ４８５シリアルデバイス１０７等で構成される入出力装置とを備えている。記憶装置１１０には、一次画像フォルダ１１１と二次映像フォルダ１１２とデバイス計測情報データベース１１５と撮影・収集・編集・送信プログラム１１３と認証用データベースと環境設定フォルダ等の他、オペレーティングシステム１１４が格納されている。撮影・収集・編集・送信プログラム１１３は、通常、記憶装置１１０の補助記憶装置に格納されており、実行時には主記憶装置にロードされる。一次画像フォルダ１１１には、カメラ画像に計測データに基づく計測情報やグラフ画像や他のカメラ画像を合成して圧縮したファイルを一次データとして蓄積し、二次映像フォルダ１１２には、一次画像フォルダ１１１内に蓄積された一定時間分の一次データを動画圧縮変換して二次データとして蓄積する。認証用データベースには、ＩＤ、パスワード、各監視用カメラ４００やモバイル端末２００や閲覧ＰＣ３００やＨＴＴＰ計測デバイス７００やＦＴＰ計測デバイス８００やシリアル計測デバイス９００のポート番号とＩＰアドレス、ＩＰアドレスのない端末では個体識別情報（ＵＩＤ）が蓄積されている。本実施例では、録画サーバ１００は、録画サーバと端末が一体となっており、自ら画像を表示する端末の役割も果たすため、また、メンテナンスや管理のため、ディスプレイ１０３、また入力手段としてのキーボード１０５やマウス１０６を有している。録画サーバでカメラ画像の再生を要しない場合は、画像表示装置としての端末機能はなくてもよい。環境設定フォルダには、各監視用カメラの画像取得タイミング、計測データ取得タイミング、カメラ画像に計測データに基づく計測情報やグラフ画像や他のカメラ画像を合成するレイアウト等の条件、一次画像データや二次画像データの作成間隔、圧縮条件等が蓄積されている。録画サーバ１００は、設置型のサーバであるが、クラウドサーバであってもよい。

【0033】

録画サーバ１００は、ＣＰＵ１０１が、撮影・収集・編集・送信プログラム１１３をメモリ１０２にロードして実行することにより本発明のカメラ画像取得、計測データ取得、カメラ画像と計測情報等との合成編集保存及び端末への画像送出処理が可能なコンピュータの機能を実現する。ＣＰＵ１０１は、通常のコンピュータに搭載する演算処理装置であり、各種プログラムを実行し、各種制御等を行う。

【0034】

録画サーバ１００は、１台のサーバとする他、複数のサーバからなるサーバ群であってもよい。例えば、二次映像フォルダについて、一定期間（例えば２４時間）経過後の二次データについては、保存先を、カメラ画像を取得する録画サーバと別の録画サーバに設けた二次映像フォルダとしてもよい。頻繁には再生しない過去の保存データを別にすることで、さらに多くの台数のカメラを同一ネットワーク上で監視可能となる。

【0035】

撮影・収集・編集・送信プログラムは、コンピュータに、監視用カメラとの接続を行うカメラ接続機能、計測デバイスとの接続を行う計測デバイス接続機能、端末との接続を行う端末接続機能、一定時間（例えば１秒）毎に、接続した静止画撮影用の監視用カメラに静止画を撮影させ撮影したカメラ画像を録画サーバに入力させる静止画のカメラ画像取得機能、一定時間（例えば１０秒）ずつ、接続した動画撮影用の監視用カメラに動画を連続撮影させ撮影したカメラ画像を録画サーバに入力させる動画のカメラ画像取得機能、計測デバイスから計測データを取得する計測データ取得機能、取得した計測データを保存する計測データ保存機能、取得したカメラ画像に計測データに基づく計測情報やグラフ画像や他のカメラ画像を合成して圧縮して一次データを作成し蓄積する一次データ作成機能を実現させるためのプログラムである。一次データ作成機能は、詳細には、取得したカメラ画像から抽出した同時刻の第１の画像をメモリ１０２上に展開し、数値情報やグラフ画像を合成する場合にはデータベースに保存された計測データから合成する数値情報やグラフを形成して数値情報やグラフ画像を同じくメモリ１０２上に展開し、他のカメラ画像を合成する場合には合成するカメラ画像を抽出して同じくメモリ１０２上に展開し、それらを合成して合成画像を作成してメモリ１０２上に展開し、圧縮して一次データとして記憶装置１１０の一次画像フォルダ１１１に蓄積する機能である。

【0036】

本実施例では、撮影・収集・編集・送信プログラムは、より好ましい態様として、さらに、コンピュータに、端末にカメラ一覧を表示して端末からのカメラの選択を受け付ける画像選択受付機能、選択されたカメラについて一次データの画像をライブ合成画像として端末に送信するライブ合成画像送信機能、端末よりライブ合成画像からの巻戻し要求を受け付けるライブ合成画像巻戻し受付機能、巻戻し要求毎に、端末に前回送信した画像より一定時間分（例えば１秒分）過去の時点の一次データを抽出して巻戻しライブ合成画像として端末に送信する巻戻しライブ合成画像送信機能、端末より巻戻しライブ合成画像からの早送り要求を受け付ける巻戻しライブ合成画像早送り受付機能、早送り要求毎に、現時点の画像に達するまでは、端末に前回送信した画像より一定時間分（例えば１秒分）未来の時点の一次データを抽出して早送りライブ合成画像として端末に送信する早送りライブ合成画像送信機能をも実現させるためのプログラムである。「現時点の画像」とは、監視用カメラから取得した最新の画像を意味する。したがって、現時点の画像は、カメラ画像が録画サーバに入力される度に、新しい画像に変わる。

【0037】

本実施例では、撮影・収集・編集・送信プログラムは、より好ましい態様として、さらに、コンピュータに、含まれる計測情報に基づいて一次データから合成された計測情報が所定の値の範囲である画像を抽出する画像抽出機能、抽出された画像について、連続時間毎にスポット画像として一覧を作成してデータベースに蓄積する一覧データ保存機能、端末に一覧データを表示して表示するスポット画像の選択を受け付ける選択機能、選択された画像についてスポット画像として端末に送信するスポット画像送信機能をも実現させるためのプログラムである。

【0038】

本実施例では、撮影・収集・編集・送信プログラムは、より好ましい態様として、さらに、コンピュータに、端末よりスポット画像からの巻戻し要求を受け付けるスポット画像巻戻し受付機能、巻戻し要求毎に、端末に前回送信した画像より一定時間分（例えば１秒分）過去の時点の一次データを抽出して巻戻しスポット画像として端末に送信する巻戻しスポット画像送信機能、端末より巻戻しスポット画像からの早送り要求を受け付ける巻戻しスポット画像早送り受付機能、早送り要求毎に、現時点の画像に達するまでは、端末に前回送信した画像より一定時間分（例えば１秒分）未来の時点の一次データを抽出して早送りスポット画像として端末に送信する早送りスポット画像送信機能をも実現させるためのプログラムである。

【0039】

本実施例では、撮影・収集・編集・送信プログラムは、より好ましい態様として、さらに、コンピュータに、一次データを、一定時間分（例えば１０分分）毎に結合させタイムスタンプを付して動画形式で圧縮した二次データに変換する二次データ作成機能をも実現させるためのプログラムである。

【0040】

本実施例では、撮影・収集・編集・送信プログラムは、より好ましい態様として、さらに、コンピュータに、端末より巻戻しライブ合成画像からのリライブ合成画像要求を受け付けるリライブ画像受付機能、リライブ画像要求毎に、端末に前回送信した画像より一定時間分、詳細には、カメラでの設定監視用カメラ４００から録画サーバ１００へのカメラ画像取得間隔分、未来の時点の一次データを抽出して早送りライブ合成画像として端末に送信するリライブ合成画像送信機能をも実現させるためのプログラムである。なお、ここで「リライブ合成画像」は、ライブ合成画像から過去へ巻き戻しての再生画像を指す。

【0041】

本実施例では、監視カメラと録画サーバとの接続はＴＣＰ／ＩＰ方式で行い、監視カメラを特定するため、録画サーバ側で設定したユーザＩＤとパスワードで認証を行ってからカメラ画像の撮影等の要求を行う。端末と録画サーバとの接続もＴＣＰ／ＩＰ方式で行い、ユーザＩＤとパスワードで認証を行って、端末が録画サーバに登録してある端末であることを確認してから画像送信を行う。認証は、録画サーバ上の認証用データベースによる認証が好ましい。

【0042】

計測デバイスと録画サーバとの接続は、計測デバイスの接続形式に応じて行う。

【0043】

端末やカメラやＨＴＴＰ接続計測デバイスやＦＴＰ接続計測デバイスが同じＬＡＮ上になくてもルータを介してネットワークで繋がっていれば、接続するルータのＩＰアドレスとそれぞれに割り振られたポート番号で行う。インターネットで接続されているときは、両者の間のルータのポート番号を「有効」にする。ＩＰアドレスのないモバイル端末ではＵＩＤを利用する。

【0044】

図３は、本発明の監視カメラシステムの実施例１の端末（モバイル）の構成図である。モバイル端末２００は、メモリ２０２を伴うＣＰＵ２０１やデバイスドライバ等を有する制御・演算装置と、記憶装置２１０、データの送受信等を行う通信制御装置、表示装置としてのディスプレイ２０４、操作ボタンあるいはタッチパネル等の入出力装置を備えている。記憶装置２１０には、画像表示プログラム２１３やオペレーティングシステム２１４が格納されている。モバイル端末２００は、例えばスマートフォン等の携帯電話等であり、ＣＰＵ２０１が画像表示プログラム２１３をメモリ２０２にロードして実行することにより本発明の画像表示が可能なコンピュータの機能を実現する。ＣＰＵ２０１は、通常のモバイル端末に搭載する演算処理装置であり、各種プログラムを実行し、各種制御等を行う。

【0045】

図４は、本発明の監視カメラシステムの実施例１の端末（ＰＣ）の構成図である。閲覧ＰＣ３００は、メモリ３０２を伴うＣＰＵ３０１やデバイスドライバ等を有する制御・演算装置と、ＤＲＡＭ等の主記憶装置やハードディスク等の補助記憶装置を有する記憶装置３１０と、ネットワークインターフェース３０４等の通信制御装置や表示装置としてのディスプレイ３０３、キーボード３０５、マウス３０６等で構成される入出力装置とを備えている。記憶装置３１０には、画像表示プログラム３１３やオペレーティングシステム３１４が格納されている。閲覧ＰＣ３００は、例えばデスクトップＰＣやノートＰＣ、タブレット端末等であり、ＣＰＵ３０１が画像表示プログラム３１３をメモリ３０２にロードして実行することにより本発明の画像表示が可能なコンピュータの機能を実現する。ＣＰＵ３０１は、通常のＰＣに搭載する演算処理装置であり、各種プログラムを実行し、各種制御等を行う。

【0046】

画像表示プログラムは、コンピュータに、録画サーバとの接続を行う端末接続機能、録画サーバから送信された画像を表示する画像表示機能を実現させるためのプログラムである。

【0047】

本実施例では、画像表示プログラムは、より好ましい態様として、さらに、コンピュータに、ライブ合成画像表示中に、監視用カメラから録画サーバへのカメラ画像取得間隔毎に、ライブ合成画像を録画サーバに要求するライブ合成画像要求機能、ライブ合成表示中に、巻戻し要求の入力を受け付け、巻戻しライブ合成画像を録画サーバに要求する巻戻し開始要求機能、巻戻しライブ合成画像表示中に、ライブ合成画像の要求間隔より短い一定時間（例えば０．２秒）毎に、巻戻しライブ合成画像を録画サーバに要求する巻戻し継続要求機能、巻戻しライブ合成画像表示中に、ユーザからの早送り要求の入力を受け付け、早送りライブ合成画像を録画サーバに要求する巻戻しライブ合成画像早送り開始要求機能、早送りライブ合成画像表示中に、ライブ合成画像の要求間隔より短い一定時間（例えば０．２秒）毎に、早送りライブ合成画像を録画サーバに要求する巻戻しライブ合成画像早送り継続要求機能をも実現させるためのプログラムである。

【0048】

本実施例では、画像表示プログラムは、より好ましい態様として、さらに、コンピュータに、録画サーバから送信されたスポット画像を表示するスポット画像表示機能、をも実現させるためのプログラムである。

【0049】

本実施例では、画像表示プログラムは、より好ましい態様として、さらに、コンピュータにスポット画像表示中に、巻戻し要求の入力を受け付け、スポット画像を録画サーバに要求する巻戻し開始要求機能、巻戻しスポット画像表示中に、スポット画像の要求間隔より短い一定時間毎に、巻戻しスポット成画像を録画サーバに要求する巻戻し継続要求機能、巻戻しスポット画像表示中に、早送り要求の入力を受け付け、早送りスポット画像を録画サーバに要求する巻戻しスポット画像早送り開始要求機能、早送りスポット画像表示中に、スポット画像の要求間隔より短い一定時間毎に、早送りスポット画像を録画サーバに要求する巻戻しスポット画像早送り継続要求機能をも実現させるためのプログラムである。

【0050】

本実施例では、画像表示プログラムは、より好ましい態様として、さらに、コンピュータに、巻戻しライブ合成画像表示中に、リライブ合成画像要求の入力を受け付け、リライブ合成画像を録画サーバに要求するリライブ合成画像開始要求機能、リライブ合成画像表示中に、カメラから録画サーバへのカメラ画像取得間隔毎に、リライブ合成画像を録画サーバに要求するリライブ合成画像継続要求機能をも実現させるためのプログラムである。

【0051】

計測デバイス群７００、８００、９００は、各種データ、例えば、温度、湿度、二酸化炭素等の気体濃度、水中の特定イオン濃度、振動・騒音値等を計測して計測データとして取得する。計測データは、数値情報の他、環境値等が一定値以上または一定値以下でＯＮ、ＯＦＦの信号が切り替わるセンサ等によるＯＮ／ＯＦＦ情報等であってもよい。

【0052】

図５は、本発明の監視カメラシステムの実施例１の計測デバイス（ＨＴＴＰ接続）の構成図である。ＨＴＴＰ接続計測デバイス７００は、メモリ７０２を伴うＣＰＵ７０１やデバイスドライバ等を有する制御・演算装置と、ＤＲＡＭ等の主記憶装置やハードディスク等の補助記憶装置を有する記憶装置７１０と、ネットワークインターフェース７０４等の通信制御装置や表示装置としてのディスプレイ７０３等で構成される出力装置とを備えている。記憶装置７１０には、データ収集プログラム７１３やＨＴＴＰサービスプログラムや７１７やアナログ／デジタル変換７１８やオペレーティングシステム７１４が格納されている。ＨＴＴＰ接続計測デバイス７００は、例えば、市販のＨＴＴＰ接続タイプの計測デバイスでもよい。ＣＰＵ７０１は、通常の計測デバイスに搭載する演算処理装置であり、各種プログラムを実行し、各種制御等を行う。アナログで計測を行う場合、アナログ計測機７１６に記憶装置７１０に格納されているアナログ／デジタル７１８に接続して、デジタルデータに変換してデータ収集を行う。

【0053】

図６は、本発明の監視カメラシステムの実施例１の計測デバイス（ＨＴＴＰ接続）から録画サーバへのデータ送信のイメージ図である。アナログデータからデジタルデータに変換した計測データ又はデジタルデータで収集された計測データは、録画サーバ１００からのＨＴＴＰリクエストすなわち計測情報の要求により、ネットワークインターフェース７０４から録画サーバ１００へのＨＴＴＰレスポンスすなわち計測情報の応答の形で送信され、録画サーバ内のデバイス計測情報データベース１１５に蓄積される。

【0054】

図７は、本発明の監視カメラシステムの実施例１の計測デバイス（ＦＴＰ接続）の構成図である。ＦＴＰ接続計測デバイス８００は、メモリ８０２を伴うＣＰＵ８０１やデバイスドライバ等を有する制御・演算装置と、ＤＲＡＭ等の主記憶装置やハードディスク等の補助記憶装置を有する記憶装置８１０と、ネットワークインターフェース８０４等の通信制御装置や表示装置としてのディスプレイ８０３等で構成される出力装置とを備えている。記憶装置８１０には、データ収集プログラム８１３やＦＴＰサービスプログラムや８１７やアナログ／デジタル変換８１８やオペレーティングシステム８１４が格納されている。ＦＴＰ接続計測デバイス８００は、例えば、市販のＦＴＰ接続タイプの計測デバイスでもよい。ＣＰＵ８０１は、通常の計測デバイスに搭載する演算処理装置であり、各種プログラムを実行し、各種制御等を行う。アナログで計測を行う場合、アナログ計測機８１６に記憶装置８１０に格納されているアナログ／デジタル８１８に接続して、デジタルデータに変換してデータ収集を行う。

【0055】

図８は、本発明の監視カメラシステムの実施例１の計測デバイス（ＦＴＰ接続）から録画サーバへのデータ送信のイメージ図である。デジタルデータに変換した計測データ又はデジタルデータで収集された計測データは、ネットワークインターフェース７０４から録画サーバ１００へ、ＩＰアドレス入力等で録画サーバ１００とのＴＣＰコネクションを確立し、ＣＳＶ形式等のファイル転送すなわちアップロードの形で送信され、録画サーバ内のデバイス計測情報データベース１１５に蓄積される。

【0056】

図９は、本発明の監視カメラシステムの実施例１の計測デバイス（シリアル接続）の構成図である。シリアル接続計測デバイス９００は、メモリ９０２を伴うＣＰＵ９０１やデバイスドライバ等を有する制御・演算装置と、ＤＲＡＭ等の主記憶装置やハードディスク等の補助記憶装置を有する記憶装置９１０と、ネットワークインターフェース９０４等の通信制御装置や表示装置としてのディスプレイ９０３等で構成される出力装置とを備えている。記憶装置９１０には、データ収集プログラム９１３やシリアル転送プログラムや９１７やアナログ／デジタル変換９１９やオペレーティングシステム９１４が格納されている。ＦＴＰ接続計測デバイス９００は、例えば、市販のＦＴＰ接続タイプの計測デバイスでもよい。ＣＰＵ９０１は、通常の計測デバイスに搭載する演算処理装置であり、各種プログラムを実行し、各種制御等を行う。アナログで計測を行う場合、アナログ計測機９１６に記憶装置９１０に格納されているアナログ／デジタル９１８に接続して、デジタルデータに変換してデータ収集を行う。ＨＴＴＰ接続計測デバイス７００やＦＴＰ接続計測デバイス８００ではネットワークインターフェースにはＮＩＣ（ネットワークインターフェースカード）を用いるが、シリアル接続計測デバイス９００では、ＲＳ２３２Ｃ／ＲＳ４８５シリアルデバイスを用いる。

【0057】

録画サーバ１００は、接続開始時毎に、監視用カメラや端末やＨＴＴＰ接続計測デバイスやＦＴＰ接続計測デバイスのＩＰアドレス及びポート番号、ＵＩＤを調べ、またＩＰアドレス及びポート番号やＵＩＤを用いた接続によって接続相手を特定でき、ユーザＩＤとパスワードで認証する。ルータのポート番号を「有効」にしてあれば、端末側のルータの設定を録画サーバ１００から行うことができ、グローバルＩＰアドレスやプライベートＩＰアドレスの割当設定をすることができる。したがって、ＬＡＮ内のＰＣのアドレスが変換されてしまった場合でも、監視用カメラの認識をするので、カメラ画像の取得が可能である。監視用カメラ側でグローバルＩＰアドレス、プライベートＩＰアドレスの割当設定等を行う必要がなく、ブロードバンドルータなどを利用していてＬＡＮ内のＰＣのアドレスが変換されてしまう場合でもカメラ画像の送受信が可能であり、また、ユーザのＰＣ操作能力が、様々な設定を行うことができないレベルであっても画像表示が可能である。監視用カメラと録画サーバとが同じＬＡＮ内に限定されるときは、ローカルＩＰアドレスとポート番号で認識を行ってもよい。

【0058】

本実施例においては、録画サーバ１００と閲覧ＰＣ３００とは、ともにパーソナルコンピュータとして構成され、通常のパーソナルコンピュータが有するクロック機能等を備えている。モバイル端末２００も計測デバイス７００、８００、９００もクロック機能等を備えている。

【0059】

本実施例では、計測デバイス群（ＨＴＴＰ接続計測デバイス７００やＦＴＰ接続計測デバイス８００やシリアル接続計測デバイス９００）と画像を撮影する監視用カメラ４００（静止画撮影用カメラや動画撮影用カメラ）とにネットワーク５００を介して接続された録画サーバ１００と、録画サーバ１００にネットワーク５００を介して接続され画像を表示する端末（モバイル端末２００や閲覧ＰＣ３００）とを具備しており、録画サーバ１００には、（１）監視用カメラ４００に静止画や動画の画像を撮影させ撮影したカメラ画像を録画サーバ１００に入力させるカメラ画像取得手段、（２）計測デバイス群７００、８００、９００にそれぞれ所定の計測をさせて計測データを録画サーバ１００に入力させる計測データ取得手段、（３）録画サーバ１００に入力させた計測データをデバイス計測情報データベース１１５に蓄積する計測データ保存手段、（４）蓄積した計測データに基づいて、画像に合成する計測情報及び／又はグラフ画像を形成して、入力させたカメラ画像から計測情報及び／又はグラフ画像を合成するためのカメラ画像を抽出し、抽出したカメラ画像に計測情報及び／又はグラフ画像を合成して、一次データとしてデータベース（一次画像フォルダ１１１）に蓄積する一次データ作成手段を設けてある。一次データ作成手段は、詳細には、取得したカメラ画像から抽出した同時刻の第１の画像をメモリ１０２上に展開し、数値情報やグラフ画像を合成する場合にはデータベースに保存された計測データから合成する数値情報やグラフを形成して数値情報やグラフ画像を同じくメモリ１０２上に展開し、他のカメラ画像を合成する場合には合成するカメラ画像を抽出して同じくメモリ１０２上に展開し、それらを合成して合成画像を作成してメモリ１０２上に展開し、圧縮して一次データとして記憶装置１１０の一次画像フォルダ１１１に蓄積する手段である。

【0060】

本実施例では、より好ましい態様として、さらに、録画サーバ１００には、（５）端末２００、３００から、ライブ合成画像を表示する監視用カメラ４００の選択を受け付けるライブ合成画像選択受付手段、（６）ライブ合成画像選択受付手段で選択された監視用カメラ４００について一次データの画像をライブ合成画像として端末２００、３００に送信するライブ合成画像送信手段、（７）端末２００、３００から、ライブ合成画像からの巻戻し要求を受け付けるライブ合成画像巻戻し受付手段、（８）巻戻し要求毎に、端末２００、３００に前回送信した画像より一定時間分過去の時点の一次データを抽出して巻戻しライブ合成画像として端末２００、３００に送信する巻戻しライブ合成画像送信手段、（９）端末２００、３００から、巻戻しライブ合成画像からの早送り要求を受け付ける巻戻しライブ合成画像早送り受付手段、（１０）早送り要求毎に、現時点の画像に達するまでは、端末２００、３００に前回送信した画像より一定時間分未来の時点の一次データを抽出して早送りライブ合成画像として端末２００、３００に送信する早送りライブ画像送信手段をも設けてある。

【0061】

本実施例では、より好ましい態様として、さらに、録画サーバ１００には、（１１）一次データから、合成された計測情報が所定の値の範囲である画像を抽出する画像抽出手段、（１２）画像抽出手段で抽出された画像について、連続時間毎にスポット画像として一覧を作成して記憶装置１１０内のデータベースに蓄積する一覧データ保存手段、（１３）端末２００、３００に一覧データを表示して端末２００、３００から表示するスポット画像の選択を受け付けるスポット画像選択受付手段、（１４）一次データから、選択されたスポット画像の画像を検索し、検索された画像をスポット画像として前記端末に送信するスポット画像送信手段をも設けてある。画像抽出手段は、例えば、計測データが温度とｐＨ値であって、カメラ画像に合成されている数値情報が温度とｐＨ値である場合に、一次画像フォルダ内の一次データから、温度が２０℃を下回った画像をスポット画像として抽出し、一覧データ保存手段は、例えば、温度が２０℃を下回った画像の開始時刻等をインデックス情報とした一覧データを作成してデータベースに蓄積する。また、さらに、合成された計測情報が所定の値の範囲である画像が抽出された際には、端末にメールで警告等の情報を送信するものであってもよい。また、スポット画像送信手段は、スポット画像選択受付手段によって選択された開始時刻と同時刻の画像を一次画像フォルダ内の一次データから検索して、スポット画像として端末に送信する。なお、画像抽出手段は、本実施例では、一次画像フォルダ内の一次データを検索して抽出するが、他の方法で画像を抽出するものであってもよく、例えば、計測データが温度とｐＨ値であって、カメラ画像に合成されている数値情報が温度とｐＨ値である場合に、デバイス計測情報データベース１１５に蓄積された計測データから、温度が２０℃を下回った計測データを抽出し、その計測データが測定された時刻と同時刻の画像を、一次画像フォルダ内の一次データから検索して、スポット画像として抽出するものであってもよい。

【0062】

本実施例では、より好ましい態様として、さらに、録画サーバ１００には、（１５）端末２００、３００から、スポット画像からの巻戻し要求を受け付けるスポット画像巻戻し受付手段、（１６）巻戻し要求毎に、端末２００、３００に前回送信した画像より一定時間分過去の時点の一次データを抽出して巻戻しスポット画像として端末２００、３００に送信する巻戻しスポット画像送信手段、（１７）端末２００、３００から、巻戻しスポット画像からの早送り要求を受け付ける巻戻しスポット画像早送り受付手段、（１８）早送り要求毎に、現時点の画像に達するまでは、端末２００、３００に前回送信した画像より一定時間分未来の時点の一次データを抽出して早送りスポット画像として端末２００、３００に送信する早送りスポット画像送信手段をも設けてある。

【0063】

本実施例では、より好ましい態様として、さらに、録画サーバ１００には、（１９）端末２００、３００から、巻戻しライブ画像からのリライブ合成画像要求を受け付けるリライブ合成画像受付手段、（２０）リライブ合成画像要求毎に、端末２００、３００に前回送信した画像より一定時間分未来の時点の一次データを抽出してリライブ合成画像として端末２００、３００に送信するリライブ合成画像送信手段をも設けてある。

【0064】

本実施例では、録画サーバ１００は、前述のハードウェア構成と撮影・収集・編集・送信プログラム１１３によって、（１）〜（２０）の手段として機能する。

【0065】

また、端末（モバイル端末２００及び閲覧ＰＣ３００）に、（１）録画サーバ１００から送信された画像を表示する画像表示手段を設けてある。

【0066】

本実施例では、より好ましい態様として、さらに、端末（モバイル端末２００及び閲覧ＰＣ３００）に、（２）ライブ合成画像表示中に、カメラから録画サーバ１００へのカメラ画像取得間隔毎に、ライブ合成画像を録画サーバ１００に要求するライブ合成画像要求手段、（３）ライブ合成画像表示中に、巻戻し要求の入力を受け付け、巻戻しライブ合成画像を録画サーバ１００に要求する巻戻し開始要求手段、（４）巻戻しライブ合成画像表示中に、ライブ合成画像の要求間隔より短い一定時間毎に、巻戻しライブ合成画像を録画サーバ１００に要求する巻戻し継続要求手段、（５）巻戻しライブ合成画像表示中に、早送り要求の入力を受け付け、早送りライブ合成画像を録画サーバ１００に要求する巻戻しライブ合成画像早送り開始要求手段、（６）早送りライブ合成画像表示中に、ライブ合成画像の要求間隔より短い一定時間毎に、早送りライブ合成画像を録画サーバ１００に要求する巻戻しライブ合成画像早送り継続要求手段をも設けてある。

【0067】

本実施例では、より好ましい態様として、さらに、端末（モバイル端末２００及び閲覧ＰＣ３００）に、（７）録画サーバ１００から送信されたスポット画像を表示するスポット画像表示手段、（８）スポット画像表示中に、巻戻し要求の入力を受け付け、スポット画像を録画サーバ１００に要求する巻戻し開始要求手段、（９）巻戻しスポット画像表示中に、スポット画像の要求間隔より短い一定時間毎に、巻戻しスポット成画像を録画サーバ１００に要求する巻戻し継続要求手段、（１０）巻戻しスポット画像表示中に、早送り要求の入力を受け付け、早送りスポット画像を録画サーバ１００に要求する巻戻しスポット画像早送り開始要求手段、（１１）早送りスポット画像表示中に、スポット画像の要求間隔より短い一定時間毎に、早送りスポット画像を録画サーバ１００に要求する巻戻しスポット画像早送り継続要求手段をも設けてある。

【0068】

本実施例では、より好ましい態様として、さらに、端末（モバイル端末２００及び閲覧ＰＣ３００）に、（１２）巻戻しライブ合成画像表示中に、リライブ合成画像要求の入力を受け付け、リライブ合成画像を録画サーバに要求するリライブ合成画像開始要求手段、（１３）リライブ合成画像表示中に、カメラから録画サーバへのカメラ画像取得間隔毎に、リライブ合成画像を録画サーバに要求するリライブ合成画像継続要求手段をも設けてある。

【0069】

本実施例では、端末２００、３００は、前述のハードウェア構成と画像表示プログラム２１３、３１３によって、（１）〜（１３）の手段として機能する。なお、本実施例では、カメラ画像データを圧縮して作成された一次データは、一定時間毎に録画サーバで二次データに変換されているので、端末は、ライブ画像の巻戻しや巻戻し後の早送り以外に、従来の録画再生装置で可能な、過去のカメラ画像の再生や巻戻し、早送りも可能である。例えば、録画翌日等に再生を行うとき、何日の何時の録画について再生をしたいかを選択し、１０分分ずつ２次データに変換されたファイルを呼び出して、再生を行う。再生中の巻戻しや早送りも可能である。ライブ合成画像は、カメラから入力されたカメラ画像に計測情報やグラフ画像や他のカメラ画像を合成して編集し圧縮せず使用するため高画質でありながらデータ量が小さく、巻戻しライブ合成画像や早送りライブ合成画像は、一次的な保存用に圧縮した一次データを使用するため、高画質ながらデータ量が小さい。頻繁には使用しない、二次データ作成単位以上に過去分の再生や早送り巻戻しは、圧縮変換した動画ファイルである二次データを使用するため、動画ながら保存に要するデータ量が小さくて済む。また、本実施例の構成により、ライブ合成画像の巻戻し後の再生が可能となる。

【0070】

本実施例の監視カメラシステムは、計測デバイス群と静止画又は動画を撮影するカメラ群とにネットワークを介して接続された録画サーバが、一定時間毎に、前記カメラ群からＴＣＰ／ＩＰ方式で、カメラ画像を静止画又は動画で取得し、計測デバイス群から計測データを取得しデータベースに保存し、取得したカメラ画像に計測データに基づく計測情報やグラフ画像や他のカメラ画像を合成して圧縮して一次データを作成して、一定期間内は一次データのまま保存し、一定期間経過後に、例えば、静止画で取得したカメラ画像であれば、動画ファイルへの圧縮形式、例えば現時点で高圧縮であるＨ．２６４形式で高圧縮動画ファイルに変換して保存し直す。本実施例では、Ｈ．２６４形式で圧縮して動画ファイルに変換する。ＴＣＰ／ＩＰ方式の通信にてサーバ主導型によりカメラ群に静止画又は動画のデータを要求することにより、通信上におけるデータの欠損がなく、データの高い保全性を実現できる。

【0071】

本実施例の監視カメラシステムは、撮影した画像と、計測データ類から得られる情報及び／又は他の画像を連動させた状態で、ほぼリアルタイムでの再生や巻き戻しや早送りができ、かつデータ量が小さく低コスト化を可能とする。ネットワーク上に同時に流れるデータ量が少なくないので、一般のインターネット回線などにも、ネットワークカメラ情報を流すことができる。さらに、インターネット回線（ＷＡＮ）越しのクラウドサーバでのデータ蓄積を可能にする。本実施例では、画像データ収集時の画像データに計測データに基づく計測情報やグラフ画像や他の画像を合成したうえで、一次データ、すなわち、高解像度の一時保存データ（頻繁に見る可能性があるデータ）、として保存して、一定期間を経過すると、二次データ、すなわち、解像度を低くしたり画質を軽量化したりするなどして一時保存データ（長期保存データ）、に変換することで、保存期間のさらなる延長が可能となるだけでなく、一次データの段階で計測データの値から画像検索して高画質で再生でき、さらに早送り巻戻しもできる。本実施例では、例えば、静止画で取得したカメラ画像であれば、一次データから二次データへの変換については、画像とタイムスタンプ情報を付加しながら、二次データへの変換を行い、例えば１秒間に１フレーム（１ｆｐｓ）の設定であれば、６００枚の画像とタイムスタンプを二次データに格納し、何らかの異常で画像が欠落している場合は、一つ前の画像と同じ画像を再度使って、時間軸を調整する。

【0072】

｛手順｝
本発明の監視カメラシステムの実施例１の監視手順について次に説明する。本手順では、上述した監視カメラシステムを使用する。

【0073】

本実施例の監視方法では、（１）計測デバイス群と画像を撮影するカメラ群とにネットワークを介して接続された録画サーバが、カメラ群に画像を撮影させ撮影したカメラ画像を録画サーバに入力させるカメラ画像取得ステップ、（２）計測デバイス群にそれぞれ所定の計測をさせて計測データを録画サーバに入力させる計測データ取得ステップ、（３）入力させた計測データをデータベースに蓄積する計測データ保存ステップ（４）蓄積した計測データに基づいて、画像に合成する計測情報及び／又はグラフ画像を形成して、入力させたカメラ画像から計測情報及び／又はグラフ画像を合成するためのカメラ画像を抽出し、抽出したカメラ画像に計測情報及び／又はグラフ画像を合成して、一次データとしてデータベースに蓄積する一次データ作成ステップを含む。

【0074】

本実施例の監視方法では、より好ましい態様として、さらに、上述した一次データ作成ステップにおいて、入力させた複数のカメラ画像から、上述した計測情報やグラフ画像を合成させるカメラ画像（第１のカメラ画像とする）を抽出するとともに、第１のカメラ画像以外のカメラ画像から第１のカメラ画像に合成させる１又は複数の合成用カメラ画像を抽出し、抽出した第１のカメラ画像に、計測情報やグラフ画像とともにあるいはこれらに代えて合成用カメラ画像を合成して、一次データとしてデータベースに蓄積するものである。

【0075】

本実施例の監視方法では、一次データ作成ステップは、詳細には、取得したカメラ画像から抽出した同時刻の第１の画像を録画サーバのメモリ上に展開し、数値情報やグラフ画像を合成する場合には録画サーバのデータベースに保存された計測データから合成する数値情報やグラフを形成して数値情報やグラフ画像を同じくメモリ上に展開し、他のカメラ画像を合成する場合には合成するカメラ画像を抽出して同じくメモリ上に展開し、それらを合成して合成画像を作成してメモリ上に展開し、圧縮して一次データとして記憶装置の一次画像フォルダに蓄積するものである。

【0076】

本実施例の監視方法では、より好ましい態様として、さらに、（４）録画サーバにネットワークを介して接続され画像を表示する端末が、ライブ合成画像を表示するカメラの選択をするカメラ選択ステップ、（５）録画サーバが、選択されたカメラについて、一次データの画像をライブ合成画像として、カメラを選択した端末に送信するライブ合成画像送信ステップ、（６）端末が、録画サーバから送信されたライブ合成画像を表示するライブ合成画像表示ステップ、（７）端末が、ライブ合成画像表示中に、巻戻し要求の入力を受け付け、巻戻しライブ合成画像を録画サーバに要求する巻戻し開始要求ステップ、（８）録画サーバが、端末に前回送信した画像より一定時間分過去の時点の一次データを抽出して巻戻しライブ画像として端末に送信する巻戻しライブ合成画像送信ステップ、（９）端末が、録画サーバから送信された巻戻しライブ合成画像を表示する巻戻しライブ合成画像表示ステップ、（１０）端末が、巻戻しライブ合成画像表示中に、ライブ合成画像の要求間隔より短い一定時間毎に、巻戻しライブ合成画像を録画サーバに要求する巻戻し継続要求ステップ、（１１）録画サーバが、巻戻し要求毎に、上述した巻戻しライブ合成画像送信ステップ及び上述した巻戻しライブ合成画像表示ステップを繰り返し、（１２）端末が、巻戻しライブ合成画像表示中に、早送り要求の入力を受け付け、早送りライブ合成画像を録画サーバに要求する早送り開始要求ステップ、（１４）録画サーバが、端末に前回送信した画像より一定時間分未来の時点の一次データを抽出して早送りライブ合成画像として端末に送信する早送りライブ合成画像送信ステップ、（１５）端末が、録画サーバから送信された早送りライブ合成画像を表示する早送りライブ合成画像表示ステップ、（１６）端末が、早送りライブ合成画像表示中に、ライブ画像の要求間隔より短い一定時間毎に、早送りライブ合成画像を録画サーバに要求する早送り継続要求ステップ、（１７）録画サーバが、現時点の画像に達するまでは、早送りライブ合成画像要求毎に、上述した早送りライブ合成画像送信ステップ及び早送りライブ合成画像表示ステップを繰り返し、（１９）一次データを、一定時間分毎に結合させタイムスタンプを付して動画形式で圧縮した二次データに変換する二次データ作成ステップを含む。

【0077】

本実施例の監視方法では、より好ましい態様として、さらに、（２０）録画サーバが、合成された計測情報が所定の値の範囲である画像を抽出する画像抽出ステップ、（２１）録画サーバが、抽出された画像について、連続時間毎にスポット画像として一覧を作成して記憶装置内のデータベースに蓄積する一覧データ保存ステップ、（２２）録画サーバが、端末に一覧データを送信して表示して端末から表示するスポット画像の選択を受け付けるスポット画像選択受付ステップ、（２３）端末が、一覧データを受信し表示して、表示するスポット画像の選択をするスポット画像選択ステップ、（２４）録画サーバが、一次データから、選択されたスポット画像の画像を検索し、検索された画像をスポット画像として端末に送信するスポット画像送信ステップ、（２５）端末が、録画サーバから送信されたスポット画像を表示するスポット画像表示ステップを含む。

【0078】

本実施例の監視方法では、より好ましい態様として、さらに、（２６）端末が、スポット画像表示中に、スポット画像からの巻戻し要求の入力を受け付け、巻戻しスポット画像を録画サーバに要求する巻戻し要求ステップ、（２７）録画サーバが、端末に前回送信した画像より一定時間分過去の時点の一次データを抽出して巻戻しスポット画像として端末に送信する巻戻しスポット合成画像送信ステップ、（２８）端末が、録画サーバから送信された巻戻しスポット合成画像を表示する巻戻しスポット合成画像表示ステップ、（２９）端末が、巻戻しスポット合成画像表示中に、スポット合成画像の要求間隔より短い一定時間毎に、巻戻しスポット合成画像を録画サーバに要求する巻戻し継続要求ステップ、（３０）録画サーバが、巻戻し要求毎に、上述した巻戻しスポット合成画像送信ステップ及び上述した巻戻しスポット合成画像表示ステップを繰り返し、（３１）端末が、巻戻しスポット合成画像表示中に、早送り要求の入力を受け付け、早送りスポット合成画像を録画サーバに要求する早送り開始要求ステップ、（３２）録画サーバが、端末に前回送信した画像より一定時間分未来の時点の一次データを抽出して早送りスポット合成画像として端末に送信する早送りスポット合成画像送信ステップ、（３３）端末が、録画サーバから送信された早送りスポット合成画像を表示する早送りスポット合成画像表示ステップ、（３４）端末が、早送りスポット合成画像表示中に、スポット画像の要求間隔より短い一定時間毎に、早送りスポット合成画像を録画サーバに要求する早送り継続要求ステップ、（３５）録画サーバが、現時点の画像に達するまでは、早送りスポット合成画像要求毎に、上述した早送りスポット合成画像送信ステップ及び早送りスポット合成画像表示ステップを繰り返すことを含む。

【0079】

本実施例の監視方法では、より好ましい態様として、さらに、（３６）端末が、巻戻しライブ合成画像からのリライブ合成画像要求を受け付け、リライブ合成画像を録画サーバに要求するリライブ合成画像開始要求ステップ、（３７）録画サーバが、端末からの、巻戻しライブ合成画像からのリライブ合成画像要求を受け付けるリライブ合成画像受付ステップ、（３８）端末が、リライブ合成画像表示中に、カメラから録画サーバへのカメラ画像取得間隔毎に、リライブ画像を録画サーバに要求するリライブ合成画像継続要求ステップ、（３９）録画サーバが、リライブ画像要求毎に、端末に前回送信した画像より一定時間分未来の時点の一次データを抽出してリライブ合成画像として端末に送信するリライブ合成画像送信ステップを含む。

【0080】

撮影・収集・編集・送信プログラムと画像表示プログラムとを有する監視カメラシステムのプログラムは、これらのステップをコンピュータに実行させるものである。カメラ画像取得ステップと計測データ取得ステップと一次データ作成ステップについて、図を用いて、さらに具体的に説明する。

【0081】

（カメラ画像取得ステップ（静止画））
図１０は、本発明の監視カメラシステムの実施例１におけるカメラ（静止画撮影）と録画サーバとの接続から画像編集までの手順概要を示すフロー図である。先ず、録画サーバは、カメラにＴＣＰ／ＩＰ方式で、接続を要求する。カメラは１又は複数台で構成され、各カメラと録画サーバはユーザＩＤ及びパスワードで認証を行う。録画サーバの認証用データベースを参照して認証に成功すると、接続状態となる。録画サーバからカメラに、静止画を撮影し撮影したカメラ画像をＪＰＥＧ形式で録画サーバに送信することを要求する。カメラは、画像要求を受けてスナップショット（静止画）を撮影して、撮影して得られた静止画をＪＰＥＧ形式でカメラ画像としてＴＣＰ／ＩＰ方式で録画サーバに送信する。本実施例では、録画サーバ側で一定時間毎に二次データに動画圧縮変換するため、静止画を撮影するカメラに動画フォーマットの機能が備わっている必要がない。したがって、カメラは、ＩＰカメラのほか、アナログカメラでもよく、古いカメラも利用でき、コストが削減できる。

【0082】

録画サーバは、静止画のカメラ画像を受信すると、カメラ画像をメモリに展開する。その後、後述するように、合成ステップを含む一次データ作成ステップへと進み、一次データ作成ステップでは、合成後、画像を圧縮して、静止画の一次データを作成することになる。

【0083】

録画サーバは、カメラ画像受信後、一定時間スリープして、接続状態のカメラに、また、静止画を撮影し撮影したカメラ画像を録画サーバに送信することを要求する。スリープする時間は、１０分の１秒、１秒、３秒あるいは６０秒等、予め任意で設定する。本実施例では１秒とする。すなわち、録画サーバはカメラとＴＣＰ／ＩＰ方式でコネクションを張り、コネクションができたら、一定時間（本実施例では１秒）毎にカメラから静止画像のカメラ画像を取得する。取得ができなかった場合は再度コネクションを張る。取得ができた場合は、カメラ画像をファイルへ保存する。終了信号があるまでカメラ画像の取得を行う。

【0084】

（カメラ画像取得ステップ（動画））
図１１は、本発明の監視カメラシステムの実施例１におけるカメラ（動画撮影）と録画サーバとの接続から画像編集までの手順概要を示すフロー図である。先ず、録画サーバは、カメラにＴＣＰ／ＩＰ方式で、接続を要求する。カメラは１又は複数台で構成され、各カメラと録画サーバはユーザＩＤ及びパスワードで認証を行う。なお、本実施例では、静止画撮影用のカメラと動画撮影用のカメラの両方を用いるが、いずれかのみであってもよい。録画サーバの認証用データベースを参照して認証に成功すると、接続状態となる。録画サーバからカメラに、一定時間（本実施例では１０秒）連続して動画を撮影し撮影したカメラ画像をＨ．２６４形式で録画サーバに送信することを要求する。動画形式は、Ｍｏｔｉｏｎ ＪＰＥＧやＭＰＥＧ−４等でもよいが、圧縮効率と画質の点からＨ．２６４が好ましい。カメラは、画像要求を受けて動画を連続撮影して、撮影して得られた動画をＨ．２６４形式でカメラ画像としてＴＣＰ／ＩＰ方式で録画サーバに送信する。

【0085】

録画サーバは動画のカメラ画像を受信すると、カメラ画像をメモリに展開する。その後、後述するように、合成ステップを含む一次データ作成ステップへと進み、一次データ作成ステップでは、合成後、画像を圧縮して、動画の一次データを作成することになる。

【0086】

録画サーバは、カメラ画像受信後、一定時間スリープして、接続状態のカメラに、また、動画を撮影し撮影したカメラ画像を録画サーバに送信することを要求する。スリープする時間は、１０秒、２０秒あるいは６０秒等、予め任意で設定する。本実施例では１０秒とする。スリープ時間が経過していない場合でも、接続状態のカメラとのセッションが切断されたときは再度カメラに動画を要求する。すなわち、録画サーバはカメラとＴＣＰ／ＩＰ方式でコネクションを張り、コネクションができたら、一定時間（本実施例では１０秒）毎にカメラから動画のカメラ画像を取得する。取得ができなかった場合は再度コネクションを張る。取得ができた場合は、カメラ画像をファイルへ保存する。終了信号があるまで一定時間毎にカメラ画像の取得を行う。

【0087】

（計測データ取得ステップ（ＨＴＴＰ接続））
図１２は、本発明の監視カメラシステムの実施例１における計測デバイス（ＨＴＴＰ接続）と録画サーバとの接続からデータ保存までの手順概要を示すフロー図である。先ず、録画サーバは、ＨＴＴＰ接続計測デバイスにＨＴＴＰ通信で接続を要求する。ＨＴＴＰ接続計測デバイスは１又は複数台で構成され、それぞれ、録画サーバとはユーザＩＤ及びパスワードで認証を行う。なお、本実施例では、ＨＴＴＰ接続計測デバイスと、ＦＴＰ接続計測デバイスと、シリアル接続計測デバイスを用いるが、そのうちの２種類又は１種類のみであってもよい。録画サーバの認証用データベースを参照して認証に成功すると、接続状態となる。ＨＴＴＰ接続計測デバイスは一定間隔で計測を行い計測データを収集する。録画サーバからＨＴＴＰ接続計測デバイスに、計測データを録画サーバに送信することをＨＴＴＰリクエストとして要求する。ＨＴＴＰ接続計測デバイスは、データ要求を受けて計測データをＨＴＴＰレスポンスの形で録画サーバに送信する。

【0088】

録画サーバは、ＨＴＴＰ接続計測デバイスからの計測データを受信すると、デバイス計測情報データベースに保存する。計測データ受信後、一定時間スリープして、接続状態の計測デバイスに、また、計測データを録画サーバに送信することを要求する。スリープする時間は、１０秒、２０秒あるいは６０秒等、予め任意で設定する。

【0089】

（計測データ取得ステップ（ＦＴＰ接続））
図１３は、本発明の監視カメラシステムの実施例１における計測デバイス（ＦＴＰ接続）と録画サーバとの接続からデータ保存までの手順概要を示すフロー図である。先ず、録画サーバは、ＦＴＰ接続計測デバイスにＦＴＰ通信で接続を要求する。ＦＴＰ接続計測デバイスは１又は複数台で構成され、それぞれ、録画サーバとはユーザＩＤ及びパスワードで認証を行う。録画サーバの認証用データベースを参照して認証に成功すると、接続状態となる。ＦＴＰ接続計測デバイスは一定間隔で計測を行い計測データを収集する。ＦＴＰ接続計測デバイスは、計測データをＣＳＶ形式等で録画サーバにファイル転送することを一定のスリープ時間を挟んで繰り返す。スリープする時間は、１０秒、２０秒あるいは６０秒等、予め任意で設定する。

【0090】

録画サーバは、ＦＴＰ接続計測デバイスからの計測データを受信すると、共有フォルダに一旦格納され、格納された計測データを録画サーバが読み込んで、デバイス計測情報データベースに保存する。

【0091】

（計測データ取得ステップ（シリアル接続））
図１４は、本発明の監視カメラシステムの実施例１における計測デバイス（シリアル接続）と録画サーバとの接続からデータ保存までの手順概要を示すフロー図である。先ず、録画サーバは、シリアル接続計測デバイスにシリアル通信で接続を要求する。シリアル接続計測デバイスは１又は複数台で構成され、それぞれ、録画サーバにＡＣＫ送信して接続を確立する。シリアル接続計測デバイスは一定間隔で計測を行い計測データを収集する。接続状態が確立されると、録画サーバからシリアル接続計測デバイスに、計測データを録画サーバに送信することを要求する。シリアル接続計測デバイスは、データ要求を受けて計測データを録画サーバに送信する。

【0092】

録画サーバは、シリアル接続計測デバイスからの計測データを受信すると、デバイス計測情報データベースに保存する。計測データ受信後、一定時間スリープして、接続状態の計測デバイスに、また、計測データを録画サーバに送信することを要求する。スリープする時間は、１０秒、２０秒あるいは６０秒等、予め任意で設定する。

【0093】

（一次データ作成ステップ(計測情報)）
図１５は、本発明の監視カメラシステムの実施例１におけるカメラ画像に計測情報を合成する合成ステップを示すフロー図である。デバイス計測情報データベースに保存された１又は複数の計測データから、合成する計測情報を計測した計測デバイスの情報を取得し、各計測デバイスで計測した数値の計測情報、例えば、図中では、温度の計測情報「２７℃」と湿度の計測情報「８０％」を合わせ、カメラ画像に合成するレイアウト情報も含めた数値情報を、メモリに展開する。計測情報は、気体濃度、騒音値等、様々な数値情報の他、所定の条件を満たすか否か等の情報でもよい。次に、メモリに展開された、静止画又は動画のカメラ画像から抽出された画像を取得し、メモリに展開された計測情報を合成して画像として合成する。合成した画像、すなわち、カメラ合成画像を、圧縮して、一次データを作成し、一次データフォルダに書き込んで保存する。かかる一次データ作成ステップは、計測データ取得中、所定のスリープ時間を挟んで繰り返す。

【0094】

（一次データ作成ステップ(グラフ画像)）
図１６は、本発明の監視カメラシステムの実施例１におけるカメラ画像にグラフ画像を合成する合成ステップを示すフロー図である。デバイス計測情報データベースに保存された１又は複数の計測データから、合成するグラフを形成する情報を計測した計測デバイスの情報を取得し、各計測デバイスで計測した値からグラフを生成する。グラフは、例えば、図中では、現在を含む当日の計測値の時間推移に前日の時間推移を重ね合わせて現在時刻の計測値を示すグラフであって、カメラ画像に合成するレイアウト情報も含めたグラフ画像を、メモリに展開する。次に、メモリに展開された、静止画又は動画のカメラ画像から抽出された画像を取得し、メモリに展開されたグラフ画像を合成して画像として合成する。合成した画像、すなわち、カメラ合成画像を圧縮して、一次データを作成し、一次画像フォルダに書き込んで保存する。かかる一次データ作成ステップは、計測データ取得中、所定のスリープ時間を挟んで繰り返す。計測情報とグラフ画像はどちらかのみカメラ画像に合成してもよいし、計測情報とグラフ画像の両方ともカメラ画像に合成してもよい。

【0095】

（一次データ作成ステップ(カメラ画像)）
図１７は、本発明の監視カメラシステムの実施例１におけるカメラ画像に他のカメラ画像を合成する合成ステップを示すフロー図である。メモリに展開された複数のカメラ画像から、第１のカメラ画像として、他のカメラ画像や上述した計測情報やグラフ画像などを合成させるカメラ画像を抽出し、また、合成用カメラ画像として、第１のカメラ画像以外のカメラ画像であって第１のカメラ画像に合成する１又は複数のカメラ画像を抽出し、抽出した第１のカメラ画像に、計測情報やグラフ画像とともにあるいはこれらに代えて合成用カメラ画像を合成して画像として合成する。合成した画像、すなわち、カメラ合成画像を、圧縮して、一次データを作成し、一次画像フォルダに書き込んで保存する。かかる一次データ作成ステップは、カメラ画像取得中、所定のスリープ時間を挟んで繰り返す。

【0096】

｛効果｝
本実施例によれば、撮影した画像と、計測データ類から得られる情報及び／又は他の画像を連動させた状態で、ほぼリアルタイムでの再生や巻き戻しや早送りができ、かつデータ量が小さく低コスト化を可能とする。

【0097】

より詳細には、本実施例によれば、カメラ画像に計測データに基づく計測情報やグラフ画像や他のカメラ画像を合成したうえで一次データが作成されるため、撮影した画像と計測データ類から得られる情報あるいは他のカメラ画像を連動させた状態で、ほぼリアルタイムでの再生ができ、かつデータ量が小さく低コスト化を可能とする。また、一次データの画像に予め計測情報やグラフ画像や他のカメラ画像が合成されているため、計測情報やグラフ情報や他のカメラ画像を合成した状態で、巻き戻しや早送りができる。さらに、再生・巻戻し・早送りといった操作に対し、レスポンスを素早くすることができる。また、録画サーバからの指示でカメラからのデータ取得を行うので、サーバ側から撮影から送信まで全てコントロールでき、カメラ側にサーバ機能を持たせる必要がなく、ネットワーク上に同時に流れるデータ量が少なく、多台数のカメラを同一ネットワーク上に設置することが可能となる。また、データ転送量が少ないために、画像のクオリティを高く保つことができ、またインターネット回線等を経由してクラウドサーバでのデータ蓄積も可能となる。また、ほぼリアルタイムで画像を見ているときでも、見落とし等気付いたとき、そのまま巻き戻して見直すことで、さかのぼって確認でき、また、過去から現時点までの画像を早送りで確認しながら行うことができる。

【0098】

また、カメラ画像に、予め、計測データに基づく計測情報やグラフ画像を合成した一次データを送信するため、送信するデータ量が少なくて済み、したがって、撮影した画像と、計測データ類から得られる情報及び／又は他の画像を連動させた状態で、端末において、ほぼリアルタイムでの再生や巻き戻しや早送りができる。また可能な機能の多さや利便性に比して低コストを実現できる。

【0099】

さらに、撮影した画像と、計測データ類から得られる情報及び／又は他の画像を連動させた状態で、ほぼリアルタイムでの再生や巻き戻しや早送りができ、かつデータ量が小さく低コスト化を可能とするのみならず、さらに、特定のデータ値を記録した時点の画像からの再生や巻き戻しや早送りも手軽にできる。

【0100】

なお、本実施例によれば、画像を再生する端末側は、持ち運びできて、計測したデータに基づいた情報が合成された状態で、リアルタイムの再生や巻戻しなどが、すぐその場でスムーズにできるため、現場での検証も容易にできる。さらに、本実施例によれば、高機能と低コスト化を、ともに実現でき、また電力も抑制できエコロジーである。例えば、静止画を撮影するカメラ１００台で撮影する場合、消費電力量においても二酸化炭素排出量においても、従来の約３分の１で済む。巻戻しにおいて、表示間隔が再生よりも短くなるだけでコマ飛ばしをしないため、巻戻し中の画像に漏れがなく、したがってチェック漏れが防止でき、またライブ画像再生に比べて画像が飛び飛びになっているような違和感がない。

【0101】

カメラが多数であっても、全ての同一のネットワーク上に設置することができ、１台の録画サーバで多数のカメラを制御できる。

【0102】

カメラから端末へデータを送信する際にパケット紛失が起きにくく、データ転送量が少なくて済む。したがって、インターネット回線（ＷＡＮ）越しのクラウドサーバでのデータ蓄積が可能となる。

【実施例2】

【0103】

本発明の監視カメラシステムの実施例２は、１又は複数の営業用の車両に搭載されたカメラ群及び計測デバイス群にネットワークを介して接続された録画サーバと、録画サーバにネットワークを介して接続され画像を表示する端末を具備する監視カメラシステムであって、（１）計測デバイス群が、少なくとも車両の速度を計測する計測デバイスを含み、（２）カメラ群が、車両の前方周囲の画像を撮影するカメラと車両の後方周囲の画像を撮影するカメラと車両の車内風景の画像を撮影する１又は複数のカメラとを含み、(３)録画サーバは、(３−１)カメラ群に画像を撮影させ撮影したカメラ画像を録画サーバに入力させるカメラ画像取得手段、(３−２)計測デバイス群にそれぞれ所定の計測をさせて計測データを録画サーバに入力させる計測データ取得手段、(３−３)入力させた計測データをデータベースに蓄積する計測データ保存手段、(３−４)蓄積した計測データに基づいて、画像に合成する速度情報を含む計測情報を形成して、入力させたカメラ画像から計測情報を合成するための第１のカメラ画像を抽出し、抽出した第１のカメラ画像に計測情報を合成し、かつ、第１のカメラ画像以外のカメラ画像から、第１のカメラ画像に合成させる１又は複数の合成用カメラ画像を抽出し、計測情報を合成した第１のカメラ画像に合成用カメラ画像を合成して、一次データとしてデータベースに蓄積する一次データ作成手段、(３−５)一次データから、合成された計測情報が所定の速度以上である画像を抽出する画像抽出手段、(３−６)画像抽出手段で抽出された画像について、連続時間毎にスポット画像の一覧を作成してデータベースに蓄積する一覧データ保存手段、(３−７)端末に一覧データを表示して端末から表示するスポット画像の選択を受け付けるスポット画像選択受付手段、（３−８）一次データから、選択されたスポット画像の画像を検索し、検索された画像をスポット画像として端末に送信するスポット画像送信手段、(３−９)端末から、スポット画像からの巻戻し要求を受け付けるスポット画像巻戻し受付手段、(３−１０)巻戻し要求毎に、端末に前回送信した画像より一定時間分過去の時点の一次データを抽出して巻戻しスポット画像として端末に送信する巻戻しスポット画像送信手段、(３−１１)端末から、巻戻しスポット画像からの早送り要求を受け付ける巻戻しスポット画像早送り受付手段、(３−１２)早送り要求毎に、現時点の画像に達するまでは、端末に前回送信した画像より一定時間分未来の時点の一次データを抽出して早送りスポット画像として端末に送信する早送りスポット画像送信手段を有し、（４）端末は、（４−１）録画サーバから送信されたスポット画像を表示するスポット画像表示手段、（４−２）スポット画像表示中に、巻戻し要求の入力を受け付け、スポット画像を録画サーバに要求する巻戻し開始要求手段、（４−３）巻戻しスポット画像表示中に、スポット画像の要求間隔より短い一定時間毎に、巻戻しスポット画像を録画サーバに要求する巻戻し継続要求手段、（４−４）巻戻しスポット画像表示中に、早送り要求の入力を受け付け、早送りスポット画像を録画サーバに要求する巻戻しスポット画像早送り開始要求手段、（４−５）早送りスポット画像表示中に、スポット画像の要求間隔より短い一定時間毎に、早送りスポット画像を録画サーバに要求する巻戻しスポット画像早送り継続要求手段、を有する。

【0104】

図１８は、本発明の監視カメラシステムの実施例２における合成例を示す説明図である。実施例２は実施例１の応用例であり、特記のない限りシステム構成及び監視方法は実施例１と同じである。本実施例は、営業用の車両（例：バス車両）に搭載した監視用カメラを用いた監視カメラシステムである。本実施例において、監視用カメラは４台で、前方画像（図１８（ａ））としてバスの前方の道路状況を撮影するカメラと、車内画像（図１８（ｂ））としてバス内部の混雑状況を撮影するカメラと、後方画像（図１８（ｃ））としてバスの後方の道路状況を撮影するカメラと、精算画像（図１８（ｄ））としてバス内部の精算機付近の状況を撮影するカメラである。計測デバイスは、車両の速度メータに接続され車両の速度情報を取得する計測デバイスと、車内に設けた温度計の計測デバイスの２台である。得られた計測データに基づいて計測情報（図１８（ｅ））として、前方画像の左上部に合成し、また、前方画像の右側には、精算画像、車内画像、後方画像を合成し、合成画像（図１８（ｆ））を端末に表示する。本実施例において、録画サーバはバス運行管理センターに設置され、バスに設けられた監視カメラや計測デバイスからはＷｉ−ｆｉ回線を通じてデータを取得する。端末は、バス運行管理センターの他、例えば、インターネット回線を通じて接続された運行経路上の派出所のモニターやスマートフォン画面等、あるいは運行経路上のバス停に設けた屋外モニター等でもよい。

【0105】

本実施例によれば、第１のカメラ画像に計測した速度情報を含む計測情報及び他のカメラ画像を合成したうえで一次データが作成されるため、撮影した第１のカメラ画像と速度を含む計測情報と他のカメラ画像を連動させた状態で、ほぼリアルタイムでの再生ができ、かつデータ量が小さく低コスト化を可能とする。また、一次データの画像に予め計測情報と複数のカメラ画像が合成されているため、合成した状態で、巻き戻しや早送りができる。さらに、再生・巻戻し・早送りといった操作に対し、レスポンスを素早くすることができる。さらに、所定の速度を記録した時点の画像からの再生や巻き戻しや早送りも手軽にできる。

【0106】

より詳細には、本実施例によれば、合成画像の表示には１画像分のデータ量のみで済むので、スマートフォン等の端末でもバスの状況を知ることができ、さらに、得られる情報は、前方の道路状況だけでなく、車内の混雑状況や、精算トラブルや速度超過や危険運転等の有無やその状況、前後の危険車両の検知や、車内トラブルや事故発生の有無やその状況、運転手の勤務態度把握まで、一度に把握できる。

【0107】

さらに、本実施例においては、画像抽出手段は、一次データの中で、合成された計測情報のうち速度情報について所定の速度以上、例えば６０ｋｍ／ｈ以上である画像をスポット画像として抽出する。本実施例によれば、スポット画像の再生により６０ｋｍ／ｈとなっているときの前後の道路状況が分かるだけでなく、精算画像から運転手の様子を知ることができ、さらに巻戻したり巻戻し再生をすることにより速度超過の原因も分かるし、早送りによりその後の状況も知ることができる。

【実施例3】

【0108】

本発明の監視カメラシステムの実施例３は、１又は複数の動植物育成場に搭載されたカメラ群及び計測デバイス群にネットワークを介して接続された録画サーバと、録画サーバにネットワークを介して接続され画像を表示する端末を具備する監視カメラシステムであって、（１）計測デバイス群が、少なくとも動植物育成場の環境値を計測する計測デバイスを含み、（２）カメラ群が、動植物育成場の場内の画像を撮影する１又は複数のカメラを含み、（３）録画サーバは、（３−１）カメラ群に画像を撮影させ撮影したカメラ画像を録画サーバに入力させるカメラ画像取得手段、（３−２）計測デバイス群にそれぞれ所定の計測をさせて計測データを録画サーバに入力させる計測データ取得手段、（３−３）入力させた計測データをデータベースに蓄積する計測データ保存手段、（３−４）蓄積した計測データに基づいて、画像に合成する環境値情報を含む計測情報と所定の時刻からの環境値情報の時系列グラフ画像とを形成して、入力させたカメラ画像から計測情報及び時系列グラフ画像を合成するための第１のカメラ画像を抽出し、抽出した第１のカメラ画像に計測情報及び時系列グラフ画像を合成するか、又は、抽出した第１のカメラ画像に計測情報及び時系列グラフ画像に加えて第１のカメラ画像以外のカメラ画像から第１のカメラ画像に合成させる１又は複数の合成用カメラ画像を抽出して合成用カメラ画像をも合成し、一次データとしてデータベースに蓄積する一次データ作成手段、を有する。

【0109】

図１９は、本発明の監視カメラシステムの実施例３における合成例を示す説明図である。実施例３は実施例１の応用例であり、実施例３は実施例１の応用例であり、特記のない限りシステム構成及び監視方法は実施例１と同じである。本実施例は、動植物育成場（例：苺のビニールハウス）に搭載した監視用カメラを用いた監視カメラシステムである。本実施例において、監視用カメラは３台で、全体画像（図１９（ａ））としてバハウス内の全景を撮影するカメラと、個別画像１（図１９（ｂ））、個別画像２（図１９（ｃ））として特定の場所の植物の発育状況を撮影するカメラである。計測デバイスは、ビニールハウス内に設けた、温度計、湿度計、二酸化炭素濃度計測器、水分量測定器の計４台である。得られた計測データに基づいて計測情報（図１９（ｄ））として、全体画像の左上部に合成し、また、全体画像の右側には、個別画像１、個別画像２の他、を合成し、得られた計測データに基づいて作成された、二酸化端塗装度と温度と湿度の各時系列データについて１つにまとめた前日との比較グラフの画像（図１９（ｅ））を全体画像の右下部に合成し、合成画像（図１９（ｆ））を端末に表示する。本実施例において、録画サーバは生産管理センター或いは農家に設置され、ビニールハウスに設けられた監視カメラや計測デバイスからはＬＡＮ回線やインターネット回線を通じてデータを取得する。端末は、生産管理センター或いは農家の他、例えば、生産者のスマートフォン画面等でもよい。

【0110】

本実施例によれば、第１のカメラ画像に計測した環境値を含む計測情報や計測した環境値等に基づくグラフ画像又はこれらに加えて他のカメラ画像を合成したうえで一次データが作成されるため、撮影した第１のカメラ画像と計測データ類から得られる情報又はこれらに加えて他のカメラ画像を連動させた状態で、ほぼリアルタイムでの再生ができ、かつデータ量が小さく低コスト化を可能とする。また、一次データの画像に予め計測情報やグラフ等の画像が合成されているため、合成した状態で、巻き戻しや早送りができる。さらに、再生・巻戻し・早送りといった操作に対し、レスポンスを素早くすることができる。

【0111】

より詳細には、本実施例によれば、合成画像の表示には１画像分のデータ量のみで済むので、スマートフォン等の端末でもビニールハウス内の状況を知ることができ、さらに、得られる情報は、全体状況だけでなく、発育状況や、前日との計測データの比較、角計測データや生産状況の確認、作業員の作業内容の確認まで、一度に把握できる。

【0112】

さらに、本実施例においては、良い苺ができたとき、過去の映像を遡って確認することができるので、改良ポイントを早く把握でき、さらなる改良をしやすくなり、改良スピードが向上する。

【0113】

なお、本発明は、上記実施の形態に限定されず、その発明の趣旨を逸脱しない範囲で種々と変形実施が可能である。また、上記各実施の形態の構成要素を発明の趣旨を逸脱しない範囲で任意に組み合わせることができる。

【符号の説明】

【0114】

１００ 録画サーバ
１０１ ＣＰＵ
１０２ メモリ
１０３ ディスプレイ
１０４ ネットワークインターフェース
１０５ キーボード
１０６ マウス
１０７ ＲＳ２３２Ｃ／ＲＳ４８５シリアルデバイス
１１０ 記憶装置
１１１ 一次画像フォルダ
１１２ 二次映像フォルダ
１１３ 撮影・収集・編集・送信プログラム
１１４ オペレーティングシステム
１１５ デバイス計測情報データベース
２００ モバイル端末
２０１ ＣＰＵ
２０２ メモリ
２０３ ディスプレイ
２１０ 記憶装置
２１３ 画像表示プログラム
２１４ オペレーティングシステム
３００ 閲覧ＰＣ
３０１ ＣＰＵ
３０２ メモリ
３０３ ディスプレイ
３０５ キーボード
３０６ マウス
３１０ 記憶装置
３１３ 画像表示プログラム
３１４ オペレーティングシステム
４００ 監視用カメラ
５００ ネットワーク
６００ ルータ
７００ ＨＴＴＰ接続計測デバイス
７０１ ＣＰＵ
７０２ メモリ
７０３ ディスプレイ
７０４ ネットワークインターフェース
７１０ 記憶装置
７１３ データ収集プログラム
７１４ オペレーティングシステム
７１６ アナログ計測機
７１７ ＨＴＴＰサービスプログラム
７１８ アナログ／デジタル変換
８００ ＦＴＰ接続計測デバイス
８０１ ＣＰＵ
８０２ メモリ
８０３ ディスプレイ
８０４ ネットワークインターフェース
８１０ 記憶装置
８１３ データ収集プログラム
８１４ オペレーティングシステム
８１６ アナログ計測機
８１７ ＦＴＰサービスプログラム
８１８ アナログ／デジタル変換
９００ シリアル接続計測デバイス
９０１ ＣＰＵ
９０２ メモリ
９０３ ディスプレイ
９０４ ネットワークインターフェース
９１０ 記憶装置
９１３ データ収集プログラム
９１４ オペレーティングシステム
９１６ アナログ計測機
９１７ シリアル転送プログラム
９１８ アナログ／デジタル変換

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】