特許 7354771 記録システム、記録方法およびプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-09-25

(45)【発行日】2023-10-03

(54)【発明の名称】記録システム、記録方法およびプログラム

(51)【国際特許分類】

   H04N 7/18 20060101AFI20230926BHJP

   B60R 11/02 20060101ALI20230926BHJP

   H04N 23/60 20230101ALI20230926BHJP

【ＦＩ】

H04N7/18 U

B60R11/02 Z

H04N7/18 J

H04N23/60 300

H04N23/60 500

【請求項の数】 7

(21)【出願番号】P 2019198606

(22)【出願日】2019-10-31

(65)【公開番号】P2021072559

(43)【公開日】2021-05-06

【審査請求日】2022-09-30

(73)【特許権者】

【識別番号】308036402

【氏名又は名称】株式会社ＪＶＣケンウッド

(74)【代理人】

【識別番号】100103894

【弁理士】

【氏名又は名称】家入 健

(72)【発明者】

【氏名】長瀬 芳伸

【審査官】鈴木 隆夫

(56)【参考文献】

【文献】国際公開第２０１３／１１１７４５（ＷＯ，Ａ１）

【文献】特開２０１８－１８７９５９（ＪＰ，Ａ）

【文献】特開２０１８－１５１６９３（ＪＰ，Ａ）

【文献】特開２０１０－１８２１８９（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ７／１８

Ｂ６０Ｒ １１／０２

Ｈ０４Ｎ ２３／６０

(57)【特許請求の範囲】

【請求項1】

車両の車室内および車室外の画像を撮影するカメラから撮影データを取得する撮影データ取得部と、
前記撮影データから同乗者を検出する同乗者検出部と、
予め設定された範囲の運転者を検出する運転者検出部と、
前記車室内に存在する前記同乗者が降車したことを判定する判定部と、
前記運転者検出部が検出していた前記運転者を検出しなくなった後に、前記判定部が前記同乗者の降車を判定した場合には、前記車室外の撮影データを記録装置に記録することを指示する記録制御部と、を備える
記録システム。

【請求項2】

前記判定部は、前記車両のドアが閉扉状態から開扉状態に変化したことを検出するとともに、前記開扉状態の前記ドアから前記同乗者が降車したことを判定する
請求項１に記載の記録システム。

【請求項3】

前記記録制御部は、前記運転者検出部が再び前記運転者を検出したことに応じて、前記記録を停止することを指示する、
請求項１または２に記載の記録システム。

【請求項4】

前記記録にかかる情報である降車情報を前記車両の外部へ送信可能な通信部を制御する通信制御部をさらに備え、
前記記録制御部は、前記記録の指示とともに、前記通信制御部に前記降車情報を送信することを指示する
請求項１～３のいずれか一項に記載の記録システム。

【請求項5】

前記撮影データ取得部は、前記車両が有する複数のカメラから撮影データをそれぞれ取得し、
前記記録制御部は、前記判定部が前記同乗者の降車を判定した場合には、前記同乗者が撮影されている前記撮影データを選択して前記記録することを指示する
請求項１～４のいずれか一項に記載の記録システム。

【請求項6】

車両の車室内および車室外の画像を撮影するカメラから撮影データを取得する撮影データ取得ステップと、
前記撮影データから同乗者を検出する同乗者検出ステップと、
予め設定された範囲の運転者を検出する運転者検出ステップと、
前記車室内に存在する前記同乗者が降車したか否かを判定する判定ステップと、
検出されていた前記運転者が検出されなくなった後に、前記同乗者が降車したと判定した場合には、前記車室外の撮影データを記録装置に記録することを指示する記録制御ステップと、を備える
記録方法。

【請求項7】

車両の車室内および車室外の画像を撮影するカメラから撮影データを取得する撮影データ取得ステップと、
前記撮影データから同乗者を検出する同乗者検出ステップと、
予め設定された範囲の運転者を検出する運転者検出ステップと、
前記車室内に存在する前記同乗者が降車したか否かを判定する判定ステップと、
検出されていた前記運転者が検出されなくなった後に、前記同乗者が降車したと判定した場合には、前記車室外の撮影データを記録装置に記録することを指示する記録制御ステップと、を備える
記録方法を、コンピュータに実行させるプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は記録システム、記録方法およびプログラムに関する。

【背景技術】

【0002】

車両の運転者を含む乗員が車両から降車をする際の車室内の状態を撮影ないし撮像する技術が存在している。

【0003】

例えば、特許文献１には、ドライバが降車を準備している状態であると判定されたときに撮像された基準画像と、施錠状態であると判定されたときに撮像された比較画像との比較結果に基づいて、車室内に乗員が残存しているか否かを判定する装置が提案されている。

【0004】

特許文献２には、乗員が車両から降車する前に、カメラとディスプレイを起動させ、カメラの撮影画像をディスプレイに表示させる装置が提案されている。

【先行技術文献】

【特許文献】

【0005】

【文献】国際公開第２０１３／１１１７４５号

【文献】特開２０１８－１８７９５９号公報

【発明の概要】

【発明が解決しようとする課題】

【0006】

上記技術が存在する一方、運転者が一時的に降車している間に、車室内に残っている同乗者が運転者の意思に関わらず降車してしまい、運転者は同乗者の動向を把握できないことがある。このような事態になった場合に、運転者が同乗者の動向を把握するための技術は存在しなかった。

【0007】

本発明は、このような課題を解決するためになされたものであって、停車中の車両から降車した同乗者の動向を好適に把握できる記録システム等を提供するものである。

【課題を解決するための手段】

【0008】

本発明にかかる記録システムは、撮影データ取得部、同乗者検出部、運転者検出部、判定部および記録制御部を有する。撮影データ取得部は、運転者および同乗者が搭乗する車両の車室内および車室外の画像を撮影するカメラから撮影データを取得する。同乗者検出部は、撮影データから同乗者を少なくとも検出する。運転者検出部は、予め設定された範囲の運転者を検出する。判定部は、車室内に存在する同乗者が降車したか否かを判定する。記録制御部は、運転者検出部が検出していた運転者を検出しなくなった後に、判定部が同乗者の降車を判定した場合には、車室外の撮影データを記録装置に記録することを指示する。

【0009】

本発明にかかる記録方法は、撮影データ取得ステップ、同乗者検出ステップ、運転者検出ステップ、判定ステップおよび記録制御ステップを有する。撮影データ取得ステップは、運転者および同乗者が搭乗する車両の車室内および車室外の画像を撮影するカメラから撮影データを取得する。同乗者検出ステップは、撮影データから同乗者を少なくとも検出する。運転者検出ステップは、予め設定された範囲の運転者を検出する。判定ステップは、車室内に存在する同乗者が降車したか否かを判定する。記録制御ステップは、検出されていた運転者が検出されなくなった後に、同乗者が降車したと判定した場合には、車室外の撮影データを記録装置に記録することを指示する。

【0010】

本発明にかかるプログラムは、撮影データ取得ステップ、同乗者検出ステップ、運転者検出ステップ、判定ステップおよび記録制御ステップを有する方法をコンピュータに実行させる。撮影データ取得ステップは、運転者および同乗者が搭乗する車両の車室内および車室外の画像を撮影するカメラから撮影データを取得する。同乗者検出ステップは、撮影データから同乗者を少なくとも検出する。運転者検出ステップは、予め設定された範囲の運転者を検出する。判定ステップは、車室内に存在する同乗者が降車したか否かを判定する。記録制御ステップは、検出されていた運転者が検出されなくなった後に、同乗者が降車したと判定した場合には、降車した同乗者を撮影した撮影データを記録装置に記録することを指示する。

【発明の効果】

【0011】

本発明によれば、停車中の車両から降車した同乗者の動向を好適に把握できる記録システム等を提供することができる。

【図面の簡単な説明】

【0012】

【図1】実施の形態１にかかる記録システムを搭載した車両の上面図である。

【図2】実施の形態１にかかる記録システムのブロック図である。

【図3】記録システムが行う同乗者認識処理を示すフローチャートである。

【図4】記録システムが行う降車記録処理を示すフローチャートである。

【図5】記録システムが生成する撮影データの例を示す第１の図である。

【図6】記録システムが生成する撮影データの例を示す第２の図である。

【図7】記録システムが生成する撮影ファイルの例を示す第１の図である。

【図8】記録システムが生成する撮影ファイルの例を示す第２の図である。

【図9】実施の形態２にかかる記録システムを搭載した車両の上面図である。

【図10】実施の形態２にかかる記録システムのブロック図である。

【図11】実施の形態２にかかる降車記録処理を示すフローチャートである。

【発明を実施するための形態】

【0013】

以下、発明の実施の形態を通じて本発明を説明するが、特許請求の範囲にかかる発明を以下の実施形態に限定するものではない。また、実施形態で説明する構成の全てが課題を解決するための手段として必須であるとは限らない。説明の明確化のため、以下の記載および図面は、適宜、省略、および簡略化がなされている。なお、各図面において、同一の要素には同一の符号が付されており、必要に応じて重複説明は省略されている。

【0014】

＜実施の形態１＞
以下、図を参照して実施の形態の構成について説明する。図１は、記録システムを搭載した車両の上面図である。車両９００には、記録システム１０が設置されている。記録システム１０は、移動体である車両９００のキャビン内において、ウィンドシールド上部に固定されている。

【0015】

記録システム１０は、カメラを有しており、カメラが撮影した撮影データを記録および再生する所謂ドライブレコーダとしての機能を有している。記録システム１０が有しているカメラは、全天周カメラである。全天周カメラは、記録システム１０の周囲３６０度の風景を撮像する。そのため、記録システム１０は、車両９００の外部（すなわち車両９００の車室外）や、車両９００の車室内を撮影できる。

【0016】

一般的なドライブレコーダの機能として、記録システム１０は、予め設定されたトリガを受け付けた場合に、予め設定された期間分の撮影データを「イベント記録データ」として再生可能に記録する。予め設定されたトリガを受け付けた場合とは、例えば予め設定された大きさの突発的な衝撃を検出した場合である。車両の運転者等は、このイベント記録データを再生し、再生したイベント記録データの映像を見ることによりイベントの状況を把握できる。

【0017】

次に、図２を参照して記録システム１０の機能構成について説明する。図２は、記録システム１０の構成を示すブロック図である。図に示すように、記録システム１０は、各構成要素の制御を司る制御部１００および制御部１００に接続された複数の構成要素を有している。制御部１００は、ＣＰＵ（Central Processing Unit）、ＧＰＵ（Graphics Processing Unit）、メモリ、および複数のインタフェース等が実装された回路基板を有する制御装置であって、格納されているプログラムを実行して種々の処理を実行する。

【0018】

以下に制御部１００の詳細について説明する。制御部１００は主な構成として、撮影データ取得部１２０、バッファメモリ１２１、撮影データ処理部１２２、記録制御部１２３、再生制御部１２４、操作制御部１２５、表示制御部１２６、イベント検出部１２７、位置情報取得部１２８、同乗者検出部１２９、運転者検出部１３０、判定部１３１および通信制御部１３２を有している。記録システム１０が行う処理は、制御部１００が実行するプログラムによって実現される。便宜的に、これらの構成はそれぞれバスライン１１０に接続しているように表現する。

【0019】

撮影データ取得部１２０は、カメラ１５０から供給された撮影データを取得する。カメラ１５０は、例えば毎秒３０フレーム（３０ｆｐｓ）の撮影データを生成し、生成した撮影データを６０分の１秒ごとに撮影データ取得部１２０に供給する。撮影データ取得部１２０は、バスライン１１０を介して撮影データをバッファメモリ１２１に供給する。

【0020】

バッファメモリ１２１は、揮発性または不揮発性のメモリ装置である。バッファメモリ１２１は、撮影データ取得部１２０を介してカメラ１５０が定期的に生成する撮影データを順次受け取り、受け取った撮影データを一時的に記憶する。バッファメモリ１２１が一時的に記憶する撮影データは予め設定された期間分である。バッファメモリ１２１は、予め設定された期間を経過した撮影データを順次消去するか、あるいは、新たに受け取った撮影データを順次上書きする。すなわちバッファメモリ１２１はリングバッファとして機能する。

【0021】

撮影データ処理部１２２は、バッファメモリ１２１が記憶している撮影データから、予め設定された方式に準拠した撮影ファイルを生成する。予め設定された方式とは、例えばＨ．２６４やＭＰＥＧ－４（Moving Picture Experts Group）などの方式である。撮影データ処理部１２２が生成する撮影ファイルには、ヘッダとペイロードが含まれる。撮影ファイルのヘッダにはファイルが生成された日時等が含まれ、ペイロードには撮影データが含まれる。

【0022】

撮影データ処理部１２２は、さらに、同乗者検出部１２９または運転者検出部１３０と連携し、車室内の動体を検出するための処理を施してもよい。本実施の形態において「車室内の動体」とは、車室内の運転者や同乗者を指す。また同乗者とはペットなどの動物を含んでもよい。すなわち、撮影データ処理部１２２は、車室内の動体を検出するための処理として、例えば同乗者検出部１２９または運転者検出部１３０が撮影データに含まれる車室内の動体の特徴量を算出するための前処理として、撮影データに対して所定の処理を施してもよい。所定の処理とは、例えば、ＨＯＧ特徴量（Histograms of Oriented Gradients）の算出やＳＶＭ（Support Vector Machine）などの手法に従った画像認識処理等である。

【0023】

記録制御部１２３は、撮影データ処理部１２２が生成した撮影ファイルを記録装置１６０に記録させるための制御を行う。例えば、イベント検出部１２７がイベントを検出した場合、記録制御部１２３は、イベントの検出に応じて予め設定された期間分の撮影ファイルを、上書き禁止されたイベント記録ファイルとして記録装置１６０に記録させる。なお、記録制御部１２３が記録装置１６０にイベント記録ファイルを記録させる処理を、「イベント記録」と称する。

【0024】

記録制御部１２３はイベント記録ファイルを、記録装置１６０における所定の記録領域に記録させる。所定の記録領域とは例えば、上書きまたは消去禁止とすることを定められた保護領域である。あるいは、記録制御部１２３により記録装置１６０に供給されたイベント記録ファイルは、上書きまたは消去禁止であることを示すフラグをファイル内に含めて記録されてもよい。

【0025】

記録制御部１２３は、上述のイベント記録に加えて、「降車記録」を行う。「降車記録」とは、運転者検出部が検出していた運転者を検出しなくなった後に、同乗者が降車した場合には、後述する同乗者検出部１２９で同乗者の降車を検出し、移動した同乗者を撮影した撮影データを含む車室外の撮影データを降車記録ファイルとして記録装置１６０に記録させる処理をいう。

【0026】

降車記録は、運転者が車両９００から離れた場合に、運転者が認識しない状況下で同乗者が車両９００から降車した場合に、降車した同乗者の動向を記録することを目的としている。降車記録を行うことにより、記録システム１０は、運転者に対して降車した同乗者の動向を認識させることができる。

【0027】

より具体的には、例えば、車両９００を停車させた運転者が一時的に車両９００から離脱する場合において、運転者の知らない間に同乗者が車両９００を降り、車両９００から離れてしまうことがある。この場合、車両９００に戻ってきた運転者は、同乗者の行方が分からない。そこで運転者は、降車記録により記録された撮影データを後述する携帯端末で視認することにより、降車した同乗者がどちらの方面へ向かったのかを認識できる。

【0028】

再生制御部１２４は、記録装置１６０が記録している撮影ファイルを管理し、記録されている撮影データを再生するための処理を行う。再生制御部１２４は、例えばユーザからの指示に応じて、選択された撮影ファイルを読み取り、読み取った撮影ファイルを再生するために表示制御部に供給する。

【0029】

操作制御部１２５は、操作部１４０が受け付けた操作情報を取得し、操作情報に基づいた操作指示を、各構成要素に出力する。例えば操作制御部１２５は、操作部１４０から再生対象となる撮影ファイルの選択指示を取得した場合、再生制御部１２４に対して、記録装置１６０に記録されている撮影ファイルを選択させる。操作制御部１２５は、操作部１４０から各種データの再生に関する指示を取得した場合、再生制御部１２４に再生に関する処理を行わせる。各種データの再生に関する指示とは、例えば、再生開始、一時停止、再生停止、拡大表示などである。

【0030】

表示制御部１２６は、表示部１４１に対し、様々な情報を表示させる制御を行う。例えば、表示制御部１２６は、カメラ１５０が撮影中の撮影データを表示部１４１に表示させる。また、表示制御部１２６は、再生制御部１２４から供給された撮影データを受け取り、受け取った撮影データを表示部１４１に表示させる。表示制御部１２６は、表示部１４１に、操作部１４０の機能としてタッチセンサが重畳されている場合、タッチセンサに対応したアイコンなどを表示部１４１に適宜表示させる。

【0031】

イベント検出部１２７は、加速度センサ１４２が検出する加速度に関する情報を受け取り、受け取った加速度に関する情報に基づき、加速度を示す信号の大きさや信号パターンから所定のイベントが発生したことを検出する。外部から受ける加速度とは、記録システム１０が車両９００から受ける加速度であって、例えば車両９００が他の物体と衝突したときに発生する衝撃などにより生じる加速度である。

【0032】

イベント検出部１２７は、加速度センサ１４２から受け取った信号が所定のイベントの発生に該当することを検出した場合には、イベントの発生を検出したことを示す信号を撮影データ処理部１２２に供給する。イベントの発生とは、例えば、急ブレーキによる衝撃や、車両に対して物体が衝突した場合の衝撃などである。

【0033】

位置情報取得部１２８は、測位情報受信部１４３が受信した測位衛星からの信号を受け取り、受け取った信号から現在位置に関する情報である位置情報を取得し、取得した位置情報を記録制御部１２３に供給する。位置情報には例えば、測位衛星から信号を受け取った時刻における車両の緯度および経度が含まれる。

【0034】

同乗者検出部１２９は、撮影データを解析し、車室内の助手席または後部座席に搭乗している乗員を検出する。乗員とは、車両９００に搭乗している同乗者である。同乗者は、人間だけでなく、動物も含まれていてもよい。同乗者検出部１２９は、撮影データ処理部１２２と連携し、撮影データに含まれる車室内の助手席または後部座席に搭乗している物体の特徴量を抽出し、抽出した特徴量から、車室内の人間や動物などを検出する。特徴量は、検出したい物体を特徴づけるもののことであっても良い。この場合、人間の場合の特徴量は、目の位置、手の形等が撮影された撮影データに関連し、動物の場合の特徴量は、目の位置や体毛等が撮影された撮影データに関連する。

【0035】

同乗者検出部１２９は、同乗者情報記憶部１４４に接続し、検出した同乗者に関する情報として同乗者が車両９００の乗車した時の座った座席の位置を同乗者情報記憶部１４４に記憶させる。また同乗者検出部１２９は、同乗者情報記憶部１４４に記憶させた同乗者に関する情報を読み取り、読み取った情報を適宜利用できる。これにより同乗者検出部１２９、例えば、検出した同乗者が過去に検出されたことのある同乗者であった場合には、過去の情報と関連付けた処理を行うことができる。例えば同乗者検出部１２９は、判定部１３１と連携し、降車したと判定された同乗者に関する固有情報を関連付けて、降車した同乗者が誰かを特定できる。

【0036】

運転者検出部１３０は、運転席の位置と、運転席に搭乗する運転者の外見の特徴とを認識するとともに、予め設定された範囲の運転者を検出する。運転者検出部１３０は、カメラ１５０により撮影される撮影データにおいてどの位置が運転席かを予め記憶する。そして運転者検出部１３０は、運転席に搭乗する人物を運転者であると判定する。予め設定された範囲は、記録システム１０に予め設定されたものであって、記録システム１０が運転者を認識しうる一定の距離より近い範囲である。例えば、予め設定された範囲は、撮影データに運転者が検出可能に存在する範囲である。

【0037】

予め設定された範囲は、撮影データから検出される運転者が予め設定された距離より近くに存在すると推定される範囲であってもよい。このような機能を実現するために、例えば運転者検出部１３０は、運転中の運転者の画像データから頭部の大きさを記憶し、運転席を下りた運転者の画像データとの比較を行うことにより、運転者の位置を推定してもよい。予め設定された範囲は、車両内と設定されていてもよい。

【0038】

なお運転者検出部１３０は、撮影データから運転者を検出するのに代えて、車両９００に設けられたセンサから運転者を検出してもよい。車両９００に設けられたセンサの例は、運転席に設けられた圧力センサ、歪センサまたは温度センサ等である。また運転者検出部１３０が有するセンサは、赤外光により運転者が運転席に搭乗しているか否かを検出できる人感センサであってもよい。運転者検出部１３０が有するセンサは、運転者が所持する発信機の電波強度を検出する受信機であってもよい。

【0039】

判定部１３１は、撮影データに含まれる同乗者の位置から、車室内に存在する同乗者が降車したか否かを判定する。撮影データは、車室内の範囲が予め設定されている。そのため、判定部１３１は、同乗者が車室内に存在するのか車室外に存在するのかを検出できる。車室内の範囲を設定する手段として、判定部１３１は、車室内と車室外との境界を認識してもよい。これにより、判定部１３１は、車室内の同乗者が境界を越えて車室外へ出たか否かを判定できる。同乗者が降車したことを検出するために、開扉状態の車室内における車室外との境界近傍にマーカが設置されていてもよい。これにより判定部１３１は、マーカを超えて移動した同乗者について降車したと判定できる。

【0040】

また判定部１３１は、車両のドアが閉扉状態から開扉状態に変化したか否かを検出するとともに、閉扉状態を検出したドアから同乗者が降車したか否かを判定するものであってもよい。この場合、判定部１３１は撮影データから開扉状態と閉扉状態とを識別可能に設定されていてもよい。あるいはこの場合に、記録システム１０は、車両９００のＥＣＵ（Electronic Control Unit）と通信可能に接続されており、車両９００からドアの開閉に関する情報を取得してもよい。

【0041】

通信制御部１３２は、通信部１７０を介して行う外部装置との通信（外部通信）を制御する。外部通信は、記録システム１０が記録システム１０の外部と行う通信であって、例えば車両９００を離れた運転者が所持する携帯端末との通信である。

【0042】

通信制御部１３２は、同乗者が降車したことを判定した場合に、同乗者の降車に関する情報（降車情報）を外部通信により運転者が所持する携帯端末に送信する。同乗者の降車に関する情報には、例えば、同乗者が降車した日時、降車した同乗者の固有情報、同乗者が降車した際の撮影データのうち少なくともいずれか１つが含まれる。なお、通信制御部１３２が送信する撮影データは、静止画であってもよいし、所定の長さの動画であってもよい。

【0043】

次に、制御部１００に接続している各構成について説明する。記録システム１０は、操作部１４０、表示部１４１、加速度センサ１４２、測位情報受信部１４３、同乗者情報記憶部１４４、カメラ１５０、記録装置１６０および通信部１７０を有している。

【0044】

操作部１４０は、記録システム１０に対して運転者が行う操作を受け付けるユーザインタフェースである。ユーザインタフェースは、例えば操作ボタンであってもよいし、表示部１４１に重畳して設置されたタッチセンサであってもよい。またユーザインタフェースは、赤外線や無線通信の受信部であって、リモコン等から送信される信号を受け付けるものであってもよい。操作部１４０は、受け付けた操作に関する情報である操作情報を、所定のインタフェースを介して制御部１００に供給する。操作情報は例えば、イベント記録開始の指示やイベント記録データの再生を行う指示等である。

【0045】

表示部１４１は、表示制御部１２６の制御により各種情報を表示する表示装置である。表示部１４１は、例えば、液晶パネルや有機ＥＬ（Electro Luminescence）などの表示パネルを少なくとも有している。表示部１４１は、表示制御部１２６に接続し、表示制御部１２６から供給される信号を表示する。表示部１４１は、例えば撮影データに含まれる映像を表示するように構成されている。

【0046】

加速度センサ１４２は、例えば３軸加速度センサである。加速度センサ１４２は、加速度センサ１４２に印加された加速度を検出し、検出した加速度に応じて、検出した加速度に関する情報を出力する。加速度センサ１４２は、イベント検出部１２７に接続しており、検出した加速度に関する情報をイベント検出部１２７に出力する。なお、加速度センサ１４２は、３軸加速度センサに代えて、１軸または２軸加速度センサであってもよい。

【0047】

測位情報受信部１４３は、ＧＰＳ（Global Positioning System）あるいはＧＮＳＳ（Global Navigation Satellite System）と称される衛星測位システムにより車両の現在位置に関する情報を受信する。測位情報受信部１４３は、測位信号を受信するためのアンテナであってもよいし、車両が取得する位置情報を受け取るための通信インタフェースであってもよい。測位情報受信部１４３は、受信した現在位置に関する信号を、位置情報取得部１２８に供給する。

【0048】

同乗者情報記憶部１４４は、ＤＲＡＭ（Dynamic Random Access Memory）、フラッシュメモリまたはＳＳＤ（Solid State Drive）などの揮発性もしくは不揮発性またはこれら組み合わせにより構成されるメモリを含む記憶装置である。同乗者情報記憶部１４４は、同乗者検出部１２９が検出した同乗者に関する情報を記憶するとともに、記憶した情報を同乗者検出部１２９に供給できる。

【0049】

カメラ１５０は、対物レンズ、撮像素子およびＡ－Ｄ（Analog to Digital）変換素子等を有する撮像装置である。カメラ１５０は、移動体である車両の周囲の景色を含む映像を撮像し、撮像した映像のデータである撮影データを生成する。カメラ１５０は、生成した撮影データを撮影データ取得部１２０に供給する。

【0050】

記録装置１６０は、カメラ１５０から供給された撮影データを格納する記録装置である。記録装置１６０は、例えばフラッシュメモリを含むメモリカードや、ＳＳＤまたはＨＤＤ（Hard Disc Drive）等の不揮発性の記録装置である。記録装置１６０は、記録制御部１２３に接続し、記録制御部１２３から所定のデータを受け取り、受け取ったデータを記録する。また、記録装置１６０は、再生制御部１２４の指示に応じて再生制御部１２４に対して記録しておいたイベント記録データを含むイベントファイルを供給する。記録装置１６０は記録システム１０から脱着可能に構成されていてもよいし、取り外しできない構成であってもよい。

【0051】

通信部１７０は、運転者が所持する携帯端末等と通信可能に接続するインタフェースであり、例えばアンテナおよびアンテナを介して送信する信号の変調または復調を行う回路等により構成される。通信部１７０は、上述した携帯端末と直接通信を行ってもよいし基地局や中継機等を介して通信を行ってもよい。すなわち通信部１７０は、通信制御部１３２から降車情報を受け取り、受け取った降車情報を携帯端末に送信可能に構成されている。

【0052】

次に、図３を参照して記録システム１０が同乗者を認識する処理について説明する。図３は、記録システム１０が行う同乗者認識処理を示すフローチャートである。図３に示すフローチャートは、記録システム１０の制御部１００の各構成が行う処理を示すものである。図３に示す処理は、例えば記録システム１０が起動することにより開始する。

【0053】

まず制御部１００は、車両９００が移動を開始したか否かを判定する（ステップＳ１０）。車両９００が移動を開始したか否かは位置情報取得部１２８が取得する位置情報により検出できる。制御部１００は、車両９００が停車状態から移動状態に変化すると、移動を開始したと判定する。車両９００が移動を開始したと判定しない場合（ステップＳ１０：Ｎｏ）、制御部１００は、ステップＳ１０を繰り返す。

【0054】

車両９００が移動開始したと判定した場合（ステップＳ１０：Ｙｅｓ）、制御部１００の撮影データ取得部１２０は、カメラ１５０が生成する撮影データの取得を開始する（ステップＳ１１）。撮影データ取得部１２０が撮影データの取得を開始すると、撮影データは、バッファメモリ１２１に供給される。

【0055】

次に、同乗者検出部１２９は、取得された撮影データから同乗者を検出する（ステップＳ１２）。さらに同乗者検出部１２９は、検出した同乗者に関する情報を、同乗者情報記憶部１４４に記憶させる（ステップＳ１３）。

【0056】

上述の処理により、記録システム１０は、移動を開始した車両９００に搭乗している同乗者に関する情報を記憶する。これにより、車両９００が停車した際に、同乗者が降車したことを検出するとともに、降車した同乗者をカメラ１５０により撮影できる。なお、上述の処理は車両９００が停車状態から移動状態に変化する度に行ってもよいし、車両９００のドアの開閉を検出し、閉扉状態から変化がない場合には処理を省略してもよい。なお、搭乗している同乗者に関する情報の記憶は、車両９００のエンジン起動時をトリガとして実行されても良い。

【0057】

次に、図４を参照して記録システム１０が降車記録を行う処理について説明する。図４は、記録システム１０が行う降車記録処理を示すフローチャートである。図４は、記録システム１０が行う降車の記録に関する処理を示すフローチャートである。図４に示す処理は、例えば、車両９００が停車したことを条件として開始する。

【0058】

制御部１００は、同乗者がいるか否かを判定する（ステップＳ２０）。同乗者がいると判定しない場合（ステップＳ２０：Ｎｏ）、制御部１００は、処理を終了させる。一方、同乗者がいると判定する場合（ステップＳ２０：Ｙｅｓ）、制御部１００は、ステップＳ２１に進む。

【0059】

ステップＳ２１において、制御部１００の運転者検出部１３０は、運転者が検出されているか否かを判定する（ステップＳ２１）。運転者検出部１３０が運転者を検出していると判定する場合（ステップＳ２１：Ｙｅｓ）、制御部１００は、ステップＳ２１を繰り返す。一方、運転者検出部１３０が運転者を検出していると判定しない場合（ステップＳ２１：Ｎｏ）、制御部１００は、ステップＳ２２に進む。

【0060】

ステップＳ２２において、制御部１００の撮影データ取得部１２０は、撮影データの取得を開始する（ステップＳ２２）。取得された撮影データはバッファメモリ１２１に供給され、リングバッファとして機能するバッファメモリ１２１において予め設定された期間を遡った時点から後のデータが蓄積される。これにより、同乗者が降車したことを検出した場合に、降車の検出より前の時点の同乗者の状況を記録できる。

【0061】

次に、制御部１００の判定部１３１は、同乗者が降車したか否かを判定する（ステップＳ２３）。同乗者が降車したと判定しない場合（ステップＳ２３：Ｎｏ）、制御部１００は、ステップＳ２８に進む。

【0062】

ステップＳ２８において、制御部１００の運転者検出部１３０は、運転者が検出されているか否かを判定する（ステップＳ２８）。一度検出されなくなった運転者が車両９００に戻ってきた場合、運転者検出部１３０は運転者を検出していると判定する（ステップＳ２８：Ｙｅｓ）。この場合、制御部１００は、撮影データの取得を停止し（ステップＳ２９）、ステップＳ２１に戻る。一方、依然として運転者検出部１３０が運転者を検出していると判定しない場合（ステップＳ２８：Ｎｏ）、制御部１００は、ステップＳ２３に戻る。

【0063】

なお、当然ながら、ステップＳ２１において運転者が検出されなくなる場合の運転者検出部１３０の閾値と、ステップＳ２８において運転者が再び検出されることになる場合の運転者検出部１３０の閾値は、同じである必要はない。すなわち、運転者検出部１３０が運転者の頭部の大きさを検出する場合、ステップＳ２８において運転者が再び検出されることになる場合の運転者の頭部の大きさは、ステップＳ２１において運転者が検出されなくなる場合の運転者の頭部の大きさより大きいのが好ましい。あるいは、運転者検出部１３０は、運転者が検出されなくなる場合の範囲（例えば、運転者と車両９００との距離が２０メートルの範囲）が、運転者が再び検出されることになる場合の範囲（例えば、運転者と車両９００との距離が１５メートルの範囲）よりも広くなるように設定されていることが好ましい。このように一定のヒステリシスを有することにより、記録システム１０は円滑な処理を実現できる。

【0064】

ステップＳ２３に戻る。ステップＳ２３において、同乗者が降車したと判定部１３１が判定した場合（ステップＳ２３：Ｙｅｓ）、判定部１３１は、同乗者の降車を検出したことを示す信号を記録制御部１２３に供給するとともに、制御部１００はステップＳ２４に進む。

【0065】

ステップＳ２４において、制御部１００は、降車記録ファイルの生成を開始する（ステップＳ２４）。具体的には、同乗者の降車を検出したことを示す信号を受け取った記録制御部１２３が、撮影データ処理部１２２に対して降車記録ファイルの生成を指示する。

【0066】

次にステップＳ２５において、制御部１００は、通信制御部１３２および通信部１７０を介して、運転者が所持する携帯端末に対して降車情報を送信する（ステップＳ２５）。

【0067】

次にステップＳ２６において、制御部１００は、生成している降車記録ファイルが記録装置１６０に記録可能か否かを判定する（ステップＳ２６）。生成している降車記録ファイルが記録装置１６０の記録可能領域の容量を超えない場合には、制御部１００は降車記録ファイルが記録可能でると判定する（ステップＳ２６：Ｙｅｓ）。その場合、記録制御部１２３は、ステップＳ３０に進む。

【0068】

ステップＳ３０において、制御部１００の運転者検出部１３０は、運転者が検出されているか否かを判定する（ステップＳ３０）。運転者検出部１３０が運転者を検出していると判定しない場合（ステップＳ３０：Ｎｏ）、制御部１００は、ステップＳ２６に戻る。一方、一度検出されなくなった運転者が車両９００に戻ってきた場合、運転者検出部１３０は運転者を検出していると判定する（ステップＳ３０：Ｙｅｓ）。この場合、制御部１００は、ステップＳ２７に進む。

【0069】

ステップＳ２６に戻る。ステップＳ２６において、生成している降車記録ファイルが記録装置１６０の記録可能領域の容量を超える可能性がある場合には、制御部１００は降車記録ファイルが記録可能でると判定しない（ステップＳ２６：Ｎｏ）。その場合、記録制御部１２３は、降車記録ファイルの生成を終了させる（ステップＳ２７）。さらに撮影データ取得部１２０は、撮影データの取得を終了させると（ステップＳ３１）、制御部１００は、一連の処理を終了させる。

【0070】

以上の処理により、記録システム１０は、運転者が車両９００から離れている間に同乗者が降車した場合に、同乗者の状況を撮影するとともに、すみやかに降車情報を運転者に送信する。

【0071】

なお、上述の処理においてステップＳ２２において撮影データ取得を開始し、ステップＳ２９において撮影データ取得を停止する処理を示したが、撮影データは常時取得し続けていてもよい。

【0072】

次に、図５～図８を参照して記録システム１０が生成する撮影データについて説明する。図５は、記録システム１０が生成する撮影データの例を示す第１の図である。図５は、撮影データと所定の時刻との関係を示している。図において、横軸は時刻を表しており、時刻ｔ００から時刻ｔ１０に向かって矢印の方向（右方向）に時間が経過することを示している。図６～図８も、図５と同様に、撮影データと所定の時刻との関係をそれぞれ示している。

【0073】

図５は、時刻ｔ１０における撮影データの状態を示している。図５において、時刻ｔ１０より過去の時刻ｔ００は、記録システム１０が運転者を検出しなくなった時刻であり、図４で示した処理のステップＳ２２に対応する。時刻ｔ００の後の時刻ｔ０１は、記録システム１０が撮影データの取得を開始した時刻であり、図４で示した処理のステップＳ２２に対応する。時間軸に沿って示された長尺形状は、時刻ｔ０１より後の時刻ｔ１０における撮影データＣ１０である。撮影データＣ１０は、カメラ１５０が生成した撮影データであって、バッファメモリ１２１に記憶されている。撮影データＣ１０は、時刻ｔ０１から時刻ｔ１０までの期間における撮影データである。

【0074】

次に、図６について説明する。図６は、記録システム１０が生成する撮影データの例を示す第２の図である。図６は、時刻ｔ１０より後の時刻ｔ２０における撮影データの状態を示している。時間軸に沿って示された長尺形状は、時刻ｔ２０における撮影データＣ２０である。記録システム１０は、予め設定された期間Ｐｎの撮影データを常に記憶しておくように設定されている。期間Ｐｎは、例えば６０秒、１２０秒あるいは１５０秒などの期間である。時刻ｔ２０における撮影データＣ２０は、時刻ｔ２０から期間Ｐｎを遡った時刻ｔ１１が、撮影データの取得を開始した時刻ｔ０１よりも後の時刻となっている。そのため、時刻ｔ２０における撮影データＣ２０は、時刻ｔ１１から時刻ｔ２０までの期間Ｐｎにおける撮影データとなっている。

【0075】

なお、バッファメモリ１２１に記憶される撮影データは時刻の経過とともに、期間Ｐｎより過去の撮影データは順次消去される。そのため、時刻ｔ０１から時刻ｔ１１までの撮影データは消去されている。

【0076】

次に、図７について説明する。図７は、記録システム１０が生成する撮影ファイルの例を示す第１の図である。図７は、時刻ｔ２０より後の時刻ｔ３０における撮影データの状態を示している。時刻ｔ３０は、判定部１３１が同乗者の降車を判定した時刻であり、図４に示す処理のステップＳ２３に対応している。

【0077】

時刻ｔ３０においてバッファメモリ１２１に記憶されている撮影データＣ３０は、時刻ｔ３０から期間Ｐｎを遡った時刻ｔ２１から時刻ｔ３０までのものである。

【0078】

撮影データＣ３０の下に示されているハッチングが施された矩形は、撮影ファイルに含まれる撮影データＤ３０である。撮影データＤ３０は時刻ｔ３０に降車が検出されたことをトリガとして時刻ｔ３０より期間Ｐ１遡った時刻ｔ２２から後の撮影データにより生成されている。なお、期間Ｐ１はゼロであってもよい。

【0079】

次に、図８について説明する。図８は、記録システム１０が生成する撮影ファイルの例を示す第２の図である。図８は、時刻ｔ３０より後の時刻ｔ４０における撮影データの状態を示している。時刻ｔ４０は、制御部１００が降車記録ファイルの生成を終了した時刻であり、図４に示す処理のステップＳ２７に対応している。

【0080】

時刻ｔ４０においてバッファメモリ１２１に記憶されている撮影データＣ４０は、時刻ｔ４０から期間Ｐｎを遡った時刻ｔ３１から時刻ｔ４０までのものである。

【0081】

撮影データＣ４０の下に示されているハッチングが施された矩形は、撮影ファイルに含まれる撮影データＤ４０である。撮影データＤ４０は、図７で示した時刻ｔ２２から継続して生成されている。制御部１００は、時刻ｔ４０において、撮影ファイルの生成を終了する。結果として、制御部１００は、時刻ｔ２２から時刻ｔ４０までの撮影データを含む撮影ファイルを生成する。なお、上述のように生成された降車記録ファイルは、１個のまとまったファイルであってもよいし、所定のサイズごとに分割して生成されたものであってもよい。

【0082】

以上、実施の形態１について説明したが、実施の形態１にかかる記録システム１０は、上述の構成に限られない。例えば、記録装置１６０は、車両９００に搭載されておらず、通信部１７０を介して車両９００と離れた場所に設けられていてもよい。その場合、記録制御部１２３は、通信制御部１３２および通信部１７０を介して撮影データを送信する。

【0083】

また、図４に示したフローチャートにおいて、ステップＳ２２に示した撮影データ取得のトリガは、運転者を検出しなくなったことに加えて、車両９００のドアが閉扉状態から開扉状態へ変化したことを条件としてもよい。この場合、記録システム１０は、撮影データから開扉状態を検出してもよいし、車両９００のＥＣＵから取得したドアの開閉情報から開扉状態を検出してもよい。また、開扉状態を検出したことをトリガとして撮影データの取得を開始する場合、降車記録ファイルの開始時刻は、開扉状態を検出した時刻であってもよい。

【0084】

すなわち、記録システム１０において、判定部１３１は、車両９００のドアが閉扉状態から開扉状態に変化したことを検出するとともに、開扉状態のドアから同乗者が降車したことを判定してもよい。また記録制御部１２３は、開扉状態を検出した時刻から降車記録ファイルが生成されることを指示してもよい。

【0085】

図４に示したフローチャートのステップＳ３０は必須ではなく省略されてもよい。その場合、降車記録ファイルは、予め設定された期間を記録するように構成されていてもよいし、記録装置１６０が有する記録可能容量で記録できる期間を記録するように構成されていてもよい。またステップＳ２７に対応する処理は、運転者が操作することにより行われてもよい。

【0086】

記録システム１０は１個の製品として構成されている必要はなく、複数の製品の組み合わせにより実現されてもよい。例えば、記録システム１０は、ドライブレコーダとナビゲーションシステムとが連携することにより構成されていてもよい。また記録システム１０は、車両９００が有する構成と連携することにより実現されてもよい。

【0087】

以上のとおり、実施の形態１によれば、停車中の車両から降車した同乗者の動向を好適に把握できる記録システム等を提供することができる。

【0088】

＜実施の形態２＞
次に、実施の形態２について説明する。実施の形態２にかかる記録システムは、カメラを複数有している点が、実施の形態１にかかる記録システム１０と異なる。

【0089】

図９および図１０を参照して、実施の形態２にかかる記録システムの構成について説明する。図９は、実施の形態２にかかる記録システム２０を搭載した車両の上面図である。図１０は、実施の形態２にかかる記録システム２０のブロック図である。

【0090】

実施の形態２にかかる記録システム２０は、全天周カメラに代えて、カメラ２５０を有している。カメラ２５０は、２つのカメラ（第１カメラ２５１および第２カメラ２５２）から構成されている。すなわち、第１カメラ２５１は、車両９００の前方を撮影し、第２カメラは車両９００の後方を撮影する。第１カメラ２５１および第２カメラ２５２は、それぞれ撮影データ取得部１２０に接続し、生成した撮影データを撮影データ取得部１２０に供給する。

【0091】

バッファメモリ１２１は、第１カメラ２５１および第２カメラ２５２のそれぞれから取得された撮影データを蓄積し、蓄積したそれぞれの撮影データを、撮影データ処理部１２２に供給する。

【0092】

撮影データ処理部１２２は、第１カメラ２５１および第２カメラ２５２から取得した撮影データのそれぞれに対して処理を行う。また、記録システム２０にかかる撮影データ処理部１２２は、第１カメラ２５１から取得した撮影データと第２カメラ２５２から取得した撮影データとを合成することにより、第１カメラ２５１で撮影した画像および第２カメラ２５２で撮影した画像を所定のディスプレイで一時に視認できるよう処理してもよい。

【0093】

記録制御部１２３は、判定部１３１から受け取る信号から、降車した同乗者が、どちらのカメラから取得した撮影データに含まれるかを判断する。そして、記録制御部１２３は、降車記録ファイルの生成を撮影データ処理部１２２に指示する際に、第１カメラ２５１および第２カメラ２５２からそれぞれ取得した撮影データのうちいずれのカメラから取得した撮影データを利用するかを選択する。

【0094】

同乗者検出部１２９は、第１カメラ２５１および第２カメラ２５２からそれぞれ取得した撮影データに対して、実施の形態１において説明した処理と同様の処理を施すことにより、同乗者を検出する。

【0095】

判定部１３１は、同乗者の降車を検出する場合に、第１カメラ２５１および第２カメラ２５２のうちどちらのカメラから取得した撮影データに、降車した同乗者が含まれるかを検出する。判定部１３１は、ドアの開閉後に同乗者の降車を検出したことを示す信号に、どちらのカメラに降車した同乗者が含まれるかという情報を含めて記録制御部１２３に供給する。

【0096】

次に、図１１を参照して記録システム２０の処理について説明する。図１１は、実施の形態２にかかる降車記録処理を示すフローチャートである。実施の形態２にかかる降車記録処理は、第１カメラ２５１および第２カメラ２５２のうちいずれかのカメラを選択する処理を行う点が、実施の形態１にかかる処理と異なる。以下に、実施の形態１にかかる処理と同様の処理については説明を適宜省略しつつ、実施の形態１にかかる処理と異なる点について説明する。ステップＳ２０からステップＳ２２までの処理は、実施の形態１と同様である。

【0097】

ステップＳ２３において、制御部１００の判定部１３１は、同乗者が降車したか否かを判定する（ステップＳ２３）。同乗者が降車したと判定しない場合（ステップＳ２３：Ｎｏ）、制御部１００は、ステップＳ２８に進む。一方、同乗者が降車したと判定部１３１が判定した場合（ステップＳ２３：Ｙｅｓ）、判定部１３１は、同乗者の降車を検出したことを示す信号を記録制御部１２３に供給するとともに、制御部１００はステップＳ３２に進む。

【0098】

ステップＳ３２において、制御部１００の記録制御部１２３は、第１カメラ２５１および第２カメラ２５２のうちいずれのカメラで撮影した画像を記録するかを選択する（ステップＳ３２）。

【0099】

次に、記録制御部１２３は、選択したカメラにより撮影した画像を利用して降車記録ファイルの生成を開始することを撮影データ処理部１２２に指示する（ステップＳ２４）。ステップＳ２５以降の処理は、実施の形態１と同様である。

【0100】

以上、実施の形態２について説明したが、上述の記録システム２０は、例えばカメラを３つ以上有していてもよい。カメラは車両９００が有しているものであってもよく、その場合、記録システム２０は、ＣＡＮ（Controller Area Network）などの車両９００の通信バスを介して撮影データを取得するものであってもよい。

【0101】

実施の形態２にかかる記録システム２０は、上述の構成により、複数のカメラから適宜選択されたカメラにより降車した同乗者を撮影する。これにより、記録システム２０は、記録する撮影データを効率よく生成できる。すなわち実施の形態２によれば、停車中の車両から降車した同乗者の動向を好適に且つ効率よく把握できる記録システム等を提供することができる。

【0102】

なお、上述したプログラムは、様々なタイプの非一時的なコンピュータ可読媒体を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ－ＲＯＭ（Read Only Memory）ＣＤ－Ｒ、ＣＤ－Ｒ／Ｗ、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Programmable ROM）、ＥＰＲＯＭ（Erasable PROM）、フラッシュＲＯＭ、ＲＡＭ（Random Access Memory））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、および電磁波を含む。一時的なコンピュータ可読媒体は、電線および光ファイバ等の有線通信路、または無線通信路を介して、プログラムをコンピュータに供給できる。

【0103】

なお、本発明は上記実施の形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。

【符号の説明】

【0104】

１０、２０ 記録システム
１００ 制御部
１１０ バスライン
１２０ 撮影データ取得部
１２１ バッファメモリ
１２２ 撮影データ処理部
１２３ 記録制御部
１２４ 再生制御部
１２５ 操作制御部
１２６ 表示制御部
１２７ イベント検出部
１２８ 位置情報取得部
１２９ 同乗者検出部
１３０ 運転者検出部
１３１ 判定部
１３２ 通信制御部
１４０ 操作部
１４１ 表示部
１４２ 加速度センサ
１４３ 測位情報受信部
１４４ 同乗者情報記憶部
１５０、２５０ カメラ
１６０ 記録装置
１７０ 通信部
２５１ 第１カメラ
２５２ 第２カメラ
９００ 車両

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】