特開 2021-176235 画像処理方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】特開2021-176235(P2021-176235A)

(43)【公開日】2021年11月4日

(54)【発明の名称】画像処理方法

(51)【国際特許分類】

   H04N 5/93 20060101AFI20211008BHJP

   G07C 5/00 20060101ALI20211008BHJP

   H04N 7/18 20060101ALI20211008BHJP

   H04N 5/92 20060101ALI20211008BHJP

   G06T 1/00 20060101ALI20211008BHJP

   G06T 7/00 20170101ALI20211008BHJP

【ＦＩ】

   H04N5/93

   G07C5/00 Z

   H04N7/18 U

   H04N7/18 J

   H04N7/18 K

   H04N5/92 010

   G06T1/00 330B

   G06T7/00 650B

【審査請求】有

【請求項の数】7

【出願形態】ＯＬ

【全頁数】13

(21)【出願番号】特願2021-117347(P2021-117347)

(22)【出願日】2021年7月15日

(62)【分割の表示】特願2017-16915(P2017-16915)の分割

【原出願日】2017年2月1日

(71)【出願人】

【識別番号】000237592

【氏名又は名称】株式会社デンソーテン

(74)【代理人】

【識別番号】100099759

【弁理士】

【氏名又は名称】青木 篤

(74)【代理人】

【識別番号】100123582

【弁理士】

【氏名又は名称】三橋 真二

(74)【代理人】

【識別番号】100092624

【弁理士】

【氏名又は名称】鶴田 準一

(74)【代理人】

【識別番号】100114018

【弁理士】

【氏名又は名称】南山 知広

(74)【代理人】

【識別番号】100153729

【弁理士】

【氏名又は名称】森本 有一

(72)【発明者】

【氏名】辻 麻奈

(72)【発明者】

【氏名】山下 博

(72)【発明者】

【氏名】小阪 友裕

(72)【発明者】

【氏名】坂手 寛

(72)【発明者】

【氏名】瀬▲崎▼ 圭

(72)【発明者】

【氏名】宮本 怜

【テーマコード（参考）】

3E138

5B057

5C053

5C054

5L096

【Ｆターム（参考）】

3E138AA07

3E138MA01

3E138MA06

3E138MB08

3E138MB09

3E138MC12

3E138MD01

3E138MD04

3E138MD10

3E138MF07

5B057AA16

5B057BA02

5B057CA01

5B057CA08

5B057CA12

5B057CA16

5B057CB01

5B057CB08

5B057CB12

5B057CB16

5B057CE08

5B057CH07

5B057DA12

5B057DB02

5B057DB06

5B057DB09

5B057DC03

5B057DC25

5B057DC30

5B057DC36

5C053FA27

5C053GB06

5C053JA21

5C053LA01

5C053LA06

5C053LA11

5C054CA04

5C054CC02

5C054EA01

5C054EA05

5C054EA07

5C054FC01

5C054FC07

5C054FC12

5C054FC14

5C054FE12

5C054FF03

5C054GB01

5C054GB05

5C054GB13

5C054GB15

5C054GD09

5C054HA19

5C054HA30

5L096AA02

5L096AA06

5L096BA04

5L096CA04

5L096DA01

5L096FA15

5L096FA64

5L096GA53

5L096JA11

(57)【要約】

【課題】画像に写り込んだ対象についてのプライバシーを保護しながら運転状況等の状況を把握しやすい画像を生成することができるドライブレコーダ、画像記録方法及び監視装置を提供する。
【解決手段】車両に搭載されたカメラ２２によって撮影された画像を記録するドライブレコーダ２は、画像から他車両が写された領域を抽出する画像抽出部２６ａと、他車両が写された領域に対して、他車両の特徴を反映したプライバシー保護のための画像処理を施す画像処理部２６ｂと、を備える。他車両の特徴を反映したプライバシー保護のための画像処理を施すことによって、画像に写り込んだ対象についてのプライバシーを保護しながら運転状況等の状況を把握しやすい画像を生成することができる。
【選択図】図３

【特許請求の範囲】

【請求項1】

ＣＰＵが、カメラによって撮影された画像の画像処理を行う画像処理方法であって、
前記ＣＰＵは、
前記カメラによって撮影された画像から、車両が写された領域を抽出する画像抽出ステップと、
前記車両が写された領域を、車両の種別に関連する特徴を反映した車両特徴画像に変換する画像処理ステップと、
前記車両の乗員の特徴を反映した乗員特徴画像を、前記車両特徴画像に重畳する重畳処理ステップと、を実行することを特徴とする画像処理方法。

【請求項2】

前記ＣＰＵは、
前記車両の画像に基づいて前記車両の種別を特定し、特定した車両の種別に応じた車両特徴画像を、車両の種別と車両特徴画像とを関連付けて記憶する車両画像テーブルを用いて生成する、
ことを特徴とする請求項１に記載の画像処理方法。

【請求項3】

前記ＣＰＵは、
前記車両の種別に関する信号を前記車両から受信した場合、前記車両から受信した信号によって前記車両の種別を特定する、
ことを特徴とする請求項２に記載の画像処理方法。

【請求項4】

前記ＣＰＵは、
前記車両の乗員の画像に基づいて前記車両の乗員の特徴を特定し、特定した前記車両の乗員の特徴に応じた乗員特徴画像を、車両の乗員の特徴と乗員特徴画像とを関連付けて記憶する乗員画像テーブルを用いて生成する、
ことを特徴とする請求項１〜３のいずれか一項に記載の画像処理方法。

【請求項5】

前記ＣＰＵは、
車両の走行に関する情報を反映した走行情報画像を生成する請求項１〜４のいずれか一項に記載の画像処理方法。

【請求項6】

前記ＣＰＵは、
車両の運転者の生体情報を反映した生体情報画像を生成する請求項１〜５のいずれか一項に記載の画像処理方法。

【請求項7】

ＣＰＵが、カメラによって撮影された画像の画像処理を行う画像処理方法であって、
前記ＣＰＵは、
前記カメラによって撮影された画像から、車両が写された領域を抽出する画像抽出ステップと、
前記車両が写された領域を、前記車両の種別に関連する特徴を反映した車両特徴画像に変換する画像処理ステップと、
前記車両の乗員の特徴を反映した乗員特徴画像を、前記車両特徴画像に重畳する重畳処理ステップと、を実行し、
前記画像処理ステップにおいて、前記車両の種別に関する信号を前記車両から受信した場合、前記車両から受信した信号によって前記車両の種別を特定し、特定した車両の種別に応じた車両特徴画像を、車両の種別と車両特徴画像とを関連付けて記憶する車両画像テーブルを用いて生成することを特徴とする画像処理方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、画像処理方法に関する。

【背景技術】

【0002】

車両に搭載されたカメラによって撮影された画像を記録するドライブレコーダが知られている（例えば、特許文献１）。ドライブレコーダが記録した画像を表示装置に表示することによって、運転者は自らの運転状況を検証することができる。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０１６−２８３３２号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

車両に搭載されたカメラによって撮影した画像をドライブレコーダに記録する場合、ドライブレコーダに記録された画像に対して、画像に写り込んだ人物、他車両の所有者等のプライバシーを保護するための画像処理を施すのが好ましい。

【0005】

しかしながら、ドライブレコーダに記録された画像に対してプライバシーを保護するための画像処理を施した場合、表示装置に表示された画像を見た運転者が運転状況等の状況を把握しにくくなることがある。

【0006】

定点カメラによって撮影した画像に対してプライバシーを保護するための画像処理を施す場合にも、表示装置に表示された画像を見た観察者が状況を把握しにくくなることがある。

【0007】

本発明の目的は、画像に写り込んだ対象についてのプライバシーを保護しながら運転状況等の状況を把握しやすい画像を生成することができる画像処理方法を提供することである。

【課題を解決するための手段】

【0008】

本発明による画像処理方法は、ＣＰＵが、カメラによって撮影された画像の画像処理を行う画像処理方法であって、ＣＰＵは、カメラによって撮影された画像から、車両が写された領域を抽出する画像抽出ステップと、車両が写された領域を、車両の種別に関連する特徴を反映した車両特徴画像に変換する画像処理ステップと、車両の乗員の特徴を反映した乗員特徴画像を、車両特徴画像に重畳する重畳処理ステップと、を実行することを特徴とする。

【0009】

好適には、ＣＰＵは、車両の画像に基づいて車両の種別を特定し、特定した車両の種別に応じた車両特徴画像を、車両の種別と車両特徴画像とを関連付けて記憶する車両画像テーブルを用いて生成する。

【0010】

好適には、ＣＰＵは、車両の種別に関する信号を車両から受信した場合、車両から受信した信号によって車両の種別を特定する。

【0011】

好適には、ＣＰＵは、車両の乗員の画像に基づいて車両の乗員の特徴を特定し、特定した車両の乗員の特徴に応じた乗員特徴画像を、車両の乗員の特徴と乗員特徴画像とを関連付けて記憶する乗員画像テーブルを用いて生成する。

【0012】

好適には、ＣＰＵは、車両の走行に関する情報を反映した走行情報画像を生成する。

【0013】

好適には、ＣＰＵは、車両の運転者の生体情報を反映した生体情報画像を生成する。

【0014】

本発明による他の画像処理方法は、ＣＰＵが、カメラによって撮影された画像の画像処理を行う画像処理方法であって、ＣＰＵは、カメラによって撮影された画像から、車両が写された領域を抽出する画像抽出ステップと、車両が写された領域を、車両の種別に関連する特徴を反映した車両特徴画像に変換する画像処理ステップと、車両の乗員の特徴を反映した乗員特徴画像を、車両特徴画像に重畳する重畳処理ステップと、を実行し、画像処理ステップにおいて、車両の種別に関する信号を車両から受信した場合、車両から受信した信号によって車両の種別を特定し、特定した車両の種別に応じた車両特徴画像を、車両の種別と車両特徴画像とを関連付けて記憶する車両画像テーブルを用いて生成することを特徴とする。

【発明の効果】

【0015】

本発明によれば、画像に写り込んだ対象についてのプライバシーを保護しながら運転状況等の状況を把握しやすい画像を生成することができる。

【図面の簡単な説明】

【0016】

【図1】本発明による画像処理方法を実施するドライブレコーダを配置した車両の概略図である。

【図2】本発明による画像処理方法を実施するドライブレコーダに記録された画像の閲覧の一例を説明するための図である。

【図3】本発明による画像処理方法を実施するドライブレコーダの一実施の形態の構成を示す図である。

【図4】本発明による画像処理方法を実施するドライブレコーダで用いられる人物画像特徴量テーブルの一例を示す図である。

【図5】本発明による画像処理方法を実施するドライブレコーダで用いられる背景画像特徴量テーブルの一例を示す図である。

【図6】本発明による画像処理方法を実施するドライブレコーダで行われるプライバシー保護のための画像処理の一例を説明するための図である。

【図7】本発明による画像処理方法を実施するドライブレコーダで行われるプライバシー保護のための画像処理の他の例を説明するための図である。

【図8】図３に示す画像処理方法を実施するドライブレコーダのプライバシー保護のための画像処理手順の一例を示すフローチャートである。

【図9】本発明による画像処理方法を実施する監視装置の一実施の形態の構成を示す図である。

【発明を実施するための形態】

【0017】

本発明による画像処理方法を、図面を参照しながら詳細に説明する。図面中、同一構成要素には同一符号を付す。
図１は、本発明による画像処理方法を実施するドライブレコーダを配置した車両の概略図である。自動車等の車両１に搭載されたドライブレコーダ２は、内蔵したカメラで車両１の周辺を撮影し、撮影して得られた画像を記録する。本実施の形態では、画像の記録は、急ブレーキ、衝突等のイベントの発生に関係なくドライブレコーダ２の駆動開始から駆動終了まで継続して行われる。また、本実施の形態では、ドライブレコーダ２が記録した画像を表示装置３に表示することによって、運転者は自らの運転状況を検証することができる。

【0018】

図２は、本発明による画像処理方法を実施するドライブレコーダに記録された画像の閲覧の一例を説明するための図である。図２に示すように、ドライブレコーダ２によってメモリカード４に記録したデータをコンピュータ５に入力することができる。この場合、運転者等は、記録された画像をコンピュータ５のディスプレイで閲覧し、画像の編集を行うことができる。

【0019】

図３は、本発明による画像処理方法を実施するドライブレコーダの一実施の形態の構成を示す図である。ドライブレコーダ２は、ＡＣＣスイッチ６がオンになると車両１に備えられているバッテリ７から電力が供給されて駆動を開始し、ＡＣＣスイッチ６がオフになるとバッテリ７から供給される電力が遮断されて停止する。

【0020】

ドライブレコーダ２は、ＲＡＭ２１と、カメラ２２と、処理回路２３と、マイクロフォン２４と、不揮発性メモリ２５と、ＣＰＵ２６と、操作部２７と、加速度センサ２８と、カードスロット２９と、画像出力部３０と、計時回路３１と、を備える。

【0021】

ＲＡＭ２１は、ＣＰＵ２６の演算処理の作業対象となる記憶領域と、画像データを一時的に記憶する画像記憶領域と、音声データを一時的に記憶する音声記憶領域と、を有する。

【0022】

カメラ２２は、レンズ及び撮像素子を備え、ドライブレコーダ２の駆動中に継続して撮像を行う。

【0023】

処理回路２３は、カメラ２２で取得された画像を処理するハードウェア回路である。処理回路２３は、カメラ２２から入力される画像信号に対して輝度補正、コントラスト補正、圧縮等の画像処理を行い、ＪＰＥＧ形式等の画像データを生成する。処理回路２３において処理された画像は、ＲＡＭ２１の画像記憶領域に記憶される。

【0024】

マイクロフォン２４は、車両１付近で集音を行い、音声データを取得する。取得された音声データは、ＲＡＭ２１の音声記憶領域に記憶される。

【0025】

不揮発性メモリ２５は、例えば、フラッシュメモリによって構成される。不揮発性メモリ２５は、ファームウェアとしてのプログラムの他に各種制御に用いられるデータを記憶している。

【0026】

ＣＰＵ２６は、不揮発性メモリ２５に記憶されたプログラムに従って演算処理を実行することによってドライブレコーダ２の各部に対する制御を行う。本実施の形態では、ＣＰＵ２６は、画像抽出部２６ａと、画像処理部２６ｂと、イベント検出部２６ｃと、を有する。

【0027】

画像抽出部２６ａは、プライバシー保護の対象となる検出対象物が写っている領域（以下、「対象物画像」）を画像から抽出する。本実施の形態では、検出対象物は、他車両及び人物であり、以下、他車両が写っている領域を「他車両画像」と称し、人物が映っている領域を「人物画像」と称する。例えば、画像抽出部２６ａは、検出対象物画像検出用に予め学習されたAdaBoost、サポートベクトルマシンのような種別（例えば、車種）ごとに設定された識別器（図示せず）を用いて対象物画像を抽出する。例えば、画像抽出部２６ａは、画像に対して検出ウィンドウを設定し、検出ウィンドウが設定された領域から、識別器で利用される特徴量を抽出する。特徴量は、例えば、ＨＯＧ特徴量である。そして、画像抽出部２６ａは、抽出した特徴量を識別器に入力することによって、検出ウィンドウが設定された領域に対象物画像が存在するか否かの結果を得る。画像抽出部２６ａは、上記の処理を検出ウィンドウの位置を変えながら繰り返すことによって、画像中に検出対象物が存在するか否かを判断し、検出対象物が存在する場合には、検出対象物画像を抽出し、種別と関連付けてＲＡＭ２１の記憶領域に記憶させる。上述した処理は一例であり、検出対象物画像すなわち他車両画像及び人物画像を抽出するために他の処理を適用することもできる。

【0028】

画像処理部２６ｂは、種別を特定した人物画像に対して人物の特徴を反映したプライバシー保護のための画像処理を施し、種別を特定した他車両画像に対して他車両の特徴を反映したプライバシー保護のための画像処理を施す。

【0029】

本実施の形態では、画像処理部２６ｂは、種別を特定した人物画像に対して人物の特徴を反映したプライバシー保護のための画像処理を施すために、人物画像を、人物画像の特徴を反映した人物特徴画像（アバター画像）に変換する。

【0030】

例えば、種別が性別（男性又は女性）及び年齢（大人又は子供）を含む場合、画像処理部２６ｂは、人物画像を、性別（男性又は女性）及び年齢（大人又は子供）を反映した人物特徴画像に変換する。また、種別が顔型、年齢、身長及び服の色を含む場合、画像処理部２６ｂは、人物画像を、性別（男性又は女性）、年齢（大人又は子供）身長及び服の色を反映した人物特徴画像に変換する。

【0031】

図４は、種別と人物特徴画像のアバターとの関係を示すテーブルの一例を示すである。図４に示すテーブルＴ１は、不揮発性メモリ２５記憶されており、大人の男性を表す人物特徴画像のアバターＸＸＸＸＸは、大人の男性を表す人物種別Ａ１と対応付けて記憶されており、大人の女性を表す人物特徴画像のアバターＹＹＹＹＹは、大人の女性を表す人物種別Ａ２と対応付けて記憶されている。

【0032】

また、画像処理部２６ｂは、種別を特定した他車両画像に対して他車両の特徴を反映したプライバシー保護のための画像処理を施すために、他車両画像を、他車両画像の特徴を反映した他車両特徴画像に変換する。例えば、種別が車種及び車の色を含む場合、画像処理部２６ｂは、他車両画像を、車種及び車の色を反映した他車対特徴画像に変換する。

【0033】

図５は、車両種別と他車両特徴画像のコードとの関係を示すテーブルの一例を示すである。図５に示すテーブルＴ２は、不揮発性メモリ２５記憶されており、赤色の自動車を表す他車両特徴画像のアバターＲＲＲＲＲＲは、赤色の自動車を表す車両種別Ｂ１と対応付けて記憶されており、白色の自動車を表す他車両特徴画像のアバターＷＷＷＷＷは、白色の自動車を表す車両種別Ｂ２と対応付けて記憶されている。

【0034】

また、車間通信により車両１が他車両から他車両の年式等の他車両情報に関する信号を受信した場合、画像処理部２６ｂは、他車両画像を、車種、車の色及び他車両情報を反映した別の他車対特徴画像に変換する。この場合、不揮発性メモリ２５は、アバター化された別の他車対特徴画像を、図５のテーブルＴ２の車両に対応する種別コード（種別コードＢ１、種別コードＢ２等）及び他車両情報と対応付けて記憶する。

【0035】

図６は、本発明による画像処理方法を実施するドライブレコーダで行われるプライバシー保護のための画像処理の一例を説明するための図である。図６Ａに示すように、赤色の自動車に対応する他車両画像Ｘ、大人の男性に対応する人物画像Ｙ及び大人の女性に対応する人物画像Ｚが画像に含まれる場合、画像処理部２６ｂは、他車両画像Ｘ、人物画像Ｙ及び人物画像Ｚをそれぞれ他車両特徴画像Ｘ’、人物特徴画像Ｙ’及び人物特徴画像Ｚ’に変換する。

【0036】

他車両特徴画像Ｘ’は、赤色の自動車であることを表す他車両特徴画像であり、アバター化された他車両特徴画像Ｘ’は、図５に示す種別Ｂ１と対応付けて不揮発性メモリ２５に記憶されている。

【0037】

人物特徴画像Ｙ’は、大人の男性であることを表す人物特徴画像であり、アバター化された人物特徴画像Ｙ’は、図４に示す種別Ａ１と対応付けて不揮発性メモリ２５に記憶されている。

【0038】

人物特徴画像Ｚ’は、大人の女性であることを表す人物特徴画像であり、アバター化された人物特徴画像Ｚ’は、図４に示す種別Ａ２と対応付けて不揮発性メモリ２５に記憶されている。

【0039】

また、画像処理部２６ｂは、他車両画像Ｘ、人物画像Ｙ及び人物画像Ｚをそれぞれ他車両特徴画像Ｘ’、人物特徴画像Ｙ’及び人物特徴画像Ｚ’に変換する際に、他車両画像Ｘ、人物画像Ｙ及び人物画像Ｚをそれぞれ暗号化する。そして、画像処理部２６ｂは、暗号化した他車両画像Ｘ、人物画像Ｙ及び人物画像Ｚを、プライバシー保護のための画像処理が施された対応する画像に関連付けてＲＡＭ２１の記憶領域に記憶させる。

【0040】

画像処理部２６ｂは、他車両の乗員の特徴を反映した乗員特徴画像を他車両特徴画像に重畳表示させてもよい。乗員特徴画像は、例えば、アバター化された人物特徴画像である。これにより、どのような人物がその車両を運転（又は同乗）していたかを特定することができる。また、画像処理部２６ｂは、画像抽出部２６ａが他車両に付されたマーク画像（例えば、若葉マーク画像）を抽出した場合、マークを反映する乗員特徴画像として新芽画像を他車両特徴画像に重畳表示させてもよい。この場合、アバター化された新芽画像は不揮発性メモリ２５に記憶されている。新芽画像等のマーク画像は、乗員特徴画像の一例である。

【0041】

また、画像処理部２６ｂは、他車両の走行に関する情報を反映した走行情報画像を生成してもよい。例えば、車両１が車間通信により他車両の運転者の連続運転時間を取得した場合には、画像処理部２６ｂは、連続運転時間を他車両特徴画像と共に表示させる。連続運転時間は、他車両の走行に関する情報の一例である。また、車両１が車間通信により他車両が自動運転車両であることを示す信号を受信した場合には、画像処理部２６ｂは、自動運転車両を表す旨の走行情報画像を他車両特徴画像と共に表示させる。また、車両１が車間通信により他車両から危険運転を示す信号（例えば、速度違反であることを示す信号）を受信した場合には、画像処理部は、危険運転を表す旨の走行情報画像を他車両特徴画像と共に表示させる。

【0042】

また、画像処理部２６ｂは、他車両の運転者の生体情報を反映した生体情報画像を生成してもよい。例えば、他車両の運転者が、心拍数を計測するウエアラブルデバイスを装着し、ウエアラブルデバイスが取得した心拍数等の情報に関する信号が他車両のデバイスを介して他車両から車両１に送信される場合、画像処理部２６ｂは、他車両の運転者の生体情報を反映した生体情報画像（例えば、他車両の運転者の心拍数がゼロであることを知らせる生体情報画像）を生成して他車両特徴画像と共に表示させる。

【0043】

また、画像処理部２６ｂは、プライバシー保護のための画像処理を施すために、ぼかし処理を行ってもよい。この場合、ぼかし処理が行われた画像を着色することによって、ぼかし処理が行われた画像間の区別を行う。また、画像処理部２６ｂは、プライバシー保護のための画像処理を施すために、特定の車両（例えば、トラック）については他車両画像を他車両特徴画像に変換する代わりに特定の車両のナンバープレートを画像から消去してもよい。

【0044】

図７は、本発明による画像処理方法を実施するドライブレコーダで行われるプライバシー保護のための画像処理の他の例を説明するための図である。図７Ａに示すように、トラックに対応する他車両画像Ｔ１が画像に含まれる場合、画像抽出部２６ａは、他車両画像Ｔｒ１からナンバープレート画像Ｔｒ２を抽出し、画像処理部２６ｂは、ナンバープレート画像Ｔｒ２を黒塗り画像Ｔｒ２’に変換する。

【0045】

画像処理部２６ｂは、ナンバープレート画像Ｔｒ２を黒塗り画像Ｔｒ２’に変換する際に、ナンバープレート画像Ｔｒ２を暗号化する。そして、画像処理部２６ｂは、暗号化したナンバープレート画像Ｔｒ２を、プライバシー保護のための画像処理が施された対応する画像に関連付けてＲＡＭ２１の記憶領域に記憶させる。

【0046】

また、画像処理部２６ｂは、特定の車両（例えば、パトカー）に対してプライバシー保護のための画像処理を施さないようにしてもよい。さらに、画像処理部２６ｂは、画像に含まれる他車両画像の数が予め決定された数（例えば、５）を超えないように画像の調整を行ってもよい。例えば、画像処理部２６ｂは、画像に含まれる他車両画像の数が７個であるときには画像に含まれる他車両画像の数が４個以下になるように画像の調整（例えば、画像の拡大）を行ってもよい。

【0047】

イベント検出部２６ｃは、車両１に対するイベントの発生を検出する。すなわち、イベント検出部２６ｃは、加速度センサ２８が検出した加速度に基づいて、車両１に対するイベントの発生の有無を検出する。イベント検出部２６ｃは、イベントの発生を検出したときには、イベントの発生の検出に関する情報（例えば、イベント発生時刻）を対応する画像（例えば、イベント発生時刻に撮影された画像）に関連付けて不揮発性メモリ２５に記憶させる。

【0048】

操作部２７は、運転者等から各種指示を受け付けるための複数のボタンを含む。操作部２７で受け付けたユーザからの指示内容は、電気信号としてＣＰＵ２６に入力される。カードスロット２９は、メモリカード４を着脱可能であり、装着されたメモリカード４に対して、ＲＡＭ２１に記憶された画像データ、音声データ等の読み書きを行う。画像出力部３０は、画像データをＮＴＳＣ等の方式に準拠した映像信号に変換し、表示装置３に出力する。計時回路３１は、現在の時刻データをＣＰＵ２６に送信する。

【0049】

図８は、図３に示すドライブレコーダのプライバシー保護のための画像処理手順の一例を示すフローチャートである。このフローは、不揮発性メモリ２５に予め記憶されているプログラムに基づいて、主に制御部２６により、ドライブレコーダ２の各要素と協働して実行される。このフローは、非リアルタイムで又はリアルタイムで実行される。

【0050】

先ず、画像抽出部２６ａは、画像から他車両画像が抽出されたか否か判断する（ステップＳ１）。画像から他車両画像が抽出された場合（ステップＳ１のＹｅｓ）、画像処理部２６ｂは、他車両画像の種別を特定する（ステップＳ２）。そして、画像処理部２６ｂは、他車両の特徴を反映したプライバシー保護のための画像処理を行う（ステップＳ３）。

【0051】

例えば、ステップＳ２で画像処理部２６ｂが他車両画像の種別が図５の背景種別Ｂ１（赤色の自動車）であることを特定した場合、画像処理部２６ｂは、車両画像を、赤色の自動車であることを表す他車両特徴画像（例えば、図６の他車両特徴画像Ｘ’）に変換する。

【0052】

ステップＳ３で他車両に対するプライバシー保護のための画像処理を行った後又は画像から他車両画像が抽出されなかった場合（ステップＳ１のＮｏ）、画像抽出部２６ａは、画像から人物画像が抽出されたか否か判断する（ステップＳ４）。画像から人物画像が抽出された場合（ステップＳ４のＹｅｓ）、画像処理部２６ｂは、人物画像の人物種別を特定する（ステップＳ５）。そして、画像処理部２６ｂは、人物の特徴を反映したプライバシー保護のための画像処理を行う（ステップＳ６）。

【0053】

例えば、ステップＳ５で画像処理部２６ｂが人物画像の種別が図４の人物種別Ａ１（大人の男性）であることを特定した場合、画像処理部２６ｂは、人物画像を、大人の男性であることを表す人物特徴画像（例えば、図６の人物特徴画像Ｙ’）に変換する。

【0054】

ステップＳ３で人物に対するプライバシー保護のための画像処理を行った後又は画像から他車両画像が抽出されなかった場合（ステップＳ１のＮｏ）、制御部２６は処理を終了する。

【0055】

本実施の形態によれば、他車両の特徴を反映したプライバシー保護のための画像処理を施すことによって、画像に写り込んだ他車両の運転者、所有者等についてのプライバシーを保護しながら運転状況等の状況を把握しやすい画像を生成することができる。

【0056】

例えば、「赤い色の車が走っているのを見た」という証言があった場合、赤色の自動車であることを表す他車両特徴画像がプライバシー保護処理後の画像に含まれているか否かを確認することによって、プライバシーを保護しながら証言が正しいか否かを確認することができる。

【0057】

また、他車両画像を、車種、車の色及び年式を反映した別の他車対特徴画像に変換し、「１０年式の赤色のＴ社のＭＭ（ＭＭは車種）が走っているのを見た」という証言があった場合、１０年式の赤色のＴ社のＭＭを表す他車両特徴画像がプライバシー保護処理後の画像に含まれているか否かを確認することによって、プライバシーを保護しながら証言が正しいか否かを確認することができる。

【0058】

また、人物の特徴を反映したプライバシー保護のための画像処理を施すことによって、画像に写り込んだ人物についてのプライバシーを保護しながら運転状況等の状況をイメージしうる画像をドライブレコーダ２に記録することができる。

【0059】

また、他車両の乗員（例えば、運転者）の特徴を反映した乗員特徴画像を画像に重畳表示することによって、画像に写り込んだ他車両の乗員についてのプライバシーを保護しながら他車両の乗員の状況を把握しやすい画像を生成することができる。例えば、他車両の運転者に対応する人物画像を抽出し、抽出した人物画像を、青色の服を着た大人の男性を表す人物特徴画像に変換し、「青い服を着た男が逃走車を運転していた」という証言があった場合、青色の服を着た大人の男性を表す人物特徴画像がプライバシー保護処理後の画像に含まれているか否かを確認することによって、プライバシーを保護しながら証言が正しいか否かを確認することができる。人物画像が他車両の運転者であるか否かの判断は、例えば、人物画像の頭部の位置が他車両画像のフロントガラスの位置にあるか否かを画像処理部２６ｂによって判断することによって行われる。

【0060】

また、他車両の走行に関する情報を反映した走行情報画像を生成することによって、画像に写り込んだ他車両についてのプライバシーを保護しながら他車両の走行を把握しやすい画像を生成することができる。

【0061】

また、他車両の運転者の生体情報を反映した生体情報画像を生成することによって、画像に写り込んだ他車両についてのプライバシーを保護しながら他車両の運転者の生体情報を把握しやすい画像を生成することができる。

【0062】

図９は、本発明による画像処理方法を実施する監視装置の一実施の形態の構成を示す図である。監視装置８は、外部電源（図示せず）から電力が供給され、インターネット網を介して各種情報のやり取りを行う。監視装置８は、ＲＡＭ２１と、カメラ２２と、処理回路２３と、マイクロフォン２４と、不揮発性メモリ２５と、ＣＰＵ２６’と、画像出力部３０と、計時回路３１と、を備える。ＣＰＵ２６’は、画像抽出部２６ａと、画像処理部２６ｂと、を有する。

【0063】

カメラ２２が定点カメラであり、カメラ２２が店舗、アトラクション等の行列を撮影する場合、監視装置８は、人物画像を人物特徴画像に変換した画像をリアルタイムでＷｅｂ配信する。人物画像は対象画像の一例である。ＣＰＵ２６’が人物特徴画像の数から行列の人数及び待ち時間を算出し、待ち時間に応じて表示を変更してもよい。表示の変更は、画像に待ち時間の重畳表示、画像中の人物特徴画像及び建物の色の変更等によって行う。

【0064】

カメラ２２が定点カメラであり、カメラ２２がバス内、電車内を撮影する場合、監視装置８は、人物画像を人物特徴画像に変換した画像をリアルタイムでＷｅｂ配信する。Ｗｅｂ配信された画像を見た人は、乗車予定のバス、電車等の混雑具合、空席情報、利用者の年齢層等を確認することができる。

【0065】

カメラ２２が定点カメラであり、カメラ２２がスーパーマーケット等のレジの会計での行列を撮影する場合、監視装置８は、人物画像を人物特徴画像に変換した画像を表示装置３に表示する。ＣＰＵ２６’がカゴの数及びカゴ内の商品の量の情報から待ち時間を算出し、画像に待ち時間を重畳表示してもよい。

【0066】

本実施の形態によれば、人物、車両等の対象の特徴を反映したプライバシー保護のための画像処理を施すことによって、画像に写り込んだ人物等についてのプライバシーを保護しながらカメラ２２で撮影された場所の状況を把握しやすい画像を生成することができる。

【符号の説明】

【0067】

１ 車両
２ ドライブレコーダ
３ 表示装置
４ メモリカード
５ コンピュータ
６ ＡＣＣスイッチ
７ バッテリ
８ 監視装置
２１ ＲＡＭ
２２ カメラ
２３ 処理回路
２４ マイクロフォン
２５ 不揮発性メモリ
２６，２６’ ＣＰＵ
２６ａ 画像抽出部
２６ｂ 画像処理部
２６ｃ イベント検出部
２７ 操作部
２８ 加速度センサ
２９ カードスロット
３０ 画像出力部
３１ 計時回路

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】