特開 2022-99276 カメラ、およびそのカメラの設置を容易にするための方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2022099276

(43)【公開日】2022-07-04

(54)【発明の名称】カメラ、およびそのカメラの設置を容易にするための方法

(51)【国際特許分類】

   H04N 5/232 20060101AFI20220627BHJP

   H04N 7/18 20060101ALI20220627BHJP

【ＦＩ】

H04N5/232 220

H04N5/232 290

H04N7/18 E

【審査請求】未請求

【請求項の数】14

【出願形態】ＯＬ

【外国語出願】

(21)【出願番号】P 2021201341

(22)【出願日】2021-12-13

(31)【優先権主張番号】20216460

(32)【優先日】2020-12-22

(33)【優先権主張国・地域又は機関】EP

(71)【出願人】

【識別番号】502208205

【氏名又は名称】アクシス アーベー

(74)【代理人】

【識別番号】110002077

【氏名又は名称】園田・小林特許業務法人

(72)【発明者】

【氏名】ルンドベリ， ステファン

(72)【発明者】

【氏名】アルム， カール－アクセル

【テーマコード（参考）】

5C054

5C122

【Ｆターム（参考）】

5C054CA04

5C054CA05

5C054CC02

5C054CE12

5C054CE15

5C054CF06

5C054CF07

5C054CF08

5C054DA07

5C054DA08

5C054EA05

5C054ED17

5C054EE07

5C054FC12

5C054FC13

5C054FC14

5C054FC15

5C054FD07

5C054FE05

5C054FE06

5C054FE14

5C054FE28

5C054FF02

5C054FF03

5C054FF07

5C054GB02

5C054HA19

5C122DA03

5C122DA11

5C122EA07

5C122EA57

5C122FH03

5C122FH10

5C122FH11

5C122FH14

5C122FH21

5C122FH23

5C122FK35

5C122GA01

5C122GC37

5C122GC75

5C122HA13

5C122HA35

5C122HA38

5C122HA40

5C122HA46

5C122HA88

5C122HB01

5C122HB05

(57)【要約】      （修正有）

【課題】被写体のプライバシーを守るためのカメラ及びカメラの設置を容易にする方法を提供する。
【解決手段】方法は、第１の視野でカメラ１０８が設置されている場合にシーン１０２のビデオストリームを取り込む。そのシーンは被写体を含む。被写体の少なくとも１つの部分のビデオストリームにおけるサイズが推定され、サイズが第１のしきい値を上回っていて、かつ第２のしきい値を下回っている限り、ビデオストリームの第１のエッジフィルタリングされたバージョンを提供する。サイズが、プライバシーが明らかにされるリスクがあるということを示す第２のしきい値を上回っていることに応答して、強化された安全なプライバシーモードに入り、第１の視野とは異なる第２の視野でカメラを再設置するように設置者に促すアラートを生成し、ビデオストリームの第１のエッジフィルタリングされたバージョンの提供を無効にする。
【選択図】図３

【特許請求の範囲】

【請求項1】

設置を容易にするためのカメラにおける方法であって、
第１の視野で前記カメラが設置されている場合にシーンのビデオストリームを取り込むこと（Ｓ３０２）であって、そのシーンが１つまたは複数の被写体を含む、シーンのビデオストリームを取り込むこと（Ｓ３０２）と、
前記１つまたは複数の被写体の少なくとも１つの部分の前記ビデオストリームにおけるサイズを推定すること（Ｓ３０４）と、
前記１つまたは複数の被写体の前記少なくとも１つの部分の前記ビデオストリームにおける推定された前記サイズが、第１のしきい値を上回っていて、かつ第２のしきい値を下回っている限り、前記ビデオストリームにおいて描写されている前記１つまたは複数の被写体のプライバシーを守るために、前記ビデオストリームの第１のエッジフィルタリングされたバージョンを提供すること（Ｓ３０６）と、
前記１つまたは複数の被写体の前記少なくとも１つの部分の前記ビデオストリームにおける推定された前記サイズが、少なくとも１つの被写体のプライバシーが明らかにされるリスクがあるということを示す前記第２のしきい値を上回っていることに応答して、オペレーションの強化された安全なプライバシーモードに入ること（Ｓ３０８）とを含み、オペレーションの前記強化された安全なプライバシーモードが、
前記第１の視野とは異なる第２の視野で前記カメラを再設置するように設置者に促すアラートを生成すること（Ｓ３１０）と、
前記ビデオストリームの前記第１のエッジフィルタリングされたバージョンの提供を無効にすること（Ｓ３１２）とを含む、方法。

【請求項2】

オペレーションの前記強化された安全なプライバシーモードがさらに、
前記１つまたは複数の被写体の前記プライバシーがさらに守られる前記ビデオストリームの第２のバージョンを提供すること（Ｓ３１４）を含む、請求項１に記載の方法。

【請求項3】

前記ビデオストリームの前記第２のバージョンを提供すること（Ｓ３１４）が、
前記ビデオストリームにおいて描写されている前記１つまたは複数の被写体のプライバシーを守るために前記ビデオストリームの少なくとも一部にプライバシーマスクを適用することによって前記ビデオストリームの前記第２のバージョンを生成することを含む、請求項２に記載の方法。

【請求項4】

前記ビデオストリームの前記第１のエッジフィルタリングされたバージョンを提供すること（Ｓ３０６）が、
前記ビデオストリームにエッジフィルタを適用して前記ビデオストリームにおけるエッジポイントを強調すること、および前記ビデオストリームにおける非エッジポイントを抑制することによって前記ビデオストリームの前記第１のエッジフィルタリングされたバージョンを生成することを含み、前記ビデオストリームのピクセル値が、量子化レベルの第１の数を使用して表される、請求項１から３のいずれか一項に記載の方法。

【請求項5】

前記ビデオストリームの第２のバージョンを提供すること（Ｓ３１４）が、
前記ビデオストリームに前記エッジフィルタを適用する前に、前記ビデオストリームの空間解像度を低減して、前記１つまたは複数の被写体の前記少なくとも１つの部分の前記ビデオストリームにおける前記サイズを、前記第２のしきい値を下回るように低減すること
によって、前記ビデオストリームの第２のエッジフィルタリングされたバージョンとして前記ビデオストリームの第２のバージョンを生成することを含む、請求項４に記載の方法。

【請求項6】

前記ビデオストリームの第２のバージョンを提供すること（Ｓ３１４）が、
前記ビデオストリームに前記エッジフィルタを適用する前に、前記ビデオストリームのピクセル値を表すために使用される量子化レベルの前記数を量子化レベルの前記第１の数から量子化レベルの第２の数へ低減すること
によって、前記ビデオストリームの第２のエッジフィルタリングされたバージョンとして前記ビデオストリームの第２のバージョンを生成することを含む、請求項４に記載の方法。

【請求項7】

前記ビデオストリームの第２のバージョンを提供すること（Ｓ３１４）が、
前記ビデオストリームの前記第１のエッジフィルタリングされたバージョンの空間解像度を低減して、前記１つまたは複数の被写体の前記少なくとも１つの部分の前記サイズが前記第２のしきい値を下回る、前記ビデオストリームの第２のエッジフィルタリングされたバージョン
を得ること
によって、前記ビデオストリームの第２のエッジフィルタリングされたバージョンとして前記ビデオストリームの第２のバージョンを生成することを含む、請求項１から４のいずれか一項に記載の方法。

【請求項8】

前記ビデオストリームの第２のバージョンを提供すること（Ｓ３１４）が、
前記ビデオストリームの前記第１のエッジフィルタリングされたバージョンにおけるエッジ強度しきい値を下回るエッジ強度を有するエッジポイントを、前記ビデオストリームの第２のエッジフィルタリングされたバージョンにおける非エッジポイントとして表すこと
によって、前記ビデオストリームの第２のエッジフィルタリングされたバージョンとして前記ビデオストリームの第２のバージョンを生成することを含む、請求項１から４のいずれか一項に記載の方法。

【請求項9】

前記ビデオストリームの前記第１のエッジフィルタリングされたバージョンを提供すること（Ｓ３０６）が、
前記ビデオストリームの前記第１のエッジフィルタリングされたバージョンを受信機へ送信することを含み、
前記ビデオストリームの前記第１のエッジフィルタリングされたバージョンの提供を無効にすることが、
前記受信機への前記ビデオストリームの前記第１のエッジフィルタリングされたバージョンの送信を無効にすることを含む、請求項１から８のいずれか一項に記載の方法。

【請求項10】

前記ビデオストリームの前記第１のエッジフィルタリングされたバージョンの提供を無効にすること（Ｓ３１２）が、
前記カメラ（１０８）が前記ビデオストリームを取り込むことを無効にすることを含む、請求項１に記載の方法。

【請求項11】

前記ビデオストリームの前記第１のエッジフィルタリングされたバージョンの提供を無効にすること（Ｓ３１２）が、
取り込まれた前記ビデオストリームを作成するために使用される画像フレームを前記カメラ（１０８）の画像センサ（２０４）が伝達するのを無効にすることを含む、請求項１に記載の方法。

【請求項12】

前記１つまたは複数の被写体の前記少なくとも１つの部分の前記ビデオストリームにおける推定された前記サイズが前記第１のしきい値を下回っている場合には、取り込まれた前記ビデオストリームを提供すること（Ｓ３１６）
をさらに含む、請求項１から１１のいずれか一項に記載の方法。

【請求項13】

設置を容易にするためのカメラであって、
第１の視野で前記カメラが設置されている場合にシーンのビデオストリームを取り込むように構成されている画像取り込みモジュール（２０６）であって、そのシーンが１つまたは複数の被写体を含む、画像取り込みモジュール（２０６）と、
前記１つまたは複数の被写体の少なくとも１つの部分の前記ビデオストリームにおけるサイズを推定するように構成されているサイズ推定コンポーネント（４０２）と、
前記１つまたは複数の被写体の前記少なくとも１つの部分の前記ビデオストリームにおける推定された前記サイズが、第１のしきい値を上回っていて、かつ第２のしきい値を下回っている限り、前記ビデオストリームにおいて描写されている前記１つまたは複数の被写体のプライバシーを守るために、前記ビデオストリームの第１のエッジフィルタリングされたバージョンを提供するように構成されている提供コンポーネント（４０４）とを含み、
前記１つまたは複数の被写体の前記少なくとも１つの部分の前記ビデオストリームにおける推定された前記サイズが、少なくとも１つの被写体のプライバシーが明らかにされるリスクがあるということを示す前記第２のしきい値を上回っていることに応答して、前記カメラ（１０８）が、オペレーションの強化された安全なプライバシーモードに入るように構成されており、
アラート生成コンポーネント（４０６）が、前記第１の視野とは異なる第２の視野で前記カメラを再設置するように設置者に促すアラートを生成するように構成されており、
前記提供コンポーネント（４０４）が、前記ビデオストリームの前記第１のエッジフィルタリングされたバージョンの提供を無効にするように構成されている、カメラ。

【請求項14】

コンピュータコード命令を格納してある非一時的コンピュータ可読メディアであって、前記コンピュータコード命令が、処理能力を有するデバイスによって実行されたときに、請求項１から１２のいずれか一項に記載の方法を実行するように適合されている、非一時的コンピュータ可読メディア。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、カメラ、およびそのカメラの設置を容易にするための内部での方法に関する。

【背景技術】

【0002】

モニタリングカメラなどのカメラを設置してシーンの画像を取り込む場合には、シーンに存在している１つまたは複数の被写体のプライバシーが保証されるべきであるということを国のプライバシー規制が必要とする場合がある。プライバシーは典型的に、被写体認識または被写体識別が防止されるように、取り込まれた画像を歪めることによって達成される。それゆえに、取り込まれた画像を歪めることによって、顔認識、車両の登録番号の識別などが防止される。プライバシーが保証されることが可能でないならば、カメラは、設置されることを許可されない場合がある。

【0003】

被写体認識および被写体識別を防止するために、取り込まれた画像を歪めるための方法が知られている。たとえば、ＵＳ１０７５５３８８ Ｂ２は、画像のプライバシーマスキングを制御することによって、取り込まれた画像データにおける個人のプライバシーを保護するやり方について記述しており、そのやり方では、画像のプライバシーエリアに適用されるぼかしの程度が、画像取り込みデバイスからのしきい値距離と、画像におけるこの距離でのシーンの内容の空間解像度とに依存する。しかしながら、ＵＳ１０７５５３８８ Ｂ２は、プライバシーを保証するためにカメラの設置を容易にするやり方に関しては言及していない。

【0004】

ＵＳ２０１４／０３６２２１５ Ａ１は、カメラ設置の補正に関する。しかしながら、本開示においては、カメラ設置の補正の目的は、取り込まれた画像における顔認識を最適化することである。顔の平均サイズは、さまざまなサブ領域において測定され、カメラをシーンから遠ざけること、またはズームインすることなど、カメラ位置における変更をトリガーするための１つのパラメータとして使用される。

【0005】

それゆえに、国のプライバシー規制を満たす、カメラの容易にされた設置を提供するためには、改善の余地がある。

【発明の概要】

【0006】

それゆえに、上記を考慮して、従来技術に伴う欠点を軽減すること、およびカメラの、特に、ビデオストリームを取り込む際にプライバシーを守ることが可能なカメラの設置を容易にするための技術を提供することが、本発明の目的である。

【0007】

本発明の第１の態様によれば、上記の目的は、カメラの設置を容易にするための、カメラによって実行される方法によって達成される。この方法は、第１の視野でカメラが設置されている場合にシーンのビデオストリームを取り込むことを含み、そのシーンは、１つまたは複数の被写体を含む。この方法はさらに、１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおけるサイズを推定することと、１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおける推定されたサイズが、第１のしきい値を上回っていて、かつ第２のしきい値を下回っている限り、ビデオストリームにおいて描写されている１つまたは複数の被写体のプライバシーを守るために、ビデオストリームの第１のエッジフィルタリングされたバージョンを提供することとを含む。さらに、この方法は、１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおける推定されたサイズが、少なくとも１つの被写体のプライバシーが明らかにされるリスクがあるということを示す第２のしきい値を上回っていることに応答して、オペレーションの強化された安全なプライバシーモードに入ることを含み、オペレーションの強化された安全なプライバシーモードは、第１の視野とは異なる第２の視野でカメラを再設置するように設置者に促すアラートを生成することと、ビデオストリームの第１のエッジフィルタリングされたバージョンの提供を無効にすることとを含む。

【0008】

１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおける推定されたサイズが、第１のしきい値を上回っていて、かつ第２のしきい値を下回っている限り、ビデオストリームの第１のエッジフィルタリングされたバージョンを提供することによって、ビデオストリームにおいて描写されている１つまたは複数の被写体のプライバシーが、ビデオストリームの第１のエッジフィルタリングされたバージョンによって提供される１つまたは複数の被写体の匿名化のおかげで守られる。

【0009】

さらに、１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおける推定されたサイズが、少なくとも１つの被写体のプライバシーが明らかにされるリスクがあるということを示す第２のしきい値を上回っている場合に、ビデオストリームの第１のエッジフィルタリングされたバージョンの提供を無効にすることによって、１つまたは複数の被写体のプライバシーが守られる。

【0010】

１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおける推定されたサイズが第２のしきい値を上回っている場合に、カメラを再設置するように設置者に促すアラートを生成することによって、設置者は、今後において、すなわち、ビデオストリームの来たる取り込みにおいてプライバシーを守るために、第１の視野とは異なる第２の視野でカメラを再設置する必要があることに気づかされる。それゆえに、第２の視野が選択されるべきであり、それによって第２の視野は、ビデオストリームにおいて取り込まれた１つまたは複数の被写体のプライバシーを提供することになる。

【0011】

本開示において使用される場合の設置という用語は、場所、たとえば物理的な場所における、シーンにおけるカメラの取り付け、および／または特定の視野でシーンのビデオストリームを取り込むためのカメラの構成を指す。それゆえに、設置は、カメラが取り付けられる地理的場所、ならびに／またはビデオストリームを取り込むために使用される特定のパン、チルト、および／もしくはズーム設定などのカメラ設定を指す場合がある。

【0012】

本明細書において使用される際には、視野という用語は、カメラの空間における特定の位置および向きで、ならびにカメラの特定のズーム設定で、カメラを通して見えるシーンの部分を指す。特定の位置は、設置場所によって与えられ、向きは、カメラのパン設定および／またはチルト設定によって与えられる。それゆえに、視野は、１つまたは複数の異なるカメラパラメータに依存し得るということを理解されたい。たとえば、視野は、地上高さ、カメラのズーム設定、カメラのパン設定、および／またはカメラのチルト設定などのカメラの設置場所に依存し得る。

【0013】

１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおける推定されたサイズは、その少なくとも１つの部分がビデオストリームの少なくとも１つの方向に沿って構成するピクセルの数として特定されることが可能である。たとえば、少なくとも１つの部分の推定されたサイズは、ビデオストリームの画像フレームの垂直（高さ）方向および／または水平（幅）方向におけるピクセルの数として与えられることが可能である。ピクセルは、画素と呼ばれる場合もあり、画像フレームにおける最も小さい単一の要素である。画像フレームの空間解像度に応じて、画像フレームは、ほんのいくつかの例を挙げると、１９２０×１０８０（幅×高さ）ピクセル、２５６０×１４４０ピクセル、２５６０×１９２０ピクセル、または３８４０×２１６０ピクセルを含むことが可能である。

【0014】

第２のしきい値を下回っているすべての推定されたサイズに関してビデオストリームの第１のエッジフィルタリングされたバージョンが提供されるべきであるケースにおいては、第１のしきい値は、ゼロピクセルであることが可能である。しかしながら、１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおける推定されたサイズが十分に小さい場合には、取り込まれたビデオストリームは、１つまたは複数の被写体のプライバシーを明らかにするリスクを伴わずにそのまま提供されることが可能である。何が十分に小さい推定されたサイズとみなされるべきであるかは、目前の状況に依存するが、第１のしきい値は、ビデオストリームにおいて描写されている１つまたは複数の被写体のプライバシーを明らかにすることなく、ビデオストリームがそのまま提供されることが可能である場合に関する上限しきい値を提供するように設定されるべきである。そのようなシナリオにおいては、１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおける推定されたサイズが、第１のしきい値を上回っているが、第２のしきい値を下回っている場合に、ビデオストリームの第１のエッジフィルタリングされたバージョンが提供される。

【0015】

第２のしきい値は、取り込まれたビデオストリームの第１のエッジフィルタリングされたバージョンが提供されるべきである場合に関する上限しきい値を提供するように設定されるべきである。この第２のしきい値を上回ると、ビデオストリームの第１のエッジフィルタリングされたバージョンが提供されるならば１つまたは複数の被写体のプライバシーが明らかにされるリスクがあり、そのため、ビデオストリームの第１のエッジフィルタリングされたバージョンの提供が無効にされる。

【0016】

第１および第２のしきい値は、カメラパラメータおよび設置場所に基づいて特定されることが可能である。たとえば、しきい値は、レンズのタイプなどのカメラの光学系、ならびにカメラの解像度および視野に基づいて特定されることが可能である。追加として、または代替として、しきい値は、取り込まれたビデオストリームのエッジフィルタリングされたバージョンを提供するために使用されるエッジフィルタに、およびエッジフィルタのカーネルのサイズに基づいて特定されることも可能である。カーネルは、カーネルと画像フレームとの間において畳み込みを実行する場合のエッジ検知において使用される小さなマトリックスである。さらに、ある国においてカメラ設置に関して特定された第１および第２のしきい値は、国のプライバシー規制における違いに起因して、別の国においてカメラ設置に関して特定された第１および第２のしきい値とは異なる場合がある。第１および第２のしきい値は、テストを実行することによって、または以前のカメラ設置において使用された第１および第２のしきい値に基づいて特定されることが可能である。第１および第２のしきい値は、機械学習技術を用いて、たとえば、ビデオストリームにおける１つまたは複数の被写体を検知および／または認識するように構成されているニューラルネットワークを用いて特定されることも可能である。

【0017】

ビデオストリームは、シーンの少なくとも１つの画像フレームを含むということを理解されたい。それゆえに、ビデオストリームは、１つの画像フレームまたは複数の画像フレーム、たとえば、複数の時間的に後続の画像フレームを含むことが可能である。

【0018】

シーンは、シーンを記録するカメラの視野によって定義されるサイズおよび形状を有する任意の３次元の物理的な空間であることが可能である。

【0019】

本明細書において使用される場合の被写体という用語によって、被写体そのものに関する、被写体を所持している人間に関する、または被写体に関連付けられている人間に関するプライバシー情報を明らかにすることが可能である任意の種類の被写体が意味される。それゆえに、被写体は、ほんのいくつかの例を挙げると、人間またはその一部分（顔または体の部分など）、人々のグループ、車両またはその一部分（車両のナンバープレートなど）であることが可能である。

【0020】

ビデオストリームのエッジフィルタリングされたバージョンは、エッジポイントが強調されて非エッジポイントが抑制されているビデオストリームの一バージョンである。エッジポイントとは、画像の明るさが急激に変化する、またはより正式には不連続性を有している、ビデオストリームの画像フレームにおけるポイントに対応する。それに対応して、非エッジポイントとは、画像の明るさが急激に変化しない、またはより正式には不連続性を有していない、画像フレームにおけるピクセルに対応する。ビデオストリームのエッジフィルタリングされたバージョンにおいては、エッジポイントは強調され、通常は、被写体の境界、表面マーキングの境界を示すつながれた曲線のセット、および／または表面配向における不連続性に対応する曲線のセットとして示される。ビデオストリームのエッジフィルタリングされたバージョンにおいては、非エッジポイントは抑制されるので、エッジポイントによって強調された境界内のポイントは、抑制される。たとえば、ビデオストリームのエッジフィルタリングされたバージョンにおいて顔の輪郭が強調される場合には、顔の輪郭内の表面テクスチャは抑制されることになり、顔のある程度の匿名化をもたらす。匿名化の程度は、ビデオストリームのエッジフィルタリングされたバージョンにおける強調の程度および抑制の程度に依存する。しかしながら、匿名化の程度は、ビデオストリームの空間解像度にも依存するということを理解されたい。

【0021】

この方法のいくつかの変形形態においては、オペレーションの強化された安全なプライバシーモードは、１つまたは複数の被写体のプライバシーがさらに守られるビデオストリームの第２のバージョンを提供することを含む。

【0022】

１つまたは複数の被写体のプライバシーがさらに守られるビデオストリームの第２のバージョンを提供することによって、１つまたは複数の被写体のプライバシーは、そのプライバシーがビデオストリームの第１のエッジフィルタリングされたバージョンにおいて保証されることが可能ではなかった場合に保証されることが可能であり、そのため、ビデオストリームの第１のエッジフィルタリングされたバージョンは、無効にされる。それによって、ビデオストリームの第２のバージョンは、いかなるプライバシー機密情報も明らかにすることなく、モニタリングのためにユーザに、または格納のためにストレージに提供されることが可能である。

【0023】

この方法のいくつかの変形形態においては、ビデオストリームの第２のバージョンの提供は、ビデオストリームにおいて描写されている１つまたは複数の被写体のプライバシーを守るためにビデオストリームの少なくとも一部にプライバシーマスクを適用することによってビデオストリームの第２のバージョンを生成することを含む。

【0024】

これは、１つまたは複数の被写体のプライバシーを保証するためにビデオストリームの第２のバージョンを提供することの第１の代替方法である。

【0025】

本開示において使用される場合のプライバシーマスクという用語は、マスクされたエリアを用いて視界から画像フレームの部分を隠すことによって個人のプライバシーを保護するために使用されるプライバシーマスキング機能として理解されるべきである。プライバシーマスクは、静的または動的であることが可能である。静的なプライバシーマスクは、典型的には、オペレータがそれらを移動または除去することを決定するまで、その場にとどまる。動的なプライバシーマスクは、時間とともに変化することが可能であり、オペレータは、いつプライバシーマスクが適用されるべきであるかを定義することも可能である。たとえば、オペレータは、マスクされたエリア内で顔が検知された場合には、その顔がマスクアウトされることになるが、そうでない場合には、そのエリアにマスクが適用されることがないように、動的なプライバシーマスクを定義することが可能である。

【0026】

プライバシーマスクは、オーバーレイとして画像に適用される場合が多い。プライバシーマスクは、多角形の形状を有することが可能であるが、その他の形状も可能であり、それらの形状は、塞ぐエリアの形状にさらに緊密に沿う。いくつかのプライバシーマスクは、不透明なエリア（たとえば、均一に黒色のまたは青色のエリア）の形態を取り、その一方でその他のプライバシーマスクは、ぼかしの形態を取り、その場合、画像データは、プライバシーマスクエリアまたはピクシレーションにわたって「塗り」つぶされる。ピクシレーションとは、単一のピクセル値（多くの場合、コーディングユニット内の複数のまたはすべてのピクセルの平均値）がコーディングユニットにおけるすべてのピクセルを置き換えるプロセスである。ピクシレーションは、たとえば８と６４との間における係数で画像フレームをダウンスケーリングすることと、その後に最近傍アルゴリズムなどのちょっとしたスケーリングアルゴリズムを使用して画像フレームをアップスケーリングすることとによって達成されることが可能である。しかし一般には、プライバシーマスキングのためのぼかしは、ピクシレーションよりも望ましいとみなされている。なぜならぼかしは、より滑らかなエッジを可能にし、そのため、見栄えがよくなるからである。しかしながら、ぼかしは、ハードウェアブロックにおいて現在経済的に実行可能であるものよりも、達成するのがより困難であり、実施するのにさらに多くの計算リソースを必要とする。

【0027】

ビデオストリームにおいて、プライバシーマスクは、ビデオストリームにおいて描写されている１つまたは複数の被写体のプライバシーを隠すためにビデオストリームのそれぞれの画像フレームに適用される。たとえば、プライバシーマスクは、人間の顔または体の部分に適用されることが可能であり、それによって、それらの部分を、見られないようにおよび識別されないように隠す。プライバシーマスクは、ビデオストリームにおいて描写されている１つまたは複数の被写体をカバーするエリアを特定することによって、および上述されているように、単色、ぼかし、またはピクシレーションを使用してそのエリアを提示することによって、ビデオストリームの少なくとも１つの部分に適用されることが可能である。そのエリアは、たとえば、１つまたは複数の被写体の外形として特定されることが可能である。しかしながら、そのエリアは、ビデオストリームの少なくとも１つの部分をカバーするのに適した別の形状（たとえば、円形、長方形、楕円形）を有することが可能である。

【0028】

この方法のいくつかの変形形態においては、ビデオストリームの第１のエッジフィルタリングされたバージョンの提供は、ビデオストリームにエッジフィルタを適用してビデオストリームにおけるエッジポイントを強調すること、およびビデオストリームにおける非エッジポイントを抑制することによってビデオストリームの第１のエッジフィルタリングされたバージョンを生成することを含み、ビデオストリームのピクセル値は、量子化レベルの第１の数を使用して表される。

【0029】

上述されているように、ビデオストリームの第１のエッジフィルタリングされたバージョンを生成することによって、ビデオストリームにおいて描写されている１つまたは複数の被写体のプライバシーが、ビデオストリームの第１のエッジフィルタリングされたバージョンによって提供される１つまたは複数の被写体の匿名化のおかげで守られる。

【0030】

エッジフィルタは、エッジポイントを強調して非エッジポイントを抑制するフィルタである。それゆえに、ビデオストリームにエッジフィルタを適用することによって、エッジポイントが強化されることになり、その一方で非エッジポイントが抑制されることになる。たとえば、エッジフィルタは、エッジ検知フィルタと呼ばれる場合もあり、ほんのいくつかの例を挙げると、Ｓｏｂｅｌフィルタ、Ｃａｎｎｙフィルタ、ＤｏＧ（Ｄｉｆｆｅｒｅｎｃｅ ｏｆ Ｇａｕｓｓｉａｎ）フィルタ、Ｌａｐｌａｃｉａｎフィルタ、Ｐｒｅｗｉｔｔフィルタ、またはＳｃｈａｒｒフィルタであることが可能である。使用事例に適合するために、エッジフィルタの出力、すなわち、ビデオストリームのエッジフィルタリングされたバージョンは、正の勾配と負の勾配との間を区別しないための絶対値演算、強度を調整するためのゲイン演算子、エッジポイントを黒色に、および非エッジポイントを白色にするためのオフセット演算子、ならびに／または、画像における実際のエッジもしくはその他の構造の一部ではない不要なまばらな黒色のエッジピクセルを除去するためのノイズリダクション演算子など、１つまたは複数の演算を使用して修正されることが可能である。

【0031】

上述されているように、ビデオストリームにおけるピクセルは、量子化レベルの第１の数を使用して表される。たとえば、ピクセルは、２５６の量子化レベルに対応する８ビットを使用して表されることが可能である。それゆえに、それぞれのピクセルは、２５６の可能な色のうちの１つを表すために０と２５５との間における値を取ることが可能である。ビデオストリームにエッジフィルタを適用した後に、結果として生じる、ビデオストリームのエッジフィルタリングされたバージョンは通常、グレースケール上の値を有するピクセルから構成され、つまり、それらのピクセルは、光の量を表すだけであり、すなわち、それぞれのピクセルは、強度情報のみを表す。８ビット表示のケースにおいては、ビデオストリームのエッジフィルタリングされたバージョンのそれぞれのピクセルは、グレースケールを使用して０と２５５との間における強度のレベルを表すことが可能であるだろう。それゆえに、０が白色によって表されて、２５５が黒色によって表される場合には、それらの間にグレーの２５４の色調がある。

【0032】

この方法のいくつかの変形形態においては、ビデオストリームの第２のバージョンの提供は、ビデオストリームにエッジフィルタを適用する前に、ビデオストリームの空間解像度を低減して、１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおけるサイズを、第２のしきい値を下回るように低減することによって、ビデオストリームの第２のエッジフィルタリングされたバージョンとしてビデオストリームの第２のバージョンを生成することを含む。

【0033】

これは、１つまたは複数の被写体のプライバシーを保証するためにビデオストリームの第２のバージョンを提供することの第２の代替方法である。いくつかの使用事例に関しては、これは、１つまたは複数の被写体のプライバシーを保証するための効果的な方法である場合がある。

【0034】

本明細書において使用される場合の空間解像度という用語は、ビデオストリームの構築において、たとえば、ビデオストリームの１つまたは複数の画像フレームの構築において利用されるピクセルの数を指す。ビデオストリームの空間解像度を低減することによって、ビデオストリームの１つまたは複数の画像フレームを構成するピクセルの数が低減される。これは、ダウンスケーリングまたはダウンサンプリングと呼ばれる場合がある。それに対応して、ビデオストリームの空間解像度を増大することによって、すなわち、ビデオストリームをアップスケーリング／アップサンプリングすることによって、ビデオストリームの１つまたは複数の画像フレームを構成するピクセルの数が増大される。それぞれのピクセルのサイズは同じままであり、その結果、空間解像度が低減される場合には画像サイズが低減され、空間解像度が増大される場合には画像サイズが増大されるということを理解されたい。それによって、ビデオストリーム、たとえば、元の取り込まれたビデオストリーム、ビデオストリームの第１のバージョン、およびビデオストリームの第２のバージョンは、ユーザに提供された場合には、プライバシーのレベルに関係なく、すべて同じピクセルサイズを有することになる。しかしながら、ビデオストリームのダウンスケーリング後に、ビデオストリームのアップスケーリングが実行されて、ビデオストリームを同じピクセル数で保つことが可能であるが、ダウンスケーリング中に画像詳細が失われるので、機密情報は少なくなるということを理解されたい。

【0035】

１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおけるサイズが第２のしきい値を下回るようにビデオストリームの空間解像度を低減することによって、１つまたは複数の被写体のプライバシーがビデオストリームの第２のエッジフィルタリングされたバージョンにおいて得られるということが保証される。

【0036】

この方法のいくつかの変形形態においては、ビデオストリームの第２のバージョンの提供は、ビデオストリームに第１のエッジフィルタを適用する前に、ビデオストリームのピクセル値を表すために使用される量子化レベルの数を量子化レベルの第１の数から量子化レベルの第２の数へ低減することによって、ビデオストリームの第２のエッジフィルタリングされたバージョンとしてビデオストリームの第２のバージョンを生成することを含む。

【0037】

これは、１つまたは複数の被写体のプライバシーを保証するためにビデオストリームの第２のバージョンを提供することの第３の代替方法である。ビデオストリームの第２のエッジフィルタリングされたバージョンにおけるピクセル値は、量子化レベルの第２の数を使用して表されることになるということを理解されたい。

【0038】

ビデオストリームにおける量子化レベルの数を量子化レベルの第１の数から量子化レベルの第２のさらに低い数へ低減することによって、量子化レベルの第１の数におけるそれぞれの量子化レベルによって表されることになる強度の数に比較した、量子化レベルの第２の数におけるそれぞれの量子化レベルによって表されることになる強度のさらに大きな数に起因して、ビデオストリームの第２のエッジフィルタリングされたバージョンにおけるグラニュラー雑音が増大されることになる。より大きなグラニュラー雑音のおかげで、ビデオストリームの第２のエッジフィルタリングされたバージョンにおいて描写されている１つまたは複数の被写体のプライバシーが守られる。

【0039】

たとえば、量子化レベルの第１の数が、８ビット表示を使用して上述のように２５６であった場合には、第２の量子化レベルの数は、（２ビット表示を使用して）４であることが可能である。そのようなケースにおいては、１つの強度をそれぞれが表す量子化レベルの第１の数の２５６の量子化レベルは、６４の量子化レベルの４つのグループへとグループ化される。第１のグループは、量子化レベルの第２の数の第１の量子化レベル（たとえば０）へと組み合わされることが可能である。それゆえに、量子化レベルの第２の数のこの第１の量子化レベル（たとえば０）は、量子化レベルの第１の数の量子化レベル０～６３によって表される６４の異なる強度のうちのそれぞれの強度を表すことになる。そのため、ビデオストリームの第２のエッジフィルタリングされたバージョンにおいては、ビデオストリームの第１のエッジフィルタリングされたバージョンにおける量子化レベルの第１の数の量子化レベル０～６３によって表される６４の異なる強度どうしの間におけるいかなる違いも見ることは可能ではないだろう。それに対応して、第２のグループは、量子化レベルの第２の数の第２の量子化レベル（たとえば１）へと組み合わされることが可能であり、この第２の量子化レベル（たとえば１）は、量子化レベルの第１の数の量子化レベル６４～１２７によって表される６４の異なる強度のうちのそれぞれの強度を表すことになる。そのため、ビデオストリームの第２のエッジフィルタリングされたバージョンにおいては、ビデオストリームの第１のエッジフィルタリングされたバージョンにおける量子化レベルの第１の数の量子化レベル６４～１２７によって表される６４の異なる強度どうしの間におけるいかなる違いも見ることは可能ではないだろう。同じことは、第３および第４のグループにも当てはまる。

【0040】

この方法のいくつかの変形形態においては、ビデオストリームの第２のバージョンの提供は、ビデオストリームの第１のエッジフィルタリングされたバージョンの空間解像度を低減して、１つまたは複数の被写体の少なくとも１つの部分のサイズが第２のしきい値を下回る、ビデオストリームの第２のエッジフィルタリングされたバージョンを得ることによって、ビデオストリームの第２のエッジフィルタリングされたバージョンとしてビデオストリームの第２のバージョンを生成することを含む。

【0041】

これは、１つまたは複数の被写体のプライバシーを保証するためにビデオストリームの第２のバージョンを提供することの第４の代替方法である。

【0042】

ビデオストリームの第１のエッジフィルタリングされたバージョンの空間解像度を低減して、１つまたは複数の被写体の少なくとも１つの部分のサイズが第２のしきい値を下回る、ビデオストリームの第２のエッジフィルタリングされたバージョンを得ることによって、１つまたは複数の被写体のプライバシーが守られる。

【0043】

この方法のいくつかの変形形態においては、ビデオストリームの第２のバージョンの提供は、ビデオストリームの第１のエッジフィルタリングされたバージョンにおけるエッジ強度しきい値を下回るエッジ強度を有するエッジポイントを、ビデオストリームの第２のエッジフィルタリングされたバージョンにおける非エッジポイントとして表すことによって、ビデオストリームの第２のエッジフィルタリングされたバージョンとしてビデオストリームの第２のバージョンを生成することを含む。

【0044】

これは、１つまたは複数の被写体のプライバシーを保証するためにビデオストリームの第２のバージョンを提供することの第５の代替方法である。ビデオストリームの第１のエッジフィルタリングされたバージョンにおけるエッジ強度しきい値を下回るエッジ強度を有するエッジポイントを、ビデオストリームの第２のエッジフィルタリングされたバージョンにおける非エッジポイントとして表すことによって、１つまたは複数の被写体の輪郭は、さらに強調され、１つまたは複数の被写体の輪郭内の表面テクスチャは、さらに抑制される。その結果、１つまたは複数の被写体の匿名化の程度が高くなり、それによって、１つまたは複数の被写体のプライバシーを守る。「エッジ強度」という表現は、エッジの度合いと、エッジにおいて画像の明るさがどれぐらい急激に変化するかを指す。

【0045】

この方法のいくつかの変形形態においては、ビデオストリームの第１のエッジフィルタリングされたバージョンを提供することは、ビデオストリームの第１のエッジフィルタリングされたバージョンを受信機へ送信することを含み、ビデオストリームの第１のエッジフィルタリングされたバージョンの提供を無効にすることは、受信機へのビデオストリームの第１のエッジフィルタリングされたバージョンの送信を無効にすることを含む。

【0046】

受信機は、直接に、またはネットワークを介して間接的に、のいずれかで、有線を介して、またはワイヤレスにカメラに動作可能に接続されている任意のデバイスであることが可能である。たとえば、受信機は、ストレージ、ユーザ端末、サーバ、またはクラウドデバイスであることが可能である。

【0047】

この方法のいくつかの変形形態においては、ビデオストリームの第１のエッジフィルタリングされたバージョンの提供を無効にすることは、カメラがビデオストリームを取り込むことを無効にすることを含む。カメラがビデオストリームを取り込むことを無効にすることは、ビデオストリームの取り込みが終了されるということを意味する。それによって、提供された場合に１つまたは複数の被写体のプライバシーを明らかにするリスクを有する可能性がある取り込まれたビデオストリームはなくなる。

【0048】

この方法のいくつかの変形形態においては、ビデオストリームの第１のエッジフィルタリングされたバージョンの提供を無効にすることは、取り込まれたビデオストリームを作成するために使用される画像情報をカメラの画像センサが伝達するのを無効にすることを含む。

【0049】

取り込まれたビデオストリームを作成するために使用される画像フレームを画像センサが伝達するのを無効にすることによって、処理する画像情報はなくなり、ひいては、提供された場合にプライバシーを明らかにする可能性がある取り込まれたビデオストリームはなくなる。

【0050】

この方法のいくつかの変形形態においては、この方法はさらに、１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおける推定されたサイズが第１のしきい値を下回っている場合には、取り込まれたビデオストリームを提供することを含む。

【0051】

それゆえに、１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおけるサイズが第１のしきい値を下回っている場合には、取り込まれたビデオストリームは、そのまま提供された場合にプライバシーを明らかにすることはないということが結論付けられる。そのため、１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおけるサイズが第１のしきい値を下回っている場合には、取り込まれたビデオストリームが提供される。

【0052】

本発明の第２の態様によれば、上記の目的は、カメラの設置を容易にするためのカメラによって達成される。このカメラは、第１の視野でカメラが設置されている場合にシーンのビデオストリームを取り込むように構成されている画像取り込みモジュールであって、そのシーンが１つまたは複数の被写体を含む、画像取り込みモジュールと、１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおけるサイズを推定するように構成されているサイズ推定コンポーネントと、１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおける推定されたサイズが、第１のしきい値を上回っていて、かつ第２のしきい値を下回っている限り、ビデオストリームにおいて描写されている１つまたは複数の被写体のプライバシーを守るために、ビデオストリームの第１のエッジフィルタリングされたバージョンを提供するように構成されている提供コンポーネントとを含む。１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおける推定されたサイズが、少なくとも１つの被写体のプライバシーが明らかにされるリスクがあるということを示す第２のしきい値を上回っていることに応答して、カメラは、オペレーションの強化された安全なプライバシーモードに入るように構成されており、アラート生成コンポーネントが、第１の視野とは異なる第２の視野でカメラを再設置するように設置者に促すアラートを生成するように構成されており、提供コンポーネントは、ビデオストリームの第１のエッジフィルタリングされたバージョンの提供を無効にするように構成されている。

【0053】

本発明の第３の態様によれば、上記の目的は、コンピュータコード命令をその上に格納してある非一時的コンピュータ可読メディアによって達成され、それらのコンピュータコード命令は、処理能力を有するデバイスによって実行されたときに、第１の態様の方法を実行するように適合されている。

【0054】

第２および第３の態様は、第１の態様と同じ特徴および利点を全般的に有することが可能である。本発明は、別段の明示がない限り、本明細書において開示されている特徴どうしのすべての可能な組合せに関連しているということにさらに留意されたい。

【0055】

本発明の上記の、ならびにさらなる目的、特徴、および利点は、添付の図面への参照とともに、本発明の実施形態についての以降の例示的かつ非限定的で詳細な記述を通じて、よりよく理解されるであろう。添付の図面では、同様の要素に対して同じ参照番号が使用される。

【図面の簡単な説明】

【0056】

【図1】本発明のさまざまな実施形態が実施されることが可能である例示的な環境を概略的に示す図である。

【図2】実施形態によるカメラを概略的に示す図である。

【図3】実施形態によるカメラの設置を容易にするための方法のフローチャートである。

【図4】実施形態による画像処理パイプラインを概略的に示す図である。

【図5】４つの被写体を描写している取り込まれたビデオストリームの画像フレームを概略的に示す図である。

【図6】４つの被写体のプライバシーを守る、取り込まれたビデオストリームのプライバシーマスクされた画像フレームを概略的に示す図である。

【図7】４つの被写体を描写している取り込まれたビデオストリームの第１のエッジフィルタリングされたバージョンのエッジフィルタリングされた画像フレームを概略的に示す図である。

【図8】取り込まれたビデオストリームの第２のエッジフィルタリングされたバージョンのエッジフィルタリングされた画像フレームの例を概略的に示す図である。

【図9】取り込まれたビデオストリームの別の第２のエッジフィルタリングされたバージョンのエッジフィルタリングされた画像フレームの例を概略的に示す図である。

【図10】取り込まれたビデオストリームのエッジフィルタリングされたバージョンのエッジフィルタリングされた画像フレームの例を概略的に示す図である。

【図11】取り込まれたビデオストリームの第２のエッジフィルタリングされたバージョンのエッジフィルタリングされた画像フレーム１１００の例を概略的に示す図であり、量子化レベルの数が低減されている。

【図12】取り込まれたビデオストリームの第２のエッジフィルタリングされたバージョンのエッジフィルタリングされた画像フレーム１２００の例を概略的に示す図である。

【発明を実施するための形態】

【0057】

本発明は、添付の図面を参照しながら、以降でさらに十分に記述され、添付の図面においては、本発明の実施形態が示されている。

【0058】

図１は、本発明のさまざまな実施形態が実施されることが可能である例示的な環境１００の概略図を示している。図１において見て取れるように、被写体１０４、たとえば、建物１０６に向かって歩いている人を伴うシーン１０２が、ポール１０９に取り付けられているカメラ１０８によって取り込まれている。シーン１０２の描写は、例示の目的のための単純化した図にすぎないということに留意されたい。シーン１０２は、より一般的な意味においては、そのシーンを記録するカメラの視野によって画定されるサイズおよび形状を有する任意の３次元の物理的な空間として記述されることが可能である。さらに、カメラ１０８は、建物上に、天井に、壁またはフェンス上になど、その他の適切な場所に取り付けられることが可能であるということと、それゆえにポール１０９における取り付けは、例として与えられているだけであるということとを理解されたい。

【0059】

カメラ１０８は、モニタリングカメラであることが可能であり、これは、監視カメラと呼ばれる場合もある。さらにカメラは、固定されたカメラ、たとえば定置型カメラ、または移動可能なカメラ、たとえばパンチルトズーム（ＰＴＺ）カメラもしくはボディーウォーンカメラ（ＢＷＣ）であることが可能である。カメラ１０８は、可視光カメラ、赤外線（ＩＲ）感受性カメラ、または熱（長波長赤外線（ＬＷＩＲ））カメラであることが可能である。

【0060】

図１において示されているように、カメラ１０８は、無線リンク１１０を介して有線ネットワーク１１２へワイヤレスに、そして最終的には、ネットワーク１１２に接続されることが可能であるクライアント１１４および／またはサーバ１１６へビデオストリームを送信するように構成されている。使用されることが可能であるワイヤレスおよび有線の送信モデルの多くの組合せがあるということ、ならびに図１は一例を示しているにすぎないということを理解されたい。

【0061】

クライアント１１４は、ディスプレイを有することが可能であり、そのディスプレイでは、オペレータがカメラからの画像および／またはビデオストリームを見ることが可能である。典型的には、クライアント１１４はまた、サーバ１１６に接続されており、サーバ１１６では、画像および／またはビデオストリームがさらに格納および／または処理されることが可能である。多くの場合、クライアント１１４はまた、たとえば、オペレータがクライアント１１４において制御コマンドを発行することによって、カメラ１０８を制御するために使用される。たとえば、オペレータは、シーン１０２の特定の細部上でズームアウトするようにカメラに指示することが可能である。これは、１つまたは複数の被写体１０４の一部分のビデオストリームにおけるサイズが、第１の視野、たとえば第１のズーム設定を使用してビデオストリームを取り込む際に第２のしきい値を上回ると推定される場合に当てはまることが可能であり、設置者に対してアラートが生成され、設置者は、その１つまたは複数の被写体のその部分上でズームアウトして、その部分のビデオストリームにおけるサイズを、第１の視野とは異なる第２の視野、たとえば第２のズーム設定を使用してビデオストリームを取り込む際に第２のしきい値を下回るように低減するようカメラに指示することが可能である。それによって、その１つまたは複数の被写体のプライバシーが守られることが可能である。しかしながら、オペレータがカメラを制御せず、カメラ１０８は定置型であり、クライアント１２０上でオペレータが見るためのビデオストリームを提供するだけである状況もある。そのようなシナリオにおいては、設置者は、第２の視野を使用してビデオストリームを取り込む際に、その部分のビデオストリームにおけるサイズが第２のしきい値を下回るこの第２の視野を得るために、カメラ１０８を別の物理的な場所に再設置する必要がある場合がある。それゆえに、異なる物理的な場所でのカメラ１０８の再設置は、１つまたは複数の被写体の求められている守られたプライバシーを得ることも可能である。その異なる物理的な場所は、第１の視野で設置された場合の１つまたは複数の被写体までの距離に比較して、１つまたは複数の被写体からさらに遠い距離にある場所であることが可能である。

【0062】

図２は、カメラ１０８の実施形態を概略的に示している。

【0063】

カメラ１０８は、レンズ２０２を含み、レンズ２０２は、シーン１０２を取り込み、そのシーン１０２を画像センサ２０４上へ投影する。ともに、レンズ２０２および画像センサ２０４は、画像取り込みモジュール２０６を形成することが可能である。画像センサ２０４は、ビデオストリームを形成する画像フレームを取り込む。カメラはさらに、画像処理パイプライン（ＩＰＰ）２０８、エンコーダ２１０、および入力／出力インターフェース２１２を含む。

【0064】

画像処理パイプライン２０８は、画像センサ２０４から受信された画像フレーム上で、ある範囲のさまざまなオペレーションを実行するように構成されている。そのようなオペレーションは、フィルタリング、デモザイキング、色補正、空間的なおよび／または時間的なノイズを除去するためのノイズフィルタリング、たとえば、バレル歪みの影響を除去するための歪み補正、たとえば、広い範囲の強度を含むシーンの画像処理を可能にするグローバルおよび／またはローカルトーンマッピング、変換、たとえば、回転、たとえば、口径食の影響の除去のためのフラットフィールド補正、オーバーレイ、たとえば、プライバシーマスク、説明テキストなどの適用を含むことが可能である。しかしながら、これらのオペレーションのうちのいくつか、たとえば、バレル歪みの補正、回転等などの変換オペレーションは、画像処理パイプライン２０８の外側に、たとえば、画像処理パイプライン２０８とエンコーダ２１０との間における１つまたは複数のユニットに配置されている１つまたは複数のモジュール、コンポーネント、または回路によって実行されることが可能であるということに留意されたい。

【0065】

画像処理パイプライン２０８に続いて、画像フレームは、エンコーダ２１０へ転送され、そこで画像フレームは、エンコーディングプロトコルに従ってエンコードされ、入力／出力インターフェース２１２を使用してネットワーク１１２を介して、受信機、たとえば、クライアント１１４および／またはサーバ１１６へ転送される。図２において示されているカメラ１０８はまた、プロセッサ、メモリ等など、多くのその他のコンポーネントを含み、それらは、従来のカメラシステムにおいて一般的であり、それらの目的およびオペレーションは、当業者によく知られているということに留意されたい。そのようなコンポーネントは、明確さの理由から、図２の図示および記述から省略されている。

【0066】

カメラ１０８は、ビデオストリームの取り込みに関連しているデータと、カメラ１０８の設置を容易にするための方法に関連しているデータとを格納するためのデータストレージ２１４を含むことも可能である。それゆえに、データストレージは、ほんのいくつかの例を挙げると、取り込まれたビデオストリーム、ビデオストリームの第１および第２のバージョン、第１および第２のしきい値、第１および第２の視野、１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおける推定されたサイズを格納することが可能である。データストレージは、ＳＤカードなど、不揮発性メモリであることが可能である。

【0067】

複数の従来のビデオエンコーディングフォーマットがある。本発明のさまざまな実施形態とともに機能するいくつかの一般的なビデオエンコーディングフォーマットは、ほんのいくつかの例を挙げると、ＪＰＥＧ、ＭＪＰＥＧ（Ｍｏｔｉｏｎ ＪＰＥＧ）、ＨＥＶＣ（Ｈｉｇｈ Ｅｆｆｉｃｉｅｎｃｙ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）（Ｈ．２６５およびＭＰＥＧ－Ｈ Ｐａｒｔ ２としても知られている）、ＡＶＣ（Ａｄｖａｎｃｅｄ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）（Ｈ．２６４およびＭＰＥＧ－４ Ｐａｒｔ １０としても知られている）、ＶＶＣ（Ｖｅｒｓａｔｉｌｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）（Ｈ．２６６、ＭＰＥＧ－Ｉ Ｐａｒｔ ３、およびＦＶＣ（Ｆｕｔｕｒｅ Ｖｉｄｅｏ Ｃｏｄｉｎｇ）としても知られている）、ＶＰ９、ＶＰ１０、ならびにＡＶ１（ＡＯＭｅｄｉａ Ｖｉｄｅｏ １）を含む。

【0068】

言及されているように、入力および出力インターフェース２１２は、カメラ１０８と、ネットワーク１１２と、クライアント１１４およびサーバ１１６などの１つまたは複数の受信デバイスとの間における通信インターフェースとしての役割を果たすように構成されている。それゆえに、カメラ１０８は、クライアント１１４から命令を受信することが可能であり、入力および出力インターフェース２１２を介してクライアントおよび／またはサーバ１１６へビデオストリームを送信することが可能である。

【0069】

画像処理パイプライン２０８、エンコーダ２１０、および入力／出力インターフェース２１２は、画像処理／エンコーディングモジュール２１４を形成することが可能であり、画像処理／エンコーディングモジュール２１４は、画像取り込みモジュール２０６に接続されている。画像取り込みモジュール２０６および画像処理／エンコーディングモジュール２１４は、互いから距離を置いて配置されていて互いと通信状態にある２つの別個のユニットとして配置されることが可能である。そのようなシナリオにおいては、カメラ１０８は、カメラシステムと呼ばれる場合もある。あるいは、画像取り込みモジュール２０６および画像処理／エンコーディングモジュール２１４は、カメラ１０８に含まれている単一のユニットとして配置されることが可能である。さらに、画像取り込みモジュール２０６は、たとえばパンおよび／またはチルト方向において、移動可能であり得、その一方で画像処理／エンコーディングモジュール２１４は、定置型であることが可能である。

【0070】

ここで図３のフローチャートを参照しながら、ならびに図２および図４を参照しながら、カメラ１０８の設置を容易にするための方法が記述される。図４は、実施形態による画像処理パイプライン２０８を概略的に示している。示されているように、画像処理パイプライン２０８の実施形態は、サイズ推定コンポーネント４０２、提供コンポーネント４０４、およびアラート生成コンポーネント４０６を含む。しかしながら、サイズ推定コンポーネント４０２、提供コンポーネント４０４、およびアラート生成コンポーネント４０６のうちの１つまたは複数は、別の方法でカメラ１０８に配置されることが可能であるということを理解されたい。たとえば、カメラ１０８は、サイズ推定コンポーネント４０２、提供コンポーネント４０４、およびアラート生成コンポーネント４０６のうちの１つまたは複数を、互いに、ならびに画像処理パイプライン２０８、エンコーダ２１０、入力および出力インターフェース２１２、およびデータストレージ２１４などのカメラ１０８のその他の部分に通信可能に接続されている別個のユニットとして含むことが可能である。

【0071】

さらに、図３において示されている方法は、カメラ１０８の別々の部分によって実行されることが可能であるということ、ステップのうちのいくつかは、任意選択であることが可能であるということ、およびステップは、別の適切な順序で行われることが可能であるということを理解されたい。さらに、本開示においては、１つまたは複数のステップが、取り込まれたビデオストリームの画像フレーム上で実行されるものとして記述されている。これは、１つまたは複数のステップがビデオストリームの一時的な部分で実行されることが可能であるということとして理解されることが可能である。

【0072】

ステップＳ３０２において、第１の視野でカメラ１０８が設置されている場合に、シーン１０２のビデオストリームが取り込まれる。このステップは、画像取り込みモジュール２０６によって、たとえば、レンズ２０２および画像センサ２０４によって実行される。

【0073】

前述されているように、シーン１０２は、１つまたは複数の被写体１０４を含む。

【0074】

やはり前述されているように、視野という用語は、カメラ１０８の空間における特定の位置および向きで、ならびにカメラ１０８の特定のズーム設定で、カメラ１０８を通して見えるシーンの部分を指す。特定の位置は、設置場所によって与えられ、向きは、カメラのパン設定および／またはチルト設定によって与えられる。それゆえに、第１の視野は、１つまたは複数の異なるカメラパラメータに依存し得るということを理解されたい。たとえば、第１の視野は、地上高さなどのカメラ１０８の設置場所、カメラ１０８のズーム設定、カメラ１０８のパン設定、および／またはカメラのチルト設定に依存し得る。

【0075】

さらに、前述されているように、１つまたは複数の被写体１０４は、被写体そのものに関する、被写体を所持している人間に関する、または被写体に関連付けられている人間に関するプライバシー情報を明らかにすることが可能である任意の種類の被写体であることが可能である。それゆえに、被写体は、ほんのいくつかの例を挙げると、人間またはその一部分（顔または体の部分など）、人々のグループ、車両またはその一部分（車両のナンバープレートなど）であることが可能である。

【0076】

図５は、４つの被写体１０４、たとえば、舗道の上を歩いている４人の個人１０４ａ、１０４ｂ、１０４ｃ、１０４ｄを描写している取り込まれたビデオストリームの画像フレーム５００を概略的に示している。

【0077】

ステップＳ３０４において、１つまたは複数の被写体１０４の少なくとも１つの部分のビデオストリームにおけるサイズが推定される。このステップは、サイズ推定コンポーネント４０２によって実行されることが可能である。１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおけるサイズは、その少なくとも１つの部分がビデオストリームの少なくとも１つの方向に沿って構成するピクセルの数として推定されることが可能である。たとえば、少なくとも１つの部分の推定されたサイズは、ビデオストリームの画像フレームの垂直（高さ）方向および／または水平（幅）方向におけるピクセルの数として与えられることが可能である。それゆえに、推定されたサイズは、ピクセルの数として与えられる長さ、高さ、幅、または２つの点の間における距離であることが可能である。たとえば、推定されたサイズは、個人の両目の間におけるピクセルの数、または個人の顔の左側と、その顔の右側との間におけるピクセルの数であることが可能である。しかしながら、推定されたサイズは、少なくとも１つの部分、たとえば、あるエリアが画像フレームに含むピクセルの数であることも可能である。推定されたサイズが個人の顔のビデオストリームにおけるサイズとして推定される実施形態においては、推定コンポーネント４０２は、ビデオストリームにおける顔を検知するように構成されている顔検知器（４０２ａ）を含むことが可能であり、またはその顔検知器（４０２ａ）に接続されることが可能である。しかしながら、推定コンポーネント４０２は、車両およびナンバープレートなど、その他の被写体またはそれらの部分を検知するように構成されている１つまたは複数のその他の被写体検知器（４０２ｂ）を追加として、または代替として含むこと、またはそれらの被写体検知器（４０２ｂ）に接続されることが可能である。図５において、境界ボックス１０４ａ’、１０４ｂ’、１０４ｃ’、１０４ｄ’は、たとえば顔検知器４０２ａによって検知された個人１０４ａ～１０４ｄの顔を概略的に示している。取り込まれたビデオにおける車両のサイズは、たとえば被写体検知器４０２ｂが、取り込まれたビデオストリームにおいて車両のヘッドランプどうしの間における距離を推定すること、または車両のナンバープレートのサイズを推定することによって検知されることが可能である。

【0078】

ステップＳ３０６において、１つまたは複数の被写体１０４の少なくとも１つの部分のビデオストリームにおける推定されたサイズが、第１のしきい値を上回っていて、かつ第２のしきい値を下回っている限り、ビデオストリームにおいて描写されている１つまたは複数の被写体１０４のプライバシーを守るために、ビデオストリームの第１のエッジフィルタリングされたバージョンが提供される。このステップは、提供コンポーネント４０４によって実行される。

【0079】

いくつかの実施形態においては、ビデオストリームの第１のエッジフィルタリングされたバージョンの提供は、ビデオストリームにエッジフィルタを適用してビデオストリームにおけるエッジポイントを強調すること、およびビデオストリームにおける非エッジポイントを抑制することによってビデオストリームの第１のエッジフィルタリングされたバージョンを生成することを含む。ビデオストリームのピクセル値、およびビデオストリームの第１のエッジフィルタリングされたバージョンのピクセル値は、量子化レベルの第１の数を使用して表される。

【0080】

ビデオストリームの第１のエッジフィルタリングされたバージョンの提供は、ビデオストリームの第１のエッジフィルタリングされたバージョンを受信機へ送信することを含むことが可能である。前述されているように、受信機は、有線を介して、またはワイヤレスにカメラ１０８に動作可能に接続されている、またはカメラ１０８内に含まれている任意のデバイスであることが可能である。それゆえに、ビデオストリームの第１のエッジフィルタリングされたバージョンは、クライアント１１４、サーバ１１６、および／またはデータストレージ２１４へ送信されることが可能であるということを理解されたい。

【0081】

図７は、４つの被写体１０４、たとえば４人の個人１０４ａ、１０４ｂ、１０４ｃ、１０４ｄを描写している取り込まれたビデオストリームの第１のエッジフィルタリングされたバージョンのエッジフィルタリングされた画像フレーム７００を概略的に示している。エッジフィルタリングされた画像フレーム７００は、画像フレーム５００にＳｏｂｅｌフィルタを適用することによって得られ、可能な限り最も高い空間解像度を有する。可能な限り最も高い空間解像度によって意味されるのは、エッジフィルタリングされた画像フレームの空間解像度が、取り込まれたビデオストリームの対応する画像フレームと同じであるということである。言い換えれば、エッジフィルタリングされた画像フレーム７００の空間解像度は、画像フレーム５００の空間解像度と同じである。図７において見て取れるように、個人のプライバシーは、それらの個人がカメラに近づくにつれて、ひいては、たとえば画像フレーム７００における彼らの顔のサイズが大きくなったときに明らかにされる。そのため、プライバシーが明らかにされる前に、たとえば既に１つまたは複数の被写体のプライバシーが明らかにされるリスクがある場合には、取り込まれたビデオストリームの第１のエッジフィルタリングされたバージョンの提供は、無効にされるべきである。

【0082】

そのため、ステップＳ３０８において、１つまたは複数の被写体１０４の少なくとも１つの部分のビデオストリームにおける推定されたサイズが、少なくとも１つの被写体のプライバシーが明らかにされるリスクがあるということを示す第２のしきい値を上回っていることに応答して、カメラ１０８は、オペレーションの強化された安全なプライバシーモードに入る。

【0083】

オペレーションの強化された安全なプライバシーモードにある場合には、ステップＳ３１０において、第１の視野とは異なる第２の視野でカメラ１０８を再設置するように設置者に促すアラートが生成され、そしてステップＳ３１２において、ビデオストリームの第１のエッジフィルタリングされたバージョンの提供が、無効にされる。ビデオストリームの第１のエッジフィルタリングされたバージョンの提供は、所定の期間にわたって、たとえば１日もしくは複数日に、またはカメラ１０８の再設置のために必要とされると予想される期間に対応する期間にわたって無効にされることが可能である。

【0084】

第２の異なる視野を得るためのカメラ１０８の再設置は、カメラ設定を第１のパンレベルから第２の異なるパンレベルへ、および／または第１のチルト設定から第２の異なるチルト設定へ、および／または第１のズーム設定から第２の異なるズーム設定へ変更することを含むことが可能であるということを理解されたい。第２のズーム設定は、好ましくは、第１のズーム設定に比較してズームアウト設定である。代替として、または追加として、再設置は、カメラ１０８が第１の物理的な場所から第２の異なる物理的な場所へ、すなわち、地上のポール上に取り付けることから高い建物上で上に高く取り付けることへ移動されることを含むことが可能である。

【0085】

第２の視野でのカメラ１０８の再設置の後に、方法ステップは、今度は第２の視野が新たな第１の視野、すなわち、ステップＳ３０２～Ｓ３１２において言及されている第１の視野である状態でステップＳ３０２から繰り返されることが可能である。

【0086】

ステップＳ３１０は、アラート生成コンポーネント４０６によって実行されることが可能であり、ステップＳ３１２は、提供コンポーネント４０４によって実行されることが可能である。

【0087】

いくつかの実施形態においては、ビデオストリームの第１のエッジフィルタリングされたバージョンの提供を無効にすることは、受信機へのビデオストリームの第１のエッジフィルタリングされたバージョンの送信を無効にすることを含む。これは、いくつかの実施形態においては、カメラ１０８が、ビデオストリームの第１のエッジフィルタリングされたバージョンを記録するのを停止することを意味する。たとえば、ビデオストリームの第１のエッジフィルタリングされたバージョンは、データストレージ２１４に格納されない。

【0088】

あるいは、いくつかの実施形態においては、ビデオストリームの第１のエッジフィルタリングされたバージョンの提供を無効にすることは、カメラがビデオストリームを取り込むことを無効にすることを含む。これは、ビデオストリームの第２のバージョンが必要とされていない、または望まれていない場合に当てはまることが可能であり、ひいてはカメラ１０８は、ビデオストリームの第１のエッジフィルタリングされたバージョンが１つまたは複数の被写体のプライバシーを保証することが可能ではない場合には、非アクティブ化される。そのようなケースにおいては、画像取り込みモジュール２０６、たとえば、レンズ２０２および／または画像センサ２０４は、ビデオストリームを取り込むことを無効にされることが可能である。

【0089】

いくつかの実施形態においては、ビデオストリームの第１のエッジフィルタリングされたバージョンの提供を無効にすることは、取り込まれたビデオストリームを作成するために使用される画像情報をカメラの画像センサが伝達するのを無効にすることを含む。それゆえに、いくつかのケースにおいては、取り込まれたビデオストリームを作成するために使用される画像フレームを画像センサ２０４が伝達することを無効にすることによって、カメラ１０８が無効にされる。たとえば、画像センサ２０４は、画像フレームをカメラ１０８の画像処理／エンコーディングモジュール２１４へ伝達することを無効にされることが可能である。

【0090】

任意選択のステップＳ３１４において、オペレーションの強化された安全なプライバシーモードはさらに、１つまたは複数の被写体１０４のプライバシーがさらに守られるビデオストリームの第２のバージョンを提供することを含む。このステップは、上記のステップＳ３１２において言及されている所定の期間中に実行されることが可能であり、その期間中には、ビデオストリームの第１のエッジフィルタリングされたバージョンの提供が無効にされて、カメラ１０８の再設置を待つ。以降で記述されるように、ビデオストリームの第２のバージョンの提供は、さまざまな方法で達成されることが可能である。

【0091】

第１の代替方法においては、ビデオストリームの第２のバージョンの提供は、ビデオストリームにおいて描写されている１つまたは複数の被写体１０４のプライバシーを守るためにビデオストリームの少なくとも一部にプライバシーマスクを適用することによってビデオストリームの第２のバージョンを生成することを含む。プライバシーマスクは、カラーマスクまたはモザイク（ピクセル）マスクであることが可能である。たとえば、プライバシーマスクは、設定されている背景シーンとライブカメラビューを比較して、変化（基本的には動いている被写体）のエリアに動的なマスキングを適用することによって、ライブおよび録画されたビデオストリームにおける被写体の素性をマスクする。さらに、必要とされるマスキングのレベルを設定することが可能であり得る。カラーマスキングは、動きを見ることを可能にしながら、２つのうちで最大のプライバシー保護を提供することが可能である。モザイクマスキングは、動いている被写体を低解像度で示すものであり、被写体全体に単一のマスキングカラーを適用するカラーマスクに比較して、被写体のさまざまな色を見ることによって、形を区別することがより容易になり得る。

【0092】

図６は、４つの被写体１０４、たとえば４人の個人１０４ａ、１０４ｂ、１０４ｃ、１０４ｄのプライバシーを守る、取り込まれたビデオストリームのプライバシーマスクされた画像フレーム６００を概略的に示している。

【0093】

第２の代替方法においては、ビデオストリームの第２のバージョンの提供は、ビデオストリームにエッジフィルタを適用する前に、ビデオストリームの空間解像度を低減して、１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおけるサイズを、第２のしきい値を下回るように低減することによって、ビデオストリームの第２のエッジフィルタリングされたバージョンとしてビデオストリームの第２のバージョンを生成することを含む。前述されているように、エッジフィルタを適用する前に、１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおけるサイズが第２のしきい値を下回るようにビデオストリームの空間解像度を低減することによって、１つまたは複数の被写体のプライバシーが、ビデオストリームの第２のエッジフィルタリングされたバージョンにおいて守られる。

【0094】

図８は、取り込まれたビデオストリームの第２のエッジフィルタリングされたバージョンのエッジフィルタリングされた画像フレーム８００の例を概略的に示している。エッジフィルタリングされた画像フレーム８００の空間解像度は、エッジフィルタリングされた画像フレーム７００の空間解像度の半分である。エッジフィルタリングされた画像フレーム７００、８００を比較することによって見て取れるように、エッジフィルタリングされた画像フレーム８００のサイズは、エッジフィルタリングされた画像フレーム７００の画像サイズに比較して低減されている。しかしながら、エッジフィルタリングされた画像フレーム８００において見られるように、４人の個人のプライバシーは守られていない。プライバシーを守るためには、１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおけるサイズを、第２のしきい値を下回るように低減する目的で、エッジフィルタを適用する前に空間解像度がさらにいっそう低減されるべきである。図９は、取り込まれたビデオストリームの別の第２のエッジフィルタリングされたバージョンのエッジフィルタリングされた画像フレーム９００の例を概略的に示している。エッジフィルタリングされた画像フレーム９００の空間解像度は、エッジフィルタリングされた画像フレーム７００の空間解像度の４分の１である。図９において示されているように、４人の個人のプライバシーは、エッジフィルタリングされた画像フレーム９００において守られている。

【0095】

第３の代替方法においては、ビデオストリームの第２のバージョンの提供は、ビデオストリームにエッジフィルタを適用する前に、ビデオストリームのピクセル値を表すために使用される量子化レベルの数を量子化レベルの第１の数から量子化レベルの第２の数へ低減することによって、ビデオストリームの第２のエッジフィルタリングされたバージョンとしてビデオストリームの第２のバージョンを生成することを含む。

【0096】

ビデオストリームの第２のエッジフィルタリングされたバージョンのピクセル値は、量子化レベルの第２の数を使用して表されることが可能であるということを理解されたい。

【0097】

しかしながら、可能な量子化レベルの数は、量子化レベルの第１の数に対応するように再び増大されることが可能であるということ、およびそのようなシナリオにおいては、ビデオストリームの第２のエッジフィルタリングされたバージョンのピクセル値を表すために、量子化レベルの第２の数に対応する量子化レベルの数のみが使用されるということも理解されたい。たとえば、ビデオストリームの量子化レベルの第１の数が２５６（８ビット）に対応し、量子化レベルの第２の数が１６（４ビット）である場合には、ビデオストリームの第２のエッジフィルタリングされたバージョンは、４ビットのビデオストリームであることが可能であり、ピクセル値を表すために１６の量子化レベルが使用されるか、または量子化レベルのその数は、２５６（８ビット）に増大されることが可能であるが、２５６の量子化レベルのうちの１６の量子化レベルのみが、ピクセル値を表すために使用される。

【0098】

前述されているように、ビデオストリームにおいて使用される量子化レベルの数を量子化レベルの第１の数から量子化レベルの第２のさらに低い数へ低減することによって、量子化レベルの第１の数におけるそれぞれの量子化レベルによって表されることになる強度の数に比較した、量子化レベルの第２の数におけるそれぞれの量子化レベルによって表されることになる強度のさらに大きな数に起因して、ビデオストリームの第２のエッジフィルタリングされたバージョンにおけるグラニュラー雑音が増大されることになる。より大きなグラニュラー雑音のおかげで、ビデオストリームの第２のエッジフィルタリングされたバージョンにおいて描写されている１つまたは複数の被写体のプライバシーが守られる。

【0099】

図１１は、取り込まれたビデオストリームの第２のエッジフィルタリングされたバージョンのエッジフィルタリングされた画像フレーム１１００の例を概略的に示しており、プライバシーを守るために量子化レベルの数が低減されている。この例示している図においては、エッジフィルタリングされた画像フレーム１１００における量子化レベルの数は、エッジフィルタリングされた画像フレーム７００における２５６の量子化レベル（８ビット）に比較して、８（３ビット）である。

【0100】

第４の代替方法においては、ビデオストリームの第２のバージョンの提供は、ビデオストリームの第１のエッジフィルタリングされたバージョンの空間解像度を低減して、１つまたは複数の被写体の少なくとも１つの部分のサイズが第２のしきい値を下回る、ビデオストリームの第２のエッジフィルタリングされたバージョンを得ることによって、ビデオストリームの第２のエッジフィルタリングされたバージョンとしてビデオストリームの第２のバージョンを生成することを含む。前述されているように、ビデオストリームの第１のエッジフィルタリングされたバージョンの空間解像度を低減することによって、ビデオストリームの第１のエッジフィルタリングされたバージョンの１つまたは複数の画像フレームを構成するピクセルの数が低減される。さらに、ビデオストリームの第１のエッジフィルタリングされたバージョンの空間解像度を、１つまたは複数の被写体の少なくとも１つの部分のビデオストリームの第２のエッジフィルタリングされたバージョンにおけるサイズが第２のしきい値を下回るように低減することによって、１つまたは複数の被写体のプライバシーは、ビデオストリームの第１のエッジフィルタリングされたバージョンにおいてプライバシーが保証されることが可能ではなかった場合には、ビデオストリームの第２のエッジフィルタリングされたバージョンにおいて守られる。

【0101】

取り込まれたビデオストリームのさまざまなエリアにおいて描写されている被写体に関するプライバシーを守るために、第１の被写体を描写するエッジフィルタリングされた画像フレームの第１のエリアの第１の画像解像度は、第２の被写体を描写するエッジフィルタリングされた画像フレームの第２のエリアの第２の画像とは異なることが可能である。第１のエリアの第１の画像解像度は、第１のエリアにおける画像詳細の量に関連し、それに対応して、第２のエリアの第２の画像解像度は、第２のエリアにおける画像詳細の量に関連する。第１および第２の画像解像度は、第１および第２のエリアを別々にダウンスケーリングして、次いでそれらを、それらの元のピクセル数を含むようにアップスケーリングすることによって得られることが可能である。前述されているように、ダウンスケーリングは、ピクセルの数を低減して、画像詳細が失われることにつながり、アップスケーリングは、ピクセルの数を増やすが、失われた画像詳細を復元することはできない。それゆえに、第１および第２のエリアを別々にダウンスケーリングすることによって、第１および第２のエリアにおいて別々の量の画像詳細が失われることになり、別々の量の匿名化が生じる。ダウンスケーリング後に、第１および第２のエリアをそれらの元のピクセル数へアップスケーリングすることによって、第１および第２のエリアは、エッジフィルタリングされた画像フレームにおいてそれらの元のサイズを有することになる。図１０は、取り込まれたビデオストリームの第２のエッジフィルタリングされたバージョンのエッジフィルタリングされた画像フレーム１０００の例を概略的に示している。この例においては、エッジフィルタリングされた画像フレーム１０００の第１のエリア１００２の第１の解像度は、エッジフィルタリングされた画像フレーム７００の画像解像度の半分であり、エッジフィルタリングされた画像フレーム１０００の第２のエリア１００４の第２の解像度は、エッジフィルタリングされた画像フレーム７００の画像解像度の４分の１である。

【0102】

第５の代替方法においては、ビデオストリームの第２のバージョンの提供は、ビデオストリームの第１のエッジフィルタリングされたバージョンにおけるエッジ強度しきい値を下回るエッジ強度を有するエッジポイントを、ビデオストリームの第２のエッジフィルタリングされたバージョンにおける非エッジポイントとして表すことによって、ビデオストリームの第２のエッジフィルタリングされたバージョンとしてビデオストリームの第２のバージョンを生成することを含む。図１２は、取り込まれたビデオストリームの第２のエッジフィルタリングされたバージョンのエッジフィルタリングされた画像フレーム１２００の例を概略的に示しており、エッジ強度しきい値を下回るエッジ強度を有するエッジポイントは、それらをビデオストリームの第２のエッジフィルタリングされたバージョンにおける非エッジポイントとして表すことによって抑制される。それによって、１つまたは複数の被写体１０４のプライバシーが高められる。さらにエッジ強度しきい値を増大することによって、１つまたは複数の被写体１０４のさらなる匿名化が得られることになり、ひいては、１つまたは複数の被写体１０４のさらにいっそう安全なプライバシーも得られることになるということを理解されたい。

【0103】

任意選択のステップＳ３１６において、少なくとも１つの部分のビデオストリームにおける推定されたサイズが第１のしきい値を下回っている場合には、取り込まれたビデオストリームが提供される。取り込まれたビデオストリームは、その取り込まれたビデオストリームを受信機へ送信することによって提供されることが可能である。前述されているように、受信機は、有線を介して、またはワイヤレスにカメラ１０８に動作可能に接続されている、またはカメラ１０８内に含まれている任意のデバイスであることが可能である。それゆえに、取り込まれたビデオストリームは、クライアント１１４、サーバ１１６へ、および／またはデータストレージ２１４へ送信されることが可能であるということを理解されたい。

【0104】

実施形態はまた、カメラ１０８の設置を容易にするためのカメラ１０８に関する。カメラ１０８は、カメラ１０８が第１の視野で設置されている場合にシーン１０２のビデオストリームを取り込むように構成されている画像取り込みモジュール２０６を含み、そのシーン１０２は、１つまたは複数の被写体１０４を含む。

【0105】

カメラ１０８は、１つまたは複数の被写体１０４の少なくとも１つの部分のビデオストリームにおけるサイズを推定するように構成されているサイズ推定コンポーネント４０２も含む。

【0106】

さらに、カメラ１０８は、１つまたは複数の被写体１０４の少なくとも１つの部分のビデオストリームにおける推定されたサイズが、第１のしきい値を上回っていて、かつ第２のしきい値を下回っている限り、ビデオストリームにおいて描写されている１つまたは複数の被写体のプライバシーを守るためにビデオストリームの第１のエッジフィルタリングされたバージョンを提供するように構成されている提供コンポーネント４０４を含む。

【0107】

提供コンポーネント４０４は、取り込まれたビデオストリームにおいてエッジポイントを検知して強調するように、および非エッジポイントを抑制するように、ならびに、取り込まれたビデオストリームのエッジフィルタリングされたバージョン、たとえば、上述されている取り込まれたビデオストリームの第１および第２のエッジフィルタリングされたバージョンを提供するように構成されている。提供コンポーネント４０４は、取り込まれたビデオストリームのエッジフィルタリングされたバージョンを提供するように構成されているエッジ検知器であることが可能であり、またはそのエッジ検知器を含むことが可能である。

【0108】

さらに、提供コンポーネント４０４は、カメラ１０８がオペレーションの強化された安全なプライバシーモードにある場合には、ビデオストリームの第１のエッジフィルタリングされたバージョンの提供を無効にするように構成されている。

【0109】

いくつかの実施形態においては、提供コンポーネント４０４は、取り込まれたビデオストリームの第２のバージョンを提供するように構成されており、その第２のバージョンは、取り込まれたビデオストリームのプライバシーマスクされたバージョンまたは第２のエッジフィルタリングされたバージョンであることが可能である。

【0110】

提供コンポーネント４０４は、１つまたは複数の被写体１０４の少なくとも１つの部分のビデオストリームにおけるサイズの推定値が第１のしきい値を下回っている場合には、取り込まれたビデオストリームを提供するように構成されることも可能である。

【0111】

カメラ１０８は、１つまたは複数の被写体１０４の少なくとも１つの部分のビデオストリームにおける推定されたサイズが、少なくとも１つの被写体のプライバシーが明らかにされるリスクがあるということを示す第２のしきい値を上回っていることに応答して、オペレーションの強化された安全なプライバシーモードに入るように構成されている。

【0112】

さらに、カメラ１０８は、カメラ１０８がオペレーションの強化された安全なプライバシーモードにある場合に、第１の視野とは異なる第２の視野でカメラを再設置するように設置者に促すアラートを生成するように構成されているアラート生成コンポーネント４０６を含む。

【0113】

実施形態はまた、コンピュータコード命令をその上に格納してある非一時的コンピュータ可読メディアに関し、それらのコンピュータコード命令は、処理能力を有するデバイスによって実行されたときに、本明細書において記述されている方法の実施形態を実行するように適合されている。

【0114】

上述されているように、カメラ１０８は、カメラ１０８の設置を容易にするための方法を実施するように構成されることが可能である。この目的のために、カメラ１０８は、本明細書において記述されているさまざまな方法ステップを実施するように構成されている回路を含むことが可能である。

【0115】

ハードウェア実施態様においては、回路は、方法ステップのうちの１つまたは複数を実施するための専用であること、およびそのために特別に設計されることが可能である。回路は、１つもしくは複数の特定用途向け集積回路または１つもしくは複数のフィールドプログラマブルゲートアレイなど、１つまたは複数の集積回路の形態であることが可能である。例として、カメラ１０８は、これゆえに回路を含むことが可能であり、その回路は、使用時に、１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおけるサイズを推定し、使用時に、１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおける推定されたサイズが、第１のしきい値を上回っていて、かつ第２のしきい値を下回っている限り、ビデオストリームにおいて描写されている１つまたは複数の被写体のプライバシーを守るためにビデオストリームの第１のエッジフィルタリングされたバージョンを提供する。カメラ１０８は、回路をさらに含むことが可能であり、その回路は、使用時に、１つまたは複数の被写体の少なくとも１つの部分のビデオストリームにおける推定されたサイズが、少なくとも１つの被写体のプライバシーが明らかにされるリスクがあるということを示す第２のしきい値を上回っていることに応答して、オペレーションの強化された安全なプライバシーモードに入る。さらに、カメラ１０８は、回路を含むことが可能であり、その回路は、使用時に、強化された安全なプライバシーモードにある場合に、第１の視野とは異なる第２の視野でカメラを再設置するように設置者に促すアラートを生成し、ビデオストリームの第１のエッジフィルタリングされたバージョンの提供を無効にする。

【0116】

ソフトウェア実施態様においては、回路は、代わりに、マイクロプロセッサなどのプロセッサの形態であることが可能であり、そのプロセッサは、不揮発性メモリなどの（非一時的な）コンピュータ可読メディア上に格納されているコンピュータコード命令に関連して、本明細書において開示されているいずれかの方法をカメラ１０８に実行させる。不揮発性メモリの例は、読み取り専用メモリ、フラッシュメモリ、強誘電体ＲＡＭ、磁気コンピュータストレージデバイス、光ディスクなどを含む。ソフトウェアのケースにおいては、上述されている方法ステップのうちのそれぞれは、それゆえに、コンピュータ可読メディア上に格納されているコンピュータコード命令の一部分に対応することが可能であり、その部分は、プロセッサによって実行されたときに、本明細書において開示されているいずれかの方法をカメラ１０８に実行させる。

【0117】

ハードウェアとソフトウェア実施態様との組合せを有することも可能であり、これは、いくつかの方法ステップがハードウェアにおいて実施され、その他の方法ステップがソフトウェアにおいて実施されることを意味するということを理解されたい。

【0118】

上述の実施形態を多くの方法で修正することと、それでもなお、上記の実施形態において示されている本発明の利点を使用することとが当業者には可能であるということが理解されるであろう。たとえば、カメラ１０８は、１つの場所において画像取り込みモジュール２０６と画像処理／エンコーディングモジュール２１４とを含む単一のユニットである必要はなく、仮想ユニットであることが可能であり、画像取り込み部２０６および画像処理／エンコーディングモジュール２１４は、ともに動作するが、それらは、別々の場所において提供される。さらに、サイズ推定コンポーネント４０２、提供コンポーネント４０４、およびアラート生成コンポーネント４０６は、画像処理パイプライン２０８に配置されることを必要とせず、画像処理／エンコーディングモジュール２１４の別々のユニットとして配置されることが可能であり、画像処理パイプライン２０８、エンコーダ２１０、入力および出力インターフェース２１２、ならびにデータストレージ２１４との通信状態に配置されることが可能である。それゆえに、本発明は、示されている実施形態に限定されるべきではなく、添付の特許請求の範囲によってのみ定義されるべきである。加えて、当業者なら理解するように、示されている実施形態どうしは、組み合わされることが可能である。

【符号の説明】

【0119】

１００ 例示的な環境
１０２ シーン
１０４ 被写体
１０４ａ 個人
１０４ｂ 個人
１０４ｃ 個人
１０４ｄ 個人
１０４ａ’ 境界ボックス
１０４ｂ’ 境界ボックス
１０４ｃ’ 境界ボックス
１０４ｄ’ 境界ボックス
１０６ 建物
１０８ カメラ
１０９ ポール
１１０ 無線リンク
１１２ 有線ネットワーク
１１４ クライアント
１１６ サーバ
１２０ クライアント
２０２ レンズ
２０４ 画像センサ
２０６ 画像取り込みモジュール
２０８ 画像処理パイプライン
２１０ エンコーダ
２１２ 入力／出力インターフェース
２１４ データストレージ
２１４ 画像処理／エンコーディングモジュール
４０２ サイズ推定コンポーネント
４０２ａ 顔検知器
４０２ｂ 被写体検知器
４０４ 提供コンポーネント
４０６ アラート生成コンポーネント
５００ 画像フレーム
６００ 画像フレーム
７００ 画像フレーム
８００ 画像フレーム
９００ 画像フレーム
１０００ 画像フレーム
１００２ 第１のエリア
１００４ 第２のエリア
１１００ 画像フレーム
１２００ 画像フレーム

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【外国語明細書】