特表2024-530391 | 知財ポータル「IP Force」

知財求人 - 知財ポータルサイト「IP Force」

▶ グーグル　インコーポレイテッドの特許一覧

特表2024-530391パッケージ検出の向上のための非対称のカメラセンサ位置決め

書誌要約請求の範囲詳細な説明課題実施例実施するための形態図面の説明

目に優しい文字サイズ小中大 PDF Top

< >

1
2
3
4
5
6
7
8

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2024-08-21

(54)【発明の名称】パッケージ検出の向上のための非対称のカメラセンサ位置決め

(51)【国際特許分類】

H04N 23/58 20230101AFI20240814BHJP

H04N 23/60 20230101ALI20240814BHJP

H04N 23/698 20230101ALI20240814BHJP

G06T 7/80 20170101ALI20240814BHJP

G06T 7/13 20170101ALI20240814BHJP

G06T 5/80 20240101ALI20240814BHJP

【ＦＩ】

H04N23/58

H04N23/60 500

H04N23/698

G06T7/80

G06T7/13

G06T5/80

【審査請求】有

【予備審査請求】未請求

(21)【出願番号】P 2023578770

(86)(22)【出願日】2021-08-02

(85)【翻訳文提出日】2024-02-07

(86)【国際出願番号】 US2021044190

(87)【国際公開番号】W WO2023014345

(87)【国際公開日】2023-02-09

(81)【指定国・地域】

(71)【出願人】

【識別番号】502208397

【氏名又は名称】グーグルエルエルシー

【氏名又は名称原語表記】ＧｏｏｇｌｅＬＬＣ

【住所又は居所原語表記】１６００ＡｍｐｈｉｔｈｅａｔｒｅＰａｒｋｗａｙ９４０４３ＭｏｕｎｔａｉｎＶｉｅｗ，ＣＡＵ．Ｓ．Ａ．

(74)【代理人】

【識別番号】110001195

【氏名又は名称】弁理士法人深見特許事務所

(72)【発明者】

【氏名】グリロ，ジャコビ・コルトン

(72)【発明者】

【氏名】プロカ，アドリアン・ミルチャ

(72)【発明者】

【氏名】ドゥラン，ウィリアム・ビンセント

(72)【発明者】

【氏名】チェン，チー・ハオ

【テーマコード（参考）】

5B057

5C122

5L096

【Ｆターム（参考）】

5B057AA19

5B057AA20

5B057BA02

5B057CA02

5B057CA08

5B057CA12

5B057CA16

5B057CB02

5B057CB08

5B057CB12

5B057CB16

5B057CC01

5B057CD12

5B057DA08

5B057DB02

5B057DB05

5B057DB09

5B057DC16

5C122DA18

5C122EA33

5C122EA66

5C122FA01

5C122FB06

5C122FB23

5C122FH06

5C122HB01

5L096BA02

5L096BA08

5L096BA18

5L096CA02

5L096DA02

5L096DA04

5L096EA37

5L096EA45

5L096FA14

5L096JA11

(57)【要約】

本書類はパッケージ検出の向上のための非対称カメラセンサ位置決めを説明する。ある局面において、電子ドアベルは、縦向きに回転させられかつカメラのレンズに対して垂直方向にずらされるイメージセンサを有し、その結果レンズに対してイメージセンサの位置が非対称になる。レンズはイメージサークルをイメージセンサ上に投影し、イメージセンサはセンサ検出領域を有し、センサ検出領域は、イメージサークルの下部に配置され、イメージサークルの端に近接するオブジェクトの撮影を可能にするように、イメージサークルの内部に上部の角を有し、イメージサークルの外部に下部の角を有する。そして、レンズ歪み訂正は、イメージサークルの内部だが従来のセンサ検出領域の外部に配置され得るパッケージを検出するのに使用可能な最終画像を提供するように、撮影された画像に対して実行される。

【特許請求の範囲】

【請求項1】

電子ドアベルであって、
レンズ光軸を有するレンズを備え、前記レンズは、前記レンズによって撮影されたシーンを表わすイメージサークルを提供し、前記イメージサークルは、中間部で分離されかつ垂直に積み重ねて配置された上部および下部を有し、前記上部は、前記イメージサークルの上の端に近接して配置され、前記下部は、前記イメージサークルの下の端に近接して配置され、
前記電子ドアベルはさらに、センサ検出領域を有するイメージセンサを備え、前記イメージセンサは、
前記イメージサークルの前記垂直に積み重ねて配置された部分に対して縦向きに配置され、前記センサ検出領域の前記縦向きは、水平寸法よりも大きい垂直寸法を有し、かつ、
前記イメージセンサは、前記イメージサークルの前記下の端に近接する前記イメージサークルの前記下部に配置されるオブジェクトの画像を前記イメージセンサが撮影することを可能にするように、前記レンズ光軸からオフセット距離だけ前記イメージサークルの前記下部に向かって前記レンズに対して垂直方向にずらされる、電子ドアベル。

【請求項2】

前記イメージセンサは、３：４の縦向きに構成される、請求項１に記載の電子ドアベル。

【請求項3】

前記センサ検出領域は矩形形状を有し、前記イメージサークルは楕円形状を有し、
前記センサ検出領域は、前記イメージサークルの内部に配置される２つの上部の角、および前記イメージサークルの外部に配置される２つの下部の角を含む、請求項１または請求項２に記載の電子ドアベル。

【請求項4】

前記イメージセンサは、イメージセンサ光軸を有し、
前記イメージセンサは、前記レンズの垂直軸に沿って前記オフセット距離だけ前記イメージセンサ光軸を前記レンズ光軸からオフセットさせるように、前記レンズに対して垂直方向にずらされる、先行する請求項のいずれか１つに記載の電子ドアベル。

【請求項5】

前記イメージセンサ光軸は、前記レンズ光軸と平行である、請求項４に記載の電子ドアベル。

【請求項6】

前記オフセット距離は、実質的に０．１５ミリメートルから０．３５ミリメートルの範囲内である、先行する請求項のいずれか１つに記載の電子ドアベル。

【請求項7】

前記イメージサークルは、約１６０度の画角を有する前記レンズに基づく前記シーンを表わす、先行する請求項のいずれか１つに記載の電子ドアベル。

【請求項8】

前記レンズに対する前記イメージセンサの前記縦向きおよび前記垂直方向へずらすことは、イメージセンサが約１３０度の前記レンズの垂直方向の画角に対応する前記イメージサークルの領域を撮影することを可能にする、先行する請求項のいずれか１つに記載の電子ドアベル。

【請求項9】

前記電子ドアベルは、前記撮影された画像の下部の角の領域内の黒い領域を取り除くように、前記イメージセンサによって撮影される画像上でレンズ歪み訂正を実行するように構成されるプロセッサをさらに備える、先行する請求項のいずれか１つに記載の電子ドアベル。

【請求項10】

前記プロセッサは、垂直方向の非対称性を補正するために使用できる台形画像を提供するように前記撮影された画像に台形補正を適用することと、
垂直方向の前記非対称性を補正するために前記台形画像の歪みを除去し、歪みが除去された画像を提供することとによって、レンズ歪み訂正を実行するように構成される、請求項９に記載の電子ドアベル。

【請求項11】

前記プロセッサは前記下部の角の領域内の前記黒い領域を取り除き歪み補正された画像を提供するように、前記歪み除去された画像をさらに歪み補正することにより、前記レンズ歪み訂正を実行するように構成される、請求項１０に記載の前記電子ドアベル。

【請求項12】

前記プロセッサは表示用の最終画像を提供するように、前記歪み補正された画像をさらに明るくすることにより、前記レンズ歪み訂正を実行するように構成される、請求項１１に記載の電子ドアベル。

【請求項13】

前記イメージセンサは、前記イメージサークル内に配置される前記センサ検出領域の底部の端の中点を有するように位置決めされる、先行する請求項のいずれか１つに記載の電子ドアベル。

【請求項14】

非対称のイメージセンサ位置決めを有する電子ドアベルによって引き起こされるレンズ歪みを補正するための方法であって、前記方法は、
前記電子ドアベルのイメージセンサを使用して画像を撮影することを備え、前記電子ドアベルは、
縦向きに配向されたセンサ検出領域、および
前記電子ドアベルのレンズのレンズ光軸から垂直方向にずらされるイメージセンサ光軸を備え、前記センサ検出領域は、前記レンズにより前記イメージセンサ上に投影されるイメージサークルの内部に配置される上部の角および前記イメージサークルの外部に配置される下部の角を有し、前記方法は、
イメージセンサ光軸が垂直方向にずらされることの結果である垂直方向の非対称性を補正するために使用できる台形画像を提供するように前記撮影された画像に台形補正を適用することと、
垂直方向の前記非対称性を補正し歪みが除かれた画像を提供するように、前記台形画像の歪みを除くことと、
前記センサ検出領域の下部の角に対応する黒い領域を除去し歪み補正された画像を提供するように、前記歪みが除去された画像を歪み補正することと、
電子デバイス上に表示するための最終画像を提供するように前記歪み補正された画像を明るくすることとを備える、方法。

【請求項15】

前記方法はさらに、
前記最終画像に基づいて、前記イメージサークルの端に近接する前記イメージサークルの下部に位置するパッケージを検出することと、
前記パッケージが存在するという前記電子デバイスのユーザへの表示を提供することとを備える、請求項１４に記載の方法。

【発明の詳細な説明】

【背景技術】

【0001】

背景
画像および／または映像を撮影するための電子ドアベルの進歩に伴い、多くのユーザはパッケージが配達されたかどうかを判定するために電子ドアベルデータに頼り始めている。しかしながら、多くの既存の電子ドアベルは限定された視野（field of view:ＦＯＶ）を有するカメラを備える。一般的に、ドアベルは人の顔の画像取得を可能とするように方向づけられるが、ユーザは（安全のために）人の顔を見ることにより興味があり得るため、人の足の画像取得は必要ではない。多くの場合、パッケージがドアベルに近すぎるよう（例えば、ドアベルの下でかつドアベルが備え付けられた壁に隣接する地面に）に配達された場合、パッケージはカメラのＦＯＶの外側にあることがある。

【発明の概要】

【発明が解決しようとする課題】

【0002】

ユーザは配達の通知を受け取り、到着および出発する配達ドライバの画像データを取得し得るが、もしユーザが配達されたパッケージの状態を確認したい場合に、パッケージがカメラのＦＯＶの外側にあり得る場合（例えば、パッケージがドアベルに近すぎる場合）、ユーザはドアベルのデータ内のパッケージを見ることができないことがある。さらに、パッケージ検出アルゴリズムはドアベルのデータに適用され得るが、パッケージがカメラのＦＯＶの外側にある場合、パッケージは撮影された画像内において検出することができず、ユーザはパッケージの通知を受けない可能性がある。もしパッケージがカメラのＦＯＶになくて、人がパッケージを持ち去るまたは盗むために近づいたとしても、ユーザはパッケージが持ち去られたことを通知されない可能性がある。

【0003】

カメラのＦＯＶを広げるための１つの解決方法は、１８０°の画角（angle of view:ＡＯＶ）のドアベルカメラを使用することである。しかしながら、そのようなカメラは製造原価を高め、赤外線フレアを防ぐために追加の構造機能を必要とすることがある。また、そのようなカメラを使用することは、人の頭上の領域を含む、重要ではないかもしれない追加画像データ（例えば、ピクセルデータ）がユーザデバイスに表示されることを提供し得る。なぜならば、ユーザがドアベルデータを見ているときにアプリケーションでスクリーン（例えば、スマートフォンのディスプレイ）上に表示され得るピクセル数は有限であるため、重要ではない追加画像データがスクリーンの現実的な領域を消費し、より小さいディスプレイ画像になり、画像の質が低下し、ユーザエクスペリエンスが低下する可能性がある。

【0004】

要約
本明細書は、パッケージ検出強化のための非対称のカメラセンサの位置決めについて説明する。ある局面において、電子ドアベルは、カメラのレンズに対して縦向きに回転し、垂直方向にシフトされるイメージセンサを有し、その結果、レンズに対してイメージセンサの位置決めが非対称になる。レンズは、イメージサークルをイメージセンサに投影し、イメージセンサは、イメージサークルの下部に位置し、イメージサークルのエッジに近接する物体の撮影を可能にするために、イメージサークル内の上隅とイメージサークルの外側の下隅を有するセンサ検出領域を有する。次に、レンズ歪み訂正が、撮影画像に対して実行され、イメージサークル内にあり得るが、従来のセンサ検出領域の外側に位置し得るパッケージの検出に使用可能な最終画像を提供する。

【課題を解決するための手段】

【0005】

いくつかの局面において、電子ドアベルは開示される。電子ドアベルは、レンズ光軸を有し、レンズによって撮影されるシーンを表わすイメージサークルを提供するレンズを含む。イメージサークルは、中間部によって分けられかつ垂直に積み重ねて配置された上部分と下部分とを持つ。上部分はイメージサークルの上の端に近接して位置されて、下部分はイメージサークルの下の端に近接して位置される。また、電子ドアベルはセンサ検出領域を有するイメージセンサを含む。イメージセンサはイメージサークルの部分の垂直積み重ねに対して縦向きに位置し、センサ検出領域の縦向きは水平方向の寸法より長い垂直方向の寸法を持つ。また、イメージセンサは、イメージサークルの下の端に近いイメージサークルの下部分に位置する対象物の画像をイメージセンサが撮影することを可能にするように、レンズに対してレンズの光軸からオフセット距離だけ垂直にずらされる。

【0006】

この要約は、パッケージ検出向上のための非対称のカメラセンサ位置決めに関わる簡略化された概念を紹介するために提供され、さらに下の詳細な説明や図に記載される。この要約は、クレームされた主題の本質的な特徴の特定を意図されず、クレームされた主題の範囲を決定するときの使用も意図されない。

【0007】

パッケージ検出の向上のための非対称のカメラセンサ位置決めの１つ以上の局面の詳細は以下の図を参照して、本明細書に記載される。本開示および図の異なる例において同じ参照番号を使用することは、同様の要素を表わす。

【図面の簡単な説明】

【0008】

【図1】従来のカメラドアベルと比較してパッケージ検出の向上のための非対称のカメラセンサ位置決めの実施例を示す図である。

【図2】図１の電子ドアベルの実施例の等軸観測図である。

【図3】図２の電子ドアベルを線３－３に沿って切った断面図、および断面図における電子ドアベルのカメラ側の端の拡大図である。

【図4】レンズに対するイメージセンサの非対称位置決めに基づくイメージサークルに対するセンサ検出領域の実施例である。

【図5】パッケージ検出向上のためにイメージサークルに対してずれたセンサ検出領域の実施例を示す図である。

【図6】電子ドアベルにおける非対称のカメラセンサ位置決めに応じたレンズ歪み訂正の実施例を示す図である。

【図7】非対称に位置決めされたカメラセンサによって撮影された画像のレンズ歪みを本明細書に記載の技術に従って補正するための方法の例を示す図である。

【図8】図１～７を参照して説明したように、非対称のカメラセンサ位置決めの局面を実装する任意の電子デバイス（例えば電子ドアベル）として実装することができる、デバイスの例を含むシステムの例を示すブロック図である。

【発明を実施するための形態】

【0009】

詳細な説明
概要
本明細書は、パッケージ検出の向上のための非対称のカメラセンサ位置決めについて説明する。本明細書において説明された技術は、従来のドアベルカメラと比べて広い垂直なＦＯＶをもつ電子ドアベルカメラを提供する。例えば、電子ドアベルカメラは、縦向きに回転し、カメラのレンズから垂直方向にオフセットされたイメージセンサを含む。この非対称位置決めによりイメージセンサは、電子ドアベルカメラのほぼ下方の地面にある対象物（例えば、パッケージ）の画像を撮影することができ、対象物は従来のレンズによって撮影され得るが、レンズによって従来のイメージセンサに十分に投影されない。撮影された画像のレンズ歪みは、後処理で綺麗な最終画像をユーザに提供するために補正され、画像は地面の上のパッケージはもちろん、立っている人の顔も含むことがある。

【0010】

垂直方向のＦＯＶが増加するだけではなく、ユーザにとって有用な画素数も増加して、その結果、画質および効率が向上し、ユーザエクスペリエンスも向上した。画像の角の近くにあるオブジェクトに関連するレンズの歪みは軽減される。さらに、標準の１６０°レンズを使用する全体的な効率は向上する。説明されたパッケージ検出の向上のための非対称のカメラセンサ位置決めの特徴および概念は、任意の数の異なる環境において実装され得、いくつかの局面は、以下の例の文脈において説明されている。

【0011】

デバイスの例
図１は、従来のドアベルカメラと比較して、パッケージ検出の向上のための非対称のカメラセンサ位置決めの実施例を示す。従来のドアベルカメラの多くは、地面上のオブジェクト（例えば、荷物）ではなく人物の画像撮影を可能にする、広い水平視野（horizontal field of view:ｈＦＯＶ）および短い垂直視野（vertical field of view:ｖＦＯＶ）で画像を撮影する。例１００は、（垂直破線で表わされる）壁１０４に取り付けられ、約１０４度の垂直ＡＯＶ１０６を有し、身長約６フィート（ｆｔ）２インチ（ｉｎ）（１．８８メートル（ｍ））で、従来のドアベルカメラから、約２ｆｔ（０．６ｍ）の水平距離１１２のところに立つ人物１１０の頭部および顔１０８を撮影するために配向された、従来のドアベルカメラ１０２を示す。この例において、従来のドアベルカメラ１０２は、従来のドアベルカメラ１０２とその垂直ＡＯＶ１０６の実質的に下方にある（例えば、垂直ＡＯＶ１０６の端と、従来のドアベルカメラ１０２と、地面と、壁１０４との間の容積である）領域（例えば、領域１１６）に位置するパッケージ１１４の画像を撮影することができない。例において、パッケージ１１４は壁１０４から約６インチ（０．１５メートル）の距離１１８に位置し、従来のドアベルカメラ１０２から「隠されている」。

【0012】

例１２０は本明細書で説明するように、非対称のカメラセンサ位置決めを伴う電子ドアベル１２２を示す。電子ドアベル１２２は地面上のパッケージ１１４と同様に、上述された人物１１０の頭部および顔１０８の画像撮影を可能にする対応するｖＦＯＶを提供する、約１３０度の垂直ＡＯＶ１２４を含む。より大きな垂直ＡＯＶ（例えば、垂直ＡＯＶ１２４）の使用は、従来の垂直ＡＯＶ１０６と比較して、領域１２６のサイズを小さくし、画像撮影のための対応するｖＦＯＶを増加させ、パッケージ１１４が「隠れる」ことを防止する。電子ドアベル１２２の垂直ＡＯＶ１２４を、従来のドアベル１０２の垂直ＡＯＶ１０６よりも向上するために、電子ドアベル１２２は、縦向きに配向されかつ電子ドアベル１２２のカメラレンズ（例えば、レンズ１３０）と非対称に整列されたカメラセンサ（例えば、イメージセンサ１２８）を含み、その結果、センサ検出領域１３２はイメージサークル１３４からオフセット（例えば、光学的中心でない）される。特に、イメージセンサ１２８はレンズ１３０と光学的に同軸上に並べられていないが、垂直方向にオフセットされている。このようにして、電子ドアベル１２２は同様の構成要素および構造を使用することによって、より高価なイメージセンサおよび／またはレンズを実装することなく、従来のドアベルカメラ１０２より大きな垂直ＡＯＶ（およびより大きなｖＦＯＶ）を達成することができる。イメージサークル１３４は、レンズ１３０によってイメージセンサ１２８上に伝送される光の円錐の断面である。イメージセンサ１２８のセンサ検出領域１３２は、イメージセンサ１２８によって感知される光の領域を表わす。一般に、イメージサークル１３４は、イメージセンサ１２８がイメージサークル１３４の少なくとも一部を検出することを可能にするように、センサ検出領域１３２上に投影される。特定の要因（例えば、焦点距離、レンズ１３０とイメージセンサ１２８との距離、配置、イメージセンサ１２８のサイズ）によって、センサ検出領域１３２はイメージセンサ１２８上に投影されたイメージサークル１３４の一部または全てを撮影し得る。これらのさらなる詳細および他の機能は以下で説明される。

【0013】

図２は、図１の電子ドアベル１２２の実施例の等軸観測図２００を示す。電子ドアベル１２２は筐体２０２を有し、筐体２０２は、筐体２０２の縦軸２０４と交差する丸みを帯びた両端部を有する細長い形状（例えば、正面でおおむね楕円形）の筐体２０２を含む。カメラモジュール（たとえば、図１におけるイメージセンサ１２８およびレンズ１３０を有するカメラモジュール２０６）は筐体２０２の一端（カメラ側の端２０８）に近接して筐体２０２内に配置される。押しボタン２１０は、筐体２０２の他端（ボタン側の端２１２）に近接して配置される。

【0014】

筐体２０２はプラスチック材料を含み得、例えば、プラスチック注入成形技術を用いて形成され得る。筐体２０２は図２において示された形状の例を含む任意の適切な形状を含んでもよい。例えば、筐体２０２は電子ドアベル１２２の様々な構成要素を収容するための空洞を形成するように、一緒に合わさって（一緒に閉まって）外枠（例えば、中空の、実質的に楕円形の外枠）を形成する複数の構成要素を含んでもよい。筐体２０２はまた、カメラモジュール２０６が開口または透明領域を通して見ること、および景色の画像や映像を撮ることを可能とするようにカメラモジュール２０６と並べられた開口または透明領域を含んでもよい。

【0015】

ボタン２１０は機能を開始するために使用可能な任意の適切なボタン（例えば、スイッチを開閉するための機械的なボタン、ユーザのタッチを検出するための容量センサ）を含んでもよい。例えば、ボタン２１０の作動は、聞こえるドアベルの呼び出し音、ドアベルの所有者のスマートフォンへの電子通知の送信、カメラモジュール２０６の開始などを含む機能を開始してもよい。任意の適切な機能は、ボタン２１０を作動させることによって開始され得る。

【0016】

図３は線３－３に沿って切断した図２における電子ドアベル１２２の断面図３００、および断面図３００における電子ドアベルのカメラ側の端２０８の拡大図３０２を示す。筐体２０２内において、電子ドアベル１２２は少なくともメインロジックボード３０４およびカメラボード３０６を含む複数のプリント回路基板（ＰＣＢ（複数可））を含む。追加のＰＣＢ（複数可）もまた使用され得る。ＰＣＢ（複数可）はシステムオンチップ（ＳｏＣ）ＩＣデバイス、プロセッサ、および発光ダイオード（複数可）（ＬＥＤ（複数可））、マイクロフォン（複数可）、タッチ入力、ボタン押下、音声コマンド、または動きなどの入力を検知するためのセンサ用のＩＣ構成要素などの、様々な集積回路（ＩＣ）構成要素を含み得る。電子ドアベル１２２はまた、カメラモジュール２０６（例えば、カメラ）、バッテリ３０８、ボタン２１０、およびスピーカーモジュール３１０を含む。バッテリ３０８はカメラ側の端２０８とボタン側の端２１２との間に配置され得る。

【0017】

スピーカーモジュール３１０は、音声を電子ドアベル１２２の前面および／または側面（例えば、筐体２０２の前面３１２と直交する側面）に向けて出力し得る。スピーカーモジュール３１０は、訪問者（例えば、ボタン２１０を押すユーザ）が録音された音声メッセージまたはドアベル所有者からのリアルタイム音声伝送を含む可聴メッセージを聞くことを可能にすることができる。

【0018】

バッテリ３０８は電子ドアベル１２２に電源を供給し、電子ドアベル１２２を無線可能にする。電子ドアベル１２２はバッテリ駆動であるため、電子ドアベル１２２を電力源に配線することなく、電子ドアベル１２２は任意の適切な場所に取り付けられ得る。例えば、電子ドアベル１２２は家の内部の電源に配線を接続するために家に穴を開けることなく、ユーザーの家の玄関ドアに近接するユーザの家に取り付けられ得る。

【0019】

ＰＣＢｓ（例えば、メインロジック基板３０４、カメラ基板３０６）は、例えば、ＦＲ４などのガラス強化エポキシ材料から形成されてもよい。場合によっては、ＰＣＢｓは単層の導電性トレースを含んでもよく、単層基板であってもよい。他の例では、ＰＣＢｓは誘電体材料の層によって分離される複数層の導電性トレースを含む多層基板であってもよい。

【0020】

電子ドアベル１２２はまた、カメラ側の端２０８に近接する筐体２０２内に取り付けられた受動赤外線（ＰＩＲ）センサ３１４を含む。ＰＩＲセンサ３１４はＰＩＲセンサ３１４のＦＯＶ内のオブジェクト（例えば、人または動物）の動きを検出するように構成される。

【0021】

カメラモジュール２０６は、イメージセンサ１２８およびレンズ１３０を含む様々な構成要素を含む。ある局面において、レンズ１３０は光学的中心（例えば、レンズ１３０の幾何学的中心を通りレンズ表面の曲率中心を結合する直線を表わすレンズ光軸３１６）を有する。イメージセンサ１２８もまた光学的中心（例えばイメージセンサ光軸３１８）を有し、従来のカメラシステムにおける光学的中心は、典型的にレンズ１３０のレンズ光軸３１６と位置合わせされる。しかしながら、本明細書において説明されている電子ドアベル１２２において、イメージセンサ光軸３１８は、レンズ光軸３１６から垂直方向にずれている。さらに詳細は、図４に関連して説明される。

【0022】

図４はレンズ１３０（図１において示される）に対するイメージセンサ１２８の非対称な位置決めに基づくイメージサークル１３４に関するセンサ検出領域１３２の実施例４００を示す。ある局面において、イメージセンサ１２８はイメージサークル１３４に対して、センサ検出領域１３２をずらすためにレンズ１３０に対してずらされる。加えて、イメージセンサ１２８はセンサ検出領域１３２を縦向き（例えば、３：４縦向き）にさせるために９０度回転される。この縦向きはイメージセンサ１２８にとって、水平面（例えば、幅４０４）よりも大きい垂直面（例えば、高さ４０２）を提供する。イメージセンサ１２８の縦向きおよび移動を両方を実施することによって、垂直ＡＯＶ（および対応するｖＦＯＶ）は増加される（例えば、ほぼ１３０°の垂直ＡＯＶ１２４を示す図１の例１２０を参照する）。したがって、イメージセンサ１２８の高さ４０２はイメージセンサ１２８がほぼ１３０°のレンズ１３０の垂直ＡＯＶに対応するイメージサークル１３４の領域を撮影することを可能にする。

【0023】

イメージサークル１３４は、中間部４１０によって分離され垂直に積み重ねられ配置された上部４０６および下部４０８を含む複数の部分を含んでもよい。上部は、イメージサークルの上の端４１２に近接して位置付けられる。下部は、イメージサークルの下の端４１４に近接して位置付けられる。いくつかの例において、中間部は中間部４２０によって分離され、水平に積み重ねられた左部分４１６および右部分４１８にさらに分割されてもよい。用語「上部」および「下部」は示された例に関連して説明され、外的要因（例えば、地球、重力）に対する構成要素の特定の向きに関して限定されることを意図するものではないことに留意されたい。説明された技術は、本明細書において用語「上部」および「下部」が入れ替わること、およびイメージセンサ１２８によって検出された時、投影された場面の画像が反転されるミラー反転を伴うレンズ配置に技術を適用することによってもまた実施され得る。

【0024】

ある局面において、イメージサークル１３４は１８０°レンズよりも実質的に安価であり得るほぼ１６０°のＡＯＶ範囲を有するレンズ１３０（１６０°レンズと呼ばれる）と関連付けられ得る。１６０°レンズを使用する従来のカメラシステムにおいて、センサ検出領域１３２（例えば、矩形形状を有する）は、センサ検出領域１３２の角の全てがイメージサークル１３４内に位置付けられた場合、イメージサークル１３４（例えば、楕円形を有する）において撮影された画像の上部および下部（例えば、それぞれ上部４０６および下部４０８）を撮影しないことがある。

【0025】

しかしながら、図示された例において、センサ検出領域１３２の上部の２つの角（例えば、上部の角４２２）はイメージサークル１３４の楕円形（例えば、円形）の内部に位置付けられ、下部の２つの角（例えば、下部の角４２４）はイメージサークル１３４の境界の外部に位置付けられている。イメージセンサ光軸３１８は、レンズ光軸３１６と水平方向に並べられる（例えば、水平軸４２６に沿って並べられる）が、レンズ光軸３１６と垂直方向に非対称になるように垂直方向にずらされる（垂直軸４２８に沿って）。ミラー反転レンズ配置を用いる例において、下部の角４２４はイメージサークル１３４内部に位置付けられ得、一方上部の角４２２はイメージサークル１３４の外部に位置付けられ得る。

【0026】

このイメージセンサ光軸３１８は任意の適切な距離（例えば、オフセット距離４３０）だけレンズ光軸３１６に対してずらされてもよく、これによりイメージセンサ１２８はイメージサークル１３４の境界（例えば、端）に近接するイメージサークル１３４の下部４０８を撮影することができる。一例において、オフセット距離４３０は実質的に０．１５ミリメートル（ｍｍ）から０．３５ｍｍの範囲内であり得る。ある局面において、上部４０６（例えば、イメージサークル１３４の上部の端４１２と、センサ検出領域１３２の上の端４３２との間の領域）は、一般的に興味のないまたは重要でない画像データを有する人の頭の上部領域を含むため、有用な画素を含まなくてもよい。したがって、センサ検出領域１３２の上部の角４２２をイメージサークル内に配置することは、撮影した画像の上部の２つの角の領域が黒色の画素を有することを防止する。しかしながら、下部４０８は、電子ドアベル１２２が取り付けられる壁に近接した地面の上に位置付けられたパッケージ１１４（図１において示された）を含み得るため、有用な画素を含んでもよい。したがって、下部の角４２４がイメージサークル１３４の外側に位置付けられることで、下部４０８を撮影することが可能になる。

【0027】

センサ検出領域１３２の一部分は、イメージセンサ１２８上に投影されるイメージサークル１３４の下部の端４１４を超えているため、センサ検出領域１３２は撮影された画像の対応する底部の角の領域において、黒の画素（例えば、ケラレ）をもたらす２つの下部の角の領域４３４を含み得る。その結果、イメージセンサ１２８によって撮影された画像の底部の角の領域は黒くなるが、歪み訂正技術を使用することで補正され得る。しかしながら、イメージセンサ１２８をずらすことは、画像に適用される歪み訂正技術によって特に画像の角に近いオブジェクトにもたらされ得る歪みおよび画像の乱れを減らす。ある局面において、センサ検出領域１３２の底部の端（イメージサークル１３４の外部にある角（例えば、下部の角４２４）の間の底部の端４３８）の中心（例えば、中点４３６）は、イメージサークル１３４の端に接するまたはイメージサークル１３４の外部にあるのではなく、イメージサークル１３４内に位置付けられる。イメージサークル１３４に対するセンサ検出領域１３２の底部の端４３８のこの位置付けは、撮影された画像の底部の近くに含まれる黒色の画素の数を減らし、本明細書に記載のレンズ歪み訂正技術の効率を向上させる。しかしながら、他の例において、センサ検出領域１３２の底部の端４３８の中心は、イメージサークル１３４の端（例えば、下部の端４１４）に接していてもよい。さらに他の例において、センサ検出領域１３２の底部の端４３８の中点４３６は、イメージサークル１３４の下部の端４１４を超えて位置し得るが、除去のためにいくつかの追加の後処理手順を必要とする追加の黒色画素をもたらし得る。

【0028】

さらに、イメージサークル１３４に対してセンサ検出領域をずらすことは、ユーザにとって有用な画素数を増加すること（例えば、最大化すること）によって、画像の質を向上させる。例えば、上部４０６を撮影し、続いて対応するデータをトリミングすることは、画素が「捨てられる」ため、画像の質を低下させる。有限個の画素を撮影し、一部（例えば、上部４０６）を除去し、そしてユーザ画面上に表示するための結果の画像を拡大することにより、画像の残りの部分がぼやけ、またはピクセル化され得る。したがって、センサ検出領域１３２をずらすことによって、イメージセンサ１２８は、有用な画像データを有し、および／またはユーザにとって重要な画像のそれらの部分を撮影している（例えば、電子ドアベル１２２の下の地面に置かれたパッケージと同様に人の顔を撮影するためのより大きなｖＦＯＶ）。その結果、本明細書で説明されるように、イメージセンサ１２８をずらし、撮影した画像に対して後処理を行うことは、画像を撮影するためのｖＦＯＶを増加させることだけではなく、最終結果に使用される画素数を減少させる（例えば、最小化させる）ことになり、画質を増加させる（例えば、最大化させる）。

【0029】

図５は、向上されたパッケージ検出のためにイメージサークルに対してずらされたセンサ検出領域の実施例５００を示す。図示された例において、イメージサークル１３４は実質的に楕円（例えば、円）として示される。しかしながら、イメージサークル１３４はレンズ１３０の形状および曲率に基づく任意の適当な形状であってもよい。センサ検出領域１３２は、イメージセンサ１２８上に投影されたイメージサークル１３４の一部を撮影する。図示された例において、イメージサークル１３４は電子ドアベル１２２の正面に立っている人（例えば、人１１０）の画像を含む。パッケージ（例えば、パッケージ１１４）はイメージサークル１３４の下部４０８に示されている。イメージサークル１３４の上部４０６は、画像内の人１１０の頭および顔１０８の上の空間を撮影し、人１１０に関連するいかなるデータも含まない。イメージセンサ１２８がセンサ検出領域１３２内に境界付けられる画像の一部を撮影した後、撮影される画像に対して歪み訂正は行われてもよく、その一例は図６に関して説明される。

【0030】

図６は電子ドアベルにおける非対称のカメラセンサ位置決めにしたがうレンズ歪み訂正の実施例６００を示す。まず、（図１からおよびレンズ１３０に対してずらした）イメージセンサ１２８はイメージサークル１３４の一部、およびセンサ検出領域１３２の底部に近いイメージサークル１３４の外側の一部（例えば、領域４３４の２つの下部の角）を含む画像（例えば、画像６０２－１）を撮影する。図示されるように、撮影された画像６０２－１はイメージサークル１３４の下部４０８、およびセンサ検出領域１３２の２つの下部の角の領域４３４に対応する黒色の角の領域６０４－１を含む。しかしながら、撮影された領域６０２－１はセンサ検出領域１３２の上の端４３２の上のイメージサークル１３４の上部４０６を含まない。撮影された画像６０２－１はパッケージ１１４－１もまた含む。いくつかの局面において、撮影された画像６０２－１は黒い角の領域６０４－１に近接するイメージサークル１３４の端の近くの暗い画素（例えば、領域６０６－１）または他の乱れもまた含み得る。

【0031】

台形補正６０８は非対称補正のための台形画像６０２－２を提供するために、撮影された画像６０２－１に適用される。撮影された画像６０２－１はレンズ１３０に対するイメージセンサ１２８の非対称な位置決めによる垂直方向の非対称性を含むため、台形補正６０８はレンズ歪みの一部を除去するために適用される。

【0032】

台形画像６０２－２は歪みを除去された画像６０２－３を提供するために歪みを除去され、これは元の撮影された画像６０２－１のレンズ歪み（例えば、垂直方向の非対称性）の一部を補正する。歪みを除去された画像６０２－３の人１１０－２は、元の撮影された画像６０２－１の人１１０－１より細い（例えば、歪みが少ない）ことに注目する。さらに、黒い角の領域６０４－１は黒い角の領域６０４－２のサイズに小さくなっている。領域６０６－１もまた領域６０６－２のサイズに小さくなっている。いくつかの局面において、パッケージ１１４－１は台形画像６０２－２の歪み除去のために変更され得る。例えば、歪みが除去された画像６０２－３のパッケージ１１４－２は元の撮影された画像６０２－１のパッケージ１１４－１より小さい。しかしながら、パッケージ１１４－２は、ユーザの玄関先のパッケージとして識別できるために十分な大きさである。ある局面において、台形補正６０８は台形形状を画像に適用することを含み、台形形状は画像の上部でより狭く、画像の下部でより広くなる。台形補正はその後の画像の歪み補正中に画像の上部の方に乱れが発生するリスクを減らす。

【0033】

歪み除去された画像６０２－３の端は、歪み補正された画像６０２－４を提供するために歪み補正される。歪み除去された画像６０２－３の端の歪み補正は、画像の底部から黒い角の領域６０４－２を除去する。ある局面において、歪み補正はパッケージ１１４－３にいくつかの歪みを引き起こす可能性があるが、人１１０－３のレンズ歪みは著しく低減される。さらに、歪みを完全に訂正することは画像内に乱れを生じさせる可能性があり、乱れは最終画像を劣化させ、ユーザエクスペリエンスを低下させるため、ある程度の歪みは許容され得る。一例において、歪み補正された画像６０２－４はイメージサークル１３４の端に近接していた暗くなった画素の領域６０６－３を含んでもよい。

【0034】

歪み補正された画像６０２－４は領域６０６－３の暗くなった画素を除去し、最終画像６０２－５を提供するために明るくされ得る。最終画像６０２－５は、人１１０－３（人の頭および顔を含む）および最終画像６０２－５の底部の角（例えば、底部の角の領域６１０）に黒色または暗くなった画素を伴わないパッケージ１１４－３を含む歪み訂正画像を含む。次に、最終画像６０２－５は、表示のためにユーザデバイス（例えば、スマートフォン）に提供され得る。

【0035】

方法例
図７は、本明細書に記載された技術によって、非対称のイメージセンサ位置決めを伴う電子ドアベルによって引き起こされるレンズ歪みを補正するための方法例７００を示す。ある局面において、方法７００は、電子ドアベル１２２の１つ以上のプロセッサによって実行され得る。

【0036】

７０２において、レンズに対して非対称に配置されたイメージセンサに基づいて、少なくとも部分的にレンズ歪みを有する画像が撮影されるおよび受信される。ある局面において、イメージセンサ１２８はレンズ１３０に対して非対称に配置され、その結果レンズ光軸３１６（例えば、レンズ１３０の光学中心）からイメージセンサ光軸３１８（例えば、イメージセンサ１２８の光学中心）の垂直方向のずれが生じる。また、画像センサ１２８は縦向きに配向される。レンズ１３０に対するイメージセンサ１２８の向きおよび非対称の位置決めの結果として、センサ検出領域１３２はイメージサークル１３４の下部（例えば、下部４０８）およびイメージサークル１３４の境界を越える領域（例えば、下部の角の領域４３４）を含むようにイメージサークル１３４の中心から垂直方向にずれ、結果として撮影された画像は黒い角の領域６０４－１を有する。

【0037】

７０４において、台形画像を提供するために台形補正は撮影された画像に適用される。例えば、台形補正６０８は、レンズ１３０に対するイメージセンサ１２８の非対称な位置決めから生じる垂直方向の非対称性を補正するのに使用可能な、台形画像６０２－２を提供するように、撮影された画像６０２－１に適用され得る。

【0038】

７０６において、台形画像は、歪み除去された画像を提供するために歪み除去される。例えば、台形画像６０２－２は垂直方向の非対称性を補正しかつ歪み除去された画像６０２－３を提供するように歪みを除去され得る。例えば、台形画像６０２－２をまっすぐにすることは、台形６０２－２を本質的に画像の底部においてよりも上部においてより大きく引き伸ばす。

【0039】

７０８において、歪み除去された画像は、歪み補正された画像を提供するために歪み補正される。例えば、歪み除去された画像６０２－３の端は、歪み補正された画像６０２－４を提供するように歪み補正される。歪み補正は、センサ検知領域１３２の２つの下部の角の領域４３４に対応する黒い領域（例えば、黒い角の領域６０４）を除去する。

【0040】

７１０において、歪み補正された画像は、最終画像を提供するために明るくされる。例えば、歪み補正された画像６０２－４は、レンズ歪みが補正されかつ黒い角を有しない最終画像６０２－５を提供するように明るくされる。

【0041】

７１２において、最終画像はコンピュータ可読記憶メモリに提供される。例えば、最終画像６０２－５は、ローカルストレージまたはリモートストレージ（例えば、オンラインストレージ）に格納されてもよい。電子ドアベル１２２はバッテリ駆動であるため、最終画像６０２－５はリモートデータストレージに無線で通信されてもよい。

【0042】

７１４において、最終画像はユーザデバイス（例えば、スマートフォン）に出力される。一例において、最終画像６０２－５は、ローカルストレージまたはリモートストレージへアクセスするための要求に基づいてユーザデバイスに提供され得る。必要に応じて、７１２においてメモリストレージに最終画像を提供する前に、または同時に、最終画像は７１４においてユーザデバイスに出力され得る。したがって、本明細書において記載された技術は黒い角のない向上されたｖＦＯＶを有する最終画像６０２－５を提供するために、３：４縦配置のイメージセンサの台形歪み補正を含む。これらの技術は、典型的には従来のイメージセンサのＦＯＶの外側にあり得る、イメージサークル１３４の下部４０８に配置されるパッケージまたは他の物体のパッケージ検出を向上することを可能にする。したがって、このようなパッケージは最終画像６０２－５に基づいて検出されてもよく、パッケージが存在すること、または、場合によっては、パッケージが持ち去られたことをユーザに通知するために、電子ドアベル１２２に関連付けられた他の電子デバイスのユーザに通知は提供され得る。

【0043】

コンピューティングシステムの例
図８は図１～７を参照して記載したように、非対称のカメラセンサ位置決めの局面を実装する任意の電子デバイス（例えば、電子ドアベル１２２）として実施されることができるデバイス例８０２を含むシステム例８００を示すブロック図である。デバイス例８０２は任意のタイプのコンピュータデバイス、クライアントデバイス、携帯電話、タブレット、通信、娯楽、ゲーム、メディア再生、および／または他のタイプのデバイスであってもよい。さらに、デバイス例８０２はサーモスタット、ドアベル、ハザード検出器、カメラ、照明ユニット、試運転デバイス、ルータ、境界ルータ、ジョイナールータ、ジョイナーデバイス、エンドデバイス、リーダ、アクセスポイント、ハブ、および／または他の電子デバイスなど、ネットワーク上で通信するために構成される任意の他のタイプの電子デバイスとして実装されてもよい。デバイス例８０２は、電子回路、マイクロプロセッサ、メモリ、入出力（Ｉ／Ｏ）ロジック制御、通信インターフェイスおよび構成要素、およびネットワークを介して通信するための他のハードウェア、ファームウェア、および／またはソフトウェアと統合されることができる。さらに、デバイス８０２は以下でさらに説明するように、任意の数の異なる構成要素およびそれらの組み合わせなど様々な構成要素で実装されることができる。

【0044】

デバイス８０２はネットワーク内のデバイス間で通信されるデータ、受信されているデータ、ブロードキャスト用にスケジュールされたデータ、データのデータパケット、デバイス間で同期されるデータなど、デバイスデータ８０６の有線および／または無線通信を可能とする通信デバイス８０４を含む。デバイスデータはデバイス上で実行するアプリケーションによって生成されるオーディオ、ビデオ、および／または画像データと同様に任意のタイプの通信データを含むことができる。通信デバイス８０４は携帯電話通信用および／またはネットワークデータ通信用の送受信機も含むことができる。通信デバイス８０４は複数の異なる無線通信システムのためのワイヤレス無線システムを含むことができる。ワイヤレス無線システムは、Ｗｉ-Ｆｉ、Bluetooth（登録商標）、モバイルブロードバンド、Bluetooth Low Energy（ＢＬＥ）、および／またはポイントツーポイントＩＥＥＥ８０２．１５．４を含んでもよい。異なる無線システムのそれぞれは特定のワイヤレス通信技術のために実装される無線デバイス、アンテナ、およびチップセットを含むことができる。

【0045】

デバイス８０２は、デバイス、データネットワーク（例えば、内部ネットワーク、外部ネットワークなど）、および他のデバイス間の接続および／または通信リンクを提供するデータネットワークインターフェイスなどの入出力（Ｉ／Ｏ）インターフェイス８０８もまた含む。Ｉ／Ｏインターフェイスは、デバイスを任意のタイプの構成要素、周辺装置、および／または付属装置に結合するために使用され得る。Ｉ／Ｏインターフェイスは、任意のコンテンツおよび／またはデータソースから受信されたオーディオ、ビデオ、および／または画像データなどの任意のタイプの通信データと同様に、デバイスへのユーザ入力などの任意のタイプのデータ、メディアコンテンツ、および／または入力が受信され得るデータ入力ポートも含む。

【0046】

デバイス８０２は、実行可能な命令を処理する任意のタイプのマイクロプロセッサ、コントローラのようなものなどを有するハードウェアにおいて、少なくとも部分的に実装され得る処理システム８１０を含む。処理システムは、システムオンチップ（ＳｏＣ）として実装されるプロセッサおよびメモリシステムのような、集積回路、プログラマブルロジックデバイス、１つ以上のセミコンダクタを使用して形成されたロジックデバイス、およびシリコンおよび／またはハードウェアにおける他の実装の構成要素を含むことができる。あるいは、または、加えて、デバイスは、ソフトウェア、ハードウェア、ファームウェア、または処理および制御回路と実装され得る固定ロジック回路の任意の１つまたは組み合わせで実装され得る。デバイス８０２は、デバイス内の様々な構成要素を結合する任意のタイプのシステムバス、または他のデータおよびコマンド転送システムをさらに含んでもよい。システムバスは制御およびデータラインと同様に、異なるバス構成および構造の任意の１つまたは組み合わせを含むことができる。

【0047】

デバイス８０２はコンピューティングデバイスによってアクセスされ得、データおよび実行可能命令（例えば、ソフトウェアアプリケーション、モジュール、プログラム、機能など）の永続的ストレージを提供するデータ記憶デバイスのようなコンピュータ可読記憶メモリ８１２もまた含む。本明細書に記載のコンピュータ可読ストレージメモリは、伝播信号を除外する。コンピュータ可読記憶装置の例は、揮発性メモリおよび不揮発性メモリ、固定および取り外し可能メディアデバイス、およびコンピューティングデバイスアクセスのためのデータを保持する任意の適切なメモリデバイスまたは電子データストレージを含む。コンピュータ可読ストレージメモリはランダムアクセスメモリ（ＲＡＭ）、読み取り専用メモリ（ＲＯＭ）、フラッシュメモリ、および様々なメモリデバイス構成における他のタイプのストレージメモリの様々な実装を含む。

【0048】

コンピュータ可読ストレージメモリ８１２は、コンピュータ可読ストレージメモリによってソフトウェアアプリケーションとして維持され、処理システム８１０によって実行されるオペレーティングシステムのようなデバイスデータのストレージ８０６および様々なデバイスアプリケーション８１４を提供する。デバイスアプリケーションは任意の形式の制御アプリケーション、ソフトウェアアプリケーション、信号処理および制御モジュール、特定のデバイスにネイティブなコード、特定のデバイス用のハードウェア抽象化層等のようなデバイスマネージャーもまた含み得る。この例において、デバイスアプリケーションはデバイス例８０２が本明細書において記載される任意の電子デバイスとして実装される場合などに、パッケージ検出の向上のための非対称のカメラセンサ位置決めの態様を実装するスマートホームアプリケーション８１６もまた含む。デバイス８０２はバッテリー３０８のような電源８１８もまた含む。交流（ＡＣ）電源はデバイスのバッテリーを充電するためにも使用され得る。

【0049】

ある局面において、電子ドアベル１２２について説明される技術の少なくとも一部は、プラットフォーム８２２内の「クラウド」８２０上のような分散システムにおいて実装されてもよい。クラウド８２０はサービス８２４および／またはリソース８２６のためのプラットフォーム８２２を含むおよび／または代表である。

【0050】

プラットフォーム８２２はサーバデバイス（例えば、サービス８２４に含まれる）および／またはソフトウェアリソース（例えば、リソース８２６として含まれる）のような、ハードウェアの基礎となる機能を抽象化し、デバイス例８０２を他のデバイス、サーバなどに通信可能に接続する。リソース８２６はデバイス例８０２から離れたサーバ上でコンピュータ処理が実行される間に利用され得るアプリケーションおよび／またはデータを含み得る。加えて、サービス８２４および／またはリソース８２６は、インターネット、セルラーネットワーク、またはＷｉ－Ｆｉネットワーク上のような加入者ネットワークサービスを容易にし得る。プラットフォーム８２２はシステム８００全体に分散された機能を有する相互接続されたデバイス実装などにおいて、プラットフォームを介して実装されるリソース８２６に対する需要にサービスを提供するために、リソースの抽象化および基準化する役割を果たすことができる。例えば、機能性はクラウド８２０の機能を抽象化するプラットフォーム８２２を介してはもちろん、デバイス例８０２で部分的に実装されてもよい。

【0051】

いくつかの例は以下に説明される。
電子ドアベルは、レンズ光軸を有しするレンズを備え、レンズは、レンズによって撮影されたシーンを表わすイメージサークルを提供し、イメージサークルは、中間部で分離されかつ垂直に積み重ねて配置された上部および下部を有し、上部は、イメージサークルの上の端に近接して配置され、下部は、イメージサークルの下の端に近接して配置され、電子ドアベルはさらに、センサ検出領域を有するイメージセンサを備え、イメージセンサは、イメージサークルの垂直に積み重ねられて配置された部分に対して縦向きに配置され、センサ検出領域の縦向きは水平方向ＦＯＶよりも大きい垂直方向ＦＯＶを有し、かつイメージセンサは、イメージサークルの下の端に近接するイメージサークルの下部に配置されるオブジェクトの画像をイメージセンサが撮影することを可能にするように、レンズ光軸からオフセット距離だけイメージサークルの下部に向かってレンズに対して垂直方向にずらされる。

【0052】

イメージセンサは、３：４の縦向きに構成され得る。
センサ検出領域は矩形形状を有し得、イメージサークルは楕円形状を有し得、センサ検出領域は、イメージサークルの内部に配置される２つの上部の角、およびイメージサークルの外部に配置される２つの下部の角を含み得る。

【0053】

イメージセンサは、イメージセンサ光軸を有し得、イメージセンサは、レンズの垂直軸に沿ってオフセット距離だけイメージセンサ光軸をレンズ光軸からオフセットさせるように、レンズに対して垂直方向にずらされ得る。

【0054】

イメージセンサ光軸は、レンズ光軸と平行であり得る。
オフセット距離は、実質的に０．１５ミリメートルから０．３５ミリメートルの範囲内であり得る。

【0055】

イメージサークルは、約１６０度の画角を有するレンズに基づくシーンを表わす。
レンズに対するイメージセンサの縦向きおよび垂直方向へずらすことは、イメージセンサが約１３０度のレンズの垂直方向の画角に対応するイメージサークルの領域を撮影することを可能にし得る。

【0056】

電子ドアベルは、撮影された画像の下部の角の領域内の黒い領域を取り除くために、イメージセンサによって撮影される画像上でレンズ歪み訂正を実行するように構成されるプロセッサをさらに備え得る。

【0057】

プロセッサは、垂直方向の非対称性を補正するために使用できる台形画像を提供するように撮影された画像に台形補正を適用することと、垂直方向の非対称性を補正するために台形画像の歪みを取り除いて歪みが取り除かれた画像を提供することとによって、レンズ歪み訂正を実行するように構成され得る。

【0058】

プロセッサは下部の角の領域内の黒い領域を取り除き歪み補正された画像を提供するように、歪み除去された画像をさらに歪み補正することにより、レンズ歪み訂正を実行するように構成され得る。

【0059】

プロセッサは表示用の最終画像を提供するように、歪み補正された画像をさらに明るくすることにより、レンズ歪み訂正を実行するために構成され得る。

【0060】

イメージセンサは、イメージサークル内に配置されるセンサ検出領域の底部の端の中点を有するように位置決めされ得る。

【0061】

非対称のイメージセンサ位置決めを有する電子ドアベルによって引き起こされるレンズ歪みを補正するための方法であって、方法は、電子ドアベルのイメージセンサを使用して画像を撮影することを備え、電子ドアベルは、縦向きに配向されたセンサ検出領域、および電子ドアベルのレンズのレンズ光軸から垂直方向にずらされるイメージセンサ光軸を備え、センサ検出領域は、レンズによりイメージセンサ上に投影されるイメージサークルの内部に配置される上部の角およびイメージサークルの外部に配置される下部の角を有し、方法は、イメージセンサ光軸が垂直方向にずらされることの結果である垂直方向の非対称性を補正するために使用できる台形画像を提供するように撮影された画像に台形補正を適用することと、垂直方向の非対称性を補正し歪みが除去された画像を提供するように、台形画像の歪みを取り除くことと、センサ検出領域の下部の角に対応する黒い領域を除去し歪み補正された画像を提供するように、歪みが除去された画像を歪み補正することと、電子デバイス上に表示するための最終画像を提供するように歪み補正された画像を明るくすることとを備える。

【0062】

方法はさらに、最終画像に基づいて、イメージサークルの端に近接するイメージサークルの下部に位置するパッケージを検出することと、パッケージが存在するという電子デバイスのユーザへの表示を提供することとを備え得る。

【0063】

結論
さらにパッケージ検出の向上のために位置付けられた非対称カメラセンサの局面は特徴および／または方法に、固有の言語で説明されていて、添付の特許請求の範囲の主題は、説明された特定の特徴または方法に限定されない。むしろ、特定の特徴および方法は、請求されたパッケージ検出の向上のために位置付けられた非対称カメラセンサの実施例として開示され、他の同等の特徴および方法は、添付の特許請求の範囲内にあることが意図される。さらに、様々に異なる局面は説明され、各記載された局面は、独立してまたは１つ以上の他の記載された局面と関連して実施され得ると理解される。

【図1】