特許 7179164 画像対の修正方法及び装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2022-11-17

(45)【発行日】2022-11-28

(54)【発明の名称】画像対の修正方法及び装置

(51)【国際特許分類】

   H04N 13/122 20180101AFI20221118BHJP

   H04N 13/133 20180101ALI20221118BHJP

   G06T 5/50 20060101ALI20221118BHJP

【ＦＩ】

H04N13/122

H04N13/133

G06T5/50

【請求項の数】 14

(21)【出願番号】P 2021515619

(86)(22)【出願日】2018-10-05

(65)【公表番号】

(43)【公表日】2022-01-13

(86)【国際出願番号】 EP2018077118

(87)【国際公開番号】W WO2020069752

(87)【国際公開日】2020-04-09

【審査請求日】2021-09-03

(73)【特許権者】

【識別番号】513121384

【氏名又は名称】ベステル エレクトロニク サナイー ベ ティカレト エー．エス．

(74)【代理人】

【識別番号】110000408

【氏名又は名称】弁理士法人高橋・林アンドパートナーズ

(72)【発明者】

【氏名】エズテキン，ギュネール

(72)【発明者】

【氏名】ユルマズ，ギョクハン エヴレン

【審査官】秦野 孝一郎

(56)【参考文献】

【文献】特開２００９－５３７４８（ＪＰ，Ａ）

【文献】特開２０１２－１９９７３６（ＪＰ，Ａ）

【文献】特開２０１５－１８５１７６（ＪＰ，Ａ）

【文献】国際公開第２０１３／０８０４３９（ＷＯ，Ａ１）

【文献】特開２０１５－１１９２７７（ＪＰ，Ａ）

【文献】特開２０１４－２２８６７（ＪＰ，Ａ）

【文献】米国特許出願公開第２０１２／０２２９６５０（ＵＳ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ １３／００－１３／３９８

Ｇ０６Ｔ １／００－５／５０

(57)【特許請求の範囲】

【請求項1】

３次元表示を改善するために対の画像（１０１）を修正する方法であって、
画像（５２３、５２４）における入射光（２１１、３１１、５２５、５２６、５２７、５２８）の入射角を検出するために前記画像（５２３、５２４）を分析し（Ｓ１）、
前記入射角および人間の顔の解剖学的詳細に基づいて、各対の前記画像（５２３、５２４）のうちの少なくとも１つの画像の少なくとも一部の輝度値を修正する（Ｓ２）ことを含む方法。

【請求項2】

前記分析（Ｓ１）することは、各対の前記画像（５２３、５２４）のうちの１つの画像（５２３、５２４）を分析することと、それぞれの画像（５２３、５２４）の輝度分布および／または輝度ヒストグラムに基づいて前記入射角を決定することとを含む、請求項１に記載の方法。

【請求項3】

それぞれの前記画像（５２３、５２４）において主光源を決定することを含み、前記入射角が前記主光源の光（２１１、３１１、５２５、５２６、５２７、５２８）に対して決定される、請求項２に記載の方法。

【請求項4】

前記入射角を決定することは、それぞれの前記画像（５２３、５２４）内の対象物を抽出することと、抽出された前記対象物内の輝度分布を決定することとを含む、請求項２および３のいずれか１項に記載の方法。

【請求項5】

前記入射角を決定することは、抽出された前記対象物の周囲空間についてそれぞれの前記画像（５２３、５２４）における前記輝度分布を決定することを含む、請求項４に記載の方法。

【請求項6】

前記輝度値を修正する（Ｓ２）ことは、前記入射角が画像中心の左側または右側である前記入射光（２１１、３１１、５２５、５２６、５２７、５２８）の光源の位置を示す場合にのみ、前記輝度値を修正することを含む、請求項１乃至５のいずれか１項に記載の方法。

【請求項7】

前記輝度値を修正する（Ｓ２）ことは、画像（５２３）の右上隅から始まる前記画像（５２３）を分割する線の下で左画像（５２３）を暗くすること、または画像（５２４）の左上隅から始まる画像（５２４）を分割する線の下で右画像（５２４）を暗くすることを含み、線の角度は前記入射角によって定義される、請求項１乃至６のいずれか１項に記載の方法。

【請求項8】

３次元表示を改善するために対の画像（１０１）を修正する装置（１００）であって、
画像（５２３、５２４）を分析し、前記画像（５２３、５２４）における入射光（２１１、３１１、５２５、５２６、５２７、５２８）の入射角を検出するように構成された画像解析装置（１０２）と、
前記入射角および人間の顔の解剖学的詳細に基づいて、各対の前記画像（５２３、５２４）のうちの少なくとも１つの画像の少なくとも一部の輝度値を修正するように構成された画像処理装置（１０３）と、を含む装置（１００）。

【請求項9】

前記画像解析装置（１０２）は、各対の前記画像（５２３、５２４）のうちの１つの画像（５２３、５２４）を分析し、それぞれの画像（５２３、５２４）の輝度分布および／または輝度ヒストグラムに基づいて前記入射角を決定するように構成される、請求項８に記載の装置（１００）。

【請求項10】

前記画像解析装置（１０２）は、それぞれの前記画像（５２３、５２４）において主光源を決定し、前記主光源の光（２１１、３１１、５２５、５２６、５２７、５２８）に対する前記入射角を決定するように構成される、請求項９に記載の装置（１００）。

【請求項11】

前記画像解析装置（１０２）は、前記入射角を決定するために、それぞれの前記画像（５２３、５２４）内の対象物を抽出し、抽出された前記対象物内の輝度分布を決定するように構成される、請求項９および１０のいずれか一項に記載の装置（１００）。

【請求項12】

前記画像解析装置（１０２）は、前記入射角を決定するために、抽出された前記対象物の周囲空間についてそれぞれの前記画像（５２３、５２４）における輝度分布を決定するように構成される、請求項１１に記載の装置（１００）。

【請求項13】

前記画像処理装置（１０３）は、前記入射角が画像中心の左側または右側である前記入射光（２１１、３１１、５２５、５２６、５２７、５２８）の光源の位置を示す場合にのみ、前記輝度値を修正するように構成される、請求項８乃至１２のいずれか１項に記載の装置（１００）。

【請求項14】

前記画像処理装置（１０３）は、画像（５２３）の右上隅から始まる前記画像（５２３）を分割する線の下で左画像（５２３）を暗くする、または画像（５２４）の左上隅から始まる画像（５２４）を分割する線の下で右画像（５２４）を暗くするように構成され、線の角度は前記入射角によって定義される、請求項８乃至１３のいずれか１項に記載の装置（１００）。

【発明の詳細な説明】

【背景技術】

【0001】

本発明は、３次元表示を改善するために対の画像を修正する方法に関する。さらに、本発明はそれぞれの装置に関する。

【0002】

本発明は任意のタイプの３次元表示に適用可能であるが、主に３次元ビデオに関連して説明される。

【0003】

今日、映画館やコンピュータゲームなどにおける映像は、例えばそれぞれの３Ｄヘッドセットまたは３Ｄメガネを用いて、ユーザに３次元ビデオとして提供されている。したがって、視覚は、人間の脳によっても３次元画像として知覚され得る３次元画像を表すことができる。例えば、３Ｄヘッドセットを用いると、人間の脳はユーザの身体が動いていることを示す視覚的情報（３次元ビデオに示されるように）を受け取ることができる。しかし、実際の身体は着座しているか、または静止しており、ユーザの脳は身体の他のセンサからそれに対応する情報を受信しない。

【0004】

提供される視覚と他のセンサによって提供される情報との間のこの不一致は、多くのユーザが頭痛、倦怠感などの症状を患うことにつながる。そのような症状はコンテンツの不自然さ、すなわち、ユーザが画面を介して見るものとユーザの脳が期待するものとの間の不一致によって引き起こされる。

【0005】

例えば特にユーザが椅子に座っている場合には、通常、他のセンサが脳に提供する情報は、直接影響を与えない。しかしながら、視覚は引き起こされ得る悪影響を最小限に抑えるように適合させることができる。

【0006】

従って、３次元映像の表示を改善する必要がある。

【発明の概要】

【0007】

上記課題は、独立請求項の特徴により解決できる。クレームカテゴリーの独立クレームは、他のクレームカテゴリーの従属クレームに類推して形成できることが確認される。

【0008】

従って、３次元表示を改善するために対の画像を修正する方法であって、画像における入射光の入射角を検出するために画像を分析し、入射角および人の顔の解剖学的詳細に基づいて、各対の画像のうちの少なくとも１つの画像の少なくとも一部の輝度値を修正すること、を含む方法が提供される。

【0009】

さらに、３次元表示を改善するために対の画像を修正する装置であって、各対の画像を分析し、画像における入射光の入射角を検出するように構成された画像解析装置と、入射角および人の顔の解剖学的詳細に基づいて、各対の画像のうちの少なくとも１つの画像の少なくとも一部の輝度値を修正するように構成された画像処理装置と、を含む装置が提供される。

【0010】

対の画像とは、３次元視覚の錯覚を与えるためにユーザの片方の目にそれぞれ提供される同じシーンの２つの画像とする。

【0011】

本発明は、３次元視覚が通常立体カメラによって記録されるという発見に基づく。しかしながら、本発明はさらに、カメラが人間の顔の解剖学的構造を考慮せず、対の画像が通常、正面からユーザの目に提供されることを認識している。これは例えば、コンピュータゲームにおけるコンピュータ生成画像にも当てはまる。

【0012】

人間の目は、見えている物の例えば色の情報よりも、輝度に対してより敏感である。従って画像内の輝度情報は、画像の情報において最も重要である。

【0013】

さらに、人間の顔は鼻を持っているので、人間の目はそれぞれ異なる輝度値を受け取る。例えば、鼻は片方の目に影を投影するが他方の目には投影しない。さらに、例えば、現実の場面における光が右から発生する場合、右の瞳孔は狭くなり、左の瞳孔は右目に比べて広がる。したがって、右目はより暗い画像を受け取り、左目はより明るい画像を受け取る。対照的に、現実の場面における光が左から発生する場合、左の瞳孔は狭くなり、右の瞳孔は左目に比べて広くなる。したがって、左目はより暗い画像を受け取り、右目はより明るい画像を受け取る。

【0014】

人間の脳は、両目で記録された２つの単一画像から最終的な３Ｄ画像を構築する。さらに、人間の脳は、両方の画像のシーンから同じ輝度を受け取る立体カメラとは違い、異なる輝度分布を有する２つの異なる画像を受け取ることができる。

【0015】

したがって、本発明は、３次元表示を改善するために対の画像を修正する方法を提供する。当該方法は特に、人間の顔の解剖学的詳細を考慮し、人間の顔の解剖学的詳細に基づいて、各対の画像の少なくとも１つにおける少なくとも一部の輝度を修正する。

【0016】

「人間の顔の解剖学的詳細」という用語は、人間の目が受け取る視覚の輝度を変更する、鼻や眼窩などの人間の顔における全ての解剖学的詳細を指してもよい。したがって、本発明では、実際の人間の顔に存在する照明条件を模擬する。

【0017】

例えば、光がユーザの顔面の左側から発せられる場合、鼻は、現実には反対の右目の像に影を投影する。従って、画像のそれぞれの部位の輝度値を正しく修正するために、当該方法は、画像内の入射光の入射角を決定することを含む。

【0018】

決定した入射角を用いて、輝度値がどのように修正される必要があるかを決定してもよく、輝度値は、入射角及び人間の顔の解剖学的詳細に基づいて修正してもよい。

【0019】

既に上述したように、必ずしも各対の両方の画像を修正する必要はなく、各場合に完全な画像を修正する必要はない。

【0020】

処理された対の画像は、ユーザの目に提示されると、未処理の画像の対よりもより現実味が増す。そのため特に、映画やゲームのような動画では、ユーザに対する悪影響を最小限に抑えることができる。

【0021】

本発明のさらなる実施形態は、図面を参照して、さらなる従属請求項および以下の説明を主題とする。

【0022】

一実施形態では、各対の画像のうちの１つの画像の分析し、それぞれの画像の輝度分布および／または輝度ヒストグラムに基づいて入射角を決定することを含んでもよい。

【0023】

画像中の対象物の照明の状況は、画像が記録されている間に対象物から反射される光によって決定される。したがって、輝度分布および／またはヒストグラムを決定することによって、単一の対象物が光をどのように反射するか、それにより光がどこで発生するかを測定してもよい。

【0024】

各対両方の画像について照明の状況は同じであるため、入射の天使を決定するために、各対の画像のうち１つ、すなわち、左画像または右画像のいずれかのみを分析すればよい。

【0025】

さらなる実施形態では、当該方法は、それぞれの画像における主光源を決定することを含み、主光源の光に対して入射角を決定してもよい。

【0026】

主光源は画像中の全ての照明状況を定義するため、主光源の光に対する入射角のみを使用しても、３次元再生に関して画像の対の質を改善することができる。

【0027】

それにもかかわらず、別の実施形態では、複数の光源が画像内で検出される場合、画像の異なる部分が異なる入射光角に従って修正されてもよい。

【0028】

例えば、画像内の異なる光源に対する入射角の全てまたは複数を測定し、優勢な光源、即ち、決定された角度の全ての中でどの角度が優勢であるかを選択することによって、主光源を決定してもよい。またこれは、例えば、抽出された全ての対象物に対して入射角を決定することによって実行してもよい（以下を参照）。

【0029】

他の実施態様では、それぞれの画像内から対象物を抽出し、抽出された対象物内の輝度分布を決定することで、入射角を決定することを含んでもよい。

【0030】

対象物を抽出することは、画像内の端を検出し、検出された端に基づいて対象物を抽出することを含んでもよい。しかしながら、それぞれの画像内の対象物を検出するための他の適切な方法も有効であると考える。

【0031】

上で説明したように、シーン内の各対象物は特定の方向から照らされ、それに応じて光を反射する。したがって、対象物が右から照らされている場合、輝度値は左よりも右の方が高くなる。対照的に、対象物が左から照らされる場合は、輝度値は右よりも左の方が高くなる。対象物が前面または背面から照らされている場合、対象物の輝度は対象物の表面全体にほぼ均等に分散される。対象物がユーザの頭部またはカメラの右隣から照らされる場合、対象物の輝度は、左から右にかけて上昇する。対象物がユーザの頭部またはカメラの左隣から照らされる場合、対象物の輝度は、右から左にかけて上昇する。

【0032】

輝度の分布について、対象物のどこに最大の明るさの勾配が存在するかを分析することによって、入射光の角度を算出してもよい。例えば、画像中心の各側面に対して０°、３０°、６０°、９０°のような４つの入射角を設けるとすると、０°は対象物の側面上の光源を指し、９０°は対象物の直前または背面上の光源を指す。

【0033】

またこれは、より大きいまたは小さい角度が可能であり、例えば、０°から３６０°の間の全ての角度が可能である。

【0034】

一実施態様において、入射角を決定することは、抽出された対象物の周囲空間に関するそれぞれの画像内の輝度分布を決定することを含んでもよい。例えば、検出された対象物の表面上の輝度分布がほぼ均一に分布している場合には、その入射光は対象物の表または裏に発生していると仮定してもよい。入射光が正面から発生する場合、対象物によって投影される影は、幾何学的配置に従って対象物の背面、すなわち像の平面に投影される。対照的に、入射光が対象物の背面から発生する場合、対象物によって投影される影は幾何学的配置に従って対象物の正面、すなわち、ユーザに向かって、または像の平面外に投影される。

【0035】

例えば、影が対象物の右側の、少しでも下に投影されている場合、対象物の左後から入射光が発生すると仮定してもよい。また、影が対象物の左側に投影され、対象物の少しでも下に投影されている場合には、対象物の右後から入射光が発生すると仮定してもよい。

【0036】

したがって、光源が対象物の前に配置されているか、または対象物の後ろに配置されているかを識別してもよい。

【0037】

他の実施態様において、輝度値を修正することは、入射角が画像の中心左右の入射光の光源の位置を示す場合にのみ、輝度値を修正することを含んでもよい。

【0038】

実際の状況で、光源が画像内の対象物の背面、または画像内の対象物の前面（光の高さとは関係なく）の中心にある場合、両目はそれぞれのシーンでほぼ同じ輝度分布を受け取る。この時の角度は約９０°であるため、光源が画像中心の右側にも左側にも配置されない場合には、いずれも画像を修正する必要がない。

【0039】

しかしながら、現実の状況における光源が画像中心の左側または右側である場合には、２つの目はシーンに対して異なった輝度値及び輝度分布を受け取ることになる。従って、入射の天使が画像の中心左右の入射光の光源の位置を示す場合には、少なくとも１つの画像の輝度をそれに応じて修正される。

【0040】

光源が対象物の右後ろ、すなわち対象物およびカメラまたはユーザの頭部の後ろにあると判定された場合、左目の像は少なくとも部分的に暗くなることがある。この場合、反射光は右から左に進み、右からユーザの顔に到達する、すなわち、鼻が左目に影を投影する。

【0041】

光源が対象物の左後ろ、すなわち対象物およびカメラまたはユーザの頭部の後ろにあると判定された場合、右目の像は少なくとも部分的に暗くなることがある。この場合、反射光は左から右に進み、左からユーザの顔に到達する、すなわち、鼻が右目に影を投影する。

【0042】

光源が対象物の右側正面、すなわち対象物とカメラまたはユーザとの間にあると判定された場合、右目の像は少なくとも部分的に暗くなることがある。この場合、光源は右側だが、ユーザと対象物との間に位置すると仮定できる。この場合、ユーザの瞳孔が反応する。太陽光といった元の光源からの光に対し、右の瞳孔は左の瞳孔よりもより反応するため、右目の像がより暗くなる。このとき、右目の映像が暗くなる理由は、反射光ではなく、元の光源であってもよい。

【0043】

光源が対象物の左側正面、すなわち対象物とカメラまたはユーザとの間にあると判定された場合、左目の像は少なくとも部分的に暗くなることがある。上記の説明は、左目についても同様である。

【0044】

さらなる実施形態において、輝度値を修正することは、画像の右上隅から始まる画像を分割する線の下で左画像を暗くすること、または画像の左上隅から始まる画像を分割する線の下で右画像を暗くすることを含んでもよく、また、このとき線の角度は入射角により規定されてもよい。

【0045】

鼻は、入射角に応じてユーザの顔の両側に影を投影するので、影のサイズは入射角に依存する。したがって、光源が鼻の左または右にあるとき、すなわち、光が右または左から対象物を照らす場合、影は最大となり、光が前または後から対象物を直接的に照らすとき、影は最小となる。

【図面の簡単な説明】

【0046】

【図1】本発明に係る方法の一実施形態のフロー図を示す。

【図2】本発明に係る装置の一実施形態のブロック図を示す。

【図3】本発明で使用するためのシーンを含む画像を示す。

【図4】本発明で使用するためのシーンを含む別の画像を示す。

【図5】本発明で使用するための人間の顔の断面を示す。

【発明を実施するための形態】

【0047】

本発明およびその利点のより完全な理解のために、添付の図面と併せて以下に説明する。本発明は、図面の概略図において特定される例示的な実施形態を用いて、以下により詳細に説明する。

【0048】

図面において、特に断らない限り、同様の参照符号は同様の要素を示す。

【0049】

以下の方法ベースの図１の説明を明確にするために、図３～図５の説明において上記で使用した参照符号を維持する。

【0050】

図１は、３次元表示を改善するために対の画像１０１を修正する方法のフロー図を示す。

【0051】

この方法は、画像５２３、５２４における入射光２１１、３１１、５２５、５２６、５２７、５２８の入射角を検出するための画像５２３、５２４の分析Ｓ１と、入射角および人間の顔の解剖学的詳細に基づく、各対の画像５２３、５２４のうちの少なくとも１つの画像の少なくとも一部の輝度値の修正Ｓ２とを含む。

【0052】

分析Ｓ１のステップは、例えば、画像５２３、５２４の各対の１つの画像５２３、５２４を分析し、それぞれの画像５２３、５２４に対する輝度分布および／または輝度ヒストグラムに基づいて入射角を決定すること、とを含む。

【0053】

さらに、当該方法はそれぞれの画像５２３、５２４における主光源を決定することを含んでもよく、入射角は、主光源の光２１１、３１１、５２５、５２６、５２７、５２８について決定される。入射角を決定することは、それぞれの画像５２３、５２４内の対象物を抽出すること、および抽出された対象物内の輝度分布を決定することを含んでもよい。さらに、入射角を決定することは、抽出された対象物の周囲空間に対するそれぞれの画像５２３、５２４内の輝度分布を決定することを含んでもよい。

【0054】

輝度値の修正Ｓ２は、入射角が画像中心の左側または右側である入射光２１１、３１１、５２５、５２６、５２７、５２８の光源の位置を示す場合にのみ、輝度値を修正することを含んでもよい。さらに、輝度値の修正Ｓ２は、画像５２３の右上隅から始まって左画像５２３を分割する線の下で左画像５２３を暗くすること、また画像５２４の左上隅から始まって画像５２４を分割する線の下で右画像５２４を暗くすることを含んでもよく、線の角度は入射角によって規定される。

【0055】

図２は、装置１００のブロック図を示す。装置１００は対の画像１０１を受け取り、画像処理装置１０３に接続される画像解析装置１０２を備える。

【0056】

画像解析装置１０２は画像を解析し、画像内の照明光の入射角を検出する。次いで、この情報は、画像の対１０１と共に画像処理装置１０３に提供される。画像処理装置１０３は入射角および人間の顔の解剖学的詳細に基づいて、各対の画像のうちの少なくとも１つの画像の少なくとも一部の輝度値を修正し、修正された画像を出力する。

【0057】

画像解析装置１０２は、例えば、各対の画像のうちの１つの画像を解析し、それぞれの画像の輝度分布及び／又は輝度ヒストグラムに基づいて入射角を決定してもよい。さらに、画像解析装置１０２は、それぞれの画像内の主光源を決定し、決定された主光源の光に対する入射角を決定してもよい。

【0058】

画像解析装置１０２は、入射角を決定するために、それぞれの画像内の対象物を抽出し、抽出された対象物内の輝度分布を決定して入射角を決定してもよい。画像解析装置１０２は、また、入射角を決定するために、抽出された対象物の周囲空間についてそれぞれの画像における輝度分布を決定してもよい。

【0059】

。
画像処理装置１０３は、例えば、入射角が画像中心の左右の入射光の光源の位置を示す場合にのみ、輝度値を修正してもよい。

【0060】

画像処理装置１０３は画像の右上隅から始まる画像を分割する線の下で左画像を暗くし、また画像の左上隅から始まる画像を分割する線の下で右画像を暗くしてもよい。線の角度は入射角によって定義される。

【0061】

図３は、右側からの入射光２１１を有する樹木２１０を示すシーンを伴う画像を示す。光２１１によって直接的に照明されていない暗い領域または影２１２が樹木２１０の左側部分に形成されていることが分かる。

【0062】

図３では、シーン内の単一の対象物の検出に基づいて、入射光２１１の入射角がどのように決定され得るかを示す。樹木２１０は、シーンから適切なアルゴリズムを用いて抽出されてもよく、抽出された樹木２１０内の輝度分布が分析されてもよい。

【0063】

樹木２１０の場合、樹木２１０の暗い部分は樹木の左側にあることから、光源２１１は樹木の右側になければならないことが分かる。

【0064】

影２１２の範囲は、角度に関する尺度として使用することができる。影２１２が大きくなればなるほど、光２１１の光源は、樹木のより後に配置されなければならない。例えば、影２１２が樹木の約半分を覆う場合、光源２１１は、樹木２１０に対して０°の角度にあると仮定することができる。樹木２１０上に影が見えない場合、入射光２１１は、樹木２１０に対して９０°の角度で配置されていると仮定することができる。

【0065】

図４は、樹木３１０を示すシーンを伴う別の画像を示す。図４は、検出された対象物の周囲が、入射光３１１の光源がどこに配置されているかを決定するのにどのように役立つかを説明している。図４では、影が、樹木３１０上の影を示すのではなく、樹木３１０によって投影されてる影を指す。

【0066】

対象物、この場合樹木３１０が検出された場合、シーンまたは画像内の対象物の周囲を分析して、それぞれの対象物によって投影された影３１２を検出することができる。次に、影３１２の位置およびサイズを使用して、光源３１１の位置を決定することができる。とりわけ、光源が対象物と並行であるか、対象物の前方または後方にあるかを決定することが可能である。

【0067】

影３１２が樹木３１０またはそれぞれの対象物からシーンまたは画像の下端に向けられている場合、光源３１１は、樹木３１０またはそれぞれの対象物の背後にあると仮定することができる。影３１２が樹木３１０またはそれぞれの対象物からシーンまたは画像の上端に向けられている場合、光源３１１は、樹木３１０またはそれぞれの対象物の前にあると仮定することができる。影３１２が樹木３１０またはそれぞれの対象物から側方に向けられる場合、光源３１１は、樹木３１０またはそれぞれの対象物と一直線上にあると仮定することができる。

【0068】

図５は、鼻５２０が左目５２１と右目５２２との間に位置する人間の顔の断面を示す。各目５２１、５２２の前には、対応する画像と入射光５２５、５２６、５２７、５２８が示されている。左側から発生した入射光５２５は、像の面またはユーザの目の面と比較して、かなり小さな角度を有し、左側で発生した入射光５２５は、より大きな角度を含む。右側から発生する入射光５２７は、入射光５２７と同じ角度を有するが、他方からである。入射光５２８は右側から発生し、入射光５２５と同じ角度を有するが、反対方向からである。

【0069】

画像５２３、５２４において、鼻５２０の影によって影響を受ける画像５２３、５２４の部分が、入射光５２５、５２６、５２７、５２８の入射角に従ってどのように変化するかが分かる。

【0070】

なお、暗くする部分を規定する破線の先端は、左画像５２３の右端、右画像５２４の左端、または上端の任意の点に設けることができる。

【0071】

線の先端は、例えば、鼻のサイズに依存し得る。したがって、この方法は、例えば、ユーザが選択できるいくつかの標準モデルを提供する。そのような標準モデルは例えば、小さい鼻、中程度の鼻、および大きな鼻を示してもよい。

【0072】

例示的に、小さい鼻が選択されると、上述のように、線の先端は右端または左端で低くなることがある。中程度の鼻が選択されると、線の先端は、画像５２３、５２４のそれぞれの端の上半分にあり得る。大きな鼻が選択されると、線の先端は、画像のそれぞれの上隅にあり得る。

【0073】

本明細書では特定の実施形態を図示し、説明したが、様々な代替および／または同等の実装が存在することが当業者には理解される。例示的な実施形態または例示的な実施形態は、例に過ぎず、範囲、適用可能性、または構成を何らかの形で限定することを意図しない。むしろ、前述の概要および詳細な説明は当業者に、１つの例示的な実施形態を実施するための便利なロードマップを提供し、添付の特許請求の範囲およびそれらの法的な均等物に記載される範囲から逸脱することなく、例示的な実施形態に記載される素子の機能および配置に様々な変更を行うことを可能にする。本出願は、本明細書で論じられる特定の実施形態の任意の適合または変形を包含することを意図する。

【0074】

本発明は３次元表示を改善するために対の画像１０１を修正する方法を提供し、この方法は、画像５２３、５２４における入射光２１１、３１１、５２５、５２６、５２７、５２８の入射角を検出するために画像５２３、５２４を分析することと、入射角および人間の顔の解剖学的詳細に基づいて、各対の画像５２３、５２４の少なくとも１つの画像の少なくとも一部の輝度値を修正することとを含む。さらに、本発明は、それぞれの装置１００を提供する。

【符号の説明】

【0075】

１００ 装置、１０１ 対の画像、１０２ 画像解析装置、１０３ 画像処理装置、１０４ 修正画像、２１０、３１０ 樹木、２１１、３１１ 入射光、２１２、３１２ 影、５２０ 鼻、５２１ 左目、５２２ 右目、５２３ 左画像、５２４ 右画像、５２５，５２６，５２７，５２８ 入射光、Ｓ１、Ｓ２ 方法のステップ

【図1】

【図2】

【図3】

【図4】

【図5】