特許 7315329 液晶表示装置及び撮像機能を有する電子機器

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-07-18

(45)【発行日】2023-07-26

(54)【発明の名称】液晶表示装置及び撮像機能を有する電子機器

(51)【国際特許分類】

   G02F 1/13357 20060101AFI20230719BHJP

   G02F 1/1333 20060101ALI20230719BHJP

【ＦＩ】

G02F1/13357

G02F1/1333

【請求項の数】 6

(21)【出願番号】P 2019010932

(22)【出願日】2019-01-25

(65)【公開番号】P2020118879

(43)【公開日】2020-08-06

【審査請求日】2022-01-24

(73)【特許権者】

【識別番号】502356528

【氏名又は名称】株式会社ジャパンディスプレイ

(74)【代理人】

【識別番号】110000408

【氏名又は名称】弁理士法人高橋・林アンドパートナーズ

(72)【発明者】

【氏名】沖田 光隆

【審査官】磯崎 忠昭

(56)【参考文献】

【文献】特表２０１１－５０４２４２（ＪＰ，Ａ）

【文献】特開２０１３－０８０６４６（ＪＰ，Ａ）

【文献】特開２００９－２３６９８７（ＪＰ，Ａ）

【文献】国際公開第２０１７／２０８８９６（ＷＯ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０２Ｆ １／１３３５７

Ｇ０２Ｆ １／１３３３

Ｇ０２Ｆ １／１３３４

(57)【特許請求の範囲】

【請求項1】

複数の画素が配列された表示領域を有する液晶表示パネルと、
前記液晶表示パネルの背面側に配置され、前記液晶表示パネルを通して前方を撮像する撮像素子と、
前記液晶表示パネルと前記撮像素子との間に配置され、前記表示領域と重なるように配置される光変調素子と、前記光変調素子を照明する光源と、を含む照明ユニットと、
前記液晶表示パネルの前記照明ユニット側に配置された第１反射型偏光板と、前記撮像素子と前記光変調素子との間に配置された第２反射型偏光板を有と、
を有し、
前記撮像素子は、前記表示領域と重なる領域に配置されている電子機器。

【請求項2】

前記光変調素子は、前記光源の出射光を前記液晶表示パネルの方向に散乱させる散乱状態と、前記撮像素子と重なる領域を透明にし、他の領域は散乱状態を維持する透過状態とに制御される、請求項１に記載の電子機器。

【請求項3】

前記透過状態は、前記撮像素子の前方を部分的に透明にする部分的透過状態である、請求項２に記載の電子機器。

【請求項4】

前記散乱状態のとき前記液晶表示パネルに映像を表示し、前記透過状態のとき前記液晶表示パネルは前記撮像素子と重なる領域で白表示を行い、前記撮像素子で撮像を行う、請求項２に記載の電子機器。

【請求項5】

前記光変調素子は、高分子分散型液晶パネルである、請求項１に記載の電子機器。

【請求項6】

前記液晶表示パネルの前記第１反射型偏光板とは反対側の面に配置された透過型偏光板を有し、
前記第１反射型偏光板と前記透過型偏光板は透過偏光軸がクロスニコルに配置され、
前記第１反射型偏光板と前記第２反射型偏光板とは透過偏光軸が平行に配置されている、請求項１に記載の電子機器。

【発明の詳細な説明】

【技術分野】

【0001】

本発明の一実施形態は、電子機器に備えられる撮像素子の配置に関する。また、本発明の一実施形態は、液晶表示装置における液晶表示パネルと照明ユニットの構成に関する。

【背景技術】

【0002】

情報をデジタル処理し、映像及び／又は音声を電気的にアナログ処理する電子機器として、スマートフォンと呼ばれる多機能携帯電話、タブレット端末と呼ばれるキーボードレスの携帯型端末が社会生活の中で広く普及している。このよう電子機器は、表示画面が設けられる側を前面とすると、前面側と背面側とにカメラが搭載されている。電子機器の前面側に配置されるカメラは、表示画面を囲む筐体の額縁部分に配置されている。電子機器において、表示画面を囲むフレームの部分（額縁とも呼ばれる）は、カメラを配置するために一定の面積を確保する必要がある。そのため、電子機器は、筐体のフレーム部分を狭くすることに限界があり、前方を撮像するカメラの搭載は狭額縁化の妨げとなっている。

【0003】

ところで、特許文献１には、液晶表示パネルの背面にビデオカメラが配置され、表示画面を通して被写体を撮影するように構成された画像撮影表示システムが開示されている。しかしながら、特許文献１に開示の画像撮影表示システムは、液晶パネルによる画像の表示モードと、ビデオカメラによる撮像モードとを交互に切り替える必要があり、画像の表示と撮像とを同時に行うことができないことが問題となる。

【先行技術文献】

【特許文献】

【0004】

【文献】特開平７－１３１７６６号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

本発明の一実施形態は、表示画面が設けられる側にカメラが配置される電子機器において、狭額縁化を図ること目的とする。また、本発明の一実施形態は、映像の表示と撮像とを同時に行うことのできる電子機器、並びに表示装置を提供することを目的の一つとする。

【課題を解決するための手段】

【0006】

本発明の一実施形態に係る電子機器は、複数の画素が配列された表示領域を有する液晶表示パネルと、液晶表示パネルの背面側に配置され、表示パネルを通して前方を撮像する撮像素子と、液晶表示パネルと撮像素子との間に配置された照明ユニットとを有する。
撮像素子は、表示領域と重なる領域に配置され、照明ユニットは、表示領域と重なるように配置される光変調素子と、光変調素子を照明する光源とを含む。

【0007】

本発明の一実施形態に係る液晶表示装置は、複数の画素が配列された表示領域を有する液晶表示パネルと、液晶表示パネルと重ねて配置された照明ユニットとを有する。照明ユニットは、表示領域と重なるように配置される光変調素子と、光変調素子を照明する光源とを含み、光変調素子は、表示領域と重なる領域で部分的に散乱状態と透過状態との制御が可能とされている。

【図面の簡単な説明】

【0008】

【図1】本発明の一実施形態に係る電子機器の主要な構成要素を示す斜視図である。

【図2】本発明の一実施形態に係る電子機器の構成を示し、（Ａ）は正面図、（Ｂ）はカバーパネル、液晶表示装置及び撮像素子の配置を示す断面模式図である。

【図3】本発明の一実施形態に係る電子機器の構成を示し、液晶表示装置及び撮像素子の配置及び撮像素子が撮像するときの状態を示す断面模式図である。

【図4】本発明の一実施形態に係る電子機器に備えられる照明ユニットの動作を説明する断面図であり、（Ａ）は非撮像モードにおける状態、（Ｂ）は撮像モードにおける状態を示す。

【図5】本発明の一実施形態に係る電子機器の動作を説明する図である。

【図6】本発明の一実施形態に係る電子機器が、撮像モードにあるときの表示領域に表示される画像の一例を示す図である。

【図7】本発明の一実施形態に係る電子機器の動作を説明する図である。

【図8】本発明の一実施形態に係る電子機器の動作を説明する図である。

【図9】本発明の一実施形態に係る電子機器の動作を説明する図である。

【図10】本発明の一実施形態に係る電子機器の動作を説明する図である。

【図11】本発明の一実施形態に係る電子機器の構成を示すブロック図である。

【発明を実施するための形態】

【0009】

以下、本発明の実施の形態を、図面等を参照しながら説明する。但し、本発明は多くの異なる態様で実施することが可能であり、以下に例示する実施の形態の記載内容に限定して解釈されるものではない。図面は説明をより明確にするため、実際の態様に比べ、各部の幅、厚さ、形状等について模式的に表される場合があるが、あくまで一例であって、本発明の解釈を限定するものではない。また、本明細書と各図において、既出の図に関して前述したものと同様の要素には、同一の符号（又は数字の後にａ、ｂなどを付した符号）を付して、詳細な説明を適宜省略することがある。さらに各要素に対する「第１」、「第２」と付記された文字は、各要素を区別するために用いられる便宜的な標識であり、特段の説明がない限りそれ以上の意味を有さない。

【0010】

本明細書において、ある部材又は領域が他の部材又は領域の「上に（又は下に）」あるとする場合、特段の限定がない限りこれは他の部材又は領域の直上（又は直下）にある場合のみでなく他の部材又は領域の上方（又は下方）にある場合を含み、すなわち、他の部材又は領域の上方（又は下方）において間に別の構成要素が含まれている場合も含む。なお、以下の説明では、特に断りのない限り、断面視において、ベース部材に対してタッチセンサが設けられる側を「上」又は「上方」といい、「上」又は「上方」から見た面を「上面」又は「上面側」というものとし、その逆を「下」、「下方」、「下面」又は「下面側」というものとする。

【0011】

図１は、本発明の一実施形態に係る電子機器１００の主要な構成要素を示す斜視図である。電子機器１００は、液晶表示装置１０２及び撮像素子１０４、１０５を含む。液晶表示装置１０２は、液晶表示パネル１１０と照明ユニット１１２とを含んで構成される。液晶表示パネル１１０は、照明ユニット１１２の前面側に配置され、照明ユニット１１２は液晶表示パネル１１０を背面側から照明する。

【0012】

液晶表示パネル１１０は、複数の画素が配列された表示領域１１４を有する。照明ユニット１１２は、光源１１８と光変調素子１２０とを含んで構成される。光変調素子１２０は、照明光が出射される領域が面状に形成され、その光出射面が液晶表示パネル１１０と重なるように配置される。照明ユニット１１２は、液晶表示パネル１１０の表示領域１１４を背面から照明する。

【0013】

なお、本発明の一実施形態において、光変調素子とは、光を散乱する状態と、光を散乱せず透明な状態とに制御可能な素子を指す。例えば、光変調素子は、電気的なエネルギーで光学的な性質が変化する電気光学物質を含む素子によって実現される。光変調素子は、このような電気光学的作用により、光を出射する面内において、光強度の分布を制御する機能を有する。

【0014】

液晶表示装置１０２の前面には、任意の部材としてカバーパネル１０６が設けられている。カバーパネル１０６はガラス、プラスチック等を素材とする透明部材で形成される。電子機器１００は、液晶表示装置１０２によって表示画面が形成され、利用者はカバーパネル１０６を通して表示画面に表示される画像を視認する。

【0015】

撮像素子１０４は液晶表示装置１０２の背面側に配置される。撮像素子１０４は、表示領域１１４と重なる位置に配置される。撮像素子１０４は液晶表示装置１０２の前方（カバーパネル１０６が設けられる側）を撮像するように受光面が向けられている。撮像素子１０５は、撮像素子１０４とは反対に背面方向を撮像するように受光面が向けられている。液晶表示装置１０２及び撮像素子１０４、１０５は、筐体１０８に収納される。撮像素子１０４は、筐体１０８の内部に収納された状態において、外部から視認されないように配置される。

【0016】

照明ユニット１１２において、光源１１８は、光変調素子１２０の側面側に配置される。光源１１８には、発光ダイオード（ＬＥＤ）又は冷陰極管が用いられる。光源１１８は、例えば、複数の発光ダイオードが、矩形状に形成された光変調素子１２０の一辺に沿って配列されている。光変調素子１２０は、側面から光源１１８の光が入射される。光変調素子１２０に入射された光は、内部で拡散し、散乱され、液晶表示パネル１１０が配置される側に光を出射する。

【0017】

撮像素子１０４は、液晶表示パネル１１０の表示領域１１４と重なる領域に配置される。撮像素子１０４は、液晶表示パネル１１０及び光変調素子１２０を透過した外光を受光して撮像する。撮像素子１０４は、例えば、ＣＣＤ（Charged Coupled Devices）型又はＣＭＯＳ（Complementary Metal Oxide Semiconductor）型のイメージセンサで形成される。

【0018】

このように、本発明の一実施形態に係る電子機器１００は、撮像素子１０４が筐体１０８に収納されたとき、前面が液晶表示パネル１１０及び照明ユニット１１２、並びにカバーパネル１０６で覆われるので、外部に露出せず、利用者が直接的に視認しない位置に配置されている。撮像素子１０４は、表示領域１１４を囲む筐体１０８のフレーム部分に配置されないので、本発明の一実施形態に係る電子機器１００は、狭額縁化を図ることができる。

【0019】

図２（Ａ）は、電子機器１００を正面から見た状態を示す。電子機器１００は、カバーパネル１０６の背面側に、液晶表示装置１０２及び撮像素子１０４が重ねて配置される。カバーパネル１０６の面内には、液晶表示装置１０２によって表示領域１１４が形成される。表示領域１１４を囲む領域は、表示に直接寄与しない非表示領域１１６となる。非表示領域１１６は、表示領域１１４に表示される画像を囲むことから、額縁又は額縁領域と呼ばれることもある。なお、図２（Ａ）は、表示領域１１４の周囲全体を囲むように非表示領域１１６が設けられる態様を示す。しかし、この態様は一例であり、本発明の一実施形態はこの態様に限定されるものではない。例えば、電子機器１００は、正面から正視したとき略全面が表示領域１１４とされ、非表示領域１１６が視認されない構成を有していてもよい。

【0020】

撮像素子１０４は、非表示領域１１６に配置されるのではなく、表示領域１１４と重なる領域に配置される。撮像素子１０４は、画像の視認に影響を与えないように、液晶表示パネル１１０の背面側に配置される。したがって、表示領域１１４で画像を表示しているとき、電子機器１００の利用者は、表示領域１１４を通して撮像素子１０４の位置を視認することはない。表示領域１１４と重なる領域において、撮像素子１０４は任意の位置に配置される。例えば、撮像素子１０４は、表示領域１１４の中央部に配置されてもよいし、表示領域１１４の周辺部寄りに配置されてもよい。また、撮像素子１０４は、表示領域１１４の面内に複数個配置されてもよい。

【0021】

図２（Ｂ）は、電子機器１００の主要な構成を示す断面模式図を示す。図２（Ｂ）は、カバーパネル１０６、液晶表示装置１０２、及び撮像素子１０４の配置を示す。液晶表示装置１０２は、液晶表示パネル１１０と照明ユニット１１２とを含む。電子機器１００は、視認側から、カバーパネル１０６、液晶表示装置１０２、撮像素子１０４の順に重ねられている。視認側から見たとき、照明ユニット１１２は、液晶表示パネル１１０を、背面側（カバーパネル１０６が配置される側とは反対側の面）から照明する。液晶表示パネル１１０は、液晶の電気光学効果を利用して透過光を変調し、表示領域１１４に画像を表示する。

【0022】

液晶表示パネル１１０は、第１基板１２２と第２基板１２４とを有し、第１基板１２２と第２基板１２４との間に液晶層１２８が設けられた構成を有する。液晶層１２８は、画素電極１２６によって液晶分子の配向状態が制御される。画素電極１２６は、表示領域１１４を形成する複数の画素のそれぞれに対応して設けられる。図２（Ｂ）では詳細に示さないが、画素電極１２６は各種液晶モードに対応した構造を有する。例えば、画素電極１２６は、ＩＰＳ（In Plane Switching）方式、ＶＡ（Vertical Alignment）方式、ＭＶＡ方式（Multi-domain Vertical Alignment）、ＴＮ（Twisted Nematic）等の各種方式に対応した構成を有する。

【0023】

照明ユニット１１２において、光源１１８から光変調素子１２０に入射した照明光は、面内を拡散し、かつ散乱されることによって液晶表示パネル１１０の側に出射される。光変調素子１２０は、電気的な制御により、一部又は全面を、光を散乱させる散乱状態と光を透過させる透過状態とに制御する機能を有する。

【0024】

撮像素子１０４は、液晶表示装置１０２の背面側（カバーパネル１０６が配置される面とは反対側の面）に配置される。撮像素子１０４は、表示領域１１４と重なる領域に配置されるので、撮像素子１０４の前方（撮像する側）には、少なくとも液晶表示パネル１１０と光変調素子１２０が配置されている。光変調素子１２０が散乱状態にあるとき、外光（カバーパネル１０６の外側から入射する光）は光変調素子１２０で散乱され、少なくとも直達光は撮像素子１０４に入射しない。したがて、光変調素子１２０が散乱状態に制御されているときには、撮像素子１０４は液晶表示パネル１１０の前方を撮像することができない。一方、光変調素子１２０が透過状態に制御されているとき、撮像素子１０４に外光を入射させることが可能となる。したがって、電子機器１００は、光変調素子１２０の光学的状態を制御することで、画像の表示及び撮像を適宜行うことができる。

【0025】

次に、電子機器１００の基本的な動作について説明する。図２（Ｂ）は、表示領域１１４の全面で画像が表示されている状態を示す。この状態では、光が光変調素子１２０によって液晶表示パネル１１０の表示領域１１４の全面が照明される。この状態では、撮像素子１０４は、前面にある光変調素子１２０が散乱状態に制御されているので、液晶表示パネル１１０の前方を撮像することができない状態にある。したがって、電子機器１００におけるこのような状態は、非撮像モードと呼ぶことができる。

【0026】

図３は、光変調素子１２０の光学的状態が、撮像素子１０４と重なる領域（撮像素子１０４の前面領域）において、散乱状体から透過状態に制御された状態を示す。図３に示すように、光変調素子１２０は、全体が透過状態となるのではなく、撮像素子１０４の撮像面に外光を入射させることが可能となるように、部分的に透過状態を形成するように制御される。したがって、光変調素子１２０におけるこの状態は、部分的透過状態と呼ぶこともできる。また、図３は、液晶表示パネル１１０の撮像素子１０４と重なる領域の画素が、白表示（透過状態）となるように液晶の配向が制御された状態を示す。このような制御により、撮像素子１０４には、液晶表示パネル１１０及び光変調素子１２０を通して、視認側から外光が入射する状態となる。この様態では、撮像素子１０４は、液晶表示パネル１１０の前方を撮像可能な状態となる。したがって、電子機器１００におけるこのような状態は、撮像モードと呼ぶことができる。

【0027】

なお、撮像モードにおいても、撮像素子１０４と重ならない領域においては、光変調素子１２０は散乱状体を維持することができ、液晶表示パネル１１０は表示領域１１４画像を表示することができる状態にある。したがって、撮像モードでは、撮像のみならす、画像の表示を同時に行うことができる。

【0028】

図４（Ａ）及び図４（Ｂ）は、照明ユニット１１２の動作を説明する断面図である。図４（Ａ）は非撮像モードにおける状態、図４（Ｂ）は撮像モードにおける状態を示す。光変調素子１２０は、第３基板１３０と、第３基板１３０に対向して配置される第４基板１３２との間に調光層１３４が設けられた構成を有する。第３基板１３０には第１電極１３８が設けられ、第４基板１３２には第２電極１４０が設けられる。第１電極１３８及び第２電極１４０は、いずれも透明導電膜で形成される。第１電極１３８は、第３基板１３０の略全面に広がる共通電極として設けられ、第２電極１４０は、撮像素子１０４が配置される位置に対応して設けられ、他の領域と電気的に分離されている。ここで、以下の説明においては、光変調素子１２０において、第１電極１３８と第２電極１４０とが重畳する領域を第１領域２０１と呼び、それ以外の領域を第２領域２０２と呼ぶこととする。

【0029】

調光層１３４は、光を散乱する散乱状態と光を透過する透明状態との、少なくとも２つの状態を形成する特性を有する。このような調光層１３４は、例えば、高分子分散型液晶（Polymer Dispersed Liquid Crystal）を用いて形成される。高分子分散型液晶は、液晶中にポリマーによるネットワーク構造体を形成させたものである。高分子分散型液晶は、ポリマーネットワークの作用により、液晶分子１３６の配列が不規則な状態を誘起して光を散乱させる作用を有する。一方、高分子分散型液晶は、電圧が印加されて液晶分子１３６の配向が一方向に配向されたとき、その光を散乱せずに透過する作用を発現する。高分子分散型液晶は、電圧を印加することによって散乱状態から透明状態に変化するノーマリホワイト型と呼ばれるものと、電圧を印加することによって透明状態から散乱状態に変化するノーマリブラック型（リバースモードとも呼ばれる）と呼ばれるものとに分類される。本発明の一実施形態において、調光層１３４は、ノーマリホワイト型及びノーマリブラック型の双方の高分子分散型液晶を用いることができる。

【0030】

図４（Ａ）は、ノーマリホワイト型の高分子分散型液晶で調光層１３４が設けられる場合を示す。図４（Ａ）は、また、非撮像モードを示し、第１電極１３８と第２電極１４０との間に電圧が印加されない状態を示す。この状態では、調光層１３４は、第１領域２０１及び第２領域２０２において、共に散乱状態となっている。すなわち、高分子分散液晶は、液晶分子１３６がランダムな方向に配向して、光を散乱する状態となっている。したがって、光源１１８から光変調素子１２０に入射された光は、調光層１３４の中を拡散しかつ散乱されて、液晶表示パネル１１０の方向に照射される。

【0031】

図４（Ｂ）は、撮像モードを示し、第１領域２０１において第１電極１３８と第２電極１４０との間に電圧が印加され、第２領域２０２においては依然として電圧が印加されない状態を示す。調光層１３４は、第１領域２０１が透明状態に変化し、第２領域２０２は散乱状態を維持している。すなわち、高分子分散型液晶は、第１電極１３８と第２電極１４０で挟まれた領域において、電界の作用を受けて液晶分子１３６が一方向に配向する。第１領域２０１は、液晶分子１３６の配向が揃っているので、光を散乱する作用は低減して透明となる。

【0032】

その結果、光変調素子１２０は、撮像素子１０４の前面に位置する第１領域２０１が透明となり、外光が入射することが可能な状態となる。一方、第２領域２０２は、液晶分子１３６が依然としてランダムに配向した状態にあるので、散乱状態が維持される。それにより、第２領域２０２は液晶表示パネル１１０を照明することができ、液晶表示パネル１１０は、第２領域２０２に対応する領域で画像を表示することができる。

【0033】

このように、照明ユニット１１２は、光変調素子１２０を用いて部分的に散乱状態と透明状態とを制御することで、非撮像モードと撮像モードとを切り替えることができる。撮像モードにおいては、液晶表示パネル１１０によって表示領域１１４に画像を表示させつつ、撮像素子１０４を使って撮像を行うことが可能となる。

【0034】

なお、第２電極１４０は、他の領域と区別される個別電極として設けられるのではなく、第４基板１３２の略全面に形成されてもよい。このような構成によれば、光変調素子１２０の全体が散乱状態と透明状態とに同時に制御されることとなる。この場合は、液晶表示パネル１１０による画像の表示と、撮像素子１０４による撮像とを交互に行うことができる。また、光変調素子１２０は、パッシブマトリクス型の電極構造を備えていてもよい。光変調素子１２０は、パッシブマトリクス型の電極を備えることで、第１領域２０１に対応する領域において、散乱状態と透過状態とを制御することができる。

【0035】

図５は、本発明の一実施形態に係る電子機器の動作を説明する図である。図５は、第１領域２０１及び第２領域２０２のそれぞれにおいて、液晶表示パネル１１０と光変調素子１２０の動作の状態を示す。

【0036】

図５に示すように、電子機器１００が液晶表示パネル１１０で画像を表示している状態（非撮像モード）では、光変調素子１２０は、第１領域２０１及び第２領域２０２が共に散乱状態となっている。撮像素子１０４で撮像を行う撮像モードでは、光変調素子１２０の第１領域２０１が透明状態となり、第２領域２０２は散乱状態が維持される。撮像モードにおいて、液晶表示パネル１１０は、第１領域２０１に対応する領域の画素が白表示を行うときと同じように駆動される。具体的には、第１領域２０１に対応する領域に配置される、赤（Ｒ）画素、緑（Ｇ）画素、及び青（Ｂ）画素の各画素において、照明ユニット１１２の照明光が透過する状態となるように、液晶分子の配向が制御される。これにより、第１領域２０１は外光が入射可能な状態となり、撮像素子１０４により撮像が行われる。一方、撮像モードにおいても、第２領域２０２は、光変調素子１２０の散乱状態が維持される。そのため、第２領域２０２に対応する液晶表示パネル１１０の表示領域１１４では、画像の表示を行うことが可能となる。

【0037】

撮像モードでは、図６に示すように、表示領域１１４は、第１領域２０１に対応する領域が光変調素子１２０で照明されない領域となるため黒色に視認され、第２領域２０２に対応する領域は通常の画像が表示されることとなる。第１領域２０１には、撮像素子１０４に外光が入射し、撮像を行うことが可能な状態となる。なお、第１領域２０１の形状は任意であり、図６に示される形状に限定されない。

【0038】

その後、非撮像モードに移行すると、光変調素子１２０の第１領域２０１は、散乱状態に遷移する。それによって、液晶表示パネル１１０は、第１領域２０１及び第２領域２０２に対応する領域において通常の画像を表示する。

【0039】

図７は、電子機器１００が画像を表示しながら撮像を行う動作の一例を示す。図７は、第１領域２０１及び第２領域２０２のそれぞれにおける液晶表示パネル１１０と光変調素子１２０の、１フレーム毎の動作を示す。

【0040】

図７に示すように、電子機器１００は撮像素子１０４で撮像を行うとき、１フレーム内に画像表示期間と撮像期間が含まれる。具体的に、第１領域２０１では、１フレーム内で液晶表示パネル１１０が、画像の表示を行う画像表示期間と、白表示（表示領域１１４では、光変調素子１２０で照明されないため、図６で示すように黒表示と視認される。）を行うように画素が駆動される撮像期間が設けられる。光変調素子１２０は、第１領域２０１において、液晶表示パネル１１０の動作に同期して、散乱状態の期間と、透明状態の期間とに制御される。第２領域２０２では、液晶表示パネル１１０は画像の表示を行い、光変調素子１２０は散乱状態に制御される。

【0041】

液晶表示パネル１１０のフレーム周波数が６０Ｈｚの場合、１フレーム当たりの時間は１６．７ｍｓｅｃとなる。ここで、撮像素子１０４のシャッタースピードが１／１０００秒であれば、撮像期間を１ｍｓｅｃとしても、画像の表示に影響を与えることなく１フレーム内に撮像期間を設けることができる。なお、図７では、画像表示期間の後に撮像期間が設けられる一例を示すが、撮像期間は１フレーム内で任意に設けることができる。例えば、１フレーム期間の最初に撮像期間を設けることもできるし、１フレーム期間内の中間に撮像期間を設けることもできる。

【0042】

このように、１フレーム期間内に撮像期間を設けることで、電子機器１００の表示領域１１４の全面に画像を表示しつつ撮像を行うことができる。撮像期間は１フレーム期間内の一部の時間として設定されるので、利用者の視覚に影響を与えることなく撮像を行うことができる。

【0043】

図８は、液晶表示装置１０２に設けられる偏光板と、照明ユニット１１２の出射光及び外光との関係を示す。液晶表示装置１０２には、液晶表示パネル１１０のカバーパネル１０６側の面に透過偏光板１４２が配置され、照明ユニット１１２側の面に第１反射偏光板１４４が設けられる。また、照明ユニット１１２と撮像素子１０４との間に第２反射偏光板が設けられる。

【0044】

図８は、図面の中にＸ軸、Ｙ軸、Ｚ軸を示す。このとき、Ｙ軸に沿った方向を第１方向、Ｙ軸方向と直交するＺ軸に沿った方向を第２方向、Ｙ軸方向及びＺ軸方向と直行するＸ軸に沿った方向を第３方向というものとする。なお、他の図面においても、Ｘ軸、Ｙ軸、Ｚ軸が同様に示されるときは、同様に扱うものとする。

【0045】

透過偏光板１４２は、第１方向に透過偏光軸を有している。第１反射偏光板１４４は、第１方向と直交する第２方向に透過偏光軸を有し、第１方向に反射偏光軸を有するように配置される。すなわち、透過偏光板１４２と第１反射偏光板１４４とは、透過偏光軸がクロスニコルに配置されている。第２反射偏光板１４６は、第１方向と交差する第２方向に透過偏光軸を有し、第１方向に反射偏光軸を有するように配置される。すなわち、第１反射偏光板１４４と第２反射偏光板１４６とは、透過偏光軸が平行となるように配置されている。

【0046】

図８は、また、液晶表示パネル１１０の液晶層１２８が、横電界方式である場合を示す。この場合、液晶分子は、画素電極１２６に所定の電圧が印加されないとき第１方向に配向し、所定の電圧が印加されたとき第２方向に配向するものとする。

【0047】

光源１１８から出射された光は、光変調素子１２０で散乱され、その一部は液晶表示パネル１１０側に照射される。その照射光の内、第１反射偏光板１４４の透過偏光軸と平行な光の偏光成分が透過し、液晶表示パネル１１０に照射される。一方、第１反射偏光板１４４で反射された光は、偏光軸が第２反射偏光板１４６の透過偏光軸と直交するので、撮像素子１０４側へは透過しない。したがって、撮像素子１０４は照明ユニット１１２が出射する照明光の影響を受けにくい状態に配置される。

【0048】

液晶表示パネル１１０に対する照明光は、液晶層１２８に入射する。液晶表示パネル１１０では、各画素に画素電極１２６が設けられている。このとき、画素電極１２６に液晶分子を配向させる電圧が印加されない画素では、照明光の偏光軸が捩れないので、偏光方向が透過偏光板１４２の透過偏光軸と直交した状態にあり、視認側へは出射されない。一方、画素電極１２６に、液晶分子を配向させる電圧が印加された画素では、照射光が液晶層１２８を透過するとき、偏光軸が９０度捩れることにより、偏光軸が透過偏光板１４２の透過偏光軸と平行になり、視認側に出射される。このように、液晶表示装置１０２は、個々の画素の電圧を制御することにより、表示領域１１４に画像を表示する。このとき、液晶表示装置１０２には、第２反射偏光板１４６が設けられているので、表示領域１１４に画像を表示するときでも、撮像素子１０４に影響を与えないようにすることができる。

【0049】

図９は、撮像素子１０４と重なる第１領域２０１に相当する領域に配置された画素に液晶分子を配向させる電圧が印加され、光変調素子１２０は、全体が散乱状態に制御されている状態を示す。第１領域２０１に相当する領域に配置された画素を透過する外光は、液晶層１２８で偏光軸が９０度捩れる。その結果、液晶表示パネル１１０を透過した透過光の偏光軸は、第１反射偏光板１４４の透過偏光軸と平行になる。この状態では、外光が光変調素子１２０に照射されることになる。しかし、光変調素子１２０は散乱状態に制御されているため、外光は撮像素子１０４に直達しない。

【0050】

図１０は、撮像素子１０４と重なる第１領域２０１に相当する領域に配置された画素に液晶分子を配向させる電圧が印加され、光変調素子１２０は、第１領域２０１が透明状態に制御され、第２領域２０２が散乱状態に制御されている状態を示す。この状態では、透過偏光板１４２を透過した光は偏光軸が９０度捩れ、液晶表示パネル１１０を通過した光は第１反射偏光板１４４の透過偏光軸と同じ方向に偏光される。光変調素子１２０は、第１領域が透明状態に制御されているので、第１反射偏光板１４４を透過した光は、光変調素子１２０を透過する。さらに、第２反射偏光板１４６は、透過偏光軸が第１反射偏光板１４４と平行に配置されているので、光変調素子１２０を透過した光は撮像素子１０４に入射する。それにより、撮像素子１０４には外光が入射することとなり、液晶表示パネル１１０の前方を撮像することができる。

【0051】

このように、本発明の一実施形態によれば、照明ユニット１１２と撮像素子１０４との間に第２反射偏光板１４６を配置することにより、撮像素子１０４に照明光の影響を与えないようにすることができる。また、液晶表示パネル１１０を挟んで透過偏光板１４２と第１反射偏光板１４４とを、透過偏光軸をクロスニコルに配置すると共に、光変調素子１２０の散乱状態を画素と同期して制御することにより、画像を表示しつつ、撮像素子１０４で液晶表示パネル１１０の前方を撮像することができる。

【0052】

図１１は、電子機器１００の機能的構成の一例をブロック図として示す。電子機器１００は、液晶表示装置１０２、撮像素子１０４、制御回路１４８、画像処理回路１５０、照明制御回路１５２、撮像素子制御回路１５４、読み出し回路１５６、記憶回路１５８、タッチセンサ制御回路１６０を組む。液晶表示装置１０２は、液晶表示パネル１１０、照明ユニット１１２を含む。また、液晶表示装置１０２は、液晶表示パネル１１０に重ねて配置されたタッチセンサ１１１を含む。タッチセンサ１１１の機能は、液晶表示パネル１１０に内蔵されていてもよい。

【0053】

制御回路１４８は、オペレーティングシステムに基づき動作する。制御回路１４８は、記憶回路１５８からデータを読み出し、画像処理回路１５０が液晶表示パネル１１０に画像を表示するように制御する。例えば、制御回路１４８は、操作画面のデータを画像処理回路１５０に出力する。画像処理回路１５０は、操作画面データに基づいて液晶表示パネル１１０に操作画面を表示するように動作する。また、制御回路１４８には、電気通信回線を介して取得されたビデオ信号が入力される。制御回路１４８は画像処理回路１５０にビデオ信号を出力し、画像処理回路１５０は液晶表示パネル１１０にビデオ信号を出力して画像を表示させる。制御回路１４８は、また、記憶回路１５８からアプリケーションプログラムを読み出し、画像処理回路１５０にアプリケーションプログラムを実行するデータを出力する。画像処理回路１５０は、アプリケーションプログラムが実行されるときに表示される画像を液晶表示パネル１１０に出力する。制御回路１４８は、さらに、画像処理回路１５０に画像を表示されるデータを出力するとき、これと同期するように照明制御回路１５２に照明ユニット１１２を駆動する命令を出力する。

【0054】

タッチセンサ制御回路１６０は、タッチセンサ１１１を駆動し、検出信号を制御回路１４８に出力する。制御回路１４８は、タッチセンサ制御回路１６０から出力される検出信号に基づき、操作画面の内容を書き換えるデータを画像処理回路１５０に出力し、また、アプリケーションプログラムの実行状態を制御する。

【0055】

例えば、タッチセンサ制御回路１６０によって、撮像を行うアプリケーションプログラムの実行が選択されたとき、制御回路１４８は、画像処理回路１５０に、液晶表示装置１０２が撮像モードに遷移する命令を出力する。画像処理回路１５０は、撮像素子１０４と重なる領域の画素を白表示とする画像データを出力する。制御回路１４８は、また、照明制御回路１５２に撮像モードに遷移する命令を出力する。照明制御回路１５２は、撮像素子１０４と重なる領域が透明状態となるように照明ユニット１１２を制御する。また、制御回路１４８は、画像処理回路１５０及び照明制御回路１５２の動作と同期するように、撮像素子制御回路１５４に制御信号を出力する。撮像素子制御回路１５４は、制御信号に基づいて撮像素子１０４を駆動する。

【0056】

撮像モードにおける、液晶表示装置１０２及び撮像素子１０４の動作は、図５及び図７を参照して説明される動作と同様である。撮像素子１０４で撮像された画像が、読み出し回路１５６によって読み出され、記憶回路１５８に記憶される。また、読み出し回路１５６によって読み出された画像データは、制御回路１４８に直接的に入力され、画像処理回路１５０によってリアルタイムに液晶表示装置１０２によって表示されてもよい。

【0057】

制御回路１４８は、画像処理回路１５０、照明制御回路１５２、読み出し回路１５６、タッチセンサ制御回路１６０、撮像素子制御回路１５４は、半導体集積回路によって形成される演算処理装置によって実現される。これらの各機能ブロックは、一つのＣＰＵの中に集積されていてもよいし、マイクロプロセッサ、画像処理プロセッサ等の複数の専用集積回路がマザーボードに実装されて実現されていてもよい。また、記憶回路１５８は、半導体メモリによって実現される。半導体メモリとしては、揮発性のダイナミックメモリ、不揮性のフラッシュメモリによって実現される。

【0058】

以上のように、本発明の一実施形態によれば、照明ユニット１１２に光変調素子１２０を用いることにより、液晶表示パネル１１０を照明する領域と照明しない領域とを設けることはできる。光変調素子１２０は、液晶表示パネル１１０を照明しない領域を透明状態とすることにより、この領域に重ねて配置される撮像素子１０４によって、液晶表示パネル１１０の前方を撮像可能な状態を形成することができる。このような構成により、本発明の一実施形態に係る電子機器１００は、撮像素子１０４を液晶表示パネル１１０の背面に配置することができる。それにより、本発明の一実施形態に係る電子機器１００は、狭額縁化を図ることができる。

【0059】

なお、本発明の一実施毛形態において電子機器１００は、撮像素子１０４に代えて、光センサ（照度センサ、環境光センサ）が配置されてもよい。また、本発明の一実施毛形態において電子機器１００は、光変調素子１２０が透過状態に制御される領域を複数設け、撮像素子１０４及び光センサをそれぞれ配置してもよい。それにより、筐体１０８のフレーム部分に撮像素子１０４、光センサを配置しなくても済むので、狭額縁化を図ることができる。

【符号の説明】

【0060】

１００・・・電子機器、１０２・・・液晶表示装置、１０４、１０５・・・撮像素子、１０６・・・カバーパネル、１０８・・・筐体、１１０・・・液晶表示パネル、１１１・・・タッチセンサ、１１２・・・照明ユニット、１１４・・・表示領域、１１６・・・非表示領域、１１８・・・光源、１２０・・・光変調素子、１２２・・・第１基板、１２４・・・第２基板、１２６・・・画素電極、１２８・・・液晶層、１３０・・・第３基板、１３２・・・第４基板、１３４・・・調光層、１３６・・・液晶分子、１３８・・・第１電極、１４０・・・第２電極、１４２・・・透過偏光板、１４４・・・第１反射偏光板、１４６・・・第２反射偏光板、１４８・・・制御回路、１５０・・・画像処理回路、１５２・・・照明制御回路、１５４・・・撮像素子制御回路、１５６・・・読み出し回路、１５８・・・記憶回路、１６０・・・タッチセンサ制御回路、２０１・・・第１領域、２０２・・・第２領域

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】