特開 2024-58802 表示装置およびシステム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024058802

(43)【公開日】2024-04-30

(54)【発明の名称】表示装置およびシステム

(51)【国際特許分類】

   H04N 7/14 20060101AFI20240422BHJP

   G09F 9/00 20060101ALI20240422BHJP

   G09G 5/00 20060101ALI20240422BHJP

   H04N 23/90 20230101ALI20240422BHJP

   H04N 23/611 20230101ALI20240422BHJP

   G06F 3/048 20130101ALI20240422BHJP

【ＦＩ】

H04N7/14

G09F9/00 366Z

G09G5/00 550C

G09G5/00 555D

G09G5/00 510V

H04N23/90

H04N23/611

G06F3/048

【審査請求】未請求

【請求項の数】8

【出願形態】ＯＬ

(21)【出願番号】P 2022166128

(22)【出願日】2022-10-17

(71)【出願人】

【識別番号】502356528

【氏名又は名称】株式会社ジャパンディスプレイ

(74)【代理人】

【識別番号】110001737

【氏名又は名称】弁理士法人スズエ国際特許事務所

(72)【発明者】

【氏名】冨沢 一成

(72)【発明者】

【氏名】後藤 尚志

(72)【発明者】

【氏名】原田 勉

(72)【発明者】

【氏名】小橋 淳二

【テーマコード（参考）】

5C122

5C164

5C182

5E555

5G435

【Ｆターム（参考）】

5C122EA42

5C122FA18

5C122FH11

5C122FH14

5C122FK12

5C122GC52

5C122GE06

5C122GE11

5C122HA86

5C164FA09

5C164FA10

5C164GA08

5C164VA05P

5C164VA32P

5C182AA02

5C182AB01

5C182AB02

5C182AB04

5C182AB08

5C182BA06

5C182BA14

5C182BA55

5C182BA56

5C182BB01

5C182BB11

5C182BC01

5C182BC26

5C182CB42

5C182CC24

5C182DA70

5E555AA26

5E555BA04

5E555BB04

5E555CA42

5E555EA22

5E555FA00

5G435AA01

5G435BB01

5G435EE49

(57)【要約】

【課題】画面に表示された画像を見ている人物と、画像に表示された人物との間の視線を一致させること。
【解決手段】一実施形態に係る表示装置は、画像を表示する表示領域を有する表示パネルと、表示領域と平面視において重なる位置に設けられ、表示装置に対向するユーザを被写体として撮影する複数のカメラと、表示領域に表示される画像に含まれる人物の目の位置に基づいて、複数のカメラのうちの１つを、被写体を撮影するカメラとして選択する制御部と、を備える。
【選択図】 図６

【特許請求の範囲】

【請求項1】

画像を表示する表示領域を有する表示パネルと、
前記表示領域と平面視において重なる位置に設けられ、表示装置に対向するユーザを被写体として撮影する複数のカメラと、
前記表示領域に表示される画像に含まれる人物の目の位置に基づいて、前記複数のカメラのうちの１つを、前記被写体を撮影するカメラとして選択する制御部と、を備える、
表示装置。

【請求項2】

前記制御部は、
前記表示領域に表示される画像に含まれる人物の右目と左目の間に位置するカメラを、前記被写体を撮影するカメラとして選択する、
請求項１に記載の表示装置。

【請求項3】

前記制御部は、
前記表示領域に表示される画像に含まれる人物の右目と左目を結ぶ直線の中点の最も近くに位置するカメラを、前記被写体を撮影するカメラとして選択する、
請求項２に記載の表示装置。

【請求項4】

外部装置と通信する通信部をさらに備え、
前記制御部は、
前記外部装置により送信された画像に含まれる前記外部装置のユーザの目の位置に基づいて、前記複数のカメラのうちの１つを、前記被写体を撮影するカメラとして選択し、
前記選択したカメラにより撮影された前記被写体を含む画像を前記外部装置に送信する、
請求項１に記載の表示装置。

【請求項5】

前記制御部は、
前記複数のカメラのうちの１つを用いて、前記被写体の顔の位置を特定し、
前記特定した被写体の顔の右目と左目の間の位置から前記表示パネルに向けて垂直に延びる仮想線と交差する位置に設けられたカメラを、前記被写体を撮影するカメラとして選択する、
請求項１に記載の表示装置。

【請求項6】

前記複数のカメラは、
前記表示領域のうちの前記人物が表示される可能性が高い第１領域と平面視において重なる位置に密に設けられ、前記表示領域のうちの前記人物が表示される可能性が低い第２領域と平面視において重なる位置に疎に設けられる、
請求項１に記載の表示装置。

【請求項7】

前記表示パネルは、自発光型の表示素子を含む表示パネルである、
請求項１に記載の表示装置。

【請求項8】

第１ユーザにより使用される第１表示装置と、第２ユーザにより使用される第２表示装置とを含み、前記第１表示装置と前記第２表示装置とが通信可能に接続されるシステムであって、
前記第１表示装置は、
画像を表示する第１表示領域を有する第１表示パネルと、
前記第１表示領域と平面視において重なる位置に設けられ、前記第１ユーザを撮影する複数の第１カメラと、
前記第１表示領域に表示される画像に含まれる前記第２ユーザの目の位置に基づいて、前記複数の第１カメラのうちの１つを、前記第１ユーザを撮影するカメラとして選択し、前記選択したカメラにより撮影された前記第１ユーザを含む画像を前記第２表示装置に送信する第１制御部と、を備え、
前記第２表示装置は、
画像を表示する第２表示領域を有する第２表示パネルと、
前記第２表示領域と平面視において重なる位置に設けられ、前記第２ユーザを撮影する複数の第２カメラと、
前記第２表示領域に表示される画像に含まれる前記第１ユーザの目の位置に基づいて、前記複数の第２カメラのうちの１つを、前記第２ユーザを撮影するカメラとして選択し、前記選択したカメラにより撮影された前記第２ユーザを含む画像を前記第１表示装置に送信する第２制御部と、を備える、
システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明の実施形態は、表示装置およびシステムに関する。

【背景技術】

【0002】

近年、インカメラを有する表示装置を利用したＷｅｂ会議やビデオ通話が普及してきている。このようなＷｅｂ会議やビデオ通話においては、画面に表示された画像（映像）を見ている人物と、画面に表示された人物との間で視線が合わなくなってしまうことがある。

【0003】

このため、画面に表示された画像を見ている人物と、画像に表示された人物との間の視線を一致させることが可能な技術の実現が望まれている。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】国際公開第２０２１／１１１９５５号

【発明の概要】

【発明が解決しようとする課題】

【0005】

本発明が解決しようとする課題は、画面に表示された画像を見ている人物と、画像に表示された人物との間の視線を一致させることが可能な表示装置およびシステムを提供することである。

【課題を解決するための手段】

【0006】

一実施形態に係る表示装置は、画像を表示する表示領域を有する表示パネルと、前記表示領域と平面視において重なる位置に設けられ、表示装置に対向するユーザを被写体として撮影する複数のカメラと、前記表示領域に表示される画像に含まれる人物の目の位置に基づいて、前記複数のカメラのうちの１つを、前記被写体を撮影するカメラとして選択する制御部と、を備える。

【0007】

一実施形態に係るシステムは、第１ユーザにより使用される第１表示装置と、第２ユーザにより使用される第２表示装置とを含み、前記第１表示装置と前記第２表示装置とが通信可能に接続される。前記第１表示装置は、画像を表示する第１表示領域を有する第１表示パネルと、前記第１表示領域と平面視において重なる位置に設けられ、前記第１ユーザを撮影する複数の第１カメラと、前記第１表示領域に表示される画像に含まれる前記第２ユーザの目の位置に基づいて、前記複数の第１カメラのうちの１つを、前記第１ユーザを撮影するカメラとして選択し、前記選択したカメラにより撮影された前記第１ユーザを含む画像を前記第２表示装置に送信する第１制御部と、を備える。前記第２表示装置は、画像を表示する第２表示領域を有する第２表示パネルと、前記第２表示領域と平面視において重なる位置に設けられ、前記第２ユーザを撮影する複数の第２カメラと、前記第２表示領域に表示される画像に含まれる前記第１ユーザの目の位置に基づいて、前記複数の第２カメラのうちの１つを、前記第２ユーザを撮影するカメラとして選択し、前記選択したカメラにより撮影された前記第２ユーザを含む画像を前記第１表示装置に送信する第２制御部と、を備える。

【図面の簡単な説明】

【0008】

【図1】図１は、一実施形態に係る表示装置の概略的な斜視図である。

【図2】図２は、同実施形態に係る表示装置の概略的な断面図である。

【図3】図３は、副画素のレイアウトの一例を示す平面図である。

【図4】図４は、比較例に係る表示装置の動作例を説明するための図である。

【図5】図５は、同実施形態に係る表示装置の構成例を示すブロック図である。

【図6】図６は、同実施形態に係る表示装置の動作例を説明するための図である。

【図7】図７は、同実施形態に係る表示装置の動作例を説明するための図である。

【図8】図８は、同実施形態に係る表示装置に設けられるカメラのレイアウトの一例を示す平面図である。

【図9】図９は、同実施形態に係る表示装置に設けられるカメラのレイアウトの一例を示す平面図である。

【図10】図１０は、同実施形態に係る表示装置に設けられるカメラのレイアウトの一例を示す平面図である。

【図11】図１１は、同実施形態に係る表示装置における初期設定動作を説明するための図である。

【図12】図１２は、同実施形態に係る表示装置の適用例を説明するための図である。

【発明を実施するための形態】

【0009】

以下、図面を参照して実施形態を説明する。
なお、開示はあくまで一例にすぎず、以下の実施形態に記載した内容により発明が限定されるものではない。当業者が容易に想到し得る変形は、当然に開示の範囲に含まれる。説明をより明確にするため、図面において、各部分のサイズ、形状等を実際の実施態様に対して変更して模式的に表す場合もある。複数の図面において、対応する要素には同じ参照数字を付して、詳細な説明を省略する場合もある。

【0010】

図１は、一実施形態に係る表示装置１の概略的な斜視図である。本実施形態においては、図１に示すように、第１方向Ｘ、第２方向Ｙおよび第３方向Ｚを定義する。第１方向Ｘ、第２方向Ｙおよび第３方向Ｚは、例えば互いに垂直に交わる方向であるが、垂直以外の角度で交わってもよい。第３方向Ｚの矢印が示す方向を上または上方向と称し、その反対方向を下または下方向と称することがある。また、第３方向Ｚと平行に表示装置１やその構成要素を見ることを平面視と称する。

【0011】

表示装置１は、筐体２と、表示パネル３と、カバーガラス４とを備えている。表示装置１は、有機発光ダイオード（ＯＬＥＤ）やマイクロＬＥＤといった自発光型の表示素子を備える表示装置であり、例えば、スマートフォンやタブレット端末、モニター装置、パソコン、テレビ等、種々様々な電子機器に転用することができる。

【0012】

表示パネル３は、図１に示す第１面Ｆ１と、第１面の反対側の第２面Ｆ２（図２参照）とが略平行なフラットパネル型の表示パネルであり、筐体２によって支持されている。カバーガラス４は、表示パネル３を覆っている。表示パネル３は、多数の画素を有した表示領域ＤＡを有している。

【0013】

図１の例において、表示領域ＤＡは、第２方向Ｙと平行な一対の長辺Ｓａ１，Ｓａ２と、第１方向Ｘと平行な一対の短辺Ｓｂ１，Ｓｂ２とを有する長方形状である。筐体２、表示パネル３およびカバーガラス４も、表示領域ＤＡと同様の長方形状である。但し、表示領域ＤＡ、筐体２、表示パネル３およびカバーガラス４は、長方形状に限られず、正方形状、正円形状、楕円形状、等の他の形状であってもよい。

【0014】

表示装置１においては、複数のカメラ５が、平面視において表示領域ＤＡと重なる位置に配置されている。カメラ５は、筐体２と表示パネル３との間の空間内に配置される。カメラ５は、第１面Ｆ１側の画像を撮像するものであり、インカメラや前面カメラ等と称されてもよい。

【0015】

図２は、表示装置１の概略的な断面図である。筐体２は、底部２ａと、底部２ａの周縁から第３方向Ｚに突出する側部２ｂとを有している。表示パネル３は、底部２ａから離間した状態で、例えば側部２ｂによって支持されている。

【0016】

カバーガラス４は、例えば側部２ｂによって支持され、表示パネル３の第１面Ｆ１を覆っている。カバーガラス４は、第１面Ｆ１に接着されてもよい。カメラ５は、表示パネル３の第２面Ｆ２と、筐体２の底部２ａとの間に配置されている。例えば、カメラ５は、筐体２の底部２ａに固定される。

【0017】

図２に示すように、カメラ５は、レンズユニット５ａと、イメージセンサ５ｂと、レンズユニット５ａを支持するホルダ５ｃと、を備えている。レンズユニット５ａは、１つまたは複数のレンズを含み、第１面Ｆ１から第２面Ｆ２に向けて表示パネル３の透過領域ＴＡ（図３参照）を透過する光Ｌを集光する。イメージセンサ５ｂは、例えばＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）を有するセンサであり、レンズユニット５ａにより集光された光Ｌに基づき画像データを生成する。

【0018】

図３は、表示パネル３が備える副画素ＳＰのレイアウトの一例を示す概略的な平面図である。図３に示すように、表示パネル３の表示領域ＤＡには、副画素ＳＰＲ，ＳＰＧ，ＳＰＢと、透過領域ＴＡとが千鳥状に配置されている。副画素ＳＰＲは、赤波長に対応した光を出射する自発光型の表示素子を備える。副画素ＳＰＧは、緑波長に対応した光を出射する自発光型の表示素子を備える。副画素ＳＰＢは、青波長に対応した光を出射する自発光型の表示素子を備える。透過領域ＴＡは、可視光を透過する領域であり、遮光性を有した配線等の要素が配置されない領域である。透過領域ＴＡと重なる位置には、カメラ５が配置されている。なお、副画素ＳＰＲ，ＳＰＧ，ＳＰＢおよび透過領域ＴＡのレイアウトや形状は、図３に示したものに限定されず、他の種々の変形を適用し得る。

【0019】

ところで、近年、インカメラを有する表示装置を利用したＷｅｂ会議やビデオ通話が普及してきている。このようなＷｅｂ会議やビデオ通話においては、画面に表示された画像（映像）を見ている人物と、画面に表示された人物との間で視線が合わなくなってしまうことがある。

【0020】

図４は、画面中央に１つのカメラ（インカメラ）５０が配置された表示装置１００を利用して、Ｗｅｂ会議またはビデオ通話を行う場合を説明するための図である。
図４においては、ユーザＵ１が表示装置１００Ａを所持し、ユーザＵ２が表示装置１００Ｂを所持している。表示装置１００Ａ内のカメラ５０Ａにより撮影された画像（つまり、ユーザＵ１を含む画像）は、ネットワークを介して表示装置１００Ｂに送信される。表示装置１００Ｂ内のカメラ５０Ｂにより撮影された画像（つまり、ユーザＵ２を含む画像）は、ネットワークを介して表示装置１００Ａに送信される。

【0021】

なお、図４においては、ユーザＵ１の顔が、表示装置１００Ａ内に配置されたカメラ５０Ａの正面に位置し、ユーザＵ２の顔が、表示装置１００Ｂ内に配置されたカメラ５０Ｂの正面より下側にずれて位置している場合を想定する。

【0022】

ここでは、説明の便宜上、まず、表示装置１００Ｂに設けられたカメラ５０Ｂにより、当該カメラ５０Ｂの正面より下側に位置するユーザＵ２であって、カメラ目線のユーザＵ２が撮影された場合を想定する。撮影された画像は、ネットワークを介して、表示装置１００Ｂから表示装置１００Ａに送信される。

【0023】

表示装置１００Ａは、表示装置１００Ｂから送信されてくる上記した画像を受信し、当該受信した画像を画面に表示する。この場合、図４の左側に示すように、ユーザＵ２の顔は、表示装置１００Ａの画面下側領域に表示される。ユーザＵ１は、カメラ５０Ａの正面から、表示装置１００Ａの画面下側領域に表示されたユーザＵ２の顔を見るように、当該画面下側領域に視線を向ける。具体的には、図４の左側に示すように、ユーザＵ１は、カメラ目線ＳＬＣと角度θをなす方向に視線ＳＬ１を向ける。これによれば、ユーザＵ１は、表示装置１００Ａの画面下側領域に表示されたユーザＵ２と視線を合わせることができる。換言すると、ユーザＵ１は、自身の視線ＳＬ１と、ユーザＵ２の視線ＳＬ２とを一致させることができる。

【0024】

一方、上記したように、ユーザＵ１の視線ＳＬ１は、カメラ目線ＳＬＣと角度θをなす方向を向いているため、ユーザＵ１の視線ＳＬ１とカメラ目線ＳＬＣとは一致せず、カメラ５０Ａは、カメラ目線のユーザＵ１を撮影することができない。このため、カメラ５０Ａは、当該カメラ５０Ａの正面に位置するユーザＵ１の顔であって、カメラ目線でないユーザＵ１の顔を撮影する。撮影された画像は、ネットワークを介して、表示装置１００Ａから表示装置１００Ｂに送信される。

【0025】

表示装置１００Ｂは、表示装置１００Ａから送信されてくる上記した画像を受信し、当該受信した画像を画面に表示する。この場合、図４の右側に示すように、ユーザＵ１の顔は、表示装置１００Ｂの画面中央領域に表示される。ユーザＵ２は、カメラ５０Ｂの正面より下側の位置から、表示装置１００Ｂの画面中央領域に表示されたユーザＵ１の顔を見るように、当該画面中央領域に視線を向ける。カメラ５０Ｂは表示装置１００Ｂの画面中央に配置されているため、ユーザＵ２の視線ＳＬ２と、カメラ目線ＳＬＣとは一致する。しかしながら、上記したように、ユーザＵ１の視線ＳＬ１は、カメラ目線ＳＬＣと角度θをなす方向を向いているため、当該ユーザＵ１の視線ＳＬ１と、ユーザＵ２の視線ＳＬ２（カメラ目線ＳＬＣ）とは一致しない。つまり、ユーザＵ２はユーザＵ１と視線を合わせることができない。

【0026】

以上のように、画面中央に配置された１つのカメラ５０を有する表示装置１００を利用して、Ｗｅｂ会議またはビデオ通話を行う場合、一方のユーザ（ユーザＵ２）の顔がカメラ正面からずれてしまうと、他方のユーザ（ユーザＵ１）は一方のユーザと視線を合わせるために、カメラ目線でなくなるため（或いはカメラがユーザの視線を捉えない状態となるため）、その結果、一方のユーザは他方のユーザと視線を合わせることができなくなってしまう。

【0027】

そこで、本実施形態に係る表示装置１は、このような問題を解消し得る構成を提案する。具体的には、本実施形態に係る表示装置１は、複数のカメラ５を備え、画面に表示される通信先の相手の位置に応じて撮影に使用するカメラを切り替える（選択する）構成を有する。

【0028】

図５は、本実施形態に係る表示装置１の構成例を示すブロック図である。図５に示すように、表示装置１は、表示パネル３と、複数のカメラ５と、コントローラ１０（制御部）と、通信部２０とを備えている。表示パネル３およびカメラ５については既に説明したため、ここではその詳しい説明を省略する。

【0029】

コントローラ１０は、表示装置１内の各部の動作を制御するプロセッサである。コントローラ１０は、表示制御部１１と、画像認識部１２と、カメラ選択部１３とを含む。

【0030】

表示制御部１１は、通信部２０を介して外部装置（例えば、Ｗｅｂ会議やビデオ通話の通信先の相手が所持する表示装置１）より受信された画像等、各種画像を表示パネル３に表示するための制御を行う。画像認識部１２は、表示パネル３に表示される画像に対して画像認識処理を実行し、当該画像に含まれる人物の顔や、当該人物の右目と左目の表示パネル３上での位置を特定する。カメラ選択部１３は、画像認識部１２により特定された右目と左目の間に位置するカメラ５、より詳しくは、右目と左目を結ぶ直線の中点の最も近くに位置するカメラ５を、被写体を撮影するためのカメラとして選択する。

【0031】

通信部２０は、外部装置（例えば、Ｗｅｂ会議やビデオ通話の通話先の相手が所持する表示装置１）とネットワークを介して無線通信を行うための通信インタフェースである。Ｗｅｂ会議またはビデオ通話の際にカメラ５により撮影された画像は、通信部２０を介して、通信先の相手が所持する表示装置１に送信される。

【0032】

次に、図６を参照して、本実施形態に係る表示装置１を利用して、Ｗｅｂ会議またはビデオ通話が行われる場合の当該表示装置１の動作について説明する。
図６においては、ユーザＵ１が表示装置１Ａを所持し、ユーザＵ２が表示装置１Ｂを所持している。表示装置１Ａ内のカメラ５Ａにより撮影された画像（つまり、表示装置１Ａに対向するユーザＵ１を含む画像）は、ネットワークを介して表示装置１Ｂに送信される。表示装置１Ｂ内のカメラ５Ｂにより撮影された画像（つまり、表示装置１Ｂに対向するユーザＵ２を含む画像）は、ネットワークを介して表示装置１Ａに送信される。

【0033】

なお、図６においては、ユーザＵ１の顔が、表示装置１Ａの画面中央に配置されたカメラ５Ａ（図６においてドットが付されたカメラ５Ａ）の正面に位置し、ユーザＵ２の顔が、表示装置１Ｂの画面中央に配置されたカメラ５Ｂ（図６においてドットが付されたカメラ５Ｂ）の正面より下側にずれて位置している場合を想定する。

【0034】

ここでは、説明の便宜上、まず、表示装置１Ｂに設けられた複数のカメラ５Ｂのうちの１つにより、当該カメラ５Ｂの正面より下側に位置するユーザＵ２であって、カメラ目線のユーザＵ２が撮影された場合を想定する。撮影された画像は、ネットワークを介して、表示装置１Ｂから表示装置１Ａに送信される。

【0035】

表示装置１Ａは、表示装置１Ｂから送信されてくる上記した画像を受信し、当該受信した画像を画面に表示する。この場合、図６の左側に示すように、ユーザＵ２の顔は、表示装置１Ａの画面下側領域に表示される。表示装置１Ａは、画面に表示される画像に対して画像認識処理を実行し、当該画面に表示されたユーザＵ２の右目と左目の当該画面上での位置を特定する。そして、表示装置１Ａは、画面に表示されたユーザＵ２の右目と左目の間に位置するカメラ５Ａを、ユーザＵ１を撮影するためのカメラとして選択する。以下では、表示装置１Ａに設けられた複数のカメラ５Ａのうち、ユーザＵ１を撮影するためのカメラとして選択されたカメラ５Ａ（図６において斜線が付されたカメラ５Ａ）を、「選択カメラ５Ａ」と称する。

【0036】

ユーザＵ１は、画面中央に配置されたカメラ５Ａの正面から、表示装置１Ａの画面下側領域に表示されたユーザＵ２の顔を見るように、当該画面下側領域に視線を向けることで、カメラ目線のユーザＵ２と視線を合わせることができる。換言すると、ユーザＵ１は、表示装置１Ａの画面下側領域を見ることにより、自身の視線ＳＬ１と、ユーザＵ２の視線ＳＬ２とを一致させることができる。

【0037】

表示装置１Ａは、この時のユーザＵ１の様子を、選択カメラ５Ａにより撮影する。これによれば、図４を用いて説明した場合とは異なり、表示装置１Ａ内の選択カメラ５Ａは、当該選択カメラ５Ａの正面より上側に位置するユーザＵ１であって、カメラ目線のユーザＵ１を撮影することができる。つまり、選択カメラ５Ａは、ユーザＵ１の視線ＳＬ１とカメラ目線ＳＬＣとが一致した状態のユーザＵ１を撮影することができる。撮影された画像は、ネットワークを介して、表示装置１Ａから表示装置１Ｂに送信される。

【0038】

表示装置１Ｂは、表示装置１Ａから送信されてくる上記した画像を受信し、当該受信した画像を画面に表示する。この場合、図６の右側に示すように、ユーザＵ１の顔は、表示装置１Ｂの画面上側領域に表示される。表示装置１Ｂは、画面に表示される画像に対して画像認識処理を実行し、当該画面に表示されたユーザＵ１の右目と左目の当該画面上での位置を特定する。そして、表示装置１Ｂは、画面に表示されたユーザＵ１の右目と左目の間に位置するカメラ５Ｂを、ユーザＵ２を撮影するためのカメラとして選択する。以下では、表示装置１Ｂに設けられた複数のカメラ５Ｂのうち、ユーザＵ２を撮影するためのカメラとして選択されたカメラ５Ｂ（図６において斜線が付されたカメラ５Ｂ）を、「選択カメラ５Ｂ」と称する。

【0039】

上記したように、表示装置１Ａの選択カメラ５Ａによれば、カメラ目線のユーザＵ１が撮影されているため、ユーザＵ２は、表示装置１Ｂの画面上側領域に表示されたユーザＵ１の顔を見るように、当該画面上側領域に視線を向けることで、当該カメラ目線のユーザＵ１と視線を合わせることができる。換言すると、ユーザＵ２は、画面上側領域を見ることにより、自身の視線ＳＬ２と、ユーザＵ１の視線ＳＬ１とを一致させることができる。

【0040】

なお、本実施形態に係る表示装置１は、図６に示す一連の動作の途中で、通信先の相手の顔の位置がずれたとしても、当該顔の右目と左目の間に位置するカメラ５を追従して選択する。例えば、図７に示すように、通信先の相手の顔の位置が左から右にずれた場合、表示装置１は、図中左側の顔（つまり、位置がずれる前の顔）の右目と左目の間に位置するカメラであって、被写体を撮影するカメラとして選択中のカメラ５ｓの選択を取り止め、図中右側の顔（つまり、位置がずれた後の顔）の右目と左目の間に位置するカメラ５ｔを、被写体を撮影するカメラとして新たに選択する。

【0041】

以上説明したように、本実施形態に係る表示装置１は、ユーザの視線が向く位置に設けられたカメラ５（具体的には、画面に表示された人物の右目と左目の間に位置するカメラ５）を、当該ユーザを撮影するカメラとして選択するため、カメラ目線のユーザを常に撮影することが可能である。このため、本実施形態に係る表示装置１を利用して、Ｗｅｂ会議やビデオ通話を行う場合、Ｗｅｂ会議やビデオ通話の途中で、一方のユーザ（ユーザＵ２）の顔の位置がずれ、他方のユーザ（ユーザＵ１）が一方のユーザと視線を合わせるために視線を移動させたとしても、表示装置１はカメラ目線の他方のユーザを撮影することが可能である。これによれば、一方のユーザと他方のユーザとの視線を常に一致させることが可能である。

【0042】

なお、本実施形態に係る表示装置１が、例えば７インチのスマートフォンである場合、当該表示装置１には、図８（ａ）に示すように、８×１８個のカメラ５を、表示領域ＤＡと重なる位置全体に敷き詰めるように設けてもよいし、図８（ｂ）に示すように、３×５個のカメラ５を、間隔を空けて設けてもよい。なお、図８（ｂ）に示す構成において、第１方向Ｘに隣接する２つのカメラ５の間隔と、第２方向Ｙに隣接する２つのカメラ５の間隔とは、同じであってもよいし、異なっていてもよい。図８（ａ）に示す構成は、多数のカメラ５を設けるため、図８（ｂ）に示す構成より高コストになってしまうものの、通信先の相手の顔が画面上のどの位置に表示されたとしても、画面上に表示された顔の右目と左目の間に位置するカメラ５を選択することが可能なため、高精度な視線一致を実現させることが可能である。一方、図８（ｂ）に示す構成は、図８（ａ）に示す構成よりカメラ５の個数を削減しているため、視線一致の精度は多少低下するものの、低コストに視線一致を実現させることが可能である。

【0043】

また、本実施形態に係る表示装置１が、例えば１３インチのモニター装置である場合、当該表示装置１には、図９（ａ）に示すように、２０×１２個のカメラ５を、表示領域ＤＡと重なる位置全体に敷き詰めるように設けてもよいし、図９（ｂ）に示すように、７×４個のカメラ５を、間隔を空けて設けてもよい。なお、図９（ｂ）に示す構成において、第１方向Ｘに隣接する２つのカメラ５の間隔と、第２方向Ｙに隣接する２つのカメラ５の間隔とは、同じであってもよいし、異なっていてもよい。図９（ａ）に示す構成は、多数のカメラ５を設けるため、図９（ｂ）に示す構成より高コストになってしまうものの、通信先の相手の顔が画面上のどの位置に表示されたとしても、画面上に表示された顔の右目と左目の間に位置するカメラ５を選択することが可能なため、高精度な視線一致を実現させることが可能である。一方、図９（ｂ）に示す構成は、図９（ａ）に示す構成よりカメラ５の個数を削減しているため、視線一致の精度は多少低下するものの、低コストに視線一致を実現させることが可能である。

【0044】

さらに、本実施形態に係る表示装置１は、図１０（ａ）に示すように、表示領域ＤＡの下側領域にはカメラ５を配置しない構成であってもよい。あるいは、本実施形態に係る表示装置１は、図１０（ｂ）に示すように、表示領域ＤＡの中央領域に近づくほどカメラ５を密に配置する構成であってもよい。本実施形態に係る表示装置１を利用して、Ｗｅｂ会議やビデオ通話が行われる場合、ユーザは互いに画面中央領域正面に自身の顔がくるように、自身の位置や表示装置１の位置を調整することが予想される。このため、図１０（ａ），（ｂ）に示す構成によれば、ユーザの顔が表示される可能性の高い領域には多数のカメラ５を配置しつつも、その他の領域に配置されるカメラ５の個数を削減することが可能なため（つまり、ユーザの顔が表示される可能性の高い領域にはカメラ５を密に配置し、ユーザの顔が表示される可能性の低い領域にはカメラ５を疎に配置することが可能なため）、高精度な視線一致の実現と低コスト化を両立させることが可能である。なお、図１０では、表示装置１がモニター装置である場合を示したが、表示装置１がスマートフォンの場合も同様な構成を適用することが可能である。

【0045】

なお、本実施形態に係る表示装置１は、図６に示した一連の動作の前に、以下に示す初期設定動作を行ってもよい。図１１は、本実施形態に係る表示装置１において行われる初期設定動作を説明するための図である。

【0046】

表示装置１Ａは、当該表示装置１Ａ内に設けられる複数のカメラ５Ａのうちの１つを用いて、いわゆるフェイストラッキングを行い、被写体であるユーザＵ１の顔の位置と、当該ユーザＵ１の右目と左目の位置を特定する。表示装置１Ａは、特定されたユーザＵ１の右目と左目を結ぶ直線の中点から当該表示装置１Ａ（表示パネル３）に向けて垂直に延びる仮想線ＶＬを生成し、当該仮想線ＶＬと交差する位置に配置されたカメラ５Ａを、ユーザＵ１を撮影する最初のカメラ５Ａとして選択する。

【0047】

また、表示装置１Ａは、表示装置１Ｂから送信されてくる画像を受信すると、当該画像に含まれるユーザＵ２の右目と左目の間に、上記した最初のカメラ５Ａが位置するように、当該画像の表示位置を調整する。つまり、表示装置１Ａは、ユーザＵ１の正面にユーザＵ２の顔が表示されるように、当該ユーザＵ２を含む画像の表示位置を調整する。

【0048】

以上説明した初期設定動作を行うことにより、表示装置１Ａは、ユーザＵ１の正面にユーザＵ２の顔を表示し、かつ、当該ユーザＵ１を撮影するカメラとして当該ユーザＵ１の正面に位置するカメラ５Ａを選択した状態で、Ｗｅｂ会議やビデオ通話を開始することができる。なお、表示装置１Ａは、初期設定動作が完了した後は、図６に示した一連の動作を行うものとする。初期設定動作は、例えば画面に表示された完了ボタンがユーザＵ１によりタップされる等、手動で完了されてもよいし、最初のカメラ選択と画像の表示位置の調整が完了したことを検知して自動的に完了してもよい。

【0049】

なお、ここでは、表示装置１Ａ側を例にとって説明したが、表示装置１Ｂ側でも同様な初期設定動作が行われる。また、初期設定動作におけるフェイストラッキングには、被写体の顔の位置と、被写体の右目と左目の位置とを特定しやすくするために、画面中央より上側領域に配置されたカメラ５（例えば、図１１において斜線が付されたカメラ５Ａ，５Ｂ）が用いられることが望ましい。なお、フェイストラッキング用のカメラは、表示装置１とは別に用意されてもよい。

【0050】

以上説明した本実施形態においては、表示装置１がＷｅｂ会議やビデオ通話に利用され、表示装置１を利用する複数のユーザ間の視線を一致させる場合について説明したが、本実施形態に係る表示装置１は、インカメラを利用して自身を撮影する、いわゆる自撮りにも適用することが可能である。

【0051】

例えば、図１２（ａ）に示すように、画面上部に１つのカメラ（インカメラ）１５０が配置された表示装置２００を利用して自撮りを行う場合、カメラ目線の画像を撮影するためには、ユーザＵは、画面上部に配置されたカメラ１５０に視線を向けなければならない（つまり、自身の視線ＳＬ１と、カメラ目線ＳＬＣとを一致させる必要がある）。しかしながら、この場合、ユーザＵは、表示装置２００の画面に表示された自身の顔を見ることができず、ユーザＵの視線ＳＬ１（カメラ目線ＳＬＣ）と、画面上における自身の視線ＳＬ２とを一致させることができない。つまり、ユーザＵは画面に表示された自身と視線を合わせることができない。

【0052】

これに対し、本実施形態に係る表示装置１を利用して自撮りを行う場合、図１２（ｂ）に示すように、画面上に表示された自身の右目と左目の間に位置するカメラ５が、自撮りに使用するカメラとして選択されるため、ユーザＵは、自身の視線ＳＬ１と、画面上における自身の視線ＳＬ２と、カメラ目線ＳＬＣとを一致させることができる。つまり、本実施形態に係る表示装置１によれば、ユーザＵは画面に表示された自身と視線を合わせた上で、自撮りを行うことが可能である。

【0053】

以上説明した一実施形態に係る表示装置１は、画像を表示する表示領域ＤＡを有する表示パネル３と、表示領域ＤＡと平面視において重なる位置に設けられ、当該表示装置１のユーザを被写体として撮影する複数のカメラ５と、表示領域ＤＡに表示される画像に含まれる人物の目の位置に基づいて、複数のカメラ５のうちの１つを、被写体を撮影するカメラとして選択するコントローラ１０と、を備える。これによれば、画面に表示された画像を見ている人物と、画像に表示された人物との間の視線を一致させることが可能となる。

【0054】

なお、本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

【符号の説明】

【0055】

１…表示装置、２…筐体、３…表示パネル、４…カバーガラス、５…カメラ、Ｕ…ユーザ、ＳＬ１，ＳＬ２…視線、ＳＬＣ…カメラ目線。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】