知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024005440
(43)【公開日】2024-01-17
(54)【発明の名称】入出力装置、入出力方法、及びプログラム
(51)【国際特許分類】
G06F 3/041 20060101AFI20240110BHJP
G06F 3/0487 20130101ALI20240110BHJP
【ＦＩ】
G06F3/041 520
G06F3/041 580
G06F3/0487
【審査請求】未請求
【請求項の数】8
【出願形態】ＯＬ
(21)【出願番号】P 2022105618
(22)【出願日】2022-06-30
(71)【出願人】
【識別番号】000136136
【氏名又は名称】株式会社ＰＦＵ
(72)【発明者】
【氏名】宮野 翔吾
(72)【発明者】
【氏名】前川 惇彦
【テーマコード（参考）】
5E555
【Ｆターム（参考）】
5E555AA42
5E555AA62
5E555BA31
5E555BB31
5E555BC20
5E555CA12
5E555CA42
5E555CB22
5E555EA22
5E555FA00
(57)【要約】 （修正有）
【課題】空中操作面への操作位置とディスプレイの反応位置との位置ズレを補正する入出力装置を提供する。
【解決手段】入出力装置１は、コンテンツを表示する表示面と、表示面とは異なる位置で、表示されたコンテンツに対するユーザの動作を検知する検知部７と、ユーザを撮影する撮影部（カメラ５）と、撮影部（カメラ５）により撮影されたユーザの画像に基づいて、検知部７により検知された検知位置又は表示面に表示されるコンテンツの位置を補正する補正部と、撮影部（カメラ５）により撮影された撮影画像からユーザの目を特定する目特定部と、を有する。補正部は、目特定部が特定した撮影画像におけるユーザの目の位置又はユーザの目までの距離に基づいて、検知部７により検知された検知位置を補正する。
【選択図】図２
【解決手段】入出力装置１は、コンテンツを表示する表示面と、表示面とは異なる位置で、表示されたコンテンツに対するユーザの動作を検知する検知部７と、ユーザを撮影する撮影部（カメラ５）と、撮影部（カメラ５）により撮影されたユーザの画像に基づいて、検知部７により検知された検知位置又は表示面に表示されるコンテンツの位置を補正する補正部と、撮影部（カメラ５）により撮影された撮影画像からユーザの目を特定する目特定部と、を有する。補正部は、目特定部が特定した撮影画像におけるユーザの目の位置又はユーザの目までの距離に基づいて、検知部７により検知された検知位置を補正する。
【選択図】図２
【特許請求の範囲】
【請求項1】
コンテンツを表示する表示面と、
前記表示面とは異なる位置で、表示された前記コンテンツに対するユーザの動作を検知する検知部と、
前記ユーザを撮影する撮影部と、
前記撮影部により撮影されたユーザの画像に基づいて、前記検知部により検知された検知位置、又は、前記表示面に表示されるコンテンツの位置を補正する補正部と
を有する入出力装置。
前記表示面とは異なる位置で、表示された前記コンテンツに対するユーザの動作を検知する検知部と、
前記ユーザを撮影する撮影部と、
前記撮影部により撮影されたユーザの画像に基づいて、前記検知部により検知された検知位置、又は、前記表示面に表示されるコンテンツの位置を補正する補正部と
を有する入出力装置。
【請求項2】
前記撮影部により撮影された撮影画像からユーザの目を特定する目特定部
をさらに有し、
前記補正部は、前記目特定部により特定された撮影画像におけるユーザの目の位置、又はユーザの目までの距離に基づいて、前記検知部により検知された検知位置を補正する
請求項１に記載の入出力装置。
をさらに有し、
前記補正部は、前記目特定部により特定された撮影画像におけるユーザの目の位置、又はユーザの目までの距離に基づいて、前記検知部により検知された検知位置を補正する
請求項１に記載の入出力装置。
【請求項3】
前記補正部は、前記目特定部により特定されたユーザの目の位置、目までの距離、及び、前記検知部による前記表示面における検知位置の領域に基づいて、補正量を決定する
請求項２に記載の入出力装置。
請求項２に記載の入出力装置。
【請求項4】
前記検知部は、前記表示面から１ｃｍ以上５ｃｍ以下手前でユーザの動作を検知し、
前記補正部は、前記表示面の上部、中央部及び下部で、補正量を決定する
請求項１に記載の入出力装置。
前記補正部は、前記表示面の上部、中央部及び下部で、補正量を決定する
請求項１に記載の入出力装置。
【請求項5】
前記目特定部により特定された目の間隔に基づいて、前記表示面から目までの距離を算出する相対位置算出部
をさらに有し、
前記補正部は、前記相対位置算出部により算出された前記表示面から目までの距離に基づいて、補正量を決定する
請求項３に記載の入出力装置。
をさらに有し、
前記補正部は、前記相対位置算出部により算出された前記表示面から目までの距離に基づいて、補正量を決定する
請求項３に記載の入出力装置。
【請求項6】
前記撮影部は、操作時にユーザを撮影し、
前記補正部は、前記撮影部により撮影された画像に基づいて操作位置を補正する
請求項１に記載の入出力装置。
前記補正部は、前記撮影部により撮影された画像に基づいて操作位置を補正する
請求項１に記載の入出力装置。
【請求項7】
コンテンツを表示する表示面とは異なる位置で、表示された前記コンテンツに対するユーザの動作を検知する検知ステップと、
前記ユーザを撮影する撮影ステップと、
前記撮影ステップにより撮影されたユーザの画像に基づいて、前記検知ステップにより検知された検知位置、又は、前記表示面に表示されるコンテンツの位置を補正する補正ステップと
を有する入出力方法。
前記ユーザを撮影する撮影ステップと、
前記撮影ステップにより撮影されたユーザの画像に基づいて、前記検知ステップにより検知された検知位置、又は、前記表示面に表示されるコンテンツの位置を補正する補正ステップと
を有する入出力方法。
【請求項8】
コンテンツを表示する表示面とは異なる位置で、表示された前記コンテンツに対するユーザの動作を検知する検知ステップと、
前記ユーザを撮影する撮影ステップと、
前記撮影ステップにより撮影されたユーザの画像に基づいて、前記検知ステップにより検知された検知位置、又は、前記表示面に表示されるコンテンツの位置を補正する補正ステップと
をコンピュータに実行させるプログラム。
前記ユーザを撮影する撮影ステップと、
前記撮影ステップにより撮影されたユーザの画像に基づいて、前記検知ステップにより検知された検知位置、又は、前記表示面に表示されるコンテンツの位置を補正する補正ステップと
をコンピュータに実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、入出力装置、入出力方法、及びプログラムに関する。
【背景技術】
【0002】
例えば、特許文献１には、液晶表示パネルの表示面に透明なタッチセンサパネルを積層した、液晶表示パネルの表示手段及び透明なタッチセンサパネルの入力手段と、ペン等による位置情報の指示手段とを具備し、表示された図形をペン等で指し示して入力する情報処理装置において、上記タッチセンサパネルの近傍に所要の間隔で配設された複数のマイクにより入力される音声入力手段と、各々のマイクから入力された音声波形の位相のずれにより音源の位置を特定する音源位置特定回路と、補正量設定回路とを有し、音源からの音声によってタッチセンサパネルに対する操作者の方向を検出し、視差の補正を行うことを特徴とする情報処理装置における入力機能付き表示装置が開示されている。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特開平８－１０１７４６
【発明の概要】
【発明が解決しようとする課題】
【0004】
空中操作面への操作位置とディスプレイの反応位置との位置ズレを補正する入出力装置を提供することを目的とする。
【課題を解決するための手段】
【0005】
本発明に係る入出力装置１は、コンテンツを表示する表示面と、前記表示面とは異なる位置で、表示された前記コンテンツに対するユーザの動作を検知する検知部と、前記ユーザを撮影する撮影部と、前記撮影部により撮影されたユーザの画像に基づいて、前記検知部により検知された検知位置、又は、前記表示面に表示されるコンテンツの位置を補正する補正部とを有する。
【0006】
好適には、前記撮影部により撮影された撮影画像からユーザの目を特定する目特定部をさらに有し、前記補正部は、前記目特定部により特定された撮影画像におけるユーザの目の位置、又はユーザの目までの距離に基づいて、前記検知部により検知された検知位置を補正する。
【0007】
好適には、前記補正部は、前記目特定部により特定されたユーザの目の位置、目までの距離、及び、前記検知部による前記表示面における検知位置の領域に基づいて、補正量を決定する。
【0008】
好適には、前記検知部は、前記表示面から１ｃｍ以上５ｃｍ以下手前でユーザの動作を検知し、前記補正部は、前記表示面の上部、中央部及び下部で、補正量を決定する。
【0009】
好適には、前記目特定部により特定された目の間隔に基づいて、前記表示面から目までの距離を算出する相対位置算出部をさらに有し、前記補正部は、前記相対位置算出部により算出された前記表示面から目までの距離に基づいて、補正量を決定する。
【0010】
好適には、前記撮影部は、操作時にユーザを撮影し、前記補正部は、前記撮影部により撮影された画像に基づいて操作位置を補正する。
【0011】
本発明に係る入出力方法は、コンテンツを表示する表示面とは異なる位置で、表示された前記コンテンツに対するユーザの動作を検知する検知ステップと、前記ユーザを撮影する撮影ステップと、前記撮影ステップにより撮影されたユーザの画像に基づいて、前記検知ステップにより検知された検知位置、又は、前記表示面に表示されるコンテンツの位置を補正する補正ステップとを有する。
【0012】
本発明に係るプログラムは、コンテンツを表示する表示面とは異なる位置で、表示された前記コンテンツに対するユーザの動作を検知する検知ステップと、前記ユーザを撮影する撮影ステップと、前記撮影ステップにより撮影されたユーザの画像に基づいて、前記検知ステップにより検知された検知位置、又は、前記表示面に表示されるコンテンツの位置を補正する補正ステップとをコンピュータに実行させる。
【発明の効果】
【0013】
空中操作面への操作位置とディスプレイの反応位置との位置ズレを補正する入出力装置を提供する。
【図面の簡単な説明】
【0014】
【図1】各身長のユーザにおける、視線と空中操作面１３の反応位置とのズレを説明するイメージ図である。
【図2】（ａ）は、入力装置1を横から見た場合の構成を例示する図であり、（ｂ）は、入出力装置１をユーザ側から見た構成を例示する図である。
【図3】入出力装置１のハードウェア構成を例示する図である。
【図4】制御部１１の機能構成を例示する図である。
【図5】空中操作面１３とディスプレイ３の４隅との視差のズレ量を例示する図である。
【図6】入出力装置１による位置ズレ補正処理（Ｓ１０）を説明する図である。
【発明を実施するための形態】
【0015】
［背景］
本発明がなされた背景を説明する。
ＫＩＯＳＫ端末などを非接触化する目的として、空中で指先検知を行うことで画面にタッチすることなくパネル操作を行う機器が増えている。この指先が所定の位置にあるかどうかを検知するために赤外線センサや、静電容量式センサ、カメラによる３次元座標で検知する方式がある。既存のタッチパネル製品に対して空中で非接触操作を行うためのセンサを後付けする場合には、表示面に対して平行に操作面が空中にできる形となる。
コンビニのＫＩＯＳＫ端末などのディスプレイは正面から見て斜めとなって設置されている。通常のタッチパネル操作では画面を真正面から見ない場合でも、空中操作面の反応する位置は視線上同じ位置であるため、問題は生じない。
一方、空中に非接触入力のために操作面を浮かび上がらせた場合、どんな人でも、ディスプレイに対して操作しようとした場合、ディスプレイと反応部において視差が発生する。そのため、選択ボタンをタッチしようとした場合、空中操作の高さとの視線位置ズレによって、狙った場所に対してズレが発生する。
本発明がなされた背景を説明する。
ＫＩＯＳＫ端末などを非接触化する目的として、空中で指先検知を行うことで画面にタッチすることなくパネル操作を行う機器が増えている。この指先が所定の位置にあるかどうかを検知するために赤外線センサや、静電容量式センサ、カメラによる３次元座標で検知する方式がある。既存のタッチパネル製品に対して空中で非接触操作を行うためのセンサを後付けする場合には、表示面に対して平行に操作面が空中にできる形となる。
コンビニのＫＩＯＳＫ端末などのディスプレイは正面から見て斜めとなって設置されている。通常のタッチパネル操作では画面を真正面から見ない場合でも、空中操作面の反応する位置は視線上同じ位置であるため、問題は生じない。
一方、空中に非接触入力のために操作面を浮かび上がらせた場合、どんな人でも、ディスプレイに対して操作しようとした場合、ディスプレイと反応部において視差が発生する。そのため、選択ボタンをタッチしようとした場合、空中操作の高さとの視線位置ズレによって、狙った場所に対してズレが発生する。
【0016】
そこで、入出力装置１は、図２に例示するように、ディスプレイ３に設置したカメラ５を用いて、ユーザの目の位置及びディスプレイ３からの距離を推測し、推測した距離に基づいて、ユーザの目線位置から見たディスプレイ３と空中操作面１３との位置ズレを補正し、身長の違いなどによる使用し辛さを解消する。
【0017】
本発明の実施形態を、図面を参照して説明する。
図１は、低身長から高身長までの人がＫＩＯＳＫ端末を操作する場合、ディスプレイ３に表示されるコンテンツをタッチしようとした際に、空中操作面１３のどの部分を選択してしまうかを例示するイメージ図である。
図１に例示するように、低身長の人は、ディスプレイ３上部のコンテンツに対し、大きく下を選択し、ディスプレイ３中央部のコンテンツに対し、やや下を選択し、ディスプレイ３下部のコンテンツに対し、やや上を選択してしまう。
また、中くらいの身長の人は、ディスプレイ３上部のコンテンツに対し、やや下を選択し、ディスプレイ３中央部のコンテンツに対してはズレることなく選択し、ディスプレイ３下部のコンテンツに対し、やや上を選択してしまう。
さらに、高身長の人は、ディスプレイ３上部のコンテンツに対してはズレることなく選択し、ディスプレイ３中央部のコンテンツに対してはやや上を選択し、ディスプレイ３下部のコンテンツに対し、大きく上を選択してしまう。
したがって、視差のズレ量は、ユーザの目の位置と、ディスプレイ３の上部、中央部、及び下部それぞれの位置とで変わる。すなわち、入出力装置１が、ユーザの目の中間点と、ディスプレイ３との相対位置を算出し、算出した相対位置に基づいて、ユーザの視線と空中操作面１３との反応位置の誤差をリアルタイムに補正することで、ユーザは、違和感なく操作が可能となる。
図１は、低身長から高身長までの人がＫＩＯＳＫ端末を操作する場合、ディスプレイ３に表示されるコンテンツをタッチしようとした際に、空中操作面１３のどの部分を選択してしまうかを例示するイメージ図である。
図１に例示するように、低身長の人は、ディスプレイ３上部のコンテンツに対し、大きく下を選択し、ディスプレイ３中央部のコンテンツに対し、やや下を選択し、ディスプレイ３下部のコンテンツに対し、やや上を選択してしまう。
また、中くらいの身長の人は、ディスプレイ３上部のコンテンツに対し、やや下を選択し、ディスプレイ３中央部のコンテンツに対してはズレることなく選択し、ディスプレイ３下部のコンテンツに対し、やや上を選択してしまう。
さらに、高身長の人は、ディスプレイ３上部のコンテンツに対してはズレることなく選択し、ディスプレイ３中央部のコンテンツに対してはやや上を選択し、ディスプレイ３下部のコンテンツに対し、大きく上を選択してしまう。
したがって、視差のズレ量は、ユーザの目の位置と、ディスプレイ３の上部、中央部、及び下部それぞれの位置とで変わる。すなわち、入出力装置１が、ユーザの目の中間点と、ディスプレイ３との相対位置を算出し、算出した相対位置に基づいて、ユーザの視線と空中操作面１３との反応位置の誤差をリアルタイムに補正することで、ユーザは、違和感なく操作が可能となる。
【0018】
図２は、入出力装置１の構成を例示する図である。
図２（ａ）及び（ｂ）に例示するように、入出力装置１は、ＫＩＯＳＫ端末であり、ディスプレイ３と、カメラ５と、検知部７と、筐体９と、筐体９内に収納される制御部１１と、空中操作面１３とを有する。
ディスプレイ３は、筐体９の上側（表側）の開口部分に蓋をするように、取り付けられて固定され、コンテンツを表示する。ディスプレイ３は、本発明に係る表示面の一例である。
検知部７は、ディスプレイ３とは異なる位置で、ディスプレイ３に表示されたコンテンツに対するユーザの動作を検知する。具体的には、検知部７は、ディスプレイ３から１ｃｍ以上５ｃｍ以下手前でユーザの動作を検知する、より具体的には、検知部７は、センサであり、ディスプレイ３の１ｃｍ以上３ｃｍ以下手前で指先操作を検知する。
カメラ５は、ユーザを撮影する撮影装置であり、筐体９内に配置され、入出力装置１のユーザの顔を撮影する。カメラ５は、本発明に係る撮影部の一例である。
筐体９は、制御部１１を収納する。
制御部１１は、ソフトウェアが内蔵され、カメラ５、ディスプレイ３、及び検知部７と有線又は無線で接続され、カメラ５により撮影されたユーザの目の位置に応じて、ディスプレイ３と、空中操作面１３との位置ズレを補正する。
空中操作面１３は、検知部７による、ディスプレイ３に表示されたコンテンツに対するユーザの動作を検知可能な範囲である。
図２（ａ）及び（ｂ）に例示するように、入出力装置１は、ＫＩＯＳＫ端末であり、ディスプレイ３と、カメラ５と、検知部７と、筐体９と、筐体９内に収納される制御部１１と、空中操作面１３とを有する。
ディスプレイ３は、筐体９の上側（表側）の開口部分に蓋をするように、取り付けられて固定され、コンテンツを表示する。ディスプレイ３は、本発明に係る表示面の一例である。
検知部７は、ディスプレイ３とは異なる位置で、ディスプレイ３に表示されたコンテンツに対するユーザの動作を検知する。具体的には、検知部７は、ディスプレイ３から１ｃｍ以上５ｃｍ以下手前でユーザの動作を検知する、より具体的には、検知部７は、センサであり、ディスプレイ３の１ｃｍ以上３ｃｍ以下手前で指先操作を検知する。
カメラ５は、ユーザを撮影する撮影装置であり、筐体９内に配置され、入出力装置１のユーザの顔を撮影する。カメラ５は、本発明に係る撮影部の一例である。
筐体９は、制御部１１を収納する。
制御部１１は、ソフトウェアが内蔵され、カメラ５、ディスプレイ３、及び検知部７と有線又は無線で接続され、カメラ５により撮影されたユーザの目の位置に応じて、ディスプレイ３と、空中操作面１３との位置ズレを補正する。
空中操作面１３は、検知部７による、ディスプレイ３に表示されたコンテンツに対するユーザの動作を検知可能な範囲である。
【0019】
図３は、入出力装置１のハードウェア構成を例示する図である。
図３に例示するように、入出力装置１は、ＣＰＵ１００、メモリ１０２、不揮発性のメモリ１０４、ネットワークインタフェース１０６（ネットワークＩＦ１０６）、ディスプレイ３、カメラ５、及び検知部７を有し、これらの構成はバス１０８を介して互いに接続している。
ＣＰＵ１００は、例えば、中央演算装置である。
メモリ１０２は、例えば、揮発性メモリであり、主記憶装置として機能する。
不揮発性メモリ１０４は、例えば、不揮発性の記憶装置としてコンピュータプログラム（例えば、図４の位置ズレ補正プログラム１２）を格納する。
ネットワークＩＦ１０６は、有線又は無線で通信するためのインタフェースである。
ディスプレイ３は、表示面の一例であり、例えば、液晶タッチパネルである。
カメラ５は、ユーザを撮影する撮影装置である。
検知部７は、例えば、静電容量式タッチパネルである。
図３に例示するように、入出力装置１は、ＣＰＵ１００、メモリ１０２、不揮発性のメモリ１０４、ネットワークインタフェース１０６（ネットワークＩＦ１０６）、ディスプレイ３、カメラ５、及び検知部７を有し、これらの構成はバス１０８を介して互いに接続している。
ＣＰＵ１００は、例えば、中央演算装置である。
メモリ１０２は、例えば、揮発性メモリであり、主記憶装置として機能する。
不揮発性メモリ１０４は、例えば、不揮発性の記憶装置としてコンピュータプログラム（例えば、図４の位置ズレ補正プログラム１２）を格納する。
ネットワークＩＦ１０６は、有線又は無線で通信するためのインタフェースである。
ディスプレイ３は、表示面の一例であり、例えば、液晶タッチパネルである。
カメラ５は、ユーザを撮影する撮影装置である。
検知部７は、例えば、静電容量式タッチパネルである。
【0020】
図４は、制御部１１の機能構成を例示する図である。
図４に例示するように、制御部１１には、位置ズレ補正プログラム１２がインストールされる。位置ズレ補正プログラム１２は、顔検出部１２０、目特定部１２２、マップ作成部１２４、相対位置算出部１２６、マップ切替え部１２８、及び補正部１３０を有し、補正部１３０には、補正量決定部１３２、及びズレ補正部１３４が含まれる。
顔検出部１２０は、カメラ５による撮影範囲内にユーザの顔が納まっているか否かを判定し、収まっている場合に、カメラ５によりユーザの顔を撮影する。
図４に例示するように、制御部１１には、位置ズレ補正プログラム１２がインストールされる。位置ズレ補正プログラム１２は、顔検出部１２０、目特定部１２２、マップ作成部１２４、相対位置算出部１２６、マップ切替え部１２８、及び補正部１３０を有し、補正部１３０には、補正量決定部１３２、及びズレ補正部１３４が含まれる。
顔検出部１２０は、カメラ５による撮影範囲内にユーザの顔が納まっているか否かを判定し、収まっている場合に、カメラ５によりユーザの顔を撮影する。
【0021】
目特定部１２２は、顔検出部１２０により撮影された顔画像に基づいて、ユーザの目を特定する。具体的には、目特定部１２２は、ユーザの右目及び左目を特定する。より具体的には、目特定部１２２は、右目と左目の中間位置を特定する。
マップ作成部１２４は、あるユーザの目の中間位置である基準位置に対して、ディスプレイ３内の位置（例：１００×１００ならば１０００カ所）のズレ量のマップを作成する。 具体的には、マップ作成部１２４は、基準位置とディスプレイ３の４隅と空中操作面１３の視差のズレ量を計算する。図５に例示するように、ディスプレイ３の４隅のズレ量は、空中操作面１３と交わる点で定まり、ディスプレイ３の４隅がそれぞれの方向で最大のズレとなる。より具体的には、マップ作成部１２４は、基準位置との距離や位置関係を変えることで、ディスプレイ３内のそれぞれの位置でのズレ量のマップを作成する。
マップ作成部１２４は、あるユーザの目の中間位置である基準位置に対して、ディスプレイ３内の位置（例：１００×１００ならば１０００カ所）のズレ量のマップを作成する。 具体的には、マップ作成部１２４は、基準位置とディスプレイ３の４隅と空中操作面１３の視差のズレ量を計算する。図５に例示するように、ディスプレイ３の４隅のズレ量は、空中操作面１３と交わる点で定まり、ディスプレイ３の４隅がそれぞれの方向で最大のズレとなる。より具体的には、マップ作成部１２４は、基準位置との距離や位置関係を変えることで、ディスプレイ３内のそれぞれの位置でのズレ量のマップを作成する。
【0022】
相対位置算出部１２６は、目の間隔に基づいて、ディスプレイ３からユーザの目までの距離を算出する。
マップ切替え部１２８は、目の基準位置（目の中間位置）とディスプレイ３との相対位置に基づいて、ズレ量のマップを切り替える。
補正部１３０は、カメラ５により撮影されたユーザの画像に基づいて、検知部７により検知された検知位置、又は、ディスプレイ３に表示されるコンテンツの位置を補正する。具体的には、補正部１３０は、カメラ５がユーザの操作時に撮影した画像に基づいて、操作位置を補正する。
補正量決定部１３２は、ユーザの目の位置、ユーザの目までの距離、及びディスプレイ３における検知位置の領域に基づいて、補正量を決定する。具体的には、補正量決定部１３２は、ユーザ目の位置と、ディスプレイ３の上部、中央部、及び下部との相対位置に基づいて、補正量を決定する。より具体的には、補正量決定部１３２は、マップ切替え部１２８により切り替えられたズレ量のマップに基づいて、補正量を決定する。
ズレ補正部１３４は、補正量決定部１３２により決定された補正量に基づいて、指の検知位置に対してズレ補正を行う。
なお、位置ズレ補正プログラム１２の一部又は全部は、ＡＳＩＣなどのハードウェアにより実現されてもよく、また、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）の機能を一部借用して実現されてもよい。
マップ切替え部１２８は、目の基準位置（目の中間位置）とディスプレイ３との相対位置に基づいて、ズレ量のマップを切り替える。
補正部１３０は、カメラ５により撮影されたユーザの画像に基づいて、検知部７により検知された検知位置、又は、ディスプレイ３に表示されるコンテンツの位置を補正する。具体的には、補正部１３０は、カメラ５がユーザの操作時に撮影した画像に基づいて、操作位置を補正する。
補正量決定部１３２は、ユーザの目の位置、ユーザの目までの距離、及びディスプレイ３における検知位置の領域に基づいて、補正量を決定する。具体的には、補正量決定部１３２は、ユーザ目の位置と、ディスプレイ３の上部、中央部、及び下部との相対位置に基づいて、補正量を決定する。より具体的には、補正量決定部１３２は、マップ切替え部１２８により切り替えられたズレ量のマップに基づいて、補正量を決定する。
ズレ補正部１３４は、補正量決定部１３２により決定された補正量に基づいて、指の検知位置に対してズレ補正を行う。
なお、位置ズレ補正プログラム１２の一部又は全部は、ＡＳＩＣなどのハードウェアにより実現されてもよく、また、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）の機能を一部借用して実現されてもよい。
【0023】
図６は、入出力装置１による位置ズレ補正処理（Ｓ１０）を説明するフローチャートである。
図６に例示するように、ステップ１００（Ｓ１００）において、マップ作成部１２４は、あるユーザの目の基準位置に対して、ディスプレイ３内の各位置のズレ量のマップを作成する。
ステップ１０５（Ｓ１０５）において、顔検出部１２０は、ユーザの顔がカメラ５の撮影範囲内に収まっているか否かを判定する。撮影範囲内に収まっている場合に、Ｓ１１０へ移行し（Ｓ１０５：Ｙｅｓ）、撮影範囲内に収まっていない場合に、ユーザの顔が撮影範囲内に収まるまで待機する（Ｓ１０５：Ｎｏ）。
ステップ１１０（Ｓ１１０）において、顔検出部１２０は、カメラ５によりユーザの顔を撮影し、目特定部１２２は、撮影画像におけるユーザの右目と左目の中間位置を基準位置として特定する。
図６に例示するように、ステップ１００（Ｓ１００）において、マップ作成部１２４は、あるユーザの目の基準位置に対して、ディスプレイ３内の各位置のズレ量のマップを作成する。
ステップ１０５（Ｓ１０５）において、顔検出部１２０は、ユーザの顔がカメラ５の撮影範囲内に収まっているか否かを判定する。撮影範囲内に収まっている場合に、Ｓ１１０へ移行し（Ｓ１０５：Ｙｅｓ）、撮影範囲内に収まっていない場合に、ユーザの顔が撮影範囲内に収まるまで待機する（Ｓ１０５：Ｎｏ）。
ステップ１１０（Ｓ１１０）において、顔検出部１２０は、カメラ５によりユーザの顔を撮影し、目特定部１２２は、撮影画像におけるユーザの右目と左目の中間位置を基準位置として特定する。
【0024】
ステップ１１５（Ｓ１１５）において、相対位置算出部１２６は、目特定部１２２により特定された基準位置とディスプレイ３との相対距離を算出する。
ステップ１２０（Ｓ１２０）において、マップ切替え部１２８は、相対位置算出部１２６により算出された相対距離に応じたズレ量のマップに切り替える。
ステップ１２５（Ｓ１２５）において、位置ズレ補正処理（Ｓ１０）は、検知部７により空中操作面１３へのユーザの操作を検知した場合に、Ｓ１３０へ移行し（Ｓ１２５：Ｙｅｓ）、検知していない場合に待機する（Ｓ１２５：Ｎｏ）。
ステップ１３０（Ｓ１３０）において、補正量決定部１３２は、切替えられたズレ量のマップに基づいて補正量を決定し、ズレ補正部１３４は、補正量決定部１３２により決定された補正量で、検知部７により検知された位置を補正する。
ステップ１３５（Ｓ１３５）において、入力装置１は、補正した位置をディスプレイ３側の表示位置に合わせて、ディスプレイ３のタッチ操作と同様の処理を実施する。
ステップ１２０（Ｓ１２０）において、マップ切替え部１２８は、相対位置算出部１２６により算出された相対距離に応じたズレ量のマップに切り替える。
ステップ１２５（Ｓ１２５）において、位置ズレ補正処理（Ｓ１０）は、検知部７により空中操作面１３へのユーザの操作を検知した場合に、Ｓ１３０へ移行し（Ｓ１２５：Ｙｅｓ）、検知していない場合に待機する（Ｓ１２５：Ｎｏ）。
ステップ１３０（Ｓ１３０）において、補正量決定部１３２は、切替えられたズレ量のマップに基づいて補正量を決定し、ズレ補正部１３４は、補正量決定部１３２により決定された補正量で、検知部７により検知された位置を補正する。
ステップ１３５（Ｓ１３５）において、入力装置１は、補正した位置をディスプレイ３側の表示位置に合わせて、ディスプレイ３のタッチ操作と同様の処理を実施する。
【0025】
以上説明したように、本実施形態の入出力装置１は、ユーザの目の位置とディスプレイ３との距離に基づいて、空中操作面１３とディスプレイ３との視差のズレ量を補正することができる。これにより、身長の異なるユーザが使用したとしても、空中操作面１３への操作位置とディスプレイ３の反応部との視差を解消し、違和感のない操作が可能である。
また、ズレの補正は、ユーザの操作時に撮影された画像に基づいて、リアルタイムで行われるため、入力装置１を操作しているユーザに応じたズレの補正が可能である。
また、ズレの補正は、ユーザの操作時に撮影された画像に基づいて、リアルタイムで行われるため、入力装置１を操作しているユーザに応じたズレの補正が可能である。
【符号の説明】
【0026】
１…入出力装置
３…ディスプレイ
５…カメラ
７…検知部
９…筐体
１１…制御部
１２…位置ズレ補正プログラム
１３…空中操作面
１２０…顔検出部
１２２…目特定部
１２４…マップ作成部
１２６…相対位置算出部
１２８…マップ切替え部
１３０…補正部
１３２…補正量決定部
１３４…ズレ補正部
３…ディスプレイ
５…カメラ
７…検知部
９…筐体
１１…制御部
１２…位置ズレ補正プログラム
１３…空中操作面
１２０…顔検出部
１２２…目特定部
１２４…マップ作成部
１２６…相対位置算出部
１２８…マップ切替え部
１３０…補正部
１３２…補正量決定部
１３４…ズレ補正部
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】