ホーム > 特許ランキング > カシオ計算機株式会社
知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024032040
(43)【公開日】2024-03-12
(54)【発明の名称】制御装置、表示システム、制御方法及びプログラム
(51)【国際特許分類】
G06F 3/01 20060101AFI20240305BHJP
【ＦＩ】
G06F3/01 570
【審査請求】未請求
【請求項の数】10
【出願形態】ＯＬ
(21)【出願番号】P 2022135468
(22)【出願日】2022-08-29
(71)【出願人】
【識別番号】000001443
【氏名又は名称】カシオ計算機株式会社
(74)【代理人】
【識別番号】110001254
【氏名又は名称】弁理士法人光陽国際特許事務所
(72)【発明者】
【氏名】斎藤 浩
【テーマコード（参考）】
5E555
【Ｆターム（参考）】
5E555AA46
5E555AA54
5E555BA01
5E555BB01
5E555BC01
5E555CA42
5E555CB66
5E555CB76
5E555CC02
5E555DA01
5E555DB18
5E555FA00
(57)【要約】
【課題】ジェスチャーが正しく認識されたか否かを操作者が確認できるようにする。
【解決手段】表示システムは、制御装置と、撮影装置と、プロジェクタと、を備える。制御装置のＣＰＵは、撮影装置により撮影された画像にジェスチャー認識を行い、ジェスチャー認識により認識された第１のジェスチャーを示すアイコンをプロジェクタにより投影面に所定時間、投影表示させる。また、ＣＰＵは、第１のジェスチャーに対応する機能の実行を所定時間待機させ、所定時間内に撮影装置により撮影された画像から第１のジェスチャーとは異なる第２のジェスチャーが認識されなかった場合に、第１のジェスチャーに対応する機能を実行させる。
【選択図】図３
【解決手段】表示システムは、制御装置と、撮影装置と、プロジェクタと、を備える。制御装置のＣＰＵは、撮影装置により撮影された画像にジェスチャー認識を行い、ジェスチャー認識により認識された第１のジェスチャーを示すアイコンをプロジェクタにより投影面に所定時間、投影表示させる。また、ＣＰＵは、第１のジェスチャーに対応する機能の実行を所定時間待機させ、所定時間内に撮影装置により撮影された画像から第１のジェスチャーとは異なる第２のジェスチャーが認識されなかった場合に、第１のジェスチャーに対応する機能を実行させる。
【選択図】図３
【特許請求の範囲】
【請求項1】
撮影部により撮影された画像にジェスチャー認識を行い、
前記ジェスチャー認識により認識された第１のジェスチャーを示すアイコンを表示部により第１の時間表示させ、前記第１のジェスチャーに対応する機能の実行を第２の時間待機させ、
前記第２の時間内に前記撮影部により撮影された画像から前記第１のジェスチャーとは異なる第２のジェスチャーが認識されたか否かに基づいて、前記第１のジェスチャーに対応する機能を実行させるか否かを制御する、
制御部を備える制御装置。
前記ジェスチャー認識により認識された第１のジェスチャーを示すアイコンを表示部により第１の時間表示させ、前記第１のジェスチャーに対応する機能の実行を第２の時間待機させ、
前記第２の時間内に前記撮影部により撮影された画像から前記第１のジェスチャーとは異なる第２のジェスチャーが認識されたか否かに基づいて、前記第１のジェスチャーに対応する機能を実行させるか否かを制御する、
制御部を備える制御装置。
【請求項2】
前記制御部は、前記第２の時間内に前記撮影部により撮影された画像から前記第１のジェスチャーとは異なる第２のジェスチャーが認識されなかった場合に、前記第１のジェスチャーに対応する機能を実行させる、請求項１に記載の制御装置。
【請求項3】
前記制御部は、
前記第２の時間内に前記ジェスチャー認識により前記第２のジェスチャーが認識された場合、前記第１のジェスチャーに対応する機能の実行を取り消す、請求項２に記載の制御装置。
前記第２の時間内に前記ジェスチャー認識により前記第２のジェスチャーが認識された場合、前記第１のジェスチャーに対応する機能の実行を取り消す、請求項２に記載の制御装置。
【請求項4】
前記第２のジェスチャーは、前記第１のジェスチャーに対応する機能の実行を取り消すことを指示するキャンセルジェスチャーである請求項３に記載の制御装置。
【請求項5】
前記制御部は、
前記第１のジェスチャーに対応する機能の実行後に前記ジェスチャー認識によって前記撮影部により撮影された画像から前記キャンセルジェスチャーが認識された場合、前記第１のジェスチャーに対応する機能の実行前の状態に戻す処理を実行する、請求項４に記載の制御装置。
前記第１のジェスチャーに対応する機能の実行後に前記ジェスチャー認識によって前記撮影部により撮影された画像から前記キャンセルジェスチャーが認識された場合、前記第１のジェスチャーに対応する機能の実行前の状態に戻す処理を実行する、請求項４に記載の制御装置。
【請求項6】
前記第２のジェスチャーは、前記第１のジェスチャーに対応する機能とは異なる機能の実行を指示するジェスチャーであって、
前記制御部は、
前記第２の時間内に前記ジェスチャー認識により前記第２のジェスチャーが認識された場合、前記第１のジェスチャーを示すアイコンの表示を取り消して前記第２のジェスチャーを示すアイコンを前記表示部により前記第１の時間表示させ、前記第１のジェスチャーに対応する機能の実行を取り消して前記第２のジェスチャーに対応する機能の実行を前記第２の時間待機させ、
前記第２の時間内に前記撮影部により撮影された画像から前記第２のジェスチャーとは異なるジェスチャーが認識されなかった場合に、前記第２のジェスチャーに対応する機能を実行させる、請求項３に記載の制御装置。
前記制御部は、
前記第２の時間内に前記ジェスチャー認識により前記第２のジェスチャーが認識された場合、前記第１のジェスチャーを示すアイコンの表示を取り消して前記第２のジェスチャーを示すアイコンを前記表示部により前記第１の時間表示させ、前記第１のジェスチャーに対応する機能の実行を取り消して前記第２のジェスチャーに対応する機能の実行を前記第２の時間待機させ、
前記第２の時間内に前記撮影部により撮影された画像から前記第２のジェスチャーとは異なるジェスチャーが認識されなかった場合に、前記第２のジェスチャーに対応する機能を実行させる、請求項３に記載の制御装置。
【請求項7】
前記制御部は、前記第２の時間内に前記撮影部により撮影された画像から前記第２のジェスチャーとして前記第１のジェスチャーに対応する機能の実行を指示する確定ジェスチャーが認識された場合に、前記第１のジェスチャーに対応する機能を実行させ、
前記第２の時間内に前記撮影部により撮影された画像から前記確定ジェスチャーが認識されなかった場合に、前記第１のジェスチャーに対応する機能の実行を取り消す、請求項１に記載の制御装置。
前記第２の時間内に前記撮影部により撮影された画像から前記確定ジェスチャーが認識されなかった場合に、前記第１のジェスチャーに対応する機能の実行を取り消す、請求項１に記載の制御装置。
【請求項8】
撮影部と、表示部と、制御部と、を備え、
前記制御部は、
前記撮影部により撮影された画像にジェスチャー認識を行い、
前記ジェスチャー認識により認識された第１のジェスチャーを示すアイコンを前記表示部により第１の時間表示させ、前記第１のジェスチャーに対応する機能の実行を第２の時間待機させ、
前記第２の時間内に前記撮影部により撮影された画像から前記第１のジェスチャーとは異なる第２のジェスチャーが認識されたか否かに基づいて、前記第１のジェスチャーに対応する機能を実行させるか否かを制御する、表示システム。
前記制御部は、
前記撮影部により撮影された画像にジェスチャー認識を行い、
前記ジェスチャー認識により認識された第１のジェスチャーを示すアイコンを前記表示部により第１の時間表示させ、前記第１のジェスチャーに対応する機能の実行を第２の時間待機させ、
前記第２の時間内に前記撮影部により撮影された画像から前記第１のジェスチャーとは異なる第２のジェスチャーが認識されたか否かに基づいて、前記第１のジェスチャーに対応する機能を実行させるか否かを制御する、表示システム。
【請求項9】
コンピュータが、
撮影部により撮影された画像にジェスチャー認識を行い、
前記ジェスチャー認識により認識された第１のジェスチャーを示すアイコンを表示部により第１の時間表示させるとともに、前記第１のジェスチャーに対応する機能の実行を第２の時間待機させ、
前記第２の時間内に前記撮影部により撮影された画像から前記第１のジェスチャーとは異なる第２のジェスチャーが認識されたか否かに基づいて、前記第１のジェスチャーに対応する機能を実行させるか否かを制御する、制御方法。
撮影部により撮影された画像にジェスチャー認識を行い、
前記ジェスチャー認識により認識された第１のジェスチャーを示すアイコンを表示部により第１の時間表示させるとともに、前記第１のジェスチャーに対応する機能の実行を第２の時間待機させ、
前記第２の時間内に前記撮影部により撮影された画像から前記第１のジェスチャーとは異なる第２のジェスチャーが認識されたか否かに基づいて、前記第１のジェスチャーに対応する機能を実行させるか否かを制御する、制御方法。
【請求項10】
コンピュータを、
撮影部により撮影された画像にジェスチャー認識を行い、
前記ジェスチャー認識により認識された第１のジェスチャーを示すアイコンを表示部により第１の時間表示させるとともに、前記第１のジェスチャーに対応する機能の実行を第２の時間待機させ、
前記第２の時間内に前記撮影部により撮影された画像から前記第１のジェスチャーとは異なる第２のジェスチャーが認識されたか否かに基づいて、前記第１のジェスチャーに対応する機能を実行させるか否かを制御する制御部、
として機能させるためのプログラム。
撮影部により撮影された画像にジェスチャー認識を行い、
前記ジェスチャー認識により認識された第１のジェスチャーを示すアイコンを表示部により第１の時間表示させるとともに、前記第１のジェスチャーに対応する機能の実行を第２の時間待機させ、
前記第２の時間内に前記撮影部により撮影された画像から前記第１のジェスチャーとは異なる第２のジェスチャーが認識されたか否かに基づいて、前記第１のジェスチャーに対応する機能を実行させるか否かを制御する制御部、
として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、制御装置、表示システム、制御方法及びプログラムに関する。
【背景技術】
【0002】
従来、操作者のジェスチャーを認識し、認識されたジェスチャーに応じて機器の動作を制御する技術がある。
例えば、特許文献１には、観察者の手の形状が所定の操作パターンを示しているか否かを判定し、手の形状が所定の操作パターンを示していると判定した場合に、表示素子にキーボードやアイコン等の操作オブジェクトを表示させる技術が開示されている。
例えば、特許文献１には、観察者の手の形状が所定の操作パターンを示しているか否かを判定し、手の形状が所定の操作パターンを示していると判定した場合に、表示素子にキーボードやアイコン等の操作オブジェクトを表示させる技術が開示されている。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特開２０１３－７０２２７号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
しかし、従来の技術では、自分が行ったジェスチャーが正しく認識されたか否かを操作者が確認することはできなかった。そのため、ジェスチャーが誤認識され、意図しない機能が実行されてしまう場合があった。
【0005】
本発明は、上記の問題点を鑑みてなされたものであり、ジェスチャーが正しく認識されたか否かを操作者が確認できるようにすることである。
【課題を解決するための手段】
【0006】
上記課題を解決するため、本発明に係る制御装置は、
撮影部により撮影された画像にジェスチャー認識を行い、
前記ジェスチャー認識により認識された第１のジェスチャーを示すアイコンを表示部により第１の時間表示させ、前記第１のジェスチャーに対応する機能の実行を第２の時間待機させ、
前記第２の時間内に前記撮影部により撮影された画像から前記第１のジェスチャーとは異なる第２のジェスチャーが認識されたか否かに基づいて、前記第１のジェスチャーに対応する機能を実行させるか否かを制御する、
制御部を備える。
撮影部により撮影された画像にジェスチャー認識を行い、
前記ジェスチャー認識により認識された第１のジェスチャーを示すアイコンを表示部により第１の時間表示させ、前記第１のジェスチャーに対応する機能の実行を第２の時間待機させ、
前記第２の時間内に前記撮影部により撮影された画像から前記第１のジェスチャーとは異なる第２のジェスチャーが認識されたか否かに基づいて、前記第１のジェスチャーに対応する機能を実行させるか否かを制御する、
制御部を備える。
【発明の効果】
【0007】
本発明によれば、ジェスチャーが正しく認識されたか否かをユーザが確認することが可能となる。
【図面の簡単な説明】
【0008】
【図1】表示システムの構成を示す模式図である。
【図2】制御装置の機能的構成を示すブロック図である。
【図5】操作者が第１のジェスチャーを行った後、異なる第２のジェスチャーを行うことなく所定時間が経過した場合の、表示システムの動きを示す図である。
【図6】操作者が第１のジェスチャーを行った後、所定時間が経過するまでの間にキャンセルジェスチャーを行った場合の表示システムの動きを示す図である。
【図7】操作者が第１のジェスチャーを行った後、所定時間が経過するまでの間に第１のジェスチャーとは異なる、キャンセルジェスチャー以外の第２のジェスチャーを行った場合の表示システムの動きを示す図である。
【発明を実施するための形態】
【0009】
以下に、本発明を実施するための形態について、図面を用いて説明する。但し、以下に述べる実施形態には、本発明を実施するために技術的に好ましい種々の限定が付されている。そのため、本発明の技術的範囲を以下の実施形態及び図示例に限定するものではない。
【0010】
＜表示システムの概要＞
図１は、本実施形態の表示システム１の構成を示す模式図である。
表示システム１は、制御装置１０と、撮影装置２０（撮影部）と、プロジェクタ３０（表示部）と、を備える。制御装置１０は、無線又は有線により撮影装置２０及びプロジェクタ３０と通信接続されており、制御装置１０と撮影装置２０及びプロジェクタ３０との間で、制御信号や画像データ等のデータの送受信を行うことが可能となっている。この表示システム１は、制御装置１０から入力された画像データに基づく投影画像５０をプロジェクタ３０により投影面４０（スクリーン、壁など）に投影表示するものである。
図１は、本実施形態の表示システム１の構成を示す模式図である。
表示システム１は、制御装置１０と、撮影装置２０（撮影部）と、プロジェクタ３０（表示部）と、を備える。制御装置１０は、無線又は有線により撮影装置２０及びプロジェクタ３０と通信接続されており、制御装置１０と撮影装置２０及びプロジェクタ３０との間で、制御信号や画像データ等のデータの送受信を行うことが可能となっている。この表示システム１は、制御装置１０から入力された画像データに基づく投影画像５０をプロジェクタ３０により投影面４０（スクリーン、壁など）に投影表示するものである。
【0011】
表示システム１の制御装置１０は、操作者７０によるジェスチャーを認識し、認識したジェスチャーに対応する機能の実行を制御する。詳しくは、撮影装置２０は、その撮影範囲内に位置する操作者７０を所定のフレームレートで撮影し、得られた画像（フレーム画像）の画像データを制御装置１０に送信する。制御装置１０は、撮影装置２０から受信したフレーム画像を解析してジェスチャー認識を行い、認識したジェスチャーに対応する機能のプロジェクタ３０による実行を制御する。ジェスチャーに対応する機能は特に限定されないが、例えば、プロジェクタ３０により投影する投影画像５０をスクロールする機能、投影画像５０を切り替える機能、プロジェクタ３０の各種設定を変更する機能等が挙げられる。
【0012】
本願において、ジェスチャーとは、空間上での身振りや手振り（動作）又は仕草を指す。ジェスチャーには、体の一部または全身を使った動作、さらには手持ち器具などを使った動作が含まれる。また、例えば、「人差し指を立てて、一定の方向に向ける」といった、体の一部または全身を使って一定の形状を作るものもジェスチャーに含まれる。また、操作者７０は、人物に限られず、例えば動物やデバイス（ロボットなど）であってもよく、これらの動作や仕草もジェスチャーに含まれる。
【0013】
なお、本実施形態では、表示システム１の制御装置１０と、撮影装置２０と、プロジェクタ３０と、がそれぞれ独立した装置である場合を例として説明するが、本発明の表示システムは、これらの装置が一体となって１つの装置として構成されていてもよい。または、制御装置１０とプロジェクタ３０が一体となって１つの装置として構成され、撮影装置２０が別体となっていてもよい。例えば、プロジェクタ３０の筐体内に制御装置１０が設けられていてもよい。または、撮影装置２０とプロジェクタ３０が一体となって１つの装置として構成され、制御装置１０が別体となっていてもよい。または、制御装置１０と撮影装置２０が一体となって１つの装置として構成され、プロジェクタ３０が別体となっていてもよい。
【0014】
＜表示システムの構成＞
図２は、制御装置１０の機能構成を示すブロック図である。
制御装置１０は、ＣＰＵ１１（Central Processing Unit）と、ＲＡＭ１２（Random Access Memory）と、記憶部１３と、操作部１４と、表示部１５と、通信部１６と、インターバルタイマー１７と、ジェスチャータイマー１８と、バス１９と、を備える。制御装置１０の各部は、バス１９を介して接続されている。制御装置１０は、本実施形態ではノートＰＣであるが、これに限られず、例えば据置型のＰＣ、スマートフォン、又はタブレット型端末などであってもよい。
図２は、制御装置１０の機能構成を示すブロック図である。
制御装置１０は、ＣＰＵ１１（Central Processing Unit）と、ＲＡＭ１２（Random Access Memory）と、記憶部１３と、操作部１４と、表示部１５と、通信部１６と、インターバルタイマー１７と、ジェスチャータイマー１８と、バス１９と、を備える。制御装置１０の各部は、バス１９を介して接続されている。制御装置１０は、本実施形態ではノートＰＣであるが、これに限られず、例えば据置型のＰＣ、スマートフォン、又はタブレット型端末などであってもよい。
【0015】
ＣＰＵ１１は、記憶部１３に記憶されているプログラム１３１を読み出して実行し、各種演算処理を行うことで、制御装置１０の動作を制御するプロセッサである。ＣＰＵ１１は、「制御部」に相当する。なお、制御装置１０は、複数のプロセッサ（複数のＣＰＵ等）を有していてもよく、本実施形態のＣＰＵ１１が実行する複数の処理を、当該複数のプロセッサが実行してもよい。この場合には、複数のプロセッサが「制御部」に相当する。また、この場合において、複数のプロセッサが共通の処理に関与してもよいし、あるいは、複数のプロセッサが独立に異なる処理を並列に実行してもよい。
【0016】
ＲＡＭ１２は、ＣＰＵ１１に作業用のメモリ空間を提供し、一時データを記憶する。例えば、ＲＡＭ１２は、次に実行させる機能を設定するための機能設定領域１２１を有する。
【0017】
記憶部１３は、コンピュータとしてのＣＰＵ１１により読み取り可能な非一時的な記録媒体であり、プログラム１３１及び各種データを記憶する。記憶部１３は、例えばＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Drive）等の不揮発性メモリを含む。プログラム１３１は、後述するジェスチャー表示処理及びタイマー処理を実行するためのプログラムを含み、コンピュータが読み取り可能なプログラムコードの形態で記憶部１３に格納されている。記憶部１３に記憶されるデータとしては、プロジェクタ３０により投影面４０に投影画像５０を投影するための画像データ、撮影装置２０から受信した画像データ（フレーム画像）などがある。また、記憶部１３は、ジェスチャーの種類と、その種類のジェスチャーに応じて実行する機能と、を対応付けたジェスチャーテーブル１３２を記憶している。
【0018】
操作部１４は、表示部１５の表示画面に重ねられて設けられたタッチパネル、物理ボタン、マウスなどのポインティングデバイス、及びキーボードなどの入力装置のうち少なくとも１つを有し、入力装置に対する入力操作に応じた操作情報をＣＰＵ１１に出力する。
【0019】
表示部１５は、液晶ディスプレイなどを備え、ＣＰＵ１１からの表示制御信号に従って各種表示を行う。
【0020】
通信部１６は、ネットワークカード又は通信モジュール等により構成され、撮影装置２０やプロジェクタ３０との間で所定の通信規格に従ってデータの送受信を行う。
【0021】
インターバルタイマー１７は、ＣＰＵ１１によりセットされた時間Ｔ１を計測し、時間Ｔ１が経過すると、ＣＰＵ１１に割り込み信号を出力する。
【0022】
ジェスチャータイマー１８は、ＣＰＵ１１によりセットされた時間Ｔ２を計測し、セットされた時間Ｔ２が経過すると、ＣＰＵ１１に割り込み信号を出力する。
【0023】
図１に示す撮影装置２０は、撮像レンズ、ＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal-oxide Semiconductor）等のイメージセンサ等からなる撮像素子、Ａ／Ｄ変換回路などを備えている。撮影装置２０は、撮像レンズを通過した光学像を撮像素子により２次元の画像信号に変換して画像データを取得する。撮影装置２０は、制御装置１０からの指示により、撮影範囲内に位置する操作者７０を所定のフレームレートで撮影して複数のフレーム画像を取得し、取得したフレーム画像の画像データを図示しない通信部により制御装置１０に送信する。
【0024】
撮影装置２０の向きは、操作者７０が撮影範囲となるように予め設定されている。例えば、操作者７０が投影面４０の方向に位置して操作を行う場合は、撮影装置２０の向きは、投影面４０が撮影範囲となる方向に設定される。操作者７０が投影面４０の方向とは異なる方向に位置して操作を行う場合は、撮影装置２０の向きは、投影面４０とは異なる方向に設定される。
【0025】
図１に示すプロジェクタ３０は、制御装置１０から入力された画像データに応じた強度分布の投影光を高指向性で照射することにより、投影面４０に投影画像５０や後述する認識されたジェスチャーを示すアイコン（例えば、図５のアイコンＩｃ１等）を投影（表示）する投影部である。詳しくは、プロジェクタ３０は、光源と、当該光源から出力された光の強度分布を調整して光像を形成するデジタルマイクロミラー素子（ＤＭＤ）等の表示素子と、表示素子が形成した光像を集光して投影画像５０として投影する投影レンズ群などを備える。プロジェクタ３０は、制御装置１０から送信される制御信号に従って、投影画像５０として投影する画像を変更したり、投影画像５０として投影する画像領域を変更したり、投影態様に係る設定（明るさ、色合い等）を変更したりする。
【0026】
＜表示システムの動作＞
次に、表示システム１の動作について説明する。
次に、表示システム１の動作について説明する。
【0027】
従来、操作者によるジェスチャーを認識し、認識したジェスチャーに応じた機能を実行するシステムでは、行ったジェスチャーが正しく認識されたか否かを操作者が確認することはできなかった。そのため、ジェスチャーが誤認識され、意図しない機能が実行されてしまう場合があった。
【0028】
そこで、制御装置１０のＣＰＵ１１は、少なくともプロジェクタ３０による投影中に、図３に示すジェスチャー表示処理を実行する。これにより、制御装置１０のＣＰＵ１１は、操作者７０が、自分が行ったジェスチャーが正しく認識されたか否かを確認できる機能と、認識したジェスチャーに対応する機能の実行を取り消す機能を提供する。
【0029】
以下、図３を参照して、ジェスチャー表示処理の流れについて説明する。
例えば、操作部１４により投影面４０に投影画像５０として投影する（表示する）画像データが指定され、投影開始が指示されると、ＣＰＵ１１は、投影画像５０として投影する画像の画像データを通信部１６によりプロジェクタ３０に送信して投影を開始させるとともに、撮影装置２０に所定のフレームレートでの撮影を開始させる。そして、図３に示すジェスチャー表示処理を開始する。ジェスチャー表示処理は、ＣＰＵ１１とプログラム１３１の協働により実行される。
例えば、操作部１４により投影面４０に投影画像５０として投影する（表示する）画像データが指定され、投影開始が指示されると、ＣＰＵ１１は、投影画像５０として投影する画像の画像データを通信部１６によりプロジェクタ３０に送信して投影を開始させるとともに、撮影装置２０に所定のフレームレートでの撮影を開始させる。そして、図３に示すジェスチャー表示処理を開始する。ジェスチャー表示処理は、ＣＰＵ１１とプログラム１３１の協働により実行される。
【0030】
まず、ＣＰＵ１１は、撮影装置２０により撮影されたフレーム画像を通信部１６を介して取得し（ステップＳ１）、取得したフレーム画像にジェスチャー認識（ジェスチャー認識処理）を行う（ステップＳ２）。
ここで、ジェスチャー認識は、例えば、取得されたフレーム画像を解析し、被写体の動作又は仕草が、予め定められた複数種類のジェスチャーのうちいずれかのジェスチャーに該当するかを判断し、該当する場合に、そのジェスチャー（認識されたジェスチャー）の種類を出力する処理である。ジェスチャー認識は、例えば、テンプレートマッチングやディープラーニングなどの公知の画像処理技術を用いて行うことができる。
ここで、ジェスチャー認識は、例えば、取得されたフレーム画像を解析し、被写体の動作又は仕草が、予め定められた複数種類のジェスチャーのうちいずれかのジェスチャーに該当するかを判断し、該当する場合に、そのジェスチャー（認識されたジェスチャー）の種類を出力する処理である。ジェスチャー認識は、例えば、テンプレートマッチングやディープラーニングなどの公知の画像処理技術を用いて行うことができる。
【0031】
次いで、ＣＰＵ１１は、ジェスチャーが認識されたか否かを判断する（ステップＳ３）。
ジェスチャーが認識されていないと判断した場合（ステップＳ３；ＮＯ）、ＣＰＵ１１は、ステップＳ１７に移行する。
ジェスチャーが認識されていないと判断した場合（ステップＳ３；ＮＯ）、ＣＰＵ１１は、ステップＳ１７に移行する。
【0032】
ジェスチャーが認識されたと判断した場合（ステップＳ３；ＹＥＳ）、ＣＰＵ１１は、認識されたジェスチャーに対応する機能をジェスチャーテーブル１３２から検索する（ステップＳ４）。
ＣＰＵ１１は、検索結果に基づいて、認識されたジェスチャーに対応する機能があるか否かを判断し、認識されたジェスチャーに対応する機能がないと判断した場合（ステップＳ５；ＹＥＳ）、ＣＰＵ１１は、ステップＳ１７に移行する。
ＣＰＵ１１は、検索結果に基づいて、認識されたジェスチャーに対応する機能があるか否かを判断し、認識されたジェスチャーに対応する機能がないと判断した場合（ステップＳ５；ＹＥＳ）、ＣＰＵ１１は、ステップＳ１７に移行する。
【0033】
認識されたジェスチャーに対応する機能があると判断した場合（ステップＳ５；ＮＯ）、ＣＰＵ１１は、認識されたジェスチャーを示すアイコンをプロジェクタ３０により投影面４０に表示させる（ステップＳ６）。
認識されたジェスチャーを示すアイコンは、固定画像（静止画像）であってもよいし、動作を伴うジェスチャーに対応するため、アニメーションなどの動作を表現できるものであってもよい。本実施形態では、アイコンがアニメーションなどの動作を表現できるものとして説明する。アイコンは、ジェスチャーによる動作や仕草を模式的に示すもの（例えば、図５～図７のＩｃ１、Ｉｃ３参照）であってもよいし、ジェスチャーにより指示される内容を模式的に示すものであってもよい（例えば、図６のＩｃ２参照）。
アイコンは、操作者７０から見える位置、大きさに表示することが好ましい。また、投影面４０の全面に投影画像５０が投影されていない場合、投影画像５０が表示されていない余白部分にアイコンを表示することが好ましい。
なお、ステップＳ２で認識されたジェスチャーとは異なるジェスチャーを示すアイコンがすでに表示されている場合、ＣＰＵ１１は、先に表示されているアイコンの表示を取り消して、新たに認識されたジェスチャーを示すアイコンをプロジェクタ３０により投影面４０に表示させる。
認識されたジェスチャーを示すアイコンは、固定画像（静止画像）であってもよいし、動作を伴うジェスチャーに対応するため、アニメーションなどの動作を表現できるものであってもよい。本実施形態では、アイコンがアニメーションなどの動作を表現できるものとして説明する。アイコンは、ジェスチャーによる動作や仕草を模式的に示すもの（例えば、図５～図７のＩｃ１、Ｉｃ３参照）であってもよいし、ジェスチャーにより指示される内容を模式的に示すものであってもよい（例えば、図６のＩｃ２参照）。
アイコンは、操作者７０から見える位置、大きさに表示することが好ましい。また、投影面４０の全面に投影画像５０が投影されていない場合、投影画像５０が表示されていない余白部分にアイコンを表示することが好ましい。
なお、ステップＳ２で認識されたジェスチャーとは異なるジェスチャーを示すアイコンがすでに表示されている場合、ＣＰＵ１１は、先に表示されているアイコンの表示を取り消して、新たに認識されたジェスチャーを示すアイコンをプロジェクタ３０により投影面４０に表示させる。
【0034】
次いで、ＣＰＵ１１は、インターバルタイマー１７に予め定められた所定時間（時間Ｔ１）をセット（設定）し、インターバルタイマー１７に時間Ｔ１の計測を開始させる（ステップＳ７）。
インターバルタイマー１７は、アイコンのアニメーション対応のために使用されるタイマーであり、ＣＰＵ１１により設定がクリアされるまで、セットされた時間Ｔ１の経過ごとにＣＰＵ１１に割り込み信号を出力する。ＣＰＵ１１は、インターバルタイマー１７から割り込み信号を受信すると、図４に示すタイマー処理を実行し、ジェスチャーを示すアイコンの表示を更新する。タイマー処理については後述する。
インターバルタイマー１７は、アイコンのアニメーション対応のために使用されるタイマーであり、ＣＰＵ１１により設定がクリアされるまで、セットされた時間Ｔ１の経過ごとにＣＰＵ１１に割り込み信号を出力する。ＣＰＵ１１は、インターバルタイマー１７から割り込み信号を受信すると、図４に示すタイマー処理を実行し、ジェスチャーを示すアイコンの表示を更新する。タイマー処理については後述する。
【0035】
次いで、ＣＰＵ１１は、認識されたジェスチャーが前回認識されたジェスチャーと同じであるか否かを判断する（ステップＳ８）。すなわち、認識されたジェスチャーの種類が前回認識されたジェスチャーの種類と同じであるか否かを判断する。
【0036】
認識されたジェスチャーが前回認識されたジェスチャーと同じであると判断した場合（ステップＳ８；ＹＥＳ）、ＣＰＵ１１は、ステップＳ１７に移行する。
【0037】
認識されたジェスチャーが前回認識されたジェスチャーと異なると判断した場合（ステップＳ８；ＮＯ）、ＣＰＵ１１は、認識されたジェスチャーがキャンセルジェスチャーであるか否かを判断する（ステップＳ９）。
ここで、キャンセルジェスチャーとは、前回認識されたジェスチャーに対応する機能の実行を取り消すことを指示するジェスチャーである。本実施形態では、例えば、拳を握った状態にするジェスチャーと、右手と左手を交差して×の状態にするジェスチャーと、の異なる２種類のジェスチャーとがキャンセルジェスチャーとして定められている。
ここで、キャンセルジェスチャーとは、前回認識されたジェスチャーに対応する機能の実行を取り消すことを指示するジェスチャーである。本実施形態では、例えば、拳を握った状態にするジェスチャーと、右手と左手を交差して×の状態にするジェスチャーと、の異なる２種類のジェスチャーとがキャンセルジェスチャーとして定められている。
【0038】
認識されたジェスチャーがキャンセルジェスチャーではないと判断した場合（ステップＳ９；ＮＯ）、ＣＰＵ１１は、認識されたジェスチャーに対応する機能をＲＡＭ１２の機能設定領域１２１に設定（上書き）する（ステップＳ１０）。これにより、前回認識されたジェスチャーに対応する機能の実行は取り消される。また、ＣＰＵ１１は、ジェスチャータイマー１８に予め定められた所定時間（時間Ｔ２）をセットして時間Ｔ２の計測を開始させ（ステップＳ１１）、ステップＳ１７に移行する。
ここで、ジェスチャータイマー１８は、セットされた時間Ｔ２が経過すると、ＣＰＵ１１に割り込み信号を出力して停止する。ＣＰＵ１１は、ジェスチャータイマー１８から割り込み信号を受信すると、図４に示すタイマー処理を実行してアイコン表示を消去し、認識されたジェスチャーに対応する機能（機能設定領域１２１に記憶されている機能）を実行する。タイマー処理については後述する。
すなわち、認識されたジェスチャーを示すアイコンは、時間Ｔ２の間表示され、認識されたジェスチャーに対応する機能の実行は、時間Ｔ２の間待機状態となる。
なお、ＣＰＵ１１がインターバルタイマー１７にセットする時間Ｔ１とジェスチャータイマー１８にセットする時間Ｔ２との関係は、Ｔ１＜Ｔ２である。
ここで、ジェスチャータイマー１８は、セットされた時間Ｔ２が経過すると、ＣＰＵ１１に割り込み信号を出力して停止する。ＣＰＵ１１は、ジェスチャータイマー１８から割り込み信号を受信すると、図４に示すタイマー処理を実行してアイコン表示を消去し、認識されたジェスチャーに対応する機能（機能設定領域１２１に記憶されている機能）を実行する。タイマー処理については後述する。
すなわち、認識されたジェスチャーを示すアイコンは、時間Ｔ２の間表示され、認識されたジェスチャーに対応する機能の実行は、時間Ｔ２の間待機状態となる。
なお、ＣＰＵ１１がインターバルタイマー１７にセットする時間Ｔ１とジェスチャータイマー１８にセットする時間Ｔ２との関係は、Ｔ１＜Ｔ２である。
【0039】
一方、ステップＳ９において、認識されたジェスチャーがキャンセルジェスチャーであると判断した場合（ステップＳ９；ＹＥＳ）、ＣＰＵ１１は、ジェスチャータイマー１８が計測中であるか否かを判断する（ステップＳ１２）。
【0040】
ジェスチャータイマー１８が計測中であると判断した場合（ステップＳ１２；ＹＥＳ）、ＣＰＵ１１は、機能設定領域１２１にＮＯＰ（何もしない）を設定（上書き）する（ステップＳ１３）。そして、ＣＰＵ１１は、ジェスチャータイマー１８をクリアし（ステップＳ１４）、ステップＳ１７に移行する。すなわち、ＣＰＵ１１は、ジェスチャータイマー１８の設定を解除して計測を停止させ、ステップＳ１７に移行する。
【0041】
ここで、ジェスチャータイマー１８が計測中であるということは、前回認識されたジェスチャーに対応する機能がまだ実行されておらず、待機中状態になっていることを示す。そこで、ＣＰＵ１１は、ジェスチャータイマー１８が計測中である場合、機能設定領域１２１にＮＯＰ（何もしない）を設定することで、前回認識されたジェスチャーに対応する機能が実行されないようにする。
【0042】
一方、ジェスチャータイマー１８が計測中ではないと判断した場合（ステップＳ１２；ＮＯ）、ＣＰＵ１１は、機能設定領域１２１にＵＮＤＯを設定（上書き）する（ステップＳ１５）。ＵＮＤＯは、実行した機能を取り消して、その機能の実行前の状態に戻す処理である。
そして、ＣＰＵ１１は、ジェスチャータイマー１８に予め定められた所定時間（時間Ｔ２）をセットして時間Ｔ２の計測を開始させ（ステップＳ１６）、ステップＳ１７に移行する。
そして、ＣＰＵ１１は、ジェスチャータイマー１８に予め定められた所定時間（時間Ｔ２）をセットして時間Ｔ２の計測を開始させ（ステップＳ１６）、ステップＳ１７に移行する。
【0043】
ここで、ジェスチャータイマー１８が計測中ではないということは、ジェスチャータイマー１８による時間Ｔ２の計測が終了し、前回認識されたジェスチャーに対応する機能がすでに実行されたことを示す。そこで、ＣＰＵ１１は、ジェスチャータイマー１８が計測中ではない場合、機能設定領域１２１にＵＮＤＯを設定することで、直前に実行した機能を取り消してその機能の実行前の状態に戻すＵＮＤＯ機能が次に実行されるようにする。ＣＰＵ１１は、ステップＳ１６において、ジェスチャータイマー１８をセットすることで、時間Ｔ２の待機時間経過後にＵＮＤＯが実行されるようにする。すなわち、ＵＮＤＯ機能についても、時間Ｔ２の待機時間中に操作者７０がキャンセルジェスチャーを実施することで、キャンセルや取り消しが可能である。なお、本実施形態では、時間Ｔ２の待機時間中に、認識されたキャンセルジェスチャーとは異なる種類のキャンセルジェスチャーが実施された（認識された）場合に、ＵＮＤＯ機能の取り消しが可能となっている。
【0044】
ステップＳ１７において、ＣＰＵ１１は、プロジェクタ３０による投影が終了したか否かを判断する（ステップＳ１７）。プロジェクタ３０による投影は、投影終了を指示するジェスチャー又は操作部１４の操作により終了させることができる。
投影が終了していないと判断した場合（ステップＳ１７；ＮＯ）、ＣＰＵ１１は、ステップＳ１に戻る。
投影が終了したと判断した場合（ステップＳ１７；ＹＥＳ）、ＣＰＵ１１は、ジェスチャー表示処理を終了する。
投影が終了していないと判断した場合（ステップＳ１７；ＮＯ）、ＣＰＵ１１は、ステップＳ１に戻る。
投影が終了したと判断した場合（ステップＳ１７；ＹＥＳ）、ＣＰＵ１１は、ジェスチャー表示処理を終了する。
【0045】
次に、図４に示すタイマー処理について説明する。タイマー処理は、インターバルタイマー１７又はジェスチャータイマー１８から割り込み信号を受信した際に、ＣＰＵ１１とプログラム１３１との協働により実行される。
【0046】
まず、ＣＰＵ１１は、インターバルタイマー１７にセットされた時間Ｔ１が経過したか否かを判断する（ステップＳ２１）。
インターバルタイマー１７にセットされた時間Ｔ１が経過していないと判断した場合（ステップＳ２１；ＮＯ）、ＣＰＵ１１は、ステップＳ２３に移行する。
インターバルタイマー１７にセットされた時間Ｔ１が経過していないと判断した場合（ステップＳ２１；ＮＯ）、ＣＰＵ１１は、ステップＳ２３に移行する。
【0047】
インターバルタイマー１７にセットされた時間Ｔ１が経過したと判断した場合（ステップＳ２１；ＹＥＳ）、ＣＰＵ１１は、表示されているジェスチャーを示すアイコンの表示を更新し（ステップＳ２２）、ステップＳ２３に移行する。
例えば、アイコンがアニメーションであれば、次のフレームを表示させる。
例えば、アイコンがアニメーションであれば、次のフレームを表示させる。
【0048】
ステップＳ２３において、ＣＰＵ１１は、ジェスチャータイマー１８にセットされた時間Ｔ２が経過したか否かを判断する（ステップＳ２３）。
ジェスチャータイマー１８にセットされた時間Ｔ２が経過していないと判断した場合（ステップＳ２３；ＮＯ）、ＣＰＵ１１は、タイマー処理を終了する。
ジェスチャータイマー１８にセットされた時間Ｔ２が経過していないと判断した場合（ステップＳ２３；ＮＯ）、ＣＰＵ１１は、タイマー処理を終了する。
【0049】
ジェスチャータイマー１８にセットされた時間Ｔ２が経過したと判断した場合（ステップＳ２３；ＹＥＳ）、ＣＰＵ１１は、インターバルタイマー１７の設定をクリアし、計測を停止させる（ステップＳ２４）。また、ＣＰＵ１１は、表示（投影）されているジェスチャーを示すアイコンを消去する（ステップＳ２５）。
そして、ＣＰＵ１１は、時間Ｔ２前に認識されたジェスチャーに対応する機能、すなわち、機能設定領域１２１に設定されている機能を実行し（ステップＳ２６）、タイマー処理を終了する。
そして、ＣＰＵ１１は、時間Ｔ２前に認識されたジェスチャーに対応する機能、すなわち、機能設定領域１２１に設定されている機能を実行し（ステップＳ２６）、タイマー処理を終了する。
【0050】
上述のジェスチャー表示処理とタイマー処理により、ＣＰＵ１１は、ジェスチャー（第１のジェスチャー）を認識すると、時間Ｔ２が経過するまで、認識された第１のジェスチャーを示すアイコンを表示するとともに、認識された第１のジェスチャーに対応する機能の実行を待機させる。第１のジェスチャーとは異なるジェスチャー（第２のジェスチャー）が認識されることなく時間Ｔ２が経過すると、ＣＰＵ１１は、第１のジェスチャーに対応する機能を実行させる。時間Ｔ２の待機中（時間Ｔ２内）に第２のジェスチャーが認識された場合、ＣＰＵ１１は、第１のジェスチャーに対応する機能の実行を取り消す。時間Ｔ２の経過後に第２のジェスチャーが認識された場合、ＣＰＵ１１は、第１のジェスチャーに対応する機能が実行される前の状態に戻す。
【0051】
【0052】
図５は、操作者７０が人差し指を投影画像５０（ここでは、地図）の左方向に向けたジェスチャー（第１のジェスチャー）を行った後、異なるジェスチャー（第２のジェスチャー）を行うことなくジェスチャータイマー１８の時間Ｔ２が経過した場合の、表示システム１の動きを示す図である。
図５に示すように、操作者７０が人差し指を投影画像５０の左方向に向けるジェスチャーを行うと、ジェスチャーが認識され、認識されたジェスチャーを示すアイコンＩｃ１が投影面４０に表示される。時間Ｔ２が経過するまで、アイコンＩｃ１が表示された状態で、認識されたジェスチャーに対応する機能の実行が待機される。時間Ｔ２が経過すると、アイコンＩｃ１が消去され、認識されたジェスチャーに対応する機能が実行される。図５では、人差し指を投影画像５０の左方向に向けるジェスチャーに対応する機能である、投影画像５０を左にスクロールする機能が実行される。
図５に示すように、操作者７０が人差し指を投影画像５０の左方向に向けるジェスチャーを行うと、ジェスチャーが認識され、認識されたジェスチャーを示すアイコンＩｃ１が投影面４０に表示される。時間Ｔ２が経過するまで、アイコンＩｃ１が表示された状態で、認識されたジェスチャーに対応する機能の実行が待機される。時間Ｔ２が経過すると、アイコンＩｃ１が消去され、認識されたジェスチャーに対応する機能が実行される。図５では、人差し指を投影画像５０の左方向に向けるジェスチャーに対応する機能である、投影画像５０を左にスクロールする機能が実行される。
【0053】
このように、操作者７０がジェスチャーを行った後、ジェスチャーが認識され、認識されたジェスチャーを示すアイコンＩｃ１が時間Ｔ２の間表示された状態となるため、操作者７０は、行ったジェスチャーが正しく認識されたか否かを確認することができる。ジェスチャーが正しく認識されたことを確認できた場合は、そのまま待機すれば、時間Ｔ２の経過後、ジェスチャーに対応する機能を実行させることができる。
【0054】
図６は、操作者７０が人差し指を投影画像５０の左方向に向けたジェスチャー（第１のジェスチャー）を行った後、ジェスチャータイマー１８の時間Ｔ２が経過するまでの間にキャンセルジェスチャー（第２のジェスチャー）を行った場合の表示システム１の動きを示す図である。
図６に示すように、操作者７０が人差し指を投影画像５０の左方向に向けるジェスチャーを行うと、ジェスチャーが認識され、認識されたジェスチャーを示すアイコンＩｃ１が投影面４０に表示される。時間Ｔ２の間、アイコンＩｃ１が表示された状態で、認識されたジェスチャーに対応する機能の実行が待機される。時間Ｔ２が経過する前に操作者７０がキャンセルジェスチャーを行うと、キャンセルジェスチャーが認識され、キャンセルジェスチャーを示すアイコンＩｃ２が表示され、待機されている機能の実行が取り消される。すなわち、人差し指を投影画像５０の左方向に向けるジェスチャーに対応する機能は実行されない。
図６に示すように、操作者７０が人差し指を投影画像５０の左方向に向けるジェスチャーを行うと、ジェスチャーが認識され、認識されたジェスチャーを示すアイコンＩｃ１が投影面４０に表示される。時間Ｔ２の間、アイコンＩｃ１が表示された状態で、認識されたジェスチャーに対応する機能の実行が待機される。時間Ｔ２が経過する前に操作者７０がキャンセルジェスチャーを行うと、キャンセルジェスチャーが認識され、キャンセルジェスチャーを示すアイコンＩｃ２が表示され、待機されている機能の実行が取り消される。すなわち、人差し指を投影画像５０の左方向に向けるジェスチャーに対応する機能は実行されない。
【0055】
このように、アイコンＩｃ１が表示されている時間Ｔ２の間に、操作者７０が、行ったジェスチャーが正しく認識されたか否かを確認し、正しく認識されていなかった場合、又は、誤ったジェスチャーをしてしまった場合、キャンセルジェスチャーを行うことで、行ったジェスチャーに対応する機能の実行を取り消すことができる。
なお、時間Ｔ２が経過し、行ったジェスチャーに対応する機能が実行された後に、実行された機能を取り消したい場合、操作者７０がキャンセルジェスチャーを行うことで、直近に実行された機能が取り消され、その機能の実行前の状態に戻る。
なお、時間Ｔ２が経過し、行ったジェスチャーに対応する機能が実行された後に、実行された機能を取り消したい場合、操作者７０がキャンセルジェスチャーを行うことで、直近に実行された機能が取り消され、その機能の実行前の状態に戻る。
【0056】
図７は、操作者７０が人差し指を投影画像５０の左方向に向けたジェスチャー（第１のジェスチャー）を行った後、ジェスチャータイマー１８にセットした時間Ｔ２が経過するまでの間に、キャンセルジェスチャー以外の、第１のジェスチャーとは異なる第２のジェスチャーを行った場合の表示システム１の動きを示す図である。
図７に示すように、操作者７０が人差し指を投影画像５０の左方向に向ける第１のジェスチャーを行うと、ジェスチャーが認識され、認識されたジェスチャーを示すアイコンＩｃ１が投影面４０に表示される。時間Ｔ２の間、アイコンＩｃ１が表示された状態で、認識されたジェスチャーに対応する機能の実行が待機される。時間Ｔ２が経過する前に、操作者７０が、キャンセルジェスチャー以外の、第１のジェスチャーとは異なる第２のジェスチャーを行うと、第２のジェスチャーが認識され、第２のジェスチャーを示すアイコンＩｃ３が投影面４０に表示される。時間Ｔ２の間、アイコンＩｃ３が表示された状態で、認識された第２のジェスチャーに対応する機能の実行が待機される。時間Ｔ２が経過すると、認識された第２のジェスチャーに対応する機能が実行される。図７では、人差し指を投影画像５０の右方向に向けるジェスチャーに対応する機能である、投影画像５０（地図）を右にスクロールする機能が実行される。
図７に示すように、操作者７０が人差し指を投影画像５０の左方向に向ける第１のジェスチャーを行うと、ジェスチャーが認識され、認識されたジェスチャーを示すアイコンＩｃ１が投影面４０に表示される。時間Ｔ２の間、アイコンＩｃ１が表示された状態で、認識されたジェスチャーに対応する機能の実行が待機される。時間Ｔ２が経過する前に、操作者７０が、キャンセルジェスチャー以外の、第１のジェスチャーとは異なる第２のジェスチャーを行うと、第２のジェスチャーが認識され、第２のジェスチャーを示すアイコンＩｃ３が投影面４０に表示される。時間Ｔ２の間、アイコンＩｃ３が表示された状態で、認識された第２のジェスチャーに対応する機能の実行が待機される。時間Ｔ２が経過すると、認識された第２のジェスチャーに対応する機能が実行される。図７では、人差し指を投影画像５０の右方向に向けるジェスチャーに対応する機能である、投影画像５０（地図）を右にスクロールする機能が実行される。
【0057】
このように、アイコンＩｃが表示されている時間Ｔ２の間に、操作者７０が、行った第１のジェスチャーが正しく認識されたか否かを確認し、正しく認識されていなかった場合、又は、誤ったジェスチャーをしてしまった場合は、実行させたい機能に対応する第２のジェスチャーを行うことで、第１のジェスチャーに対応する機能の実行を取り消して、第２のジェスチャーに対応する機能を実行させることができる。
【0058】
以上説明したように、本実施形態に係る表示システム１は、制御装置１０と、撮影装置２０と、プロジェクタ３０と、を備える。制御装置１０のＣＰＵ１１は、撮影装置２０により撮影された画像にジェスチャー認識を行い、ジェスチャー認識により認識された第１のジェスチャーを示すアイコンをプロジェクタ３０により投影面４０に時間Ｔ２の間、投影表示させるとともに、第１のジェスチャーに対応する機能の実行を時間Ｔ２待機させる。そして、時間Ｔ２の待機中に撮影装置２０により撮影された画像から第１のジェスチャーとは異なる第２のジェスチャーが認識されたか否かに基づいて、第１のジェスチャーに対応する機能を実行させるか否かを制御する。
したがって、ジェスチャーが正しく認識されたか否かを操作者が確認することができる。
したがって、ジェスチャーが正しく認識されたか否かを操作者が確認することができる。
【0059】
例えば、ＣＰＵ１１は、時間Ｔ２の待機中に撮影装置２０により撮影された画像から第１のジェスチャーとは異なる第２のジェスチャーが認識されなかった場合に、第１のジェスチャーに対応する機能を実行させる。
したがって、ジェスチャーが正しく認識されたか否かを操作者が確認した上で、第１のジェスチャーに対応する機能を実行させることが可能となる。
したがって、ジェスチャーが正しく認識されたか否かを操作者が確認した上で、第１のジェスチャーに対応する機能を実行させることが可能となる。
【0060】
また、ＣＰＵ１１は、時間Ｔ２の待機中にジェスチャー認識により第２のジェスチャーが認識された場合、第１のジェスチャーに対応する機能の実行を取り消す。
したがって、ジェスチャーが正しく認識されなかった場合、または、誤ったジェスチャーをしてしまった場合は、操作者が他のジェスチャーを行うことで、待機中のジェスチャーに対応する機能の実行を取り消すことができる。
したがって、ジェスチャーが正しく認識されなかった場合、または、誤ったジェスチャーをしてしまった場合は、操作者が他のジェスチャーを行うことで、待機中のジェスチャーに対応する機能の実行を取り消すことができる。
【0061】
例えば、ＣＰＵ１１は、時間Ｔ２の待機中にジェスチャー認識により第１のジェスチャーに対応する機能の実行を取り消すことを指示するキャンセルジェスチャーが認識された場合、第１のジェスチャーに対応する機能の実行を取り消す。
したがって、ジェスチャーが正しく認識されなかった場合、または、誤ったジェスチャーをしてしまった場合は、操作者が時間Ｔ２内にキャンセルジェスチャーをすることで、待機中のジェスチャーに対応する機能の実行を取り消すことができる。
したがって、ジェスチャーが正しく認識されなかった場合、または、誤ったジェスチャーをしてしまった場合は、操作者が時間Ｔ２内にキャンセルジェスチャーをすることで、待機中のジェスチャーに対応する機能の実行を取り消すことができる。
【0062】
また、例えば、ＣＰＵ１１は、第１のジェスチャーに対応する機能の実行後にジェスチャー認識によって撮影装置２０により撮影された画像からキャンセルジェスチャーが認識された場合、第１のジェスチャーに対応する機能の実行前の状態に戻す処理を実行する。
したがって、ジェスチャーに対応する機能が実行された後でも、その機能の実行を取り消すことができる。
したがって、ジェスチャーに対応する機能が実行された後でも、その機能の実行を取り消すことができる。
【0063】
また、例えば、ＣＰＵ１１は、時間Ｔ２の待機中にジェスチャー認識により第１のジェスチャーに対応する機能とは異なる機能の実行を指示する第２のジェスチャーが認識された場合、第１のジェスチャーに対応する機能の実行を取り消す。
したがって、ジェスチャーが正しく認識されなかった場合、または、誤ったジェスチャーをしてしまった場合、時間Ｔ２の待機中に操作者が意図する機能に対応するジェスチャーをすることで、待機中のジェスチャーに対応する機能の実行を取り消すことができる。
したがって、ジェスチャーが正しく認識されなかった場合、または、誤ったジェスチャーをしてしまった場合、時間Ｔ２の待機中に操作者が意図する機能に対応するジェスチャーをすることで、待機中のジェスチャーに対応する機能の実行を取り消すことができる。
【0064】
また、例えば、ＣＰＵ１１は、時間Ｔ２の待機中にジェスチャー認識により第１のジェスチャーに対応する機能とは異なる機能の実行を指示する第２のジェスチャーが認識された場合、第２のジェスチャーを示すアイコンをプロジェクタ３０により時間Ｔ２表示させるとともに、第１のジェスチャーに対応する機能の実行を取り消して第２のジェスチャーに対応する機能の実行を時間Ｔ２待機させる。そして、ＣＰＵ１１は、時間Ｔ２の待機中に撮影装置２０により撮影された画像から第２のジェスチャーとは異なるジェスチャーが認識されなかった場合に、第２のジェスチャーに対応する機能を実行させる。
したがって、操作者が意図したジェスチャーが認識されなかった場合、認識されたジェスチャーに対応する機能の実行の時間Ｔ２の待機中に操作者が意図する機能に対応するジェスチャーをすることで、認識されたジェスチャーに対応する機能の実行を取り消して、操作者が意図する機能を実行させることができる。
したがって、操作者が意図したジェスチャーが認識されなかった場合、認識されたジェスチャーに対応する機能の実行の時間Ｔ２の待機中に操作者が意図する機能に対応するジェスチャーをすることで、認識されたジェスチャーに対応する機能の実行を取り消して、操作者が意図する機能を実行させることができる。
【0065】
なお、上記実施形態における記述は、本発明に係る制御装置、表示システム、制御方法及びプログラムの好適な一例であり、これに限定されるものではない。
例えば、上記実施形態では、ジェスチャーに対応する機能がプロジェクタ３０に実行させる機能である場合を例として説明したが、これに限定されず、表示システム１を構成するいずれの装置に実施させる機能であってもよい。
例えば、上記実施形態では、ジェスチャーに対応する機能がプロジェクタ３０に実行させる機能である場合を例として説明したが、これに限定されず、表示システム１を構成するいずれの装置に実施させる機能であってもよい。
【0066】
また、上記実施形態では、本発明の表示部が、投影面に画像を投影表示する投影部であるプロジェクタ３０である場合を例にとり説明したが、ＬＣＤ等のモニターに画像を表示する表示装置であってもよい。
【0067】
また、上記実施形態では、認識されたジェスチャーを示すアイコンを表示する所定時間及び認識されたジェスチャーに対応する機能の実行を待機させる所定時間をジェスチャータイマー１８に設定された時間Ｔ２としたが、これに限定されない。例えば、認識されたジェスチャーを示すアイコンがアニメーションである場合、認識されたジェスチャーを示すアイコンを表示する所定時間及び認識されたジェスチャーに対応する機能の実行を待機させる所定時間を、認識されたジェスチャーを示すアイコンのアニメーション開始から終了までの時間としてもよい。
【0068】
また、表示システム１が複数の表示部（モニターやプロジェクタなどの表示装置）を備える場合、ジェスチャーを示すアイコンを表示する表示部を指定できるようにしてもよい。これにより、投影画像５０等の他の表示対象に重ならないようにアイコンを表示することが可能となる。
【0069】
また、ＣＰＵ１１は、第１のジェスチャーに対応する機能の実行が待機されている時間Ｔ２の間に、撮影装置２０により撮影された画像から第２のジェスチャーとして、待機中の第１のジェスチャーに対応する機能の実行を指示する確定ジェスチャーが認識された場合に、第１のジェスチャーに対応する機能を実行させ、時間Ｔ２の間に撮影装置２０により撮影された画像から確定ジェスチャーが認識されなかった場合に、第１のジェスチャーに対応する機能の実行を取り消すよう制御してもよい。このような構成においても、ジェスチャーが正しく認識されたか否かを操作者が確認した上で、第１のジェスチャーに対応する機能を実行させることが可能となる。
確定ジェスチャーの例としては、人差し指と親指先端を着けて丸を形作るＯＫマークや、サムズアップと呼ばれる、親指による賛意を示すジェスチャー等が考えられるが、これに限定されるものではない。
確定ジェスチャーの例としては、人差し指と親指先端を着けて丸を形作るＯＫマークや、サムズアップと呼ばれる、親指による賛意を示すジェスチャー等が考えられるが、これに限定されるものではない。
【0070】
また、本発明の課題を解決するための他の例として、第１のジェスチャーに対応する機能の実行を待機する時間である時間Ｔ２を設けず、確定ジェスチャー、キャンセルジェスチャーのいずれかが行われるまで、第１のジェスチャーに対応する機能を実行も取り消しもしないでアイコン表示しておくこととしてもよい。また、確定ジェスチャーを別途設けずとも、第１のジェスチャーを一定期間継続していれば実行を確定し、第１のジェスチャーを一定期間継続しないとキャンセルするように制御することも可能である。
【0071】
また、上記実施形態では、ジェスチャー認識により認識されたジェスチャーを示すアイコンを表示させる第１の時間と、認識されたジェスチャーに対応する機能の実行を待機させる第２の時間を同じ時間（時間Ｔ２）としたが、第１の時間と第２の時間は同じであっても異なっていても構わない。
【0072】
また、以上の説明では、本発明に係るプログラムのコンピュータ読み取り可能な媒体として記憶部１３のＨＤＤ、ＳＳＤを使用した例を開示したが、この例に限定されない。その他のコンピュータ読み取り可能な媒体として、フラッシュメモリ、ＣＤ－ＲＯＭ等の情報記録媒体を適用することが可能である。また、本発明に係るプログラムのデータを通信回線を介して提供する媒体として、キャリアウエーブ（搬送波）も本発明に適用される。
【0073】
また、上記実施形態における制御装置１０、撮影装置２０及びプロジェクタ３０の各構成要素の細部構成及び細部動作に関しては、本発明の趣旨を逸脱することのない範囲で適宜変更可能であることは勿論である。
【符号の説明】
【0074】
１ 表示システム
１０ 制御装置
１１ ＣＰＵ
１２ ＲＡＭ
１２１ 機能設定領域
１３ 記憶部
１４ 操作部
１５ 表示部
１６ 通信部
１７ インターバルタイマー
１８ ジェスチャータイマー
１９ バス
２０ 撮影装置
３０ プロジェクタ
４０ 投影面
５０ 投影画像
１０ 制御装置
１１ ＣＰＵ
１２ ＲＡＭ
１２１ 機能設定領域
１３ 記憶部
１４ 操作部
１５ 表示部
１６ 通信部
１７ インターバルタイマー
１８ ジェスチャータイマー
１９ バス
２０ 撮影装置
３０ プロジェクタ
４０ 投影面
５０ 投影画像
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】