特開 2022-188719 画像処理方法および画像処理装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2022188719

(43)【公開日】2022-12-21

(54)【発明の名称】画像処理方法および画像処理装置

(51)【国際特許分類】

   G06F 3/04817 20220101AFI20221214BHJP

   G06F 3/04845 20220101ALI20221214BHJP

   G09G 5/00 20060101ALI20221214BHJP

   G09G 5/08 20060101ALI20221214BHJP

   G09G 5/36 20060101ALI20221214BHJP

   G09F 9/00 20060101ALI20221214BHJP

【ＦＩ】

G06F3/0481 170

G06F3/0484 150

G09G5/00 530D

G09G5/00 550B

G09G5/00 550C

G09G5/08 M

G09G5/08 A

G09G5/36 530Y

G09F9/00 366G

【審査請求】未請求

【請求項の数】8

【出願形態】ＯＬ

(21)【出願番号】P 2021117684

(22)【出願日】2021-07-16

(31)【優先権主張番号】P 2021096399

(32)【優先日】2021-06-09

(33)【優先権主張国・地域又は機関】JP

(71)【出願人】

【識別番号】000002369

【氏名又は名称】セイコーエプソン株式会社

(74)【代理人】

【識別番号】100179475

【弁理士】

【氏名又は名称】仲井 智至

(74)【代理人】

【識別番号】100216253

【弁理士】

【氏名又は名称】松岡 宏紀

(74)【代理人】

【識別番号】100225901

【弁理士】

【氏名又は名称】今村 真之

(72)【発明者】

【氏名】友利 明央

(72)【発明者】

【氏名】藤森 俊樹

【テーマコード（参考）】

5C182

5E555

5G435

【Ｆターム（参考）】

5C182AA02

5C182AA03

5C182AA04

5C182AC39

5C182BA05

5C182BA14

5C182BA65

5C182CB42

5C182CB47

5C182CB54

5C182DA65

5E555AA04

5E555BA01

5E555BA29

5E555BB01

5E555BB29

5E555BC18

5E555CA14

5E555CB07

5E555CB10

5E555CB16

5E555CB18

5E555CB34

5E555CB76

5E555CC17

5E555CC26

5E555DA01

5E555DA03

5E555DB18

5E555DB53

5E555DC11

5E555DC13

5E555DC19

5E555FA00

5G435AA00

5G435BB05

5G435BB06

5G435BB12

5G435BB17

5G435EE49

5G435GG46

5G435LL15

(57)【要約】

【課題】画像処理における操作性を向上させる。
【解決手段】プロジェクター１０において、投射部１４は、描画画像７０上に消しゴムアイコン６０を表示する。消しゴムアイコン６０は、第１部分６２と第２部分とを有する。投射領域Ｒに対する指示体２０の接触位置の軌跡の始点が、消しゴムアイコン６０が表示されている領域に含まれる場合、消しゴムアイコン６０の表示位置は、接触位置の軌跡に沿って移動される。始点が、第１部分６２が表示されている領域に含まれる場合、処理部１７は、消しゴムアイコン６０の移動軌跡と重なった描画画像７０の部分に対して描画効果を付与する。始点が、第２部分６４が表示されている領域に含まれる場合、処理部１７は、消しゴムアイコン６０の移動軌跡と重なった描画画像７０の部分の表示を維持する。
【選択図】図９

【特許請求の範囲】

【請求項1】

指示体が表示面に接触してから離れるまでの期間、前記表示面における前記指示体の接触位置の軌跡を検出することと、
前記表示面に第１画像を表示することと、
前記第１画像を背景として、第１部分と、第２部分とを有する第２画像を前記表示面に表示することと、
前記接触位置の軌跡の始点が、前記表示面の前記第２画像が表示されている領域に含まれる場合に、前記接触位置の軌跡に沿って、前記表示面における前記第２画像の表示位置を移動させることと、
前記第２画像の表示位置を移動させることにおいて、前記始点が、前記第１部分が表示されている領域に含まれる場合に、前記第２画像の移動軌跡と重なった前記第１画像の部分に対して描画効果を付与することと、
前記第２画像の表示位置を移動させることにおいて、前記始点が、前記第２部分が表示されている領域に含まれる場合に、前記第２画像の移動軌跡と重なった前記第１画像の部分の表示を維持することと、
を含む、画像処理方法。

【請求項2】

前記第１画像は、前記始点が前記第２画像が表示されている領域に含まれない場合の、前記接触位置の軌跡に基づく画像であり、
前記描画効果は、前記第１画像の部分を消去することである、
請求項１記載の画像処理方法。

【請求項3】

前記第２画像を表示することは、前記接触位置の軌跡が前記第１画像として表示される描画モードにおいて前記表示面に前記第２画像を表示し続けることを含む、
請求項１または２記載の画像処理方法。

【請求項4】

前記第２画像を表示することは、前記表示面の第１位置に前記第２画像を表示することを含み、
前記第２画像の表示位置を移動させることは、前記第２画像を前記第１位置から前記表示面の第２位置に移動させることを含み、
前記第２位置において、前記第２画像が表示されている領域への前記指示体の接触が解除された場合に、前記第２画像の前記第２位置への表示を継続すること、
を更に含む、請求項１から３のいずれか１項記載の画像処理方法。

【請求項5】

前記第２位置において、前記第２画像が表示されている領域への前記指示体の接触が解除されてから所定時間が経過した場合に、前記第２画像を前記第１位置に表示すること、
を更に含む、請求項４記載の画像処理方法。

【請求項6】

前記第２画像の前記第２位置への表示を継続することは、前記第２画像が表示されている領域に前記指示体が接触するまで、前記第２画像の前記第２位置への表示を継続することを含む、
請求項４記載の画像処理方法。

【請求項7】

前記第２画像において、前記第１部分の外縁は、前記第２部分に囲まれている、
請求項１から６のいずれか１項記載の画像処理方法。

【請求項8】

表示装置と、
指示体の位置に関する情報を検出する検出装置と、
少なくとも１つの処理装置と、を含み、
前記処理装置は、
前記検出装置の出力に基づいて、前記指示体が表示面に接触してから離れるまでの期間、前記表示面における前記指示体の接触位置の軌跡を検出することと、
前記表示装置を用いて、前記表示面に第１画像を表示することと、
前記表示装置を用いて、前記第１画像を背景として、第１部分と、第２部分とを有する第２画像を前記表示面に表示することと、
前記接触位置の軌跡の始点が、前記表示面の前記第２画像が表示されている領域に含まれる場合に、前記接触位置の軌跡に沿って、前記表示面における前記第２画像の表示位置を移動させることと、
前記第２画像の表示位置が移動する間において、前記始点が、前記第１部分が表示されている領域に含まれる場合に、前記第２画像の移動軌跡と重なった前記第１画像の部分に対して描画効果を付与することと、
前記第２画像の表示位置を移動させることにおいて、前記始点が、前記第２部分が表示されている領域である場合に、前記第２画像の移動軌跡と重なった前記第１画像の部分の表示を維持することと、を実行する、
画像処理装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、画像処理方法および画像処理装置に関する。

【背景技術】

【0002】

従来、ユーザーからの描画入力に基づいて描画画像を表示する機器において、描画を消去するための消しゴム機能が搭載されているものがある。例えば、下記特許文献１には、ユーザーからのタッチ入力の軌跡に基づく描画画像を表示画面に表示する情報処理装置が記載されている。情報処理装置は、ツールバーの消しゴムボタンがタッチされると、表示画面に消しゴムカーソルを表示させる。ユーザーが消しゴムカーソルを移動させると、消しゴムカーソルの軌跡と重なる描画画像の領域が消去される。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０１８－１６３６８４号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

上述した従来技術では、ユーザーは、消しゴム機能を利用したい場合にツールバーをタッチする必要がある。ユーザーが消しゴムによる消去と描画入力を繰り返す場合には、都度ツールバーを操作する必要があるため、操作が煩雑であるという課題がある。また、描画画像の消去に限らず、ツールバーを用いて機能の呼び出しを行う手法は、作業性の観点で改善の余地がある。

【課題を解決するための手段】

【0005】

本発明の一態様にかかる画像処理方法は、指示体が表示面に接触してから離れるまでの期間、前記表示面における前記指示体の接触位置の軌跡を検出することと、前記表示面に第１画像を表示することと、前記第１画像を背景として、第１部分と、第２部分とを有する第２画像を前記表示面に表示することと、前記接触位置の軌跡の始点が、前記表示面の前記第２画像が表示されている領域に含まれる場合に、前記接触位置の軌跡に沿って、前記表示面における前記第２画像の表示位置を移動させることと、前記第２画像の表示位置を移動させることにおいて、前記始点が、前記第１部分が表示されている領域に含まれる場合に、前記第２画像の移動軌跡と重なった前記第１画像の部分に対して描画効果を付与することと、前記第２画像の表示位置を移動させることにおいて、前記始点が、前記第２部分が表示されている領域に含まれる場合に、前記第２画像の移動軌跡と重なった前記第１画像の部分の表示を維持することと、を含む。

【0006】

本発明の一態様にかかる画像処理装置は、表示装置と、指示体の位置に関する情報を検出する検出装置と、少なくとも１つの処理装置と、を含み、前記処理装置は、前記検出装置の出力に基づいて、前記指示体が表示面に接触してから離れるまでの期間、前記表示面における前記指示体の接触位置の軌跡を検出することと、前記表示装置を用いて、前記表示面に第１画像を表示することと、前記表示装置を用いて、前記第１画像を背景として、第１部分と、第２部分とを有する第２画像を前記表示面に表示することと、前記接触位置の軌跡の始点が、前記表示面の前記第２画像が表示されている領域に含まれる場合に、前記接触位置の軌跡に沿って、前記表示面における前記第２画像の表示位置を移動させることと、前記第２画像の表示位置が移動する間において、前記始点が、前記第１部分が表示されている領域に含まれる場合に、前記第２画像の移動軌跡と重なった前記第１画像の部分に対して描画効果を付与することと、前記第２画像の表示位置を移動させることにおいて、前記始点が、前記第２部分が表示されている領域である場合に、前記第２画像の移動軌跡と重なった前記第１画像の部分の表示を維持することと、を実行する。

【図面の簡単な説明】

【0007】

【図1】実施形態にかかるプロジェクター１０を含むプロジェクターシステム１を示す図である。

【図2】指示体２０の構成の一例を示す図である。

【図3】プロジェクター１０の構成の一例を示す図である。

【図4】描画モード選択時における投射領域Ｒの表示の一例を示す図である。

【図5】投射画像におけるレイヤー配置を模式的に示す図である。

【図6A】本実施形態にかかる消しゴムアイコン６０の拡大図である。

【図6B】消しゴムアイコン６０の他の例を示す図である。

【図7】消しゴムアイコン６０が透過性を有する場合を模式的に示す図である。

【図8】始点が第２部分６４の表示領域に含まれる場合の描画画像７０を模式的に示す図である。

【図9】始点が第１部分６２の表示領域に含まれる場合の描画画像７０を模式的に示す図である。

【図10】プロジェクター１０の処理部１７が制御プログラム１６２に従って実行する画像処理方法の流れを示すフローチャートである。

【図11】変形例１にかかる投射領域Ｒの表示の一例を示す図である。

【図12】始点が第２部分８４の表示領域に含まれる場合の表示画像７２を模式的に示す図である。

【図13】始点が第１部分８２の表示領域に含まれる場合の表示画像７２を模式的に示す図である。

【図14】指示体２０の接触位置の軌跡を模式的に示す図である。

【発明を実施するための形態】

【0008】

以下、添付図面を参照しながら本発明にかかる好適な実施形態を説明する。なお、図面において各部の寸法または縮尺は実際と適宜に異なり、理解を容易にするために模式的に示している部分もある。また、本発明の範囲は、以下の説明において特に本発明を限定する旨の記載がない限り、これらの形態に限られない。

【0009】

Ａ：プロジェクターシステム１の概要
図１は、実施形態にかかるプロジェクター１０を含むプロジェクターシステム１を示す図である。プロジェクターシステム１は、プロジェクター１０と、指示体２０と、を含む。

【0010】

プロジェクター１０は、壁Ｗのうち、投射領域Ｒの上端Ｒｅ１よりも上方の部分に設置される。プロジェクター１０は、壁Ｗに設置されずに、例えば、机、テーブルまたは床の上に配置されてもよいし、天井から吊るされてもよい。本実施形態では、投射領域Ｒは、例えば壁Ｗの一部分である。投射領域Ｒは、壁Ｗの一部の他、スクリーン、扉、ホワイトボード等であってもよい。投射領域Ｒは、表示面の一例である。

【0011】

プロジェクター１０は、投射領域Ｒに画像を投射することによって投射領域Ｒに画像を表示する。プロジェクター１０は、表示装置の一例である。表示装置は、プロジェクター１０に限らず、ディスプレイ、例えば、ＦＰＤ（Ｆｌａｔ Ｐａｎｅｌ Ｄｉｓｐｌａｙ）でもよい。ＦＰＤは、例えば、液晶ディスプレイ、プラズマディスプレイまたは有機ＥＬ（Ｅｌｅｃｔｒｏ Ｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイである。

【0012】

指示体２０は、例えば、ペン型の指示具である。指示体２０の形状は、ペンの形状に限らず、例えば、円柱、角柱、円錐または角錐でもよい。ユーザーは、例えば、指示体２０の軸部２０ｂを持ち、先端２０ａを投射領域Ｒに接触させながら指示体２０を投射領域Ｒ上で移動させる。

【0013】

プロジェクター１０は、カメラ１５で投射領域Ｒを撮像することによって撮像データを生成する。プロジェクター１０は、撮像データを解析することによって指示体２０の位置を特定する。後述するように、本実施形態では、赤外光撮像データ上で指示体２０の第１光源２３から発光する赤外光が検出された位置が、指示体２０の先端２０ａが投射領域Ｒに接触する接触位置とみなされる。

【0014】

プロジェクター１０は、指示体２０にて選択可能なアイコンを示す画像を投射領域Ｒに表示する。図１には、プロジェクター１０の動作モードを指定するためのモード選択部５０が表示されている。モード選択部５０は、パーソナルコンピューター（ＰＣ）のイラストが描かれたＰＣモードアイコン５１と、ペンのイラストが描かれた示す描画モードアイコン５２を含む。

【0015】

ＰＣモードアイコン５１が選択された状態では、プロジェクター１０は、ＰＣモードで動作する。ＰＣモードとは、プロジェクター１０と接続されたコンピューターＰ内のデータを投射領域Ｒに表示し、投射領域Ｒへの操作によってコンピューターＰの操作を可能とするモードである。図１は、ＰＣモードアイコン５１が選択された状態を示している。投射領域Ｒには、コンピューターＰのデスクトップ画面Ｄ１を表示する投射デスクトップ画面Ｄ２が表示されている。例えば、指示体２０によって投射デスクトップ画面Ｄ２上のフォルダーアイコンＦを素早く２回タッチすると、フォルダーアイコンＦに対応するコンピューターＰ内のフォルダーを展開したウィンドウ表示が投射領域Ｒに表示される。プロジェクター１０とコンピューターＰとは、例えば後述する近距離無線通信で接続されている。

【0016】

一方、描画モードアイコン５２が選択された状態では、プロジェクター１０は、描画モードで動作する。詳細は後述するが、描画モードでは、ユーザーが指示体２０を投射領域Ｒ上で移動させると、プロジェクター１０は、指示体２０の軌跡に応じた線ＤＬを含む描画画像７０を投射領域Ｒに投射する。描画モードでは、指示体２０は、描画位置を指定するペンとして機能する。

【0017】

モード選択部５０は、投射領域Ｒに継続的に表示されてもよいし、例えば一定期間モード選択部５０への操作がない場合には、投射領域Ｒへの表示が停止されてもよい。本実施形態では、後者が採用される。後者の場合、例えば後述するプロジェクター１０の操作部１２への操作に対応して、モード選択部５０の表示が再開されてもよい。

【0018】

Ｂ：指示体２０の構成
図２は、指示体２０の構成の一例を示す図である。指示体２０は、第１通信部２２と、第１光源２３と、スイッチ２４と、指示体記憶部２５と、指示体制御部２６と、を含む。

【0019】

第１通信部２２は、通信回路およびアンテナ等を有し、プロジェクター１０とＢｌｕｅｔｏｏｔｈで無線通信する。Ｂｌｕｅｔｏｏｔｈは登録商標である。Ｂｌｕｅｔｏｏｔｈは、近距離無線方式の一例である。近距離無線方式は、Ｂｌｕｅｔｏｏｔｈに限らず、例えば、Ｗｉ－Ｆｉでもよい。Ｗｉ－Ｆｉは登録商標である。第１通信部２２とプロジェクター１０との無線通信の通信方式は、近距離無線方式に限らず他の通信方式でもよい。なお、第１通信部２２が有線通信を行う場合、第１通信部２２は、通信回路と、通信用配線が接続されるコネクタ等を有する。

【0020】

第１光源２３は、赤外光を出射するＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）である。第１光源２３は、ＬＥＤに限らず、例えば、赤外光を出射するＬＤ（Ｌａｓｅｒ Ｄｉｏｄｅ）でもよい。第１光源２３は、指示体２０の接触位置をプロジェクター１０に認識させるために、赤外光を出射する。

【0021】

スイッチ２４は、指示体２０の先端２０ａに圧力が加わるとオンし、先端２０ａに加えられた圧力が解消されるとオフする。スイッチ２４は、先端２０ａが投射領域Ｒに接触しているか否かを検出するセンサーとして機能する。スイッチ２４のオンオフに連動して、第１光源２３がオンオフする。すなわち、指示体２０の先端２０ａに圧力が加わると、スイッチ２４がオンとなり、第１光源２３が発光する。また、先端２０ａに加えられた圧力が解消されると、スイッチ２４がオフとなり、第１光源２３は発光を停止する。

【0022】

指示体記憶部２５は、例えば、フラッシュメモリー等の不揮発性の半導体メモリーである。指示体記憶部２５は、指示体制御部２６で実行する制御プログラムを記憶する。

【0023】

指示体制御部２６は、例えば、単数または複数のプロセッサーによって構成される。一例を挙げると、指示体制御部２６は、単数または複数のＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）によって構成される。指示体制御部２６の機能の一部または全部は、ＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）、ＰＬＤ（Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ）、ＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）等の回路によって構成されてもよい。指示体制御部２６は、各種の処理を並列的または逐次的に実行する。

【0024】

指示体制御部２６は、指示体記憶部２５に記憶されている制御プログラムを実行することによって種々の機能を実現する。例えば、指示体制御部２６は、スイッチ２４がオンしている状況において、第１通信部２２がプロジェクター１０から同期信号を受信すると、第１光源２３を点灯させる。同期信号は、第１光源２３の点灯タイミングをカメラ１５の撮像タイミングと同期させるための信号である。

【0025】

Ｃ：プロジェクター１０の構成
図３は、プロジェクター１０の構成の一例を示す図である。プロジェクター１０は、操作部１２と、第２通信部１３と、投射部１４と、カメラ１５と、記憶部１６と、処理部１７とを含む。

【0026】

操作部１２は、例えば、各種の操作ボタン、操作キーまたはタッチパネルである。操作部１２は、例えばプロジェクター１０の筐体に設けられている。また、操作部１２は、プロジェクター１０の筐体とは別個に設けられたリモートコントローラーであってもよい。操作部１２は、ユーザーからの入力操作を受け取る。

【0027】

第２通信部１３は、通信回路とアンテナ等を有し、指示体２０の第１通信部２２とＢｌｕｅｔｏｏｔｈで無線通信を行う。無線通信の通信方式は、上述の通り、Ｂｌｕｅｔｏｏｔｈに限らず、例えば、Ｗｉ－Ｆｉでもよい。なお、第２通信部１３が有線通信を行う場合は、通信回路と、通信用配線が接続されるコネクタ等を有する。

【0028】

投射部１４は、投射領域Ｒに画像を投射することによって投射領域Ｒに画像を表示する。投射部１４は、表示装置の一例であり、画像処理回路、フレームメモリー、液晶ライトバルブ、ライトバルブ駆動回路、光源、投射光学系等を備える。画像処理回路は、処理部１７またはコンピューターＰ等の画像供給装置から画像データを受け取ると、当該画像データをフレームメモリーに展開し、必要な画像処理を行う。この画像処理は、例えば画像データの解像度を液晶ライトバルブの解像度を変換する処理、台形ゆがみを解消する幾何的補正処理等である。画像処理後の画像データは画像信号に変換され、画像信号に基づいて液晶ライトバルブ等が駆動されることによって、投射領域Ｒに画像データが画像として投射される。なお、投射部１４は、上述した液晶ライトバルブ等を用いた液晶方式の他、例えば、ＤＬＰ（Ｄｉｇｉｔａｌ Ｌｉｇｈｔｉｎｇ Ｐｒｏｃｅｓｓｉｎｇ）方式であってもよい。ＤＬＰは登録商標である。

【0029】

カメラ１５は、投射領域Ｒを撮像することによって撮像データを生成する。カメラ１５は、レンズ等の受光光学系と、受光光学系で集光される光を電気信号に変換する撮像素子等を含む。撮像素子は、例えば、赤外領域および可視光領域の光を受光するＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）イメージセンサーである。カメラ１５は、撮像素子に入射する光の一部を遮るフィルターを備えてもよい。例えば、カメラ１５は、撮像素子に赤外光を受光させる場合に、主に赤外領域の光を透過するフィルターを撮像素子前に配置してもよい。

【0030】

カメラ１５は、プロジェクター１０とは別体として設けられてもよい。この場合、カメラ１５とプロジェクター１０は、データの送受信ができるように有線または無線のインターフェイスにより相互に接続されてもよい。

【0031】

カメラ１５が可視光による撮像を行うと、例えば、投射部１４が投射領域Ｒに投射した画像が撮像される。以下、可視光によるカメラ１５の撮像によって生成される撮像データを「可視光撮像データ」と称する。可視光撮像データは、例えば、後述するキャリブレーションにおいて使用される。

【0032】

カメラ１５が赤外光による撮像を行うと、例えば、指示体２０が出射した赤外光を示す撮像データが生成される。以下、赤外光によるカメラ１５の撮像によって生成される撮像データを「赤外光撮像データ」と称する。赤外光撮像データは、例えば、投射領域Ｒ上の指示体２０の接触位置を検出するために使用される。すなわち、カメラ１５は、指示体２０の位置に関する情報を検出する検出装置の一例である。

【0033】

記憶部１６は、処理部１７が読み取り可能な記録媒体である。記憶部１６は、例えば、不揮発性メモリーと揮発性メモリーとを含む。不揮発性メモリーとしては、例えば、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）およびＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）が挙げられる。揮発性メモリーとしては、例えば、ＲＡＭが挙げられる。

【0034】

記憶部１６は、処理部１７によって実行される制御プログラム１６２と、処理部１７が使用する各種のデータ１６４と、を記憶する。

【0035】

制御プログラム１６２は、処理部１７によって実行される。制御プログラム１６２は、オペレーティングシステムと、複数のアプリケーションプログラムと、を含む。複数のアプリケーションプログラムには、インタラクティブ機能を実現するアプリケーションプログラムが含まれる。

【0036】

データ１６４は、処理部１７が実行する各種処理の処理条件を示すデータを含む。また、データ１６４は、画像処理で用いられるデータを含んでもよい。また、データ１６４には、キャリブレーション画像を示すキャリブレーション画像データが含まれる。キャリブレーション画像には、予め設定された形状のマークが間隔をあけて配置されている。

【0037】

処理部１７は、処理装置の一例であり、例えば、単数または複数のプロセッサーによって構成される。一例を挙げると、処理部１７は、単数または複数のＣＰＵによって構成される。処理部１７の機能の一部または全部は、ＤＳＰ、ＡＳＩＣ、ＰＬＤ、ＦＰＧＡ等の回路によって構成されてもよい。処理部１７は、各種の処理を並列的または逐次的に実行する。

【0038】

処理部１７は、記憶部１６から制御プログラム１６２を読み取って実行することにより、動作制御部１７２、表示制御部１７４、ＰＣモード制御部１７６および描画モード制御部１７８として機能する。

【0039】

動作制御部１７２は、プロジェクター１０の種々の動作を制御する。動作制御部１７２は、例えばキャリブレーションを実行する。キャリブレーションとは、投射部１４のフレームメモリー上の座標と、撮像データ上の座標とを、対応づける処理である。フレームメモリー上の座標は、投射領域Ｒに投射される画像上の位置に対応する。フレームメモリー上の位置と、撮像データ上の位置とが対応づけられることで、例えば、投射領域Ｒに投射される画像において、投射領域Ｒにおける指示体２０の接触位置に対応する部分を特定することができる。動作制御部１７２は、キャリブレーションを実行することにより、カメラ１５の撮像データ上の座標と、投射部１４のフレームメモリー上の座標とを対応づけるキャリブレーションデータを生成し、記憶部１６に記憶する。

【0040】

この他、動作制御部１７２は、例えば指示体２０と第２通信部１３との通信を確立する。また、動作制御部１７２は、キャリブレーション完了後、一定の時間間隔でカメラ１５に赤外光での撮像を実行させて赤外光撮像データを生成させる。また、動作制御部１７２は、カメラ１５の撮像タイミングに合わせて、同期信号を第２通信部１３から指示体２０に送信する。

【0041】

表示制御部１７４は、投射部１４が投射する画像を制御する。表示制御部１７４は、ＰＣモード制御部１７６と描画モード制御部１７８を含む。

【0042】

ＰＣモード制御部１７６は、ＰＣモードアイコン５１が選択されている場合、すなわち、ＰＣモードが指定されている場合における投射領域Ｒの表示画像を制御する。また、ＰＣモード制御部１７６は、例えばコンピューターＰとの通信の確立やデータの送受信等を行う。

【0043】

描画モード制御部１７８は、描画モードアイコン５２が選択されている場合、すなわち、描画モードが指定されている場合における投射領域Ｒの表示画像を制御する。描画モード制御部１７８は、例えばユーザーから指示体２０を用いた描画操作を受け付け、描画操作に応じた描画画像を投射領域Ｒに表示する。

【0044】

Ｄ：描画モードの詳細
図４は、描画モード選択時における投射領域Ｒの表示の一例を示す図である。図４において、投射領域Ｒには、描画モードアイコン５２が選択された状態のモード選択部５０、描画線ＤＬを含む描画画像７０、および消しゴムアイコン６０が表示されている。符号Ｈ１は、消しゴムアイコン６０の中心点Ｏの位置を示す。以下の説明において、消しゴムアイコン６０の表示位置とは、投射領域Ｒにおける消しゴムアイコン６０の中心点Ｏの位置である。また、消しゴムアイコン６０の表示領域とは、投射領域Ｒのうち消しゴムアイコン６０が表示されている領域である。描画画像７０は、ユーザーが投射領域Ｒに接して指示体２０を移動させた移動軌跡を示す描画線ＤＬを含む画像である。図４の例では、描画画像７０には「ＡＢＣ」と描かれている。描画画像７０は、第１画像の一例である。消しゴムアイコン６０は、第２画像の一例である。

【0045】

Ｄ－１：消しゴムアイコン６０
消しゴムアイコン６０は、ユーザーが描画画像７０中の任意の領域を消去する場合に用いるツールである。本実施形態では、消しゴムアイコン６０は、描画モード指定時には投射領域Ｒに常時表示される。すなわち、本実施形態では、指示体２０の接触位置の軌跡が描画画像７０として表示される描画モードにおいて、投射領域Ｒに消しゴムアイコン６０が表示し続けられている。よって、ユーザーは、例えば消しゴムアイコン６０の表示開始を指示するための操作等を行わなくても、必要な時にすぐに消しゴムアイコン６０を使用することができ、描画作業における利便性を向上させることができる。

【0046】

図６Ａは、本実施形態にかかる消しゴムアイコン６０の拡大図である。消しゴムアイコン６０は、第１部分６２と第２部分６４とを有する。本実施形態では、消しゴムアイコン６０は全体として円形を呈する。第１部分６２は、半径ｒ１の第１円Ｓ１に囲まれた円形の領域である。また、第２部分６４は、第１円Ｓ１の半径ｒ１よりも大きい半径ｒ２を有し第１円Ｓ１と中心点Ｏを共通する第２円Ｓ２と、第１円Ｓ１とに囲まれたドーナツ型の領域である。すなわち、消しゴムアイコン６０において、第１部分６２の外縁は、第２部分６４に囲まれている。なお、本実施形態では、消しゴムアイコン６０の外側に第２部分６４が配置され、内側に第１部分６２が配置されているが、例えば、消しゴムアイコン６０の外側に第１部分６２が配置され、内側に第２部分６４が配置されていてもよい。すなわち、消しゴムアイコン６０において、第２部分６４の外縁が、第１部分６２に囲まれていてもよい。

【0047】

後述するように、指示体２０の先端２０ａが消しゴムアイコン６０の表示領域にタッチすると、消しゴムアイコン６０が選択された状態となる。消しゴムアイコン６０が選択された状態で指示体２０が移動すると、指示体２０の移動に合わせて消しゴムアイコン６０も移動する。この時、指示体２０の消しゴムアイコン６０上の接触位置が、第１部分６２にあるか、第２部分６４にあるかに応じて、描画線ＤＬの消去の有無が異なる。指示体２０が第１部分６２にある場合には、消しゴムアイコン６０と重なる描画画像７０の部分が消去される。一方、指示体２０が第２部分６４にある場合には、消しゴムアイコン６０と重なる描画画像７０の部分は消去されずに、そのまま残る。

【0048】

なお、消しゴムアイコン６０の形状は円形に限らず、様々な形状を適用可能である。図６Ｂは、消しゴムアイコン６０の他の例を示す拡大図である。図６Ｂに示す、消しゴムアイコン６０Ａは、全体として角丸の矩形を呈する。第１部分６２Ａは、対向する１対の短辺および対向する１対の長辺に囲まれた第１矩形Ｓ３に囲まれた領域である。また、第２部分６４Ａは、第１矩形Ｓ３の短辺よりも長い短辺および第１矩形Ｓ３の長辺よりも長い長辺を有する第２矩形Ｓ４と、第１矩形Ｓ３とに囲まれた矩形枠型の領域である。このような形状の消しゴムアイコン６０Ａは、ホワイトボードや黒板のイレーザーを想起させる。ユーザーは、アイコンの用途を直感的に把握することができる。

【0049】

図５は、投射領域Ｒに投射される投射画像におけるレイヤー配置を模式的に示す図である。壁Ｗに近いレイヤーを下層とすると、投射画像の下層から順に、背景画像を含む第１レイヤーＬ１、描画画像７０を含む第２レイヤーＬ２および消しゴムアイコン６０を含む第３レイヤーＬ３が積層されている。なお、矢印Ｖはユーザーの視線方向を示す。すなわち、描画モード制御部１７８は、投射領域Ｒに描画画像７０を表示し、描画画像７０を背景として、消しゴムアイコン６０を投射領域Ｒに表示する。

【0050】

描画モード制御部１７８は、投射領域Ｒに指示体２０が触れた場合、上層のレイヤーから順に接触判定を行う。よって、描画モード制御部１７８は、指示体２０が消しゴムアイコン６０の表示領域ではない位置に接触すると、第２レイヤーＬ２に配置された描画画像７０に対する描画指示と判定する。また、描画モード制御部１７８は、指示体２０が消しゴムアイコン６０の表示領域に接触すると、第３レイヤーＬ３に配置された消しゴムアイコン６０の選択指示として判定する。

【0051】

なお、モード選択部５０は、消しゴムアイコン６０と同じ第３レイヤーＬ３に配置されてもよいし、第３レイヤーＬ３より上層に設けた図示しないレイヤーに配置されてもよい。また、本実施形態では、背景画像は無色画像であるものとするが、背景画像の色を指定したり、任意の画像を背景画像に指定したりできるようにしてもよい。また、消しゴムアイコン６０の表示色は、背景画像と容易に識別可能な色とするのが好ましい。例えば、背景画像の色と消しゴムアイコン６０の色とが識別困難な場合には、消しゴムアイコン６０の表示色が背景画像と容易に識別可能な色に自動的に変更されてもよい。

【0052】

また、消しゴムアイコン６０は、下層のレイヤーに対する透過性を有していてもよい。図７は、消しゴムアイコン６０が透過性を有する場合を模式的に示す図である。図７に示す消しゴムアイコン６０Ｂは透過性を有さない場合の例である。消しゴムアイコン６０Ｂの表示領域と重なる位置にある描画線ＤＬは消しゴムアイコン６０Ｂによって隠れてしまい、描画された「Ａ」の一部は視認ができない。一方、図７に示す消しゴムアイコン６０Ｃは透過性を有する場合の例である。消しゴムアイコン６０Ｃの表示領域と重なる位置にある描画線ＤＬは透過して表示され、描画された「Ｂ」の全体が視認可能となる。

【0053】

例えば、消しゴムアイコン６０Ｂのように、消しゴムアイコン６０に透過性がなく、描画画像７０の一部が完全に隠れてしまう場合、ユーザーは、必要に応じて消しゴムアイコン６０を移動させなければならない。一方、消しゴムアイコン６０が透過性を有する場合、消しゴムアイコン６０と描画画像７０とが重なっても、描画線ＤＬの形状をユーザーが把握することができる。これにより、消しゴムアイコン６０によって描画画像７０の視認性が低下するのを防止して、消しゴムアイコン６０の使い勝手をより向上させることができる。

【0054】

Ｄ－２：指示体２０の接触位置の軌跡
つぎに、指示体２０の接触位置の軌跡の検出方法について説明する。描画モード制御部１７８は、指示体２０の接触位置を連続的に検出し、指示体２０が投射領域Ｒに接触してから離れるまでの期間、投射領域Ｒにおける指示体２０の接触位置の軌跡を検出する。より詳細には、描画モード制御部１７８は、赤外光撮像データが生成されるごとに最新の赤外光撮像データを解析して、最新の赤外光撮像データに赤外光が含まれているか否を判定する。描画モード制御部１７８は、赤外光撮像データに赤外光が含まれている場合には、赤外光撮像データ上における赤外光の位置Ｈを検出し、更にキャリブレーションデータを用いて、位置Ｈをフレームメモリー上の接触位置Ｈａに変換する。

【0055】

以降、各赤外光撮像データにおける位置Ｈおよびこれが変換された接触位置Ｈａを識別する場合には、位置Ｈ（ｎ）および接触位置Ｈａ（ｎ）と表記する。ｎは赤外光撮像データの生成タイミングを識別する識別情報であり、連続した整数であるものとする。１つの赤外光撮像データからは１つの位置Ｈが得られ、位置Ｈに対応する１つの接触位置Ｈａが得られる。よって、ｎは接触位置Ｈａを識別する識別情報としても機能する。

【0056】

図１４は、指示体２０の接触位置の軌跡を模式的に示す図である。指示体２０の接触位置の軌跡Ｔには、始点Ｈｓと終点Ｈｅとが含まれる。描画モード制御部１７８は、最新の接触位置Ｈａ（ｎ）が検出された際、前回生成された赤外光撮像データで赤外光が検出されていなかった場合、すなわち接触位置Ｈａ（ｎ－１）が存在しない場合、最新の接触位置Ｈａ（ｎ）を移動軌跡の始点Ｈｓとする。描画モード制御部１７８は、以降生成される赤外光撮像データに基づく接触位置Ｈａ（ｎ＋１）、Ｈａ（ｎ＋２）・・を、順次前回の接触位置Ｈａに対応づけて、軌跡Ｔを生成する。

【0057】

また、描画モード制御部１７８は、赤外光撮像データで赤外光が検出されなくなった場合には、最後に検出された接触位置Ｈａを移動軌跡の終点Ｈｅとする。図１４の例では、接触位置Ｈａ（ｎ＋ｘ）以降、接触位置が検出されていない。例えば、接触位置Ｈａ（ｎ＋ｘ＋１）は検出されていない。よって、接触位置Ｈａ（ｎ＋ｘ）が軌跡Ｔの終点Ｈｅとなる。

【0058】

Ｄ－３：描画操作の詳細
描画モードでは、ユーザーは、指示体２０を投射領域Ｒに接触させながら移動させることにより、描画画像７０への描画が可能である。すなわち、描画モード制御部１７８は、指示体２０の接触位置の軌跡Ｔに基づく画像を描画画像７０として表示する。より詳細には、描画画像７０は、指示体２０の接触位置の軌跡の始点が、消しゴムアイコン６０の表示領域に含まれない場合の、接触位置の軌跡に基づく画像である。

【0059】

ここで、描画モード制御部１７８は、指示体２０の接触位置の始点Ｈｓが、消しゴムアイコン６０の表示領域に含まれるか否かで、実行する処理が異なる。

【0060】

［１．始点Ｈｓが消しゴムアイコン６０の表示領域に含まれない場合］
始点Ｈｓが消しゴムアイコン６０の表示領域に含まれない場合、描画モード制御部１７８は、指示体２０の軌跡Ｔに応じた描画線ＤＬを示す画像を投射部１４に投射させる。すなわち、通常の描画処理が行われる。始点Ｈｓが消しゴムアイコン６０の表示領域に含まれるか否かは、例えば始点Ｈｓが、フレームメモリー上の消しゴムアイコン６０の中心点Оの位置から半径ｒ２以内の範囲にあるか否かによって判断することができる。

【0061】

始点Ｈｓが消しゴムアイコン６０の表示領域に含まれない場合、描画モード制御部１７８は、接触位置Ｈａが検出される毎に、接触位置Ｈａにドットを配置する。このドットは、その中心位置が接触位置Ｈａであり、その直径は予め指定されている描画太さに対応する長さである。描画太さは、例えば描画モードにおける設定画面において、ユーザーにより指定可能である。描画太さが太いほど、ドットの直径は大きくなる。

【0062】

また、描画モード制御部１７８は、ドットが配置される都度、前回の接触位置Ｈａのドットと、最新の接触位置Ｈａのドットとをつなぐ連結線を描画画像７０に追加する。連結線はドットの直径と同じ幅を有し、ドットと同じ色で塗りつぶされている。すなわち、接触位置Ｈａが連続的に検出される場合には、ユーザーは連続的に描画を行っているため、描画モード制御部１７８は、描画画像７０が各接触位置Ｈａをつなぐ線になるように連結線を追加する。

【0063】

描画モード制御部１７８は、最新の描画画像７０の画像データおよび消しゴムアイコン６０の画像データを投射部１４に供給する。投射部１４は、最新の描画画像７０の画像データおよび消しゴムアイコン６０の画像データが示す画像を投射領域Ｒに投射する。なお、描画の途中で接触位置Ｈａが消しゴムアイコン６０の表示領域と重なった場合、描画モード制御部１７８は、消しゴムアイコン６０の選択は行わず、第２レイヤーＬ２への描画を継続する。

【0064】

［２．始点Ｈｓが消しゴムアイコン６０の表示領域に含まれる場合］
始点Ｈｓが消しゴムアイコン６０の表示領域に含まれる場合、描画モード制御部１７８は、指示体２０で消しゴムアイコン６０を選択した状態とする。この時、消しゴムアイコン６０が選択された状態であることをユーザーが把握可能となるように、消しゴムアイコン６０に視覚効果を与えてもよい。視覚効果として、例えば消しゴムアイコン６０の色を変えたり、消しゴムを持ち上げた様子を模して消しゴムアイコン６０を投射領域Ｒ上でわずかに上に移動させたりしてもよい。

【0065】

消しゴムアイコン６０が選択された状態で指示体２０が投射領域Ｒ上を移動すると、描画モード制御部１７８は、指示体２０の移動に合わせて消しゴムアイコン６０の表示位置を第１レイヤーＬ１上で移動させる。消しゴムアイコン６０が移動する際、始点Ｈｓが、第２部分６４の表示領域に含まれるか、第１部分６２の表示領域に含まれるかに応じて、描画線ＤＬの消去の有無が異なる。

【0066】

［２－１．始点Ｈｓが消しゴムアイコン６０の第２部分６４の表示領域に含まれる場合］
図８は、始点Ｈｓが第２部分６４の表示領域に含まれる場合の描画画像７０を模式的に示す図である。図８では、消しゴムアイコン６０を、左下の位置Ｈ１から右上の位置Ｈ２まで軌跡Ｔ１に沿って移動させる場合について図示している。なお、点線で示す軌跡Ｔ１は、消しゴムアイコン６０の中心点Ｏの移動軌跡であり、一点破線で示す領域Ｔ２は、位置Ｈ１から位置Ｈ２までの移動中に消しゴムアイコン６０の表示領域が重なった領域である。

【0067】

始点Ｈｓが第２部分６４の表示領域に含まれる場合、描画モード制御部１７８は、描画画像７０の消去は行わず、消しゴムアイコン６０の表示位置の移動のみを実行する。より詳細には、描画モード制御部１７８は、始点Ｈｓが消しゴムアイコン６０の表示領域に含まれる場合、接触位置Ｈａが検出される毎に、接触位置Ｈａに合わせて消しゴムアイコン６０の表示位置を変更する。この時、始点Ｈｓにおける消しゴムアイコン６０の中心点Ｏと接触位置Ｈａとの相対位置関係を保つように、消しゴムアイコン６０の表示位置を決定してもよい。

【0068】

［２－２．始点が消しゴムアイコン６０の第１部分６２の表示領域に含まれる場合］
図９は、始点Ｈｓが第１部分６２の表示領域に含まれる場合の描画画像７０を模式的に示す図である。図９も、図８同様、消しゴムアイコン６０を、左下の位置Ｈ１から右上の位置Ｈ２まで軌跡Ｔ１に沿って移動させる場合について図示している。始点Ｈｓが第１部分６２に含まれる場合、描画モード制御部１７８は、消しゴムアイコン６０の表示位置を移動させるとともに、消しゴムアイコン６０の移動軌跡と重なる描画画像７０の部分を消去する。図９の例では、位置Ｈ１から位置Ｈ２に至るまでに消しゴムアイコン６０の表示領域が重なった領域Ｔ２に位置する描画線ＤＬが消去されている。このように、消しゴムアイコン６０が通過した領域の描画線ＤＬを消去することにより、消しゴムを用いて描画線ＤＬを消去するような操作感覚を実現することができる。

【0069】

すなわち、描画モード制御部１７８は、接触位置Ｈａの軌跡Ｔの始点Ｈｓが、投射領域Ｒの消しゴムアイコン６０が表示されている領域に含まれる場合に、接触位置Ｈａの軌跡Ｔに沿って、投射領域Ｒにおける消しゴムアイコン６０の表示位置を移動させる。この時、描画モード制御部１７８は、始点Ｈｓが消しゴムアイコン６０の第１部分６２が表示されている領域に含まれる場合に、消しゴムアイコン６０の移動軌跡と重なった描画画像７０の部分に対して描画効果を付与する。本実施形態における描画効果とは、消しゴムアイコン６０の移動軌跡と重なった描画画像７０の部分を消去することである。また、描画モード制御部１７８は、始点Ｈｓが消しゴムアイコン６０の第２部分６４が表示されている領域に含まれる場合に、消しゴムアイコン６０の移動軌跡と重なった描画画像７０の部分の表示を維持する。

【0070】

このように、消しゴムアイコン６０への接触位置に応じて、描画画像７０の消去の有無を切替可能とすることによって、所望の領域のみを効率的に消去することができる。例えば、投射領域Ｒの右にある「Ｃ」の文字のみを消去したい場合について考える。ユーザーは、まず図８に示すように、投射領域Ｒの左の位置Ｈ１に位置する消しゴムアイコン６０を、第２部分６４をタッチしながら右の位置Ｈ２に移動させる。この移動では、描画画像７０は消去されない。ユーザーは、消しゴムアイコン６０を位置Ｈ２に移動させた後、タッチ位置を第１部分６２に移した上で、「Ｃ」の文字を構成する描画線ＤＬと重なるように消しゴムアイコン６０を移動させる。この移動により、「Ｃ」の文字を構成する描画線ＤＬが消去される。

【0071】

指示体２０と消しゴムアイコン６０とを用いることによって、アナログの鉛筆と消しゴムを用いて描画しているような操作感を実現することができる。これにより、例えばデジタル機器の操作に慣れていないユーザーでも、わかりやすく簡単に描画を行うことができる。また、描画モード中、消しゴムアイコン６０は投射領域Ｒに継続的に表示されるので、例えばツールバー等を用いて消しゴム機能を使用の都度呼び出す場合と比較して、操作数を削減することができ、描画作業の効率を向上させることができる。

【0072】

なお、図９の例では、消しゴムアイコン６０の表示領域が重なった領域Ｔ２の描画画像７０を消去したが、これに限らず、例えば消しゴムアイコン６０の軌跡Ｔ１を中心に所定幅の範囲の描画画像７０を消去してもよい。所定幅は、消しゴムアイコン６０の直径よりも小さくてもよいし、大きくてもよい。消しゴムアイコン６０の直径は、図６Ａに示す第２円Ｓ２の半径ｒ２の２倍である。所定幅は、描画太さと同様、例えば描画モードにおける設定画面において、ユーザーにより指定可能としてもよい。

【0073】

また、描画画像７０が消去されるタイミングは、例えば消しゴムアイコン６０と描画画像７０とが重なった時であってもよいし、消しゴムアイコン６０と描画画像７０とが重なった後、消しゴムアイコン６０が描画画像７０とが重ならない位置に移動する時であってもよい。また、描画画像７０が消去されるタイミングは、例えば消しゴムアイコン６０が移動を停止した時であってもよいし、指示体２０が投射領域Ｒから離れた時であってもよい。

【0074】

Ｄ－４：フローチャート
図１０は、プロジェクター１０の処理部１７が制御プログラム１６２に従って実行する画像処理方法の流れを示すフローチャートである。処理部１７は、描画モード制御部１７８として機能することにより、図１０に示す各ステップを実行する。

【0075】

処理部１７は、プロジェクター１０の描画モードが選択されるまで待機する（ステップＳ１００：ＮＯ）。描画モードの選択は、ユーザーがモード選択部５０の描画モードアイコン５２をタッチすることによって行われる。描画モードが選択されたことを検知すると（ステップＳ１００：ＹＥＳ）、処理部１７は、投射領域Ｒに消しゴムアイコン６０を表示させる（ステップＳ１０２）。

【0076】

処理部１７は、カメラ１５が撮像する赤外光撮像データに基づいて、投射領域Ｒに指示体２０が接触したか否かを検知する（ステップＳ１０４）。指示体２０が接触していない場合（ステップＳ１０４：ＮＯ）、処理部１７は、指示体２０が接触するまで検出を繰り返す。指示体２０が接触した場合（ステップＳ１０４：ＹＥＳ）、処理部１７は、指示体２０の接触位置Ｈａの軌跡Ｔを検出する（ステップＳ１０６）。すなわち、処理部１７は、赤外光撮像データに赤外光が写っている場合、赤外光撮像データにおける位置Ｈを検出し、キャリブレーションデータを用いて位置Ｈをフレームメモリー上の接触位置Ｈａに変換する。接触位置Ｈａを継続的に検出することにより、接触位置Ｈａの軌跡Ｔが得られる。

【0077】

軌跡Ｔの始点Ｈｓが、消しゴムアイコン６０の表示領域に含まれない場合（ステップＳ１０８：ＮＯ）、処理部１７は、指示体２０が投射領域Ｒに接触している間の軌跡Ｔに沿って描画線ＤＬを表示する（ステップＳ１１０）。この描画線ＤＬによって、描画画像７０が構成される。一方、軌跡Ｔの始点Ｈｓが、消しゴムアイコン６０の表示領域に含まれる場合（ステップＳ１０８：ＹＥＳ）、処理部１７は、始点Ｈｓが第１部分６２の表示領域に含まれるか否かを判断する（ステップＳ１１２）。始点Ｈｓが第１部分６２の表示領域に含まれる場合（ステップＳ１１２：ＹＥＳ）、処理部１７は、指示体２０が投射領域Ｒに接触している間の軌跡Ｔに沿って消しゴムアイコン６０の表示位置を移動させる（ステップＳ１１４）。また、処理部１７は、消しゴムアイコン６０の移動軌跡と重なる描画画像７０の部分を消去する（ステップＳ１１６）。

【0078】

また、ステップＳ１１２において、始点Ｈｓが第１部分６２の表示領域に含まれない場合（ステップＳ１１２：ＮＯ）、すなわち、始点Ｈｓが第２部分６４の表示領域に含まれる場合、処理部１７は、指示体２０が投射領域Ｒに接触している間の軌跡Ｔに沿って消しゴムアイコン６０の表示位置を移動させる（ステップＳ１１８）。この時、消しゴムアイコン６０の移動軌跡と重なる描画画像７０の部分の表示は、そのまま維持される。その後、処理はステップＳ１００に戻る。

【0079】

Ｄ－５：消しゴムアイコン６０の表示位置
上述のように、消しゴムアイコン６０は、指示体２０の移動に追従して表示位置が変更されるが、投射領域Ｒ上に、消しゴムアイコン６０の表示位置の基準となる基準表示位置を定めてもよい。この場合、例えばプロジェクター１０が描画モードに切り替えられた際の消しゴムアイコン６０の初期の表示位置は、基準表示位置とする。以下の説明では、図４における消しゴムアイコン６０の位置Ｈ１を基準表示位置とする。基準表示位置は、第１位置の一例である。

【0080】

基準表示位置を定めた場合、描画モード制御部１７８は、消しゴムアイコン６０の移動中に指示体２０が投射領域Ｒから離れ、接触位置Ｈａが検出されなくなった時に、消しゴムアイコン６０の表示位置を基準表示位置に戻してもよい。具体的には、例えば、図８または図９のように、消しゴムアイコン６０が基準表示位置である位置Ｈ１から位置Ｈ２に移動された後、指示体２０が投射領域Ｒから離れた場合、消しゴムアイコン６０の表示位置が位置Ｈ１に戻されるようにしてもよい。

【0081】

接触位置Ｈａが検出されなくなった時とは、軌跡Ｔの終点Ｈｅが確定した時である。この時、消しゴムアイコン６０の表示位置は、軌跡Ｔの終点Ｈｅとなる。終点Ｈｅは、第２位置の一例である。指示体２０が投射領域Ｒから離れた場合に、消しゴムアイコン６０の表示位置を終点Ｈｅのままとするのではなく、基準標準位置に戻すことにより、投射領域Ｒにおける消しゴムアイコン６０の表示位置が定まる。これにより、ユーザーは、消しゴムアイコン６０の表示位置を容易に把握することができ、消しゴムアイコン６０を使いたい時に、すぐに消しゴムアイコン６０を使うことができる。

【0082】

この時、描画モード制御部１７８は、指示体２０が投射領域Ｒを離れ接触位置Ｈａが検出されなくなった後、所定時間が経過するまでは、終点Ｈｅに消しゴムアイコン６０の表示を継続してもよい。所定時間が経過すると、描画モード制御部１７８は、消しゴムアイコン６０の表示位置を基準表示位置にする。これにより、例えば動作ミスで指示体２０を投射領域Ｒから離してしまった場合や、描画と消去とを短い間隔で繰り返す場合などに、指示体２０の近傍に継続して消しゴムアイコン６０を表示させることができる。よって、指示体２０が投射領域Ｒを離れたら即座に基準表示位置に戻すのと比較して、消しゴムアイコン６０を使った作業の効率を向上させることができる。

【0083】

すなわち、消しゴムアイコン６０を表示することは、投射領域Ｒの基準表示位置に消しゴムアイコン６０を表示することを含み、消しゴムアイコン６０の表示位置を移動させることは、消しゴムアイコン６０を基準表示位置から終点Ｈｅに移動させることを含む。描画モード制御部１７８は、終点Ｈｅで消しゴムアイコン６０が表示されている領域への指示体２０の接触が解除された場合に、消しゴムアイコン６０の終点Ｈｅへの表示を継続してもよい。この時、描画モード制御部１７８は、終点Ｈｅにおいて、消しゴムアイコン６０が表示されている領域への指示体２０の接触が解除されてから所定時間が経過した場合に、消しゴムアイコン６０を基準表示位置に表示してもよい。

【0084】

なお、描画モード制御部１７８は、指示体２０が投射領域Ｒを離れたら即座に消しゴムアイコン６０の表示位置を基準表示位置に戻してもよい。この場合、上記所定時間が略ゼロであることと同義と考えられる。

【0085】

また、描画モード制御部１７８は、指示体２０が投射領域Ｒを離れた後も、終点Ｈｅに消しゴムアイコン６０の表示位置を終点Ｈｅのままにしてもよい。この場合、次に指示体２０が消しゴムアイコン６０に接触し、消しゴムアイコン６０が使用されるまで、消しゴムアイコン６０は、終点Ｈｅに表示され続ける。すなわち、描画モード制御部１７８は、消しゴムアイコン６０の終点Ｈｅへの表示を継続する場合に、消しゴムアイコン６０が表示されている領域に指示体２０が接触するまで、消しゴムアイコン６０の終点Ｈｅへの表示を継続してもよい。これにより、消しゴムアイコン６０を任意の位置に継続して表示させることができる。例えば、ユーザーが描画を行っている位置の近傍に消しゴムアイコン６０を表示させることにより、ユーザーは効率的に描画作業を行うことができる。

【0086】

Ｅ：変形例
以上に例示した各形態は多様に変形され得る。前述の各形態に適用され得る具体的な変形の態様を以下に例示する。以下の例示から任意に選択された２以上の態様は、相互に矛盾しない範囲で適宜に併合され得る。

【0087】

Ｅ－１：変形例１
上述した実施形態は、描画画像７０を消去する消しゴムアイコン６０に関する実施形態であった。これに限らず、第１部分および第２部分を有するアイコンが、表示画像に対して他の描画効果を与えるものであってもよい。

【0088】

図１１は、変形例１における投射領域Ｒの表示の一例を示す図である。図１１において、投射領域Ｒには、ＰＣモードアイコン５１が選択された状態のモード選択部５０、文書情報を含む表示画像７２および蛍光ペンアイコン８０が表示されている。ＰＣモード選択中は、例えば処理部１７がＰＣモード制御部１７６として機能することにより、各種処理を実行する。

【0089】

表示画像７２は、コンピューターＰに記憶されたデータを展開した画像である。図１１の例では、表示画像７２としてプロジェクターの使用方法に関する文書情報が表示されている。蛍光ペンアイコン８０は、ユーザーが表示画像７２中の任意の領域を強調表示する場合に用いるツールである。本実施形態では、蛍光ペンアイコン８０が通過した箇所は、透過性のある蛍光色で蛍光線が描かれる。これにより、蛍光ペンアイコン８０が通過した箇所と重なる表示画像７２の領域が、他の領域と区別して視認される。なお、蛍光ペンアイコン８０を用いて描いた蛍光線が、所定時間が経過すると消えたり、時間の経過とともに徐々に色が薄くなったりするようにしてもよい。すなわち、変形例１において、表示画像７２は第１画像の一例であり、蛍光ペンアイコン８０は第２画像の一例である。上記実施形態と同様、蛍光ペンアイコン８０は第３レイヤーＬ３に、表示画像７２は第３レイヤーより下層の第２レイヤーＬ２に、それぞれ配置されている。

【0090】

蛍光ペンアイコン８０は、ＰＣモード指定時には投射領域Ｒに常時表示されてもよい。これにより、ユーザーは、例えば蛍光ペンアイコン８０の表示開始を指示するための操作等を行わなくても、必要な時にすぐに蛍光ペンアイコン８０を使用することができ、表示画像７２を用いた作業における利便性を向上させることができる。なお、描画モードにおいて、蛍光ペンアイコン８０を表示させてもよい。

【0091】

より詳細に蛍光ペンアイコン８０について説明する。指示体２０の軌跡Ｔの始点Ｈｓが蛍光ペンアイコン８０の表示領域に含まれる場合、ＰＣモード制御部１７６は、指示体２０で蛍光ペンアイコン８０を選択した状態とする。蛍光ペンアイコン８０が選択された状態で指示体２０が投射領域Ｒ上を移動すると、ＰＣモード制御部１７６は、指示体２０の移動に合わせて蛍光ペンアイコン８０を第３レイヤーＬ３上で移動させる。蛍光ペンアイコン８０が移動する際、移動の軌跡Ｔの始点Ｈｓが第２部分８４の表示領域に含まれるか、第１部分８２の表示領域に含まれるかに応じて、蛍光線の表示の有無が異なる。

【0092】

図１２は、始点Ｈｓが第２部分８４の表示領域に含まれる場合の表示画像７２を模式的に示す図である。図１２では、蛍光ペンアイコン８０を、左下の点Ｈ３から左上の点Ｈ４まで移動させる場合について図示している。なお、点線で示す軌跡Ｔ３は、蛍光ペンアイコン８０の中心点Ｏの移動軌跡であり、一点破線で示す領域Ｔ４は、蛍光ペンアイコン８０の表示領域が重なった領域である。始点Ｈｓが第２部分８４の表示領域に含まれる場合、ＰＣモード制御部１７６は、蛍光線の表示は行わず、蛍光ペンアイコン８０の表示位置の移動のみを実行する。

【0093】

図１３は、始点Ｈｓが第１部分８２の表示領域に含まれる場合の表示画像７２を模式的に示す図である。図１３は、蛍光ペンアイコン８０を、左上の点Ｈ４から右上の点Ｈ５まで移動させる場合について図示している。なお、点線で示す軌跡Ｔ５は、蛍光ペンアイコン８０の中心点Ｏの移動軌跡であり、一点破線で示す領域Ｔ６は、蛍光ペンアイコン８０の表示領域が重なった領域である。

【0094】

始点Ｈｓが第１部分８２の表示領域に含まれる場合、ＰＣモード制御部１７６は、蛍光ペンアイコン８０の表示位置を移動させるとともに、蛍光ペンアイコン８０の移動軌跡と重なる表示画像７２の部分に蛍光線Ｌを表示する。図１３の例では、点Ｈ４から点Ｈ５に至るまでに蛍光ペンアイコン８０の表示領域が重なった領域Ｔ６が蛍光色に表示され、蛍光線ＦＬとなっている。このように、蛍光ペンアイコン８０が通過した領域に蛍光線を表示することにより、蛍光ペンを用いて蛍光線を描くような操作感覚を実現することができる。

【0095】

なお、図１３の例では、蛍光ペンアイコン８０の表示領域が重なった領域Ｔ６を蛍光色で表示して蛍光線としたが、これに限らず、例えば蛍光ペンアイコン８０の軌跡Ｔ５を中心に所定幅の範囲を蛍光線としてもよい。所定幅は、蛍光ペンアイコン８０の直径よりも小さくてもよいし、大きくてもよい。蛍光ペンアイコン８０の直径とは、蛍光ペンアイコン８０の第２部分８４を構成する円の直径である。所定幅は、描画太さと同様、例えばＰＣモードにおける設定画面において、ユーザーにより指定可能としてもよい。

【0096】

また、ＰＣモードにおいては、蛍光ペンアイコン８０以外の投射領域Ｒの部分に指示体２０を接触させながら移動させると、移動方向に表示画像７２がスクロールするようにしてもよい。

【0097】

Ｅ－２：変形例２
上述した実施形態では、赤外光を用いて指示体２０の位置が検出されるものとしたが、指示体２０の位置の検出方法はこれに限らず、従来公知の様々な方法を適用可能である。例えば、指示体２０の位置を検出する検出装置は、指示体２０に所定の波長を有する光を照射して、指示体２０で反射された光を受光することにより、指示体２０の位置を検出してもよい。検出装置は、赤外線を照射する装置またはレーザー光源と受光装置とによって、指示体２０によって光が遮られた位置を検出するものであってもよい。これらの方法を用いる場合、指示体２０は、ユーザーの指等であってもよい。

【符号の説明】

【0098】

１…プロジェクターシステム、１０…プロジェクター、１２…操作部、１３…第２通信部、１４…投射部、１５…カメラ、１６…記憶部、１６２…制御プログラム、１６４…データ、１７…処理部、１７２…動作制御部、１７４…表示制御部、１７６…ＰＣモード制御部、１７８…描画モード制御部、２０…指示体、２０ａ…先端、２０ｂ…軸部、２２…第１通信部、２３…第１光源、２４…スイッチ、２５…指示体記憶部、２６…指示体制御部、６０…消しゴムアイコン、６２…第１部分、６４…第２部分、７０…描画画像、ＤＬ…描画線。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6A】

【図6B】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】