特開 2024-86227 画像処理装置、画像処理方法およびプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024086227

(43)【公開日】2024-06-27

(54)【発明の名称】画像処理装置、画像処理方法およびプログラム

(51)【国際特許分類】

   G09G 5/00 20060101AFI20240620BHJP

   G09G 5/37 20060101ALI20240620BHJP

   G09G 5/377 20060101ALI20240620BHJP

   G03B 21/00 20060101ALI20240620BHJP

   G03B 21/14 20060101ALI20240620BHJP

   H04N 5/74 20060101ALI20240620BHJP

   G06T 5/73 20240101ALI20240620BHJP

【ＦＩ】

G09G5/00 510B

G09G5/00 550C

G09G5/37 320

G09G5/377

G09G5/377 100

G09G5/00 510V

G09G5/37 200

G03B21/00 D

G03B21/14 Z

H04N5/74 D

G06T5/00 710

【審査請求】未請求

【請求項の数】12

【出願形態】ＯＬ

(21)【出願番号】P 2022201251

(22)【出願日】2022-12-16

(71)【出願人】

【識別番号】000001432

【氏名又は名称】グローリー株式会社

(74)【代理人】

【識別番号】100117673

【弁理士】

【氏名又は名称】中島 了

(72)【発明者】

【氏名】栗林 英範

【テーマコード（参考）】

2K203

5B057

5C058

5C182

【Ｆターム（参考）】

2K203FA02

2K203FA62

2K203FA80

2K203FB05

2K203GC39

2K203GC40

2K203HB14

2K203KA56

2K203KA83

2K203MA10

5B057CA08

5B057CA12

5B057CA16

5B057CB08

5B057CB12

5B057CB16

5B057CC01

5B057CE03

5C058BA35

5C058EA02

5C182AA03

5C182AA04

5C182AA14

5C182AC02

5C182AC03

5C182AC31

5C182BA14

5C182BB04

5C182BB12

5C182CA02

5C182CB03

5C182CB44

5C182CB47

5C182CB52

5C182CB54

5C182CB61

5C182CC24

(57)【要約】

【課題】投影面が部分的な凹凸を有する場合であっても、当該投影面にプロジェクタによって投影される画像の解像感の低下を抑制することが可能な技術を提供する。
【解決手段】画像処理装置は、基準画像２１０をプロジェクタで投影することにより投影面９０に形成された基準投影画像２４０を撮影した撮影画像２５０を取得し、投影面９０における基準投影画像２４０のボケ位置を示すボケマップ２９０を、撮影画像２５０に基づいて生成する。画像処理装置は、基準画像２１０とは別の投影用画像のボケ位置に対応する部分に対して鮮鋭化処理とエッジ抽出処理との少なくとも一方を施した補正画像を、ボケマップ２９０に基づいて生成し、投影用画像と補正画像とを合成あるいは重畳して投影面に投影する。
【選択図】図７

【特許請求の範囲】

【請求項1】

基準画像をプロジェクタで投影面に投影することにより前記投影面に形成された基準投影画像を撮像部で撮影した撮影画像を取得する取得部と、
前記投影面における前記基準投影画像のボケ位置を示すボケマップを、前記撮影画像に基づいて生成するマップ生成部と、
前記基準画像とは別の投影用画像の前記ボケ位置に対応する部分に対して鮮鋭化処理とエッジ抽出処理との少なくとも一方を施した補正画像を、前記ボケマップに基づいて生成する画像生成部と、
前記投影用画像と前記補正画像とを合成あるいは重畳して前記投影面に投影する投影制御部と、
を備えることを特徴とする画像処理装置。

【請求項2】

前記マップ生成部は、前記プロジェクタによる本来の前記投影用画像の投影環境が整った状態で、前記投影用画像の投影前に前記ボケマップを生成することを特徴とする、請求項１に記載の画像処理装置。

【請求項3】

前記マップ生成部は、前記プロジェクタによる本来の投影用画像群の投影期間内において、前記基準画像を前記投影面に投影して前記ボケマップを生成し、
前記画像生成部は、前記投影用画像群の前記投影期間内に生成された前記ボケマップに基づいて、前記投影用画像群の一の投影用画像についての前記補正画像を生成し、
前記投影制御部は、前記投影期間内において前記一の投影用画像についての当該補正画像と前記一の投影用画像とを合成あるいは重畳して前記投影面に投影することを特徴とする、請求項１に記載の画像処理装置。

【請求項4】

前記画像生成部は、前記投影用画像の前記ボケ位置に対応する部分のみで構成される前記補正画像を生成し、
前記投影制御部は、前記補正画像と前記投影用画像とを重畳して投影することを特徴とする、請求項１に記載の画像処理装置。

【請求項5】

前記画像生成部は、前記投影用画像の前記ボケ位置に対応する部分のみで構成される前記補正画像を生成し、
前記投影制御部は、前記補正画像と前記投影用画像とを合成して投影することを特徴とする、請求項１に記載の画像処理装置。

【請求項6】

前記投影制御部は、前記投影用画像と前記補正画像とを時分割で重畳して投影することを特徴とする、請求項１に記載の画像処理装置。

【請求項7】

前記投影用画像と前記補正画像とは別個のプロジェクタで前記投影面に投影されることを特徴とする、請求項１に記載の画像処理装置。

【請求項8】

前記マップ生成部は、前記ボケマップとして、前記基準投影画像におけるボケ量の分布状況をも示すマップを生成し、
前記画像生成部は、前記基準投影画像内の各ボケ位置におけるボケ量に応じて、前記補正画像内の前記各ボケ位置に対応する部分の補正度合いを変更することを特徴とする、請求項１に記載の画像処理装置。

【請求項9】

前記補正画像は、前記投影用画像の前記ボケ位置に対応する部分のシャープネスを強調したシャープネス強調画像であることを特徴とする、請求項１に記載の画像処理装置。

【請求項10】

前記補正画像は、前記投影用画像の前記ボケ位置に対応する部分のエッジを抽出したエッジ抽出画像であることを特徴とする、請求項１に記載の画像処理装置。

【請求項11】

ａ）基準画像をプロジェクタで投影面に投影することにより前記投影面に形成された基準投影画像を撮像部で撮影した撮影画像を取得するステップと、
ｂ）前記投影面における前記基準投影画像のボケ位置を示すボケマップを、前記撮影画像に基づいて生成するステップと、
ｃ）前記基準画像とは別の投影用画像の前記ボケ位置に対応する部分に対して鮮鋭化処理とエッジ抽出処理との少なくとも一方を施した補正画像を、前記ボケマップに基づいて生成するステップと、
ｄ）前記投影用画像と前記補正画像とを合成あるいは重畳して前記投影面に投影するステップと、
を備えることを特徴とする画像処理方法。

【請求項12】

ａ）基準画像をプロジェクタで投影面に投影することにより前記投影面に形成された基準投影画像を撮像部で撮影した撮影画像を取得するステップと、
ｂ）前記投影面における前記基準投影画像のボケ位置を示すボケマップを、前記撮影画像に基づいて生成するステップと、
ｃ）前記基準画像とは別の投影用画像の前記ボケ位置に対応する部分に対して鮮鋭化処理とエッジ抽出処理との少なくとも一方を施した補正画像を、前記ボケマップに基づいて生成するステップと、
ｄ）前記投影用画像と前記補正画像とを合成あるいは重畳して前記投影面に投影するステップと、
をコンピュータに実行させるためのプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、画像処理装置およびそれに関連する技術に関し、特にプロジェクタによる投影画像に関する画像処理技術に関する。

【背景技術】

【0002】

投影用画像を投影面に投影し当該投影面に投影画像を形成するプロジェクタに関して、当該投影面に形成された投影画像のボケ（焦点ボケ）を低減する技術が存在する。

【0003】

たとえば、特許文献１においては、平面スクリーン（投影面）に対して投影用画像（プロジェクタからの出力画像）を投影する場合において、当該投影面に形成された投影画像に生じるボケをプロジェクタのレンズ状態等に基づいて補正する技術が記載されている。詳細には、プロジェクタの設置環境状態の値（レンズの状態を表す値（ズーム値、シフト値およびフォーカス値）あるいはプロジェクタの設置位置を表す値（投影面までの距離、パン角度、およびチルト角度）等）を投影時のボケ量に変換し、当該ボケ量に応じて補正画像を生成する技術が記載されている。当該技術によれば、平面スクリーン上の画像に生じ得るボケを抑制することが可能である。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】国際公開第２０１８／１５９２８７号

【発明の概要】

【発明が解決しようとする課題】

【0005】

ところで、プロジェクタの投影面は、必ずしも平坦な面（平面）ではなく、部分的な凹凸を有する非平面等であり得る。そのような部分的な凹凸を有する非平面等の投影面に対してプロジェクタによって画像が投影される場合、投影面における部分的な凹凸に起因して部分的にボケが発生することがある。換言すれば、プロジェクタによって投影される画像の解像感が投影面の一部において低下することがある。

【0006】

しかしながら、特許文献１の技術では、投影面における部分的な凹凸に起因して部分的に発生するボケは考慮されておらず、特許文献１の技術では上記の問題を解消することはできない。

【0007】

そこで、この発明は、投影面が部分的な凹凸を有する場合であっても、当該投影面にプロジェクタによって投影される画像の解像感の低下を抑制することが可能な技術を提供することを課題とする。

【課題を解決するための手段】

【0008】

上記課題を解決すべく、本発明に係る画像処理装置は、基準画像をプロジェクタで投影面に投影することにより前記投影面に形成された基準投影画像を撮像部で撮影した撮影画像を取得する取得部と、前記投影面における前記基準投影画像のボケ位置を示すボケマップを、前記撮影画像に基づいて生成するマップ生成部と、前記基準画像とは別の投影用画像の前記ボケ位置に対応する部分に対して鮮鋭化処理とエッジ抽出処理との少なくとも一方を施した補正画像を、前記ボケマップに基づいて生成する画像生成部と、前記投影用画像と前記補正画像とを合成あるいは重畳して前記投影面に投影する投影制御部と、を備えることを特徴とする。

【0009】

前記マップ生成部は、前記プロジェクタによる本来の前記投影用画像の投影環境が整った状態で、前記投影用画像の投影前に前記ボケマップを生成してもよい。

【0010】

前記マップ生成部は、前記プロジェクタによる本来の投影用画像群の投影期間内において、前記基準画像を前記投影面に投影して前記ボケマップを生成し、前記画像生成部は、前記投影用画像群の前記投影期間内に生成された前記ボケマップに基づいて、前記投影用画像群の一の投影用画像についての前記補正画像を生成し、前記投影制御部は、前記投影期間内において前記一の投影用画像についての当該補正画像と前記一の投影用画像とを合成あるいは重畳して前記投影面に投影してもよい。

【0011】

前記画像生成部は、前記投影用画像の前記ボケ位置に対応する部分のみで構成される前記補正画像を生成し、前記投影制御部は、前記補正画像と前記投影用画像とを重畳して投影してもよい。

【0012】

前記画像生成部は、前記投影用画像の前記ボケ位置に対応する部分のみで構成される前記補正画像を生成し、前記投影制御部は、前記補正画像と前記投影用画像とを合成して投影してもよい。

【0013】

前記投影制御部は、前記投影用画像と前記補正画像とを時分割で重畳して投影してもよい。

【0014】

前記投影用画像と前記補正画像とは別個のプロジェクタで前記投影面に投影されてもよい。

【0015】

前記マップ生成部は、前記ボケマップとして、前記基準投影画像におけるボケ量の分布状況をも示すマップを生成し、前記画像生成部は、前記基準投影画像内の各ボケ位置におけるボケ量に応じて、前記補正画像内の前記各ボケ位置に対応する部分の補正度合いを変更してもよい。

【0016】

前記補正画像は、前記投影用画像の前記ボケ位置に対応する部分のシャープネスを強調したシャープネス強調画像であってもよい。

【0017】

前記補正画像は、前記投影用画像の前記ボケ位置に対応する部分のエッジを抽出したエッジ抽出画像であってもよい。

【0018】

上記課題を解決すべく、本発明に係る画像処理方法は、ａ）基準画像をプロジェクタで投影面に投影することにより前記投影面に形成された基準投影画像を撮像部で撮影した撮影画像を取得するステップと、ｂ）前記投影面における前記基準投影画像のボケ位置を示すボケマップを、前記撮影画像に基づいて生成するステップと、ｃ）前記基準画像とは別の投影用画像の前記ボケ位置に対応する部分に対して鮮鋭化処理とエッジ抽出処理との少なくとも一方を施した補正画像を、前記ボケマップに基づいて生成するステップと、ｄ）前記投影用画像と前記補正画像とを合成あるいは重畳して前記投影面に投影するステップと、を備えることを特徴とする。

【0019】

上記課題を解決すべく、本発明に係るプログラムは、ａ）基準画像をプロジェクタで投影面に投影することにより前記投影面に形成された基準投影画像を撮像部で撮影した撮影画像を取得するステップと、ｂ）前記投影面における前記基準投影画像のボケ位置を示すボケマップを、前記撮影画像に基づいて生成するステップと、ｃ）前記基準画像とは別の投影用画像の前記ボケ位置に対応する部分に対して鮮鋭化処理とエッジ抽出処理との少なくとも一方を施した補正画像を、前記ボケマップに基づいて生成するステップと、ｄ）前記投影用画像と前記補正画像とを合成あるいは重畳して前記投影面に投影するステップと、をコンピュータに実行させるためのプログラムであることを特徴とする。

【発明の効果】

【0020】

本発明によれば、投影面が部分的な凹凸を有する場合であっても、当該投影面にプロジェクタによって投影される画像の解像感の低下を抑制することが可能である。

【図面の簡単な説明】

【0021】

【図1】第１実施形態に係るプロジェクタシステムの機能ブロック図である。

【図2】投影面の断面を示す図である。

【図3】ロッカー装置の概略外観図である。

【図4】図３の一部を拡大して示す斜視図である。

【図5】把手部付近の断面図である。

【図6】プロジェクタの投影範囲とカメラの撮影範囲との関係等を示す図である。

【図7】基準画像を利用してボケマップが生成されることを示す概念図である。

【図8】基準投影画像の所定方向における画素値の変化を示す図である。

【図9】様々なボケマップを示す図である。

【図10】補正画像（鮮鋭化画像）の生成処理等を概念的に示す図である。

【図11】比較例と本実施形態とを比較して示す図である。

【図12】補正画像（エッジ抽出画像）の生成処理等を概念的に示す図である。

【図13】比較例と本実施形態とを比較して示す図である。

【図14】プロジェクタシステムにおける処理の流れを示すフローチャートである。

【図15】第２実施形態に係るプロジェクタシステムの機能ブロック図である。

【図16】投影用画像と補正画像とが重畳表示されることを示す概念図である。

【図17】２つのプロジェクタの投影範囲の相互関係等を示す図である。

【図18】投影用画像と補正画像とが時分割で重畳して投影されることを示す概念図である（第３実施形態）。

【図19】ボケが発生し得る他の状況を示す図である。

【発明を実施するための形態】

【0022】

以下、本発明の実施形態を図面に基づいて説明する。

【0023】

＜１．第１実施形態＞
＜１－１．装置概要＞
図１は、第１実施形態に係るプロジェクタシステム１（１Ａとも称する）の機能ブロックを示す図である。

【0024】

図１に示されるように、プロジェクタシステム１は、プロジェクタ２０と情報処理装置３０とカメラ５０とを備える。プロジェクタ２０は、投影装置あるいは投影部とも称され、カメラ５０は、撮像装置あるいは撮像部とも称される。

【0025】

プロジェクタ２０と情報処理装置３０とが有線接続され、カメラ５０と情報処理装置３０とが有線接続される。装置間を接続する各接続ケーブルを介して、プロジェクタ２０と情報処理装置３０との間、およびカメラ５０と情報処理装置３０との間で各種の情報が授受される。なお、これに限定されず、プロジェクタ２０および／またはカメラ５０は、情報処理装置３０に対して無線接続されてもよい。

【0026】

プロジェクタ２０は、投影光源と、投影画像形成部（液晶パネル（透過型あるいは反射型等）またはデジタルミラーデバイス等）と、投影光学系（レンズ等）とを備える。プロジェクタ２０は、投影面９０に各種の投影用画像（静止画像および動画像）を投影することが可能である。また、プロジェクタ２０は、本来の投影用画像３１０を投影面９０に対して投影することが可能であるとともに、調整用の基準画像２１０（図７参照（後述））を投影面９０に対して投影することが可能である。

【0027】

カメラ５０は、撮像素子（ＣＣＤ等）と撮影光学系（レンズ等）とを備える。カメラ５０は、プロジェクタ２０により投影面９０に投影された画像を撮影することが可能である。詳細には、カメラ５０は、投影面９０上にプロジェクタ２０によって表示された状態の投影用画像（換言すれば、投影面９０に形成された投影画像）の撮影画像を生成することが可能である。特に、カメラ５０は、プロジェクタ２０により投影面９０に投影され投影面９０に表示された状態の（調整用の）基準画像２１０（換言すれば、投影面９０に形成された基準投影画像２４０）を撮影して撮影画像２５０（基準投影画像２４０を撮影した画像）を生成することが可能である。

【0028】

なお、カメラ５０は、プロジェクタ２０による投影画像と同様の画像を（同様の角度および同様の範囲で）撮影できるように構成されることが好ましい。具体的には、図６に示されるように、プロジェクタ２０とカメラ５０とは互いに近い位置に配置され且つプロジェクタ２０の投影光学系の光軸とカメラ５０の撮影光学系の光軸とは互いに平行に近い状態を有することが好ましい。

【0029】

情報処理装置３０は、プロジェクタ２０およびカメラ５０を制御する。詳細には、情報処理装置３０は、プロジェクタ２０の画像投影処理等、およびカメラ５０の画像撮影処理等を制御する。なお、情報処理装置３０は、画像を処理する装置であることから、画像処理装置とも称される。同様に、プロジェクタシステム１も画像処理装置（あるいは画像処理システム）とも称される。

【0030】

図１に示されるように、情報処理装置３０は、コントローラ（制御部とも称する）３１と記憶部３２と操作部３５とを備える。

【0031】

コントローラ３１は、１又は複数のハードウェアプロセッサ（例えば、ＣＰＵ（Central Processing Unit）およびＧＰＵ（Graphics Processing Unit））等を備えるコンピュータシステムとして構成される。コントローラ３１は、ＣＰＵ等において、記憶部（ＲＯＭおよび／またはハードディスクなどの不揮発性記憶部）３２内に格納されている所定のソフトウエアプログラム（以下、単にプログラムとも称する）を実行することによって、各種の処理部（取得部３１ａ、マップ生成部３１ｂ、画像生成部３１ｃ、および投影制御部３１ｄ等）を実現する。

【0032】

取得部３１ａは、各種の情報を取得する処理部である。取得部３１ａは、調整用の基準画像２１０をプロジェクタ２０で投影面９０に投影することにより投影面９０に形成された基準投影画像２４０（投影面９０上に表示された状態の基準画像２１０）をカメラ５０で撮影した撮影画像２５０等を取得する（図７参照）。

【0033】

マップ生成部３１ｂは、投影面９０における基準投影画像２４０のボケ位置（投影面９０における各ボケ領域２９３（基準投影画像２４０に部分的に存在するボケ領域）の位置）を示すボケマップ２９０（後述）を、撮影画像２５０等に基づいて生成する。なお、後述するように、ボケマップ２９０は、投影面における各ボケ領域２９３の位置のみならず、当該各ボケ領域のボケ量をも示すマップであってもよい。ボケマップ２９０は、ボケ位置の分布（およびボケ量の分布）を示すマップであり、ボケ分布マップとも称される。

【0034】

画像生成部３１ｃは、基準画像２１０とは別の（本来の）投影用画像３１０（投影前の元画像）のボケ位置に対応する部分（領域）３１１に対して鮮鋭化処理とエッジ抽出処理との少なくとも一方を施した補正画像３２０を、ボケマップ２９０に基づいて生成する。

【0035】

投影制御部３１ｄは、投影用画像３１０と補正画像３２０とを合成あるいは重畳して投影面に投影する処理を制御する。

【0036】

なお、当該プログラム（詳細にはプログラムモジュール群）は、ＵＳＢメモリなどの可搬性の記録媒体に記録され、当該記録媒体から読み出されて情報処理装置３０にインストールされてもよい。あるいは、当該プログラムは、通信ネットワーク等を経由してダウンロードされて情報処理装置３０にインストールされてもよい。

【0037】

また、ここでは、各種処理（画像処理等）は、コントローラ３１によるソフトウエア処理によって実行されるが、これに限定されず、専用のハードウエア（ＡＳＩＣ）等を用いて実行されてもよい。

【0038】

記憶部３２は、画像メモリ（ＲＡＭ等）３２ａおよび不揮発性記憶装置３２ｂ（ＲＯＭ、ハードディスクドライブ（ＨＤＤ）、ソリッドステートドライブ（ＳＳＤ）等）で構成される。不揮発性記憶装置３２ｂには、基準画像２１０（詳細にはその画像データ）が記憶されている。また、不揮発性記憶装置３２ｂには、本来の投影対象の画像（投影用画像）も記憶される。画像メモリ３２ａは、ＲＡＭ等の高速アクセス可能な半導体メモリ（主に揮発性メモリ）で構成される。画像メモリ３２ａにおいては、処理対象画像の画像データに対する各種の画像処理の前後の画像等が格納される。

【0039】

操作部３５は、情報処理装置３０に対する操作入力を受け付ける操作入力部３５ａと、各種情報の表示出力を行う表示部３５ｂとを備えている。操作入力部３５ａ（受付部とも称される）は、投影対象画像の指定操作（指定入力）および投影開始指令等を受け付け、表示部３５ｂは、各種の設定画面等を表示する。

【0040】

たとえば、操作入力部３５ａとしてはマウス、キーボード等が用いられ、表示部３５ｂとしてはディスプレイ（液晶ディスプレイ等）が用いられる。操作入力部３５ａの一部としても機能し且つ表示部３５ｂの一部としても機能するタッチパネルが設けられてもよい。

【0041】

なお、ここでは、カメラ５０（撮像部）がプロジェクタ２０および情報処理装置３０とは別に設けられているが、これに限定されない。たとえば、カメラ５０（撮像部）は、プロジェクタ２０および／または情報処理装置３０の内部に設けられてもよい。また、情報処理装置３０は、プロジェクタ２０とは別に設けられてもよく、プロジェクタ２０の内部に設けられてもよい。

【0042】

＜１－２．投影面９０＞
図２は、投影面９０の断面を示す図である。

【0043】

投影面９０は、必ずしも全面に亘って平坦ではない。投影面９０は、部分的に凹凸を有していることがある。換言すれば、投影面９０には様々な凹凸部９３が存在し得る。

【0044】

図２の断面図には、そのような凹凸部９３の例（９３ａ～９３ｆ）が示されている。図２に示されるように、たとえば、断面視において矩形状の凸部（突出部）９３ａ、断面視において曲面状（凸曲面状）の凸部９３ｂ、断面視においてＶ字形状の凸部９３ｃが存在し得る。また、断面視において矩形状の凹部９３ｄ、断面視において曲面状（凹曲面状）の凹部９３ｅ、断面視においてＶ字形状の凹部９３ｆ等も存在し得る。なお、図２においては、各種の凹凸部９３が纏めて示されているが、実際には各種の凹凸部９３のうちの１又は幾つかの凹凸部９３が投影面９０に存在することが多い。

【0045】

図３～図５は、投影面９０に関する更に具体的な一例を示す図である。図３および図４は、駅などに配置されるロッカー装置７０を示す図である。図３は、ロッカー装置７０の概略外観図であり、図４は、その一部（把手部７３付近）を拡大して示す斜視図である。また、図５は、把手部７３付近を拡大して示す断面図である。

【0046】

図３に示されるように、ロッカー装置７０は、複数の収納部（収納室ないしロッカーとも称する）７１を備える。各収納部７１は、略直方体形状の内部空間を有するとともに、その前面側に扉７２を有している。また、扉の開閉のための把手部７３が設けられている。

【0047】

図３等に示されるように、たとえば、このようなロッカー装置７０の前面７９が投影面９０として利用される。図３では、プロジェクタ２０による投影範囲（投影面９０における投影範囲）が破線矩形で示されている。

【0048】

詳細には、この投影面９０は、収納部７１の扉７２の前面７２ｆ（図４参照）と、把手部７３の前面７３ｆ（図５も参照）と、収納部７１の筐体７４の前面７４ｆとを備えて構成される。プロジェクタ２０は、主に前面７２ｆに画像を投影するとともに、把手部７３の前面７３ｆ等に対しても画像を投影する。

【0049】

このような投影面９０における把手部７３は、図５の断面図を参照すると判るように、図２の矩形状の凸部９３ａに概ね相当する。当該投影面９０は、部分的な凹凸を有する非平面（その一部に平坦でない部分（凹凸部９３）を有する面）である。なお、ここでは、基準位置Ｐ１（図２参照）からプロジェクタ２０側に突出した把手部７３（凸部）が凹凸部９３（凸部９３ａ）として例示されているが、これに限定されず、凹凸部９３としては、上述したような凹部も存在し得る。たとえば、基準位置Ｐ１からプロジェクタ２０の反対側に凹んだ把手部（不図示）が凹凸部９３（特に凹部９３ｄ，９３ｅ等）として存在し得る。

【0050】

なお、投影面９０は、ロッカー装置７０の前面７９に限定されず、各種の構造物の平面等であってもよい。また、投影面９０は、平面ないし平面に近い面に限定されず、部分的に凹凸面を有する各種形状の立体形状物（マネキン等）の表面（ひょうめん）（曲面等）であってもよい。

【0051】

上述したように、このような投影面９０に対してプロジェクタによって画像が投影される場合、投影面９０における部分的な凹凸に起因して部分的にボケが発生することがある。具体的には、基準位置Ｐ１（図２参照）に対する比較的大きな変位を伴う凹凸部９３の影響により、プロジェクタ２０から投影面９０（特に凹凸部９３）に到達する光像の光学距離は、投影面９０内において部分的に被写界深度を超える程度にまで変化する。その結果、プロジェクタ２０からの光像が光軸方向の基準位置Ｐ１にて合焦状態となるように調整されたとしても、光像（画像）の「ボケ」が投影面９０内において部分的に発生する。詳細には、投影面９０内の凹凸部９３（のみ）において光像（画像）の「ボケ」が発生する。換言すれば、プロジェクタによって投影される画像の解像感が投影面の一部において低下する。

【0052】

この実施形態では、投影面９０が部分的な凹凸を有する場合であっても、当該投影面９０にプロジェクタによって投影される画像の解像感の低下を抑制することが可能な技術について説明する。

【0053】

より具体的には、情報処理装置３０（プロジェクタシステム１）によって、基準画像２１０（図７等参照）を用いてボケマップ２９０が生成される（図１４のステップＳ１０）。そして、投影用画像３１０（図１０等参照）に対する補正画像３２０がボケマップ２９０に基づき生成され、投影用画像３１０と当該補正画像３２０とが合成等されて投影面９０に投影される（図１４のステップＳ２０）。なお、図１４は、プロジェクタシステム１における処理の流れを示すフローチャートである。

【0054】

以下、このような技術等について図１４等を参照しつつ詳細に説明する。

【0055】

＜１－３．基準画像２１０を用いたボケマップ生成＞
まず、ステップＳ１０において、ボケマップ２９０の生成処理が実行される。換言すれば、ボケマップ２９０が、本来の投影用画像３１０の投影（ステップＳ２０）の前に生成される。

【0056】

また、このボケマップ２９０の生成処理は、プロジェクタ２０による本来の投影用画像（調整用でない投影用画像）３１０の投影環境（投影準備）が整った状態で行われる。より詳細には、本来の投影用画像の投影時（ステップＳ２０）と同じボケが発生し得る状態（投影面９０の状態、投影面９０とプロジェクタ２０との位置関係、プロジェクタ２０の投影光学系の状態等が投影時と同じ状態）でステップＳ１０の処理が実行される。

【0057】

図７は、基準画像２１０等を示す図である。基準画像２１０は、調整用の画像（パターン画像）である。基準画像２１０は、本来の投影用画像３１０（ユーザが投影したい画像）（図１０等参照）とは別の画像として、記憶部３２に予め記憶されている。

【0058】

図７の基準画像２１０（図７の最上段参照）は、白色ブロック（明部）と黒色ブロック（暗部）とが交互に配置された白黒のチェッカーパターンで構成されている。図７では、８×８のチェッカーパターンが例示されている。矩形形状の白色ブロック内の各画素は、いずれも同じ明るい値（たとえば、「２５５」）の画素値を有し、矩形形状の黒色ブロック内の各画素は、いずれも同じ暗い値（たとえば、「０」）の画素値を有する。

【0059】

コントローラ３１は、このような基準画像２１０を用いてボケマップ２９０を生成する。

【0060】

具体的には、ステップＳ１１において、コントローラ３１は、プロジェクタ２０およびカメラ５０を制御して、撮影画像２５０を取得する。詳細には、コントローラ３１の制御下において、プロジェクタ２０は、調整用の基準画像２１０（図７）を投影面９０に対して投影する。詳細には、本来の投影用画像３１０の投影範囲と同じ範囲（あるいは当該投影範囲を含む範囲）に対して、基準画像２１０が投影される。次に、コントローラ３１の制御下において、カメラ５０は、プロジェクタ２０により投影面９０に投影された基準画像２１０を撮影し、当該投影面９０上に表示された状態の基準画像２１０（換言すれば、投影面９０に形成された基準投影画像２４０）の撮影画像２５０（図７参照）を生成する。そして、コントローラ３１は、生成された撮影画像２５０（図７参照）を取得する。なお、撮影画像２５０は、投影面９０内の基準位置（平面内の基準位置）の画像を合焦状態とするようにカメラ５０のレンズ位置等が調整（フォーカス調整）されて撮影される。その結果、撮影画像２５０は、その全体に亘って、基準投影画像２４０と同じ合焦状態（ボケ状態）を有する画像として撮影（取得）される。その後、ステップＳ１２において、コントローラ３１は、当該撮影画像２５０に基づきボケマップ２９０を生成する。

【0061】

基準画像２１０が投影面９０上にて鮮鋭な状態で投影されている部分（基準投影画像２４０が投影面９０のボケを有していない部分）においては、撮影画像２５０内の黒色ブロックと白色ブロックとの両ブロックの境界部分において、当該両ブロックは明瞭に区別される。図８の上段は、基準投影画像２４０における当該状況を模式的に示す図である。理想的には、たとえば、当該境界部分の左側には画素値「０」の画素が並び、当該境界部分の右側には画素値「２５５」の画素が並ぶ。すなわち、当該境界部分において、画素値が非常に急峻に変化する。

【0062】

一方、基準画像２１０が投影面９０上にて「ボケ」を有するように投影されている部分（基準投影画像２４０内のボケ部分）においては、撮影画像２５０内の白色ブロックと黒色ブロックとの両ブロックの境界部分において、その画素値が比較的緩やかに変化する。図８の下段は、基準投影画像２４０における当該状況を模式的に示す図である。当該境界部分において、その画素値が「０」から「２５５」へと徐々に（段階的に）変化する数画素程度（～数十画素程度）の幅Ｗの画素群が存在する。すなわち、当該境界部分において、画素値が比較的緩やかに変化しており、「ボケ」が発生している。また、当該幅Ｗが大きいほど、ボケの程度が大きい。

【0063】

したがって、当該幅Ｗ（当該境界部分において、その画素値が「０」から「２５５」へと（あるいはその逆向きに）変化するのに要する画素の個数（所定方向における画素の個数））は、ボケの度合いを反映している。当該幅Ｗは、ボケ量（換言すれば、デフォーカス量）を表す指標値である。

【0064】

ここでは、そのような特性を利用して、当該個数（幅Ｗ）が所定数（たとえば「５」）を超えている境界位置（黒色ブロックと白色ブロックとの両ブロックの理論上の境界位置）は、ボケが生じている位置（ボケ位置）であると判定される。たとえば、チェッカーパターン内の両ブロックの角部が互いに接触する各位置（各角部）について、ボケ位置であるか否かが判定される。具体的には、当該各位置（各角部）を含む部分（部分領域）ごとに、ボケ位置を含む領域（ボケ領域）であるか否かが判定される。

【0065】

より具体的には、当該角部を中心として、所定範囲の部分領域Ｒ（図７の上から３段目参照）を単位として、当該ボケが生じているか否かが判定される。この部分領域Ｒは、当該角部に対して左右上下方向それぞれに各ブロックの単位幅Ｂ（たとえば、２４０画素）の１／２の幅を有する矩形領域である。より詳細には、当該部分領域Ｒ内に含まれる境界部分（縦方向および横方向に伸びる境界部分）でのボケ量の平均値に基づいて、当該部分領域Ｒのボケ量が算出される。そして、部分領域におけるボケの発生の有無等が、当該部分領域Ｒのボケ量の平均値等に基づいて判定される。

【0066】

このような判定結果がボケマップ２９０に保存される。詳細には、部分領域Ｒごとの判定結果（ボケの発生の有無等）を示すデータがボケマップ２９０内に保存される。

【0067】

あるいは、ブロック（黒色ブロックあるいは白色ブロック）を単位として、当該ボケが生じているか否かが判定されてもよい。たとえば、各ブロックの境界部分（他の色のブロックと接する４辺の境界部分）でのボケ量の平均値に基づいて、当該各ブロック（部分領域）のボケ量が算出されてもよい。そして、各ブロック（部分領域）におけるボケの発生の有無等が、当該部分領域のボケ量の平均値等に基づいて判定されてもよい。

【0068】

また、図７では、８×８のチェッカーパターンが基準画像２１０として例示されているが、これに限定されず、さらに細かく区切った１６×１６（あるいは３２×３２等）のチェッカーパターン等が基準画像２１０として利用されてもよい。これによれば、ボケマップ２９０におけるボケ位置等の分布を細かく検出することが可能である。ただし、チェッカーパターンにおけるブロック自体（１つのブロックの単位幅Ｂ）を小さくし過ぎると、ボケの幅Ｗを適切に検出することが困難になる。それ故、ボケの幅Ｗを適切に検出することができるように、ブロック自体の大きさが適宜決定されることが好ましい。

【0069】

なお、図７では、説明の都合上、プロジェクタ２０の投影範囲の形状が正方形である場合が示されている。プロジェクタ２０の投影範囲の形状が正方形以外の場合（図３等参照）には、投影範囲の形状に合わせて基準画像２１０の形状等が変更されればよい。たとえば、投影範囲の形状が横長の矩形形状である場合には、同じ形状（横長の矩形形状）を有し且つ３２×２４のチェッカーパターン等で構成される画像が基準画像２１０として利用されればよい。

【0070】

また、所定方向（縦方向および／または縦方向）にて各ブロックの単位幅Ｂの「１／Ｎ」のずれ（位相ずれ）を生じさせつつ基準画像２１０を投影面９０に投影してボケ位置等を検出する動作をＮ回（ただし、Ｎは２以上の自然数）繰り返し、投影面９０内の異なる位置でのボケ具合等が検出されてもよい。この場合、部分領域の大きさは、単位幅Ｂの１／Ｎ等に定められればよい。

【0071】

このような位相ずれを用いることによっても、ボケマップ２９０におけるボケ位置等の分布を細かく検出することが可能である。特に、位相ずれを伴う処理によれば、一定程度の幅Ｗを適切に検出しつつ、ボケ位置等の分布を細かく検出することが可能である。たとえば、３２×３２のチェッカーパターン（単位幅Ｂ＝６０画素）を投影面９０に投影してボケ位置等を検出する動作が、その単位幅Ｂの１／４の位相ずれを順次伴いつつ縦方向および横方向にそれぞれ４回ずつ繰り返されてもよい。これによれば、６０画素程度までの幅Ｗのボケを適切に検出しつつ、投影面９０内のボケ位置等の分布を１５画素幅の単位領域ごとに（細かく）検出することが可能である。

【0072】

あるいは、基準画像２１０は、チェッカーパターンではなく、ドットパターン等で構成されてもよい。より詳細には、チェッカーパターン内の各ブロックの角部（あるいは中央等）に相当する位置にドット（点状図形）がそれぞれ配置されたドットパターン等で基準画像２１０が構成されてもよい。

【0073】

以上のようにして部分領域（単位領域）ごとにボケの発生の有無が判定されると、その判定結果に基づいてボケマップ２９０が生成される。ここでは、ボケが発生していると判定された部分領域は、白色領域（非黒色領域）として示されている。

【0074】

たとえば、図７の上から２段目（右側最上段）に示すように、投影面９０内の中央部付近に凹凸部９３が存在する場合を想定する。この場合、基準画像２１０（図７最上段参照）が当該投影面９０に投影されると、図７の上から３段目（左側最下段）の撮影画像２５０が取得される。なお、当該２段目の投影面９０においては、基準投影画像２４０は図示されていない。また、上述のように、撮影画像２５０は、その全体に亘って、基準投影画像２４０（投影面９０上に形成された光像）と同様の合焦状態（ボケ状態）を有する画像として取得される。

【0075】

撮影画像２５０においては、凹凸部９３以外の部分では合焦状態の光像（鮮鋭な画像）が得られているのに対して、（中央部付近の）当該凹凸部９３に投影された部分に像（画像）のボケが生じている。このような撮影画像２５０に基づき、上述のようにしてボケマップ２９０が生成される。図７の上から４段目（右側最下段）のボケマップ２９０では、当該中央部付近の多数の部分領域が纏めて白色領域として示されている。ボケマップ２９０における白色領域（非黒色領域）は、ボケが発生している領域を示している。換言すれば、白色領域に含まれる各位置は、ボケが発生している部分領域の位置（ボケ位置）である。

【0076】

このようにして、基準画像２１０内のボケ位置（換言すれば、投影面９０におけるボケ領域２９３の位置）を示すボケマップ２９０が生成（取得）される。ボケマップ２９０にいては、所定程度以上のボケが存在する部分領域（ボケ位置を含む部分領域）（詳細には当該部分領域の集合体）がボケ領域２９３として求められる。別の見方をすれば、当該ボケ領域２９３の位置（詳細には、ボケ領域２９３を構成する各部分領域の位置）がボケ位置として求められる。このボケマップ２９０は、投影面９０の全体（詳細には、プロジェクタ２０による投影対象領域の全体）に亘るボケ位置等の分布を示している。換言すれば、ボケマップ２９０は、投影面９０の全面に亘る凹凸を反映（および検出）したマップである。

【0077】

なお、図９は、様々なボケマップ２９０を示す図である。図９の最上段に示されるように、投影面９０内の凹凸状況によっては、図７とは異なる位置および異なる範囲にボケ領域２９３が検出される。以下では、主に、図９の最上段に示すようなボケマップ２９０が取得されたものとして説明を続ける。

【0078】

＜１－４．投影処理等＞
次に、ステップＳ２０（図１４）において、本来の投影用画像３１０に関する投影処理等が実行される。ただし、投影用画像３１０がそのまま投影されるのではなく、投影用画像３１０と当該投影用画像３１０に関する補正画像３２０とが合成等されて投影面９０に投影される。

【0079】

具体的には、まずステップＳ２１において、コントローラ３１は、投影用画像３１０の補正画像３２０（図１０参照）をボケマップ２９０に基づき生成する。投影用画像３１０は、投影前（補正前）の元の画像（元画像）とも表現される。また、補正画像３２０は、投影用画像３１０（元画像）に対して補正処理を施した補正画像である。詳細には、補正画像３２０は、投影用画像３１０（元画像）において、ボケ位置に対応する部分（部分領域）Ｑに対して補正処理を施した補正画像である。ボケ位置に対応する部分Ｑは、ボケマップ２９０に基づいて特定されればよい。投影用画像３１０の部分Ｑは、ボケマップ２９０内のボケ領域２９３の位置（ボケ位置）に対応する部分である。また、当該補正処理は、鮮鋭化処理とエッジ抽出処理との少なくとも一方を含む処理である。

【0080】

次に、ステップＳ２２において、コントローラ３１は、プロジェクタ２０を用いて、投影用画像３１０と補正画像３２０との両画像を合成（あるいは重畳）して投影面９０に投影する。なお、この第１実施形態では、両画像が合成されて投影される態様を例示し、第２実施形態および第３実施形態において、両画像が重畳されて投影される態様を例示する。

【0081】

以下では、まず、図１０および図１１を参照しつつ、投影処理等の一例について説明する。なお、図１０は、補正画像３２０の生成処理等を概念的に判り易く示す図であり、図１１は、比較例と本実施形態との相違を判り易く示す図である。

【0082】

図１０等では、補正処理として鮮鋭化処理が施されるとともに、投影用画像３１０と補正画像３２０とを合成した合成画像３３０が生成され、当該合成画像３３０が投影面９０に投影される場合について例示する。

【0083】

ステップＳ２１において、コントローラ３１は、投影用画像３１０の補正画像３２０をボケマップ２９０に基づき生成する。補正画像３２０は、投影用画像３１０（元画像）に対して鮮鋭化処理を施した画像である。ここでは、補正画像３２０は、投影用画像３１０（元画像）において、ボケ位置に対応する部分（部分領域）Ｑのみに対して鮮鋭化処理を施した補正画像である。投影用画像３１０の「ボケ位置に対応する部分Ｑ」は、ボケマップ２９０に基づいて特定される。具体的には、「ボケ位置に対応する部分Ｑ」は、ボケマップ２９０におけるボケ領域２９３の位置および範囲によって特定される。換言すれば、投影用画像３１０において、ボケ位置に対応する部分Ｑは、ボケマップ２９０におけるボケ領域２９３の存在位置に対応する部分である。

【0084】

なお、画像３２３（図１０の最下段参照）は、投影用画像３１０の全体に対して鮮鋭化処理を施した画像である。ただし、ここでは、画像３２３のうちの一部の画像（詳細には、ボケ位置（ボケマップ２９０にて示される）に対応する部分領域Ｑのみの鮮鋭化画像）が補正画像３２０として生成される。すなわち、当該補正画像３２０は、画像３２３の部分（部分領域）Ｑのみ（画像３２３全体の画素数よりも少ない画素数）で構成され、当該部分Ｑ以外の領域を含まない。

【0085】

次に、ステップＳ２２において、コントローラ３１は、投影用画像３１０と補正画像３２０との合成画像３３０を生成する。たとえば、合成画像３３０は、投影用画像３１０における「ボケ位置に対応する部分Ｑ」を補正画像３２０に置き換えて合成した画像である（図１０の上から２段目（右側）参照）。

【0086】

さらに、ステップＳ２２において、コントローラ３１は、プロジェクタ２０を用いて、合成画像３３０（新たな投影用画像とも称される）を投影面９０に投影する。

【0087】

図１１は、比較例に係る投影処理と上記実施形態に係る投影処理とを比較する図である。

【0088】

図１１の上段には、比較例に係る投影処理（上述のような補正処理を伴わない投影処理）が示されている。当該上段に示されるように、仮に投影用画像（元画像）３１０がそのまま投影されると、投影面９０に形成された投影画像（見えている状態の画像）３９０には、凹凸部９３に対応する部分Ｑ（破線で囲まれた矩形領域）においてボケが発生する。すなわち、投影画像３９０において部分的にボケが発生する。

【0089】

一方、図１１の下段には、上記実施形態に係る投影処理（上述のような補正処理を伴う投影処理）が示されている。上記実施形態においては、当該下段に示されるように、投影用画像３１０と補正画像３２０とが合成されて投影される（合成画像３３０が投影される）。この場合、投影面９０に形成された投影画像（見えている状態の画像）３４０においては、投影用画像３１０に対する部分的な補正処理（鮮鋭化処理）によって、凹凸部９３に対応する部分Ｑにおけるボケが抑制される。すなわち、投影画像３４０にて部分的なボケが抑制される。

【0090】

なお、鮮鋭化処理は、シャープネス強調処理（シャープネスを強調する処理）、エッジ強調処理（エッジ成分を強調する処理）、アンシャープマスク処理、あるいは高周波成分強調処理（高周波成分を強調する処理）などとも称される。また、鮮鋭化処理が施された画像は、鮮鋭化画像、シャープネス強調画像、アンシャープマスク画像、あるいは高周波成分強調画像などとも称される。また、鮮鋭化処理は画像超解像処理（画像の画素数を増加させるとともに高周波成分を復元する（鮮鋭化する）処理）であってもよく、鮮鋭化処理が施された画像は、超解像画像（画像超解像処理が施された画像）などであってもよい。

【0091】

また、補正処理は、鮮鋭化処理のみならず、エッジ抽出処理（元画像からエッジを抽出する処理）であってもよい。また、鮮鋭化画像は、元画像のエッジが強調された画像等であり、元画像のエッジのみならずエッジ以外の要素（画素）をも含む画像である。これに対して、エッジ抽出画像は、元画像からエッジが抽出された画像であり、抽出されたエッジ（抽出エッジ）要素で構成される画像である。

【0092】

次に、図１２および図１３を参照しつつ、投影処理等の他の一例について説明する。なお、図１２は、補正画像３２０の生成処理等を概念的に判り易く示す図であり、図１３は、比較例と本実施形態との相違を判り易く示す図である。図１２および図１３は、図１０および図１１とそれぞれ同様の図である。ただし、図１２等では、補正処理としてエッジ抽出処理が施されて、エッジ抽出画像が補正画像３２０として生成される。この点において、図１０等と相違する。

【0093】

ステップＳ２１において、コントローラ３１は、投影用画像３１０の補正画像３２０（図１２）をボケマップ２９０に基づき生成する。この補正画像３２０は、投影用画像３１０（元画像）に対してエッジ抽出処理を施した画像である。ここでは、補正画像３２０は、投影用画像３１０（元画像）において、ボケ位置に対応する部分（部分領域）Ｑのみに対してエッジ抽出処理を施した補正画像である。なお、図１２の画像３２３は、投影用画像３１０の全体に対してエッジ抽出処理を施した画像である。ただし、ここでは、画像３２３のうち、ボケ位置（ボケマップ２９０にて示される）に対応する部分領域Ｑのみのエッジ抽出画像が補正画像３２０として生成される。当該補正画像３２０は、画像３２３の部分（部分領域）Ｑのみで構成され、当該部分Ｑ以外の領域を含まない。

【0094】

なお、補正画像３２０は、抽出エッジに対する太らせ処理により得られた新たなエッジで構成される画像であってもよい。より具体的には、元画像３１０から（エッジ抽出処理により）抽出されたエッジ（抽出エッジ）に対して更に太らせ処理が施され、当該太らせ処理により得られた新たなエッジで構成される画像が、補正画像３２０として生成されてもよい。換言すれば、エッジ抽出画像（補正画像３２０）におけるエッジは、元画像３１０から抽出されたエッジに対して太らせ処理を施して得られた新たなエッジであってもよい。

【0095】

また、補正画像３２０内のエッジ（元画像３１０から抽出されたエッジ等）上の画素（エッジ画素）の画素値としては、たとえば、元画像３１０内にて当該エッジに対応する位置の画素値（明るさ等）を増大（あるいは減少）してエッジ隣接部分とのコントラスト等を強調した値が用いられればよい。また、補正画像３２０内のエッジ以外の画素の画素値は、たとえば、ゼロ（あるいは透過指定値）に設定されればよい。

【0096】

次に、ステップＳ２２において、コントローラ３１は、投影用画像３１０と補正画像３２０との合成画像３３０を生成する。

【0097】

たとえば、「ボケ位置に対応する部分Ｑ」では元の画像３１０と補正画像３２０とが透過合成され、当該部分Ｑ以外の部分では元の画像３１０が維持されて、合成画像３３０が生成される。部分Ｑの透過合成においては、エッジ上の画素の合成後の画素値としてエッジ抽出画像（補正画像３２０）の値が用いられ、エッジ以外の画素の合成後の画素値として元画像３１０の画素値が用いられる。換言すれば、エッジ以外の部分が透過された状態で補正画像３２０が投影用画像３１０に対して合成されることにより、合成画像３３０が生成される。

【0098】

さらに、ステップＳ２２において、コントローラ３１は、プロジェクタ２０を用いて、合成画像３３０を投影面９０に投影する。

【0099】

図１３は、比較例に係る投影処理と上記実施形態に係る投影処理とを比較する図である。

【0100】

図１３の上段には、比較例に係る投影処理が示されている。具体的には、投影面９０に形成された投影画像３９０内の部分Ｑ（凹凸部９３に対応する部分）において、ボケが発生する様子が示されている。

【0101】

一方、図１３の下段には、上記実施形態に係る投影処理（上述のような補正処理を伴う投影処理）が示されている。当該投影処理では、投影用画像３１０と補正画像（エッジ抽出画像）３２０とが合成されて投影される（合成画像３３０が投影される）。この場合、投影面９０に形成された投影画像（見えている状態の画像）３４０においては、投影用画像３１０に対する部分的な補正処理（エッジ抽出処理）によって、凹凸部９３に対応する部分Ｑにおけるボケが抑制される。

【0102】

なお、ここでは、文字列を含む投影用画像３１０に対してエッジ抽出処理等が施されているが、これに限定されず、文字列を含まない投影用画像３１０（自然画像等）に対してエッジ抽出処理等が施されてもよい。

【0103】

また、鮮鋭化処理とエッジ抽出処理との一方ではなく、鮮鋭化処理とエッジ抽出処理との双方が施されても良い。たとえば、投影用画像３１０に対して鮮鋭化処理を施して鮮鋭化画像（シャープネス強調画像）を生成するとともに、当該鮮鋭化画像からエッジを抽出するエッジ抽出処理を施した画像が補正画像３２０として生成（取得）されてもよい。

【0104】

＜１－５．実施形態の効果＞
以上のように、上記実施形態によれば、基準投影画像２４０のボケ位置を示すボケマップ２９０が生成される。当該ボケマップ２９０には、投影面９０の部分的な凹凸に起因してボケが発生した位置（ボケ位置）が反映される。そして、投影用画像３１０のボケ位置に対応する部分Ｑに対して補正処理（鮮鋭化処理等）を施した補正画像３２０が当該ボケマップ２９０に基づいて生成され、当該補正画像３２０と投影用画像３１０とが合成されて投影される。ボケ位置に対応する部分Ｑに関して当該補正画像３２０が投影用画像３１０に対して合成されて投影されるので、ボケ位置に対応する部分Ｑでの解像感の低下を抑制することが可能である。したがって、投影面９０が部分的な凹凸を有する場合であっても、当該投影面９０にプロジェクタ２０によって投影される画像の解像感の低下を抑制することが可能である。

【0105】

特に、光学的な要因に限定されない様々な要因に起因するボケ（投影面の凹凸等に起因するボケ）を抑制して、投影画像の解像感の低下を抑制することが可能である。

【0106】

また、画像３２３（図１０および図１２参照）の全体が補正画像３２０として生成されるのではなく、投影用画像（元画像）３１０のうちボケ位置に対応する部分領域のみの鮮鋭化画像（あるいはエッジ抽出画像等）が補正画像３２０として生成される。すなわち、補正画像３２０は、投影用画像３１０のうちボケ位置に対応する部分のみで構成される。これによれば、投影用画像３１０の全体について補正画像が生成される場合に比べて、補正画像３２０の生成処理の負荷を抑制すること（ひいては補正画像３２０の生成時間を低減すること等）が可能である。ボケマップ２９０の全体に占めるボケ領域２９３の割合が小さい場合（ロッカー装置７０の前面７９の全体のうち把手部７３のみでボケが生じている場合等）、特に有用である。

【0107】

＜１－６．変形例等＞
＜投影用画像３１０等＞
上記実施形態における投影用画像３１０は、単一の（個別の）静止画像であってもよいが、これに限定されず、動画像を構成する各フレーム画像等であってもよい。換言すれば、投影用画像３１０は、投影用画像群４１０（投影用動画像あるいは投影用静止画像群）を構成する一連の複数の投影用画像のそれぞれであってもよい。

【0108】

投影用画像群４１０（投影用動画像等）を構成する一連の複数の投影用画像３１０が所定の時間間隔で順次に投影される場合、たとえば、投影用画像群４１０のうちの先頭の投影用画像３１０が投影される前に（事前に）ボケマップ２９０が生成されればよい。

【0109】

その場合、当該複数の投影用画像３１０のそれぞれに対する各補正画像３２０は、たとえば、投影用画像群４１０の投影開始前（先頭の投影用画像３１０の投影開始前）に（まとめて）予め生成されればよい。あるいは、当該各補正画像３２０は、投影用画像群４１０の投影期間内にリアルタイムで生成されてもよい。より詳細には、投影用画像群４１０を構成する第ｎフレーム画像（ｎ番目の投影用画像３１０）に対する補正画像３２０は、投影用画像群４１０の先頭フレーム画像の投影開始後且つ当該第ｎフレーム画像の投影直前までに生成されてもよい。

【0110】

＜ボケマップ２９０および補正画像３２０の別の生成タイミング等＞
また、ボケマップ２９０は、本来の投影用画像群４１０の投影前ではなく、プロジェクタ２０による投影用画像群４１０の投影期間内（詳細には、投影用画像群４１０の投影開始指令受付後、あるいは投影用画像群４１０の先頭フレーム画像の投影開始後）において、生成されてもよい。具体的には、投影用画像群４１０の投影期間内に基準画像２１０が投影面９０に投影され、当該基準画像２１０の投影により投影面９０に形成される基準投影画像２４０（投影期間内における基準投影画像）を用いてボケマップ２９０が生成されてもよい。

【0111】

より詳細には、投影用画像群４１０を構成する一連の複数の投影用画像３１０の投影タイミングの合間に（各投影用画像３１０の非投影時に）基準画像２１０が投影面９０に投影されてもよい。そして、当該基準画像２１０の投影により投影面９０に形成される基準投影画像２４０を撮影した撮影画像２５０に基づきボケマップ２９０が生成されてもよい。

【0112】

あるいは、投影用画像群４１０を構成する一連の複数の投影用画像３１０のうちの或る投影用画像３１０の投影に並行して（概ね同時に）基準画像２１０が投影面９０に投影されてもよい。そして、当該基準画像２１０の投影により投影面９０に形成される基準投影画像２４０等を用いてボケマップ２９０が生成されてもよい。たとえば、プロジェクタ２０によって或る投影用画像３１０が可視光を用いて投影されると同時に、非可視光発光部（不図示）によって可視光以外の光（プロジェクタ２０の投影光（投影画像３４０）の波長域とは異なる波長域の光（赤外光等））を用いて基準画像２１０が投影されてもよい。そして、当該基準画像２１０の投影により形成された基準投影画像２４０が赤外線カメラ等で撮影されて撮影画像２５０が生成され、当該撮影画像２５０に基づきボケマップ２９０が生成されてもよい。

【0113】

このようにプロジェクタ２０による投影用画像群４１０の投影期間内にボケマップ２９０が生成されることによれば、投影面９０の凹凸状態をリアルタイムで反映したボケマップ２９０が生成され得る。特に、投影面９０の凹凸状態が時々刻々と変化する状況に対して有用である。たとえば、ロッカー装置７０の複数の収納部７１のうち「非使用中」の収納部７１の扉７２が、「使用中」の収納部７１の扉７２よりも手前側に若干浮くように（完全には閉まらずに若干開いた状態で）意図的に構成されることがある。この場合において、各収納部７１の使用状態の変化（「使用中」から「非使用中」への変化等）に応じて発生するボケ（非使用中の扉７２の前面７２ｆに生じるボケ）を反映したボケマップ２９０がリアルタイムに生成され得る。あるいは、画像が建造物の壁面に投影される際に当該壁面の前に一時的に置かれた箱にも当該画像（詳細にはその一部）が投影される場合、当該箱に投影される画像のボケをも反映したボケマップ２９０がリアルタイムに生成され得る。また、店舗内での投影状況（プロジェクタ２０の投影範囲、投影角度、投影位置等）が変化する場合、当該投影状況の変化に伴うボケの分布状況の変化を反映したボケマップ２９０がリアルタイムに生成され得る。

【0114】

さらに、投影用画像群４１０の投影期間内に生成されたボケマップ２９０に基づいて、補正画像３２０が当該投影期間内に（リアルタイムで）生成されてもよい。具体的には、投影用画像群４１０の投影処理に並行して、投影用画像群４１０を構成する一連の複数の投影用画像３１０のそれぞれが投影される直前等において当該複数の投影用画像３１０のそれぞれについての補正画像３２０がリアルタイムで生成されてもよい。詳細には、投影用画像群４１０の一の投影用画像３１０についての補正画像３２０が、投影用画像群４１０の投影期間内且つ当該一の投影用画像３１０の投影前に生成されたボケマップ２９０に基づき、生成されてもよい。そして、当該投影期間内において、当該一の投影用画像３１０についての当該補正画像３２０と当該一の投影用画像３１０とが合成あるいは重畳されて投影面９０に投影されてもよい。

【0115】

これによれば、投影用画像群４１０の投影処理に対して並列的に補正画像３２０が生成される。それ故、投影用画像群４１０をリアルタイムで補正することが可能である。また、投影用画像群４１０の投影処理に対して並列的に（リアルタイムで）ボケマップ２９０が生成され且つ当該ボケマップ２９０に基づきリアルタイムで補正画像３２０が生成される。したがって、時々刻々と変化する投影面９０の凹凸状態に応じた補正画像３２０（リアルタイムで更新されるボケマップ２９０に基づく補正画像３２０）をリアルタイムで生成することが可能である。ひいては、投影面にプロジェクタによって投影される画像の解像感の低下をリアルタイムで抑制することが可能である。また、プロジェクタ２０の配置等が変更された直後の投影用画像群４１０の投影期間においても、ボケマップ２９０および補正画像３２０がリアルタイムで自動的に生成される。それ故、プロジェクタ２０の配置を変更するたびに、プロジェクタ２０の配置を変更するごとに、ユーザが調整モード（ボケマップ２９０の生成モード）への変更操作を逐一行うことを要しない。ユーザは、通常の投影動作を装置に実行させれば済む。

【0116】

また、投影用画像群４１０の投影期間内に生成されたボケマップ２９０に基づいて、補正画像３２０が当該投影期間内に生成される場合において、投影用画像３１０のうちボケ位置に対応する部分領域のみの鮮鋭化画像（あるいはエッジ抽出画像等）が補正画像３２０として生成されてもよい。これによれば、投影用画像３１０の全体について補正画像が生成される場合に比べて、補正画像３２０の生成処理の負荷を抑制すること（ひいては補正画像の生成時間を低減すること等）が可能である。特に、比較的低い処理能力を有するコントローラ３１においても、補正画像３２０をリアルタイムで生成することが可能である。

【0117】

＜２．第２実施形態＞
第２実施形態は、第１実施形態等の変形例である。以下では、第１実施形態との相違点を中心に説明する。

【0118】

上記第１実施形態においては、投影用画像３１０と補正画像３２０との両画像が合成されて投影面９０に投影されている。一方、この第２実施形態では、当該両画像が重畳されて投影される。より具体的には、投影用画像３１０と補正画像３２０とが別個のプロジェクタ２０で投影面９０に重畳投影される。

【0119】

図１５は、第２実施形態に係るプロジェクタシステム１（１Ｂとも称する）の機能ブロックを示す図である。図１の第１実施形態に係るプロジェクタシステム１Ａと比較すると判るように、図１５のプロジェクタシステム１Ｂは、さらに１台のプロジェクタ２０（すなわち合計２台のプロジェクタ２０（２０ａ，２０ｂ））を備えている。プロジェクタ２０ａとプロジェクタ２０ｂとは、投影面９０上の同じ位置（同じ範囲）に画像を投影することが可能である（図１７参照）。

【0120】

第２実施形態においては、図１６に示すように、２台のプロジェクタ２０ａ，２０ｂのうち、一方のプロジェクタ２０ａは、投影用画像（元画像）３１０を（そのまま）投影面９０に投影し、他方のプロジェクタ２０ｂは、補正画像３２０を投影面９０に投影する。

【0121】

補正画像３２０が、ボケ位置に対応する部分（部分領域）Ｑのみで構成される場合には、投影面９０上において当該補正画像３２０が投影用画像３１０の部分Ｑに重畳するように投影される。換言すれば、投影用画像３１０と同じサイズの透明画像内の部分Ｑに元の補正画像３２０を配置した新たな補正画像３２０が生成され、当該新たな補正画像３２０が投影用画像３１０に対して（投影用画像３１０と同じ位置に）重畳投影される。

【0122】

このような処理によっても第１実施形態と同様の効果を得ることが可能である。また、第２実施形態においては補正画像３２０と投影用画像３１０とを合成する合成処理を要しない。それ故、処理負荷の増大が抑制される。

【0123】

なお、補正画像３２０は、図１６中段の補正画像３２０ｂとして示されるように、ボケ位置に対応する部分（部分領域）Ｑ以外をも含んで構成されてもよい。具体的には、補正画像３２０ｂの部分Ｑは、投影用画像３１０に対して鮮鋭化処理（および／またはエッジ抽出処理）を施した後の画素で構成され、補正画像３２０ｂの部分Ｑ以外の部分は、投影用画像３１０の画素自体で構成されてもよい。そして、補正画像３２０ｂ内の部分Ｑと投影用画像３１０の部分Ｑとが投影面９０上にて同じ位置に重畳されるように両画像３１０，３２０が投影されてもよい。

【0124】

＜３．第３実施形態＞
第３実施形態は、第２実施形態等の変形例である。以下では、第２実施形態との相違点を中心に説明する。

【0125】

第３実施形態に係るプロジェクタシステム１（１Ｃとも称する）は、第１実施形態に係るプロジェクタシステム１Ａと同様のハードウエア構成を有する。第３実施形態においては、複数ではなく単一のプロジェクタ２０（２０ａ）が用いられる点等において、第１実施形態に類似し、第２実施形態と相違する。また、第３実施形態では、投影用画像３１０と補正画像３２０とが同時に重畳して投影されるのではなく、投影用画像３１０と補正画像３２０とが時分割で重畳して投影される。この点においても、第２実施形態等と相違する。

【0126】

図１８は、投影用画像３１０と補正画像３２０とが時分割で重畳して投影される様子を示す概念図である。なお、補正画像３２０は、ボケ位置に対応する部分（部分領域）Ｑのみで構成されるものでもよく、当該部分Ｑ以外をも含むもの（補正画像３２０ｂ）でもよい。

【0127】

たとえば、静止画像である投影用画像３１０と当該投影用画像３１０の補正画像３２０とが微少期間ΔＴ（たとえば１／６０秒）ずつ交互に投影面９０に投影される。詳細には、ｎ番目（ｎ組目）の微少期間ΔＴの投影用画像３１０（第ｎフレーム画像３１０ｎとも称する（ｎは自然数））とｎ番目（ｎ組目）の微少期間ΔＴの補正画像３２０（第ｎフレーム画像３２０ｎとも称する）とが微少期間ΔＴ（たとえば１／６０秒）ずつ投影される処理が、値ｎをインクリメントしつつ繰り返し実行される。換言すれば、投影用画像３１０と補正画像３２０とが「１：１」の比率にて時分割で重畳される。

【0128】

なお、これに限定されず、第ｎフレーム画像３１０ｎの微少投影期間ΔＴ（ΔＴ１とも称する）と第ｎフレーム画像３２０ｎの微少投影期間ΔＴ（ΔＴ２とも称する）とは、異なる値であってもよい。すなわち、ΔＴ１＞ΔＴ２、あるいは、ΔＴ１＜ΔＴ２であってもよい。謂わば、投影用画像３１０と補正画像３２０とが、「１：１」以外の所定比率（たとえば「２：１」、「３：１」等）にて時分割で重畳されて投影されてもよい。換言すれば、複数のフレーム画像（投影用画像３１０）が順次に投影される際に、当該複数のフレーム画像の投影の合間を縫って、所定枚数おきに補正画像３２０が投影されてもよい。

【0129】

また、投影用画像群４１０（投影用の動画像）を構成する一連の複数の投影用画像３１０が順次に投影される際にも第３実施形態に係る思想を適用することが可能である。たとえば、動画像の第ｎフレーム画像３１０ｎ（ｎは自然数）と当該第ｎフレーム画像３１０
ｎに対する補正画像３２０ｎとが微少期間ΔＴ（たとえば１／６０秒）ずつ投影される処理が、値ｎをインクリメントしつつ繰り返し実行されればよい。あるいは、動画像を構成する当該複数の投影用画像３１０のうち所定枚数おきの投影用画像３１０に対してのみ補正画像３２０が投影されてもよい。

【0130】

この第３実施形態によれば、第２実施形態と同様の効果を得ることが可能である。特に、第３実施形態においても、補正画像３２０と投影用画像３１０とを合成する合成処理を要しない。それ故、処理負荷の増大が抑制される。また、第３実施形態のプロジェクタシステム１Ｃは、単一のプロジェクタ２０を用いて構成される。複数のプロジェクタ２０を要しないので、コストの低減を図ることが可能である。

【0131】

＜４．その他＞
以上、この発明の実施の形態について説明したが、この発明は上記説明した内容のものに限定されるものではない。以下のような改変等、様々な改変が可能である。

【0132】

＜ボケマップ２９０等＞
図９は、様々なボケマップ２９０を示す図である。

【0133】

上記各実施形態等では、ボケマップ２９０において、ボケが発生している領域（ボケ領域）２９３が白色領域（非黒色領域）で示され、ボケが発生していない領域（非ボケ領域）２９２が黒色領域で示されている。このように、各部分領域が、ボケの発生の有無に応じて２つに分類されている。特に、上記のボケマップ２９０においては、ボケの程度（ボケ量の多寡）に関する情報は削除されている。謂わば、ボケマップ２９０は、投影面９０における各ボケ領域２９３の位置のみを示している。

【0134】

しかしながら、これに限定されず、ボケマップ２９０は、投影面における各ボケ領域２９３の位置のみならず、当該各ボケ領域のボケ量（ボケ量の分布状況）をも示すマップであってもよい。具体的には、基準投影画像２４０における各部分領域のボケ量（ボケの程度）もがボケマップ２９０内に保存されてもよい。図９の２段目～４段目のボケマップ２９０では、各部分領域のボケ量（ボケの程度）もがボケマップ２９０内に保存される態様が示されている。

【0135】

図９の２段目～４段目のボケマップ２９０においては、値「０」以外の様々なボケ量を部分領域ごとに有するボケ領域２９３は、部分領域ごとのボケ量に応じた異なる濃度（濃淡）で示されている。詳細には、当該ボケ領域２９３は、そのボケ量が「０」に近いときには黒に近い色（暗い灰色等）で示され、そのボケ量（ボケの程度）が大きくなるにつれて徐々に白色に近づく色（明るい灰色あるいは白色等）で示されている。なお、ボケ量「０」を有する非ボケ領域２９２は、上記と同様に黒色領域として示されている。

【0136】

図９の上から２段目のボケマップ２９０は、２つのボケ領域（非黒色領域）２９３を検出した状況を示している。ただし、図９の上から２段目のボケマップ２９０内の２つの非黒色領域２９３のうち、灰色で示される一方の領域は、白色で示される他方の領域よりもボケの程度が小さな領域である。たとえば、投影面９０にて２つの凹凸部９３（詳細には、２つの凸部９３ａ（図２参照））が存在する場合において、２つの凹凸部に対応する各領域で、その程度が異なるボケが生じている状況が示されている。当該２つの凹凸部９３（９３ａ）は、平面視にて正方形状を有し且つ断面視にて（細長い）矩形形状をそれぞれ有している。特に、当該２つの凹凸部９３の突出の程度（基準位置Ｐ１（図２参照）からの高さ）が互いに異なっている。その結果、２つの凹凸部９３におけるボケの程度が互いに異なる。ボケマップ２９０においては、２つの凹凸部９３の互いに異なるボケの程度を示す別異の値が凹凸部９３ごとに（詳細には部分領域ごとに）保存される。図９の上から２段目のボケマップ２９０においては、比較的低い突出部を有する矩形領域が灰色で示され、比較的高い突出部を有する矩形領域が白色で示されている。

【0137】

図９の上から３段目のボケマップ２９０は、投影面９０における２つの凹凸部９３（詳細には、凸部９３ｂ，９３ｃ（図２参照））に対応する各領域内にて、その程度が徐々に変化するボケが生じている状況を示している。なお、図示の都合上、きめ細やかなグラデーションで色が変化するように描かれているが、実際には部分領域ごとに段階的に色が変化する。

【0138】

たとえば、凸部９３ｂは、略凸曲面形状を有しており、凸部９３ｂの中央部から周縁部にかけて突出の程度が徐々に小さくなっている。当該凸部９３ｂに起因するボケは、図９の上から３段目の右側のボケ領域２９３に現れている。凸部９３ｂにおけるボケの程度は、略円形部分の中心部で最も大きく、当該中心部から周縁部中心にかけて徐々に小さくなる。

【0139】

また、凸部９３ｃは、平面視にて正方形状を有し且つ断面視にて略Ｖ字型形状を有している。凸部９３ｃの突出の程度は、凸部９３ｃの中央部から上端部にかけて徐々に小さくなるとともに、凸部９３ｃの中央部から下端部にかけて徐々に小さくなる。当該凸部９３ｃに起因するボケは、図９の上から３段目の左上側のボケ領域２９３に現れている。凸部９３ｃにおけるボケの程度は、凸部９３ｃの中央部で最も大きく（白色に近い色で表示）、当該中央部から離れるにつれて徐々に小さくなる（黒色に近い色で表示）。

【0140】

凸部９３ｂおよび凸部９３ｃに関するボケの分布（ボケ位置およびボケ量の分布）がボケマップ２９０に保存される。

【0141】

＜補正画像３２０の補正度合い＞
さらに、補正画像３２０を生成する際の補正処理（鮮鋭化処理等）の補正度合い（シャープネスの強調度合い（鮮鋭化の度合い）、あるいは抽出エッジの明度等）が、部分ごとのボケ量（各ボケ位置におけるボケ量）に応じて変更されてもよい。換言すれば、基準投影画像２４０内の各ボケ位置におけるボケ量に応じて、補正画像３２０内の各ボケ位置に対応する部分の補正度合いが変更されてもよい。より詳細には、比較的大きなボケが発生している部分には、比較的強いシャープネス強調補正等（比較的小さなボケが発生している部分よりも強い補正処理）が施されればよい。たとえば、図９の上から２段目、３段目（および４段目（後述））の各ボケマップ２９０の部分領域ごとのボケ量に応じて、補正画像３２０内の各ボケ位置に対応する部分の補正度合いが変更されてもよい。

【0142】

＜凹凸部９３を有しない投影面９０等＞
また、上記各実施形態等においては、凹凸部９３を有する投影面９０が例示されているが、これに限定されない。

【0143】

たとえば、図１９および図９の上から４段目に示すように、投影面９０自体は平面である（凹凸部９３を有しない）ものの投影面９０の傾斜角度θの影響により投影面９０内にて部分的にボケが発生する場合にも、本発明の思想を適用することが可能である。傾斜角度θは、投影面９０とプロジェクタ２０の光軸Ｌに垂直な面とがなす角度である。

【0144】

詳細には、当該傾斜角度θが一定程度以上である場合（図１９参照）等において、（レンズ構成等を考慮した別途の補正を行っても補正しきれずに）投影面９０の所定方向における一方端と他方端との少なくとも一方付近において、ボケが残る（発生する）ことがある。図９の上から４段目（最下段）のボケマップ２９０は、上下方向の中央部においては、ボケが発生しておらず、上端付近と下端付近との双方においてボケが発生している状況を示している。また、投影面９０の上端に近付くにつれてボケの程度が徐々に大きくなっており（徐々に白く表示されており）、且つ、投影面９０の下端に近付くにつれてボケの程度が徐々に大きくなっている（徐々に白く表示されている）。

【0145】

このような場合においても本発明を適用し、ボケマップ２９０を用いた上述のような処理を行うことによって、当該ボケに起因する解像感の低下を抑制することが可能である。

【0146】

＜補正画像３２０等＞
また、上記各実施形態等においては、補正画像３２０は、主に、投影用画像３１０の全体のうちボケ位置に対応する部分についてのみ（端的に言えば、投影用画像３１０の一部領域についてのみ）生成されているが、これに限定されない。また、補正画像３２０は、ボケ位置に対応する部分（部分領域）がボケマップ２９０に基づいて特定された上で生成されることを要さず、結果的に、ボケ位置に対応する部分に対して補正処理が施されて補正画像３２０が生成されてもよい。

【0147】

たとえば、投影用画像３１０の全体に亘る範囲の補正画像３２０が生成されてもよい。すなわち、補正画像３２０は投影用画像３１０の全領域について生成されてもよい。具体的には、当該補正画像３２０は、ボケマップ２９０の部分領域ごとのボケ量に応じた補正強度で元の投影用画像３１０に対して所定の補正処理（鮮鋭化処理およびエッジ抽出補正等）が施されて生成されてもよい。詳細には、ボケマップ２９０の非ボケ位置の部分領域の画素値は「ゼロ」であり、補正処理における補正強度は「ゼロ」である。すなわち、元の投影用画像３１０における当該非ボケ位置の対応領域（非ボケ位置対応領域）に対しては補正処理（鮮鋭化処理等）が実質的に施されない。一方、ボケマップ２９０のボケ位置の部分領域の画素値はボケ量（たとえば「１」～「１００」）を有している。元の投影用画像３１０における当該ボケ位置の対応領域（ボケ位置対応領域）に対しては、当該対応領域でのボケ量に応じた強度（たとえば「１」～「１００」）で元の投影用画像３１０に対して所定の補正処理（鮮鋭化処理およびエッジ抽出補正等）が施される。その結果、ボケ位置対応領域においてのみ元画像３１０に対して補正処理（鮮鋭化処理等）が施され、非ボケ位置対応領域においては補正処理（鮮鋭化処理等）が実質的に施されずそのままの状態の元画像３１０が維持される。このように、結果的に、ボケ位置に対応する部分に対して補正処理が施されて投影用画像３１０の全域に亘る補正画像３２０が生成されてもよい。

【0148】

また、上記各実施形態等において、補正画像３２０は必ずしも投影用画像３１０と同じ解像度を有することを要しない。

【0149】

たとえば、補正画像３２０（の全域）の解像度は、投影用画像３１０（の全域）の解像度「１９８０×１０８０画素」よりも低い解像度「９６０×５４０画素」であってもよい。その上で、両画像３１０，３２０は、当該両画像の投影範囲が同じになるように、合成あるいは重畳して投影されればよい。

【0150】

これによれば、比較的低い解像度の補正画像３２０を生成すれば済むので、補正画像３２０の生成処理の負荷が軽減される。その結果、比較的低スペックのコントローラによっても補正画像３２０をリアルタイムで生成することが可能になる。このような改変は、第２実施形態および第３実施形態（補正画像３２０が投影用画像３１０に対して（合成ではなく）重畳されて投影される態様）において特に有用である。たとえば、第２実施形態のプロジェクタ２０ｂで表示される補正画像３２０が比較的低解像度の画像として高速に生成され得る。

【0151】

また特に、補正画像３２０としてエッジ抽出画像が生成される場合、低解像度であってもエッジが強調された部分画像が補正画像３２０として投影用画像３１０に対して合成あるいは重畳される。それ故、合成ないし重畳して投影された画像において、解像感の低下が適切に抑制され得る。

【0152】

また、上記各実施形態等において、投影用画像３１０の全領域のうち一部の領域（マスク領域とも称する）については補正画像３２０（および／またはボケマップ２９０）は常に生成されないように改変されてもよい。たとえば、２次元コードの表示領域が当該マスク領域として取り扱われ、２次元コードの表示領域にボケが発生していても当該表示領域には補正処理（鮮鋭化処理等）が施されないようにしてもよい。

【符号の説明】

【0153】

１ プロジェクタシステム
２０，２０ａ，２０ｂ プロジェクタ
３０ 情報処理装置
５０ カメラ
７０ ロッカー装置
７１ 収納部
７２ 扉
７３ 把手部
９０ 投影面
９３ 凹凸部
２１０ 基準画像
２４０ 基準投影画像
２５０ 撮影画像
２９０ ボケマップ
３１０ 投影用画像
３２０ 補正画像
３４０ 投影画像

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】