特許 7142140 投影装置とその制御方法及び制御プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2022-09-14

(45)【発行日】2022-09-26

(54)【発明の名称】投影装置とその制御方法及び制御プログラム

(51)【国際特許分類】

   H04N 9/31 20060101AFI20220915BHJP

   H04N 5/74 20060101ALI20220915BHJP

   G03B 21/00 20060101ALI20220915BHJP

【ＦＩ】

H04N9/31 820

H04N5/74 D

G03B21/00 D

【請求項の数】 16

(21)【出願番号】P 2021501697

(86)(22)【出願日】2020-01-16

(86)【国際出願番号】 JP2020001347

(87)【国際公開番号】W WO2020170662

(87)【国際公開日】2020-08-27

【審査請求日】2021-07-30

(31)【優先権主張番号】P 2019027524

(32)【優先日】2019-02-19

(33)【優先権主張国・地域又は機関】JP

(73)【特許権者】

【識別番号】306037311

【氏名又は名称】富士フイルム株式会社

(74)【代理人】

【識別番号】110002505

【氏名又は名称】特許業務法人航栄特許事務所

(72)【発明者】

【氏名】井上 和紀

【審査官】益戸 宏

(56)【参考文献】

【文献】特開２０１５－２１６４８１（ＪＰ，Ａ）

【文献】特開２００６－２３５１５８（ＪＰ，Ａ）

【文献】特開２０１３－６２７６０（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ９／３１

Ｈ０４Ｎ ５／７４

Ｇ０３Ｂ ２１／００

Ｇ０９Ｇ ５／００

(57)【特許請求の範囲】

【請求項1】

表示部からの画像を投影対象物に投影する光学系と、
前記光学系を通して前記光学系による前記画像の投影範囲を撮像する撮像素子と、
前記投影対象物を照明する照明部と、
前記画像を前記投影対象物に非投影の状態且つ前記照明部によって前記投影対象物を照明させた状態にて前記撮像素子により前記投影対象物を撮像させる制御を少なくとも行う撮像制御部と、
前記制御によって前記撮像素子から出力された第一の撮像画像と、記憶部に予め記憶されている情報とに基づいて、前記投影対象物が前記照明部によって非照明の状態且つテスト画像を前記投影対象物に投影した状態にて前記撮像素子により前記投影対象物を撮像して得られる第二の撮像画像を推定する画像推定部と、
前記テスト画像と前記第二の撮像画像との特性差に基づいて、前記投影対象物に投影すべき前記画像の色又は輝度の少なくとも一方の補正を行うための補正データを生成する補正データ生成部と、を備える投影装置。

【請求項2】

請求項１記載の投影装置であって、
前記記憶部に記憶された前記情報は、予め決められた基準投影対象物を前記照明部によって照明した状態且つ前記画像が前記基準投影対象物に非投影の状態にて前記撮像素子により前記基準投影対象物を撮像して得られる第三の撮像画像と、前記基準投影対象物が前記照明部によって非照明の状態且つ前記基準投影対象物に前記テスト画像が投影された状態にて前記撮像素子により前記基準投影対象物を撮像して得られる第四の撮像画像とに基づいて生成されたものである投影装置。

【請求項3】

請求項２記載の投影装置であって、
前記情報は、前記第三の撮像画像と前記第四の撮像画像の比である投影装置。

【請求項4】

請求項１から３のいずれか１項記載の投影装置であって、
前記撮像制御部は、前記制御を前記照明部からの照明光の明るさを変えて複数回行い、
前記画像推定部は、前記複数回の前記制御によって前記撮像素子から出力された複数の前記第一の撮像画像と、前記複数回の前記制御における前記照明光の明るさと、前記情報と、に基づいて前記第二の撮像画像を推定する投影装置。

【請求項5】

請求項４記載の投影装置であって、
前記画像推定部は、前記複数の第一の撮像画像と、前記複数回の前記制御における前記照明光の明るさとに基づいて、前記投影対象物からの反射光量と、前記投影装置の置かれた場所の環境光量とを算出し、前記反射光量を前記情報によって補正した値に、前記環境光量を加算して前記第二の撮像画像を推定する投影装置。

【請求項6】

請求項５記載の投影装置であって、
前記撮像制御部は、前記複数回の前記制御として、第一制御、第二制御、及び第三制御の３回の前記制御を行い、
前記画像推定部は、前記第一制御と前記第二制御によって前記撮像素子から出力された２つの前記第一の撮像画像と、前記第一制御と前記第二制御における前記照明光の明るさとに基づいて、第一の前記反射光量と第一の前記環境光量を算出し、前記第二制御と前記第三制御によって前記撮像素子から出力された２つの前記第一の撮像画像と、前記第二制御と前記第三制御における前記照明光の明るさとに基づいて、第二の前記反射光量と第二の前記環境光量を算出し、前記第一の反射光量と前記第二の反射光量との第一の差と、前記第一の環境光量と前記第二の環境光量との第二の差のいずれかが閾値を超える場合には、前記第二の撮像画像の推定を不可とする投影装置。

【請求項7】

請求項６記載の投影装置であって、
前記画像推定部は、前記第二の撮像画像の推定を不可とした場合には、前記照明光の明るさを変更した前記３回の前記制御を再度行わせる投影装置。

【請求項8】

請求項１から７のいずれか１項記載の投影装置であって、
前記情報を生成して前記記憶部に記憶するモードを有する投影装置。

【請求項9】

表示部からの画像を投影対象物に投影する光学系と、前記光学系を通して前記光学系による前記画像の投影範囲を撮像する撮像素子と、前記投影対象物を照明する照明部と、を有する投影装置の制御方法であって、
前記画像を前記投影対象物に非投影の状態且つ前記照明部によって前記投影対象物を照明させた状態にて前記撮像素子により前記投影対象物を撮像させる制御を少なくとも行う撮像制御ステップと、
前記制御によって前記撮像素子から出力された第一の撮像画像と、記憶部に予め記憶されている情報とに基づいて、前記投影対象物が前記照明部によって非照明の状態且つテスト画像を前記投影対象物に投影した状態にて前記撮像素子により前記投影対象物を撮像して得られる第二の撮像画像を推定する画像推定ステップと、
前記テスト画像と前記第二の撮像画像との特性差に基づいて、前記投影対象物に投影すべき前記画像の色又は輝度の少なくとも一方の補正を行うための補正データを生成する補正データ生成ステップと、を備える投影装置の制御方法。

【請求項10】

請求項９記載の投影装置の制御方法であって、
前記記憶部に記憶された前記情報は、予め決められた基準投影対象物を前記照明部によって照明した状態且つ前記画像が前記基準投影対象物に非投影の状態にて前記撮像素子により前記基準投影対象物を撮像して得られる第三の撮像画像と、前記基準投影対象物が前記照明部によって非照明の状態且つ前記基準投影対象物に前記テスト画像が投影された状態にて前記撮像素子により前記基準投影対象物を撮像して得られる第四の撮像画像とに基づいて生成されたものである投影装置の制御方法。

【請求項11】

請求項１０記載の投影装置の制御方法であって、
前記情報は、前記第三の撮像画像と前記第四の撮像画像の比である投影装置の制御方法。

【請求項12】

請求項９から１１のいずれか１項記載の投影装置の制御方法であって、
前記撮像制御ステップは、前記制御を前記照明部からの照明光の明るさを変えて複数回行い、
前記画像推定ステップは、前記複数回の前記制御によって前記撮像素子から出力された複数の前記第一の撮像画像と、前記複数回の前記制御における前記照明光の明るさと、前記情報と、に基づいて前記第二の撮像画像を推定する投影装置の制御方法。

【請求項13】

請求項１２記載の投影装置の制御方法であって、
前記画像推定ステップは、前記複数の第一の撮像画像と、前記複数回の前記制御における前記照明光の明るさとに基づいて、前記投影対象物からの反射光量と、前記投影装置の置かれた場所の環境光量とを算出し、前記反射光量を前記情報によって補正した値に、前記環境光量を加算して前記第二の撮像画像を推定する投影装置の制御方法。

【請求項14】

請求項１３記載の投影装置の制御方法であって、
前記撮像制御ステップは、前記複数回の前記制御として、第一制御、第二制御、及び第三制御の３回の前記制御を行い、
前記画像推定ステップは、前記第一制御と前記第二制御によって前記撮像素子から出力された２つの前記第一の撮像画像と、前記第一制御と前記第二制御における前記照明光の明るさとに基づいて、第一の前記反射光量と第一の前記環境光量を算出し、前記第二制御と前記第三制御によって前記撮像素子から出力された２つの前記第一の撮像画像と、前記第二制御と前記第三制御における前記照明光の明るさとに基づいて、第二の前記反射光量と第二の前記環境光量を算出し、前記第一の反射光量と前記第二の反射光量との第一の差と、前記第一の環境光量と前記第二の環境光量との第二の差のいずれかが閾値を超える場合には、前記第二の撮像画像の推定を不可とする投影装置の制御方法。

【請求項15】

請求項１４記載の投影装置の制御方法であって、
前記画像推定ステップは、前記第二の撮像画像の推定を不可とした場合には、前記照明光の明るさを変更した前記３回の前記制御を再度行わせる投影装置の制御方法。

【請求項16】

表示部からの画像を投影対象物に投影する光学系と、前記光学系を通して前記光学系による前記画像の投影範囲を撮像する撮像素子と、前記投影対象物を照明する照明部と、を有する投影装置の制御プログラムであって、
前記画像を前記投影対象物に非投影の状態且つ前記照明部によって前記投影対象物を照明させた状態にて前記撮像素子により前記投影対象物を撮像させる制御を少なくとも行う撮像制御ステップと、
前記制御によって前記撮像素子から出力された第一の撮像画像と、記憶部に予め記憶されている情報とに基づいて、前記投影対象物が前記照明部によって非照明の状態且つテスト画像を前記投影対象物に投影した状態にて前記撮像素子により前記投影対象物を撮像して得られる第二の撮像画像を推定する画像推定ステップと、
前記テスト画像と前記第二の撮像画像との特性差に基づいて、前記投影対象物に投影すべき前記画像の色又は輝度の少なくとも一方の補正を行うための補正データを生成する補正データ生成ステップと、をコンピュータに実行させるための投影装置の制御プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、投影装置とその制御方法及び制御プログラムに関する。

【背景技術】

【0002】

撮像装置と投影装置とを組み合わせたシステムが提案されている。例えば、特許文献１には、投影部からの光を透過してスクリーンに導き、且つスクリーンからの光を撮像部に導くハーフミラーと、このハーフミラーと投影部の間に配置されたレンズと、このハーフミラーと撮像部の間に配置されたレンズと、を有するプロジェクタが記載されている。

【0003】

特許文献２には、投影ユニットと、投影ユニットから光が投影される投影面を撮像するカラー撮像素子と、を同一筐体内に備えるプロジェクタが記載されている。このプロジェクタでは、カラー撮像素子によって投影面を撮像して得られる撮像画像を複数の領域に分割し、その領域毎の画像に基づいてその領域に対応する投影面の色を検出し、投影すべき画像の色補正を行うことが行われている。

【先行技術文献】

【特許文献】

【0004】

【文献】日本国特開２０１６－１４９６１８号公報

【文献】日本国特開２００６－３４９７９２号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

特許文献２に記載されているように、投影面の状態に応じて投影像の補正を行う場合、投影面の状態を検出するためには、白色画像等の基準となる画像を投影面に投影した状態にて、その投影面の撮像を行う必要がある。しかし、特許文献１に記載されているような撮像と投影とを共通の光学系を用いて行うシステムにおいては、投影面に画像を投影している状態では、光源からの強い光が光学系を通る状態となる。この状態において投影面を撮像すると、投影用の強い光が撮像素子に混入し、撮像画像にゴーストが発生する可能性がある。撮像画像にゴーストが発生していると、基準となる画像が投影された投影面の状態を精度よく認識することができなくなり、投影像の補正を高精度に行うことができなくなる。

【0006】

本発明は、上記事情に鑑みてなされたものであり、撮像画像のゴーストの影響を受けることなく投影面に合わせた投影像の補正を行うことのできる投影装置とその制御方法及び制御プログラムを提供することを目的とする。

【課題を解決するための手段】

【0007】

本発明の投影装置は、表示部からの画像を投影対象物に投影する光学系と、上記光学系を通して上記光学系による上記画像の投影範囲を撮像する撮像素子と、上記投影対象物を照明する照明部と、上記画像を上記投影対象物に非投影の状態且つ上記照明部によって上記投影対象物を照明させた状態にて上記撮像素子により上記投影対象物を撮像させる制御を少なくとも行う撮像制御部と、上記制御によって上記撮像素子から出力された第一の撮像画像と、記憶部に予め記憶されている情報とに基づいて、上記投影対象物が上記照明部によって非照明の状態且つテスト画像を上記投影対象物に投影した状態にて上記撮像素子により上記投影対象物を撮像して得られる第二の撮像画像を推定する画像推定部と、上記テスト画像と上記第二の撮像画像との特性差に基づいて、上記投影対象物に投影すべき上記画像の色又は輝度の少なくとも一方の補正を行うための補正データを生成する補正データ生成部と、を備えるものである。

【0008】

本発明の投影装置の制御方法は、表示部からの画像を投影対象物に投影する光学系と、上記光学系を通して上記光学系による上記画像の投影範囲を撮像する撮像素子と、上記投影対象物を照明する照明部と、を有する投影装置の制御方法であって、上記画像を上記投影対象物に非投影の状態且つ上記照明部によって上記投影対象物を照明させた状態にて上記撮像素子により上記投影対象物を撮像させる制御を少なくとも行う撮像制御ステップと、上記制御によって上記撮像素子から出力された第一の撮像画像と、記憶部に予め記憶されている情報とに基づいて、上記投影対象物が上記照明部によって非照明の状態且つテスト画像を上記投影対象物に投影した状態にて上記撮像素子により上記投影対象物を撮像して得られる第二の撮像画像を推定する画像推定ステップと、上記テスト画像と上記第二の撮像画像との特性差に基づいて、上記投影対象物に投影すべき上記画像の色又は輝度の少なくとも一方の補正を行うための補正データを生成する補正データ生成ステップと、を備えるものである。

【0009】

本発明の投影装置の制御プログラムは、表示部からの画像を投影対象物に投影する光学系と、上記光学系を通して上記光学系による上記画像の投影範囲を撮像する撮像素子と、上記投影対象物を照明する照明部と、を有する投影装置の制御プログラムであって、上記画像を上記投影対象物に非投影の状態且つ上記照明部によって上記投影対象物を照明させた状態にて上記撮像素子により上記投影対象物を撮像させる制御を少なくとも行う撮像制御ステップと、上記制御によって上記撮像素子から出力された第一の撮像画像と、記憶部に予め記憶されている情報とに基づいて、上記投影対象物が上記照明部によって非照明の状態且つテスト画像を上記投影対象物に投影した状態にて上記撮像素子により上記投影対象物を撮像して得られる第二の撮像画像を推定する画像推定ステップと、上記テスト画像と上記第二の撮像画像との特性差に基づいて、上記投影対象物に投影すべき上記画像の色又は輝度の少なくとも一方の補正を行うための補正データを生成する補正データ生成ステップと、をコンピュータに実行させるためのものである。

【発明の効果】

【0010】

本発明によれば、撮像画像のゴーストの影響を受けることなく投影面に合わせた投影像の補正を行うことのできる投影装置とその制御方法及び制御プログラムを提供することができる。

【図面の簡単な説明】

【0011】

【図1】本発明の投影装置の一実施形態であるプロジェクタ１００の外観構成を示す模式図である。

【図2】図１に示すプロジェクタ１００の内部構成を示す模式図である。

【図3】図２に示す表示部１の構成例を示す模式図である。

【図4】図３に示すシステム制御部８の機能ブロック図である。

【図5】補正係数の生成処理を説明するためのフローチャートである。

【図6】画像推定部８２による第二の撮像画像の推定処理を説明するためのフローチャートである。

【図7】画像推定部８２による第二の撮像画像の推定処理の変形例を説明するためのフローチャートである。

【発明を実施するための形態】

【0012】

図１は、本発明の投影装置の一実施形態であるプロジェクタ１００の外観構成を示す模式図である。プロジェクタ１００は、本体部１００Ａと、本体部１００Ａによって支持された光学ユニット１００Ｂと、を備える。光学ユニット１００Ｂは、本体部１００Ａに着脱可能に構成されていてもよい。

【0013】

図２は、図１に示すプロジェクタ１００の内部構成を示す模式図である。図３は、図２に示す表示部１の構成例を示す模式図である。プロジェクタ１００は、投影対象物の１つであるスクリーンＳＣに画像を投影すると共に、スクリーンＳＣにおける画像が投影される範囲である投影範囲を少なくとも撮像可能に構成されている。

【0014】

図２に示すように、プロジェクタ１００は、表示部１と、投影光学系２と、光学系を構成する共通光学系３と、光学部材４と、撮像光学系５と、撮像素子６と、照明部７と、システム制御部８と、を備える。表示部１及びシステム制御部８は、例えば本体部１００Ａに収容されている。投影光学系２、共通光学系３、光学部材４、撮像光学系５、及び撮像素子６は例えば光学ユニット１００Ｂに収容されている。

【0015】

表示部１は、入力される画像データに基づいて投影用の画像を表示するものである。図３に示すように、表示部１は、光源ユニット４０と、光変調素子４４と、を備える。

【0016】

光源ユニット４０は、白色光を出射する光源４１と、カラーホイール４２と、照明光学系４３と、を備える。光源４１は、レーザ又はＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）等の発光素子を含んで構成される。カラーホイール４２は、光源４１と照明光学系４３の間に配置されている。カラーホイール４２は、円板状の部材であり、その周方向に沿って、赤色光を透過するＲフィルタ、緑色光を透過するＧフィルタ、及び青色光を透過するＢフィルタが設けられている。カラーホイール４２は軸周りに回転され、光源４１から出射される白色光を時分割にて赤色光、緑色光、及び青色光に分光して照明光学系４３に導く。照明光学系４３から出射された光は光変調素子４４に入射される。

【0017】

光変調素子４４は、照明光学系４３から出射された光を画像データに基づいて空間変調し、空間変調した光を投影光学系２（図２参照）に出射する。

【0018】

図３に示す表示部１は、光変調素子４４としてＤＭＤ（Ｄｉｇｉｔａｌ Ｍｉｃｒｏｍｉｒｒｏｒ Ｄｅｖｉｃｅ）を用いた例であるが、光変調素子４４としては、例えば、ＬＣＯＳ（Ｌｉｑｕｉｄ ｃｒｙｓｔａｌ ｏｎ ｓｉｌｉｃｏｎ）、ＭＥＭＳ（Ｍｉｃｒｏ Ｅｌｅｃｔｒｏ Ｍｅｃｈａｎｉｃａｌ Ｓｙｓｔｅｍｓ）素子、又は液晶表示素子等を用いることも可能である。

【0019】

表示部１は、自発光型の有機ＥＬ（ｅｌｅｃｔｒｏ－ｌｕｍｉｎｅｓｃｅｎｃｅ）表示素子を用いて画像を表示し、表示した画像を投影光学系２に入射させるものであってもよい。また、レーザ光を走査することで画像の表示を行うものを用いてもよい。

【0020】

投影光学系２は、表示部１からの光が入射されるものであり、少なくとも１つのレンズを含む例えばリレー光学系によって構成されている。投影光学系２を通過した光は光学部材４に入射され、光学部材４にて反射されて共通光学系３に入射される。

【0021】

共通光学系３は、投影光学系２を通過した光をスクリーンＳＣに投影し、且つ、スクリーンＳＣ側の被写体を結像させるものであり、例えばリレー光学系によって構成されている。

【0022】

図１の例では、共通光学系３は、少なくとも１つのレンズを含むレンズ群３１と、光学部材３２と、少なくとも１つのレンズを含むレンズ群３３と、少なくとも１つのレンズを含むレンズ群３４と、を備える。レンズ群３１、光学部材３２、レンズ群３３、及びレンズ群３４は、スクリーンＳＣ側からこの順番にて光路上に配置されている。図１に示すように、レンズ群３１の最もスクリーンＳＣ側に位置するレンズ３１ａは、光学ユニット１００Ｂの筐体から露出されている。

【0023】

光学部材３２は、共通光学系３の光路を屈曲させるための部材であり、例えばハーフミラー、ビームスプリッタ―、又は偏光部材等が用いられる。

【0024】

投影光学系２を通過した表示部１からの画像は、投影光学系２、光学部材４、共通光学系３の順に通過してスクリーンＳＣに投影される。スクリーンＳＣにおいて、共通光学系３から画像が投影される範囲をスクリーンＳＣの投影範囲という。

【0025】

スクリーンＳＣ側からレンズ群３１に入射した被写体光は、レンズ群３１を通過し、光学部材３２にて反射されて、レンズ群３３に入射される。このレンズ群３３によって、レンズ群３３とレンズ群３４の間の位置ＩＧに、被写体光によって形成される中間像が結像される。この中間像は、レンズ群３４を通過して光学部材４に入射し、光学部材４を透過して撮像光学系５に入射される。

【0026】

撮像光学系５は、位置ＩＧに結像された中間像を撮像素子６に結像させるためのものである。撮像光学系５は、撮像素子６の前方に配置されており、光学部材４を透過した被写体光を集光して撮像素子６に結像させる。撮像光学系５は、少なくとも１つのレンズを含んで構成されている。

【0027】

撮像素子６は、例えば、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）イメージセンサ又はＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサ等が用いられる。

【0028】

光学部材４は、例えばハーフミラー、ビームスプリッタ―、又は偏光部材等によって構成されている。光学部材４は、投影光学系２を通過した表示部１からの画像を反射させて共通光学系３に導き、且つ、共通光学系３のレンズ群３３によって位置ＩＧに結像された被写体光に基づく中間像を、撮像光学系５を通して撮像素子６に導く。このように、撮像素子６は、表示部１からの画像をスクリーンＳＣに投影するための共通光学系３を通して、この共通光学系３による画像の投影範囲を撮像するものとなっている。

【0029】

照明部７は、スクリーンＳＣ等の投影対象物を照明するためのものであり、一例として図１に示すように、レンズ３１ａの光軸の周囲に円状に並べて配置された複数の発光素子７ａと、これらを駆動するドライバと、によって構成されている。

【0030】

システム制御部８は、表示部１から投影光学系２に入射させる画像の制御、撮像素子６による被写体の撮像制御、及び照明部７の発光制御等を行うものであり、プロセッサと、記憶部を構成するＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）と、を備える。

【0031】

プロセッサとしては、プログラムを実行して各種処理を行う汎用的なプロセッサであるＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ：ＰＬＤ）、又はＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。これらプロセッサの構造は、より具体的には、半導体素子等の回路素子を組み合わせた電気回路である。

【0032】

システム制御部８のプロセッサは、上述した各種のプロセッサのうちの１つで構成されてもよいし、同種又は異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡの組み合わせ又はＣＰＵとＦＰＧＡの組み合わせ）で構成されてもよい。

【0033】

以上の構成のプロジェクタ１００は、所望の投影対象物に所望の画像を投影する際には、投影モードが使用される。この投影モードにおいては、表示部１からの画像を投影対象物に投影させ且つ照明部７によって投影対象物を照明させない状態（以下、“投影あり／照明なし状態”という）にて画像の表示が行われる。

【0034】

ここで、投影モードが設定されたときの全体的な流れについて説明する。スクリーンＳＣの前にプロジェクタ１００が設置され、その状態にて、投影モードが設定されると、まず、システム制御部８は、スクリーンＳＣが照明部７によって非照明の状態且つテスト画像（例えば白色画像等）をスクリーンＳＣに投影した状態（以下、“照明なし／テスト画像投影状態”ともいう）を形成することなく、その状態にて撮像素子６によりスクリーンＳＣを撮像して得られるであろう第二の撮像画像を演算によって推定する。その後、システム制御部８は、推定した第二の撮像画像と上記テスト画像とに基づいて、投影画像を補正するための補正データを生成する。この補正データの生成が完了すると、システム制御部８は、投影対象となる画像を補正データに基づいて補正し、補正後の画像を表示部１からスクリーンＳＣに投影させる。これにより、所望の画像の表示が行われる。

【0035】

図４は、図３に示すシステム制御部８の機能ブロック図である。システム制御部８のプロセッサは、投影装置の制御プログラムを含むプログラムを実行することにより、撮像制御部８１、画像推定部８２、補正データ生成部８３、及び画像投影制御部８４として機能する。

【0036】

撮像制御部８１は、表示部１からの画像を投影対象物に非投影の状態且つ照明部７によって投影対象物を照明させた状態（以下、“投影なし／照明あり状態”という）にて、撮像素子６により投影対象物を撮像させる制御（以下、第一の撮像制御という）を少なくとも行う。“投影なし／照明あり状態”は、例えば、表示部１をオフ状態に制御し、照明部７から光を発光させることにて実現される。

【0037】

また、撮像制御部８１は、表示部１からの画像を投影対象物に投影させ且つ照明部７によって投影対象物を照明させない状態にて、撮像素子６により投影対象物を撮像させる第二の撮像制御も行う。

【0038】

画像推定部８２は、撮像制御部８１の第一の撮像制御によって撮像素子６から出力された第一の撮像画像と、システム制御部８内のＲＯＭに予め記憶されている情報（以下、補正係数という）とに基づいて、“照明なし／テスト画像投影状態”にて撮像素子６によりスクリーンＳＣを撮像して得られる上記の第二の撮像画像を推定する。

【0039】

この第二の撮像画像を実際に取得するためには、テスト画像をスクリーンＳＣに投影した状態にて、撮像素子６によりスクリーンＳＣを撮像する必要がある。しかし、この状態では、撮像素子６から出力される撮像画像にゴーストが発生する可能性がある。そのため、本形態では、画像推定部８２が、テスト画像の投影を行うことなく、演算によって第二の撮像画像を推定することで、ゴーストの影響を排除することを可能にしている。

【0040】

以下では、画像推定部８２による第二の撮像画像の推定方法の詳細について説明するが、その前に、第二の撮像画像の推定に用いられる補正係数の詳細について説明する。

【0041】

プロジェクタ１００には、補正係数を生成してＲＯＭに記憶するキャリブレーションモードが搭載されている。図５は、補正係数の生成処理を説明するためのフローチャートである。プロジェクタ１００がキャリブレーションモードに設定される前に、まず、基準投影対象物が準備される。基準投影対象物は、例えば、模様のない白色などの単色のスクリーン（以下、基準スクリーンという）が用いられる。

【0042】

プロジェクタ１００の前に基準スクリーンが設置され、キャリブレーションモードが設定されると、撮像制御部８１が、表示部１及び照明部７を制御して“投影なし／照明あり状態”を形成し、この状態にて、撮像素子６により基準スクリーンの撮像を実行させる（ステップＳ１）。ステップＳ１は上述した第一の撮像制御に相当する。

【0043】

システム制御部８は、ステップＳ１の撮像によって撮像素子６から出力された撮像画像における投影範囲の撮像画像Ｇａを取得し、ＲＡＭに記憶する（ステップＳ２）。撮像画像Ｇａは、第三の撮像画像を構成する。

【0044】

次に、撮像制御部８１が、表示部１を制御してテスト画像を基準スクリーンに投影させ、更に、照明部７を制御して基準スクリーンを非照明の状態に制御し、この状態（以下、“テスト画像投影あり／照明なし状態”という）にて、撮像素子６により基準スクリーンの撮像を実行させる（ステップＳ３）。ステップＳ３は上述した第二の撮像制御に相当する。なお、このステップＳ３においては、プロジェクタ１００と同種の別のプロジェクタを準備し、このプロジェクタからテスト画像を投影させ、その状態にて、プロジェクタ１００によって基準スクリーンを撮像させてもよい。これにより、ゴーストの影響受けずに撮像画像を得ることができる。

【0045】

システム制御部８は、ステップＳ３の撮像によって撮像素子６から出力された撮像画像における投影範囲の撮像画像Ｇｂを取得し、ＲＡＭに記憶する（ステップＳ４）。撮像画像Ｇｂは、第四の撮像画像を構成する。

【0046】

次に、システム制御部８は、撮像画像Ｇａの座標（ｘ，ｙ）の画素値ｇａ（ｘ，ｙ）と、撮像画像Ｇｂの座標（ｘ，ｙ）の画素値ｇｂ（ｘ，ｙ）との比β（ｘ，ｙ）を算出する処理を、全ての座標について行い、この比β（ｘ，ｙ）を補正係数としてＲＯＭに記憶する（ステップＳ５）。

【0047】

ステップＳ５において、具体的には、システム制御部８は、以下の式（Ａ）の演算によって、座標（ｘ，ｙ）毎の補正係数を生成する。

【0048】

β(x,y)={画素値gb(x,y)}/{画素値ga(x,y)} (A)

【0049】

以上でキャリブレーションモードが終了される。次に、第二の撮像画像の推定処理の詳細について説明する。

【0050】

図６は、画像推定部８２による第二の撮像画像の推定処理を説明するためのフローチャートである。図６に示す処理は、スクリーンＳＣの前にプロジェクタ１００が設置され、その状態にて、投影モードが設定された場合に開始される。

【0051】

まず、撮像制御部８１は、表示部１と照明部７を制御し、“投影なし／照明あり状態”を形成する。なお、ここでは、撮像制御部８１は、照明部７の発光量を第一の光量Ｌ１に制御する。そして、この“投影なし／照明あり状態”にて、撮像制御部８１は、撮像素子６によりスクリーンＳＣの撮像を実行させる（ステップＳ１１）。

【0052】

画像推定部８２は、ステップＳ１１の撮像によって撮像素子６から出力された撮像画像における投影範囲の撮像画像Ｃ１を取得し、ＲＡＭに記憶する（ステップＳ１２）。撮像画像Ｃ１は第一の撮像画像を構成する。

【0053】

次に、撮像制御部８１は、“投影なし／照明あり状態”を継続させたまま、照明部７の発光量を第一の光量Ｌ１とは異なる第二の光量Ｌ２に変更し、その状態にて、撮像素子６によりスクリーンＳＣの撮像を実行させる（ステップＳ１３）。

【0054】

画像推定部８２は、ステップＳ１３の撮像によって撮像素子６から出力された撮像画像における投影範囲の撮像画像Ｃ２を取得し、ＲＡＭに記憶する（ステップＳ１４）。撮像画像Ｃ２は第一の撮像画像を構成する。

【0055】

次に、画像推定部８２は、第一の光量Ｌ１と第二の光量Ｌ２の比αを求め、この比αと、撮像画像Ｃ１と、撮像画像Ｃ２とに基づいて、撮像画像Ｃ１と撮像画像Ｃ２の各々の座標（ｘ，ｙ）の画素値に含まれる、スクリーンＳＣからの反射光量成分ＲＬ（ｘ，ｙ）と、プロジェクタ１００の置かれている場所の環境光量成分ＥＬ（ｘ，ｙ）とを算出する（ステップＳ１５）。

【0056】

なお、撮像画像Ｃ１の座標（ｘ，ｙ）の画素値をＣ１（ｘ，ｙ）とし、撮像画像Ｃ２の座標（ｘ，ｙ）の画素値をＣ２（ｘ，ｙ）とし、α＝Ｌ２／Ｌ１とすると、以下の式（Ｂ）と式（Ｃ）の関係が成り立つ。

【0057】

C1(x,y)=RL(x,y)+EL(x,y) (B)
C2(x,y)=α×RL(x,y)+EL(x,y) (C)

【0058】

したがって、画像推定部８２は、式（Ｂ）と、式（Ｃ）と、ステップＳ１２にて取得済みのＣ１（ｘ，ｙ）と、ステップＳ１４にて取得済みのＣ２（ｘ，ｙ）と、比αと、から、反射光量成分ＲＬ（ｘ，ｙ）と環境光量成分ＥＬ（ｘ，ｙ）を導出することができる。

【0059】

このようにして算出された反射光量成分ＲＬ（ｘ，ｙ）と環境光量成分ＥＬ（ｘ，ｙ）は、“投影なし／照明あり状態”における情報である。一方、ＲＯＭに記憶されている補正係数は、“投影なし／照明あり状態”にて得られる撮像画像（図５の撮像画像Ｇａ）と、“テスト画像投影あり／照明なし状態”にて得られる撮像画像（図５の撮像画像Ｇｂ）との比である。また、環境光量成分ＥＬ（ｘ，ｙ）については、“投影なし／照明あり状態”と“テスト画像投影あり／照明なし状態”とで変化はしない。このため、反射光量成分ＲＬ（ｘ，ｙ）のみを、この補正係数を用いて“テスト画像投影あり／照明なし状態”のときの値に補正することで、“テスト画像投影あり／照明なし状態”にて得られる第二の撮像画像の各画素値を推定することができる。

【0060】

具体的には、ステップＳ１５の後、画像推定部８２は、推定する第二の撮像画像の座標（ｘ，ｙ）の画素値Ｇ（ｘ，ｙ）を下記式（Ｄ）の演算によって算出し、第二の撮像画像を推定する。

【0061】

G(x,y)=β(x,y)×RL(x,y)+EL(x,y) (D)

【0062】

以上が画像推定部８２による第二の撮像画像の推定処理の詳細である。

【0063】

図４に示す補正データ生成部８３は、画像推定部８２によって推定された第二の撮像画像と、上記のキャリブレーションモードにて用いられたテスト画像との特性差に基づいて、投影モードにてスクリーンＳＣに投影すべき画像の色又は輝度の補正を行うための補正データを生成する。生成された補正データは、システム制御部８のＲＯＭに記憶される。

【0064】

テスト画像と第二の撮像画像との特性差とは、具体的には、画像同士の色又は輝度の差である。

【0065】

補正データ生成部８３は、例えば、テスト画像と第二の撮像画像とを比較して、色の差が所定値以上となる領域を投影範囲内の模様と認識し、この模様の部分に画像を投影した場合に、この模様を視認させにくくするための色補正データを生成する。または、補正データ生成部８３は、テスト画像と第二の撮像画像とを比較して、輝度の差が所定値以上となる領域を投影範囲内の模様と認識し、この模様の部分に画像を投影した場合に、この模様を視認させにくくするための輝度補正データを生成する。補正データ生成部８３は、輝度補正データと色補正データの両方を生成してＲＯＭに記憶してもよい。

【0066】

図４に示す画像投影制御部８４は、投影モードにおいては、光変調素子４４に入力すべき画像データの色又は輝度、或いはその両方を、ＲＯＭに記憶された補正データに基づいて補正し、補正後の画像データを光変調素子４４に入力して、この補正後の画像データに基づく画像をスクリーンＳＣに投影させる。

【0067】

画像投影制御部８４による補正処理によって、スクリーンＳＣに模様があった場合でも、この模様を消した状態にて、画像を視認させることができる。

【0068】

以上のように、プロジェクタ１００によれば、投影モードにおいて、テスト画像をスクリーンＳＣに投影することなく、このテスト画像をスクリーンＳＣに投影した状態における投影範囲の撮像画像の推定を行うことができる。このため、ゴーストの影響を排除することができ、補正データ生成部８３によって生成される補正データの精度を高めることができる。したがって、スクリーンＳＣに模様がある場合でも、この模様を高い精度にて消して画像を表示させることができ、投影画像の品質を高めることができる。

【0069】

また、プロジェクタ１００では、第二の撮像画像の推定に必要な補正係数を生成してＲＯＭに記憶するキャリブレーションモードを搭載している。表示部１、撮像素子６、その他光学系等の構成部材は、経年劣化又は使用環境温度等によって特性が変化し得る。そのため、例えば、ユーザが、投影モードを設定する直前に、キャリブレーションモードを設定して補正係数を生成して記憶させることで、プロジェクタ１００の状態又は使用状況に応じた補正係数の最適化が可能になる。この結果、プロジェクタ１００の状態又は使用状況によらずに、補正データを用いた投影像の補正を高精度に行うことができる。

【0070】

図７は、画像推定部８２による第二の撮像画像の推定処理の変形例を説明するためのフローチャートである。図７に示すフローチャートは、ステップＳ１１からステップＳ１４までは図６と同じであるため、説明を省略する。なお、図７に示したステップＳ１１からステップＳ１４のうち、ステップＳ１１にて行われる制御は第一制御を構成し、ステップＳ１３にて行われる制御は第二制御を構成する。

【0071】

図７のステップＳ１４の後、撮像制御部８１は、“投影なし／照明あり状態”を継続させたまま、照明部７の発光量を第一の光量Ｌ１及び第二の光量Ｌ２とは異なる第三の光量Ｌ３に変更し、その状態にて、撮像素子６によりスクリーンＳＣの撮像を実行させる（ステップＳ２１）。ステップＳ２１にて行われる制御は第三制御を構成する。

【0072】

画像推定部８２は、ステップＳ２１の撮像によって撮像素子６から出力された撮像画像における投影範囲の撮像画像Ｃ３を取得し、ＲＡＭに記憶する（ステップＳ２２）。撮像画像Ｃ３は第一の撮像画像を構成する。

【0073】

次に、画像推定部８２は、第一の光量Ｌ１と第二の光量Ｌ２の比α１を求め、この比α１と、撮像画像Ｃ１と、撮像画像Ｃ２とに基づいて、撮像画像Ｃ１と撮像画像Ｃ２の各々の座標（ｘ，ｙ）の画素値に含まれる、スクリーンＳＣからの反射光量成分ＲＬ１（ｘ，ｙ）と、プロジェクタ１００の置かれている場所の環境光量成分ＥＬ１（ｘ，ｙ）とを算出する（ステップＳ２３）。

【0074】

撮像画像Ｃ１の座標（ｘ，ｙ）の画素値をＣ１（ｘ，ｙ）とし、撮像画像Ｃ２の座標（ｘ，ｙ）の画素値をＣ２（ｘ，ｙ）とし、α１＝Ｌ２／Ｌ１とすると、以下の式（Ｂ１）と式（Ｃ１）の関係が成り立つ。

【0075】

C1(x,y)=RL1(x,y)+EL1(x,y) (B1)
C2(x,y)=α1×RL1(x,y)+EL1(x,y) (C1)

【0076】

したがって、画像推定部８２は、式（Ｂ１）と、式（Ｃ１）と、ステップＳ１２にて取得済みのＣ１（ｘ，ｙ）と、ステップＳ１４にて取得済みのＣ２（ｘ，ｙ）と、比α１と、から、反射光量成分ＲＬ１（ｘ，ｙ）と環境光量成分ＥＬ１（ｘ，ｙ）が導出することができる。

【0077】

次に、画像推定部８２は、第二の光量Ｌ２と第三の光量Ｌ３の比α２を求め、この比α２と、撮像画像Ｃ２と、撮像画像Ｃ３とに基づいて、撮像画像Ｃ２と撮像画像Ｃ３の各々の座標（ｘ，ｙ）の画素値に含まれる、スクリーンＳＣからの反射光量成分ＲＬ２（ｘ，ｙ）と、プロジェクタ１００の置かれている場所の環境光量成分ＥＬ２（ｘ，ｙ）とを算出する（ステップＳ２４）。

【0078】

撮像画像Ｃ２の座標（ｘ，ｙ）の画素値をＣ２（ｘ，ｙ）とし、撮像画像Ｃ３の座標（ｘ，ｙ）の画素値をＣ３（ｘ，ｙ）とし、α２＝Ｌ３／Ｌ２とすると、以下の式（Ｂ２）と式（Ｃ２）の関係が成り立つ。

【0079】

C2(x,y)=RL2(x,y)+EL2(x,y) (B2)
C3(x,y)=α2×RL2(x,y)+EL2(x,y) (C2)

【0080】

したがって、画像推定部８２は、式（Ｂ２）と、式（Ｃ２）と、ステップＳ１４にて取得済みのＣ２（ｘ，ｙ）と、ステップＳ２２にて取得済みのＣ３（ｘ，ｙ）と、比α２と、から、反射光量成分ＲＬ２（ｘ，ｙ）と環境光量成分ＥＬ２（ｘ，ｙ）を導出することができる。

【0081】

次に、画像推定部８２は、反射光量成分ＲＬ１（ｘ，ｙ）と反射光量成分ＲＬ２（ｘ，ｙ）の第一の差の絶対値ＡＢ１を求め、環境光量成分ＥＬ１（ｘ，ｙ）と環境光量成分ＥＬ２（ｘ，ｙ）の第二の差の絶対値ＡＢ２を求める。そして、画像推定部８２は、予め定めた閾値ＴＨを超える絶対値ＡＢ１が存在し、且つ、閾値ＴＨを超える絶対値ＡＢ２が存在するか否かを判定する（ステップＳ２５）。

【0082】

閾値ＴＨを超える絶対値ＡＢ１及び絶対値ＡＢ２が存在しない場合（ステップＳ２５：ＮＯ）には、画像推定部８２は、例えば下記式（Ｄ１）、（Ｄ２）、（Ｄ３）のいずれかの演算によって第二の撮像画像を推定する（ステップＳ２８）。

【0083】

G(x,y)=β(x,y)×RL1(x,y)+EL1(x,y) (D1)
G(x,y)=β(x,y)×RL2(x,y)+EL2(x,y) (D2)
G(x,y)=β(x,y)×{RL1(x,y)+RL2(x,y)}/2+｛EL1(x,y)+EL2(x,y)｝/2 (D3)

【0084】

閾値ＴＨを超える絶対値ＡＢ１と絶対値ＡＢ２のいずれかが存在する場合（ステップＳ２５：ＹＥＳ）には、画像推定部８２は、推定不可と判断する（ステップＳ２６）。そして、画像推定部８２は、ステップＳ２６の後、照明部７からの発光量（Ｌ１，Ｌ２，Ｌ３）の少なくとも１つの変更を撮像制御部８１に指示する。この指示応じて、ステップＳ２７にて、発光量（Ｌ１，Ｌ２，Ｌ３）の少なくとも１つが変更された上で、ステップＳ１１以降の処理が再度行われる。

【0085】

以上の変形例によれば、第二の撮像画像の推定精度を高めることができ、補正データを用いた投影画像の補正をより高精度に行うことができる。

【0086】

なお、以上の説明では、プロジェクタ１００がキャリブレーションモードを有するものとしたが、キャリブレーションモードは必須ではない。ＲＯＭに記憶すべき補正係数は、プロジェクタ１００の製造時に工場にて生成して記憶しておくようにしてもよい。

【0087】

以上説明してきたように、本明細書には以下の事項が開示されている。

【0088】

（１）
表示部からの画像を投影対象物に投影する光学系と、
上記光学系を通して上記光学系による上記画像の投影範囲を撮像する撮像素子と、
上記投影対象物を照明する照明部と、
上記画像を上記投影対象物に非投影の状態且つ上記照明部によって上記投影対象物を照明させた状態にて上記撮像素子により上記投影対象物を撮像させる制御を少なくとも行う撮像制御部と、
上記制御によって上記撮像素子から出力された第一の撮像画像と、記憶部に予め記憶されている情報とに基づいて、上記投影対象物が上記照明部によって非照明の状態且つテスト画像を上記投影対象物に投影した状態にて上記撮像素子により上記投影対象物を撮像して得られる第二の撮像画像を推定する画像推定部と、
上記テスト画像と上記第二の撮像画像との特性差に基づいて、上記投影対象物に投影すべき上記画像の色又は輝度の少なくとも一方の補正を行うための補正データを生成する補正データ生成部と、を備える投影装置。

【0089】

（２）
（１）記載の投影装置であって、
上記記憶部に記憶された上記情報は、予め決められた基準投影対象物を上記照明部によって照明した状態且つ上記画像が上記基準投影対象物に非投影の状態にて上記撮像素子により上記基準投影対象物を撮像して得られる第三の撮像画像と、上記基準投影対象物が上記照明部によって非照明の状態且つ上記基準投影対象物に上記テスト画像が投影された状態にて上記撮像素子により上記基準投影対象物を撮像して得られる第四の撮像画像とに基づいて生成されたものである投影装置。

【0090】

（３）
（２）記載の投影装置であって、
上記情報は、上記第三の撮像画像と上記第四の撮像画像の比である投影装置。

【0091】

（４）
（１）から（３）のいずれか１つに記載の投影装置であって、
上記撮像制御部は、上記制御を上記照明部からの照明光の明るさを変えて複数回行い、
上記画像推定部は、上記複数回の上記制御によって上記撮像素子から出力された複数の上記第一の撮像画像と、上記複数回の上記制御における上記照明光の明るさと、上記情報と、に基づいて上記第二の撮像画像を推定する投影装置。

【0092】

（５）
（４）記載の投影装置であって、
上記画像推定部は、上記複数の第一の撮像画像と、上記複数回の上記制御における上記照明光の明るさとに基づいて、上記投影対象物からの反射光量と、上記投影装置の置かれた場所の環境光量とを算出し、上記反射光量を上記情報によって補正した値に、上記環境光量を加算して上記第二の撮像画像を推定する投影装置。

【0093】

（６）
（５）記載の投影装置であって、
上記撮像制御部は、上記複数回の上記制御として、第一制御、第二制御、及び第三制御の３回の上記制御を行い、
上記画像推定部は、上記第一制御と上記第二制御によって上記撮像素子から出力された２つの上記第一の撮像画像と、上記第一制御と上記第二制御における上記照明光の明るさとに基づいて、第一の上記反射光量と第一の上記環境光量を算出し、上記第二制御と上記第三制御によって上記撮像素子から出力された２つの上記第一の撮像画像と、上記第二制御と上記第三制御における上記照明光の明るさとに基づいて、第二の上記反射光量と第二の上記環境光量を算出し、上記第一の反射光量と上記第二の反射光量との第一の差と、上記第一の環境光量と上記第二の環境光量との第二の差のいずれかが閾値を超える場合には、上記第二の撮像画像の推定を不可とする投影装置。

【0094】

（７）
（６）記載の投影装置であって、
上記画像推定部は、上記第二の撮像画像の推定を不可とした場合には、上記照明光の明るさを変更した上記３回の上記制御を再度行わせる投影装置。

【0095】

（８）
（１）から（７）のいずれか１つに記載の投影装置であって、
上記情報を生成して上記記憶部に記憶するモードを有する投影装置。

【0096】

（９）
表示部からの画像を投影対象物に投影する光学系と、上記光学系を通して上記光学系による上記画像の投影範囲を撮像する撮像素子と、上記投影対象物を照明する照明部と、を有する投影装置の制御方法であって、
上記画像を上記投影対象物に非投影の状態且つ上記照明部によって上記投影対象物を照明させた状態にて上記撮像素子により上記投影対象物を撮像させる制御を少なくとも行う撮像制御ステップと、
上記制御によって上記撮像素子から出力された第一の撮像画像と、記憶部に予め記憶されている情報とに基づいて、上記投影対象物が上記照明部によって非照明の状態且つテスト画像を上記投影対象物に投影した状態にて上記撮像素子により上記投影対象物を撮像して得られる第二の撮像画像を推定する画像推定ステップと、
上記テスト画像と上記第二の撮像画像との特性差に基づいて、上記投影対象物に投影すべき上記画像の色又は輝度の少なくとも一方の補正を行うための補正データを生成する補正データ生成ステップと、を備える投影装置の制御方法。

【0097】

（１０）
（９）記載の投影装置の制御方法であって、
上記記憶部に記憶された上記情報は、予め決められた基準投影対象物を上記照明部によって照明した状態且つ上記画像が上記基準投影対象物に非投影の状態にて上記撮像素子により上記基準投影対象物を撮像して得られる第三の撮像画像と、上記基準投影対象物が上記照明部によって非照明の状態且つ上記基準投影対象物に上記テスト画像が投影された状態にて上記撮像素子により上記基準投影対象物を撮像して得られる第四の撮像画像とに基づいて生成されたものである投影装置の制御方法。

【0098】

（１１）
（１０）記載の投影装置の制御方法であって、
上記情報は、上記第三の撮像画像と上記第四の撮像画像の比である投影装置の制御方法。

【0099】

（１２）
（９）から（１１）のいずれか１つに記載の投影装置の制御方法であって、
上記撮像制御ステップは、上記制御を上記照明部からの照明光の明るさを変えて複数回行い、
上記画像推定ステップは、上記複数回の上記制御によって上記撮像素子から出力された複数の上記第一の撮像画像と、上記複数回の上記制御における上記照明光の明るさと、上記情報と、に基づいて上記第二の撮像画像を推定する投影装置の制御方法。

【0100】

（１３）
（１２）記載の投影装置の制御方法であって、
上記画像推定ステップは、上記複数の第一の撮像画像と、上記複数回の上記制御における上記照明光の明るさとに基づいて、上記投影対象物からの反射光量と、上記投影装置の置かれた場所の環境光量とを算出し、上記反射光量を上記情報によって補正した値に、上記環境光量を加算して上記第二の撮像画像を推定する投影装置の制御方法。

【0101】

（１４）
（１３）記載の投影装置の制御方法であって、
上記撮像制御ステップは、上記複数回の上記制御として、第一制御、第二制御、及び第三制御の３回の上記制御を行い、
上記画像推定ステップは、上記第一制御と上記第二制御によって上記撮像素子から出力された２つの上記第一の撮像画像と、上記第一制御と上記第二制御における上記照明光の明るさとに基づいて、第一の上記反射光量と第一の上記環境光量を算出し、上記第二制御と上記第三制御によって上記撮像素子から出力された２つの上記第一の撮像画像と、上記第二制御と上記第三制御における上記照明光の明るさとに基づいて、第二の上記反射光量と第二の上記環境光量を算出し、上記第一の反射光量と上記第二の反射光量との第一の差と、上記第一の環境光量と上記第二の環境光量との第二の差のいずれかが閾値を超える場合には、上記第二の撮像画像の推定を不可とする投影装置の制御方法。

【0102】

（１５）
（１４）記載の投影装置の制御方法であって、
上記画像推定ステップは、上記第二の撮像画像の推定を不可とした場合には、上記照明光の明るさを変更した上記３回の上記制御を再度行わせる投影装置の制御方法。

【0103】

（１６）
表示部からの画像を投影対象物に投影する光学系と、上記光学系を通して上記光学系による上記画像の投影範囲を撮像する撮像素子と、上記投影対象物を照明する照明部と、を有する投影装置の制御プログラムであって、
上記画像を上記投影対象物に非投影の状態且つ上記照明部によって上記投影対象物を照明させた状態にて上記撮像素子により上記投影対象物を撮像させる制御を少なくとも行う撮像制御ステップと、
上記制御によって上記撮像素子から出力された第一の撮像画像と、記憶部に予め記憶されている情報とに基づいて、上記投影対象物が上記照明部によって非照明の状態且つテスト画像を上記投影対象物に投影した状態にて上記撮像素子により上記投影対象物を撮像して得られる第二の撮像画像を推定する画像推定ステップと、
上記テスト画像と上記第二の撮像画像との特性差に基づいて、上記投影対象物に投影すべき上記画像の色又は輝度の少なくとも一方の補正を行うための補正データを生成する補正データ生成ステップと、をコンピュータに実行させるための投影装置の制御プログラム。

【0104】

以上、図面を参照しながら各種の実施の形態について説明したが、本発明はかかる例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例又は修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。また、発明の趣旨を逸脱しない範囲において、上記実施の形態における各構成要素を任意に組み合わせてもよい。

【0105】

なお、本出願は、２０１９年２月１９日出願の日本特許出願（特願２０１９－０２７５２４）に基づくものであり、その内容は本出願の中に参照として援用される。

【産業上の利用可能性】

【0106】

本発明によれば、投影面の色に合わせた投影像の補正を行うことのできる投影装置とその制御方法及び制御プログラムを提供することができる。

【符号の説明】

【0107】

１００ プロジェクタ
１００Ａ 本体部
１００Ｂ 光学ユニット
７ａ 発光素子
１ 表示部
４０ 光源ユニット
４１ 光源
４２ カラーホイール
４３ 照明光学系
４４ 光変調素子
２ 投影光学系
３ 共通光学系
３１、３３、３４ レンズ群
３２ 光学部材
ＩＧ 位置
ＳＣ スクリーン
４ 光学部材
５ 撮像光学系
６ 撮像素子
７ 照明部
８ システム制御部
８１ 撮像制御部
８２ 画像推定部
８３ 補正データ生成部
８４ 画像投影制御部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】