特許 7694682 情報処理システム、情報処理装置、情報処理方法、及び記録媒体

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2025-06-10

(45)【発行日】2025-06-18

(54)【発明の名称】情報処理システム、情報処理装置、情報処理方法、及び記録媒体

(51)【国際特許分類】

   H04N 23/71 20230101AFI20250611BHJP

   H04N 23/74 20230101ALI20250611BHJP

   H04N 23/73 20230101ALI20250611BHJP

【ＦＩ】

H04N23/71

H04N23/74

H04N23/73

【請求項の数】 8

(21)【出願番号】P 2023550942

(86)(22)【出願日】2021-09-30

(86)【国際出願番号】 JP2021036237

(87)【国際公開番号】W WO2023053383

(87)【国際公開日】2023-04-06

【審査請求日】2024-03-14

(73)【特許権者】

【識別番号】000004237

【氏名又は名称】日本電気株式会社

(74)【代理人】

【識別番号】100104765

【弁理士】

【氏名又は名称】江上 達夫

(74)【代理人】

【識別番号】100107331

【弁理士】

【氏名又は名称】中村 聡延

(74)【代理人】

【識別番号】100131015

【弁理士】

【氏名又は名称】三輪 浩誉

(72)【発明者】

【氏名】塚田 正人

【審査官】越河 勉

(56)【参考文献】

【文献】特開２００５－０９４１３３（ＪＰ，Ａ）

【文献】特開２００８－１８７３１８（ＪＰ，Ａ）

【文献】特開２０１６－００９９９８（ＪＰ，Ａ）

【文献】特開２０１０－１８３４５９（ＪＰ，Ａ）

【文献】特開２００７－２０１９８０（ＪＰ，Ａ）

【文献】特開２００８－１６４７３１（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ２３／７１

Ｈ０４Ｎ ２３／７４

Ｈ０４Ｎ ２３／７３

(57)【特許請求の範囲】

【請求項1】

可視光領域で撮像された画像から対象の肌の色に関する情報である肌色情報を取得する取得手段と、
前記肌色情報から前記肌の反射率を算出する反射率モデルを記憶する記憶手段と、
前記反射率モデルを用いて算出した前記肌の反射率に基づいて、近赤外光領域での前記対象の肌の輝度情報を推定する推定手段と、
前記輝度情報に基づいて、前記近赤外光領域で前記対象を撮像する際の露光に関するカメラパラメータ及び照明の少なくとも一方を制御する制御手段と、
を備える情報処理システム。

【請求項2】

前記制御手段は、前記対象の肌の輝度情報が第１閾値と第２閾値との間となるように、前記カメラパラメータ及び前記照明の少なくとも一方を制御する、請求項１に記載の情報処理システム。

【請求項3】

前記対象の移動量を検出する検出手段を更に備え、
前記制御手段は、前記輝度情報と前記移動量とに基づいて、前記カメラパラメータ及び前記照明の少なくとも一方を制御する、
請求項１又は２に記載の情報処理システム。

【請求項4】

前記制御手段は、前記対象を複数回撮像する場合に、撮像ごとに前記カメラパラメータ及び前記照明の少なくとも一方を制御する、請求項１から３のいずれか一項に記載の情報処理システム。

【請求項5】

前記制御手段は、前記輝度情報に基づいて、撮像ごとに前記対象を撮像する際の露光時間を短くすると共に前記照明を明るくする第１制御、又は、撮像ごとに前記対象を撮像する際の前記露光時間を長くすると共に前記照明を暗くする第２制御を行う、請求項４に記載の情報処理システム。

【請求項6】

可視光領域で撮像された画像から対象の肌の色に関する情報である肌色情報を取得する取得手段と、
前記肌色情報から前記肌の反射率を算出する反射率モデルを記憶する記憶手段と、
前記反射率モデルを用いて算出した前記肌の反射率に基づいて、近赤外光領域での前記対象の肌の輝度情報を推定する推定手段と、
前記輝度情報に基づいて、前記近赤外光領域で前記対象を撮像する際の露光に関するカメラパラメータ及び照明の少なくとも一方を制御する制御手段と、
を備える情報処理装置。

【請求項7】

少なくとも１つのコンピュータが実行する情報処理方法であって、
可視光領域で撮像された画像から対象の肌の色に関する情報である肌色情報を取得し、
記憶された反射率モデルを用いて前記肌色情報から前記肌の反射率を算出し、
前記反射率モデルを用いて算出した前記肌の反射率に基づいて、近赤外光領域での前記対象の肌の輝度情報を推定し、
前記輝度情報に基づいて、前記近赤外光領域で前記対象を撮像する際の露光に関するカメラパラメータ及び照明の少なくとも一方を制御する、
情報処理方法。

【請求項8】

少なくとも１つのコンピュータに、
可視光領域で撮像された画像から対象の肌の色に関する情報である肌色情報を取得し、
記憶された反射率モデルを用いて前記肌色情報から前記肌の反射率を算出し、
前記反射率モデルを用いて算出した前記肌の反射率に基づいて、近赤外光領域での前記対象の肌の輝度情報を推定し、
前記輝度情報に基づいて、前記近赤外光領域で前記対象を撮像する際の露光に関するカメラパラメータ及び照明の少なくとも一方を制御する、
情報処理方法を実行させるコンピュータプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

この開示は、情報処理システム、情報処理装置、情報処理方法、及び記録媒体の技術分野に関する。

【背景技術】

【0002】

この種のシステムとして、生体の画像を撮像する際の露光や光環境を調整するものが知られている。例えば特許文献１では、照度と瞳孔サイズとの関係に基づいて照明の光量を決定する技術が開示されている。特許文献２では、虹彩画像を撮像する際の露光時間を設定する技術が開示されている。

【0003】

その他の関連する技術として、例えば特許文献３では、瞳孔領域を検出して、瞳孔領域の周囲にある肌領域の輝度情報を取得する技術が開示されている。

【先行技術文献】

【特許文献】

【0004】

【文献】国際公開第２０２１／０４４５４０号

【文献】特表２０１７－５３７３８６号公報

【文献】国際公開第２０１４／０７３６４５号

【発明の概要】

【発明が解決しようとする課題】

【0005】

この開示は、先行技術文献に開示された技術を改善することを目的とする。

【課題を解決するための手段】

【0006】

この開示の情報処理システムの一の態様は、対象の肌の色に関する情報である肌色情報を取得する取得手段と、前記肌色情報に基づいて、前記対象の肌の輝度情報を推定する推定手段と、前記輝度情報に基づいて、前記対象を撮像する際の露光に関するカメラパラメータ及び照明の少なくとも一方を制御する制御手段と、を備える。

【0007】

この開示の情報処理装置の一の態様は、対象の肌の色に関する情報である肌色情報を取得する取得手段と、前記肌色情報に基づいて、前記対象の肌の輝度情報を推定する推定手段と、前記輝度情報に基づいて、前記対象を撮像する際の露光に関するカメラパラメータ及び照明の少なくとも一方を制御する制御手段と、を備える。

【0008】

この開示の情報処理方法の一の態様は、少なくとも１つのコンピュータが実行する情報処理方法であって、対象の肌の色に関する情報である肌色情報を取得し、前記肌色情報に基づいて、前記対象の肌の輝度情報を推定し、前記輝度情報に基づいて、前記対象を撮像する際の露光に関するカメラパラメータ及び照明の少なくとも一方を制御する。

【0009】

この開示の記録媒体の一の態様は、少なくとも１つのコンピュータに、対象の肌の色に関する情報である肌色情報を取得し、前記肌色情報に基づいて、前記対象の肌の輝度情報を推定し、前記輝度情報に基づいて、前記対象を撮像する際の露光に関するカメラパラメータ及び照明の少なくとも一方を制御する、情報処理方法を実行させるコンピュータプログラムが記録されている。

【図面の簡単な説明】

【0010】

【図1】第１実施形態に係る情報処理システムのハードウェア構成を示すブロック図である。

【図2】第１実施形態に係る情報処理システムの機能的構成を示すブロック図である。

【図3】第１実施形態に係る情報処理システムによる動作の流れを示すフローチャートである。

【図4】第２実施形態に係る情報処理システムによる動作の流れを示すフローチャートである。

【図5】第３実施形態に係る情報処理システムによる動作の流れを示すフローチャートである。

【図6】第４実施形態に係る情報処理システムの機能的構成を示すブロック図である。

【図7】第４実施形態に係る情報処理システムによる動作の流れを示すフローチャートである。

【図8】第５実施形態に係る情報処理システムの機能的構成を示すブロック図である。

【図9】第５実施形態に係る情報処理システムによる動作の流れを示すフローチャートである。

【図10】第６実施形態に係る情報処理システムの機能的構成を示すブロック図である。

【図11】第６実施形態に係る情報処理システムによる動作の流れを示すフローチャートである。

【図12】第６実施形態に係る情報処理システムによって算出される肌の反射率の一例を示すグラフである。

【図13】第７実施形態に係る情報処理システムの機能的構成を示すブロック図である。

【図14】第７実施形態に係る情報処理システムによる動作の流れを示すフローチャートである。

【図15】第８実施形態に係る情報処理システムによる動作の流れを示すフローチャートである。

【図16】第９実施形態に係る情報処理システムによる制御動作の一例を示す表である。

【発明を実施するための形態】

【0011】

以下、図面を参照しながら、情報処理システム、情報処理装置、情報処理方法、及び記録媒体の実施形態について説明する。

【0012】

＜第１実施形態＞
第１実施形態に係る情報処理システムについて、図１から図３を参照して説明する。

【0013】

（ハードウェア構成）
まず、図１を参照しながら、第１実施形態に係る情報処理システムのハードウェア構成について説明する。図１は、第１実施形態に係る情報処理システムのハードウェア構成を示すブロック図である。

【0014】

図１に示すように、第１実施形態に係る情報処理システム１０は、プロセッサ１１と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１２と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１３と、記憶装置１４とを備えている。情報処理システム１０は更に、入力装置１５と、出力装置１６と、を備えていてもよい。また、情報処理システム１０は、カメラ１８と、照明１９と、を備えていてもよい。上述したプロセッサ１１と、ＲＡＭ１２と、ＲＯＭ１３と、記憶装置１４と、入力装置１５と、出力装置１６と、カメラ１８と、照明１９とは、データバス１７を介して接続されている。

【0015】

プロセッサ１１は、コンピュータプログラムを読み込む。例えば、プロセッサ１１は、ＲＡＭ１２、ＲＯＭ１３及び記憶装置１４のうちの少なくとも一つが記憶しているコンピュータプログラムを読み込むように構成されている。或いは、プロセッサ１１は、コンピュータで読み取り可能な記録媒体が記憶しているコンピュータプログラムを、図示しない記録媒体読み取り装置を用いて読み込んでもよい。プロセッサ１１は、ネットワークインタフェースを介して、情報処理システム１０の外部に配置される不図示の装置からコンピュータプログラムを取得してもよい（つまり、読み込んでもよい）。プロセッサ１１は、読み込んだコンピュータプログラムを実行することで、ＲＡＭ１２、記憶装置１４、入力装置１５及び出力装置１６を制御する。本実施形態では特に、プロセッサ１１が読み込んだコンピュータプログラムを実行すると、プロセッサ１１内には、対象を撮像する際の制御を実行する機能ブロックが実現される。即ち、プロセッサ１１は、情報処理システム１０における各制御を実行するコントローラとして機能してよい。

【0016】

プロセッサ１１は、例えばＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＦＰＧＡ（ｆｉｅｌｄ－ｐｒｏｇｒａｍｍａｂｌｅ ｇａｔｅ ａｒｒａｙ）、ＤＳＰ（Ｄｅｍａｎｄ－Ｓｉｄｅ Ｐｌａｔｆｏｒｍ）、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）として構成されてよい。プロセッサ１１は、これらのうち一つで構成されてもよいし、複数を並列で用いるように構成されてもよい。

【0017】

ＲＡＭ１２は、プロセッサ１１が実行するコンピュータプログラムを一時的に記憶する。ＲＡＭ１２は、プロセッサ１１がコンピュータプログラムを実行している際にプロセッサ１１が一時的に使用するデータを一時的に記憶する。ＲＡＭ１２は、例えば、Ｄ－ＲＡＭ（Ｄｙｎａｍｉｃ ＲＡＭ）であってもよい。

【0018】

ＲＯＭ１３は、プロセッサ１１が実行するコンピュータプログラムを記憶する。ＲＯＭ１３は、その他に固定的なデータを記憶していてもよい。ＲＯＭ１３は、例えば、Ｐ－ＲＯＭ（Ｐｒｏｇｒａｍｍａｂｌｅ ＲＯＭ）であってもよい。

【0019】

記憶装置１４は、情報処理システム１０が長期的に保存するデータを記憶する。記憶装置１４は、プロセッサ１１の一時記憶装置として動作してもよい。記憶装置１４は、例えば、ハードディスク装置、光磁気ディスク装置、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）及びディスクアレイ装置のうちの少なくとも一つを含んでいてもよい。

【0020】

入力装置１５は、情報処理システム１０のユーザからの入力指示を受け取る装置である。入力装置１５は、例えば、キーボード、マウス及びタッチパネルのうちの少なくとも一つを含んでいてもよい。入力装置１５は、スマートフォンやタブレット等の携帯端末として構成されていてもよい。

【0021】

出力装置１６は、情報処理システム１０に関する情報を外部に対して出力する装置である。例えば、出力装置１６は、情報処理システム１０に関する情報を表示可能な表示装置（例えば、ディスプレイ）であってもよい。また、出力装置１６は、情報処理システム１０に関する情報を音声出力可能なスピーカ等であってもよい。出力装置１６は、スマートフォンやタブレット等の携帯端末として構成されていてもよい。

【0022】

カメラ１８は、対象の画像（例えば、対象の顔を含む画像や対象の虹彩を含む画像を）を撮像可能な箇所に設置されたカメラである。なお、ここでの対象は、人間だけに限られず、犬や蛇等の動物、ロボット等を含むものであってよい。カメラ１８は、対象が有する端末（例えば、スマートフォン）に搭載されたカメラであってもよい。カメラ１８は、静止画を撮像するカメラであってもよいし、動画を撮像するカメラであってもよい。カメラ１８は、可視光カメラとして構成されてもよいし、近赤外線カメラとして構成されてよい。カメラ１８は複数台設けられていてもよい。カメラ１８が複数台設けられる場合、それらは異なる種類のカメラ１８として設けられていてもよい。例えば、対象の顔を撮像する可視光カメラと、対象の虹彩を撮像する近赤外線カメラとが設けられてもよい。また、カメラ１８は、深度カメラやサーマルカメラとして設けられてもよい。

【0023】

照明１９は、カメラ１８で画像を撮像する際に照明光を対象に照射可能に構成されている。例えば、カメラ１８として可視光カメラが設けられている場合、照明１９は可視光を照射するものとして構成されてよい。また、カメラ１８として近赤外線カメラが設けられている場合、照明１９は近赤外光を照射するものとして構成されてよい。照明１９は複数台設けられていてもよい。照明１９が複数台設けられる場合、それらは異なる種類の照明１９として設けられていてもよい。

【0024】

なお、図１では、複数の装置を含んで構成される情報処理システム１０の例を挙げたが、これらの全部又は一部の機能を、１つの装置（情報処理装置）で実現してもよい。この情報処理装置は、例えば、上述したプロセッサ１１、ＲＡＭ１２、ＲＯＭ１３のみを備えて構成され、その他の構成要素（即ち、記憶装置１４、入力装置１５、出力装置１６、カメラ１８）については、例えば情報処理装置に接続される外部の装置が備えるようにしてもよい。また、情報処理装置は、一部の演算機能を外部の装置（例えば、外部サーバやクラウド等）によって実現するものであってもよい。

【0025】

（機能的構成）
次に、図２を参照しながら、第１実施形態に係る情報処理システム１０の機能的構成について説明する。図２は、第１実施形態に係る情報処理システムの機能的構成を示すブロック図である。

【0026】

図２に示すように、第１実施形態に係る情報処理システム１０は、その機能を実現するための構成要素として、肌色情報取得部１１０と、輝度情報推定部１２０と、制御部１３０と、を備えて構成されている。肌色情報取得部１１０、輝度情報推定部１２０、及び制御部１３０の各々は、例えば上述したプロセッサ１１（図１参照）によって実現される処理ブロックであってよい。

【0027】

肌色情報取得部１１０は、対象（即ち、カメラ１８による撮像対象）の肌の色に関する肌色情報を取得可能に構成されている。肌色情報取得部１１０は、対象の画像から肌色情報を取得してよい。例えば、肌色情報取得部１１０は、可視光画像に含まれる対象の顔から肌色情報を取得してよい。この場合、肌色情報取得部１１０は、対象の顔が存在する領域（即ち、顔領域）を検出する機能を有していてもよい。更に、肌色情報取得部１１０は、対象の顔の一部の領域を検出して、その領域の肌色情報を取得してもよい。例えば、肌色情報取得部１１０は、対象の頬領域や額領域を検出して肌色情報を取得してもよい。このようにすれば、対象の髪部分や口部分の色を誤検出してしまうことを防止できる。また、肌色情報取得部１１０は目を検出して、目の周りの皮膚領域から肌色情報を取得してもよい。肌色情報は、例えばＲＧＢ値として取得されてよい。肌色情報は、対象の所定領域（例えば、顔領域）の平均ＲＧＢ値として取得されてよい。肌色情報取得部１１０で取得された肌色情報は、輝度情報推定部１２０に出力される構成となっている。

【0028】

輝度情報推定部１２０は、肌色情報取得部１１０で取得された肌色情報から、対象の肌の輝度情報（例えば、対象を撮像した場合の肌の輝度情報）を推定可能に構成されている。即ち、輝度情報推定部１２０は、実際の対象を撮像することなく、これから撮像を実行すると仮定した場合の輝度情報を推定可能に構成されている。輝度情報は、例えば画素値や、輝度値を含む情報であってよい。輝度情報は、例えば可視光カメラで撮像した場合の輝度情報であってもよいし、近赤外線カメラで撮像した場合の輝度情報であってよい。肌色情報から輝度情報を推定する具体的な手法については、後述する他の実施形態において詳しく説明する。輝度情報推定部１２０で推定された輝度情報は、制御部１３０に出力される構成となっている。

【0029】

制御部１３０は、輝度情報推定部１２０で推定された輝度情報に基づいて、対象を撮像する際の露光に関するカメラパラメータを制御可能に構成されている。カメラパラメータは、例えばレンズの絞り、露光時間、及びゲインの少なくとも１つを含んでいてよい。制御部１３０は、１種類のカメラパラメータを制御してもよいし、複数種類のカメラパラメータを制御してもよい。制御部１３０は、推定された輝度情報に基づいて、カメラ１８で撮像した場合の対象の輝度情報が適切な値となるようにカメラパラメータを制御すればよい。例えば、制御部１３０は、推定された輝度情報が大きすぎる場合（即ち、明るすぎる場合）、輝度情報が小さくなるようにカメラパラメータを制御してよい。例えば、制御部１３０は、絞り値を小さくしたり、露光時間を短くしたり、ゲインを小さくしたりしてよい。或いは、制御部１３０は、推定された輝度情報が小さすぎる場合（即ち、暗すぎる場合）、輝度情報が大きくなるようにカメラパラメータを制御してよい。例えば、制御部１３０は、絞り値を大きくしたり、露光時間を長くしたり、ゲインを大きくしたりしてよい。

【0030】

（動作の流れ）
次に、図３を参照しながら、第１実施形態に係る情報処理システム１０による動作の流れについて説明する。図３は、第１実施形態に係る情報処理システムによる動作の流れを示すフローチャートである。

【0031】

図３に示すように、第１実施形態に係る情報処理システム１０が動作する際には、まず肌色情報取得部１１０が、対象の肌色情報を取得する（ステップＳ１０１）。なお、肌色情報取得部１１０が対象の画像から肌色情報を取得する場合、このステップの前に対象の画像を撮像する処理（例えば、対象の顔画像を撮像する処理）が実行されてよい。

【0032】

続いて、輝度情報推定部１２０が、肌色情報取得部１１０で取得された肌色情報に基づいて、対象の肌の輝度情報を推定する（ステップＳ１０２）。そして、制御部１３０が、輝度情報推定部１２０で推定された輝度情報に基づいて、対象を撮像する際の露光に関するカメラパラメータを制御する（ステップＳ１０３）。

【0033】

なお、制御部１３０によるカメラパラメータの制御後には、実際に対象の撮像が実行されてよい。即ち、カメラパラメータが制御されたカメラ１８によって対象が撮像されてよい。この場合、制御部１３０は、カメラパラメータの制御後に、カメラに撮像指示を出力する機能を有していてもよい。カメラ１８によって撮像された画像は、例えば生体認証に用いられてよい。この場合、生体認証は複数の部位で認証を行うマルチモーダル認証であってもよい。例えば、肌色情報を取得する際に撮像した顔画像を用いた顔認証と、制御後に撮像される虹彩画像を用いた虹彩認証と、が実行されてよい。

【0034】

（技術的効果）
次に、第１実施形態に係る情報処理システム１０によって得られる技術的効果について説明する。

【0035】

図１から図３で説明したように、第１実施形態に係る情報処理システム１０では、対象の肌色情報から推定した輝度情報に基づいて、対象を撮像する際の露光に関するカメラパラメータが制御される。このようにすれば、対象を適切な条件で撮像することが可能となる。よって、例えば画素値の飽和に起因する白飛び等を防止することができる。また、本実施形態では特に、実際に対象を撮像することなく（即ち、輝度情報を推定して）カメラパラメータが制御されるため、撮像の遅延を回避しつつ、適切な画像を撮像することができる。

【0036】

＜第２実施形態＞
第２実施形態に係る情報処理システム１０について、図４を参照して説明する。なお、第２実施形態は、上述した第１実施形態と一部の構成及び動作が異なるのみであり、その他の部分については第１実施形態と同一であってよい。このため、以下では、すでに説明した第１実施形態と異なる部分について詳細に説明し、その他の重複する部分については適宜説明を省略するものとする。

【0037】

（制御部の構成）
第２実施形態に係る制御部１３０は、輝度情報推定部１２０で推定された輝度情報に基づいて、対象を撮像する際の照明１９を制御可能に構成されている。具体的には、制御部１３０は、照明１９の光量や向き、或いは光らせるタイミングを制御可能に構成されてよい。なお、照明１９が複数設けられている場合、制御部１３０は、複数の照明１９の各々を制御可能に構成されてよい。制御部１３０は、推定された輝度情報に基づいて、カメラ１８で撮像した場合の対象の輝度情報が適切な値となるように照明１９を制御すればよい。例えば、制御部１３０は、推定された輝度情報が大きすぎる場合（即ち、明るすぎる場合）、輝度情報が小さくなるように照明１９を制御してよい。例えば、制御部１３０は、照明１９の光量を弱くしたり、照明１９の向きを対象から逸らしたり、光らせるタイミングを撮像タイミングから外すように制御したりしてよい。或いは、制御部１３０は、推定された輝度情報が小さすぎる場合（即ち、暗すぎる場合）、輝度情報が大きくなるように照明１９を制御してよい。例えば、制御部１３０は、照明１９の光量を強くしたり、照明１９を対象側に向けたり、光らせるタイミングを撮像タイミングに近づけるようにしてよい。

【0038】

（動作の流れ）
まず、図４を参照しながら、第２実施形態に係る情報処理システム１０による動作の流れについて説明する。図４は、第２実施形態に係る情報処理システムによる動作の流れを示すフローチャートである。なお、図４では、図３で説明した処理と同様の処理に同一の符号を付している。

【0039】

図４に示すように、第２実施形態に係る情報処理システム１０が動作する際には、まず肌色情報取得部１１０が、対象の肌色情報を取得する（ステップＳ１０１）。

【0040】

続いて、輝度情報推定部１２０が、肌色情報取得部１１０で取得された肌色情報に基づいて、対象の肌の輝度情報を推定する（ステップＳ１０２）。そして、制御部１３０が、輝度情報推定部１２０で推定された輝度情報に基づいて、対象を撮像する際の照明１９を制御する（ステップＳ２０１）。

【0041】

（技術的効果）
次に、第２実施形態に係る情報処理システム１０によって得られる技術的効果について説明する。

【0042】

図４で説明したように、第２実施形態に係る情報処理システム１０では、対象の肌色情報から推定した輝度情報に基づいて、対象を撮像する際の照明１９が制御される。このようにすれば、対象を適切な条件で撮像することが可能となる。よって、例えば画素値の飽和に起因する白飛び等を防止することができる。また、本実施形態では特に、実際に対象を撮像することなく（即ち、輝度情報を推定して）照明１９が制御されるため、撮像の遅延を回避しつつ、適切な画像を撮像することができる。

【0043】

＜第３実施形態＞
第３実施形態に係る情報処理システム１０について、図５を参照して説明する。なお、第３実施形態は、上述した第１及び第２実施形態と一部の構成及び動作が異なるものであり、その他の部分については第１及び第２実施形態と同一であってよい。このため、以下では、すでに説明した各実施形態と異なる部分について詳細に説明し、その他の重複する部分については適宜説明を省略するものとする。

【0044】

（制御部の構成）
第３実施形態に係る制御部１３０は、輝度情報推定部１２０で推定された輝度情報に基づいて、対象を撮像する際の露光に関するカメラパラメータ及び照明１９を制御可能に構成されている。即ち、第３実施形態に係る制御部１３０は、第１実施形態で説明したカメラパラメータの制御と、第２実施形態で説明した照明１９の制御と、の両方を実行可能に構成されている。なお、制御部１３０は、カメラパラメータ及び照明１９の協調制御を実行可能に構成されてよい。具体的には、制御部１３０は、カメラパラメータ及び照明１９の一方の制御による不足分を、他方の制御で補うような制御を実行してもよい。例えば、制御部１３０は、輝度情報が小さくなるようにカメラパラメータを制御すると共に、更に輝度情報が小さくなるように照明１９を制御するようにしてもよい。或いは、制御部１３０は、カメラパラメータ及び照明１９の一方の制御による超過分を、他方の制御で相殺するような制御を実行してもよい。例えば、制御部１３０は、輝度情報が小さくなるようにカメラパラメータを制御する一方で、輝度情報が少しだけ大きくなるように照明１９を制御するようにしてもよい。

【0045】

（動作の流れ）
まず、図５を参照しながら、第３実施形態に係る情報処理システム１０による動作の流れについて説明する。図５は、第３実施形態に係る情報処理システムによる動作の流れを示すフローチャートである。なお、図５では、図３に示した処理と同様の処理に同一の符号を付している。

【0046】

図５に示すように、第３実施形態に係る情報処理システム１０が動作する際には、まず肌色情報取得部１１０が、対象の肌色情報を取得する（ステップＳ１０１）。

【0047】

続いて、輝度情報推定部１２０が、肌色情報取得部１１０で取得された肌色情報に基づいて、対象の肌の輝度情報を推定する（ステップＳ１０２）。そして、制御部１３０が、輝度情報推定部１２０で推定された輝度情報に基づいて、対象を撮像する際のカメラパラメータ及び照明１９を制御する（ステップＳ３０１）。

【0048】

（技術的効果）
次に、第３実施形態に係る情報処理システム１０によって得られる技術的効果について説明する。

【0049】

図５で説明したように、第３実施形態に係る情報処理システム１０では、対象の肌色情報から推定した輝度情報に基づいて、対象を撮像する際のカメラパラメータ及び照明１９が制御される。このようにすれば、対象を適切な条件で撮像することが可能となる。よって、例えば画素値の飽和に起因する白飛び等を防止することができる。また、本実施形態では特に、実際に対象を撮像することなく（即ち、輝度情報を推定して）カメラパラメータ及び照明１９が制御されるため、撮像の遅延を回避しつつ、適切な画像を撮像することができる。そして、カメラパラメータ及び照明１９の両方を制御するため、いずれか一方のみを制御する場合と比べて、より自由度の高い制御が行える。

【0050】

＜第４実施形態＞
第４実施形態に係る情報処理システム１０について、図６及び図７を参照して説明する。なお、第４実施形態は、上述した第１から第３実施形態と一部の構成及び動作が異なるのみであり、その他の部分については第１から第３実施形態と同一であってよい。このため、以下では、すでに説明した各実施形態と異なる部分について詳細に説明し、その他の重複する部分については適宜説明を省略するものとする。

【0051】

（機能的構成）
まず、図６を参照しながら、第４実施形態に係る情報処理システム１０の機能的構成について説明する。図６は、第４実施形態に係る情報処理システムの機能的構成を示すブロック図である。なお、図６では、図２で示した構成要素と同様の要素に同一の符号を付している。

【0052】

図６に示すように、第４実施形態に係る情報処理システム１０は、その機能を実現するための構成要素として、肌色情報取得部１１０と、輝度情報推定部１２０と、制御部１３０と、を備えて構成されている。そして特に、第４実施形態に係る制御部１３０は、閾値記憶部１３１を備えている。

【0053】

閾値記憶部１３１は、カメラパラメータ及び照明１９の少なくとも一方を制御する際に用いる第１閾値及び第２閾値を記憶可能に構成されている。第１閾値及び第２閾値は、輝度情報の目標値の上限及び下限を示す閾値であり、第４実施形態に係る制御部１３０は、輝度情報が第１閾値と第２閾値との間になるように、カメラパラメータ及び照明１９の少なくとも一方を制御可能に構成されている。第１閾値及び第２閾値は、事前のシミュレーション等により算出された値であってよい。例えば、第１閾値及び第２閾値は、対象の画像の画素値が飽和しないような値として設定されてよい。なお、第１閾値及び第２閾値は、複数セット用意されていてもよい。この場合、実際に用いられる第１閾値及び第２閾値は、対象の肌色情報や輝度情報に応じて変更（選択）されてよい。例えば、対象の輝度情報が所定の第１範囲内であれば、第１閾値Ａ及び第２閾値Ａのペアを選択し、対象の輝度情報が所定の第２範囲内であれば、第２閾値Ｂ及び第２閾値Ｂのペアを選択するようにしてよい。或いは、第１閾値及び第２閾値は、ユーザが適宜設定可能な値（例えば、ユーザの操作によって入力される値）であってもよい。或いは、第１閾値及び第２閾値は、撮像環境に関する情報や対象に関する情報等に基づいて、適宜算出される値であってもよい。この場合、閾値記憶部１３１は、第１閾値及び第２閾値を算出する機能を有するように構成されてよい。

【0054】

（動作の流れ）
次に、図７を参照しながら、第４実施形態に係る情報処理システム１０による動作の流れについて説明する。図７は、第４実施形態に係る情報処理システムによる動作の流れを示すフローチャートである。なお、図７では、図３で示した処理と同様の処理に同一の符号を付している。

【0055】

図７に示すように、第４実施形態に係る情報処理システム１０が動作する際には、まず肌色情報取得部１１０が、対象の肌色情報を取得する（ステップＳ１０１）。そして、輝度情報推定部１２０が、肌色情報取得部１１０で取得された肌色情報に基づいて、対象の肌の輝度情報を推定する（ステップＳ１０２）。

【0056】

続いて、制御部１３０が、閾値記憶部１３１から第１閾値及び第２閾値を読み出す（ステップＳ４０１）。そして、制御部１３０は、制御部１３０が、対象の肌の輝度情報が第１閾値と第２閾値との間となるように、対象を撮像する際のカメラパラメータ及び照明１９の少なくとも一方を制御する（ステップＳ４０２）。

【0057】

（技術的効果）
次に、第４実施形態に係る情報処理システム１０によって得られる技術的効果について説明する。

【0058】

図６及び図７で説明したように、第４実施形態に係る情報処理システム１０では、対象の肌の輝度情報が第１閾値と第２閾値との間になるように、対象を撮像する際のカメラパラメータ及び照明１９の少なくとも一方が制御される。このようにすれば、より容易且つ的確にカメラパラメータ及び照明１９の少なくとも一方を制御することが可能となる。

【0059】

＜第５実施形態＞
第５実施形態に係る情報処理システム１０について、図８及び図９を参照して説明する。なお、第５実施形態は、上述した第１から第４実施形態と一部の構成及び動作が異なるのみであり、その他の部分については第１から第４実施形態と同一であってよい。このため、以下では、すでに説明した各実施形態と異なる部分について詳細に説明し、その他の重複する部分については適宜説明を省略するものとする。

【0060】

（機能的構成）
まず、図８を参照しながら、第５実施形態に係る情報処理システム１０の機能的構成について説明する。図８は、第５実施形態に係る情報処理システムの機能的構成を示すブロック図である。なお、図８では、図２で示した構成要素と同様の要素に同一の符号を付している。

【0061】

図８に示すように、第５実施形態に係る情報処理システム１０は、その機能を実現するための構成要素として、肌色情報取得部１１０と、輝度情報推定部１２０と、制御部１３０と、を備えて構成されている。そして特に、第５実施形態に係る輝度情報推定部１２０は、反射率取得部１２１を備えている。

【0062】

反射率取得部１２１は、肌色情報取得部１１０で取得した肌色情報に応じた肌の反射率を取得可能に構成されている。ここでの「肌の反射率」は、肌に照射された光と、肌から反射された光の比を示すものである。肌の反射率は、例えば照射される光の波長ごとに取得されるものであってよい。具体的には、可視光領域の肌の反射率の他、近赤外線領域の肌の反射率が取得されてよい。肌の反射率のより具体的な取得方法については、後述する他の実施形態において詳しく説明する。なお、第５実施形態に係る輝度情報推定部１２０は、反射率取得部１２１で取得した肌の反射率に基づいて、対象の肌の輝度情報を推定可能に構成されている。

【0063】

（動作の流れ）
次に、図９を参照しながら、第５実施形態に係る情報処理システム１０による動作の流れについて説明する。図９は、第５実施形態に係る情報処理システムによる動作の流れを示すフローチャートである。なお、図９では、図３で示した処理と同様の処理に同一の符号を付している。

【0064】

図９に示すように、第５実施形態に係る情報処理システム１０が動作する際には、まず肌色情報取得部１１０が、対象の肌色情報を取得する（ステップＳ１０１）。そして、反射率取得部１２１が、肌色情報取得部１１０で取得された肌色情報に基づいて、対象の肌の反射率を取得する（ステップＳ５０１）。

【0065】

続いて、輝度情報推定部１２０が、反射率取得部１２１で取得された肌の反射率に基づいて、対象の肌の輝度情報を推定する（ステップＳ５０２）。そして、制御部１３０が、輝度情報推定部１２０で推定された輝度情報に基づいて、対象を撮像する際のカメラパラメータ及び照明１９の少なくとも一方を制御する（ステップＳ５０３）。

【0066】

（技術的効果）
次に、第５実施形態に係る情報処理システム１０によって得られる技術的効果について説明する。

【0067】

図８及び図９で説明したように、第５実施形態に係る情報処理システム１０では、肌の反射率に基づいて、対象の肌の輝度情報が推定される。このようにすれば、対象の肌の輝度情報を精度よく推定することができる。よって、より適切にカメラパラメータ及び照明１９の少なくとも一方を制御することが可能となる。

【0068】

＜第６実施形態＞
第６実施形態に係る情報処理システム１０について、図１０から図１２を参照して説明する。なお、第６実施形態は、上述した第５実施形態と一部の構成及び動作が異なるのみであり、その他の部分については第１から第５実施形態と同一であってよい。このため、以下では、すでに説明した各実施形態と異なる部分について詳細に説明し、その他の重複する部分については適宜説明を省略するものとする。

【0069】

（機能的構成）
まず、図１０を参照しながら、第６実施形態に係る情報処理システム１０の機能的構成について説明する。図１０は、第６実施形態に係る情報処理システムの機能的構成を示すブロック図である。なお、図１０では、図８で示した構成要素と同様の要素に同一の符号を付している。

【0070】

図１０に示すように、第６実施形態に係る情報処理システム１０は、その機能を実現するための構成要素として、肌色情報取得部１１０と、輝度情報推定部１２０と、制御部１３０と、反射率モデル記憶部１４０と、を備えて構成されている。即ち、第６実施形態に係る情報処理システム１０は、第５実施形態の構成（図８参照）に加えて、反射率モデル記憶部１４０を更に備えている。反射率モデル記憶部１４０は、例えば上述した記憶装置１４（図１参照）によって実現されるものであってよい。

【0071】

反射率モデル記憶部１４０は、肌色情報取得部１１０で取得した肌色情報から肌の反射率を算出する反射率モデルを記憶可能に構成されている。反射率モデルは、例えば複数の生体から取得したデータに基づいて予め生成されるものであってよい。また、反射率モデルは、機械学習によって生成されたモデルであってよい。反射率モデルの具体例については、後に詳しく説明する。なお、第６実施形態に係る反射率取得部１２１は、反射率モデル記憶部１４０から読み出した反射率モデルを用いて、肌の反射率を算出可能に構成されている。

【0072】

（動作の流れ）
次に、図１１を参照しながら、第６実施形態に係る情報処理システム１０による動作の流れについて説明する。図１１は、第６実施形態に係る情報処理システムによる動作の流れを示すフローチャートである。なお、図１１では、図９で示した処理と同様の処理に同一の符号を付している。

【0073】

図１１に示すように、第６実施形態に係る情報処理システム１０が動作する際には、まず肌色情報取得部１１０が、対象の肌色情報を取得する（ステップＳ１０１）。そして、反射率取得部１２１が、反射率モデル記憶部１４０に記憶された反射率モデルを用いて、対象の肌の反射率を算出する（ステップＳ６０１）。即ち、反射率取得部１２１は、肌色情報と反射率モデルとに基づいて、対象の肌の反射率を算出する。

【0074】

続いて、輝度情報推定部１２０が、反射率取得部１２１で算出された肌の反射率に基づいて、対象の肌の輝度情報を推定する（ステップＳ５０２）。そして、制御部１３０が、輝度情報推定部１２０で推定された輝度情報に基づいて、対象を撮像する際のカメラパラメータ及び照明１９の少なくとも一方を制御する（ステップＳ５０３）。

【0075】

（反射率の算出例）
次に、図１２を参照しながら、第６実施形態に係る情報処理システム１０による肌の反射率の算出例（即ち、反射率モデルを用いた算出例）について具体的に説明する。図１２は、第６実施形態に係る情報処理システムによって算出される肌の反射率の一例を示すグラフである。なお、図１２に示すグラフの縦軸は「肌の反射率」、横軸は「（光の）波長」である。

【0076】

まず、肌色情報取得部１１０が、肌色情報として対象の顔画像（可視光画像）から、平均ＲＧＢ値を取得しているとする。なお、ＲＧＢ値にガンマ補正がかかっている場合は、デガンマ処理によってγ＝１．０の場合のＲＧＢ値を算出するようにしてもよい。

【0077】

反射率取得部１２１は、上述したＲＧＢ値から三刺激値ＸＹＺを計算する。三刺激値ＸＹＺは、例えば下記式（１）を用いて算出できる。

【0078】

【数1】

なお、変換行列ａｉｊは、標準ＲＧＢ空間ｓＲＧＢで定義されている行列を利用してよい。

【0079】

続いて、反射率取得部１２１は、計算した三刺激値ＸＹＺから、肌の反射率Ｓ（λ）を推定する。具体的には、下記式（２）を用いて、特性パラメータ（ａ、ｂ、ｃ）を計算する。

【0080】

【数2】

なお、上記式（２）におけるsｉ（λ）は基底ベクトル（ｉ＝１～３）、ｓ０（λ）は平均ベクトル、ｘ（λ）、ｙ（λ）、ｚ（λ）は等色関数、ｄ６５（λ）は、標準白色Ｄ６５の分光分布であり、それぞれ既知の情報である。

【0081】

続いて、反射率取得部１２１は、計算した特性パラメータ（ａ、ｂ、ｃ）を反射率モデルに代入することで肌の反射率を求める。具体的には、特性パラメータ（ａ、ｂ、ｃ）を下記式（３）に代入することで、反射率Ｓ（λ）が求められる。肌の反射率Ｓ（λ）は、図１２に示すように、可視光領域から近赤外光領域まで求められてよい。

【0082】

（技術的効果）
次に、第６実施形態に係る情報処理システム１０によって得られる技術的効果について説明する。

【0083】

図１０から図１２で説明したように、第６実施形態に係る情報処理システム１０では、反射率モデルを用いて対象の肌の反射率が算出される。このようにすれば、肌の反射率を容易かつ的確に算出できる。よって、肌の輝度情報を精度よく推定することができ、より適切にカメラパラメータ及び照明１９の少なくとも一方を制御することが可能となる。特に、第６実施形態に係る情報処理システム１０では、顔と虹彩によるマルチモーダル認証において、顔を撮影するカメラが可視光で撮影し、虹彩を撮影するカメラが近赤外光で撮影する場合、可視光領域で撮像された顔画像より取得する肌色情報から、近赤外光領域での肌の輝度情報を得ることができ、この近赤外光領域での輝度情報に基づくことで、虹彩を撮像するカメラのカメラパラメータおよび照明の少なくとも一方を適切に制御することができる。

【0084】

＜第７実施形態＞
第７実施形態に係る情報処理システム１０について、図１３及び図１４を参照して説明する。なお、第７実施形態は、上述した第１から第６実施形態と一部の構成及び動作が異なるのみであり、その他の部分については第１から第６実施形態と同一であってよい。このため、以下では、すでに説明した各実施形態と異なる部分について詳細に説明し、その他の重複する部分については適宜説明を省略するものとする。

【0085】

（機能的構成）
まず、図１３を参照しながら、第７実施形態に係る情報処理システム１０の機能的構成について説明する。図１３は、第７実施形態に係る情報処理システムの機能的構成を示すブロック図である。なお、図１３では、図２で示した構成要素と同様の要素に同一の符号を付している。

【0086】

図１３に示すように、第７実施形態に係る情報処理システム１０は、その機能を実現するための構成要素として、肌色情報取得部１１０と、輝度情報推定部１２０と、制御部１３０と、移動量検出部１５０と、を備えて構成されている。即ち、第７実施形態に係る情報処理システム１０は、第１実施形態の構成（図２参照）に加えて、移動量検出部１５０を更に備えている。

【0087】

移動量検出部１５０は、対象の移動量を検出可能に構成されている。より具体的には、移動量検出部１５０は、対象の単位時間あたりの移動量（言い換えれば、移動速度）を検出可能に構成されてよい。移動量検出部１５０は、各種センサを用いて対象の移動量を検出するように構成されてよい。或いは、移動量検出部１５０は、対象の画像を複数枚撮像し、それらの画像の差分（具体的には、画像における対象の位置の変化）に基づいて、対象の移動量を検出してもよい。移動量検出部１５０で検出された対象の移動量は、制御部１３０に出力される構成となっている。

【0088】

第７実施形態に係る制御部１３０は、輝度情報推定部１２０で推定された輝度情報に加えて、移動量検出部１５０で検出された移動量に基づいて、カメラパラメータ及び照明１９の少なくとも一方を制御可能に構成されている。制御部１３０は、例えば検出された対象の移動量に応じて制御量を変更するようにしてもよい。即ち、対象の移動量の大小に応じて、カメラパラメータや照明１９の制御量を大きくしたり、小さくしたりしてよい。また、制御部１３０は、検出された対象の移動量に応じて、制御するパラメータの種類を変更するようにしてもよい。例えば、対象の移動量が大きい場合には、シャッタースピード（露光時間）を長くするのは好ましくない（ブレが生じるおそれがある）ため、その他のパラメータを制御するようにしてもよい。また、対象の移動量が大きい場合には、シャッタースピードを短くしつつ、照明１９の光量を強くするように制御してもよい。また、対象の移動量が小さい場合には、シャッタースピードを長くしつつ、照明１９の光量を弱くするように制御してもよい。

【0089】

（動作の流れ）
次に、図１４を参照しながら、第７実施形態に係る情報処理システム１０による動作の流れについて説明する。図１４は、第７実施形態に係る情報処理システムによる動作の流れを示すフローチャートである。なお、図１４では、図３で示した処理と同様の処理に同一の符号を付している。

【0090】

図１４に示すように、第７実施形態に係る情報処理システム１０が動作する際には、まず肌色情報取得部１１０が、対象の肌色情報を取得する（ステップＳ１０１）。そして、輝度情報推定部１２０が、肌色情報取得部１１０で取得された肌色情報に基づいて、対象の肌の輝度情報を推定する（ステップＳ１０２）。

【0091】

続いて、移動量検出部１５０が、対象の移動量を検出する（ステップＳ７０１）。なお、移動量の検出は、上述したステップＳ１０１及びＳ１０２と相前後して実行されてもよいし、同時に並行して実行されてもよい。

【0092】

その後、制御部１３０が、輝度情報推定部１２０で推定された輝度情報と、移動量検出部で検出された移動量と、に基づいて対象を撮像する際のカメラパラメータ及び照明１９の少なくとも一方を制御する（ステップＳ２７０２）。

【0093】

（技術的効果）
次に、第７実施形態に係る情報処理システム１０によって得られる技術的効果について説明する。

【0094】

図１３及び図１４で説明したように、第７実施形態に係る情報処理システム１０では、対象の移動量を考慮して、対象を撮像する際のカメラパラメータ及び照明１９の少なくとも一方が制御される。このようにすれば、対象の移動量を考慮しない場合と比較して、より適切にカメラパラメータ及び照明１９の少なくとも一方を制御することができる。

【0095】

＜第８実施形態＞
第８実施形態に係る情報処理システム１０について、図１５を参照して説明する。なお、第８実施形態は、上述した第１から第７実施形態と一部の動作が異なるのみであり、その他の部分については第１から第７実施形態と同一であってよい。このため、以下では、すでに説明した各実施形態と異なる部分について詳細に説明し、その他の重複する部分については適宜説明を省略するものとする。

【0096】

（動作の流れ）
まず、図１５を参照しながら、第８実施形態に係る情報処理システム１０による動作の流れについて説明する。図１５は、第８実施形態に係る情報処理システムによる動作の流れを示すフローチャートである。なお、図１５では、図３で示した処理と同様の処理に同一の符号を付している。

【0097】

図１５に示すように、第８実施形態に係る情報処理システム１０が動作する際には、まず肌色情報取得部１１０が、対象の肌色情報を取得する（ステップＳ１０１）。そして、輝度情報推定部１２０が、肌色情報取得部１１０で取得された肌色情報に基づいて、対象の肌の輝度情報を推定する（ステップＳ１０２）。

【0098】

続いて、制御部１３０が、輝度情報推定部１２０で推定された輝度情報に基づいて、対象を撮像する際のカメラパラメータ及び照明１９の少なくとも一方を制御する（ステップＳ８０１）。そして、本実施形態に係る情報処理システム１０では特に、制御後に実行する撮像ですべての撮像が終了するか否かを判定する（ステップＳ８０２）。即ち、現在の対象の撮像を終了するのか、それとも更に現在の対象の画像を撮像し続けるのかが判定される。対象の撮像を終了するか否かは、これまでに撮像した画像の枚数（例えば、撮像枚数が所定枚数に達しているか否か）や、対象の位置（例えば、対象が撮像範囲外に移動したか否か）によって判定してもよい。

【0099】

対象の撮像を終了すると判定した場合（ステップＳ８０２：ＹＥＳ）、そのまま一連の動作が終了することになる。一方で、対象の撮像を終了しないと判定した場合（ステップＳ８０２：ＮＯ）、再びステップＳ１０１から処理が開始される。これにより、対象の画像を複数枚撮像する場合には、撮像するごとにカメラパラメータ及び照明１９の少なくとも一方が制御されることになる。例えば、対象がカメラ１８に対して近づくように移動してくる場合、対象が近づくにつれて、シャッタースピードを短くするように制御してもよい。また、そのような場合には、シャッタースピードが短くなることによる影響を小さくするために、照明１９を徐々に明るくするように制御してもよい。

【0100】

（技術的効果）
次に、第８実施形態に係る情報処理システム１０によって得られる技術的効果について説明する。

【0101】

図１５で説明したように、第８実施形態に係る情報処理システム１０では、撮像ごとにカメラパラメータ及び照明１９の少なくとも一方が制御される。このようにすれば、状況に応じて随時制御が行われるため、より適切な条件で対象を撮像することが可能となる。

【0102】

＜第９実施形態＞
第９実施形態に係る情報処理システム１０について、図１６を参照して説明する。なお、第９実施形態は、上述した第８実施形態の制御動作の具体例を説明するものであり、その他の部分については第１から第７実施形態と同一であってよい。このため、以下では、すでに説明した各実施形態と異なる部分について詳細に説明し、その他の重複する部分については適宜説明を省略するものとする。

【0103】

（制御動作例）
まず、図１６を参照しながら、第９実施形態に係る情報処理システム１０による制御動作（即ち、カメラパラメータ及び照明の制御）の具体例について説明する。図１６は、第９実施形態に係る情報処理システムによる制御動作の一例を示す表である。

【0104】

図１６に示すように、第９実施形態に係る情報システム１０では、制御部１３０が、輝度情報推定部１２０で推定された輝度情報に基づいて、カメラ１８の露光時間（シャッタースピード）と照明１９とを制御する。具体的には、第９実施形態に係る制御部１３０は、露光時間を短くすると共に照明１９を明るくする第１制御と、露光時間を長くすると共に照明１９を暗くする第２制御と、を実行可能とされている。第１制御では、露光時間を短くすることによる画像への影響を考慮して、画像が暗くなり過ぎように照明１９の明るさが制御されてよい。第２制御では、露光時間を長くすることによる画像への影響を考慮して、画像が明るくなり過ぎないように照明１９の明るさが制御されてよい。なお、照明１９の明るさについては、上述した他の実施形態で説明したように、光量を調整する他、照明１９の向きや光るタイミングを調整することによって制御されてよい。

【0105】

第１制御及び第２制御は、撮像ごとに実行される。このため、撮像ごとに第１制御が実行されると、撮像が進むにつれて露光時間が徐々に短くなっていく一方で、照明１９が徐々に明るくなるように制御される。また、撮像ごとに第２制御が実行されると、撮像が進むにつれて露光時間が徐々に長くなっていく一方で、照明１９が徐々に暗くなるように制御される。なお、第１制御及び第２制御のいずれを実行するかは、撮像の途中で変更されてよい。例えば、第１制御が実行された後に、第２制御が実行されてもよい。また、第２制御が実行された後に、第１制御が実行されてもよい。第１制御と第２制御とを切り替えるタイミングは、例えば情報推定部１２０で推定された輝度情報によって決定されてもよい。

【0106】

（技術的効果）
次に、第９実施形態に係る情報処理システム１０によって得られる技術的効果について説明する。

【0107】

図１６で説明したように、第９実施形態に係る情報処理システム１０では、輝度情報に基づいて、カメラ１８の露光時間及び照明１９の明るさが制御される。このようにすれば、カメラパラメータ及び照明１９に対する協調制御が行われることになるため、より適切な条件で対象を撮像することが可能となる。

【0108】

上述した各実施形態の機能を実現するように該実施形態の構成を動作させるプログラムを記録媒体に記録させ、該記録媒体に記録されたプログラムをコードとして読み出し、コンピュータにおいて実行する処理方法も各実施形態の範疇に含まれる。すなわち、コンピュータ読取可能な記録媒体も各実施形態の範囲に含まれる。また、上述のプログラムが記録された記録媒体はもちろん、そのプログラム自体も各実施形態に含まれる。

【0109】

記録媒体としては例えばフロッピー（登録商標）ディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ－ＲＯＭ、磁気テープ、不揮発性メモリカード、ＲＯＭを用いることができる。また該記録媒体に記録されたプログラム単体で処理を実行しているものに限らず、他のソフトウェア、拡張ボードの機能と共同して、ＯＳ上で動作して処理を実行するものも各実施形態の範疇に含まれる。更に、プログラム自体がサーバに記憶され、ユーザ端末にサーバからプログラムの一部または全てをダウンロード可能なようにしてもよい。

【0110】

＜付記＞
以上説明した実施形態に関して、更に以下の付記のようにも記載されうるが、以下には限られない。

【0111】

（付記１）
付記１に記載の情報処理システムは、対象の肌の色に関する情報である肌色情報を取得する取得手段と、前記肌色情報に基づいて、前記対象の肌の輝度情報を推定する推定手段と、前記輝度情報に基づいて、前記対象を撮像する際の露光に関するカメラパラメータ及び照明の少なくとも一方を制御する制御手段と、を備える情報処理システムである。

【0112】

（付記２）
付記２に記載の情報処理システムは、前記制御手段は、前記対象の肌の輝度情報が第１閾値と第２閾値との間となるように、前記カメラパラメータ及び前記照明の少なくとも一方を制御する、付記１に記載の情報処理システムである。

【0113】

（付記３）
付記３に記載の情報処理システムは、前記推定手段は、前記肌色情報に応じた前記対象の肌の反射率に基づいて、前記輝度情報を推定する、付記１又は２に記載の情報処理システムである。

【0114】

（付記４）
付記４に記載の情報処理システムは、前記肌色情報から前記肌の反射率を算出する反射率モデルを記憶する記憶手段を更に備え、前記推定手段は、前記反射率モデルを用いて算出した前記肌の反射率に基づいて、前記輝度情報を推定する付記３に記載の情報処理システムである。

【0115】

（付記５）
付記５に記載の情報処理システムは、前記対象の移動量を検出する検出手段を更に備え、前記制御手段は、前記輝度情報と前記移動量とに基づいて、前記カメラパラメータ及び前記照明の少なくとも一方を制御する、付記１から４のいずれか一項に記載の情報処理システムである。

【0116】

（付記６）
付記６に記載の情報処理システムは、前記制御手段は、前記対象を複数回撮像する場合に、撮像ごとに前記カメラパラメータ及び前記照明の少なくとも一方を制御する、付記１から５のいずれか一項に記載の情報処理システムである。

【0117】

（付記７）
付記７に記載の情報処理システムは、前記制御手段は、前記輝度情報に基づいて、撮像ごとに前記対象を撮像する際の露光時間を短くすると共に前記照明を明るくする第１制御、又は、撮像ごとに前記対象を撮像する際の前記露光時間を長くすると共に前記照明を暗くする第２制御を行う、付記６に記載の情報処理システム。

【0118】

（付記８）
付記８に記載の情報処理装置は、対象の肌の色に関する情報である肌色情報を取得する取得手段と、前記肌色情報に基づいて、前記対象の肌の輝度情報を推定する推定手段と、前記輝度情報に基づいて、前記対象を撮像する際の露光に関するカメラパラメータ及び照明の少なくとも一方を制御する制御手段と、を備える情報処理装置である。

【0119】

（付記９）
付記９に記載の情報処理方法は、少なくとも１つのコンピュータが実行する情報処理方法であって、対象の肌の色に関する情報である肌色情報を取得し、前記肌色情報に基づいて、前記対象の肌の輝度情報を推定し、前記輝度情報に基づいて、前記対象を撮像する際の露光に関するカメラパラメータ及び照明の少なくとも一方を制御する、情報処理方法である。

【0120】

（付記１０）
付記１０に記載の記録媒体は、少なくとも１つのコンピュータに、対象の肌の色に関する情報である肌色情報を取得し、前記肌色情報に基づいて、前記対象の肌の輝度情報を推定し、前記輝度情報に基づいて、前記対象を撮像する際の露光に関するカメラパラメータ及び照明の少なくとも一方を制御する、情報処理方法を実行させるコンピュータプログラムが記録された記録媒体である。

【0121】

（付記１１）
付記１１に記載のコンピュータプログラムは、少なくとも１つのコンピュータに、対象の肌の色に関する情報である肌色情報を取得し、前記肌色情報に基づいて、前記対象の肌の輝度情報を推定し、前記輝度情報に基づいて、前記対象を撮像する際の露光に関するカメラパラメータ及び照明の少なくとも一方を制御する、情報処理方法を実行させるコンピュータプログラムである。

【0122】

この開示は、請求の範囲及び明細書全体から読み取ることのできる発明の要旨又は思想に反しない範囲で適宜変更可能であり、そのような変更を伴う情報処理システム、情報処理装置、情報処理方法、及び記録媒体もまたこの開示の技術思想に含まれる。

【符号の説明】

【0123】

１０ 情報処理システム
１１ プロセッサ
１８ カメラ
１９ 照明
１１０ 肌色情報取得部
１２０ 輝度情報推定部
１２１ 反射率取得部
１３０ 制御部
１３１ 閾値記憶部
１４０ 反射率モデル記憶部
１５０ 移動量検出部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】