特許 7444958 情報処理装置、及び制御方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B1)

(11)【特許番号】

(24)【登録日】2024-02-27

(45)【発行日】2024-03-06

(54)【発明の名称】情報処理装置、及び制御方法

(51)【国際特許分類】

   H04N 23/60 20230101AFI20240228BHJP

   H04N 23/741 20230101ALI20240228BHJP

【ＦＩ】

H04N23/60 500

H04N23/741

【請求項の数】 6

(21)【出願番号】P 2022197918

(22)【出願日】2022-12-12

【審査請求日】2022-12-12

(73)【特許権者】

【識別番号】505205731

【氏名又は名称】レノボ・シンガポール・プライベート・リミテッド

(74)【代理人】

【識別番号】100161207

【弁理士】

【氏名又は名称】西澤 和純

(74)【代理人】

【識別番号】100169764

【弁理士】

【氏名又は名称】清水 雄一郎

(74)【代理人】

【識別番号】100175824

【弁理士】

【氏名又は名称】小林 淳一

(74)【代理人】

【識別番号】100206081

【弁理士】

【氏名又は名称】片岡 央

(72)【発明者】

【氏名】柏山 英輝

(72)【発明者】

【氏名】和田 祐司

【審査官】吉田 千裕

(56)【参考文献】

【文献】特開２０１５－０１２５６７（ＪＰ，Ａ）

【文献】特開２０１８－０５６９４４（ＪＰ，Ａ）

【文献】特開２０１５－０９２６６０（ＪＰ，Ａ）

【文献】特開２０２０－１９８４７０（ＪＰ，Ａ）

【文献】特開２０１４－１７５７３４（ＪＰ，Ａ）

【文献】中国特許出願公開第１１０７０５３３６（ＣＮ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ２３／６０

Ｈ０４Ｎ ２３／７４１

(57)【特許請求の範囲】

【請求項1】

撮像素子に配列された複数の画素を用いて撮像した撮像画像のデータを出力する撮像部と、
前記撮像部から出力された撮像画像のデータを一時的に記憶するメモリと、
前記メモリに記憶された撮像画像のデータを用いて処理を実行する第１プロセッサ及び第２プロセッサと、
を備え、
前記第１プロセッサは、
前記撮像部を制御することにより、前記撮像素子に配列された複数の画素を予め設定された複数種類の画素群ごとに異なる撮像条件に制御して撮像させ、撮像された複数種類の画素群ごとの撮像画像のデータを用いて第１処理を実行し、
前記第２プロセッサは、
前記第１プロセッサの制御により前記撮像部により撮像された複数種類の画素群ごとの撮像画像のデータのうち１種類の画素群の撮像画像のデータを用いて第２処理を実行し、
前記第２処理として、複数種類の画素群ごとの撮像画像のデータのうち１種類の画素群の撮像画像のデータを用いて、当該撮像画像から人物の存在を検出する処理を実行し、
前記第２処理を繰り返し実行する際に、複数種類の画素群ごとの撮像画像のデータのうち前記第２処理に用いる撮像画像のデータの画素群の種類を切り替え、
前記第２処理において人物の存在を検出した場合、次に前記第２処理を実行する際に、人物の存在を検出した撮像画像のデータと同一種類の画素群の撮像画像のデータを用いる、
情報処理装置。

【請求項2】

前記第２プロセッサは、
前記第２処理において人物の存在を検出しなかった場合、次に前記第２処理を実行する際に、人物の存在を検出しなかった画素群の撮像画像のデータとは異なる種類の画素群の撮像画像のデータに切り替える、
請求項１に記載の情報処理装置。

【請求項3】

前記第１プロセッサは、
前記撮像部を制御することにより、複数種類の画素群ごとに異なる露光時間に制御して撮像させる、
請求項１または請求項２に記載の情報処理装置。

【請求項4】

前記第１プロセッサは、
前記第１処理として、異なる露光時間で撮像された複数種類の画素群ごとの撮像画像のデータを合成することによりダイナミックレンジを拡張した画像のデータを生成する、
請求項３に記載の情報処理装置。

【請求項5】

前記撮像素子には、マトリクス状に複数の画素が配列されており、
前記複数種類の画素群は、前記撮像素子に配列されている複数の画素のうち一又は複数の行単位の画素群である、
請求項１に記載の情報処理装置。

【請求項6】

撮像素子に配列された複数の画素を用いて撮像した撮像画像のデータを出力する撮像部と、前記撮像部から出力された撮像画像のデータを一時的に記憶するメモリと、前記メモリに記憶された撮像画像のデータを用いて処理を実行する第１プロセッサ及び第２プロセッサと、を備える情報処理装置における制御方法であって、
前記第１プロセッサが、
前記撮像部を制御することにより、前記撮像素子に配列された複数の画素を予め設定された複数種類の画素群ごとに異なる撮像条件に制御して撮像させるステップと、
撮像された複数種類の画素群ごとの撮像画像のデータを用いて第１処理を実行するステップと、
前記第２プロセッサが、
前記第１プロセッサの制御により前記撮像部により撮像された複数種類の画素群ごとの撮像画像のデータのうち１種類の画素群の撮像画像のデータを用いて第２処理を実行するステップと、
前記第２処理として、複数種類の画素群ごとの撮像画像のデータのうち１種類の画素群の撮像画像のデータを用いて、当該撮像画像から人物の存在を検出する処理を実行するステップと、
前記第２処理を繰り返し実行する際に、複数種類の画素群ごとの撮像画像のデータのうち前記第２処理に用いる撮像画像のデータの画素群の種類を切り替えるステップと、
前記第２処理において人物の存在を検出した場合、次に前記第２処理を実行する際に、人物の存在を検出した撮像画像のデータと同一種類の画素群の撮像画像のデータを用いるステップと、
を含む制御方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報処理装置、及び制御方法に関する。

【背景技術】

【0002】

カメラ（撮像部）が有する撮像素子は、露光時間を制御することにより、適切な明るさの画像を撮像する。暗い領域では露光時間を長くし、明るい領域では露光時間を短く設定することが一般的である。近年では、撮像素子に配列されている画素のラインによって露出（露光時間）を変更することにより、異なる露出の画像を合成してＨＤＲ（Ｈｉｇｈ Ｄｙｎａｍｉｃ Ｒａｎｇｅ）画像を生成できるものがある（例えば、非特許文献１参照）。

【0003】

また、カメラ（撮像部）で撮像した画像に対して画像処理を行うことにより撮像画像内の情報を検出して利用する技術（所謂、ＣＶ：Ｃｏｍｐｕｔｅｒ Ｖｉｓｉｏｎ）も一般的に使用されるようになってきている（例えば、特許文献１参照）。例えば、情報処理装置は、カメラで撮像した画像から顔検出技術または顔認識技術などを用いて人物の存在を検出するＨＰＤ（Ｈｕｍａｎ Ｐｒｅｓｅｎｃｅ Ｄｅｔｅｃｔｉｏｎ）処理を行うものがある。

【先行技術文献】

【特許文献】

【0004】

【文献】特開２０１９－１８５３４９号公報

【非特許文献】

【0005】

【文献】Vladimir Koifman/Atul Ingle、「Image Sensors World News and discussions about image sensors」、[online]、[令和４年１０月１９日検索]、インターネット＜ＵＲＬ：http://image-sensors-world.blogspot.com/2013/01/sony-explains-hdr-video-mode-in-its.html＞

【発明の概要】

【発明が解決しようとする課題】

【0006】

例えば、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）などの情報処理装置では、システムがカメラ機能を使用しているか否かに関わらず、上述したＨＰＤ処理を行う。システムがカメラ機能を使用している場合には、システムにより制御されたカメラ設定の撮像画像をＨＰＤ処理で用いることになる。例えば、システムがカメラ機能を使用してＨＤＲ画像を生成する場合、カメラ（撮像部）の撮像素子に配列されている画素のラインによって異なる露出（露光時間）に制御するため、ＨＰＤ処理で用いる撮像画像もラインによって露出（露光時間）が異なる画像となる。この場合、ＨＰＤ処理側でも、ラインによって露出（露光時間）が異なる画像からＨＤＲ画像を生成して人物の存在を検出するとなると、処理負荷及びコストへの影響が大きくなり好ましくない。

【0007】

本発明は、上記した事情に鑑みてなされたもので、処理負荷及びコストへの影響を抑えつつ、カメラ機能の使用状態に関わらず撮像画像を用いたＨＰＤ処理を適切に行うことができる情報処理装置、及び制御方法を提供することを目的の一つとする。

【課題を解決するための手段】

【0008】

本発明は上記の課題を解決するためになされたものであり、本発明の第１態様に係る情報処理装置は、撮像素子に配列された複数の画素を用いて撮像した撮像画像のデータを出力する撮像部と、前記撮像部から出力された撮像画像のデータを一時的に記憶するメモリと、前記メモリに記憶された撮像画像のデータを用いて処理を実行する第１プロセッサ及び第２プロセッサと、を備え、前記第１プロセッサは、前記撮像部を制御することにより、前記撮像素子に配列された複数の画素を予め設定された複数種類の画素群ごとに異なる撮像条件に制御して撮像させ、撮像された複数種類の画素群ごとの撮像画像のデータを用いて第１処理を実行し、前記第２プロセッサは、前記第１プロセッサの制御により前記撮像部により撮像された複数種類の画素群ごとの撮像画像のデータのうち１種類の画素群の撮像画像のデータを用いて第２処理を実行する。

【0009】

上記情報処理装置において、前記第２プロセッサは、前記第２処理として、複数種類の画素群ごとの撮像画像のデータのうち１種類の画素群の撮像画像のデータを用いて、当該撮像画像から人物の存在を検出する処理を実行してもよい。

【0010】

上記情報処理装置において、前記第２プロセッサは、前記第２処理を繰り返し実行する際に、複数種類の画素群ごとの撮像画像のデータのうち前記第２処理に用いる撮像画像のデータの画素群の種類を切り替えてもよい。

【0011】

上記情報処理装置において、前記第２プロセッサは、前記第２処理において人物の存在を検出した場合、次に前記第２処理を実行する際に、人物の存在を検出した撮像画像のデータと同一種類の画素群の撮像画像のデータを用いてもよい。

【0012】

上記情報処理装置において前記第２プロセッサは、前記第２処理において人物の存在を検出しなかった場合、次に前記第２処理を実行する際に、人物の存在を検出しなかった画素群の撮像画像のデータとは異なる種類の画素群の撮像画像のデータに切り替えてもよい。

【0013】

上記情報処理装置において、前記第１プロセッサは、前記撮像部を制御することにより、複数種類の画素群ごとに異なる露光時間に制御して撮像させてもよい。

【0014】

上記情報処理装置において、前記第１プロセッサは、前記第１処理として、異なる露光時間で撮像された複数種類の画素群ごとの撮像画像のデータを合成することによりダイナミックレンジを拡張した画像のデータを生成してもよい。

【0015】

上記情報処理装置において、前記撮像素子には、マトリクス状に複数の画素が配列されており、前記複数種類の画素群は、前記撮像素子に配列されている複数の画素のうち一又は複数の行単位の画素群であってもよい。

【0016】

また、本発明の第２態様に係る、撮像素子に配列された複数の画素を用いて撮像した撮像画像のデータを出力する撮像部と、前記撮像部から出力された撮像画像のデータを一時的に記憶するメモリと、前記メモリに記憶された撮像画像のデータを用いて処理を実行する第１プロセッサ及び第２プロセッサと、を備える情報処理装置における制御方法は、前記第１プロセッサが、前記撮像部を制御することにより、前記撮像素子に配列された複数の画素を予め設定された複数種類の画素群ごとに異なる撮像条件に制御して撮像させるステップと、撮像された複数種類の画素群ごとの撮像画像のデータを用いて第１処理を実行するステップと、前記第２プロセッサが、前記第１プロセッサの制御により前記撮像部により撮像された複数種類の画素群ごとの撮像画像のデータのうち１種類の画素群の撮像画像のデータを用いて第２処理を実行するステップと、を含む。

【発明の効果】

【0017】

本発明の上記態様によれば、処理負荷及びコストへの影響を抑えつつ、カメラ機能の使用状態に関わらず撮像画像を用いたＨＰＤ処理を適切に行うことができる。

【図面の簡単な説明】

【0018】

【図1】第１の実施形態に係る情報処理装置の外観を示す斜視図。

【図2】第１の実施形態に係る情報処理装置の人物の検出範囲の一例を示す図。

【図3】第１の実施形態に係る情報処理装置のＨＰＤ処理の概要を説明する図。

【図4】第１の実施形態に係る撮像素子における露光時間の制御を説明する模式図。

【図5】第１の実施形態に係るＨＰＤ処理における検出用画像の生成方法を説明する模式図。

【図6】第１の実施形態に係る情報処理装置の構成の一例を示すブロック図。

【図7】第１の実施形態に係るＨＰＤ処理の一例を示すフローチャート。

【図8】第２の実施形態に係るＨＰＤ処理におけるラインの切り替え処理の一例を示すフローチャート。

【発明を実施するための形態】

【0019】

以下、図面を参照して、本発明の実施形態について説明する。
＜第１の実施形態＞
まず、本発明の第１の実施形態について説明する。
本実施形態に係る情報処理装置１は、例えば、ノートブック型のＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ；パーソナルコンピュータ）である。なお、情報処理装置１は、デスクトップ型ＰＣ、タブレット端末装置、スマートフォンなど、いずれの形態の情報処理装置であってもよい。

【0020】

図１は、本実施形態に係る情報処理装置の外観を示す斜視図である。図示する情報処理装置１は、クラムシェル型のノートＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）である。情報処理装置１は、第１筐体１０１、第２筐体１０２、及びヒンジ機構１０３を備えている。第１筐体１０１及び第２筐体１０２は、略四角形の板状（例えば、平板状）の筐体である。第１筐体１０１の側面の一つと第２筐体１０２の側面の一つとがヒンジ機構１０３を介して結合（連結）されており、ヒンジ機構１０３がなす回転軸の周りに第１筐体１０１と第２筐体１０２とが相対的に回動可能である。

【0021】

第１筐体１０１と第２筐体１０２との回転軸の周りの開き角θ（ヒンジ角度）が略０°の状態が、第１筐体１０１と第２筐体１０２とが重なり合って閉じた状態（「閉状態」と称する）である。閉状態において第１筐体１０１と第２筐体１０２との互いに対面する側の面を、それぞれの「内面」と呼び、内面に対して反対側の面を「外面」と称する。開き角θとは、第１筐体１０１の内面と第２筐体１０２の内面とがなす角とも言うことができる。閉状態に対して第１筐体１０１と第２筐体１０２とが開いた状態のことを「開状態」と称する。開状態とは、開き角θが予め設定された閾値（例えば、１０°）より大きくなるまで、第１筐体１０１と第２筐体１０２とが相対的に回動された状態である。なお、一般的な情報処理装置１の使用状態では、開き角θは、例えば９０°～１４０°程度となることが多い。

【0022】

第１筐体１０１の内面には、表示部１４０が設けられている。表示部１４０は、情報処理装置１において実行される処理に基づく画像を表示する。また、第２筐体１０２の内面には、キーボード１３０が設けられている。キーボード１３０は、ユーザの操作を受け付ける入力デバイスとして設けられている。閉状態では、表示部１４０が視認できない状態、且つキーボード１３０への操作ができない状態となる。一方、開状態では、表示部１４０が視認可能な状態、且つキーボード１３０への操作が可能な状態（即ち、情報処理装置１を使用可能な状態）となる。

【0023】

また、第１筐体１０１の内面のうち表示部１４０の周縁の領域に、カメラ１１０が設けられている。カメラ１１０は、第１筐体１０１の内面（表示部１４０の表示画面）に対面する方向を撮像可能な位置に設けられている。即ち、カメラ１１０は、情報処理装置１を使用するユーザを撮像可能な位置に設けられている。例えば、情報処理装置１は、カメラ１１０が撮像画像から人物を検出することにより、情報処理装置１を使用するユーザの存在の有無を検出する。

【0024】

図２は、本実施形態に係る情報処理装置１の人物の検出範囲の一例を示す図である。図示する例において、第１筐体１０１の内面に対面する方向の検出範囲ＦｏＶ（Ｆｉｅｌｄ ｏｆ Ｖｉｅｗ：検出視野角）が、人物の検出が可能な範囲である。検出範囲ＦｏＶは、カメラ１１０が撮像する画角に相当する。以下では、開状態において第１筐体１０１の内面に対面する方向を、情報処理装置１の前方と称する。情報処理装置１は、カメラ１１０が撮像する撮像画像から人物または人物の顔が撮像された画像領域を検出することにより、情報処理装置１の前方に人物が存在するか否かを検出する。ここで、人物の存在を検出する処理のことを、ＨＰＤ（Ｈｕｍａｎ Ｐｒｅｓｅｎｃｅ Ｄｅｔｅｃｔｉｏｎ）処理と称する。

【0025】

また、情報処理装置１は、ＨＰＤ処理による人物の存在の検出結果に基づいて、システムの動作状態を制御する。システムの動作状態としては、少なくとも通常動作状態（パワーオン状態）と待機状態とがある。通常動作状態とは、特に制限なく処理の実行が可能な動作状態であり、例えば、ＡＣＰＩ（Ａｄｖａｎｃｅｄ Ｃｏｎｆｉｇｕｒａｔｉｏｎ ａｎｄ Ｐｏｗｅｒ Ｉｎｔｅｒｆａｃｅ）で規定されているＳ０状態に相当する。待機状態とは、システム処理の少なくとも一部が制限されている状態である。例えば、待機状態は、スタンバイ状態、スリープ状態等であってもよく、Ｗｉｎｄｏｗｓ（登録商標）におけるモダンスタンバイや、ＡＣＰＩで規定されているＳ３状態（スリープ状態）等に相当する状態であってもよい。また、待機状態には、少なくとも表示部の表示がＯＦＦ（画面ＯＦＦ）となる状態、または画面ロックとなる状態が含まれてもよい。画面ロックとは、処理中の内容が視認できないように予め設定された画像（例えば、画面ロック用の画像）が表示部に表示され、ロックを解除（例えば、ユーザ認証）するまで、使用できない状態である。

【0026】

図３は、本実施形態に係る情報処理装置１のＨＰＤ処理の概要を説明する図である。情報処理装置１は、ＨＰＤ処理により人物の存在の有無を検出し、検出結果に基づいて情報処理装置１のシステムの動作状態を制御する。例えば図３（Ａ）に示すように、情報処理装置１は、待機状態において、情報処理装置１の前方に人物が存在しない状態（Ａｂｓｅｎｃｅ）から存在する状態（Ｐｒｅｓｅｎｃｅ）への変化、即ち情報処理装置１へ人物が接近したこと（Ａｐｐｒｏａｃｈ）を検出した場合、自動でシステムを起動して通常動作状態へ遷移させる。また図３（Ｂ）に示すように、情報処理装置１は、通常動作状態において情報処理装置１の前方に人物が存在している状態（Ｐｒｅｓｅｎｃｅ）を検出している場合、通常動作状態を継続させる。そして図３（Ｃ）に示すように、情報処理装置１は、通常動作状態において情報処理装置１の前方に人物が存在している状態（Ｐｒｅｓｅｎｃｅ）から存在しない状態（Ａｂｓｅｎｃｅ）への変化、即ち情報処理装置１から人物が離脱したこと（Ｌｅａｖｅ）を検出した場合には、自動でシステムを待機状態へ遷移させる。

【0027】

カメラ１０は、上述のＨＰＤ処理にも使用されるが、システムによるカメラ機能として静止画または動画などの撮像画像（撮影画像）を得るためにも使用される。カメラ１０に備えられている撮像素子（イメージセンサ）は、露光時間を制御（例えば、電子シャッター制御）することにより、適切な明るさの画像を撮像することができる。暗い場面では長い露光時間に制御し、明るい場面では短い露光時間に制御することが一般的である。また、カメラ１０に備えられている撮像素子は、撮像素子に配列された複数の画素を２種類の画素群に分けて異なる２種類の露光時間で撮像して合成することによりＨＤＲ（Ｈｉｇｈ Ｄｙｎａｍｉｃ Ｒａｎｇｅ）画像を生成できる。

【0028】

図４は、本実施形態に係る撮像素子における露光時間の制御を説明する模式図である。この図は、撮像素子１１２に配列された複数の画素の一部を図示している。撮像素子１１２には、Ｒ（赤）の波長帯を透過するカラーフィルタが設けられたＲ画素、Ｇ（緑）の波長帯を透過するカラーフィルタが設けられたＧ画素、およびＢ（青）の波長帯を透過するカラーフィルタが設けられたＢ画素がマトリクス状に配列されている。撮像素子１１２は、ＲＧＢのカラーフィルタを介して入射される可視光を光電変換したＲＧＢ画像（可視光画像）信号を出力する。

【0029】

例えば、撮像素子１１２は、Ｒ画素－Ｇ画素のＲＧ列とＧ画素－Ｂ画素のＧＢ列とが交互に繰り返されるベイヤ配列のイメージセンサである。隣接するＲＧ列とＧＢ列との組みが行単位で１ラインの画素群を構成する。ＨＤＲ画像の生成を行わない通常撮影時には、撮像素子１１２に配列された複数の画素は同一の露光時間に制御される。図４の（Ａ）は、低照度の条件（暗い場面）の通常撮影であり、長い露光時間に制御されることを示している。図４の（Ｂ）は、標準的な照度の条件（通常の明るさの場面）の通常撮影であり、図４の（Ａ）に対して短い露光時間に制御されることを示している。

【0030】

一方、ＨＤＲ画像を生成する際には、図４（Ｃ）に示すように、１ラインごとに（１行単位で）異なる２種類の露光時間に制御される。例えば、奇数ラインは、明るい部分に優先して露出を合わせるように短い露光時間に制御される。偶数ラインは、暗い部分に優先して露出を合わせるように長い露光時間に制御される。短い露光時間の奇数ラインで撮像された画像と長い露光時間の偶数ラインで撮像された画像とを合成することにより、ＨＤＲ画像を生成できる。

【0031】

ここで、システムがカメラ機能としてカメラ１０を使用しているか否かにかかわらず、ＨＰＤ処理を行うには、上述のカメラ１０がＨＤＲ画像の生成のためにラインごとに異なる２種類の露光時間に制御される場合がある。ラインごとに露光時間が異なる画像のままではＨＰＤ処理において人物の検出ができない。仮に、ＨＰＤ処理でもラインごとに露光時間が異なる画像を合成してＨＤＲ画像を生成するとなると、処理負荷及びコストへの影響が大きくなってしまう。そこで、本実施形態に係るＨＰＤ処理では、奇数ラインで撮像された画像と偶数ラインで撮像された画像とのいずれか一方のみを用いて人物検出用の画像を生成する。

【0032】

図５は、本実施形態に係るＨＰＤ処理における検出用画像の生成方法を説明する模式図である。例えば、ＨＰＤ処理では、フレームごとに奇数ラインで撮像された画像と偶数ラインで撮像された画像とのいずれか一方のみを用いて検出用画像を生成し、フレームごとに奇数ラインと偶数ラインとを交互に切り替える。図示する例では、Ｎフレーム（Ｎは正の整数）では奇数ラインで撮像された画像のみを用いて検出用画像を生成し、Ｎ＋１フレームでは偶数ラインで撮像された画像のみを用いて検出用画像を生成し、Ｎ＋２フレームでは奇数ラインで撮像された画像のみを用いて検出用画像を生成し、Ｎ＋３フレームでは偶数ラインで撮像された画像のみを用いて検出用画像を生成する。以降もフレームごとに奇数ラインと偶数ラインとを交互に切り替える。

【0033】

これにより、検出用画像としては、同一の露光時間に制御された画像で撮像された画像となるため人物の検出が可能である。また、奇数ラインと偶数ラインとで露光時間が異なるため、明るい場面では露光時間の短い奇数ラインの方が偶数ラインより人物の検出に適しており、暗い場面では露光時間の長い偶数ラインの方が奇数ラインより人物の検出に適している。情報処理装置１の前方に人物が存在する場合、その場面の明るさによって、奇数ラインによる検出用画像と偶数ラインによる検出用画像とのいずれか一方又は両方で人物を検出することが可能である。

【0034】

なお、検出用画像は、奇数ラインと偶数ラインのいずれか一方のみを用いて１ラインごとに間引かれた画像となるため、両方のライン（全ライン）を用いた画像に比較すると解像度は低くなる。しかし、人物の検出は、人物や顔のアウトライン、顔の目などを検出できればよいため、一般的な使用される撮像素子の画素数からすると問題なく検出可能である。

【0035】

例えば、情報処理装置１は、システムがカメラ機能としてカメラ１０を使用しているか否かにかかわらず、奇数ラインで撮像された画像と偶数ラインで撮像された画像とのいずれか一方のみを用いてＨＰＤ処理を行う。これにより、情報処理装置１は、システムがカメラ機能やＨＤＲ機能を使用しているか否かを意識することなく、且つＨＤＲ画像を生成する処理負荷及びコストをかけることなく、撮像画像を用いたＨＰＤ処理を適切に行うことができる。

【0036】

また、情報処理装置１は、ＨＰＤ処理を繰り返し実行する際に、実行するごと（例えばフレームごと）に奇数ラインと偶数ラインとを交互に切り替えるため、奇数ラインと偶数ラインとのいずれか一方の露出が適正できないことによって人物の検出ができない場合でも、他方で人物の検出が可能である。

【0037】

次に、本実施形態に係る情報処理装置１の構成について詳しく説明する。
［情報処理装置の構成］
図６は、本実施形態に係る情報処理装置１の構成の一例を示すブロック図である。この図において、図１、２の各部に対応する構成には同一の符号を付している。情報処理装置１は、カメラ１１０と、ＨＰＤ処理部１２０と、キーボード１３０と、表示部１４０と、システム処理部１５０と、記憶部１６０と、ＥＣ１７０と、電源回路１８０と、バッテリ１９０とを備えている。

【0038】

カメラ１１０は、レンズ１１１および撮像素子１１２を備えている。撮影対象からの光がレンズ１１１により集光されて撮像素子１１２へ入射される。撮像素子１１２は、図４及び図５を参照して説明したように、例えばＲ画素、Ｇ画素、及びＢ画素が配列されたイメージセンサである。カメラ１１０は、撮影対象からレンズ１１１を介して撮像素子１１２へ入射された光に基づいて撮像した撮像画像（ＲＧＢ画像）のデータを出力する。

【0039】

ＨＰＤ処理部１２０は、カメラ１１０により撮像された撮像画像に対して画像処理を行うことにより撮像画像内の情報を検出して利用する、所謂ＣＶ（Ｃｏｍｐｕｔｅｒ Ｖｉｓｉｏｎ）の処理を実行するプロセッサの一例である。例えば、ＨＰＤ処理部１２０は、カメラ１１０により撮像された撮像画像のデータを用いて人物の存在を検出するＨＰＤ処理を実行し、検出結果をシステム処理部１５０へ送信する。

【0040】

具体的には、ＨＰＤ処理部１２０は、カメラ１１０により撮像された複数種類の画素群ごとの撮像画像のデータのうち１種類の画素群の撮像画像のデータを用いてＨＰＤ処理を実行する。一例として、複数種類の画素群は、撮像素子１１２に配列されている複数の画素のうち一又は複数のラインごと（行単位）の画素群である。例えば図５を参照して説明したように、ＨＰＤ処理部１２０は、奇数ラインの画素群により撮像された画像と、偶数ラインの画素群により撮像された画像とのいずれか一方のみを用いて人物検出用の検出用画像を生成する。そして、ＨＰＤ処理部１２０は、生成した検出用画像から人物または人物の顔が撮像された画像領域を検出することによりＨＰＤ処理を実行する。また、ＨＰＤ処理部１２０は、フレームごとに奇数ラインと偶数ラインとを交互に切り替えて検出用画像を生成し、生成した検出用画像を用いてＨＰＤ処理を実行する。

【0041】

キーボード１３０は、ユーザの操作を受け付ける複数のキー（操作子）が配列された入力デバイスである。キーボード１３０は、図１に示すように、第２筐体１０２の内面に設けられている。キーボード１３０は、ユーザの操作により入力された入力情報（例えば、操作されたキーを示す操作信号）をＥＣ１７０へ出力する。

【0042】

表示部１４０は、例えば、液晶ディスプレイや有機ＥＬ（Ｅｌｅｃｔｒｏ Ｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイを含んで構成され、システム処理部１５０が実行する処理に基づく表示画像を表示する。

【0043】

システム処理部１５０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１５１、ＧＰＵ（Ｇｒａｐｈｉｃ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１５２、メモリコントローラ１５３、Ｉ／Ｏ（Ｉｎｐｕｔ－Ｏｕｔｐｕｔ）コントローラ１５４、システムメモリ１５５と、画像処理部１５６とを備えている。

【0044】

ＣＰＵ１５１は、ＢＩＯＳおよびＯＳなどのシステムによる処理や、ＯＳ上で動作するアプリケーションプログラムによる処理を実行する。例えば、ＣＰＵ１５１は、ＨＰＤ処理部１２０による人物の存在の検出結果に基づいて、システムの動作状態を制御する。
ＧＰＵ１５２は、ＣＰＵ１５１の制御に基づいて表示部１４０に表示させる表示画像のデータを生成し、生成した表示画像のデータを表示部１４０に出力する。

【0045】

メモリコントローラ１５３は、ＣＰＵ１５１とＧＰＵ１５２の制御により、システムメモリ１５５または記憶部１６０からのデータの読出しや書込みを制御する。
Ｉ／Ｏコントローラ１５４は、表示部１４０およびＥＣ１７０からのデータの入出力を制御する。
システムメモリ１５５は、プロセッサの実行プログラムの読み込み領域ならびに処理データを書き込む作業領域として用いられる。また、システムメモリ１５５は、カメラ１１０により撮像された撮像画像のデータ、撮像画像に対して画像処理が行われたデータなどを一時的に記憶する。

【0046】

画像処理部１５６は、カメラ１１０を制御することにより、所定の撮像条件で撮像された撮像画像のデータを取得し、取得した撮像画像のデータに対して画像処理を実行するＩＰＵ（Ｉｍａｇｅ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）の一例である。例えば、画像処理部１５６は、通常撮影時には、撮像素子１１２に配列された複数の画素を同一の撮像条件（例えば、同一の露光時間）に制御して撮像させ、撮像された撮像画像のデータを用いて１枚の撮影画像を生成する画像処理を行う。

【0047】

一方、画像処理部１５６は、ＨＤＲ画像を生成（ＨＤＲ撮影）する際には、予め設定された複数種類の画素群ごとに異なる撮像条件に制御して撮像させ、撮像された複数種類の画素群ごとの撮像画像のデータを用いて１枚のＨＤＲ画像（ＨＤＲ撮影画像）を生成する画像処理を行う。例えば、撮像素子１１２に配列された複数の画素を奇数ラインと偶数ラインとで異なる露光時間に制御して撮像させ、撮像された奇数ラインの撮像画像のデータと偶数ラインの撮像画像のデータとを合成することによりＨＤＲ画像を生成する。

【0048】

記憶部１６０は、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）、セキュアＮＶＲＡＭ（Ｎｏｎ－Ｖｏｌａｔｉｌｅ ＲＡＭ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）などの記憶媒体を含んで構成される。ＨＤＤまたはＳＳＤは、例えばＯＳ、デバイスドライバ、アプリケーションなどの各種のプログラムや、各種のデータなどを記憶する。例えば、カメラ１１０により撮像された撮像画像のデータに対して画像処理部１５６が画像処理を行って生成した撮影画像（或いは、ＨＤＲ撮影画像）のデータを所定のファイル形式（ＪＰＥＧなど）で記憶する。

【0049】

ＥＣ１７０は、各種デバイス（周辺装置やセンサ等）を監視して制御するワンチップマイコン（Ｏｎｅ－Ｃｈｉｐ Ｍｉｃｒｏｃｏｍｐｕｔｅｒ）である。ＥＣ１７０は、不図示のＣＰＵ、ＲＯＭ、ＲＡＭ、複数チャネルのＡ／Ｄ入力端子、Ｄ／Ａ出力端子、タイマ、及びデジタル入出力端子を備える。ＥＣ１７０のデジタル入出力端子には、例えば、キーボード１３０、電源回路１８０などが接続されている。ＥＣ１７０は、キーボード１３０からの入力情報（操作信号）を受け取る。また、ＥＣ１７０は、電源回路１８０などの動作を制御する。

【0050】

電源回路１８０は、例えば、ＤＣ／ＤＣコンバータ、充放電ユニットなどを含んで構成されている。例えば、電源回路１８０は、ＡＣアダプタ（不図示）などの外部電源又はバッテリ１９０から供給される直流電圧を、情報処理装置１を動作させるために必要な複数の電圧に変換して、ＥＣ１７０からの制御に基づいて情報処理装置１の各部に給電する。

【0051】

バッテリ１９０は、例えばリチウムバッテリであり、外部電源から給電されている場合には電源回路１８０を介して充電され、外部電源から給電されていない場合には電源回路１８０を介して充電された電力を情報処理装置１の各部を動作させるための電力として放電する。

【0052】

［ＨＰＤ処理の動作］
次に、図７を参照して、ＨＰＤ処理部１２０が実行するＨＰＤ処理の動作について説明する。図７は、本実施形態に係るＨＰＤ処理の一例を示すフローチャートである。

【0053】

（ステップＳ１０１）ＨＰＤ処理部１２０は、検出用画像として奇数ラインを選択してステップＳ１０３の処理へ進む。

【0054】

（ステップＳ１０３）ＨＰＤ処理部１２０は、選択されたライン（奇数ライン）の画素群により撮像された画像から検出用画像を生成し、生成した検出用画像を用いてＨＰＤ処理を実行する。そして、ステップＳ１０５の処理へ進む。

【0055】

（ステップＳ１０５）ＨＰＤ処理部１２０は、ステップＳ１０３のＨＰＤ処理による検出結果に基づいて、奇数ラインの検出用画像から人物の存在が検出された（ＨＰＤ＝Ｔｒｕｅ）か否かを判定する。ＨＰＤ処理部１２０は、奇数ラインの検出用画像から人物の存在が検出されたと判定した場合（ＹＥＳ）、ステップＳ１０７の処理へ進む。一方、ＨＰＤ処理部１２０は、奇数ラインの検出用画像から人物の存在が検出されないと判定した場合（ＮＯ）、ステップＳ１０９の処理へ進む。

【0056】

（ステップＳ１０７）ＨＰＤ処理部１２０は、ステップＳ１０５で奇数ラインの検出用画像から人物の存在が検出されたと判定された場合、当該検出結果を採用して情報処理装置１の前方に人物（ユーザ）が存在すると判定する（ＨＰＤ＝Ｔｒｕｅ）。そして、ステップＳ１１９の処理へ進む。ステップＳ１１９では、ＨＰＤ処理部１２０は、次のフレームの検出用画像の選択ラインを切り替える（例えば、奇数ラインから偶数ラインに切り替える）。そして、ステップＳ１０３の処理へ戻り、ＨＰＤ処理部１２０は、次のフレームでは、偶数ラインの画素群により撮像された画像から検出用画像を生成してＨＰＤ処理を実行する。

【0057】

（ステップＳ１０９）ＨＰＤ処理部１２０は、ステップＳ１０５で奇数ラインの検出用画像から人物の存在が検出されないと判定された場合、次のフレームの検出用画像の選択ラインを切り替える（例えば、奇数ラインから偶数ラインに切り替える）。そして、ステップＳ１１１の処理へ進む。

【0058】

（ステップＳ１１１）ＨＰＤ処理部１２０は、次のフレームでは、偶数ラインの画素群により撮像された画像から検出用画像を生成し、生成した検出用画像を用いてＨＰＤ処理を実行する。そして、ステップＳ１１３の処理へ進む。

【0059】

（ステップＳ１１３）ＨＰＤ処理部１２０は、ステップＳ１１１のＨＰＤ処理による検出結果に基づいて、偶数ラインの検出用画像から人物の存在が検出された（ＨＰＤ＝Ｔｒｕｅ）か否かを判定する。ＨＰＤ処理部１２０は、偶数ラインの検出用画像から人物の存在が検出されたと判定した場合（ＹＥＳ）、ステップＳ１１５の処理へ進む。一方、ＨＰＤ処理部１２０は、偶数ラインの検出用画像から人物の存在が検出されないと判定した場合（ＮＯ）、ステップＳ１１７の処理へ進む。

【0060】

（ステップＳ１１５）ＨＰＤ処理部１２０は、ステップＳ１１３で偶数ラインの検出用画像から人物の存在が検出されたと判定された場合、当該検出結果を採用して情報処理装置１の前方に人物（ユーザ）が存在すると判定する（ＨＰＤ＝Ｔｒｕｅ）。そして、ステップＳ１０９の処理へ進み、ＨＰＤ処理部１２０は、次のフレームの検出用画像の選択ラインを切り替え（例えば、偶数ラインから奇数ラインに切り替え）、ステップＳ１０３の処理へ戻る。

【0061】

（ステップＳ１１３）ＨＰＤ処理部１２０は、ステップＳ１０９で偶数ラインの検出用画像から人物の存在が検出されないと判定された場合、奇数ラインと偶数ラインとのいずれの検出用画像からも人物の存在が検出されないため、情報処理装置１の前方に人物（ユーザ）が存在しないと判定する（ＨＰＤ＝Ｆａｌｕｓｅ）。そして、ステップＳ１０９の処理へ進み、ＨＰＤ処理部１２０は、次のフレームの検出用画像の選択ラインを切り替え（例えば、偶数ラインから奇数ラインに切り替え）、ステップＳ１０３の処理へ戻る。

【0062】

このように、ＨＰＤ処理部１２０は、奇数ラインの検出用画像と偶数ラインの検出用画像との少なくとも一方から人物の存在が検出された場合には、情報処理装置１の前方に人物（ユーザ）が存在すると判定する。また、ＨＰＤ処理部１２０は、奇数ラインの検出用画像と偶数ラインの検出用画像とのいずれからも人物の存在が検出されなかった場合には、情報処理装置１の前方に人物（ユーザ）が存在しないと判定する。

【0063】

［第１の実施形態のまとめ］
以上説明してきたように、本実施形態に係る情報処理装置１は、撮像素子１１２に配列された複数の画素を用いて撮像した撮像画像のデータを出力するカメラ１１０（撮像部の一例）と、カメラ１１０から出力された撮像画像のデータを一時的に記憶するシステムメモリ１５５（メモリの一例）と、システムメモリ１５５に記憶された撮像画像のデータを用いて処理を実行する画像処理部１５６（第１プロセッサの一例）及びＨＰＤ処理部１２０（第２プロセッサの一例）とを備えている。画像処理部１５６は、カメラ１１０を制御することにより、撮像素子１１２に配列された複数の画素を予め設定された複数種類の画素群（例えば、奇数ラインと偶数ラインの２種類の画素群）ごとに異なる撮像条件に制御して撮像させ、撮像された複数種類の画素群ごとの撮像画像のデータを用いてＨＤＲ画像を生成する画像処理（第１処理の一例）を実行する。ＨＰＤ処理部１２０は、画像処理部１５６の制御によりカメラ１１０により撮像された複数種類の画素群ごとの撮像画像のデータのうち１種類の画素群（例えば、奇数ラインまたは偶数ラインのいずれか一方）の撮像画像のデータを用いて撮像画像から人物の存在を検出するＨＰＤ処理（第２処理の一例）を実行する。

【0064】

これにより、情報処理装置１は、システムの機能によりカメラ１１０が複数種類の画素群ごとに異なる撮像条件で撮像しているときでも、１種類の画素群の撮像画像のデータを用いてＨＰＤ処理を行うため、処理負荷及びコストへの影響を抑えつつ、カメラ機能の使用状態に関わらず撮像画像を用いたＨＰＤ処理を適切に行うことができる。つまり、情報処理装置１は、システムがカメラ機能やＨＤＲ機能を使用しているか否かを意識することなく、且つＨＤＲ画像を生成する処理負荷及びコストをかけることなく、撮像画像を用いたＨＰＤ処理を適切に行うことができる。

【0065】

例えば、ＨＰＤ処理部１２０は、ＨＰＤ処理を繰り返し実行する際に、奇数ラインと偶数ラインの２種類の画素群ごとの撮像画像のデータのうちＨＰＤ処理に用いる撮像画像のデータの画素群の種類を切り替える。

【0066】

これにより、情報処理装置１は、異なる撮像条件で撮像された複数種類の画素群による撮像画像を切り替えてＨＰＤ処理を実行するため、様々な場面（シーン）におけるＨＰＤ処理の検出精度を高めることができる。

【0067】

画像処理部１５６は、カメラ１１０を制御することにより、複数種類の画素群（例えば、奇数ラインと偶数ラインの２種類の画素群）ごとに異なる露光時間に制御して撮像させる。

【0068】

これにより、情報処理装置１は、システムの機能によりカメラ１１０が複数種類の画素群ごとに異なる露光時間で撮像しているときでも、異なる露光時間で撮像された複数種類の画素群（例えば、奇数ラインと偶数ラインの２種類の画素群）による撮像画像を切り替えてＨＰＤ処理を実行するため、様々な明るさの場面（シーン）におけるＨＰＤ処理の検出精度を高めることができる。

【0069】

画像処理部１５６は、画像処理として、異なる露光時間で撮像された複数種類の画素群（例えば、奇数ラインと偶数ラインの２種類の画素群）ごとの撮像画像のデータを合成することによりダイナミックレンジを拡張したＨＤＲ画像のデータを生成する。

【0070】

これにより、情報処理装置１は、システムの機能によりカメラ１１０が複数種類の画素群ごとに異なる露光時間で撮像してＨＤＲ画像を生成しているときでも、カメラ１１０が撮像する撮像画像を用いてＨＰＤ処理を適切に行うことができる。

【0071】

また、本実施形態に係る情報処理装置１における制御方法は、画像処理部１５６（第１プロセッサの一例）が、カメラ１１０を制御することにより、撮像素子１１２に配列された複数の画素を予め設定された複数種類の画素群（例えば、奇数ラインと偶数ラインの２種類の画素群）ごとに異なる撮像条件に制御して撮像させるステップと、撮像された複数種類の画素群ごとの撮像画像のデータを用いてＨＤＲ画像を生成する画像処理（第１処理の一例）を実行するステップと、ＨＰＤ処理部１２０（第２プロセッサの一例）が、画像処理部１５６の制御によりカメラ１１０により撮像された複数種類の画素群ごとの撮像画像のデータのうち１種類の画素群（例えば、奇数ラインまたは偶数ラインのいずれか一方）の撮像画像のデータを用いて撮像画像から人物の存在を検出するＨＰＤ処理（第２処理の一例）を実行するステップと、を含む。

【0072】

これにより、情報処理装置１は、システムの機能によりカメラ１１０が複数種類の画素群ごとに異なる撮像条件で撮像しているときでも、１種類の画素群の撮像画像のデータを用いてＨＰＤ処理を行うため、処理負荷及びコストへの影響を抑えつつ、カメラ機能の使用状態に関わらず撮像画像を用いたＨＰＤ処理を適切に行うことができる。つまり、情報処理装置１は、システムがカメラ機能やＨＤＲ機能を使用しているか否かを意識することなく、且つＨＤＲ画像を生成する処理負荷及びコストをかけることなく、撮像画像を用いたＨＰＤ処理を適切に行うことができる。

【0073】

＜第２の実施形態＞
次に、本発明の第２の実施形態について説明する。
第１の実施形態において、フレームごとに奇数ラインと偶数ラインとを交互に切り替えて検出用画像を生成し、生成した検出用画像を用いてＨＰＤ処理を実行する例を説明したが、検出用画像から人物の存在が検出された（ＨＰＤ＝Ｔｒｕｅ）と判定された場合には、次のフレームでは同じラインの検出用画像を用いてＨＰＤ処理を実行してもよい。

【0074】

これにより、一方のライン（一方の露光時間）で正常に検出できない現象（Ｆａｌｓｅ ｎｅｇａｔｉｖｅ）を抑制することができる。また、検出用画像から人物の存在が検出されない（ＨＰＤ＝Ｆａｌｓｅ）と判定された場合には、再度、奇数ラインと偶数ラインとを交互に切り替えて検出用画像を生成してＨＰＤ処理を実行することで、適切な露光時間で撮像された検出用画像を用いてＨＰＤ処理を実行することができる。

【0075】

図８は、本実施形態に係るＨＰＤ処理におけるラインの切り替え処理の一例を示すフローチャートである。

【0076】

（ステップＳ２０１）ＨＰＤ処理部１２０は、選択されたライン（奇数ラインまたは偶数ライン）の画素群により撮像された画像から検出用画像を生成し、生成した検出用画像を用いてＨＰＤ処理を実行する。そして、ステップＳ２０３の処理へ進む。

【0077】

（ステップＳ２０３）ＨＰＤ処理部１２０は、ステップＳ２０１のＨＰＤ処理による検出結果に基づいて、選択ラインの検出用画像から人物の存在が検出された（ＨＰＤ＝Ｔｒｕｅ）か否かを判定する。ＨＰＤ処理部１２０は、選択ラインの検出用画像から人物の存在が検出されたと判定した場合（ＹＥＳ）、ステップＳ２０１の処理へ戻り、次のフレームも同一の選択ラインの検出用画像を用いてＨＰＤ処理を実行する。一方、ＨＰＤ処理部１２０は、選択ラインの検出用画像から人物の存在が検出されないと判定した場合（ＮＯ）、ステップＳ２０５の処理へ進む。

【0078】

（ステップＳ２０５）ＨＰＤ処理部１２０は、選択ラインを切り替えてステップＳ２０１の処理へ戻り、次のフレームでは、異なる選択ラインの検出用画像を用いてＨＰＤ処理を実行する。

【0079】

このように、本実施形態に係る情報処理装置１において、ＨＰＤ処理部１２０は、ＨＰＤ処理において人物の存在を検出した場合、次に（例えば、次のフレームで）ＨＰＤ処理を実行する際に、人物の存在を検出した撮像画像のデータと同一種類の画素群の撮像画像のデータを用いる。例えば、ＨＰＤ処理部１２０は、奇数ラインの検出用画像を用いたＨＰＤ処理において人物の存在を検出した場合、次に（例えば、次のフレームで）ＨＰＤ処理を実行する際に、奇数ラインの検出用画像を用いる。また、ＨＰＤ処理部１２０は、偶数ラインの検出用画像を用いたＨＰＤ処理において人物の存在を検出した場合、次に（例えば、次のフレームで）ＨＰＤ処理を実行する際に、偶数ラインの検出用画像を用いる。

【0080】

これにより、情報処理装置１は、奇数ラインまたは偶数ラインのいずれか一方の撮像条件（例えば、露光時間）では正常に検出できない現象（Ｆａｌｓｅ ｎｅｇａｔｉｖｅ）が生じてしまうことを抑制することができる。

【0081】

また、ＨＰＤ処理部１２０は、ＨＰＤ処理において人物の存在を検出しなかった場合、次に（例えば、次のフレームで）ＨＰＤ処理を実行する際に、人物の存在を検出しなかった画素群の撮像画像のデータとは異なる種類の画素群の撮像画像のデータに切り替える。例えば、ＨＰＤ処理部１２０は、奇数ラインの検出用画像を用いたＨＰＤ処理において人物の存在を検出しなかった場合には、次に（例えば、次のフレームで）ＨＰＤ処理を実行する際に偶数ラインの検出用画像を用いたＨＰＤ処理に切り替える。また、ＨＰＤ処理部１２０は、偶数ラインの検出用画像を用いたＨＰＤ処理において人物の存在を検出しなかった場合には、次に（例えば、次のフレームで）ＨＰＤ処理を実行する際に奇数ラインの検出用画像を用いたＨＰＤ処理に切り替える。

【0082】

これにより、情報処理装置１は、適切な撮像条件（例えば、露光時間）で撮像された検出用画像を用いてＨＰＤ処理を実行することができる。

【0083】

以上、この発明の実施形態について図面を参照して詳述してきたが、具体的な構成は上述の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。例えば、上述の実施形態において説明した各構成は、任意に組み合わせることができる。

【0084】

また、上記実施形態では、異なる撮像条件（例えば露光時間）に制御する複数種類の画素群として、奇数ラインと偶数ラインの２種類の画素群を例に説明したが、３種類以上の画素群であってもよい。

【0085】

また、上記実施形態では、奇数ラインと偶数ラインのとのラインごとに異なる撮像条件（例えば露光時間）に制御する例を説明したが、異なる撮像条件（例えば露光時間）に制御する画素群は、ラインごとの画素群に限られるものではなく、２×２画素、３×３画素、４×４画素などのブロック単位で構成される画素群であってもよいし、互いに隣接しない画素単位で構成される画素群であってもよい。

【0086】

また、上記実施形態では、複数種類の画素群を異なる撮像条件に制御する際の撮像条件として露光時間を例に説明したが、露光時間に限られるものではなく、例えば感度を異ならせてもよい。

【0087】

また、上記実施形態では、１フレームごとにＨＰＤ処理が実行される例を説明したが、複数フレームごと（２フレームごと、３フレームごと等）にＨＰＤ処理が実行されてもよい。ＨＰＤ処理を複数フレームごと実行する際には、ＨＰＤ処理が実行されるフレーム単位で、複数種類の画素群（例えば、奇数ラインと偶数ラインの２種類の画素群）の切り替えが行われる。

【0088】

また、上記実施形態では、システムによるカメラ機能の使用状態に関わらず、カメラ１１０により撮像された複数種類の画素群ごとの撮像画像のデータのうち１種類の画素群（例えば、奇数ラインまたは偶数ラインのいずれか一方）の撮像画像のデータを用いてＨＰＤ処理を実行する構成を説明した。しかし、情報処理装置１は、ＨＤＲ画像の生成（ＨＤＲ撮影）のときのみ、１種類の画素群（例えば、奇数ラインまたは偶数ラインのいずれか一方）の撮像画像のデータを用いてＨＰＤ処理を実行してもよい。情報処理装置１は、ＨＤＲ画像の生成（ＨＤＲ撮影）を行わない通常撮影時には、撮像素子１１２に配列されている複数の画素を同一の撮像条件（例えば露光時間）に制御するため、複数種類の画素群に分けることなく撮像素子１１２で撮像された撮像画像の少なくとも一部を検出用画像としてＨＯＤ処理を実行してもよい。但し、システムによるカメラ機能の使用状態に関わらず同様のＨＰＤ処理とする方が、カメラ機能の使用状態を検出して処理を変更する必要がないため、処理負荷及びコストへの影響をより抑えることができる。

【0089】

また、ＨＰＤ処理（第２処理の一例）に代えて、人物以外の存在を検出する処理としてもよい。例えば、画像処理部１５６の制御によりカメラ１１０により撮像された複数種類の画素群ごとの撮像画像のデータのうち１種類の画素群（例えば、奇数ラインまたは偶数ラインのいずれか一方）の撮像画像のデータを用いて実行する第２処理は、人物の一部（顔、目、手、足など）を検出する処理であってもよいし、人物以外の動物や物体などを検出する処理であってもよい。また、この第２処理は、カメラ１１０により撮像された撮像画像から物品または製品の品質や結果などを検出する処理であってもよい。即ち、この第２処理は、カメラ１１０により撮像された撮像画像から何らかの情報を検出する任意の処理とすることができる。

【0090】

また、上記実施形態では、カメラ１１０がＲＧＢ画像を撮像するＲＧＢセンサ（可視光センサ）を撮像素子１１２として備える例を説明したが、これに限られるものではない。例えば、カメラ１１０は、撮像素子１１２として、さらにＩＲ（ＩｎｆｒａＲｅｄ）画像を撮像するＩＲセンサを備えても良い。例えば、カメラ１１０は、撮像素子１１２として、ＲＧＢセンサとＩＲセンサとを個別に備えてもよいし、ＲＧＢセンサとＩＲセンサとが一体化されたハイブリッドセンサを備えてもよい。

【0091】

また、システム処理部１５０が備える各構成は、ＳｏＣ（Ｓｙｓｔｅｍ-ｏｎ-ａ-Ｃｈｉｐ）として１つのチップに統合されてもよいし、複数のチップとして構成されもよい。例えば、画像処理部１５６は、システム処理部１５０が備える他の各構成と１つのチップとして統合されてもよいし、別のチップ（プロセッサ）として構成されもよい。また、ＨＰＤ処理部１２０と画像処理部１５６とが統合されて１つのチップ（プロセッサ）として構成されてもよい。

【0092】

また、上述した待機状態には、ハイバネーション状態やパワーオフ状態等が含まれてもよい。ハイバネーション状態は、例えば、ＡＣＰＩで規定されているＳ４状態に相当する。パワーオフ状態は、例えば、ＡＣＰＩで規定されているＳ５状態（シャットダウンした状態）に相当する。なお、待機状態のうちスタンバイ状態、スリープ状態、ハイバネーション状態、パワーオフ状態などは、通常動作状態よりも電力の消費量が低い状態（電力の消費を抑えた状態）である。

【0093】

なお、上述した情報処理装置１は、内部にコンピュータシステムを有している。そして、上述した情報処理装置１が備える各構成の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより上述した情報処理装置１が備える各構成における処理を行ってもよい。ここで、「記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行する」とは、コンピュータシステムにプログラムをインストールすることを含む。ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、インターネットやＷＡＮ、ＬＡＮ、専用回線等の通信回線を含むネットワークを介して接続された複数のコンピュータ装置を含んでもよい。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ－ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。このように、プログラムを記憶した記録媒体は、ＣＤ－ＲＯＭ等の非一過性の記録媒体であってもよい。

【0094】

また、記録媒体には、当該プログラムを配信するために配信サーバからアクセス可能な内部又は外部に設けられた記録媒体も含まれる。なお、プログラムを複数に分割し、それぞれ異なるタイミングでダウンロードした後に情報処理装置１が備える各構成で合体される構成や、分割されたプログラムのそれぞれを配信する配信サーバが異なっていてもよい。さらに「コンピュータ読み取り可能な記録媒体」とは、ネットワークを介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（ＲＡＭ）のように、一定時間プログラムを保持しているものも含むものとする。また、上記プログラムは、上述した機能の一部を実現するためのものであってもよい。さらに、上述した機能をコンピュータシステムに既に記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であってもよい。

【0095】

また、上述した実施形態における情報処理装置１が備える各機能の一部、または全部を、ＬＳＩ（Ｌａｒｇｅ Ｓｃａｌｅ Ｉｎｔｅｇｒａｔｉｏｎ）等の集積回路として実現してもよい。各機能は個別にプロセッサ化してもよいし、一部、又は全部を集積してプロセッサ化してもよい。また、集積回路化の手法はＬＳＩに限らず専用回路、または汎用プロセッサで実現してもよい。また、半導体技術の進歩によりＬＳＩに代替する集積回路化の技術が出現した場合、当該技術による集積回路を用いてもよい。

【0096】

また、上記実施形態の情報処理装置１は、ＰＣに限られるものではなく、タブレット端末装置、スマートフォン、ゲーム装置、マルチメディア端末等であってもよい。

【符号の説明】

【0097】

１ 情報処理装置、１１０ カメラ、１２０ ＨＰＤ処理部、１３０ キーボード、１４０ 表示部、１５０ システム処理部、１５１ ＣＰＵ、１５２ ＧＰＵ、１５３ メモリコントローラ、１５４ Ｉ／Ｏコントローラ、１５５ システムメモリ、１５６ 画像処理部、１６０ 記憶部、１７０ ＥＣ、１８０ 電源回路、１９０ バッテリ

【要約】

【課題】処理負荷及びコストへの影響を抑えつつ、カメラ機能の使用状態に関わらず撮像画像を用いたＨＰＤ処理を適切に行うこと。
【解決手段】情報処理装置は、撮像素子に配列された複数の画素を用いて撮像した撮像画像のデータを出力する撮像部と、撮像部から出力された撮像画像のデータを一時的に記憶するメモリと、メモリに記憶された撮像画像のデータを用いて処理を実行する第１プロセッサ及び第２プロセッサと、を備える。第１プロセッサは、撮像部を制御することにより、撮像素子に配列された複数の画素を予め設定された複数種類の画素群ごとに異なる撮像条件に制御して撮像させ、撮像された複数種類の画素群ごとの撮像画像のデータを用いて第１処理を実行する。第２プロセッサは、第１プロセッサの制御により撮像部により撮像された複数種類の画素群ごとの撮像画像のデータのうち１種類の画素群の撮像画像のデータを用いて第２処理を実行する。
【選択図】図５

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】