特許 7474888 電子機器、及び制御方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B1)

(11)【特許番号】

(24)【登録日】2024-04-17

(45)【発行日】2024-04-25

(54)【発明の名称】電子機器、及び制御方法

(51)【国際特許分類】

   H04N 23/60 20230101AFI20240418BHJP

   H04N 23/45 20230101ALI20240418BHJP

   G06F 1/3231 20190101ALI20240418BHJP

   G06F 1/3287 20190101ALI20240418BHJP

   G06T 7/00 20170101ALI20240418BHJP

   G06V 40/16 20220101ALI20240418BHJP

【ＦＩ】

H04N23/60 500

H04N23/45

G06F1/3231

G06F1/3287

G06T7/00 510F

G06V40/16 A

【請求項の数】 12

(21)【出願番号】P 2023025183

(22)【出願日】2023-02-21

【審査請求日】2023-02-21

(73)【特許権者】

【識別番号】505205731

【氏名又は名称】レノボ・シンガポール・プライベート・リミテッド

(74)【代理人】

【識別番号】100161207

【弁理士】

【氏名又は名称】西澤 和純

(74)【代理人】

【識別番号】100169764

【弁理士】

【氏名又は名称】清水 雄一郎

(74)【代理人】

【識別番号】100175824

【弁理士】

【氏名又は名称】小林 淳一

(74)【代理人】

【識別番号】100206081

【弁理士】

【氏名又は名称】片岡 央

(72)【発明者】

【氏名】小杉 和宏

(72)【発明者】

【氏名】西尾 匡史

【審査官】吉田 千裕

(56)【参考文献】

【文献】特開２０２３－８６５２３（ＪＰ，Ａ）

【文献】特開２０１９－４６５０７（ＪＰ，Ａ）

【文献】国際公開第２０２１／２１５０１５（ＷＯ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ２３／６０

Ｈ０４Ｎ ２３／４５

Ｇ０６Ｆ １／３２３１

Ｇ０６Ｆ １／３２８７

Ｇ０６Ｔ ７／００

Ｇ０６Ｖ ４０／１６

(57)【特許請求の範囲】

【請求項1】

撮像装置で撮像された画像の画像データを一時的に記憶するメモリと、
システムのプログラムに基づくシステム処理及び前記画像データを用いた処理を実行するプロセッサと、を備え、
前記プロセッサは、
前記メモリに記憶された画像データの前記画像の中から顔が撮像されている顔領域を、第１の検出精度で検出する第１検出モードと前記第１の検出精度よりも高い第２の検出精度で検出する第２検出モードとを有する顔検出処理と、
前記顔検出処理により前記第２検出モードで前記顔領域が検出された場合、検出された前記顔領域に基づく第１領域を設定する第１領域設定処理と、
前記顔検出処理により検出された前記顔領域が前記第１領域外の第２領域になった場合、前記第２領域に検出された前記顔領域に基づいて顔認証する顔認証処理と、
前記顔認証処理による認証結果に基づいてシステムを待機状態に遷移させる待機状態制御処理と、
を行う電子機器。

【請求項2】

撮像装置で撮像された画像の画像データを一時的に記憶するメモリと、
システムのプログラムに基づくシステム処理及び前記画像データを用いた処理を実行するプロセッサと、を備え、
前記プロセッサは、
前記メモリに記憶された画像データの前記画像の中から顔らしさの評価値が第１閾値以上の領域を顔領域として検出する顔検出処理と、
前記顔検出処理により前記評価値が前記第１閾値よりも高い第２閾値以上となる前記顔領域が検出された場合、検出された前記顔領域に基づく第１領域を設定する第１領域設定処理と、
前記顔検出処理により検出された前記顔領域が前記第１領域外の第２領域になった場合、前記第２領域に検出された前記顔領域に基づいて顔認証する顔認証処理と、
前記顔認証処理による認証結果に基づいてシステムを待機状態に遷移させる待機状態制御処理と、
を行う電子機器。

【請求項3】

前記プロセッサは、
前記顔検出処理において複数の前記顔領域が検出された場合、複数の前記顔領域のうちの一つに基づいて、前記第１領域設定処理及び前記顔認証処理を行う、
請求項１または請求項２に記載の電子機器。

【請求項4】

前記プロセッサは、
複数の前記顔領域のうち最も大きい顔領域に基づいて、前記第１領域設定処理及び前記顔認証処理を行う、
請求項３に記載の電子機器。

【請求項5】

前記プロセッサは、
複数の前記顔領域のうち前記画像の中央に最も近い顔領域に基づいて、前記第１領域設定処理及び前記顔認証処理を行う、
請求項３に記載の電子機器。

【請求項6】

前記プロセッサは、
前記第１領域設定処理において前記第１領域を設定した後、前記顔検出処理により検出された前記顔領域の位置または大きさの変化に応じて、前記第１領域の位置または大きさを変更する、
請求項１または請求項２に記載の電子機器。

【請求項7】

前記プロセッサは、
前記第１領域設定処理において、前記顔検出処理により検出された前記顔領域が前記第２領域になったことに基づいて前記第１領域を解除する、
請求項１または請求項２に記載の電子機器。

【請求項8】

前記プロセッサは、
前記第１領域設定処理において、前記顔認証処理により前記第２領域に検出された前記顔領域に基づいて顔認証した認証結果が認証成功になったことに基づいて、前記第２領域に検出された前記顔領域に基づいて前記第１領域を再設定する、
請求項１または請求項２に記載の電子機器。

【請求項9】

前記電子機器の動きを検出するセンサをさらに備え、
前記プロセッサは、
前記センサを用いて前記電子機器が手持ちされているか否かを判定する判定処理をさらに行い、
前記判定処理により前記電子機器が手持ちされていると判定された場合、前記顔認証処理による認証結果に基づいてシステムを待機状態に遷移させるための情報を出力する前記待機状態制御処理の実行を保留する、
請求項１または請求項２に記載の電子機器。

【請求項10】

前記撮像装置は、
可視光線を撮像する第１撮像素子と赤外線を撮像する第２撮像素子とを備え、
前記第１検出モードは、前記第１撮像素子と前記第２撮像素子のうち前記第１撮像素子のみを用いて撮像する検出モードであり、前記第２検出モードは、少なくとも前記第２撮像素子を用いて撮像する検出モードである、
請求項１に記載の電子機器。

【請求項11】

撮像装置で撮像された画像の画像データを一時的に記憶するメモリと、システムのプログラムに基づくシステム処理及び前記画像データを用いた処理を実行するプロセッサとを備える電子機器における制御方法であって、
前記プロセッサが、
前記メモリに記憶された画像データの前記画像の中から顔が撮像されている顔領域を、第１の検出精度で検出する第１検出モードと前記第１の検出精度よりも高い第２の検出精度で検出する第２検出モードとを有する顔検出ステップと、
前記顔検出ステップにより前記第２検出モードで前記顔領域が検出された場合、検出された前記顔領域に基づく第１領域を設定する第１領域設定ステップと、
前記顔検出ステップにより検出された前記顔領域が前記第１領域外の第２領域になった場合、前記第２領域に検出された前記顔領域に基づいて顔認証する顔認証ステップと、
前記顔認証ステップによる認証結果に基づいてシステムを待機状態に遷移させる待機状態制御ステップと、
を含む制御方法。

【請求項12】

撮像装置で撮像された画像の画像データを一時的に記憶するメモリと、システムのプログラムに基づくシステム処理及び前記画像データを用いた処理を実行するプロセッサとを備える電子機器における制御方法であって、
前記プロセッサが、
前記メモリに記憶された画像データの前記画像の中から顔らしさの評価値が第１閾値以上の領域を顔領域として検出する顔検出ステップと、
前記顔検出ステップにより前記評価値が前記第１閾値よりも高い第２閾値以上となる前記顔領域が検出された場合、検出された前記顔領域に基づく第１領域を設定する第１領域設定ステップと、
前記顔検出ステップにより検出された前記顔領域が前記第１領域外の第２領域になった場合、前記第２領域に検出された前記顔領域に基づいて顔認証する顔認証ステップと、
前記顔認証ステップによる認証結果に基づいてシステムを待機状態に遷移させる待機状態制御ステップと、
を含む制御方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、電子機器、及び制御方法に関する。

【背景技術】

【0002】

人物が近づくと使用可能な動作状態に遷移し、人物が離れると一部の機能を除いて停止した待機状態に遷移する電子機器がある。例えば、特許文献１には、赤外線センサを用いて赤外線の強弱を検知することにより、人物が近づいてきたか否か、或いは人物が離れたか否かを検出して電子機器の動作状態を制御する技術が開示されている。

【0003】

近年、コンピュータビジョンなどの発展により、画像から顔を検出する際の検出精度が高くなってきている。そのため、赤外線センサによる人物の検出に代えて、顔検出による人物の検出も行われている。顔検出による人物の検出では、単に人物を検出するだけでなく、顔認証を行うことによりユーザであるか否かの判定を行うこともできる。

【先行技術文献】

【特許文献】

【0004】

【文献】特開２０１６－１４８８９５号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

例えば、ユーザが近づいてきた場合には電子機器を起動させるがユーザ以外の人物が近づいてきても電子機器を起動させないといった制御や、動作中にユーザが離れた場合にはユーザ以外の人物が検出されていても電子機器を使用できないようにロック（待機状態に遷移）させるといった制御を行えば、セキュリティの向上が見込める。

【0006】

しかしながら、顔認証が行える顔の角度は、正面に対して±１５程度の範囲に限られている。電子機器を起動させるために顔認証を行う際にはユーザが意識して正面を向いているが、ユーザの顔認証が成功して起動した後はユーザが常に正面を向いているとは限らないため、ユーザが少し横を向いただけでも顔認証に失敗してしまう。そのため、電子機器が起動した後の動作中に顔認証を用いてロックさせる制御を行うことは困難であった。

【0007】

本発明は、上記した事情に鑑みてなされたもので、顔認証を用いてセキュリティを向上させた電子機器、及び制御方法を提供することを目的の一つとする。

【課題を解決するための手段】

【0008】

本発明は上記の課題を解決するためになされたものであり、本発明の第１態様に係る電子機器は、撮像装置で撮像された画像の画像データを一時的に記憶するメモリと、システムのプログラムに基づくシステム処理及び前記画像データを用いた処理を実行するプロセッサと、を備え、前記プロセッサは、前記メモリに記憶された画像データの前記画像の中から顔が撮像されている顔領域を、第１の検出精度で検出する第１検出モードと前記第１の検出精度よりも高い第２の検出精度で検出する第２検出モードとを有する顔検出処理と、前記顔検出処理により前記第２検出モードで前記顔領域が検出された場合、検出された前記顔領域に基づく第１領域を設定する第１領域設定処理と、前記顔検出処理により検出された前記顔領域が前記第１領域外の第２領域になった場合、前記第２領域に検出された前記顔領域に基づいて顔認証する顔認証処理と、前記顔認証処理による認証結果に基づいてシステムを待機状態に遷移させる待機状態制御処理と、を行う。

【0009】

また、本発明の第２態様に係る電子機器は、撮像装置で撮像された画像の画像データを一時的に記憶するメモリと、システムのプログラムに基づくシステム処理及び前記画像データを用いた処理を実行するプロセッサと、を備え、前記プロセッサは、前記メモリに記憶された画像データの前記画像の中から顔らしさの評価値が第１閾値以上の領域を顔領域として検出する顔検出処理と、前記顔検出処理により前記評価値が前記第１閾値よりも高い第２閾値以上となる前記顔領域が検出された場合、検出された前記顔領域に基づく第１領域を設定する第１領域設定処理と、前記顔検出処理により検出された前記顔領域が前記第１領域外の第２領域になった場合、前記第２領域に検出された前記顔領域に基づいて顔認証する顔認証処理と、前記顔認証処理による認証結果に基づいてシステムを待機状態に遷移させる待機状態制御処理と、を行う。

【0010】

上記電子機器において、前記プロセッサは、前記顔検出処理において複数の前記顔領域が検出された場合、複数の前記顔領域のうちの一つに基づいて、前記第１領域設定処理及び前記顔認証処理を行ってもよい。

【0011】

上記電子機器において、前記プロセッサは、複数の前記顔領域のうち最も大きい顔領域に基づいて、前記第１領域設定処理及び前記顔認証処理を行ってもよい。

【0012】

上記電子機器において、前記プロセッサは、複数の前記顔領域のうち前記画像の中央に最も近い顔領域に基づいて、前記第１領域設定処理及び前記顔認証処理を行ってもよい。

【0013】

上記電子機器において、前記プロセッサは、前記第１領域設定処理において前記第１領域を設定した後、前記顔検出処理により検出された前記顔領域の位置または大きさの変化に応じて、前記第１領域の位置または大きさを変更してもよい。

【0014】

上記電子機器において、前記プロセッサは、前記第１領域設定処理において、前記顔検出処理により検出された前記顔領域が前記第２領域になったことに基づいて前記第１領域を解除してもよい。

【0015】

上記電子機器において、前記プロセッサは、前記第１領域設定処理において、前記顔認証処理により前記第２領域に検出された前記顔領域に基づいて顔認証した認証結果が認証成功になったことに基づいて、前記第２領域に検出された前記顔領域に基づいて前記第１領域を再設定してもよい。

【0016】

上記電子機器において、前記電子機器の動きを検出するセンサをさらに備え、前記プロセッサは、前記センサを用いて前記電子機器が手持ちされているか否かを判定する判定処理をさらに行い、前記判定処理により前記電子機器が手持ちされていると判定された場合、前記顔認証処理による認証結果に基づいてシステムを待機状態に遷移させるための情報を出力する前記待機状態制御処理の実行を保留してもよい。

【0017】

上記電子機器において、前記撮像装置は、可視光線を撮像する第１撮像素子と赤外線を撮像する第２撮像素子とを備え、前記第１検出モードは、前記第１撮像素子と前記第２撮像素子のうち前記第１撮像素子のみを用いて撮像する検出モードであり、前記第２検出モードは、少なくとも前記第２撮像素子を用いて撮像する検出モードであってもよい。

【0018】

また、本発明の第３態様に係る、撮像装置で撮像された画像の画像データを一時的に記憶するメモリと、システムのプログラムに基づくシステム処理及び前記画像データを用いた処理を実行するプロセッサとを備える電子機器における制御方法は、前記プロセッサが、前記メモリに記憶された画像データの前記画像の中から顔が撮像されている顔領域を、第１の検出精度で検出する第１検出モードと前記第１の検出精度よりも高い第２の検出精度で検出する第２検出モードとを有する顔検出ステップと、前記顔検出ステップにより前記第２検出モードで前記顔領域が検出された場合、検出された前記顔領域に基づく第１領域を設定する第１領域設定ステップと、前記顔検出ステップにより検出された前記顔領域が前記第１領域外の第２領域になった場合、前記第２領域に検出された前記顔領域に基づいて顔認証する顔認証ステップと、前記顔認証ステップによる認証結果に基づいてシステムを待機状態に遷移させる待機状態制御ステップと、を含む。

【0019】

また、本発明の第４態様に係る、撮像装置で撮像された画像の画像データを一時的に記憶するメモリと、システムのプログラムに基づくシステム処理及び前記画像データを用いた処理を実行するプロセッサとを備える電子機器における制御方法は、前記プロセッサが、前記メモリに記憶された画像データの前記画像の中から顔らしさの評価値が第１閾値以上の領域を顔領域として検出する顔検出ステップと、前記顔検出ステップにより前記評価値が前記第１閾値よりも高い第２閾値以上となる前記顔領域が検出された場合、検出された前記顔領域に基づく第１領域を設定する第１領域設定ステップと、前記顔検出ステップにより検出された前記顔領域が前記第１領域外の第２領域になった場合、前記第２領域に検出された前記顔領域に基づいて顔認証する顔認証ステップと、前記顔認証ステップによる認証結果に基づいてシステムを待機状態に遷移させる待機状態制御ステップと、を含む。

【発明の効果】

【0020】

本発明の上記態様によれば、顔認証を用いてセキュリティを向上させることができる。

【図面の簡単な説明】

【0021】

【図1】第１の実施形態に係る電子機器のＨＰＤ処理の概要を説明する図。

【図2】顔領域が検出された撮像画像の一例を示す図。

【図3】顔領域が検出されていない撮像画像の一例を示す図。

【図4】第１の実施形態に係る高信頼性領域の設定例を示す図。

【図5】第１の実施形態に係る標準検出モードと高精度検出モードとの対比の一例を示す図。

【図6】第１の実施形態に係る電子機器の外観の構成例を示す斜視図。

【図7】第１の実施形態に係る電子機器のハードウェア構成の一例を示すブロック図。

【図8】第１の実施形態に係る電子機器の機能構成の一例を示すブロック図。

【図9】第１の実施形態に係る高信頼性領域のトラッキングの説明図。

【図10】第１の実施形態に係る標準検出モードにおける顔検出処理の一例を示すフローチャート。

【図11】第１の実施形態に係る待機状態制御処理の一例を示すフローチャート。

【図12】第２の実施形態に係る電子機器の機能構成の一例を示すブロック図。

【図13】第２の実施形態に係る待機状態制御処理を保留する処理の一例を示すフローチャート。

【発明を実施するための形態】

【0022】

以下、図面を参照して、本発明の実施形態について説明する。
＜第１の実施形態＞
まず、第１の実施形態に係る電子機器１の概要について説明する。
本実施形態に係る電子機器１は、例えば、ノート型のＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ；パーソナルコンピュータ）である。

【0023】

電子機器１は、システムの動作状態として少なくとも「通常動作状態」と「待機状態」とを有している。通常動作状態とは、特に制限なく処理の実行が可能な動作状態であり、例えば、ＡＣＰＩ（Ａｄｖａｎｃｅｄ Ｃｏｎｆｉｇｕｒａｔｉｏｎ ａｎｄ Ｐｏｗｅｒ Ｉｎｔｅｒｆａｃｅ）で規定されているＳ０状態に相当する。

【0024】

待機状態とは、システムの少なくとも一部の機能の使用が制限されている状態であり、例えば、システムがロックされた状態である。ロックされた状態とは、処理中の内容が視認できないように予め設定された画像（例えば、ロック用の画像）が表示部に表示され、ユーザ認証などによってロックを解除するまで使用できない状態である。なお、待機状態は、スタンバイ状態またはスリープ状態などであってもよく、Ｗｉｎｄｏｗｓ（登録商標）におけるモダンスタンバイや、ＡＣＰＩで規定されているＳ３状態（スリープ状態）等に相当する状態であってもよい。つまり、待機状態は、例えば通常動作状態よりも消費電力が低くなる動作状態、ユーザが電子機器１の作業内容を視認できない状態、またはユーザが電子機器１を使用できない状態などのいずれかに相当する。

【0025】

また、システムの動作状態には、待機状態よりも更に消費電力が低い状態となる「停止状態」が含まれる。停止状態とは、例えばハイバネーション状態やパワーオフ状態等である。ハイバネーション状態は、例えば、ＡＣＰＩで規定されているＳ４状態に相当する。パワーオフ状態は、例えば、ＡＣＰＩで規定されているＳ５状態（シャットダウン状態）に相当する。

【0026】

以下では、システムの動作状態が待機状態または停止状態から通常動作状態へ遷移することを起動と呼ぶことがある。待機状態及び停止状態は、例えば、通常動作状態よりも動作の活性度が低いため、電子機器１のシステムを起動させることは、電子機器１におけるシステムの動作を活性化させることになる。

【0027】

図１は、本実施形態に係る電子機器１のＨＰＤ処理の概要を説明する図である。電子機器１は、電子機器１の近傍に存在する人物（即ちユーザ）を検出する。この人物の存在を検出する処理のことを、ＨＰＤ（Ｈｕｍａｎ Ｐｒｅｓｅｎｃｅ Ｄｅｔｅｃｔｉｏｎ）処理と称する。電子機器１は、ＨＰＤ処理により人物の存在の有無を検出し、検出結果に基づいて電子機器１のシステムの動作状態を制御する。例えば、電子機器１は、図１（Ａ）に示すように、電子機器１の前（正面）に人物が存在しない状態（Ａｂｓｅｎｃｅ）から存在する状態（Ｐｒｅｓｅｎｃｅ）への変化、即ち電子機器１へ人物が接近したこと（Ａｐｐｒｏａｃｈ）を検出した場合、ユーザが接近したと判定し、自動でシステムを起動して通常動作状態へ遷移させる。また、電子機器１は、図１（Ｂ）に示すように、電子機器１の前に人物が存在している状態（Ｐｒｅｓｅｎｃｅ）では、ユーザが存在すると判定し、通常動作状態を継続させる。そして、電子機器１は、図１（Ｃ）に示すように、電子機器１の前（正面）に人物が存在している状態（Ｐｒｅｓｅｎｃｅ）から存在しない状態（Ａｂｓｅｎｃｅ）への変化、即ち電子機器１から人物が離脱したこと（Ｌｅａｖｅ）を検出した場合には、ユーザが離脱したと判定し、システムを待機状態へ遷移させる。

【0028】

例えば、電子機器１は、顔検出の機能を有しており、前方（正面側）を撮像した撮像画像から顔が撮像されている顔領域を検出することにより、電子機器１の前（正面）にユーザが存在するか否かを判定する。電子機器１は、撮像画像から顔領域が検出された場合、ユーザが存在すると判定する。一方、電子機器１は、撮像画像から顔領域が検出されなかった場合、ユーザが存在しないと判定する。即ち、電子機器１は、撮像画像から顔領域が検出されない状態から検出された場合、電子機器１へユーザが接近したこと（Ａｐｐｒｏａｃｈ）を検出し、システムを通常動作状態へ遷移させる。また、電子機器１は、撮像画像から顔領域が検出されている状態から検出されなくなった場合、電子機器１からユーザが離脱したこと（Ｌｅａｖｅ）を検出し、システムを待機状態へ遷移させる。

【0029】

ここで、撮像画像から顔領域を検出する場合、マスクをしているなどの要因によって正しく検出できない場合があり、顔検出が不安定になることがある。図２及び図３は、顔検出用の撮像画像の例を示している。図２は、顔領域が検出された撮像画像の一例を示す図である。一方、図３は、顔領域が検出されていない撮像画像の一例を示す図である。

【0030】

図２において、バウンディングボックス１０１は、撮像画像Ｇ１１から検出された顔領域を示している。顔領域の検出方法としては、顔の特徴情報を基に顔を検出する顔検出アルゴリズムや、顔の特徴情報または顔画像を元に機械学習された学習データ（学習済みモデル）や顔検出ライブラリなどを用いた任意の検出方法を適用することができる。例えば、電子機器１は、複数の顔画像の画像データを読み込ませて機械学習させた学習データを用いて撮像画像の中から顔らしさを示す評価値（以下、「顔検出評価値」と称する）を取得し、顔検出評価値が所定の閾値（以下、「顔判定閾値」と称する）以上となる領域を顔領域として検出する。一例として、顔判定閾値が「７０」の場合、図２に示す例では、例えば顔検出評価値が「７０」であり、顔検出評価値が顔判定閾値以上となるため、顔領域として検出されている。一方、図３に示す例では、例えば顔検出評価値が「６８」であり、顔検出評価値が顔判定閾値未満であるため、顔領域として検出されていない。バウンディングボックス１０１は、検出された顔領域の位置および大きさ（縦横の長さ）の座標情報（画像領域における座標情報）を可視化して示したものである。例えば、顔領域の検出結果は、顔領域の座標情報と顔検出評価値とを含む情報として出力される。

【0031】

このように、マスクをしているなどの要因によって顔検出評価値が顔判定閾値による境界に近くなると、顔として判定されたり判定されなかったりといったように顔検出が不安定になることがある。なお、マスクをしている場合に限らず、顔の向きなど様々な要因によっても顔検出評価値が顔判定閾値による境界に近くなることがある。例えば、顔判定閾値を下げれば、図３に示すように顔領域として検出されなかったものも顔領域として検出される可能性が高くなるが、反面、服のシワや物の配置の状況などによって人物の顔ではない領域を顔領域として誤検出してしまう可能性も高くなる。

【0032】

そこで、本実施形態では、ＨＰＤ処理における顔検出よりも高い検出精度で顔領域を検出する検出モードで顔領域が検出された場合、その検出結果の信頼性が高い（顔が存在する可能性が高い）と判断できるため、検出された顔領域に基づく特定領域のみ顔判定閾値を下げる。これにより、人物の顔ではない領域を顔領域として誤検出してしまう可能性を高めることなく、人物の顔の領域が正しく顔領域として検出される可能性が高くなるため、安定した顔検出を実現することができる。

【0033】

以下では、ＨＰＤ処理における顔検出モードのことを「標準検出モード」、ＨＰＤ処理における顔検出よりも高い検出精度で顔領域を検出する検出モードのことを「高精度検出モード」と称する。また、高精度検出モードで検出された顔領域に基づく特定領域（顔領域の検出結果の信頼性が高い領域）のことを「高信頼性領域」、以外の撮像画像のことを「標準領域」領域と称する。

【0034】

図４は、本実施形態に係る高信頼性領域の設定例を示す図である。バウンディングボックス１０２は、高精度検出モードで撮像画像Ｇ１３から検出された顔領域を示している。高信頼性領域１０３は、このバウンディングボックス１０２を含むバウンディングボックス１０２よりも広い領域として設定される。例えば、高信頼性領域１０３は、バウンディングボックス１０２の中心を中心として、縦および横の長さがバウンディングボックス１０２の縦および横の長さに対して所定の割合分（例えば５０％）加えた広い領域として設定される。ＨＰＤ処理において標準検出モードで撮像画像から顔領域を検出する際には、高信頼性領域１０３のみ顔判定閾値が低く設定される。例えば、高信頼性領域１０３の顔判定閾値は、高信頼性領域１０３以外の標準領域の顔判定閾値に対して所定の割合分（例えば１０％）低い値に設定される。

【0035】

例えば、標準領域の顔判定閾値が「７０」としたときに、高信頼性領域の顔判定閾値は「６３」に設定される。図２および図３に示す例で、高信頼性領域が設定されていない場合には、顔領域が検出されたり（図２：顔検出評価値＝７０）、顔領域が検出されなかったり（図３：顔検出評価値＝６８）するが、高信頼性領域を設定して顔判定閾値が「６３」になると、いずれの顔検出評価値も顔判定閾値以上となり、安定して顔領域が検出されるようになる。

【0036】

なお、標準領域の顔判定閾値は、一つの値に設定されるものではなく、撮像画像の明るさなどに応じて適宜変化する値である。高信頼性領域１０３の顔判定閾値は、その時々の標準領域の顔判定閾値に対して所定の割合分（例えば１０％）低い値に設定される。

【0037】

また、撮像画像から検出される顔領域の数は１つとは限らないが、複数の顔領域が検出された場合でも、撮像画像から検出された顔領域のうち最もメインとなる顔領域に対して高信頼性領域が設定される。最もメインとなる顔領域とは、例えば、撮像画像から検出された顔領域のうち最も大きい顔領域である。また、最もメインとなる顔の顔領域は、顔領域の大きさに代えて又は加えて、撮像画像内の位置に関する要因（例えば、中央に近い）に基づいて決定されてもよい。

【0038】

次に、図５を参照して、標準検出モードと高精度検出モードとの違いについて説明する。図５は、本実施形態に係る標準検出モードと高精度検出モードとの対比の一例を示す図である。標準検出モードは、顔検出の機能に用いられる。一方、高精度検出モードは、顔認証の機能に用いられる。顔認証処理では、顔の特徴をより高精度に照合する必要があるため、高精度検出モードが必要となる。例えば、ログイン時の認証処理、アクセス制限されているデータへのアクセス時の認証処理などにおいて顔認証の機能を用いる場合に、高精度検出モードが適用される。

【0039】

また、標準検出モードでは、可視光線を撮像するＲＧＢセンサを撮像センサとして用いて画像が撮像される。一方、高精度検出モードでは、ＲＧＢセンサに加えて赤外線を撮像可能なＩＲ（Ｉｎｆｒａｒｅｄ Ｒａｄｉａｔｉｏｎ）センサも用いて画像が撮像される。なお、高精度検出モードでは、ＲＧＢセンサとＩＲセンサのうちＩＲセンサのみを用いて画像が撮像されてもよい。ＩＲセンサを用いることにより、低照度環境であっても顔認証に必要な顔の特徴を撮像可能となるが、その反面、赤外線を発光させるため消費電力が高くなる。また、高精度検出モードでは、標準検出モードに対してフレームレートを高くして顔領域を検出することにより、検出精度を高くする。この場合も、フレームレートを高くした分、消費電力が高くなる。なお、高精度検出モードでは、標準検出モードに対して高解像度で顔領域を検出してもよい。

【0040】

つまり、標準検出モードはＲＧＢセンサとＩＲセンサのうちＲＧＢセンサのみを用いて撮像する検出モードであり、高精度検出モードは少なくともＩＲセンサを用いて撮像する検出モードである、ということができる。また、標準検出モードは、高精度検出モードよりも顔検出処理で消費する電力が低い検出モードである、ということもできる。また、標準検出モードは撮像画像の中から顔領域を検出するための検出モードであり、高精度検出モードは撮像画像の中から顔認証を行うための顔領域を検出するための検出モードである、ということもできる。

【0041】

なお、図５を参照して、標準検出モードと高精度検出モードとの違いについて説明したが、標準検出モードよりも高精度検出モードの方が高精度に顔領域を検出できれば、機能、撮像センサ、フレームレート、解像度の全てが異なる必要はない。例えば、標準検出モードと高精度検出モードとでは撮像センサが異なるものの、フレームレートおよび解像度のいずれか一方または両方は同じでもよい。また、標準検出モードと高精度検出モードとではフレームレートおよび解像度のいずれか一方または両方が異なれば、撮像センサが同じであってもよい。いずれにしても、標準検出モードよりも高精度検出モードの方が消費電力は高くなるため、標準検出モードでは、高精度検出モードでの検出結果を利用して高信頼性領域を設定して顔領域を検出することにより、消費電力を上げることなく、安定した顔検出を実現できる。

【0042】

次に、本実施形態に係る電子機器１の構成について詳しく説明する。
[電子機器の外観構成]
図６は、本実施形態に係る電子機器１の外観の構成例を示す斜視図である。
電子機器１は、第１筐体１０、第２筐体２０、及びヒンジ機構１５を備える。第１筐体１０と第２筐体２０は、ヒンジ機構１５を用いて結合されている。第１筐体１０は、第２筐体２０に対して、ヒンジ機構１５がなす回転軸の周りに相対的に回動可能である。第１筐体１０と第２筐体２０との回動による開き角を「θ」として図示している。

【0043】

第１筐体１０は、Ａカバー、ディスプレイ筐体とも呼ばれる。第２筐体２０は、Ｃカバー、システム筐体とも呼ばれる。以下の説明では、第１筐体１０と第２筐体２０の側面のうち、ヒンジ機構１５が備わる面を、それぞれ側面１０ｃ、２０ｃと呼ぶ。第１筐体１０と第２筐体２０の側面のうち、側面１０ｃ、２０ｃとは反対側の面を、それぞれ側面１０ａ、２０ａと呼ぶ。図示において、側面２０ａから側面２０ｃに向かう方向を「後」と呼び、側面２０ｃから側面２０ａに向かう方向を「前」と呼ぶ。後方に対して右方、左方を、それぞれ「右」、「左」と呼ぶ。第１筐体１０、第２筐体２０の左側面をそれぞれ側面１０ｂ、２０ｂと呼び、右側面をそれぞれ側面１０ｄ、２０ｄと呼ぶ。また、第１筐体１０と第２筐体２０とが重なり合って完全に閉じた状態（開き角θ＝０°の状態）を「閉状態」と呼ぶ。閉状態において第１筐体１０と第２筐体２０との互いに対面する側の面を、それぞれの「内面」と呼び、内面に対して反対側の面を「外面」と呼ぶ。また、閉状態に対して第１筐体１０と第２筐体２０とが開いた状態のことを「開状態」と呼ぶ。

【0044】

図６に示す電子機器１の外観は開状態の例を示している。開状態は、第１筐体１０の側面１０ａと第２筐体２０の側面２０ａとが離れた状態である。開状態では、第１筐体１０と第２筐体２０とのそれぞれの内面が表れる。開状態はユーザが電子機器１を使用する際の状態の一つであり、典型的には開き角θ＝１００～１３０°程度の状態で使用されることが多い。なお、開状態となる開き角θの範囲は、ヒンジ機構１５よって回動可能な角度の範囲等に応じて任意に定めることができる。

【0045】

第１筐体１０の内面には、表示部１１０が設けられている。表示部１１０は、液晶ディスプレイ（ＬＣＤ：Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）や有機ＥＬ(Ｅｌｅｃｔｒｏ Ｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイなどを含んで構成されている。また、第１筐体１０の内面のうち表示部１１０の周縁の領域に、撮像部１２０が設けられている。例えば、撮像部１２０は、表示部１１０の周縁の領域のうち側面２０ａ側に配置されている。なお、撮像部１２０が配置される位置は一例であって、第１筐体１０の内面に対面する方向（前方）を向くことが可能であれば他の場所であってもよい。

【0046】

撮像部１２０は、開状態において、第１筐体１０の内面に対面する方向（前方）の所定の撮像範囲を撮像する。所定の撮像範囲とは、撮像部１２０が有する撮像センサ（撮像素子）と撮像センサの撮像面の前方に設けられたレンズとによって定まる画角の範囲である。例えば、撮像部１２０は、第１カメラ１２１と、第２カメラ１２２との２つのカメラを備えている。

【0047】

第１カメラ１２１は、レンズを介して入射される可視光線を受光して光電変換するＲＧＢセンサを撮像センサとして備えるカメラである。また、第２カメラ１２２は、レンズを介して入射される赤外線を受光して光電変換するＩＲセンサを撮像センサとして備えるカメラである。第１カメラ１２１および第２カメラ１２２は、それぞれ、電子機器１の前（正面）に存在する人物を含む画像を撮像することができる。

【0048】

また、第２筐体２０の側面２０ｂには、電源ボタン１４０が設けられている。電源ボタン１４０は、電源オン（停止状態から通常動作状態へ遷移）や、電源オフ（通常動作状態から停止状態への遷移）をユーザが指示するための操作子である。また、第２筐体２０の内面には、キーボード１５１及びタッチパッド１５３が入力デバイスとして設けられている。なお、入力デバイスとして、キーボード１５１及びタッチパッド１５３に代えて、または加えて、タッチセンサが含まれてもよいし、マウスや外付けのキーボードが接続されてもよい。タッチセンサが設けられた構成の場合、表示部１１０の表示面に対応する領域にタッチセンサが設けられたタッチパネルとして構成されてもよい。また、入力デバイスには、音声が入力されるマイクが含まれてもよい。

【0049】

なお、第１筐体１０と第２筐体２０とが閉じた閉状態では、第１筐体１０の内面に設けられている表示部１１０、及び撮像部１２０と、第２筐体２０の内面に設けられているキーボード１５１及びタッチパッド１５３は、互いに他方の筐体面で覆われた状態となる。即ち、閉状態では、電子機器１は少なくとも入出力に関する機能を発揮できない状態となる。

【0050】

[電子機器のハードウェア構成]
図７は、本実施形態に係る電子機器１のハードウェア構成の一例を示すブロック図である。この図７において、図６の各部に対応する構成には同一の符号を付している。電子機器１は、表示部１１０、撮像部１２０、加速度センサ１３０、電源ボタン１４０、入力デバイス１５０、映像出力端子１６０、ＥＣ（Ｅｍｂｅｄｄｅｄ Ｃｏｎｔｒｏｌｌｅｒ）２００、顔検出部２２０、システム処理部３００、通信部３５０、記憶部３６０、及び電源部４００を含んで構成される。表示部１１０は、システム処理部３００により実行されるシステム処理及びシステム処理上で動作するアプリケーションプログラムの処理等に基づいて生成された表示データ（画像）を表示する。

【0051】

撮像部１２０は、第１カメラ１２１と第２カメラ１２２とを有し、それぞれ第１筐体１０の内面に対面する方向（前方）の所定の画角内の物体の像を撮像し、撮像した撮像画像の画像データをシステム処理部３００及び顔検出部２２０へ出力する。図６を参照して説明したように、第１カメラ１２１は、ＲＧＢセンサを備え、可視光線を受光して撮像する。第１カメラ１２１は、撮像した可視光画像（ＲＧＢ画像）の画像データを出力する。また、第２カメラ１２２は、ＩＲセンサと赤外線を発光する発光部を備えており、発光部から照射した赤外線の反射光を受光して撮像する。第２カメラ１２２は、撮像した赤外線画像（ＩＲ画像）の画像データを出力する。例えば、撮像部１２０が撮像した撮像画像の画像データは、システムメモリ３１０に一時的に記憶され、画像処理などに利用される。

【0052】

なお、本実施形態では、ＲＧＢセンサを備えた第１カメラ１２１とＩＲセンサを備えた第２カメラ１２２との２つのカメラとを電子機器１が備える構成例としているが、これに限られるものではない。例えば、可視光線を受光する画素と赤外線を受光する画像との両方が配置されている１つの撮像センサ（所謂、ハイブリッドセンサ）を用いて可視光画像（ＲＧＢ画像）の画像データと赤外線画像（ＩＲ画像）の画像データとを出力可能な１つのカメラを電子機器１が備える構成としてもよい。

【0053】

加速度センサ１３０は、電子機器１の重力方向に対する向きを検出し、検出結果を示す検出信号をＥＣ２００へ出力する。例えば、加速度センサ１３０は、第１筐体１０と第２筐体２０とのそれぞれに設けられており、第１筐体１０の向きと第２筐体２０の向きとを検出し、検出結果を示す検出信号をＥＣ２００へ出力する。この第１筐体１０の向きと第２筐体２０の向きとの検出結果に基づいて、電子機器１の開閉状態および第１筐体１０と第２筐体２０との開き角θなどを検出することが可能である。なお、加速度センサ１３０に代えて又は加えて、ジャイロセンサ、傾斜センサ、地磁気センサなどが備えられてもよい。

【0054】

電源ボタン１４０は、ユーザの操作に応じて操作信号をＥＣ２００へ出力する。入力デバイス１５０は、ユーザの入力を受け付ける入力部であり、例えばキーボード１５１及びタッチパッド１５３を含んで構成されている。入力デバイス１５０は、キーボード１５１及びタッチパッド１５３に対する操作を受け付けることに応じて、操作内容を示す操作信号をＥＣ２００へ出力する。

【0055】

映像出力端子１６０は、外部ディスプレイ（表示装置）に接続するための接続端子である。例えば、映像出力端子１６０は、ＨＤＭＩ（登録商標）端子、ＵＳＢ Ｔｙｐｅ-Ｃ端子、ディスプレイポートなどである。

【0056】

電源部４００は、電子機器１の各部の動作状態に応じて各部へ電力を供給するための電源系統を介して電力を供給する。電源部４００は、ＤＣ（Ｄｉｒｅｃｔ Ｃｕｒｒｅｎｔ）／ＤＣコンバータを備える。ＤＣ／ＤＣコンバータは、ＡＣ（Ａｌｔｅｒｎａｔｅ Ｃｕｒｒｅｎｔ）／ＤＣアダプタもしくは電池パックから供給される直流電力の電圧を、各部で要求される電圧に変換する。ＤＣ／ＤＣコンバータで電圧が変換された電力が各電源系統を介して各部へ供給される。例えば、電源部４００は、ＥＣ２００から入力される各部の動作状態に応じた制御信号に基づいて各電源系統を介して各部に電力を供給する。

【0057】

ＥＣ２００は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、フラッシュＲＯＭ、複数チャネルのＡ／Ｄ入力端子、Ｄ／Ａ出力端子、およびデジタル入出力端子などを含んで構成されたマイクロコンピュータである。例えば、ＥＣ２００のＣＰＵは、自部または外部のＲＯＭに予め記憶された制御プログラム（ファームウェア）を読み出し、読み出した制御プログラムを実行して、その機能を発揮する。ＥＣ２００は、加速度センサ１３０、電源ボタン１４０、入力デバイス１５０、顔検出部２２０、システム処理部３００、および電源部４００などと接続されている。

【0058】

例えば、ＥＣ２００は、電源ボタン１４０に対するユーザの操作に応じた操作信号を受取ると、システム処理部３００に対するシステムの起動の指示などを行う。また、ＥＣ２００は、顔検出部２２０による検出結果に基づいて、システムの起動の指示や動作状態の遷移の指示を行う。また、ＥＣ２００は、電源部４００と通信を行うことにより、バッテリーの状態（残容量など）の情報を電源部４００から取得するとともに、電子機器１の各部の動作状態に応じた電力の供給を制御するための制御信号などを電源部４００へ出力する。

【0059】

また、ＥＣ２００は、入力デバイス１５０などから操作信号を取得し、取得した操作信号のうちシステム処理部３００の処理に必要な操作信号についてはシステム処理部３００へ出力する。また、ＥＣ２００は、加速度センサ１３０から検出信号を取得し、取得した検出信号に基づいて、電子機器１の向き（第１筐体１０および第２筐体２０の向き）や、第１筐体１０と第２筐体２０との開き角θなどを検出する。

【0060】

なお、ＥＣ２００の機能の一部は、センサハブまたはチップセットなどとして構成されてもよい。

【0061】

顔検出部２２０は、撮像部１２０により撮像された撮像画像の画像データを処理するプロセッサである。顔検出部２２０は、顔検出処理および顔認証処理を実行する。例えば、顔検出部２２０は、撮像部１２０により撮像された撮像画像を取得し、取得した撮像画像の中から顔が撮像されている顔領域を検出する顔検出処理を実行する。

【0062】

また、顔検出部２２０は、顔検出処理の検出結果に基づいて、電子機器１の前方にユーザ（人物）が存在するか否かを検出するＨＰＤ処理を実行する。また、顔検出部２２０は、撮像部１２０から取得した撮像画像の中から顔領域を検出した後、検出した顔領域の顔画像と予め登録されている顔画像（例えば、正規ユーザの顔画像）とを照合することにより顔認証処理を実行する。この顔検出部２２０の構成について詳しくは後述する。

【0063】

システム処理部３００は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）３０２、ＧＰＵ（Ｇｒａｐｈｉｃ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）３０４、メモリコントローラ３０６、Ｉ／Ｏ（Ｉｎｐｕｔ－Ｏｕｔｐｕｔ）コントローラ３０８、及びシステムメモリ３１０を含んで構成され、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）に基づくシステム処理によって、ＯＳ上で各種のアプリケーションプログラムの処理が実行可能である。

【0064】

ＣＰＵ３０２は、ＯＳによる処理や、ＯＳ上で動作するアプリケーションプログラムによる処理を実行する。また、ＣＰＵ３０２は、ＥＣ２００からの指示によりシステムの動作状態を遷移させる。例えば、ＣＰＵ３０２は、動作状態が停止状態または待機状態であって、ＥＣ２００から起動の指示を受けると、停止状態または待機状態から通常動作状態に遷移させる起動処理を実行する。また、ＣＰＵ３０２は、通常動作状態において待機状態への指示を受取ると、通常動作状態から待機状態に遷移させる。また、ＣＰＵ３０２は、通常動作状態においてシャットダウンの指示を受取ると、通常動作状態から停止状態に遷移させるシャットダウン処理を実行する。

【0065】

また、ＣＰＵ３０２は、起動処理において、ＯＳの利用を許可するか否かを判定するログイン処理を実行する。ＣＰＵ３０２は、ＯＳによる起動処理を開始すると、ＯＳの利用を許可する前にログイン処理を実行し、ログイン処理でログインを許可するまで、通常動作状態への遷移を一旦停止する。ログイン処理では、電子機器１を使用する人物が予め登録された正規のユーザであるか否かを判定するユーザ認証処理が行われる。認証には、パスワード認証、顔認証、指紋認証などがある。

【0066】

例えば、ＣＰＵ３０２は、顔認証によるユーザ認証処理を行う場合、顔検出部２２０による顔認証処理を利用する。ＣＰＵ３０２は、認証結果が成功であった場合、ログインを許可し、一旦停止していたシステム処理の実行を再開する。一方、認証結果が失敗であった場合、ログインを許可せず、システム処理の実行を停止したままにする。

【0067】

ＧＰＵ３０４は、表示部１１０に接続されている。ＧＰＵ３０４は、ＣＰＵ３０２の制御に基づいて画像処理を実行して表示データを生成する。ＧＰＵ３０４は、生成した表示データを表示部１１０に出力する。なお、ＣＰＵ３０２とＧＰＵ３０４は、一体化して１個のコアとして形成されてもよいし、個々のコアとして形成されたＣＰＵ３０２とＧＰＵ３０４の相互間で負荷が分担されてもよい。プロセッサの数は、１個に限られず、複数個であってもよい。

【0068】

メモリコントローラ３０６は、ＣＰＵ３０２とＧＰＵ３０４によるシステムメモリ３１０、記憶部３６０などからのデータの読出し、書込みを制御する。
Ｉ／Ｏコントローラ３０８は、通信部３５０、表示部１１０およびＥＣ２００からのデータの入出力を制御する。
システムメモリ３１０は、プロセッサの実行プログラムの読み込み領域ならびに処理データを書き込む作業領域として用いられる。また、システムメモリ３１０は、撮像部１２０で撮像された撮像画像の画像データを一時的に記憶する。

【0069】

通信部３５０は、無線または有線による通信ネットワークを介して他の機器と通信可能に接続し、各種のデータの送信および受信を行う。例えば、通信部３５０は、イーサネット（登録商標）等の有線ＬＡＮインターフェースやＷｉ－Ｆｉ（登録商標）等の無線ＬＡＮインターフェース等を含んで構成されている。

【0070】

記憶部３６０は、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）、ＳＤＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）、ＲＯＭ、フラッシュＲＯＭなどの記憶媒体を含んで構成される。記憶部３６０は、ＯＳ、デバイスドライバ、アプリケーションなどの各種のプログラム、その他、プログラムの動作により取得した各種のデータを記憶する。

【0071】

なお、システム処理部３００は、ＳＯＣ（Ｓｙｓｔｅｍ ｏｎ ａ ｃｈｉｐ）として１つのパッケージのプロセッサとして構成されてもよいし、一部の機能がチップセットまたはセンサハブなどがＣＰＵ３０２とは別の部品として複数のプロセッサで構成されてもよい。

【0072】

［顔検出部の構成］
次に、顔検出部２２０の構成について詳しく説明する。
図８は、本実施形態に係る電子機器１の機能構成の一例を示す概略ブロック図である。図示する顔検出部２２０は、撮像部１２０により撮像された撮像画像の画像データを処理するプロセッサを含んで構成されている。顔検出部２２０は、撮像部１２０により撮像された撮像画像の画像データを取得し、取得した画像データをメモリに一時的に保存する。画像データを保存するメモリは、システムメモリ３１０であってもよいし、顔検出部２２０内の不図示のメモリであってもよい。

【0073】

顔検出部２２０は、撮像部１２０から取得した撮像画像の画像データを処理することにより、撮像画像から顔が撮像されている顔領域を検出する顔検出処理、及び検出された顔領域の顔を認証する顔認証処理などを行う。例えば、顔検出部２２０は、顔認証処理部２２３と、検出領域設定部２２２と、顔検出処理部２２１と、ＨＰＤ処理部２２４とを備えている。

【0074】

顔検出処理部２２１は、標準検出モードと高精度検出モードと有し、いずれかの検出モードで撮像画像の中から顔領域を検出する。顔領域の検出方法としては、顔の特徴情報を基に顔を検出する顔検出アルゴリズムや、顔の特徴情報を基に機械学習された学習データ（学習済みモデル）や顔検出ライブラリなどを用いた顔検出など、任意の検出方法を適用することができる。

【0075】

例えば、顔検出処理部２２１は、標準検出モードでは、第１カメラ１２１および第２カメラ１２２のうち第１カメラ１２１のみを有効にし、第２カメラ１２２からは赤外線を発光させない。顔検出処理部２２１は、第１カメラ１２１により撮像されたＲＧＢ画像の画像データをシステムメモリ３１０から読み出す。つまり、顔検出処理部２２１は、標準検出モードではＲＧＢ画像の中から顔領域を検出する。例えば、顔検出処理部２２１は、ＲＧＢ画像の中から顔検出評価値が顔判定閾値以上の領域を顔領域として検出する。

【0076】

また、顔検出処理部２２１は、高精度検出モードでは、第１カメラ１２１および第２カメラ１２２の両方を有効にし、第２カメラ１２２からは赤外線を発光させる。顔検出処理部２２１は、第１カメラ１２１および第２カメラ１２２により撮像されたＲＧＢ画像及びＩＲ画像の画像データをシステムメモリ３１０から読み出す。つまり、顔検出処理部２２１は、高精度検出モードではＲＧＢ画像及びＩＲ画像の中から顔領域を検出する。なお、顔検出処理部２２１は、高精度検出モードにおいて、第１カメラ１２１および第２カメラ１２２のうち第２カメラ１２２のみを有効にして、ＩＲ画像の中から顔領域を検出してもよい。

【0077】

検出領域設定部２２２は、顔検出処理部２２１により高精度検出モードで顔領域が検出された場合、高精度検出モードで検出された顔領域に基づく高信頼性領域を設定する。例えば、高信頼性領域は、標準検出モードで顔領域を検出する際に使用される。検出領域設定部２２２は、標準検出モードにおいて高信頼性領域が設定されている場合、高信頼性領域内に検出された顔領域の位置に基づいて当該高信頼性領域の位置を更新する。例えば、検出領域設定部２２２は、高信頼性領域内に検出された顔領域の位置または大きさから変化した場合、顔領域の位置または大きさの変化に応じて高信頼性領域の位置または大きさを変更する。つまり、検出領域設定部２２２は、高信頼性領域内に検出された顔領域の位置または大きさの変化（顔の移動）に応じて高信頼性領域を追従させる。

【0078】

図９は、本実施形態に係る高信頼性領域のトラッキングの説明図である。図９の（Ａ）は、位置ａを中心とする顔領域が検出されたときのバウンディングボックス１０４ａと、バウンディングボックス１０４ａに基づいて設定されている高信頼性領域１０５ａとを示している。図９の（Ｂ）に示すように、顔領域の中心が位置ａから位置ｂへ移動すると、バウンディングボックス１０４ａ及び高信頼性領域１０５ａは顔領域の移動に追従して移動し、バウンディングボックス１０４ｂおよび高信頼性領域１０５ｂとなる。

【0079】

なお、検出領域設定部２２２は、高信頼性領域内に顔領域が検出されなくなった場合には、設定した高信頼性領域を解除する。例えば、検出領域設定部２２２は、検出された顔領域が高信頼性領域外（標準領域）になった場合、或いは顔領域が検出されなくなった場合、設定した高信頼性領域を解除する。

【0080】

また、顔検出処理部２２１により複数の顔領域が検出された場合、検出領域設定部２２２は、検出された複数の顔領域のうちの一つ（最もメインとなる顔領域）に基づいて高信頼性領域を設定する。例えば、検出領域設定部２２２は、検出された複数の顔領域のうち最も大きい顔領域に基づいて高信頼性領域を設定してもよい。また、検出領域設定部２２２は、検出された複数の顔領域のうち撮像画像の中央に最も近い顔領域に基づいて高信頼性領域を設定してもよい。

【0081】

ここで、顔検出処理部２２１は、標準検出モードで撮像画像の中から顔領域を検出する際に、高信頼性領域が設定されている場合、高信頼性領域と標準領域とでは異なる検出条件で顔領域を検出する。具体的には、高信頼性領域における顔判定閾値は、標準領域における顔判定閾値よりも低く設定される。例えば、高信頼性領域における顔判定閾値は、標準領域における顔判定閾値所定の割合分（例えば１０％）低い値に設定される。

【0082】

図８に戻り、顔認証処理部２２３は、顔検出処理部２２１により高精度検出モードで撮像画像の中から検出された顔領域に基づいて顔認証処理を実行する。顔認証方法としては、検出された顔領域の顔画像に特徴情報と予め登録されているユーザの顔画像の特徴情報とを比較・照合することにより顔認証する顔認証アルゴリズムや、顔の特徴情報を基に機械学習された学習データ（学習済みモデル）や顔認証ライブラリなどを用いた顔認証など、任意の顔認証方法を適用することができる。つまり、撮像画像の中から顔領域が検出された場合、顔認証の認証結果によりユーザの顔であるか否かを判定することができる。

【0083】

例えば、顔認証処理部２２３は、ユーザ認証部３２０からの要求に応じて顔認証処理を実行し、認証結果をユーザ認証部３２０へ応答する。ユーザ認証部３２０は、システム処理部３００がＯＳのプログラムを実行することにより実現される機能構成である。ユーザ認証部３２０は、顔認証処理部２２３による認証結果に基づいて、ログイン時のユーザ認証処理、アクセス制限されているデータへのアクセス時のユーザ認証処理などを行う。

【0084】

また、ログイン後については、顔検出処理部２２１により標準検出モードで検出された顔領域が高信頼性領域内である間、顔認証処理部２２３は、顔認証処理を実行しない。顔検出処理部２２１により標準検出モードで検出された顔領域が高信頼性領域外になると、顔検出処理部２２１は、高精度検出モードで顔検出を行う。そして、顔認証処理部２２３は、顔検出処理部２２１は、高精度検出モードで検出された顔領域に基づいて、顔認証処理を実行する。

【0085】

ＨＰＤ処理部２２４は、顔検出処理部２２１による顔領域の検出結果と顔認証処理部２２３による認証結果とに基づいて、電子機器１の前方にユーザが存在するか否かを判定する。例えば、ＨＰＤ処理部２２４は、システムが待機状態の場合には、顔検出処理部２２１により標準検出モードで顔領域が検出された場合、電子機器１の前方にユーザが存在すると判定する。また、システムにログイン後の通常動作状態では、ＨＰＤ処理部２２４は、顔検出処理部２２１により標準検出モードで検出された顔領域が高信頼性領域内である場合には顔認証を行わずにユーザの顔である（即ち、ユーザが存在する）と判定し、検出された顔領域が高信頼性領域外の場合には、顔認証処理部２２３による顔認証に基づいてユーザの顔であるか否か（即ち、ユーザが存在するか否か）を判定する。そして、ＨＰＤ処理部２２４は、電子機器１の前方にユーザが存在するか否かの判定結果に基づくＨＰＤ情報を出力する。

【0086】

例えば、ＨＰＤ処理部２２４は、電子機器1の前方にユーザが存在してない状態から存在する状態へ判定結果が変化した場合、電子機器１へユーザが接近したことを示すＨＰＤ情報（以下、「アプローチ（Ａｐｐｒｏａｃｈ）情報」と称する）を出力する。また、ＨＰＤ処理部２２４は、電子機器１の前方にユーザが存在する状態と判定している間、電子機器１の前方にユーザが存在することを示すＨＰＤ情報（以下、「プレゼンス（Ｐｒｅｓｅｎｃｅ）情報」と称する）を出力する。また、ＨＰＤ処理部２２４は、電子機器１の前方にユーザが存在している状態から存在しない状態へ検出状態が変化した場合、電子機器１からユーザが離脱したことを示すＨＰＤ情報（以下、「リーブ（Ｌｅａｖｅ）情報」と称する）を出力する。ＨＰＤ処理部２２４は、顔検出処理部２２１による顔領域の検出結果に基づいて、アプローチ情報、プレゼンス情報、またはリーブ情報を動作制御部２１０へ出力する。

【0087】

動作制御部２１０は、例えばＥＣ２００が制御プログラムを実行することにより実現される機能構成であり、ＨＰＤ処理部２２４から出力されたＨＰＤ情報を取得し、取得したＨＰＤ情報に基づいてシステムの動作状態を制御する。

【0088】

例えば、動作制御部２１０は、待機状態において、顔検出部２２０（ＨＰＤ処理部２２４）からアプローチ情報を取得した場合、待機状態から通常動作状態へ遷移させる。具体的には、動作制御部２１０は、システムを起動させる指示をシステム処理部３００へ行う。例えば、動作制御部２１０は、システムを起動させる場合、電源部４００に対して、電子機器１の各部の動作に必要な電力を供給するための制御信号を出力する。その後、動作制御部２１０は、システム処理部３００にシステムの起動を指示するための起動信号を出力する。システム処理部３００は、起動信号を取得すると、システムを起動して待機状態から通常動作状態へ遷移させる。

【0089】

また、動作制御部２１０は、通常動作状態において、顔検出部２２０（ＨＰＤ処理部２２４）からプレゼンス情報を取得している間、システムを待機状態に遷移させないように制限し、通常動作状態を継続させる。なお、動作制御部２１０は、顔検出部２２０（ＨＰＤ処理部２２４）からプレゼンス情報を取得していても、所定の条件によって通常動作状態から待機状態へ遷移させてもよい。所定の条件とは、例えば、ユーザによる操作入力が行われていない時間（無操作の時間）が予め設定された時間継続すること、待機状態へ遷移させる操作が行われることなどである。

【0090】

また、動作制御部２１０は、通常動作において、顔検出部２２０（ＨＰＤ処理部２２４）からリーブ情報を取得した場合、システムを通常動作状態から待機状態へ遷移させる指示をシステム処理部３００へ行う。例えば、動作制御部２１０は、システム処理部３００にシステムを通常動作状態から待機状態へ遷移させる指示をするための待機信号を出力する。システム処理部３００は、待機信号を取得すると、システムを通常動作状態から待機状態へ遷移させる。その後、動作制御部２１０は、電源部４００に対して、待機状態では不要な電力の供給を停止させるための制御信号を出力する。

【0091】

なお、動作制御部２１０は、ＥＣ２００に代えて、チップセットまたはセンサハブなどの機能構成としてもよい。不図示のチップセットおよびセンサハブは、ＣＰＵ３０２と周辺部品との間でデータの送受信やデータ処理などを行うプロセッサであり、例えば加速度センサ１３０、顔検出部２２０などからデータを収集する。例えば、チップセットおよびセンサハブは、メモリコントローラ３０６およびＩ／Ｏコントローラ３０８の一部または全部の機能を有する。

【0092】

［顔検出処理の動作］
次に、図１０を参照して、顔検出部２２０が標準検出モードにおいて高信頼性領域を設定して顔領域を検出する顔検出処理の動作について説明する。
図１０は、本実施形態に係る標準検出モードにおける顔検出処理の一例を示すフローチャートである。

【0093】

（ステップＳ１０１）顔検出部２２０は、顔検出結果の信頼性の高い（顔が存在する可能性が高い）顔領域が検出されたか否かを判定する。例えば、顔検出部２２０は、高精度検出モードで顔領域が検出された場合に顔検出結果の信頼性の高い顔領域が検出されたと判定する。一例として、顔検出部２２０は、直前のログイン時の顔認証処理において、高精度検出モードで顔領域が検出された場合に顔検出結果の信頼性の高い顔領域が検出されたと判定する。直前のログイン時とは、現在の通常動作状態へ遷移する際の起動におけるログイン時であり、当該ログインの後に待機状態または停止状態へ遷移しておらず、当該ログイン後に通常動作状態が継続している場合を指す。

【0094】

なお、顔検出部２２０は、高精度検出モードに限らず標準検出モードであっても、顔検出評価値が高い場合には、その検出結果の信頼性が高い（顔が存在する可能性が高い）と判定してもよい。

【0095】

顔検出部２２０は、顔検出結果の信頼性の高い顔領域が検出されたと判定した場合（ＹＥＳ）、ステップＳ１０３の処理へ進む。一方、顔検出部２２０は、顔検出結果の信頼性の高い顔領域が検出されていないと判定した場合（ＮＯ）、ステップＳ１０５の処理へ進む。

【0096】

（ステップＳ１０３）顔検出部２２０は、顔検出結果の信頼性の高い顔領域（例えば、高精度検出モードで検出された顔領域）に基づいて高信頼性領域を設定する（図４参照）。そして、ステップＳ１０５の処理へ進む。

【0097】

（ステップＳ１０５）顔検出部２２０は、標準検出モードで撮像画像から顔領域を検出する顔検出処理を行う。例えば、顔検出部２２０は、撮像画像から顔領域の候補と顔検出評価値とを取得する。なお、顔検出部２２０は、撮像画像から複数の顔領域が検出された場合には、複数の顔領域のうち最もメインとなる顔領域の候補と顔検出評価値とを取得する。そして、ステップＳ１０７の処理へ進む。

【0098】

（ステップＳ１０７）顔検出部２２０は、ステップＳ１０５で取得した顔領域の候補について、高信頼性領域内であるか否かを判定する。顔検出部２２０は、高信頼性領域内であると判定した場合（ＹＥＳ）、ステップＳ１０９の処理へ進む。一方、顔検出部２２０は、高信頼性領域内では無い（即ち、標準領域内である）と判定した場合（ＮＯ）、ステップＳ１１５の処理へ進む。

【0099】

（ステップＳ１０９）顔検出部２２０は、高信頼性領域の顔判定閾値（例えば、「６３」）を用いて、高信頼性領域内の顔領域の候補の顔検出評価値を判定する。そして、ステップＳ１１１の処理へ進む。

【0100】

（ステップＳ１１１）顔検出部２２０は、顔検出評価値が高信頼性領域の顔判定閾値以上であるか否かを判定し、高信頼性領域の顔判定閾値以上であると判定した場合（ＹＥＳ）、顔領域であると判定してステップＳ１１３の処理へ進む。一方、顔検出部２２０は、高信頼性領域の顔判定閾値未満であると判定した場合（ＮＯ）、顔領域では無いと判定してステップＳ１１９の処理へ進む。

【0101】

（ステップＳ１１３）顔検出部２２０は、検出された顔領域に基づいて高信頼性領域を更新する。例えば、顔検出部２２０は、検出された顔領域の位置または大きさが直前に検出された顔領域の位置または大きさから変化した場合、位置または大きさの変化に応じて高信頼性領域の位置または大きさを変更する。

【0102】

（ステップＳ１１５）顔検出部２２０は、標準領域の顔判定閾値（例えば、「７０」）を用いて、高信頼性領域外（或いは、高信頼性領域が設定されていない状態）の顔領域の候補の顔検出評価値を判定する。そして、ステップＳ１１７の処理へ進む。

【0103】

（ステップＳ１１７）顔検出部２２０は、顔検出評価値が標準領域の顔判定閾値以上であるか否かを判定し、標準領域の顔判定閾値以上であると判定した場合（ＹＥＳ）、顔領域であると判定してステップＳ１１９の処理へ進む。一方、顔検出部２２０は、標準領域の顔判定閾値未満であると判定した場合（ＮＯ）、顔領域では無いと判定してステップＳ１１９の処理へ進む。

【0104】

（ステップＳ１１９）顔検出部２２０は、高信頼性領域が設定されている場合には高信頼性領域を解除する。例えば、顔検出部２２０は、高信頼性領域が設定されている状態において、高信頼性領域内に顔領域が検出されなかった場合（ステップＳ１１１：ＮＯ）、標準領域内に顔領域が検出された場合（ステップＳ１１７：ＹＥＳ）、または高信頼性領域内にも標準領域内にも顔領域が検出されなかった場合（ステップＳ１１７：ＮＯ）には高信頼性領域を解除する。なお、顔検出部２２０は、高信頼性領域が設定されていない場合（ステップＳ１０１：ＮＯ）には高信頼性領域が設定されていない状態を継続する。そして、ステップＳ１０１の処理へ戻る。

【0105】

次に、図１１を参照して、検出された顔領域が高信頼性領域外（標準領域）である場合に顔認証を行ってユーザではない場合にはシステムを待機状態に制御する待機状態制御処理の動作について説明する。

【0106】

図１１は、本実施形態に係る待機状態制御処理の一例を示すフローチャートである。
（ステップＳ２０１）通常動作状態において、顔検出部２２０は、標準モードで撮像された撮像画像から検出された顔領域（最もメインとなる顔領域）が、高信頼性領域内であるか否かを判定する。顔検出部２２０は、検出された顔領域が高信頼性領域外（標準領域内）であると判定した場合（ＮＯ）、ステップＳ２０３の処理へ進む。一方、顔検出部２２０は、検出された顔領域が高信頼性領域内であると判定した場合（ＹＥＳ）、ステップＳ２０９の処理へ進む。

【0107】

なお、検出された顔領域が高信頼性領域外（標準領域内）であると判定した場合（ＮＯ）とは、例えば、図１０のステップＳ１０７でＮＯ、ステップ１１７でＹＥＳと判定した場合に相当する。一方、検出された顔領域が高信頼性領域内であると判定した場合（ＹＥＳ）とは、例えば、図１０のステップＳ１０７およびステップＳ１１１でＹＥＳと判定した場合に相当する。

【0108】

（ステップＳ２０３）顔検出部２２０は、高精度検出モードで撮像された撮像画像から検出された顔領域に基づいて、ユーザの顔であるか否かを判定するための顔認証処理を実行する。そして、ステップＳ２０５の処理へ進む。

【0109】

（ステップＳ２０５）顔検出部２２０は、ステップＳ２０３の顔認証処理の認証結果が認証成功であるか否かを判定する。顔検出部２２０は、認証失敗であると判定した場合（ＮＯ）、ステップＳ２０７の処理へ進む。一方、顔検出部２２０は、認証成功であると判定した場合（ＹＥＳ）、ステップＳ２０９の処理へ進む。

【0110】

（ステップＳ２０７）顔検出部２２０は、高信頼性領域外（標準領域内）に検出された顔領域の顔がユーザ以外の顔であるため、電子機器１からユーザが離脱したことを示すリーブ情報を出力する。動作制御部２１０は、顔検出部２２０からリーブ情報を取得した場合、システムを通常動作状態から待機状態へ遷移させる指示をシステム処理部３００へ行う。例えば、動作制御部２１０は、システム処理部３００にシステムを通常動作状態から待機状態へ遷移させる指示をするための待機信号を出力する。システム処理部３００は、待機信号を取得すると、システムを通常動作状態から待機状態へ遷移させる（例えば、システムをロックさせる）。

【0111】

（ステップＳ２０９）顔検出部２２０は、検出された顔領域に基づいて高信頼性領域を更新する。例えば、ステップＳ２０５の判定がＹＥＳの場合には、高信頼性領域外（標準領域内）に検出された顔領域の顔がユーザの顔であるため、顔検出部２２０は、当該顔領域に基づいて高信頼性領域を再設定して更新する。なお、ステップＳ２０１の判定がＹＥＳの場合には、検出された顔領域に基づいて高信頼性領域内であることが継続しているため、検出された顔領域に基づいて高信頼性領域を更新する。例えば、顔検出部２２０は、検出された顔領域の位置または大きさが直前に検出された顔領域の位置または大きさから変化した場合、位置または大きさの変化に応じて高信頼性領域の位置または大きさを変更する。この時の処理は、図１０のステップＳ１１３の処理に相当する。

【0112】

[第１の実施形態のまとめ]
以上説明してきたように、本実施形態に係る電子機器１は、撮像部１２０（撮像装置の一例）で撮像された画像（撮像画像）の画像データを一時的に記憶するシステムメモリ３１０（メモリの一例）と、システムのプログラムに基づくシステム処理及び上記画像データを用いた処理を実行するプロセッサ（例えば、顔検出部２２０、ＣＰＵ３０２、ＥＣ２００など）と、を備えている。例えば、顔検出部２２０は、システムメモリ３１０に記憶された画像データの画像（撮像画像）の中から顔が撮像されている顔領域を、第１の検出精度（例えば、ＨＰＤ処理における顔検出の検出精度）で検出する標準検出モード（第１検出モードの一例）と、第１の検出精度よりも高い第２の検出精度（例えば、顔認証を行うための検出精度）で検出する高精度検出モード（第２検出モードの一例）とを有する顔検出処理を行う。また、顔検出部２２０は、高精度検出モードで顔領域が検出された場合、高精度検出モードで検出された顔領域に基づく高信頼性領域（第１領域の一例）を設定する処理（第１領域設定処理の一例）を行う。また、顔検出部２２０は、顔検出処理により検出された顔領域が高信頼性領域外の標準領域（第２領域の一例）になった場合、標準領域に検出された顔領域に基づいて顔認証する顔認証処理を行う。そして、動作制御部２１０（例えば、ＥＣ２００）は、顔認証処理による認証結果に基づいてシステムを待機状態に遷移させる待機状態制御処理を行う。

【0113】

これにより、電子機器１は、高信頼性領域内に顔領域が検出されている間は顔認証を行わずにユーザの顔である（即ち、ユーザが存在する）と判定して待機状態へ遷移させる制御を行わず、検出された顔領域が高信頼性領域外になったときのみ顔認証を行ってユーザの顔でない場合（即ち、ユーザが存在しない場合）に待機状態に遷移させるため、顔認証における誤認証を抑制することができ、顔認証を用いてセキュリティを向上させることができる。つまり、電子機器１は、限定的に顔認証を用いることでセキュリティを向上させることができる。

【0114】

また、本実施形態に係る電子機器１は、撮像部１２０（撮像装置の一例）で撮像された画像（撮像画像）の画像データを一時的に記憶するシステムメモリ３１０（メモリの一例）と、システムのプログラムに基づくシステム処理及び上記画像データを用いた処理を実行するプロセッサ（例えば、顔検出部２２０、ＣＰＵ３０２、ＥＣ２００など）と、を備えている。例えば、顔検出部２２０は、システムメモリ３１０に記憶された画像データの画像（撮像画像）の中から顔検出評価値（顔らしさの評価値の一例）が顔判定閾値（第１閾値の一例）以上の領域を顔領域として検出する顔検出処理を行う。また、顔検出部２２０は、顔検出処理により顔検出評価値が顔判定閾値よりも高い高信頼性閾値（第２閾値の一例）以上となる顔領域が検出された場合、検出された顔領域に基づく高信頼性領域（第１領域の一例）を設定する処理（第１領域設定処理の一例）を行う。また、顔検出部２２０は、顔検出処理により検出された顔領域が高信頼性領域外の標準領域（第２領域の一例）になった場合、標準領域に検出された顔領域に基づいて顔認証する顔認証処理を行う。そして、動作制御部２１０（例えば、ＥＣ２００）は、顔認証処理による認証結果に基づいてシステムを待機状態に遷移させる待機状態制御処理を行う。

【0115】

これにより、電子機器１は、高信頼性領域内に顔領域が検出されている間は顔認証を行わずにユーザの顔である（即ち、ユーザが存在する）と判定して待機状態へ遷移させる制御を行わず、検出された顔領域が高信頼性領域外になったときのみ顔認証を行ってユーザの顔でない場合（即ち、ユーザが存在しない場合）に待機状態に遷移させるため、顔認証における誤認証を抑制することができ、顔認証を用いてセキュリティを向上させることができる。つまり、電子機器１は、限定的に顔認証を用いることでセキュリティを向上させることができる。

【0116】

例えば、顔検出部２２０は、顔検出処理において複数の顔領域が検出された場合、複数の顔領域のうちの一つに基づいて、高信頼性領域を設定する処理（第１領域設定処理の一例）及び顔認証処理を行う。

【0117】

これにより、電子機器１は、電子機器１の前方に複数の人物が存在する場合でも、一人の人物をユーザ（メインユーザ）として、顔検出及び顔認証を行うことができる。

【0118】

一例として、顔検出部２２０は、複数の顔領域のうち最も大きい顔領域に基づいて、高信頼性領域を設定する処理（第１領域設定処理の一例）及び顔認証処理を行う。

【0119】

これにより、電子機器１は、電子機器１の前方に複数の人物が存在する場合でも、最も近くに存在する人物をユーザ（メインユーザ）として、顔検出及び顔認証を行うことができる。

【0120】

また、一例として、顔検出部２２０は、複数の顔領域のうち撮像画像の中央に最も近い顔領域に基づいて、高信頼性領域を設定する処理（第１領域設定処理の一例）及び顔認証処理を行う。

【0121】

これにより、電子機器１は、電子機器１の前方に複数の人物が存在する場合でも、最も正面に存在する人物をユーザ（メインユーザ）として、顔検出及び顔認証を行うことができる。

【0122】

また、顔検出部２２０は、高信頼性領域を設定する処理（第１領域設定処理の一例）において高信頼性領域を設定した後、顔検出処理により検出された顔領域の位置または大きさの変化に応じて、高信頼性領域の位置または大きさを変更する。

【0123】

これにより、電子機器１は、ユーザの顔の位置が電子機器１の使用中に少し移動しても、安定して顔検出を行いトラッキングすることができる。

【0124】

また、顔検出部２２０は、高信頼性領域を設定する処理（第１領域設定処理の一例）において、顔検出処理により検出された顔領域が標準領域になったことに基づいて高信頼性領域を解除する。即ち、顔検出部２２０は、高信頼性領域内に顔領域を検出できなくなった場合、高信頼性領域を解除する。

【0125】

これにより、電子機器１は、人物の顔ではない領域を顔領域として誤検出してしまうことを抑制できるため、安定した顔検出を行うことができる。

【0126】

また、顔検出部２２０は、高信頼性領域を設定する処理（第１領域設定処理の一例）において、顔認証処理により標準領域に検出された顔領域に基づいて顔認証した認証結果が認証成功になったことに基づいて、標準領域に検出された顔領域に基づいて高信頼性領域を再設定する。

【0127】

これにより、電子機器１は、高信頼性領域外に検出された顔領域の顔がユーザと判定される場合、以降、ユーザの顔として安定して顔検出することができる。

【0128】

例えば、撮像部１２０は、可視光線を撮像するＲＧＢセンサ（第１撮像素子の一例）と赤外線を撮像するＩＲセンサ（第２撮像素子の一例）とを備えている。標準検出モードは、ＲＧＢセンサとＩＲセンサのうちＲＧＢセンサのみを用いて撮像する検出モードであり、高精度検出モードは、少なくともＩＲセンサを用いて撮像する検出モードである。

【0129】

これにより、電子機器１は、標準検出モードではＩＲセンサを用いることなく、ＲＧＢセンサを用いて撮像した撮像画像の中から安定して顔領域を検出することができる。よって、電子機器１は、赤外線を発光させる必要が無いため、消費電力を抑えつつ安定した顔検出を実現することができる。

【0130】

また、本実施形態に係る電子機器１における制御方法は、顔検出部２２０が、システムメモリ３１０（メモリの一例）に記憶された画像データの画像（撮像画像）の中から顔が撮像されている顔領域を、第１の検出精度（例えば、ＨＰＤ処理における顔検出の検出精度）で検出する標準検出モード（第１検出モードの一例）と、第１の検出精度よりも高い第２の検出精度（例えば、顔認証を行うための検出精度）で検出する高精度検出モード（第２検出モードの一例）とを有する顔検出ステップと、顔検出ステップにより高精度検出モードで顔領域が検出された場合、高精度検出モードで検出された顔領域に基づく高信頼性領域（第１領域の一例）を設定する第１領域設定ステップと、顔検出ステップにより検出された顔領域が高信頼性領域外の標準領域（第２領域の一例）になった場合、標準領域に検出された顔領域に基づいて顔認証する顔認証ステップと、動作制御部２１０（例えば、ＥＣ２００）が、顔認証ステップによる認証結果に基づいてシステムを待機状態に遷移させる待機状態制御ステップと、を含む。

【0131】

これにより、電子機器１は、高信頼性領域内に顔領域が検出されている間は顔認証を行わずにユーザの顔である（即ち、ユーザが存在する）と判定して待機状態へ遷移させる制御を行わず、検出された顔領域が高信頼性領域外になったときのみ顔認証を行ってユーザの顔でない場合（即ち、ユーザが存在しない場合）に待機状態に遷移させるため、顔認証における誤認証を抑制することができ、顔認証を用いてセキュリティを向上させることができる。つまり、電子機器１は、限定的に顔認証を用いることでセキュリティを向上させることができる。

【0132】

また、本実施形態に係る電子機器１における制御方法は、顔検出部２２０が、システムメモリ３１０（メモリの一例）に記憶された画像データの画像（撮像画像）の中から顔検出評価値（顔らしさの評価値の一例）が顔判定閾値（第１閾値の一例）以上の領域を顔領域として検出する顔検出ステップと、顔検出ステップにより顔検出評価値が顔判定閾値よりも高い高信頼性閾値（第２閾値の一例）以上となる顔領域が検出された場合、検出された顔領域に基づく高信頼性領域（第１領域の一例）を設定する第１領域設定ステップと、顔検出ステップにより検出された高信頼性領域外の標準領域（第２領域の一例）になった場合、標準領域に検出された顔領域に基づいて顔認証する顔認証ステップと、動作制御部２１０（例えば、ＥＣ２００）が、顔認証ステップによる認証結果に基づいてシステムを待機状態に遷移させる待機状態制御ステップと、を含む。

【0133】

これにより、電子機器１は、高信頼性領域内に顔領域が検出されている間は顔認証を行わずにユーザの顔である（即ち、ユーザが存在する）と判定して待機状態へ遷移させる制御を行わず、検出された顔領域が高信頼性領域外になったときのみ顔認証を行ってユーザの顔でない場合（即ち、ユーザが存在しない場合）に待機状態に遷移させるため、顔認証における誤認証を抑制することができ、顔認証を用いてセキュリティを向上させることができる。つまり、電子機器１は、限定的に顔認証を用いることでセキュリティを向上させることができる。

【0134】

＜第２の実施形態＞
次に、本発明の第２の実施形態について説明する。
第１の実施形態で、検出された顔領域が高信頼性領域外（標準領域）である場合に顔認証を行ってユーザではない場合にはシステムを待機状態に制御する待機状態制御処理について説明したが、この待機状態制御処理は、電子機器１が手持ちされている状態では一時的に無効にしてもよい。手持ちされている状態では、ユーザの顔を安定的に正面から撮像し続けることが難しいため、顔認証が正しくされずに待機状態に遷移してしまわないようにしてもよい。

【0135】

図１２は、本実施形態に係る電子機器１Ａの機能構成の一例を示す概略ブロック図である。この図において、図８の各部に対応する構成には同一の符号を付している。図示する電子機器１Ａは、電子機器１Ａの動きを検出す加速度センサ１３０を用いて電子機器１Ａが手持ちされているか否かを判定する状態判定部２１５を備えている点が、図８に示す構成と異なる。状態判定部２１５は、例えばＥＣ２００が制御プログラムを実行することにより実現される機能構成である。なお、状態判定部２１５は、動作制御部２１０と同様に、ＥＣ２００に代えて、チップセットまたはセンサハブなどの機能構成としてもよい。

【0136】

動作制御部２１０は、状態判定部２１５により電子機器１Ａが手持ちされていると判定された場合、顔認証処理部２２３による認証結果に基づいてシステムを待機状態に遷移させるための待機信号を出力する制御処理の実行を保留する。即ち、電子機器１Ａが手持ちされている状態では、図１１に示す顔認証により待機状態に制御する待機状態制御処理の実行が保留される。

【0137】

図１３は、本実施形態に係る待機状態制御処理を保留する処理の一例を示すフローチャートである。
（ステップＳ３０１）状態判定部２１５は、加速度センサ１３０の検出信号を取得し、電子機器１Ａの動きの状態をモニタリングする。そして、ステップＳ３０３の処理へ進む。

【0138】

（ステップＳ３０３）状態判定部２１５は、加速度センサ１３０の検出信号に基づいてモニタリングしている電子機器１Ａの動きに基づいて、電子機器１Ａが手持ちされているか否かを判定する。状態判定部２１５は、電子機器１Ａが手持ちされていると判定した場合（ＹＥＳ）、ステップＳ３０５の処理へ進む。一方、状態判定部２１５は、電子機器１Ａが手持ちされていないと判定した場合（ＮＯ）、ステップＳ３０１の処理へ戻り、電子機器１Ａの動きの状態をモニタリングする。

【0139】

（ステップＳ３０５）動作制御部２１０は、状態判定部２１５により電子機器１Ａが手持ちされていると判定された場合、顔認証により待機状態制御処理（図１１参照）の実行を一時的に保留する。そして、ステップＳ３０７の処理へ進む。

【0140】

（ステップＳ３０７）動作制御部２１０は、予め設定された待機時間の計時を行い、当該待機時間が経過するまでの期間、待機状態制御処理の実行を保留した状態を継続する。そして、動作制御部２１０は、待機時間が経過した場合、待機状態制御処理の実行の保留を解除し、ステップＳ３０１の処理へ戻る。

【0141】

このように、本実施形態に係る電子機器１Ａは、電子機器１Ａの動きを検出する加速度センサ１３０（センサの一例）を用いて電子機器１が手持ちされているか否かを判定する判定処理を行う状態判定部２１５（例えば、ＥＣ２００）をさらに備えている。そして、動作制御部２１０は、状態判定部２１５により電子機器１Ａが手持ちされていると判定された場合、顔検出部２２０の顔認証処理による認証結果に基づいてシステムを待機状態に遷移させるための情報を出力する待機状態制御処理の実行を保留する。

【0142】

これにより、電子機器１は、手持ちされている状態では、ユーザの顔を安定的に正面から撮像し続けることが難しいため、顔認証が正しくされずに待機状態に遷移してしまうことを防ぐことができる。

【0143】

以上、この発明の各実施形態について図面を参照して詳述してきたが、具体的な構成は上述の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。例えば、上述の各実施形態において説明した各構成は、任意に組み合わせることができる。

【0144】

また、上記実施形態では、電子機器１に撮像部１２０が内蔵されている構成例を説明したが、これに限られるものではない。例えば、撮像部１２０は、電子機器１に内蔵されていなくてもよく、電子機器１の外部アクセサリとして電子機器１（例えば、側面１０ａ、１０ｂ、１０ｃ等のいずれか）に取り付け可能に構成され、無線または有線で電子機器１と通信接続されるものであってもよい。

【0145】

また、電子機器１は、物体までの距離を検出する距離センサ（例えば、近接センサなど）を併用して前方に存在する人物を検出してもよい。例えば、距離センサは、第１筐体１０の内面側に設けられ、第１筐体１０の内面に対面する方向（前方）の検出範囲内に存在する物体（例えば、人物）を検出する。一例として、距離センサは、赤外線を発光する発光部と、発光した赤外線が物体の表面に反射して戻ってくる反射光を受光する受光部とを含んで構成される赤外線距離センサであってもよい。なお、距離センサは、発光ダイオードが発光する赤外線を用いたセンサであってもよいし、発光ダイオードが発光する赤外線よりも波長帯域が狭い光線を発光する赤外線レーザを用いたセンサであってもよい。また、距離センサは、赤外線距離センサに限定されるものでなく、物体との距離を検出するセンサであれば、超音波センサまたはＵＷＢ（Ｕｌｔｒａ Ｗｉｄｅ Ｂａｎｄ）レーダを用いたセンサ等の他の方式を用いたセンサであってもよい。また、距離センサも、電子機器１に内蔵されていなくてもよく、電子機器１の外部アクセサリとして電子機器１（例えば、側面１０ａ、１０ｂ、１０ｃ等のいずれか）に取り付け可能に構成され、無線または有線で電子機器１と通信接続されるものであってもよい。また、撮像部１２０と距離センサとが一体に構成されてもよい。例えば、これらの距離センサは、顔認証処理の際に用いられてもよい。

【0146】

また、上記実施形態では、顔検出部２２０がＥＣ２００とは別に備えられている例を示したが、顔検出部２２０の一部または全部をＥＣ２００が備える構成としてもよいし、顔検出部２２０の一部または全部とＥＣ２００とが１つのパッケージで構成されてもよい。また、顔検出部２２０の一部または全部をシステム処理部３００が備える構成としてもよいし、顔検出部２２０の一部または全部とシステム処理部３００の一部または全部とが１つのパッケージで構成されてもよい。また、動作制御部２１０の一部または全部は、ＥＣ２００以外の処理部（例えば、システム処理部３００）の機能構成としてもよい。

【0147】

なお、上述した電子機器１は、内部にコンピュータシステムを有している。そして、上述した電子機器１が備える各構成の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより上述した電子機器１が備える各構成における処理を行ってもよい。ここで、「記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行する」とは、コンピュータシステムにプログラムをインストールすることを含む。ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、インターネットやＷＡＮ、ＬＡＮ、専用回線等の通信回線を含むネットワークを介して接続された複数のコンピュータ装置を含んでもよい。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ－ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。このように、プログラムを記憶した記録媒体は、ＣＤ－ＲＯＭ等の非一過性の記録媒体であってもよい。

【0148】

また、記録媒体には、当該プログラムを配信するために配信サーバからアクセス可能な内部又は外部に設けられた記録媒体も含まれる。なお、プログラムを複数に分割し、それぞれ異なるタイミングでダウンロードした後に電子機器１が備える各構成で合体される構成や、分割されたプログラムのそれぞれを配信する配信サーバが異なっていてもよい。さらに「コンピュータ読み取り可能な記録媒体」とは、ネットワークを介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（ＲＡＭ）のように、一定時間プログラムを保持しているものも含むものとする。また、上記プログラムは、上述した機能の一部を実現するためのものであってもよい。さらに、上述した機能をコンピュータシステムに既に記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であってもよい。

【0149】

また、上述した実施形態における電子機器１が備える各機能の一部、または全部を、ＬＳＩ（Ｌａｒｇｅ Ｓｃａｌｅ Ｉｎｔｅｇｒａｔｉｏｎ）等の集積回路として実現してもよい。各機能は個別にプロセッサ化してもよいし、一部、又は全部を集積してプロセッサ化してもよい。また、集積回路化の手法はＬＳＩに限らず専用回路、または汎用プロセッサで実現してもよい。また、半導体技術の進歩によりＬＳＩに代替する集積回路化の技術が出現した場合、当該技術による集積回路を用いてもよい。

【0150】

なお、電子機器１は、ノート型のＰＣに限られるものではなく、デスクトップ型ＰＣ、タブレット端末装置、スマートフォンなどであってもよい。さらに、電子機器１は、ＰＣ、タブレット端末装置、スマートフォンなどに限られるものではなく、家庭用電気製品や業務用電気製品にも適用できる。家庭用電気製品としては、テレビや、表示部が備えられた冷蔵庫、電子レンジ等に適用できる。例えば、人物の接近または離脱に応じて、テレビの画面のＯＮ／ＯＦＦを制御すること、或いは、冷蔵庫や電子レンジ等の表示部の画面のＯＮ／ＯＦＦを制御することができる。また、業務用電気製品としては、自動販売機や、マルチメディア端末等に適用できる。例えば、人物の接近または離脱に応じて、自動販売機の照明のＯＮ／ＯＦＦなど、或いは、マルチメディア端末の表示部の画面のＯＮ／ＯＦＦなどのように動作状態を制御することができる。

【符号の説明】

【0151】

１（１Ａ） 電子機器、１０ 第１筐体、２０ 第２筐体、１５ ヒンジ機構、１１０ 表示部、１２０ 撮像部、１２１ 第1カメラ、１２２ 第２カメラ、１３０ 加速度センサ、１４０ 電源ボタン、１５０ 入力デバイス、１５１ キーボード、１５３ タッチパッド、１６０ 映像出力端子、２００ ＥＣ、２１０ 動作制御部、２１５ 状態判定部、２２０ 顔検出部、２２１ 顔検出処理部、２２２ 検出領域設定部、２２３ 顔認証処理部、２２４ ＨＰＤ処理部、３００ システム処理部、３０２ ＣＰＵ、３０４ ＧＰＵ、３０６ メモリコントローラ、３０８ Ｉ／Ｏコントローラ、３１０ システムメモリ、３２０ ユーザ認証部、３５０ 通信部、３６０ 記憶部、４００ 電源部

【要約】

【課題】顔認証を用いてセキュリティを向上させること。
【解決手段】電子機器は、撮像装置で撮像された画像の画像データを一時的に記憶するメモリと、システムのプログラムに基づくシステム処理及び画像データを用いた処理を実行するプロセッサと、を備える。プロセッサは、メモリに記憶された画像データの画像の中から顔が撮像されている顔領域を、第１の検出精度で検出する第１検出モードと第１の検出精度よりも高い第２の検出精度で検出する第２検出モードとを有する顔検出処理と、顔検出処理により第２検出モードで顔領域が検出された場合、検出された顔領域に基づく第１領域を設定する第１領域設定処理と、顔検出処理により検出された顔領域が第１領域外の第２領域になった場合、第２領域に検出された顔領域に基づいて顔認証する顔認証処理と、顔認証処理による認証結果に基づいてシステムを待機状態に遷移させる待機状態制御処理と、を行う。
【選択図】図１１

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】