▶ レノボ・シンガポール・プライベート・リミテッドの特許一覧
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024156392
(43)【公開日】2024-11-06
(54)【発明の名称】情報処理装置、及び制御方法
(51)【国際特許分類】
G06F 21/32 20130101AFI20241029BHJP
G06F 21/31 20130101ALI20241029BHJP
G06T 7/00 20170101ALI20241029BHJP
【ＦＩ】
G06F21/32
G06F21/31
G06T7/00 510F
【審査請求】有
【請求項の数】9
【出願形態】ＯＬ
(21)【出願番号】P 2023070810
(22)【出願日】2023-04-24
(11)【特許番号】
(45)【特許公報発行日】2024-10-02
(71)【出願人】
【識別番号】505205731
【氏名又は名称】レノボ・シンガポール・プライベート・リミテッド
(74)【代理人】
【識別番号】100161207
【弁理士】
【氏名又は名称】西澤 和純
(74)【代理人】
【識別番号】100169764
【弁理士】
【氏名又は名称】清水 雄一郎
(74)【代理人】
【識別番号】100175824
【弁理士】
【氏名又は名称】小林 淳一
(74)【代理人】
【識別番号】100206081
【弁理士】
【氏名又は名称】片岡 央
(72)【発明者】
【氏名】西尾 匡史
(72)【発明者】
【氏名】和田 祐司
【テーマコード（参考）】
5B043
【Ｆターム（参考）】
5B043AA05
5B043AA09
5B043BA04
5B043DA05
5B043FA03
5B043FA07
5B043FA08
5B043FA09
5B043GA02
(57)【要約】
【課題】正規ユーザの顔を適切に認証すること。
【解決手段】情報処理装置は、撮像部により撮像された撮像画像の中から顔が撮像されている顔画像の領域を検出する顔検出処理と、検出された顔画像に基づく情報と正規ユーザの顔画像に基づく情報とに基づいて顔認証する顔認証処理とを実行する第１プロセッサと、顔検出処理により顔画像の領域が検出され且つ顔認証処理による顔認証が成功したことに基づいて、システムを待機状態から起動させる第２プロセッサと、を備える。第２プロセッサは、システムの起動後に、システムの処理により正規ユーザであるか否かを認証するシステム認証処理を実行する。第１プロセッサは、システム認証処理による認証が成功してからの所定時間内において、顔検出処理により検出された顔画像のうち顔の向きが特定の向きになったときの顔画像に基づく情報を、正規ユーザの顔画像に基づく情報として登録する。
【選択図】図３
【解決手段】情報処理装置は、撮像部により撮像された撮像画像の中から顔が撮像されている顔画像の領域を検出する顔検出処理と、検出された顔画像に基づく情報と正規ユーザの顔画像に基づく情報とに基づいて顔認証する顔認証処理とを実行する第１プロセッサと、顔検出処理により顔画像の領域が検出され且つ顔認証処理による顔認証が成功したことに基づいて、システムを待機状態から起動させる第２プロセッサと、を備える。第２プロセッサは、システムの起動後に、システムの処理により正規ユーザであるか否かを認証するシステム認証処理を実行する。第１プロセッサは、システム認証処理による認証が成功してからの所定時間内において、顔検出処理により検出された顔画像のうち顔の向きが特定の向きになったときの顔画像に基づく情報を、正規ユーザの顔画像に基づく情報として登録する。
【選択図】図３
【特許請求の範囲】
【請求項1】
システムのプログラムを一時的に記憶するメモリと、
撮像部により撮像された撮像画像の中から顔が撮像されている顔画像の領域を検出する顔検出処理と、検出された顔画像に基づく情報と正規ユーザの顔画像に基づく情報とに基づいて顔認証する顔認証処理とを実行する第１プロセッサと、
前記顔検出処理により前記顔画像の領域が検出され且つ前記顔認証処理による顔認証が成功したことに基づいて、前記システムのプログラムを実行することにより前記システムを待機状態から起動させる第２プロセッサと、
を備え、
前記第２プロセッサは、
前記システムの起動後に、前記システムの処理により正規ユーザであるか否かを認証するシステム認証処理を実行し、
前記第１プロセッサは、
前記システム認証処理による認証が成功してからの所定時間内において、前記顔検出処理により検出された顔画像のうち顔の向きが特定の向きになったときの顔画像に基づく情報を、前記正規ユーザの顔画像に基づく情報として登録する、
情報処理装置。
撮像部により撮像された撮像画像の中から顔が撮像されている顔画像の領域を検出する顔検出処理と、検出された顔画像に基づく情報と正規ユーザの顔画像に基づく情報とに基づいて顔認証する顔認証処理とを実行する第１プロセッサと、
前記顔検出処理により前記顔画像の領域が検出され且つ前記顔認証処理による顔認証が成功したことに基づいて、前記システムのプログラムを実行することにより前記システムを待機状態から起動させる第２プロセッサと、
を備え、
前記第２プロセッサは、
前記システムの起動後に、前記システムの処理により正規ユーザであるか否かを認証するシステム認証処理を実行し、
前記第１プロセッサは、
前記システム認証処理による認証が成功してからの所定時間内において、前記顔検出処理により検出された顔画像のうち顔の向きが特定の向きになったときの顔画像に基づく情報を、前記正規ユーザの顔画像に基づく情報として登録する、
情報処理装置。
【請求項2】
前記特定の向きとは、前記撮像部の方向を基準とした向きである、
請求項１に記載の情報処理装置。
請求項１に記載の情報処理装置。
【請求項3】
前記第１プロセッサは、
前記所定時間内において、前記撮像画像の中から検出された顔画像の顔角度を検出し、検出された前記顔角度が、前記撮像部の方向を基準とした所定の角度範囲内である場合に、顔の向きが前記特定の向きになったと判定する、
請求項２に記載の情報処理装置。
前記所定時間内において、前記撮像画像の中から検出された顔画像の顔角度を検出し、検出された前記顔角度が、前記撮像部の方向を基準とした所定の角度範囲内である場合に、顔の向きが前記特定の向きになったと判定する、
請求項２に記載の情報処理装置。
【請求項4】
前記第１プロセッサは、
前記所定時間内において前記撮像画像の中から顔画像の領域を検出する頻度を、前記待機状態において前記撮像画像の中から顔画像の領域を検出する頻度よりも高くする、
請求項３に記載の情報処理装置。
前記所定時間内において前記撮像画像の中から顔画像の領域を検出する頻度を、前記待機状態において前記撮像画像の中から顔画像の領域を検出する頻度よりも高くする、
請求項３に記載の情報処理装置。
【請求項5】
前記第１プロセッサは、
前記正規ユーザの顔画像に基づく情報を登録する際に、前記正規ユーザの顔画像に基づく情報が登録されていない場合には新規に登録し、前記正規ユーザの顔画像に基づく情報が既に登録されている場合には登録済みの情報を更新する、
請求項１に記載の情報処理装置。
前記正規ユーザの顔画像に基づく情報を登録する際に、前記正規ユーザの顔画像に基づく情報が登録されていない場合には新規に登録し、前記正規ユーザの顔画像に基づく情報が既に登録されている場合には登録済みの情報を更新する、
請求項１に記載の情報処理装置。
【請求項6】
前記正規ユーザの顔画像に基づく情報が未登録の場合、
前記第２プロセッサは、
前記待機状態において前記撮像部により撮像された前記撮像画像の中から顔画像の領域が検出されたことに基づいて前記システムを待機状態から起動させる、
請求項１に記載の情報処理装置。
前記第２プロセッサは、
前記待機状態において前記撮像部により撮像された前記撮像画像の中から顔画像の領域が検出されたことに基づいて前記システムを待機状態から起動させる、
請求項１に記載の情報処理装置。
【請求項7】
前記第２プロセッサは、
前記システムの起動後に、前記撮像部により撮像された前記撮像画像の中から顔画像の領域が検出されなくなった場合、前記待機状態へ遷移させる、
請求項１に記載の情報処理装置。
前記システムの起動後に、前記撮像部により撮像された前記撮像画像の中から顔画像の領域が検出されなくなった場合、前記待機状態へ遷移させる、
請求項１に記載の情報処理装置。
【請求項8】
前記第２プロセッサは、
前記システムの起動後に、前記撮像部により撮像された前記撮像画像の中から顔画像の領域が検出されていても、顔認証処理による顔認証が失敗した場合には、前記待機状態へ遷移させる、
請求項１に記載の情報処理装置。
前記システムの起動後に、前記撮像部により撮像された前記撮像画像の中から顔画像の領域が検出されていても、顔認証処理による顔認証が失敗した場合には、前記待機状態へ遷移させる、
請求項１に記載の情報処理装置。
【請求項9】
システムのプログラムを一時的に記憶するメモリと、第１プロセッサと、第２プロセッサとを備える情報処理装置における制御方法であって、
前記第１プロセッサが、撮像部により撮像された撮像画像の中から顔が撮像されている顔画像の領域を検出する顔検出処理を行うステップと、
前記第１プロセッサが、検出された顔画像に基づく情報と正規ユーザの顔画像に基づく情報とに基づいて顔認証する顔認証処理を行うステップと、
前記第２プロセッサが、前記顔検出処理により前記顔画像の領域が検出され且つ前記顔認証処理による顔認証が成功したことに基づいて、前記システムのプログラムを実行することにより前記システムを待機状態から起動させるステップと、
前記第２プロセッサが、前記システムの起動後に、前記システムの処理により正規ユーザであるか否かを認証するシステム認証処理を実行するステップと、
前記第１プロセッサが、前記システム認証処理による認証が成功してからの所定時間内において、前記顔検出処理により検出された顔画像のうち顔の向きが特定の向きになったときの顔画像に基づく情報を、前記正規ユーザの顔画像に基づく情報として登録するステップと、
を含む制御方法。
前記第１プロセッサが、撮像部により撮像された撮像画像の中から顔が撮像されている顔画像の領域を検出する顔検出処理を行うステップと、
前記第１プロセッサが、検出された顔画像に基づく情報と正規ユーザの顔画像に基づく情報とに基づいて顔認証する顔認証処理を行うステップと、
前記第２プロセッサが、前記顔検出処理により前記顔画像の領域が検出され且つ前記顔認証処理による顔認証が成功したことに基づいて、前記システムのプログラムを実行することにより前記システムを待機状態から起動させるステップと、
前記第２プロセッサが、前記システムの起動後に、前記システムの処理により正規ユーザであるか否かを認証するシステム認証処理を実行するステップと、
前記第１プロセッサが、前記システム認証処理による認証が成功してからの所定時間内において、前記顔検出処理により検出された顔画像のうち顔の向きが特定の向きになったときの顔画像に基づく情報を、前記正規ユーザの顔画像に基づく情報として登録するステップと、
を含む制御方法。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、情報処理装置、及び制御方法に関する。
【背景技術】
【0002】
人物が近づくと使用可能な状態に遷移し、人物が離れると一部の機能を除いて停止した待機状態に遷移する情報処理装置がある。例えば、特許文献１には、赤外線センサを用いて、人物が近づいてきたか否か、或いは人物が遠ざかったか否かを検出している。
【0003】
近年、コンピュータビジョンなどの発展により、画像から顔を検出する際の検出精度が高くなってきている。そのため、赤外線センサによる人物の検出に代えて、顔検出が利用され始めている。また、情報処理装置の起動の際に、正規ユーザであるか否かのユーザ認証（例えば、ログイン認証）を行うが、この認証方法として、顔認証が用いられるようになってきている。例えば、情報処理装置は、人物が近づくと、その人物の顔を検出することにより起動し、その後、顔認証などのログイン認証を行うことにより正規ユーザであればシステムへのログインを許可して使用可能な状態に遷移する。
【先行技術文献】
【特許文献】
【0004】
【特許文献1】特開２０１６－１４８８９５号公報
【発明の概要】
【発明が解決しようとする課題】
【0005】
上述したような顔検出により起動する方法では、正規ユーザ以外の人物が近づいた場合も起動してしまうという課題がある。この課題を解決するために、例えばログイン認証で認証成功したときに検出された顔を正規ユーザの顔として登録し、起動の際に顔検出に加えて顔認証を行う方法が考えられる。しかしながら、ログイン認証で認証成功したときに顔が正面を向いているとは限らないため、正規ユーザの顔であっても正面を向いていない顔が登録されてしまうことがある。その場合、正規ユーザの顔を適切に認証できない可能性があり、例えば正規ユーザが近づいても起動できない可能性がある。
【0006】
本発明は、上記した事情に鑑みてなされたもので、正規ユーザの顔を適切に認証できる情報処理装置、及び制御方法を提供することを目的の一つとする。
【課題を解決するための手段】
【0007】
本発明は上記の課題を解決するためになされたものであり、本発明の第１態様に係る情報処理装置は、システムのプログラムを一時的に記憶するメモリと、撮像部により撮像された撮像画像の中から顔が撮像されている顔画像の領域を検出する顔検出処理と、検出された顔画像に基づく情報と正規ユーザの顔画像に基づく情報とに基づいて顔認証する顔認証処理とを実行する第１プロセッサと、前記顔検出処理により前記顔画像の領域が検出され且つ前記顔認証処理による顔認証が成功したことに基づいて、前記システムのプログラムを実行することにより前記システムを待機状態から起動させる第２プロセッサと、を備え、前記第２プロセッサは、前記システムの起動後に、前記システムの処理により正規ユーザであるか否かを認証するシステム認証処理を実行し、前記第１プロセッサは、前記システム認証処理による認証が成功してからの所定時間内において、前記顔検出処理により検出された顔画像のうち顔の向きが特定の向きになったときの顔画像に基づく情報を、前記正規ユーザの顔画像に基づく情報として登録する。
【0008】
上記情報処理装置において、前記特定の向きとは、前記撮像部の方向を基準とした向きであってもよい。
【0009】
上記情報処理装置において、前記第１プロセッサは、前記所定時間内において、前記撮像画像の中から検出された顔画像の顔角度を検出し、検出された前記顔角度が、前記撮像部の方向を基準とした所定の角度範囲内である場合に、顔の向きが前記特定の向きになったと判定してもよい。
【0010】
上記情報処理装置において、前記第１プロセッサは、前記所定時間内において前記撮像画像の中から顔画像の領域を検出する頻度を、前記待機状態において前記撮像画像の中から顔画像の領域を検出する頻度よりも高くしてもよい。
【0011】
上記情報処理装置において、前記第１プロセッサは、前記正規ユーザの顔画像に基づく情報を登録する際に、前記正規ユーザの顔画像に基づく情報が登録されていない場合には新規に登録し、前記正規ユーザの顔画像に基づく情報が既に登録されている場合には登録済みの情報を更新してもよい。
【0012】
上記情報処理装置において、前記正規ユーザの顔画像に基づく情報が未登録の場合、前記第２プロセッサは、前記待機状態において前記撮像部により撮像された前記撮像画像の中から顔画像の領域が検出されたことに基づいて前記システムを待機状態から起動させてもよい。
【0013】
上記情報処理装置において、前記第２プロセッサは、前記システムの起動後に、前記撮像部により撮像された前記撮像画像の中から顔画像の領域が検出されなくなった場合、前記待機状態へ遷移させてもよい。
【0014】
上記情報処理装置において、前記第２プロセッサは、前記システムの起動後に、前記撮像部により撮像された前記撮像画像の中から顔画像の領域が検出されていても、顔認証処理による顔認証が失敗した場合には、前記待機状態へ遷移させてもよい。
【0015】
また、本発明の第２態様に係る、システムのプログラムを一時的に記憶するメモリと、第１プロセッサと、第２プロセッサとを備える情報処理装置における制御方法は、前記第１プロセッサが、撮像部により撮像された撮像画像の中から顔が撮像されている顔画像の領域を検出する顔検出処理を行うステップと、前記第１プロセッサが、検出された顔画像に基づく情報と正規ユーザの顔画像に基づく情報とに基づいて顔認証する顔認証処理を行うステップと、前記第２プロセッサが、前記顔検出処理により前記顔画像の領域が検出され且つ前記顔認証処理による顔認証が成功したことに基づいて、前記システムのプログラムを実行することにより前記システムを待機状態から起動させるステップと、前記第２プロセッサが、前記システムの起動後に、前記システムの処理により正規ユーザであるか否かを認証するシステム認証処理を実行するステップと、前記第１プロセッサが、前記システム認証処理による認証が成功してからの所定時間内において、前記顔検出処理により検出された顔画像のうち顔の向きが特定の向きになったときの顔画像に基づく情報を、前記正規ユーザの顔画像に基づく情報として登録するステップと、を含む。
【発明の効果】
【0016】
本発明の上記態様によれば、正規ユーザの顔を適切に認証できる。
【図面の簡単な説明】
【0017】
【図1】実施形態に係る情報処理装置のＨＰＤ処理の概要を説明する図。
【図2】実施形態に係る情報処理装置の人物の検出範囲の一例を示す図。
【図3】実施形態に係る情報処理装置のＨＰＤユーザＩＤを用いたＨＰＤ処理の概要を示す図。
【図4】実施形態に係る情報処理装置の外観の構成例を示す斜視図。
【図5】実施形態に係る情報処理装置のハードウェア構成の一例を示す図。
【図6】実施形態に係る情報処理装置の機能構成の一例を示す図。
【図7】実施形態に係る待機状態におけるＨＰＤ処理の一例を示すフローチャート。
【図8】実施形態に係る顔認証によるログイン認証処理の一例を示すフローチャート。
【図9】実施形態に係るＨＰＤユーザＩＤ登録／更新処理の一例を示すフローチャート。
【図10】実施形態に係るＨＰＤユーザＩＤ登録処理の一例を示すフローチャート。
【図11】実施形態に係るＨＰＤユーザＩＤ更新処理の一例を示すフローチャート。
【図12】実施形態に係る通常動作状態におけるＨＰＤ処理の一例を示すフローチャート。
【発明を実施するための形態】
【0018】
以下、図面を参照して、本発明の実施形態について説明する。
まず、本実施形態に係る情報処理装置の概要について説明する。本実施形態に係る情報処理装置１は、例えば、ノート型（クラムシェル型）のＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ；パーソナルコンピュータ）である。なお、情報処理装置１は、デスクトップ型ＰＣ、タブレット型ＰＣ、スマートフォンなど、いずれの形態の情報処理装置であってもよい。
まず、本実施形態に係る情報処理装置の概要について説明する。本実施形態に係る情報処理装置１は、例えば、ノート型（クラムシェル型）のＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ；パーソナルコンピュータ）である。なお、情報処理装置１は、デスクトップ型ＰＣ、タブレット型ＰＣ、スマートフォンなど、いずれの形態の情報処理装置であってもよい。
【0019】
情報処理装置１は、システムの動作状態として少なくとも通常動作状態（パワーオン状態）と待機状態との間を遷移可能である。通常動作状態とは、特に制限なく処理の実行が可能な動作状態であり、例えば、ＡＣＰＩ（Ａｄｖａｎｃｅｄ Ｃｏｎｆｉｇｕｒａｔｉｏｎ ａｎｄ Ｐｏｗｅｒ Ｉｎｔｅｒｆａｃｅ）で規定されているＳ０状態に相当する。待機状態とは、システム処理の少なくとも一部が制限されている状態である。例えば、待機状態は、スタンバイ状態、スリープ状態等であってもよく、Ｗｉｎｄｏｗｓ（登録商標）におけるモダンスタンバイや、ＡＣＰＩで規定されているＳ３状態（スリープ状態）等に相当する状態であってもよい。例えば、待機状態は、通常動作状態よりも電力の消費量が低い動作状態である。
【0020】
以下では、システムの動作状態が待機状態から通常動作状態へ遷移することを起動と呼ぶことがある。待機状態では、一般的に通常動作状態よりも動作の活性度が低いため、情報処理装置１のシステムを起動させることは、情報処理装置１におけるシステムの動作を活性化させることになる。
【0021】
図１は、本実施形態に係る情報処理装置１のＨＰＤ処理の概要を説明する図である。情報処理装置１は、情報処理装置１の近傍に存在する人物（即ちユーザ）を検出する。この人物の存在を検出する処理のことを、ＨＰＤ（Ｈｕｍａｎ Ｐｒｅｓｅｎｃｅ Ｄｅｔｅｃｔｉｏｎ）処理と称する。情報処理装置１は、ＨＰＤ処理により人物の存在の有無を検出し、検出結果に基づいて情報処理装置１のシステムの動作状態を制御する。例えば、情報処理装置１は、図１（Ａ）に示すように、情報処理装置１の前（正面）に人物が存在しない状態（Ａｂｓｅｎｃｅ）から存在する状態（Ｐｒｅｓｅｎｃｅ）への変化、即ち情報処理装置１へ人物が接近したこと（Ａｐｐｒｏａｃｈ）を検出した場合、ユーザが接近したと判定し、自動でシステムを起動して通常動作状態へ遷移させる。また、情報処理装置１は、図１（Ｂ）に示すように、情報処理装置１の前に人物が存在している状態（Ｐｒｅｓｅｎｃｅ）では、ユーザが存在すると判定し、通常動作状態を継続させる。そして、情報処理装置１は、図１（Ｃ）に示すように、情報処理装置１の前（正面）に人物が存在している状態（Ｐｒｅｓｅｎｃｅ）から存在しない状態（Ａｂｓｅｎｃｅ）への変化、即ち情報処理装置１から人物が離脱したこと（Ｌｅａｖｅ）を検出した場合には、ユーザが離脱したと判定し、システムを待機状態へ遷移させる。
【0022】
情報処理装置１は、前方（正面側）の所定の範囲における人物の存在を検出する。
図２は、本実施形態に係る情報処理装置１の人物の検出範囲の一例を示す図である。図示する例において、情報処理装置１の前方（正面側）の検出範囲ＦｏＶ（Ｆｉｅｌｄ ｏｆ Ｖｉｅｗ：検出視野角）が、人物の検出可能な範囲である。例えば、情報処理装置１は、前方（正面側）を撮像した撮像画像から顔が撮像されている顔画像の領域（以下、「顔領域」と称する）を検出することにより、情報処理装置１の前（正面）に人物（ユーザ）が存在するか否かを判定する。検出範囲ＦｏＶは、情報処理装置１が撮像する撮像画角に相当する。情報処理装置１は、撮像画像から顔領域が検出された場合、ユーザが存在すると判定する。一方、情報処理装置１は、撮像画像から顔領域が検出されなかった場合、ユーザが存在しないと判定する。
図２は、本実施形態に係る情報処理装置１の人物の検出範囲の一例を示す図である。図示する例において、情報処理装置１の前方（正面側）の検出範囲ＦｏＶ（Ｆｉｅｌｄ ｏｆ Ｖｉｅｗ：検出視野角）が、人物の検出可能な範囲である。例えば、情報処理装置１は、前方（正面側）を撮像した撮像画像から顔が撮像されている顔画像の領域（以下、「顔領域」と称する）を検出することにより、情報処理装置１の前（正面）に人物（ユーザ）が存在するか否かを判定する。検出範囲ＦｏＶは、情報処理装置１が撮像する撮像画角に相当する。情報処理装置１は、撮像画像から顔領域が検出された場合、ユーザが存在すると判定する。一方、情報処理装置１は、撮像画像から顔領域が検出されなかった場合、ユーザが存在しないと判定する。
【0023】
例えば、情報処理装置１は、待機状態において撮像画像から顔領域を検出したことによりユーザが存在すると判定した場合、システムを待機状態から起動させる。また、情報処理装置１は、システムの起動後に、システムの処理により正規ユーザであるか否かを認証するシステム認証処理を実行する。正規ユーザとは、情報処理装置１を使用するユーザとして予め登録されているユーザである。情報処理装置１は、正規ユーザであると判定した場合には、使用を許可（ログインを許可）して通常動作状態へ遷移させる。一方、情報処理装置１は、正規ユーザでないと判定した場合には、使用を許可（ログインを許可）せず、認証待ちの状態を継続する。この起動の際のシステム認証処理によるユーザ認証を、以下では「ログイン認証」と称する。
【0024】
ログイン認証の方法としては、ユーザがパスワードをキーボードから入力することで認証するパスワード認証、ユーザがＰＩＮ（Ｐｅｒｓｏｎａｌ Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ Ｎｕｍｂｅｒ）を入力することで認証するＰＩＮ認証、ユーザの顔で認証する顔認証、ユーザの指紋で認証する指紋認証などがある。顔認証によるログイン認証が有効になっている場合、情報処理装置１は、撮像画像から検出された顔領域の顔画像に基づく特徴情報と予め登録されている正規ユーザの顔画像に基づく特徴情報とを照合することにより顔認証を行う。
【0025】
ここで、情報処理装置１は、ＨＰＤ処理において撮像画像から顔領域を検出する顔検出のみでシステムを待機状態から起動させた場合には、正規ユーザ以外の人物が近づいた場合も起動してしまう。そのため、情報処理装置１は、ログイン認証時の認証結果に基づいてＨＰＤ処理において正規ユーザであるか否かを認証するためのユーザＩＤ（以下、「ＨＰＤユーザＩＤ」と称する）を登録する。
【0026】
例えば、システムの起動後のログイン認証が成功したときには正規ユーザが情報処理装置１の正面に存在することが想定される。そこで、情報処理装置１は、ログイン認証が成功したときに撮像された撮像画像から顔領域を検出し、検出された顔画像を正規ユーザの顔画像とし、当該顔画像に基づく特徴情報をＨＰＤユーザＩＤとして登録する。情報処理装置１は、ＨＰＤ処理において撮像画像から顔領域を検出した場合、ＨＰＤユーザＩＤとして登録されていればシステムを起動させたり、ＨＰＤユーザＩＤとして登録されていなければ待機状態にしたり待機状態にするといった制御を行う。
【0027】
但し、ログイン認証時に顔認証を行うときは高精度の顔認証が可能なように高消費電力になることを許容しているが、待機状態でＨＰＤ処理を行う際には、なるべく低消費電力にすることが望ましい。例えば、ログイン認証における顔認証の場合には、ＩＲ（Ｉｎｆｒａｒｅｄ Ｒａｙｓ）カメラで撮像した撮像画像を用いるが、待機状態のＨＰＤ処理における顔認証では、ＲＧＢカメラで撮像した撮像画像を用いる。また、ログイン認証における顔認証に用いる撮像画像を撮像するフレームレート（）より、待機状態のＨＰＤ処理における顔認証に用いる撮像画像を撮像するフレームレートは低く設定される。
【0028】
上記のログイン認証時の顔認証とＨＰＤ処理における顔認証との違いにより、例えば、顔の向きが正面から±２０°程度傾いている場合でもログイン認証における顔認証は可能であるが、ＨＰＤ処理における顔認証では、顔の向きが正面から±１５°程度の範囲しか同じ顔として認証できない。そのため、できるだけ正面顔の顔画像に基づく特徴情報を、ＨＰＤユーザＩＤとして登録することが望ましい。なお、顔の向きが正面とは、上記ＩＲカメラまたはＲＧＢカメラなどの撮像部の方向を顔が向く向きであり、撮像された撮像画像に正面顔が撮像される状態である。
【0029】
例えば、情報処理装置１は、ログイン認証が成功してからの所定時間内（例えば、５秒以内）において、顔が正面を向いたときの顔画像に基づく特徴情報を、ＨＰＤユーザＩＤとして登録する。所定時間内（例えば、５秒以内）に制限しているのは、正規ユーザ以外のユーザに入れ替わってしまう可能性を低くするためである。
【0030】
図３は、本実施形態に係るＨＰＤユーザＩＤを用いたＨＰＤ処理の概要を示す図である。この図３を参照して、（１）～（８）の順に本実施形態に係るＨＰＤ処理の概要を説明する。以下では、情報処理装置１が待機状態において前方（正面側）をＲＧＢカメラで撮像した撮像画像のことを「第１撮像画像」と称する。一方、情報処理装置１がシステム起動後のログイン認証の際に前方（正面側）をＩＲカメラで撮像した撮像画像のことを「第２撮像画像」と称する。
（１）情報処理装置１は、待機状態においてＲＧＢカメラで撮像された第１撮像画像から顔領域を検出することにより、システムを起動させる。なお、この時点では、ＨＰＤユーザＩＤが未登録の状態である。
（１）情報処理装置１は、待機状態においてＲＧＢカメラで撮像された第１撮像画像から顔領域を検出することにより、システムを起動させる。なお、この時点では、ＨＰＤユーザＩＤが未登録の状態である。
【0031】
（２）情報処理装置１は、起動後に、正規ユーザのみに使用を許可するためのログイン認証を行う。例えば、情報処理装置１は、起動後のログイン認証のイベントにおいてＩＲカメラで撮像された第２撮像画像から顔領域を検出し、検出した顔領域の顔画像に基づいて顔認証処理を実行する。なお、ログイン認証の認証方法は、顔認証以外の認証方法であってもよい。
【0032】
（３）情報処理装置１は、ログイン認証が成功してからの所定時間内（例えば、５秒以内）において、ＲＧＢカメラで撮像された第１撮像画像から顔領域を検出する。
【0033】
（４）情報処理装置１は、所定時間内（例えば、５秒以内）において、ＲＧＢカメラで撮像された第１撮像画像から検出された顔領域に基づいて、顔が正面を向いたときの顔画像に基づく特徴情報をＨＰＤユーザＩＤとして登録する。
【0034】
（５）情報処理装置１は、次に、待機状態においてＲＧＢカメラで撮像された第１撮像画像から顔領域を検出された場合、上記（４）で登録されたＨＰＤユーザＩＤを用いて正規ユーザであるか否かの顔認証を行う。例えば、情報処理装置１は、待機状態において第１撮像画像から顔領域を検出された場合、検出された顔領域の顔画像に基づく特徴情報とＨＰＤユーザＩＤとを照合することにより顔認証を行う。
【0035】
（６）情報処理装置１は、（５）の顔認証が認証失敗である場合、正規ユーザではないと判定し、システムを起動させず待機状態を継続させる。
【0036】
（７）一方、情報処理装置１は、（５）の顔認証が認証成功である場合、正規ユーザであると判定し、システムを起動させる。
【0037】
（８）起動後は上記（２）と同様に、情報処理装置１は、ログイン認証処理を行う。
【0038】
（９）、（１０）そして、情報処理装置１は、その後、上記（３）、（４）と同様に、ログイン認証が成功してからの所定時間内（例えば、５秒以内）において、ＲＧＢカメラで撮像された第１撮像画像から検出された顔領域に基づいて、顔が正面を向いたときの顔画像に基づく特徴情報をＨＰＤユーザＩＤとして登録（更新）する。
【0039】
以降は、（５）～（１０）が繰り返される。このように、情報処理装置１は、ログイン認証が成功してからの所定時間内（例えば、５秒以内）において、顔が正面を向いたときの顔画像に基づく特徴情報をＨＰＤユーザＩＤとして登録し、ＨＰＤ処理においてＨＰＤユーザＩＤを用いて顔認証を行うため、正規ユーザの顔を適切に認証することができる。
【0040】
次に、本実施形態に係る情報処理装置１の構成について詳しく説明する。
［情報処理装置の外観構成］
図４は、本実施形態に係る情報処理装置１の外観の構成例を示す斜視図である。
情報処理装置１は、第１筐体１０、第２筐体２０、及びヒンジ機構１５を備える。第１筐体１０と第２筐体２０は、ヒンジ機構１５を用いて結合されている。第１筐体１０は、第２筐体２０に対して、ヒンジ機構１５がなす回転軸の周りに相対的に回動可能である。第１筐体１０と第２筐体２０との回動による開き角を「θ」として図示している。
［情報処理装置の外観構成］
図４は、本実施形態に係る情報処理装置１の外観の構成例を示す斜視図である。
情報処理装置１は、第１筐体１０、第２筐体２０、及びヒンジ機構１５を備える。第１筐体１０と第２筐体２０は、ヒンジ機構１５を用いて結合されている。第１筐体１０は、第２筐体２０に対して、ヒンジ機構１５がなす回転軸の周りに相対的に回動可能である。第１筐体１０と第２筐体２０との回動による開き角を「θ」として図示している。
【0041】
第１筐体１０は、Ａカバー、ディスプレイ筐体とも呼ばれる。第２筐体２０は、Ｃカバー、システム筐体とも呼ばれる。以下の説明では、第１筐体１０と第２筐体２０の側面のうち、ヒンジ機構１５が備わる面を、それぞれ側面１０ｃ、２０ｃと呼ぶ。第１筐体１０と第２筐体２０の側面のうち、側面１０ｃ、２０ｃとは反対側の面を、それぞれ側面１０ａ、２０ａと呼ぶ。図示において、側面２０ａから側面２０ｃに向かう方向を「後」と呼び、側面２０ｃから側面２０ａに向かう方向を「前」と呼ぶ。後方に対して右方、左方を、それぞれ「右」、「左」と呼ぶ。第１筐体１０、第２筐体２０の左側面をそれぞれ側面１０ｂ、２０ｂと呼び、右側面をそれぞれ側面１０ｄ、２０ｄと呼ぶ。また、第１筐体１０と第２筐体２０とが重なり合って完全に閉じた状態（開き角θ＝０°の状態）を「閉状態」と呼ぶ。閉状態において第１筐体１０と第２筐体２０との互いに対面する側の面を、それぞれの「内面」と呼び、内面に対して反対側の面を「外面」と呼ぶ。また、閉状態に対して第１筐体１０と第２筐体２０とが開いた状態のことを「開状態」と呼ぶ。
【0042】
図４に示す情報処理装置１の外観は開状態の例を示している。開状態は、第１筐体１０の側面１０ａと第２筐体２０の側面２０ａとが離れた状態である。開状態では、第１筐体１０と第２筐体２０とのそれぞれの内面が表れる。開状態はユーザが情報処理装置１を使用する際の状態の一つであり、典型的には開き角θ＝１００～１３０°程度の状態で使用されることが多い。なお、開状態となる開き角θの範囲は、ヒンジ機構１５よって回動可能な角度の範囲等に応じて任意に定めることができる。
【0043】
第１筐体１０の内面には、表示部１１０が設けられている。表示部１１０は、液晶ディスプレイ（ＬＣＤ：Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）や有機ＥＬ（Ｅｌｅｃｔｒｏ Ｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイなどを含んで構成されている。また、第１筐体１０の内面のうち表示部１１０の周縁の領域に、撮像部１２０が設けられている。例えば、撮像部１２０は、表示部１１０の周縁の領域のうち側面２０ａ側に配置されている。なお、撮像部１２０が配置される位置は一例であって、第１筐体１０の内面に対面する方向（前方）を撮像することが可能であれば他の位置に配置されてもよい。
【0044】
撮像部１２０は、開状態において、第１筐体１０の内面に対面する方向（前方）の所定の撮像範囲を撮像する。所定の撮像範囲とは、撮像部１２０が有する撮像素子と撮像素子の撮像面の前方に設けられた光学レンズとによって定まる画角の範囲であり、図２に示す人物（顔）の検出範囲ＦｏＶに相当する。例えば、撮像部１２０は、情報処理装置１の前方（正面側）に存在する人物（例えば、ユーザ）を含む画像を撮像することができる。
【0045】
また、第２筐体２０の側面２０ｂには、電源ボタン１４０が設けられている。電源ボタン１４０は、電源のオンまたはオフ、待機状態から通常動作状態へ遷移、通常動作状態から待機状態への遷移などをユーザが指示するための操作子である。また、第２筐体２０の内面には、ユーザの操作入力を受け付ける入力デバイスとして、キーボード１５１及びタッチパッド１５３が設けられている。なお、入力デバイスとして、キーボード１５１及びタッチパッド１５３に代えて、または加えて、タッチセンサが設けられてもよいし、マウスや外付けのキーボードが接続されてもよい。タッチセンサが設けられた構成の場合、表示部１１０の表示面に対応する領域が操作を受け付けるタッチパネルとして構成されてもよい。また、入力デバイスには、音声が入力されるマイクが含まれてもよい。
【0046】
［情報処理装置のハードウェア構成］
図５は、本実施形態に係る情報処理装置１のハードウェア構成の一例を示す概略ブロック図である。情報処理装置１は、表示部１１０、撮像部１２０、電源ボタン１４０、入力デバイス１５０、通信部１６０、記憶部１７０、ＥＣ（Ｅｍｂｅｄｄｅｄ Ｃｏｎｔｒｏｌｌｅｒ）２００、顔検出部２１０、メイン処理部３００、及び電源部４００を含んで構成される。表示部１１０は、メイン処理部３００により実行されるシステム処理及びシステム処理上で動作するアプリケーションプログラムの処理等に基づいて生成された表示データ（画像）を表示する。
図５は、本実施形態に係る情報処理装置１のハードウェア構成の一例を示す概略ブロック図である。情報処理装置１は、表示部１１０、撮像部１２０、電源ボタン１４０、入力デバイス１５０、通信部１６０、記憶部１７０、ＥＣ（Ｅｍｂｅｄｄｅｄ Ｃｏｎｔｒｏｌｌｅｒ）２００、顔検出部２１０、メイン処理部３００、及び電源部４００を含んで構成される。表示部１１０は、メイン処理部３００により実行されるシステム処理及びシステム処理上で動作するアプリケーションプログラムの処理等に基づいて生成された表示データ（画像）を表示する。
【0047】
撮像部１２０は、第１筐体１０の内面に対面する方向（前方）の所定の画角（例えば、図２に示す検出範囲ＦｏＶ）内の物体の像を撮像し、撮像した画像を顔検出部２１０及びメイン処理部３００へ出力する。例えば、撮像部１２０は、ＲＧＢカメラとＩＲ（Ｉｎｆｒａｒｅｄ Ｒａｙｓ）カメラとを備えている。ＲＧＢカメラとは、可視光線に基づいて撮像する通常のカメラである。ＩＲカメラは、物体から放出される赤外線に基づいて撮像するカメラである。
【0048】
ＩＲカメラは、例えば撮像する際に赤外線を照射するため、撮像する際の消費電力がＲＧＢカメラよりも高い。そのため、待機状態において第１撮像画像から顔領域を検出する際には、待機電力をなるべく抑えたいことから、例えばＲＧＢカメラが用いられる。一方、顔認証によるログイン認証において第２撮像画像から顔領域を検出して顔認証する際には、より認証精度を高めるために、例えばＩＲカメラが用いられる。なお、顔認証によるログイン認証の際には、ＩＲカメラとＲＧＢカメラとの両方が用いられてもよい。
【0049】
電源ボタン１４０は、ユーザの操作に応じて操作信号をＥＣ２００へ出力する。入力デバイス１５０は、ユーザの入力を受け付ける入力部であり、例えばキーボード１５１及びタッチパッド１５３を含んで構成されている。入力デバイス１５０は、キーボード１５１及びタッチパッド１５３に対する操作を受け付けることに応じて、操作内容を示す操作信号をＥＣ２００へ出力する。
【0050】
通信部１６０は、無線または有線による通信ネットワークを介して他の機器と通信可能に接続し、各種のデータの送信および受信を行う。例えば、通信部１６０は、イーサネット（登録商標）等の有線ＬＡＮインターフェースやＷｉ－Ｆｉ（登録商標）等の無線ＬＡＮインターフェース等を含んで構成されている。
【0051】
記憶部１７０は、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）などの記憶媒体を含んで構成される。記憶部１７０は、ＯＳ、デバイスドライバ、アプリケーションなどの各種のプログラム、その他、プログラムの動作により取得した各種のデータを記憶する。
【0052】
電源部４００は、情報処理装置１の各部の動作状態に応じて各部へ電力を供給する。電源部４００は、ＤＣ（Ｄｉｒｅｃｔ Ｃｕｒｒｅｎｔ）／ＤＣコンバータを備える。ＤＣ／ＤＣコンバータは、ＡＣ（Ａｌｔｅｒｎａｔｅ Ｃｕｒｒｅｎｔ）／ＤＣアダプタもしくはバッテリー（電池パック）から供給される直流電力の電圧を、各部で要求される電圧に変換する。ＤＣ／ＤＣコンバータで電圧が変換された電力が各電源系統を介して各部へ供給される。例えば、電源部４００は、ＥＣ２００から入力される制御信号に基づいて各電源系統を介して各部に電力を供給する。
【0053】
ＥＣ２００は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＲＡＭ、ＲＯＭおよびＩ／Ｏ（Ｉｎｐｕｔ／Ｏｕｔｐｕｔ）ロジック回路などを含んで構成されたマイクロコンピュータである。ＥＣ２００のＣＰＵは、自部のＲＯＭに予め記憶した制御プログラム（ファームウェア）を読み出し、読み出した制御プログラムを実行して、その機能を発揮する。ＥＣ２００は、メイン処理部３００とは独立に動作し、メイン処理部３００の動作を制御し、その動作状態を管理する。また、ＥＣ２００は、電源ボタン１４０、入力デバイス１５０、及び電源部４００等と接続されている。
【0054】
例えば、ＥＣ２００は、電源部４００と通信を行うことにより、バッテリーの状態（残容量など）の情報を電源部４００から取得するとともに、情報処理装置１の各部の動作状態に応じた電力の供給を制御するための制御信号などを電源部４００へ出力する。また、ＥＣ２００は、電源ボタン１４０や入力デバイス１５０から操作信号を取得し、取得した操作信号のうちメイン処理部３００の処理に関連する操作信号についてはメイン処理部３００へ出力する。
【0055】
顔検出部２１０は、撮像部１２０により撮像された撮像画像の画像データを処理するプロセッサを含んで構成されている。顔検出部２１０は、撮像部１２０により撮像された撮像画像の画像データを取得し、取得した画像データをメモリに一時的に保存する。画像データを保存するメモリは、システムメモリ３０４であってもよいし、顔検出部２１０内の不図示のメモリであってもよい。
【0056】
例えば、顔検出部２１０は、撮像部１２０から取得した撮像画像の画像データを処理することにより、撮像画像から顔領域を検出する顔検出処理、検出した顔領域の顔画像を認証する顔認証処理などを行う。顔検出部２１０は、顔検出処理の検出結果、顔認証処理の認証結果などを、メイン処理部３００のチップセット３０３へ送信する。
【0057】
なお、顔検出部２１０は、通常動作状態だけでなく待機状態でも動作している。待機状態では、顔検出部２１０は、例えば撮像部１２０のＲＧＢカメラで撮像された第１撮像画像の画像データを取得して顔領域の検出を行う。ＩＲカメラを使用せずに、ＲＧＢカメラを用いて撮像することにより、待機状態の消費電力（待機電力）を抑えることができる。一方、起動後のログイン認証処理では、顔検出部２１０は、撮像部１２０のＩＲカメラ（或いは、ＲＧＢカメラとＩＲカメラとの両方）で撮像された第２撮像画像の画像データを取得して顔領域の検出及び顔認証を行うことにより、顔認証の精度を高めることができる。
【0058】
例えば、顔検出部２１０は、図３を参照して説明したＨＰＤ処理において、ログイン認証処理による認証が成功したときに登録したＨＰＤユーザＩＤを用いた顔認証を行う。このＨＰＤ処理における機能構成について詳しくは後述する。
【0059】
メイン処理部３００は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）３０１、ＧＰＵ（Ｇｒａｐｈｉｃ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）３０２、チップセット３０３、及びシステムメモリ３０４を含んで構成され、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）に基づくシステム処理によって、ＯＳ上で各種のアプリケーションプログラムの処理が実行可能である。
【0060】
ＣＰＵ３０１は、ＢＩＯＳによる処理、ＯＳによる処理、ＯＳ上で動作するアプリケーションプログラムによる処理などを実行する。ＣＰＵ３０１は、チップセット３０３などからの指示に基づいてシステムの動作状態を制御する。例えば、ＣＰＵ３０１は、システムを待機状態から起動させる起動処理を実行する。また、ＣＰＵ３０１は、待機状態からの起動後に、正規ユーザであるか否かを認証するログイン認証の処理を実行し、認証成功の場合に通常動作状態へ遷移させる。
【0061】
例えば、ＣＰＵ３０１は、ログイン認証において顔認証による認証処理を実行する。なお、ＣＰＵ３０１は、ログイン認証において顔認証以外（例えば、パスワード認証、ＰＩＮ認証、指紋認証など）の認証処理を実行してもよい。
【0062】
ＣＰＵ３０１は、ログイン認証において正規ユーザである（認証成功）と判定した場合には、使用を許可（ログインを許可）し、通常動作状態へ遷移させる。一方、ＣＰＵ３０１は、ログイン認証において正規ユーザでない（認証失敗）と判定した場合には、使用を許可（ログインを許可）せず、ログイン認証待ちの状態を継続する。
【0063】
ＧＰＵ３０２は、表示部１１０に接続されている。ＧＰＵ３０２は、ＣＰＵ３０１の制御に基づいて画像処理を実行して表示データを生成する。ＧＰＵ３０２は、生成した表示データを表示部１１０に出力する。
【0064】
チップセット３０３は、メモリコントローラとしての機能及びＩ／Ｏコントローラとしての機能などを有する。例えば、チップセット３０３は、ＣＰＵ３０１及びＧＰＵ３０２によるシステムメモリ３０４、記憶部１７０などからのデータの読出し、書込みを制御する。また、チップセット３０３は、通信部１６０、表示部１１０およびＥＣ２００からのデータの入出力を制御する。また、チップセット３０３は、センサハブとしての機能を有する。例えば、チップセット３０３は、ＨＰＤ処理において、顔検出部２１０から顔検出の検出結果を取得し、当該検出結果に基づいて人物（ユーザ）の存在を検出し、システムの動作状態の制御を行う。
【0065】
システムメモリ３０４は、ＣＰＵ３０１で実行されるプログラムの読み込み領域ならびに処理データを書き込む作業領域などとして用いられる。また、システムメモリ３０４は、撮像部１２０で撮像された撮像画像の画像データを一時的に記憶する。
【0066】
なお、ＣＰＵ３０１、ＧＰＵ３０２、及びチップセット３０３は、一体化された一つのプロセッサとして構成されてもよいし、一部またはそれぞれが個々のプロセッサとして構成されてもよい。例えば、通常動作状態では、ＣＰＵ３０１、ＧＰＵ３０２、及びチップセット３０３のいずれも動作している状態となるが、待機状態では、チップセット３０３の少なくとも一部のみが動作している状態となる。待機状態では、少なくとも起動時のＨＰＤ処理に必要な機能が動作している。
【0067】
［情報処理装置の機能構成］
次に、情報処理装置１が、ＨＰＤ処理によりシステムの動作状態を制御する機能構成について説明する。
次に、情報処理装置１が、ＨＰＤ処理によりシステムの動作状態を制御する機能構成について説明する。
【0068】
図６は、本実施形態に係る情報処理装置１の機能構成の一例を示すブロック図である。情報処理装置１は、顔検出部２１０と、システム処理部３１０と、ＨＰＤ制御処理部３３０とを備えている。顔検出部２１０は、図５に示す顔検出部２１０に対応し、顔検出部２１０内のプログラムを実行することにより実現される機能構成である。システム処理部３１０と、ＨＰＤ制御処理部３３０とは、図５に示すメイン処理部３００がＯＳ及びＯＳ上で動作するプログラムを実行することにより実現される機能構成である。例えば、システム処理部３１０は、ＣＰＵ３０１がＯＳのプログラムを実行することにより実現される機能構成である。また、ＨＰＤ制御処理部３３０は、チップセット３０３がＯＳ上で動作するプログラムを実行することにより実現される機能構成である。
【0069】
顔検出部２１０は、顔検出処理部２１１と、顔認証処理部２１２と、ＨＰＤユーザＩＤ登録部２１３と、ＨＰＤ処理部２１４とを備えている。また、システム処理部３１０は、動作制御部３１１と、認証処理部３１２とを備えている。また、ＨＰＤ制御処理部３３０は、動作指示部３３１と、認証結果通知部３３２とを備えている。
【0070】
顔検出処理部２１１は、所定のフレームレート（所定の頻度）で撮像部１２０により撮像された撮像画像の画像データをシステムメモリ３０４から読み出し、それぞれの撮像画像の中から顔領域を検出する。顔の検出方法としては、顔の特徴情報を基に顔を検出する顔検出アルゴリズムや、顔の特徴情報を基に機械学習された学習データ（学習済みモデル）や顔検出ライブラリなどを用いた顔検出など、任意の検出方法を適用することができる。また、撮像部１２０が撮像する際のフレームレートは、例えば、待機状態では４ＦＰＳ、ログイン認証の際には１５ＦＰＳ、ログイン認証が成功してから所定時間内（例えば、５秒以内）では１５ＦＰＳ、通常動作状態では１ＦＰＳなどに制御される。
【0071】
例えば、顔検出処理部２１１は、待機状態では、撮像部１２０のＲＧＢカメラを用いて４ＦＰＳで撮像された第１撮像画像（ＲＧＢ画像）の中から顔領域を検出し、検出結果として顔領域の座標情報などを出力する。また、例えば、顔検出処理部２１１は、ログイン認証の際には、撮像部１２０のＩＲカメラを用いて１５ＦＰＳで撮像された第２撮像画像（ＩＲ画像）の中から顔領域を検出し、検出結果として顔領域の座標情報などを出力する。なお、顔検出処理部２１１は、ログイン認証の際には、撮像部１２０のＩＲカメラ及びＲＧＢカメラを用いて撮像された第２撮像画像（ＩＲ画像及びＲＧＢ画像）の中から顔領域を検出してもよい。
【0072】
また、例えば、顔検出処理部２１１は、ログイン認証が成功してから所定時間内（例えば、５秒以内）では、撮像部１２０のＲＧＢカメラを用いて１５ＦＰＳで撮像された第１撮像画像（ＲＧＢ画像）の中から顔領域を検出し、検出結果として顔領域の座標情報と顔の向きの情報などを出力する。顔の向きの情報とは、検出された顔領域内の顔画像の顔角度である。例えば、顔角度は、撮像部１２０の方向（顔が正面を向いている方向）を基準の角度（例えば、０°）とした顔の向きに対応する角度である。
【0073】
また、例えば、顔検出処理部２１１は、通常動作状態では、撮像部１２０のＲＧＢカメラを用いて１ＦＰＳで撮像された第１撮像画像（ＲＧＢ画像）の中から顔領域を検出し、検出結果として顔領域の座標情報などを出力する。
【0074】
顔認証処理部２１２は、検出された顔領域内の顔画像が正規ユーザの顔画像であるか否かを顔認証する顔認証処理を実行する。例えば、顔認証処理部２１２は、システムの処理によるログイン認証の際には、撮像部１２０のＩＲカメラを用いて１５ＦＰＳで撮像された第２撮像画像（ＩＲ画像）の中から検出された顔画像を、システムにログインするためのユーザ情報（アカウント情報）として予め登録されている正規ユーザの顔画像と照合することにより顔認証を行う。具体的には、例えば、顔認証処理部２１２は、ログイン認証の際には、第２撮像画像（ＩＲ画像）の中から検出された顔画像に基づく特徴情報と予め登録されている正規ユーザの顔画像に基づく特徴情報とを照合することにより顔認証を行う。
【0075】
なお、ユーザ情報（アカウント情報）として登録されている正規ユーザの顔画像は、例えば、システム設定の顔認証用画像の登録メニューにおいて、撮像部１２０のＩＲカメラを用いて１５ＦＰＳで撮像された第２撮像画像（ＩＲ画像）の中から検出された顔画像である。
【0076】
また、顔認証処理部２１２は、ＨＰＤ処理において撮像部１２０のＲＧＢカメラを用いて１５ＦＰＳで撮像された第１撮像画像（ＲＧＢ画像）の中から検出された顔画像に基づく特徴情報と、ＨＰＤユーザＩＤとして登録された正規ユーザの顔画像に基づく特徴情報とに基づいて顔認証を行う。例えば、顔認証処理部２１２は、ＨＰＤ処理において撮像部１２０のＲＧＢカメラを用いて１５ＦＰＳで撮像された第１撮像画像（ＲＧＢ画像）の中から検出された顔画像に基づく特徴情報と、ＨＰＤユーザＩＤとして登録された正規ユーザの顔画像に基づく特徴情報とを照合することにより顔認証を行う。
【0077】
ＨＰＤユーザＩＤ登録部２１３は、ログイン認証処理による認証が成功してからの所定時間内（例えば、５秒以内）において、顔検出処理部２１１により検出された顔画像のうち顔の向きが正面になったときの顔画像に基づく特徴情報を、ＨＰＤユーザＩＤ（正規ユーザの顔画像に基づく特徴情報）として登録する。例えば、ＨＰＤユーザＩＤ登録部２１３は、ＨＰＤユーザＩＤをシステムメモリ３０４または顔検出部２１０内の不図示のメモリ等に記憶させて登録する。
【0078】
例えば、ＨＰＤユーザＩＤ登録部２１３は、ログイン認証処理による認証が成功してからの所定時間内（例えば、５秒以内）において、顔検出処理部２１１により検出された顔画像の顔角度が、撮像部１２０の方向（顔が正面を向いている方向）を基準とした所定の角度範囲内（例えば、±１５°）である場合に、顔の向きが正面になったと判定する。ＨＰＤユーザＩＤ登録部２１３は、ＨＰＤユーザＩＤを登録する際に、ＨＰＤユーザＩＤが登録されていない場合には新規に登録し、ＨＰＤユーザＩＤが既に登録されている場合には登録済みのＨＰＤユーザＩＤに対して更新する。
【0079】
ＨＰＤ処理部２１４は、顔検出処理部２１１による顔検出処理の検出結果と、顔認証処理部２１２による顔認証処理の認証結果に基づいて、ＨＰＤ処理の検出結果を示す情報を出力する。例えば、ＨＰＤ処理部２１４は、ＨＰＤユーザＩＤが登録済みの場合には、顔検出処理部２１１により第１撮像画像（ＲＧＢ画像）の中から顔領域が検出され且つ顔認証処理部２１２による顔認証が成功した場合、情報処理装置１の前方に正規ユーザが存在することを示すプレゼンス（Ｐｒｅｓｅｎｃｅ）情報を出力する。
【0080】
なお、ＨＰＤ処理部２１４は、ＨＰＤユーザＩＤが未登録の場合には、待機状態において顔検出処理部２１１により第１撮像画像（ＲＧＢ画像）の中から顔領域が検出されたことに基づいて、正規ユーザであるか否かの判断はできないものの情報処理装置１の前方にユーザが存在するとして、プレゼンス情報を出力する。
【0081】
一方、ＨＰＤ処理部２１４は、システムの起動後に、顔検出処理部２１１により第１撮像画像（ＲＧＢ画像）の中から顔領域が検出されなくなった場合、情報処理装置１の前方にユーザが存在しないことを示すアブセンス（Ａｂｓｅｎｃｅ）情報を出力する。また、ＨＰＤ処理部２１４は、システムの起動後に、顔検出処理部２１１により第１撮像画像（ＲＧＢ画像）の中から顔領域が検出されていても、顔認証処理部２１２による顔認証が失敗した場合には、情報処理装置１の前方に存在するユーザが正規ユーザではないため、アブセンス情報を出力する。
【0082】
動作指示部３３１は、待機状態において、ＨＰＤ処理部２１４から出力されたプレゼンス情報を取得すると、システムを待機状態から起動させる指示を行う。例えば、動作指示部３３１は、システムを待機状態から起動させる指示を示す起動指示情報を動作制御部３１１へ出力する。また、動作指示部３３１は、待機状態において、ＨＰＤ処理部２１４からアブセンス情報を取得している間は、システムを起動させる指示を行わない。
【0083】
なお、動作指示部３３１は、通常動作状態において、ＨＰＤ処理部２１４からアブセンス情報を取得した場合には、システムを待機状態へ遷移させる指示を行う。例えば、動作指示部３３１は、システムを待機状態へ遷移させる指示を示す待機指示情報を動作制御部３１１へ出力する。
【0084】
動作制御部３１１は、動作指示部３３１から出力された起動指示情報を取得すると、システムのプログラムを実行して待機状態から起動させる。また、動作制御部３１１は、待機状態から起動させた後、ログイン認証のイベントを発生させる。そして、動作制御部３１１は、認証成功となるまでログインを許可しないで待機する。動作制御部３１１は、認証成功となった場合には、ログインを許可し、通常動作状態へ遷移させる。
【0085】
なお、通常動作状態において、動作制御部３１１は、動作指示部３３１から出力された待機指示情報を取得すると、システムを通常動作状態から待機状態へ遷移させる。
【0086】
認証処理部３１２は、ログイン認証のイベントが発生すると、正規ユーザであるか否かを認証するログイン認証処理を実行する。例えば、認証処理部３１２は、顔認証、パスワード認証、ＰＩＮ認証、または指紋認証などのいずれかによるログイン認証処理を実行する。例えば、認証処理部３１２は、顔認証による認証処理を実行する場合、顔検出部２１０から顔認証の認証結果を取得し、取得した認証結果に基づいてログイン認証処理を実行する。認証処理部３１２は、認証成功の場合に正規ユーザであると判定し、認証失敗の場合に正規ユーザではないと判定する。
【0087】
なお、認証処理部３１２は、パスワード認証またはＰＩＮ認証の場合には、キーボード１５１に対するユーザの操作に基づく操作信号をＥＣ２００を介して取得する。そして、認証処理部３１２は、取得した操作信号に基づいて、ユーザの操作により入力されたパスワードまたはＰＩＮと予め登録されているパスワードまたはＰＩＮとを照合することにより認証処理を実行する。また、認証処理部３１２は、指紋認証の場合には、不図示の指紋センサを用いて取得した指紋と予め登録されている指紋とを照合することにより認証処理を実行する。
【0088】
認証結果通知部３３２は、認証処理部３１２によるログイン認証の認証結果を顔検出部２１０へ通知する。顔検出部２１０のＨＰＤユーザＩＤ登録部２１３は、このログイン認証の認証結果の通知をトリガとして、ログイン認証処理による認証が成功してからの所定時間内（例えば、５秒以内）において、正面になったときの顔画像に基づく特徴情報をＨＰＤユーザＩＤとして登録する。
【0089】
［ＨＰＤ処理による動作］
次に、ＨＰＤ処理において正規ユーザの認証を行ってシステムの動作状態を制御する処理の動作について説明する。まず、図７を参照して、待機状態におけるＨＰＤ処理の動作について説明する。図７は、本実施形態に係る待機状態におけるＨＰＤ処理の一例を示すフローチャートである。
次に、ＨＰＤ処理において正規ユーザの認証を行ってシステムの動作状態を制御する処理の動作について説明する。まず、図７を参照して、待機状態におけるＨＰＤ処理の動作について説明する。図７は、本実施形態に係る待機状態におけるＨＰＤ処理の一例を示すフローチャートである。
【0090】
（ステップＳ１０１）顔検出部２１０は、待機状態において撮像部１２０により撮像された第１撮像画像（ＲＧＢ画像）を取得する。待機状態では、例えば４ＦＰＳのフレームレートで撮像部１２０により第１撮像画像（ＲＧＢ画像）が撮像される。そして、ステップＳ１０３の処理へ進む。
【0091】
（ステップＳ１０３）顔検出部２１０は、ステップＳ１０１で取得した第１撮像画像（ＲＧＢ画像）の中から顔領域（顔画像の領域）を検出する。顔検出部２１０は、顔領域を検出しなかった場合（ＮＯ）、ステップＳ１０１の処理に戻る。一方、顔検出部２１０は、顔領域を検出した場合（ＹＥＳ）、ステップＳ１０５の処理へ進む。
【0092】
（ステップＳ１０５）顔検出部２１０は、ＨＰＤユーザＩＤが登録済みであるか否かを判定する。顔検出部２１０は、ＨＰＤユーザＩＤが登録されていないと判定した場合（ＮＯ）、ステップＳ１１１の処理へ進む。一方、顔検出部２１０は、ＨＰＤユーザＩＤが登録済みであると判定した場合（ＹＥＳ）、ステップＳ１０７の処理へ進む。
【0093】
（ステップＳ１０７）顔検出部２１０は、ステップＳ１０３で検出された顔画像に基づく特徴情報と、ＨＰＤユーザＩＤとして登録された正規ユーザの顔画像に基づく特徴情報とに基づいて顔認証を行う。そして、ステップＳ１０９の処理へ進む。
【0094】
（ステップＳ１０９）顔検出部２１０は、ステップＳ１０７において顔認証が成功したか否かを判定する。顔検出部２１０は、顔認証が成功したと判定した場合（ＹＥＳ）、ステップＳ１１１の処理へ進む。一方、顔検出部２１０は、顔認証が失敗したと判定した場合（ＮＯ）、ステップＳ１０１の処理に戻る。
【0095】
（ステップＳ１１１）顔検出部２１０は、プレゼンス情報を出力する。ＨＰＤ制御処理部３３０は、顔検出部２１０から出力されたプレゼンス情報を取得すると、ＨＰＤ処理による起動指示として、システムを待機状態から起動させる指示を示す起動指示情報をシステム処理部３１０へ出力する。システム処理部３１０は、ＨＰＤ制御処理部３３０から出力された起動指示情報を取得すると、システムのプログラムを実行して待機状態から起動させる。なお、システム処理部３１０は、ＨＰＤ処理による起動指示以外の起動指示（電源ボタン１４０への操作など）があった場合も、システムのプログラムを実行して待機状態から起動させる。そして、ステップＳ１１３の処理へ進む。
【0096】
（ステップＳ１１３）システム処理部３１０は、待機状態から起動させた後、ログイン認証のイベントを発生させ、正規ユーザであるか否かを認証する認証処理を実行する。例えば、システム処理部３１０は、顔認証、パスワード認証、ＰＩＮ認証、または指紋認証などのいずれかによる認証処理を実行する。
【0097】
ここで、ステップＳ１１３のログイン認証処理の一例として、顔認証によるログイン認証処理の動作について、図８を参照して説明する。
図８は、本実施形態に係る顔認証によるログイン認証処理の一例を示すフローチャートである。
図８は、本実施形態に係る顔認証によるログイン認証処理の一例を示すフローチャートである。
【0098】
（ステップＳ１５１）顔検出部２１０は、システム処理部３１０がログイン認証のイベントを発生させると、顔検出部２１０は、ログイン認証における顔検出処理及び顔認証処理を実行する。まず、顔検出部２１０は、撮像部１２０により撮像された第２撮像画像（ＩＲ画像、またはＩＲ画像及びＲＧＢ画像）を取得する。ログイン認証処理では、例えば１５ＦＰＳのフレームレートで撮像部１２０により第２撮像画像（ＩＲ画像、またはＩＲ画像及びＲＧＢ画像）が撮像される。そして、ステップＳ１５３の処理へ進む。
【0099】
（ステップＳ１５３）顔検出部２１０は、ステップＳ１５１で取得した第２撮像画像（ＩＲ画像、またはＩＲ画像及びＲＧＢ画像）の中から顔領域を検出する。顔検出部２１０は、顔領域を検出しなかった場合（ＮＯ）、ステップＳ１５１の処理に戻る。一方、顔検出部２１０は、顔領域を検出した場合（ＹＥＳ）、ステップＳ１５５の処理へ進む。
【0100】
（ステップＳ１５５）顔検出部２１０は、ステップＳ１５３で検出された顔領域の顔画像に基づいて顔認証処理を行う。例えば、顔検出部２１０は、検出された顔領域の顔画像の特徴情報と、システムにログインするためのユーザ情報（アカウント情報）として予め登録されている正規ユーザの顔画像の特徴情報とに基づいて顔認証処理を行い、認証結果をシステム処理部３１０へ出力する。
【0101】
（ステップＳ１５７）システム処理部３１０は、顔検出部２１０から出力された顔認証処理の認証結果に基づいて、ログイン認証が成功であるか否かを判定する。例えば、システム処理部３１０は、顔認証処理の認証結果が失敗（顔認証が失敗）であった場合、ログイン認証が失敗であると判定し（ＮＯ）、ログインを許可せずステップＳ１５１に戻る。一方、システム処理部３１０は、顔認証処理の認証結果が成功（顔認証が成功）であった場合、ログイン認証が成功であると判定し（ＹＥＳ）、ログインを許可してログイン認証処理を終了する。また、ＨＰＤ制御処理部３３０は、システム処理部３１０によるログイン認証が成功した場合、ログイン認証の認証結果を顔検出部２１０へ通知する。そして、図７のステップＳ１１５の処理へ進む。
【0102】
なお、ここでは、顔認証によるログイン認証処理の例を説明したが、パスワード認証、ＰＩＮ認証、または指紋認証などによるログイン認証処理の場合も同様に、ログイン認証が成功した場合、ログインを許可してログイン認証処理を終了し、図７のステップＳ１１５Ａ及びステップＳ１１５Ｂの処理へ進む。なお、ステップＳ１１５Ａ及びステップＳ１１５Ｂの処理に特に順番はなく、それぞれ並行して行われる。
【0103】
（ステップＳ１１５Ａ）顔検出部２１０は、システム処理部３１０によるログイン認証が成功したことに応じてログイン認証の認証結果の通知を取得すると、ＨＰＤユーザＩＤ登録／更新処理を実行する。
【0104】
（ステップＳ１１５Ｂ）システム処理部３１０は、ログイン認証が成功した正規ユーザのアカウントでログイン処理を実行し、通常動作状態へ遷移させる。なお、顔検出部２１０は、通常動作状態では、例えば１ＦＰＳのフレームレートで撮像部１２０により撮像された第１撮像画像（ＲＧＢ画像）から顔領域を検出してＨＰＤ処理を実行する。
【0105】
ここで、ステップＳ１１５のＨＰＤユーザＩＤ登録／更新処理の具体的なの動作について、図９から図１１を参照して説明する。
図９は、本実施形態に係るＨＰＤユーザＩＤ登録／更新処理の一例を示すフローチャートである。
図９は、本実施形態に係るＨＰＤユーザＩＤ登録／更新処理の一例を示すフローチャートである。
【0106】
顔検出部２１０は、ＨＰＤユーザＩＤが登録済みであるか否かを判定する（ステップＳ２０１）。顔検出部２１０は、ＨＰＤユーザＩＤが未登録であると判定した場合（ＮＯ）、ステップＳ２０３の処理へ進み、ＨＰＤユーザＩＤ登録処理を実行する。一方、顔検出部２１０は、ＨＰＤユーザＩＤが登録済みであると判定した場合（ＹＥＳ）、ステップＳ２０５の処理へ進み、ＨＰＤユーザＩＤ更新処理を実行する。
【0107】
ステップＳ２０３のＨＰＤユーザＩＤ登録処理について、図１０を参照して説明する。図１０は、本実施形態に係るＨＰＤユーザＩＤ登録処理の一例を示すフローチャートである。顔検出部２１０は、通常動作状態では、例えば１ＦＰＳのフレームレートで撮像部１２０により撮像された第１撮像画像（ＲＧＢ画像）から顔領域を検出してＨＰＤ処理を実行するが、ＨＰＤユーザＩＤ登録処理及びＨＰＤユーザＩＤ更新処理を実行する際には、フレームレートを上げて実行する。
【0108】
（ステップＳ２１１）顔検出部２１０は、フレームレートを例えば１５ＦＰＳに上げて、ステップＳ２１３の処理へ進む。
【0109】
（ステップＳ２１３）顔検出部２１０は、例えば１５ＦＰＳのフレームレートで撮像部１２０により撮像された第１撮像画像（ＲＧＢ画像）を取得し、ステップＳ１０３の処理へ進む。
【0110】
（ステップＳ２１５）顔検出部２１０は、ステップＳ２１３で取得した第１撮像画像（ＲＧＢ画像）の中から顔領域（顔画像の領域）を検出する。顔検出部２１０は、顔領域を検出しなかった場合（ＮＯ）、ステップＳ２２３の処理へ進む。一方、顔検出部２１０は、顔領域を検出した場合（ＹＥＳ）、ステップＳ２１７の処理へ進む。
【0111】
（ステップＳ２１７）顔検出部２１０は、ステップＳ２１５で検出された顔領域内の顔画像の顔の向き（顔角度）を検出する。そして、ステップＳ２１９の処理へ進む。
【0112】
（ステップＳ２１９）顔検出部２１０は、ステップＳ２１７で検出された顔の向きが正面であるか否かを判定する。例えば、顔検出部２１０は、ステップＳ２１７で検出された顔角度が、撮像部１２０の方向（正面、顔角度＝０°）に対して所定の角度範囲内（例えば、±５°以内）である場合、顔の向きが正面であると判定する。顔検出部２１０は、顔の向きが正面ではないと判定した場合（ＮＯ）、ステップＳ２２３の処理へ進む。一方、顔検出部２１０は、顔の向きが正面であると判定した場合（ＹＥＳ）、ステップＳ２２１Ａの処理へ進む。
【0113】
（ステップＳ２２１Ａ）顔検出部２１０は、顔の向きが正面であると判定された顔画像に基づく特徴情報を、ＨＰＤユーザＩＤ（正規ユーザの顔画像に基づく特徴情報）として登録する。そして、ステップＳ２２５の処理へ進む。
【0114】
（ステップＳ２２３）顔検出部２１０は、ログイン認証が成功してから所定時間（例えば、５秒）が経過したか否かを判定する。顔検出部２１０は、所定時間（例えば、５秒）が経過していないと判定した場合（ＮＯ）、ステップＳ２１３の処理へ戻る。一方、顔検出部２１０は、所定時間（例えば、５秒）が経過したと判定した場合（ＹＥＳ）、ステップＳ２２５の処理へ進む。
【0115】
（ステップＳ２２５）顔検出部２１０は、フレームレートを例えば１ＦＰＳに下げて、ＨＰＤユーザＩＤ登録処理を終了する。
【0116】
次に、ステップＳ２０５のＨＰＤユーザＩＤ更新処理について、図１１を参照して説明する。図１１は、本実施形態に係るＨＰＤユーザＩＤ更新処理の一例を示すフローチャートである。この図に示すＨＰＤユーザＩＤ更新処理は、図１０に示すＨＰＤユーザＩＤ登録処理に対して、ステップＳ２２１Ｂの処理のみが異なる。ステップＳ２２１Ｂにおいて、顔検出部２１０は、顔の向きが正面であると判定された顔画像に基づく特徴情報をＨＰＤユーザＩＤとして、登録済みのＨＰＤユーザＩＤに代えて登録して更新する。なお、ＨＰＤユーザＩＤ更新処理のステップＳ２２１Ｂを除いた処理は、図１０に示すＨＰＤユーザＩＤ登録処理と同様であるため、その説明を省略する。
【0117】
【0118】
（ステップＳ３０１）顔検出部２１０は、通常動作状態において撮像部１２０により撮像された第１撮像画像（ＲＧＢ画像）を取得する。通常動作状態では、例えば１ＦＰＳのフレームレートで撮像部１２０により第１撮像画像（ＲＧＢ画像）が撮像される。そして、ステップＳ３０３の処理へ進む。
【0119】
（ステップＳ３０３）顔検出部２１０は、ステップＳ３０１で取得した第１撮像画像（ＲＧＢ画像）の中から顔領域（顔画像の領域）を検出する。顔検出部２１０は、顔領域を検出しなかった場合（ＮＯ）、ユーザが存在しないためステップＳ３１１の処理に進む。一方、顔検出部２１０は、顔領域を検出した場合（ＹＥＳ）、ステップＳ３０５の処理へ進む。
【0120】
（ステップＳ３０５）顔検出部２１０は、ＨＰＤユーザＩＤが登録済みであるか否かを判定する。顔検出部２１０は、ＨＰＤユーザＩＤが登録されていないと判定した場合（ＮＯ）、ステップＳ３０１の処理へ戻る。一方、顔検出部２１０は、ＨＰＤユーザＩＤが登録済みであると判定した場合（ＹＥＳ）、ステップＳ３０７の処理へ進む。
【0121】
（ステップＳ３０７）顔検出部２１０は、ステップＳ３０３で検出された顔画像に基づく特徴情報と、ＨＰＤユーザＩＤとして登録された正規ユーザの顔画像に基づく特徴情報とに基づいて顔認証を行う。そして、ステップＳ３０９の処理へ進む。
【0122】
（ステップＳ３０９）顔検出部２１０は、ステップＳ３０７において顔認証が成功したか否かを判定する。顔検出部２１０は、顔認証が成功したと判定した場合（ＹＥＳ）、正規ユーザが存在するためステップＳ３０１の処理へ戻る。一方、顔検出部２１０は、顔認証が失敗したと判定した場合（ＮＯ）、正規ユーザではないためステップＳ３１１の処理へ進む。
【0123】
（ステップＳ３１１）顔検出部２１０は、アブセンス情報を出力する。ＨＰＤ制御処理部３３０は、顔検出部２１０から出力されたアブセンス情報を取得すると、ＨＰＤ処理による待機状態への指示として、システムを待機状態へ遷移させる待機指示を示す待機指示情報をシステム処理部３１０へ出力する。例えば、ＨＰＤ制御処理部３３０は、顔検出部２１０から出力されたアブセンス情報を取得している状態が一定時間経過した後、待機指示情報をシステム処理部３１０へ出力する。システム処理部３１０は、ＨＰＤ制御処理部３３０から出力された待機指示情報を取得すると、システムを通常動作状態から待機状態へ遷移させる。なお、システム処理部３１０は、ＨＰＤ処理による待機指示以外の待機指示があった場合も、システムを通常動作状態から待機状態へ遷移させる。ＨＰＤ以外の待機指示とは、例えば、無操作の状態が一定時間経過すること、スリープ状態にさせるための操作をユーザが行うこと、などである。また、顔検出部２１０は、待機状態では、通常動作状態と同様に撮像部１２０により撮像された第１撮像画像（ＲＧＢ画像）を取得するが、フレームレートを例えば４ＦＰＳに切り替える。つまり、顔検出部２１０は、待機状態では、例えば４ＦＰＳのフレームレートで撮像部１２０により撮像された第１撮像画像（ＲＧＢ画像）から顔領域を検出してＨＰＤ処理を実行する。
【0124】
［実施形態のまとめ］
以上説明してきたように、本実施形態に係る情報処理装置１は、システムのプログラムを一時的に記憶するシステムメモリ３０４（メモリの一例）と、顔検出部２１０（第１プロセッサの一例）と、システム処理部３１０（例えば、ＣＰＵ３０１、第２プロセッサの一例）とを備えている。顔検出部２１０は、撮像部１２０により撮像された撮像画像の中から顔が撮像されている顔画像の領域（顔領域）を検出する顔検出処理と、検出された顔画像に基づく特徴情報（情報の一例）と正規ユーザの顔画像に基づく特徴情報（情報の一例）とに基づいて顔認証する顔認証処理とを実行する。システム処理部３１０は、上記顔検出処理により顔領域が検出され且つ上記顔認証処理による顔認証が成功したことに基づいて、システムのプログラムを実行することによりシステムを待機状態から起動させる。また、システム処理部３１０は、システムの起動後に、システムの処理により正規ユーザであるか否かを認証するログイン認証処理（システム認証処理の一例）を実行する。また、顔検出部２１０は、上記ログイン認証処理による認証が成功してからの所定時間内（例えば、５秒以内）において、上記顔検出処理により検出された顔画像のうち顔の向きが正面（特定の向きの一例）になったときの顔画像に基づく特徴情報を、上記正規ユーザの顔画像に基づく特徴情報（例えば、ＨＰＤユーザＩＤ）として登録する。
以上説明してきたように、本実施形態に係る情報処理装置１は、システムのプログラムを一時的に記憶するシステムメモリ３０４（メモリの一例）と、顔検出部２１０（第１プロセッサの一例）と、システム処理部３１０（例えば、ＣＰＵ３０１、第２プロセッサの一例）とを備えている。顔検出部２１０は、撮像部１２０により撮像された撮像画像の中から顔が撮像されている顔画像の領域（顔領域）を検出する顔検出処理と、検出された顔画像に基づく特徴情報（情報の一例）と正規ユーザの顔画像に基づく特徴情報（情報の一例）とに基づいて顔認証する顔認証処理とを実行する。システム処理部３１０は、上記顔検出処理により顔領域が検出され且つ上記顔認証処理による顔認証が成功したことに基づいて、システムのプログラムを実行することによりシステムを待機状態から起動させる。また、システム処理部３１０は、システムの起動後に、システムの処理により正規ユーザであるか否かを認証するログイン認証処理（システム認証処理の一例）を実行する。また、顔検出部２１０は、上記ログイン認証処理による認証が成功してからの所定時間内（例えば、５秒以内）において、上記顔検出処理により検出された顔画像のうち顔の向きが正面（特定の向きの一例）になったときの顔画像に基づく特徴情報を、上記正規ユーザの顔画像に基づく特徴情報（例えば、ＨＰＤユーザＩＤ）として登録する。
【0125】
これにより、情報処理装置１は、ログイン認証で認証成功したときに検出されたユーザの顔画像を正規ユーザの顔画像として顔認証用に利用する際に、顔の向きを考慮した顔画像を顔認証用に利用するため、正規ユーザの顔を適切に認証できる。
【0126】
上述の顔の向きが正面（特定の向きの一例）とは、撮像部１２０の方向を基準とした向きである。
【0127】
これにより、情報処理装置１は、撮像部１２０の方向を向いた正面顔の顔画像を顔認証用に利用するため、顔認証の精度を高めることができる。
【0128】
例えば、顔検出部２１０は、ログイン認証で認証成功してからの所定時間内（例えば、５秒以内）において、撮像画像の中から検出された顔画像の顔角度を検出し、検出された顔角度が、撮像部１２０の方向を基準とした所定の角度範囲内（例えば、±５°以内）である場合に、顔の向きが正面（特定の向きの一例）になったと判定する。
【0129】
これにより、情報処理装置１は、検出された顔画像の顔角度を検出することで顔の向きを判定して正面顔の顔画像を顔認証用に利用するため、顔認証の精度を高めることができる。
【0130】
また、顔検出部２１０は、ログイン認証で認証成功してからの所定時間内（例えば、５秒以内）において撮像画像の中から顔領域を検出するフレームレート（頻度の一例）を、待機状態において撮像画像の中から顔領域を検出するフレームレートよりも高くする。
【0131】
これにより、情報処理装置１は、ログイン認証で認証成功してからの所定時間内（例えば、５秒以内）において、撮像画像の中から検出された顔画像の顔角度を、精度よく検出することができる。
【0132】
また、顔検出部２１０は、ＨＰＤユーザＩＤ（正規ユーザの顔画像に基づく特徴情報）を登録する際に、ＨＰＤユーザＩＤが登録されていない場合には新規に登録し、ＨＰＤユーザＩＤが既に登録されている場合には登録済みの情報を更新する。
【0133】
これにより、情報処理装置１は、ＨＰＤユーザＩＤを最新の情報に更新していくため、正規ユーザの顔を適切に認証できる。
【0134】
また、ＨＰＤユーザＩＤが未登録の場合、システム処理部３１０は、待機状態において撮像部１２０により撮像された撮像画像の中から顔領域が検出されたことに基づいてシステムを待機状態から起動させる。
【0135】
これにより、情報処理装置１は、ＨＰＤユーザＩＤが未登録の場合には正規ユーザであるか否かがわからないため、正規ユーザが近づいたときも正規ユーザ以外のユーザが近づいたときも両方とも起動させ、その後、正規ユーザであればログイン認証で認証成功となってＨＰＤユーザＩＤの登録が可能になる。
【0136】
また、システム処理部３１０は、システムの起動後に、撮像部１２０により撮像された撮像画像の中から顔領域が検出されなくなった場合、待機状態へ遷移させる。
【0137】
これにより、情報処理装置１は、使用されていないときには省電力化できるとともに、セキュリティを向上させることができる。
【0138】
また、システム処理部３１０は、システムの起動後に、撮像部１２０により撮像された撮像画像の中から顔領域が検出されていても、顔認証処理による顔認証が失敗した場合には、待機状態へ遷移させる。
【0139】
これにより、情報処理装置１は、正規ユーザによって使用されていないときには省電力化できるとともに、セキュリティを向上させることができる。
【0140】
また、本実施形態に係る情報処理装置１における制御方法は、顔検出部２１０（第１プロセッサの一例）が、撮像部１２０により撮像された撮像画像の中から顔が撮像されている顔画像の領域（顔領域）を検出する顔検出処理を行うステップと、顔検出部２１０が、検出された顔画像に基づく情報（例えば、特徴情報）と正規ユーザの顔画像に基づく情報（例えば、特徴情報）とに基づいて顔認証する顔認証処理を行うステップと、システム処理部３１０（例えば、ＣＰＵ３０１、第２プロセッサの一例）が、上記顔検出処理により顔領域が検出され且つ上記顔認証処理による顔認証が成功したことに基づいて、システムのプログラムを実行することによりシステムを待機状態から起動させるステップと、システム処理部３１０が、システムの起動後に、システムの処理により正規ユーザであるか否かを認証するログイン認証処理（システム認証処理の一例）を実行するステップと、顔検出部２１０が、上記ログイン認証処理による認証が成功してからの所定時間内（例えば、５秒以内）において、上記顔検出処理により検出された顔画像のうち顔の向きが正面（特定の向きの一例）になったときの顔画像に基づく情報（例えば、特徴情報）を、上記正規ユーザの顔画像に基づく情報（例えば、特徴情報）として登録するステップと、を含む。
【0141】
これにより、情報処理装置１における制御方法は、ログイン認証で認証成功したときに検出されたユーザの顔画像を正規ユーザの顔画像として顔認証用に利用する際に、顔の向きを考慮した顔画像を顔認証用に利用するため、正規ユーザの顔を適切に認証できる。
【0142】
以上、この発明の実施形態について図面を参照して詳述してきたが、具体的な構成は上述の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。例えば、上述の実施形態において説明した各構成は、任意に組み合わせることができる。
【0143】
なお、撮像部１２０は、ＩＲカメラとＲＧＢカメラとのいずれか一方を備えてもよい。例えば、ＨＰＤ処理とログイン認証処理の両方においてＩＲカメラを用いる構成としてもよいし、ＨＰＤ処理とログイン認証処理の両方においてＲＧＢカメラを用いる構成としてもよい。
【0144】
また、各動作状態及び処理における撮像部１２０のフレームレートは、一例であって、上述したフレームレートの例に限定されるものではない。例えば、待機状態及び通常動作状態におけるフレームレートよりもＨＰＤユーザ登録/更新処理におけるフレームレートの方が高く設定されることが好ましいが、上述したフレームレートの例とは異なるフレームレートに設定されてもよい。
【0145】
また、上記実施形態では、情報処理装置１に撮像部１２０が内蔵されている構成例を説明したが、これに限られるものではない。例えば、撮像部１２０は、情報処理装置１に内蔵されていなくてもよく、情報処理装置１の外部アクセサリとして情報処理装置１（例えば、側面１０ａ、１０ｂ、１０ｃ等のいずれか）に取り付け可能に構成され、無線または有線で情報処理装置１と通信接続されるものであってもよい。
【0146】
また、ＣＰＵ３０１（第３プロセッサの一例）とチップセット３０３（第２プロセッサの一例）とは個別のプロセッサとして構成されてもよいし、１つのプロセッサとして一体化して構成されてもよい。
【0147】
また、上記実施形態では、顔検出部２１０（第１プロセッサの一例）がチップセット３０３とは別に備えられている例を示したが、顔検出部２１０の一部または全部は、チップセット３０３に備えられてもよいし、チップセット３０３と一体化されたプロセッサに備えられてもよい。また、顔検出部２１０とチップセット３０３とＣＰＵ３０１とが１つのプロセッサとして一体化して構成されてもよい。また、顔検出部２１０の一部または全部は、ＥＣ２００に備えられてもよい。
【0148】
また、上述した待機状態には、ハイバネーション状態やパワーオフ状態等が含まれてもよい。ハイバネーション状態は、例えば、ＡＣＰＩで規定されているＳ４状態に相当する。パワーオフ状態は、例えば、ＡＣＰＩで規定されているＳ５状態（シャットダウンした状態）相当する。なお、待機状態のうちスタンバイ状態、スリープ状態、ハイバネーション状態、パワーオフ状態などは、通常動作状態よりも電力の消費量が低い状態（電力の消費を抑えた状態）である。
【0149】
なお、上述した情報処理装置１は、内部にコンピュータシステムを有している。そして、上述した情報処理装置１が備える各構成の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより上述した情報処理装置１が備える各構成における処理を行ってもよい。ここで、「記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行する」とは、コンピュータシステムにプログラムをインストールすることを含む。ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、インターネットやＷＡＮ、ＬＡＮ、専用回線等の通信回線を含むネットワークを介して接続された複数のコンピュータ装置を含んでもよい。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ－ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。このように、プログラムを記憶した記録媒体は、ＣＤ－ＲＯＭ等の非一過性の記録媒体であってもよい。
【0150】
また、記録媒体には、当該プログラムを配信するために配信サーバからアクセス可能な内部又は外部に設けられた記録媒体も含まれる。なお、プログラムを複数に分割し、それぞれ異なるタイミングでダウンロードした後に情報処理装置１が備える各構成で合体される構成や、分割されたプログラムのそれぞれを配信する配信サーバが異なっていてもよい。さらに「コンピュータ読み取り可能な記録媒体」とは、ネットワークを介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（ＲＡＭ）のように、一定時間プログラムを保持しているものも含むものとする。また、上記プログラムは、上述した機能の一部を実現するためのものであってもよい。さらに、上述した機能をコンピュータシステムに既に記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であってもよい。
【0151】
また、上述した実施形態における情報処理装置１が備える各機能の一部、または全部を、ＬＳＩ（Ｌａｒｇｅ Ｓｃａｌｅ Ｉｎｔｅｇｒａｔｉｏｎ）等の集積回路として実現してもよい。各機能は個別にプロセッサ化してもよいし、一部、又は全部を集積してプロセッサ化してもよい。また、集積回路化の手法はＬＳＩに限らず専用回路、または汎用プロセッサで実現してもよい。また、半導体技術の進歩によりＬＳＩに代替する集積回路化の技術が出現した場合、当該技術による集積回路を用いてもよい。
【符号の説明】
【0152】
１ 情報処理装置、１０ 第１筐体、２０ 第２筐体、１５ ヒンジ機構、１１０ 表示部、１２０ 撮像部、１４０ 電源ボタン、１５０ 入力デバイス、１５１ キーボード、１５３ タッチパッド、１６０ 通信部、１７０ 記憶部、２００ ＥＣ、２１０ 顔検出部、２１１ 顔検出処理部、２１２ 顔認証処理部、２１３ ＨＰＤユーザＩＤ登録部、２１４ ＨＰＤ処理部、３００ メイン処理部、３０１ ＣＰＵ、３０２ ＧＰＵ、３０３ チップセット、３０４ システムメモリ、３１０ システム処理部、３１１ 動作制御部、３１２ 認証処理部、３３０ ＨＰＤ制御処理部、３３１ 動作指示部、３３２ 認証結果通知部、４００ 電源部
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【手続補正書】
【提出日】2024-08-14
【手続補正1】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項1】
システムのプログラムを一時的に記憶するメモリと、
撮像部により撮像された撮像画像の中から顔が撮像されている顔画像の領域を検出する顔検出処理と、検出された顔画像に基づく情報と正規ユーザの顔画像に基づく情報とに基づいて顔認証する顔認証処理とを実行する第１プロセッサと、
前記顔検出処理により前記顔画像の領域が検出され且つ前記顔認証処理による顔認証が成功したことに基づいて、前記システムのプログラムを実行することにより前記システムを待機状態から起動させる第２プロセッサと、
を備え、
前記第２プロセッサは、
前記システムの起動後に、前記システムの処理により正規ユーザであるか否かを認証するシステム認証処理を実行し、
前記第１プロセッサは、
前記システム認証処理による認証が成功してからの所定時間内において実行される前記顔検出処理により検出された顔画像のうち顔の向きが特定の向きになったときの顔画像に基づく情報を、前記正規ユーザの顔画像に基づく情報として登録する、
情報処理装置。
撮像部により撮像された撮像画像の中から顔が撮像されている顔画像の領域を検出する顔検出処理と、検出された顔画像に基づく情報と正規ユーザの顔画像に基づく情報とに基づいて顔認証する顔認証処理とを実行する第１プロセッサと、
前記顔検出処理により前記顔画像の領域が検出され且つ前記顔認証処理による顔認証が成功したことに基づいて、前記システムのプログラムを実行することにより前記システムを待機状態から起動させる第２プロセッサと、
を備え、
前記第２プロセッサは、
前記システムの起動後に、前記システムの処理により正規ユーザであるか否かを認証するシステム認証処理を実行し、
前記第１プロセッサは、
前記システム認証処理による認証が成功してからの所定時間内において実行される前記顔検出処理により検出された顔画像のうち顔の向きが特定の向きになったときの顔画像に基づく情報を、前記正規ユーザの顔画像に基づく情報として登録する、
情報処理装置。
【請求項2】
前記特定の向きとは、前記撮像部の方向を基準とした向きである、
請求項１に記載の情報処理装置。
請求項１に記載の情報処理装置。
【請求項3】
前記第１プロセッサは、
前記所定時間内において、前記撮像画像の中から検出された顔画像の顔角度を検出し、検出された前記顔角度が、前記撮像部の方向を基準とした所定の角度範囲内である場合に、顔の向きが前記特定の向きになったと判定する、
請求項２に記載の情報処理装置。
前記所定時間内において、前記撮像画像の中から検出された顔画像の顔角度を検出し、検出された前記顔角度が、前記撮像部の方向を基準とした所定の角度範囲内である場合に、顔の向きが前記特定の向きになったと判定する、
請求項２に記載の情報処理装置。
【請求項4】
前記第１プロセッサは、
前記所定時間内において前記撮像画像の中から顔画像の領域を検出する頻度を、前記待機状態において前記撮像画像の中から顔画像の領域を検出する頻度よりも高くする、
請求項３に記載の情報処理装置。
前記所定時間内において前記撮像画像の中から顔画像の領域を検出する頻度を、前記待機状態において前記撮像画像の中から顔画像の領域を検出する頻度よりも高くする、
請求項３に記載の情報処理装置。
【請求項5】
前記第１プロセッサは、
前記正規ユーザの顔画像に基づく情報を登録する際に、前記正規ユーザの顔画像に基づく情報が登録されていない場合には新規に登録し、前記正規ユーザの顔画像に基づく情報が既に登録されている場合には登録済みの情報を更新する、
請求項１に記載の情報処理装置。
前記正規ユーザの顔画像に基づく情報を登録する際に、前記正規ユーザの顔画像に基づく情報が登録されていない場合には新規に登録し、前記正規ユーザの顔画像に基づく情報が既に登録されている場合には登録済みの情報を更新する、
請求項１に記載の情報処理装置。
【請求項6】
前記正規ユーザの顔画像に基づく情報が未登録の場合、
前記第２プロセッサは、
前記待機状態において前記撮像部により撮像された前記撮像画像の中から顔画像の領域が検出されたことに基づいて前記システムを待機状態から起動させる、
請求項１に記載の情報処理装置。
前記第２プロセッサは、
前記待機状態において前記撮像部により撮像された前記撮像画像の中から顔画像の領域が検出されたことに基づいて前記システムを待機状態から起動させる、
請求項１に記載の情報処理装置。
【請求項7】
前記第２プロセッサは、
前記システムの起動後に、前記撮像部により撮像された前記撮像画像の中から顔画像の領域が検出されなくなった場合、前記待機状態へ遷移させる、
請求項１に記載の情報処理装置。
前記システムの起動後に、前記撮像部により撮像された前記撮像画像の中から顔画像の領域が検出されなくなった場合、前記待機状態へ遷移させる、
請求項１に記載の情報処理装置。
【請求項8】
前記第２プロセッサは、
前記システムの起動後に、前記撮像部により撮像された前記撮像画像の中から顔画像の領域が検出されていても、顔認証処理による顔認証が失敗した場合には、前記待機状態へ遷移させる、
請求項１に記載の情報処理装置。
前記システムの起動後に、前記撮像部により撮像された前記撮像画像の中から顔画像の領域が検出されていても、顔認証処理による顔認証が失敗した場合には、前記待機状態へ遷移させる、
請求項１に記載の情報処理装置。
【請求項9】
システムのプログラムを一時的に記憶するメモリと、第１プロセッサと、第２プロセッサとを備える情報処理装置における制御方法であって、
前記第１プロセッサが、撮像部により撮像された撮像画像の中から顔が撮像されている顔画像の領域を検出する顔検出処理を行うステップと、
前記第１プロセッサが、検出された顔画像に基づく情報と正規ユーザの顔画像に基づく情報とに基づいて顔認証する顔認証処理を行うステップと、
前記第２プロセッサが、前記顔検出処理により前記顔画像の領域が検出され且つ前記顔認証処理による顔認証が成功したことに基づいて、前記システムのプログラムを実行することにより前記システムを待機状態から起動させるステップと、
前記第２プロセッサが、前記システムの起動後に、前記システムの処理により正規ユーザであるか否かを認証するシステム認証処理を実行するステップと、
前記第１プロセッサが、前記システム認証処理による認証が成功してからの所定時間内において実行される前記顔検出処理により検出された顔画像のうち顔の向きが特定の向きになったときの顔画像に基づく情報を、前記正規ユーザの顔画像に基づく情報として登録するステップと、
を含む制御方法。
前記第１プロセッサが、撮像部により撮像された撮像画像の中から顔が撮像されている顔画像の領域を検出する顔検出処理を行うステップと、
前記第１プロセッサが、検出された顔画像に基づく情報と正規ユーザの顔画像に基づく情報とに基づいて顔認証する顔認証処理を行うステップと、
前記第２プロセッサが、前記顔検出処理により前記顔画像の領域が検出され且つ前記顔認証処理による顔認証が成功したことに基づいて、前記システムのプログラムを実行することにより前記システムを待機状態から起動させるステップと、
前記第２プロセッサが、前記システムの起動後に、前記システムの処理により正規ユーザであるか否かを認証するシステム認証処理を実行するステップと、
前記第１プロセッサが、前記システム認証処理による認証が成功してからの所定時間内において実行される前記顔検出処理により検出された顔画像のうち顔の向きが特定の向きになったときの顔画像に基づく情報を、前記正規ユーザの顔画像に基づく情報として登録するステップと、
を含む制御方法。
【手続補正2】
【補正対象書類名】明細書
【補正対象項目名】０１０９
【補正方法】変更
【補正の内容】
【0109】
（ステップＳ２１３）顔検出部２１０は、例えば１５ＦＰＳのフレームレートで撮像部１２０により撮像された第１撮像画像（ＲＧＢ画像）を取得し、ステップＳ２１５の処理へ進む。