知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024130576
(43)【公開日】2024-09-30
(54)【発明の名称】顔認識装置、顔認識システム、方法及びプログラム
(51)【国際特許分類】
G06T 7/00 20170101AFI20240920BHJP
G06V 40/60 20220101ALI20240920BHJP
G06T 7/70 20170101ALI20240920BHJP
G06V 40/16 20220101ALI20240920BHJP
A61B 5/1171 20160101ALI20240920BHJP
H04N 23/611 20230101ALI20240920BHJP
H04N 23/60 20230101ALI20240920BHJP
【ＦＩ】
G06T7/00 660A
G06V40/60
G06T7/70 B
G06V40/16 A
G06T7/00 510F
G06V40/16 Z
A61B5/1171 200
H04N23/611
H04N23/60 500
【審査請求】有
【請求項の数】10
【出願形態】ＯＬ
(21)【出願番号】P 2023040397
(22)【出願日】2023-03-15
(71)【出願人】
【識別番号】000227205
【氏名又は名称】ＮＥＣプラットフォームズ株式会社
(74)【代理人】
【識別番号】100149548
【弁理士】
【氏名又は名称】松沼 泰史
(74)【代理人】
【識別番号】100181135
【弁理士】
【氏名又は名称】橋本 隆史
(72)【発明者】
【氏名】古殿 龍弥
【テーマコード（参考）】
4C038
5B043
5C122
5L096
【Ｆターム（参考）】
4C038VA07
4C038VB03
4C038VC05
5B043AA04
5B043AA09
5B043BA04
5B043DA05
5B043EA07
5B043EA08
5B043HA01
5B043HA05
5B043HA20
5C122EA42
5C122FD01
5C122FH07
5C122FH11
5C122FH13
5C122FH14
5C122FK08
5C122HA13
5C122HA35
5C122HB01
5C122HB05
5L096BA08
5L096BA18
5L096CA04
5L096CA15
5L096CA18
5L096DA02
5L096DA03
5L096FA09
5L096FA62
5L096FA66
5L096FA67
5L096FA69
5L096GA51
5L096JA11
(57)【要約】
【課題】対象者に合わせて位置調整する可能な顔認識装置、顔認識システム、方法及びプログラムを提供する。
【解決手段】顔認識装置は、人物の顔を撮影して位置用画像を取得するように構成される第１カメラと、前記撮影された顔の位置用画像を表示するように構成される表示部と、前記表示部内の顔認識領域における前記位置用画像に基づいて、前記顔を撮影して、前記人物の特徴を示す特徴情報を取得するように構成される第２カメラと、前記表示部の中心部である基準部と、前記表示部に表示された前記顔のうちの有効顔領域の中心部である第１中心と、のずれを検出するように構成される検出部と、前記ずれに基づいて、顔認識装置の動きに関する装置動き信号を生成するように構成される信号生成部と、前記装置動き信号を出力するように構成される信号出力部とを備える。
【選択図】図１
【解決手段】顔認識装置は、人物の顔を撮影して位置用画像を取得するように構成される第１カメラと、前記撮影された顔の位置用画像を表示するように構成される表示部と、前記表示部内の顔認識領域における前記位置用画像に基づいて、前記顔を撮影して、前記人物の特徴を示す特徴情報を取得するように構成される第２カメラと、前記表示部の中心部である基準部と、前記表示部に表示された前記顔のうちの有効顔領域の中心部である第１中心と、のずれを検出するように構成される検出部と、前記ずれに基づいて、顔認識装置の動きに関する装置動き信号を生成するように構成される信号生成部と、前記装置動き信号を出力するように構成される信号出力部とを備える。
【選択図】図１
【特許請求の範囲】
【請求項1】
第１の人物の第１の顔を撮影して第１の位置用画像を取得するように構成される第１カメラと、
前記撮影された第１の顔の第１の位置用画像を表示するように構成される表示部と、
前記表示部内の顔認識領域における前記第１の位置用画像に基づいて、前記第１の顔を撮影して、前記第１の人物の特徴を示す第１の特徴情報を取得するように構成される第２カメラと、
前記表示部の中心部である基準部と、前記表示部に表示された前記第１の顔のうちの有効顔領域の中心部である第１中心と、の第１のずれを検出するように構成される検出部と、
前記第１のずれに基づいて、顔認識装置の動きに関する装置動き信号を生成するように構成される信号生成部と、
前記装置動き信号を出力するように構成される信号出力部と
を備える顔認識装置。
前記撮影された第１の顔の第１の位置用画像を表示するように構成される表示部と、
前記表示部内の顔認識領域における前記第１の位置用画像に基づいて、前記第１の顔を撮影して、前記第１の人物の特徴を示す第１の特徴情報を取得するように構成される第２カメラと、
前記表示部の中心部である基準部と、前記表示部に表示された前記第１の顔のうちの有効顔領域の中心部である第１中心と、の第１のずれを検出するように構成される検出部と、
前記第１のずれに基づいて、顔認識装置の動きに関する装置動き信号を生成するように構成される信号生成部と、
前記装置動き信号を出力するように構成される信号出力部と
を備える顔認識装置。
【請求項2】
前記装置動き信号は、前記顔認識装置の移動量と、移動方向と、動く角度との少なくとも１つを含む
請求項１に記載の顔認識装置。
請求項１に記載の顔認識装置。
【請求項3】
通知部をさらに備え、
前記検出部は、前記顔認識領域と、前記有効顔領域との重なりを検出するようにさらに構成され、
前記重なりに基づいて、前後方向と、水平方向と、高さ方向との少なくとも１つへの前記第１の人物の動きを促す人物動き信号を前記信号生成部は生成するように構成され、
前記通知部は、前記人物動き信号を通知するように構成される
請求項１に記載の顔認識装置。
前記検出部は、前記顔認識領域と、前記有効顔領域との重なりを検出するようにさらに構成され、
前記重なりに基づいて、前後方向と、水平方向と、高さ方向との少なくとも１つへの前記第１の人物の動きを促す人物動き信号を前記信号生成部は生成するように構成され、
前記通知部は、前記人物動き信号を通知するように構成される
請求項１に記載の顔認識装置。
【請求項4】
前記検出部は、前記顔認識領域と、前記有効顔領域との重なりを検出するようにさらに構成され、
前記第１カメラは、前記重なりに基づいて、前記第１カメラが備えるレンズの焦点距離を変化させるように構成される
請求項１に記載の顔認識装置。
前記第１カメラは、前記重なりに基づいて、前記第１カメラが備えるレンズの焦点距離を変化させるように構成される
請求項１に記載の顔認識装置。
【請求項5】
前記検出部は、前記顔認識領域と、前記有効顔領域との重なりを検出するようにさらに構成され、
前記表示部は、前記重なりに基づいて、前記第１の位置用画像を拡大又は縮小させるように構成される
請求項１に記載の顔認識装置。
前記表示部は、前記重なりに基づいて、前記第１の位置用画像を拡大又は縮小させるように構成される
請求項１に記載の顔認識装置。
【請求項6】
前記第２カメラは、赤外線センサを備えるサーマルカメラである
請求項１に記載の顔認識装置。
請求項１に記載の顔認識装置。
【請求項7】
前記第１カメラは、前記第１の人物と異なる１又は複数の第２の人物それぞれの１又は複数の第２の顔を撮影して第２の位置用画像を取得するようにさらに構成され、
前記表示部は、前記撮影された１又は複数の第２の顔それぞれの１又は複数の第２の位置用画像を表示するようにさらに構成され、
前記検出部は、前記基準部と、前記表示部に表示された前記１又は複数の第２の顔のうちの有効顔領域それぞれの中心部である１又は複数の第２中心と、の１又は複数の第２のずれを検出するようにさらに構成され、
前記信号生成部は、前記第１のずれが前記１又は複数の第２のずれのいずれより小さい場合、前記第１の人物についての前記装置動き信号を生成するように構成される
請求項１に記載の顔認識装置。
前記表示部は、前記撮影された１又は複数の第２の顔それぞれの１又は複数の第２の位置用画像を表示するようにさらに構成され、
前記検出部は、前記基準部と、前記表示部に表示された前記１又は複数の第２の顔のうちの有効顔領域それぞれの中心部である１又は複数の第２中心と、の１又は複数の第２のずれを検出するようにさらに構成され、
前記信号生成部は、前記第１のずれが前記１又は複数の第２のずれのいずれより小さい場合、前記第１の人物についての前記装置動き信号を生成するように構成される
請求項１に記載の顔認識装置。
【請求項8】
前記第２カメラは前記第１カメラより高精細撮影が可能である
請求項１に記載の顔認識装置。
請求項１に記載の顔認識装置。
【請求項9】
前記有効顔領域は、前記第１の人物の２つの眉、２つの目、鼻及び口の少なくとも１つを含む領域である
請求項１に記載の顔認識装置。
請求項１に記載の顔認識装置。
【請求項10】
請求項１から９のいずれか一項に記載の顔認識装置が移動可能に接続された支持部を備える
顔認識システム。
顔認識システム。
【請求項11】
顔認識装置によって実行される顔認識の方法であって、
第１の人物の第１の顔を撮影して第１の位置用画像を取得するステップと、
前記撮影された第１の顔の第１の位置用画像を表示するステップと、
前記顔認識装置に含まれる表示部内の顔認識領域における前記第１の位置用画像に基づいて、前記第１の顔を撮影して、前記第１の人物の特徴を示す第１の特徴情報を取得するステップと、
前記表示部の中心部である基準部と、前記表示部に表示された前記第１の顔のうちの有効顔領域の中心部である第１中心と、の第１のずれを検出するステップと、
前記第１のずれに基づいて、顔認識装置の動きに関する装置動き信号を生成するステップと、
前記装置動き信号を出力するステップと、を含む
方法。
第１の人物の第１の顔を撮影して第１の位置用画像を取得するステップと、
前記撮影された第１の顔の第１の位置用画像を表示するステップと、
前記顔認識装置に含まれる表示部内の顔認識領域における前記第１の位置用画像に基づいて、前記第１の顔を撮影して、前記第１の人物の特徴を示す第１の特徴情報を取得するステップと、
前記表示部の中心部である基準部と、前記表示部に表示された前記第１の顔のうちの有効顔領域の中心部である第１中心と、の第１のずれを検出するステップと、
前記第１のずれに基づいて、顔認識装置の動きに関する装置動き信号を生成するステップと、
前記装置動き信号を出力するステップと、を含む
方法。
【請求項12】
コンピュータに、
第１の人物の第１の顔を撮影して第１の位置用画像を取得するステップと、
撮影された第１の顔の第１の位置用画像を表示するステップと、
前記コンピュータに含まれる表示部内の顔認識領域における前記第１の位置用画像に基づいて、前記第１の顔を撮影して、前記第１の人物の特徴を示す第１の特徴情報を取得するステップと、
前記表示部の中心部である基準部と、前記表示部に表示された前記第１の顔のうちの有効顔領域の中心部である第１中心と、の第１のずれを検出するステップと、
前記第１のずれに基づいて、顔認識装置の動きに関する装置動き信号を生成するステップと、
前記装置動き信号を出力するステップと
を実行させるためのプログラム。
第１の人物の第１の顔を撮影して第１の位置用画像を取得するステップと、
撮影された第１の顔の第１の位置用画像を表示するステップと、
前記コンピュータに含まれる表示部内の顔認識領域における前記第１の位置用画像に基づいて、前記第１の顔を撮影して、前記第１の人物の特徴を示す第１の特徴情報を取得するステップと、
前記表示部の中心部である基準部と、前記表示部に表示された前記第１の顔のうちの有効顔領域の中心部である第１中心と、の第１のずれを検出するステップと、
前記第１のずれに基づいて、顔認識装置の動きに関する装置動き信号を生成するステップと、
前記装置動き信号を出力するステップと
を実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本開示は、顔認識装置、顔認識システム、方法及びプログラムに関する。
【背景技術】
【0002】
昨今、病院や店舗の入り口においてカメラ付き装置が設置されることが珍しくない、そのようなカメラ付き装置は、撮影対象の人物の顔の位置をその画面に合わせてその人物の体温を測定する機能を備える。入国審査において本人確認のため、パスポートの写真と、人物の顔とを照合するカメラ付き装置が設置されることもある。
【0003】
特許文献１において、対象物（例えば、人物又は顔等）が広角画像の中心にくるように、対象物を自動追尾して撮像することができることが記載されている。
【先行技術文献】
【特許文献】
【0004】
【特許文献1】国際公開第２０１６／０６８０５７号
【発明の概要】
【発明が解決しようとする課題】
【0005】
上記のような従来のカメラ付き装置は固定の高さ、向きとなっており、人間が装置の高さに顔を合わせるのに時間がかかるケースがという課題があった。
【0006】
本開示は、対象者に合わせて位置調整する可能な顔認識装置、顔認識システム、方法及びプログラムを提供することを目的の一つとする。
【課題を解決するための手段】
【0007】
この発明に係る顔認識装置、顔認識システム、方法及びプログラムは、以下の構成を採用した。
【0008】
（１）この発明の一態様に係る顔認識装置は、第１の人物の第１の顔を撮影して第１の位置用画像を取得するように構成される第１カメラと、前記撮影された第１の顔の第１の位置用画像を表示するように構成される表示部と、前記表示部内の顔認識領域における前記第１の位置用画像に基づいて、前記第１の顔を撮影して、前記第１の人物の特徴を示す第１の特徴情報を取得するように構成される第２カメラと、前記表示部の中心部である基準部と、前記表示部に表示された前記第１の顔のうちの有効顔領域の中心部である第１中心と、の第１のずれを検出するように構成される検出部と、前記第１のずれに基づいて、顔認識装置の動きに関する装置動き信号を生成するように構成される信号生成部と、前記装置動き信号を出力するように構成される信号出力部とを備える。
【0009】
（２）この発明の一態様に係る方法は、顔認識装置によって実行される顔認識の方法であって、第１の人物の第１の顔を撮影して第１の位置用画像を取得するステップと、前記撮影された第１の顔の第１の位置用画像を表示するステップと、前記顔認識装置に含まれる表示部内の顔認識領域における前記第１の位置用画像に基づいて、前記第１の顔を撮影して、前記第１の人物の特徴を示す第１の特徴情報を取得するステップと、前記表示部の中心部である基準部と、前記表示部に表示された前記第１の顔のうちの有効顔領域の中心部である第１中心と、の第１のずれを検出するステップと、前記第１のずれに基づいて、顔認識装置の動きに関する装置動き信号を生成するステップと、前記装置動き信号を出力するステップとを含む。
【0010】
（３）この発明の一態様に係るプログラムは、コンピュータに、第１の人物の第１の顔を撮影して第１の位置用画像を取得するステップと、前記撮影された第１の顔の第１の位置用画像を表示するステップと、前記顔認識装置に含まれる表示部内の顔認識領域における前記第１の位置用画像に基づいて、前記第１の顔を撮影して、前記第１の人物の特徴を示す第１の特徴情報を取得するステップと、前記表示部の中心部である基準部と、前記表示部に表示された前記第１の顔のうちの有効顔領域の中心部である第１中心と、の第１のずれを検出するステップと、前記第１のずれに基づいて、顔認識装置の動きに関する装置動き信号を生成するステップと、前記装置動き信号を出力するステップとを実行させるためのプログラムである。
【発明の効果】
【0011】
（１）から（３）によれば、顔の高さの位置が違うさまざまな利用者に適合できる顔認識装置、顔認識システム、方法及びプログラムを提供することができる。
【図面の簡単な説明】
【0012】
【図1】本開示の第１実施形態における顔認識装置１０の動作例を示す図である。
【図2】本開示の第１実施形態における顔認識装置１０の機能構成図である。
【図3】本開示の第１実施形態における顔認識装置１０に含まれる表示部１３の構成例を示す図である。
【図4】本開示の第１実施形態における有効顔領域３１の一例を示す図である。
【図5】本開示の第１実施形態における顔認識装置１０の処理フローを示すフローチャートである。
【図6】本開示の第２実施形態における顔認識装置１０の機能構成図である。
【図7】本開示の第２実施形態における顔認識装置１０の動作例を示す図である。
【図8】本開示の第２実施形態における顔認識装置１０の動作例を示す図である。
【図9】本開示の第２実施形態における顔認識装置１０の処理フローを示すフローチャートである。
【図10】本開示の第２実施形態における顔認識装置１０の処理フローを示すフローチャートである。
【図11】本開示の第３実施形態における顔認識装置１０の動作例を示す図である。
【図12】本開示の第３実施形態における顔認識装置１０の処理フローを示すフローチャートである。
【図13】本開示の第３実施形態における顔認識装置１０の処理フローを示すフローチャートである。
【図14】本開示の第４実施形態における顔認識システムの構成例を示す図である。
【図15】本実施形態に係る各装置のハードウェア構成を説明する説明図である。
【発明を実施するための形態】
【0013】
以下、図面を参照し、本開示の顔認識装置、顔認識システム、方法及びプログラムの実施形態について説明する。尚、以下の実施形態は特許請求の範囲に係る発明を限定するものではなく、また実施形態で説明されている特徴の組み合わせの全てが発明に必須のものとは限らない。実施形態で説明されている複数の特徴のうち二つ以上の特徴が任意に組み合わされてもよい。また、同一若しくは同様の構成には同一の参照番号を付し、重複した説明は省略する。
【0014】
（第１実施形態）
図１は、本開示の第１実施形態における顔認識装置１０の動作例を示す図である。
図１は、本開示の第１実施形態における顔認識装置１０の動作例を示す図である。
【0015】
顔認識装置１０は、第１カメラ１１、第２カメラ１２及び表示部１３を備えている。表示部１３内には、さらに顔認識領域１３１が含まれている。顔認識装置１０は支持部２０に取り付けられている。顔認識装置１０及び支持部２０は顔認識システムＳを構成している。なお、図示していないが、顔認識システムＳは顔認識装置１０の背後に顔認識装置角度制御部２１及び顔認識装置可動部２２を備え、顔認識装置角度制御部２１及び顔認識装置可動部２２により、顔認識装置１０は支持部２０に接続される。支持部２０の例は支柱である。第２カメラ１２は赤外線センサを備えており、第１カメラ１１が検出した人物Ｊの体温を推定して表示部１３に表示する。図１において、人物Ｊはお年寄りであるとする。
【0016】
顔認識装置１０については、支持部２０への取り付け具合が調整可能となっている。顔認識装置１０は、例えば、人物Ｊの背の高さに応じて、第１カメラ１１及び第２カメラ１２が撮影できる向きを適応可能なように構成されている。この機能は、顔認識装置１０の背後において支柱（支持部２０）に備え付けられている顔認識装置角度制御部２１によって実現される。
【0017】
顔認識装置１０は、例えば、人物Ｊの背の高さや顔の向きに応じて、第１カメラ１１及び第２カメラ１２が撮影できる高さを適応可能なように、その表示部１３の面の方向（垂線方向）は調整可能に構成されている。この機能は、顔認識装置１０の背後において支柱に備え付けられている顔認識装置角度制御部２１及び顔認識装置可動部２２の少なくとも１つによって実現される。顔認識装置角度制御部２１及び顔認識装置可動部２２については後述する。
【0018】
図１において、お年寄りの背は低く、顔認識装置１０とお年寄りとの高さに差があるため、最初、第２カメラ１２はお年寄りの顔を捉えることができず、お年寄りの体温を測ることもできなかった。顔認識装置１０は、顔認識装置角度制御部２１及び顔認識装置可動部２２の少なくとも１つの機能により、その高さ及び向きの少なくとも１つを自律的に調整する。
【0019】
その結果、第２カメラ１２は、お年寄りの顔面から発せられる赤外線を取得することによってお年寄りに負担をかけることなくお年寄りの体温を成功裏に測定している。表示部１３はお年寄りの体温を「３６．５℃」と表示している。
【0020】
図２は、本開示の第１実施形態における顔認識装置１０の機能構成図である。
【0021】
顔認識装置１０は、第１カメラ１１、第２カメラ１２、表示部１３、検出部１４、信号生成部１５及び信号出力部１６を備える。顔認識装置１０はタブレット端末でもよいし、ラップトップＰＣでもよい。
【0022】
第１カメラ１１は、第１カメラ１１の被写体を検出する。本開示において第１カメラ１１は、被写体たる人物の顔を撮影して、位置用画像を取得する。位置用画像は、被写体の人物の位置に応じて顔認識装置１０の位置を適応制御するための画像である。
【0023】
第２カメラ１２は、第１カメラ１１によって撮影された画像と表示部１３に表示されるその撮影画像に基づいて、被写体の人物の特徴を取得する。被写体の人物の特徴は、その人物の体温でもよいし、顔の画像でもよい。第２カメラ１２によって撮影された顔の画像は、オフィスビル入り口における本人確認や入国ゲートにおける本人確認といった認証に用いられてもよい。第２カメラ１２は第１カメラ１１より高精細な画像を撮影可能なカメラでもよい。
【0024】
表示部１３は表示素子である。表示部１３は、例えば液晶ディスプレイでもよいし有機ＥＬディスプレイでもよい。第１カメラ１１及び第２カメラ１２が撮影した画像を表示部１３は表示する。表示部１３の構成と機能は後述する。
【0025】
検出部１４は、第１カメラ１１により撮影された人物の顔の画像が表示部１３の中心部分又はその近傍に表示されているか否かを検出する。検出部１４の動作例の詳細は後述する。
【0026】
信号生成部１５は、第２カメラ１２による人物の撮影画像と検出部１４による検出結果とに基づいて、動き信号を生成する。動き信号は、顔認識装置動き信号（装置動き信号）と人物動き信号とを含む。顔認識装置動き信号は、顔認識装置１０の高さ及び向きの少なくとも１つを変化させるための信号である。
【0027】
顔認識装置動き信号は、例えば、「１段階高さを上げる」又は「１段階高さを下げる」という情報を示してもよいし、「１０ｃｍ高さを上げる」又は「５ｃｍ高さを下げる」という具体的な距離と方向とを示してもよい。「１段階」は、例えば５ｃｍでもよく、事前に設定されていてもよいし、準静的に設定されてもよい。顔認識装置動き信号は、「左方向に５度顔認識装置１０を回転させる」又は「右方向に１０度、下方向に５度、顔認識装置１０を回転させる」という情報を示してもよい。
【0028】
人物動き信号は、第１カメラ１１が撮影している人物に対して、１歩前進すること又は１歩後退することを促すことを示してもよいし、第１カメラ１１が撮影している人物に対して顔を若干左、右、上及び下の少なくとも１つに向けることを促すことを示してもよい。
【0029】
信号出力部１６は、信号生成部１５が生成した動き信号を外部に出力する。信号出力部１６は、顔認識装置動き信号を顔認識装置角度制御部２１及び顔認識装置可動部２２の少なくとも１つに出力してもよい。信号出力部１６は、人物動き信号を表示部１３に表示させてもよい。この場合、人物動き信号は、その内容をテキストで表すものでもよい。信号出力部１６はスピーカーでもよく、人物動き信号を音声の形式で出力してもよい。
【0030】
図３は、本開示の第１実施形態における顔認識装置１０に含まれる表示部１３の構成例を示す図である。
【0031】
顔認識装置１０の表面の外周部は縁となっており、第１カメラ１１及び第２カメラ１２が埋め込まれている。縁は無い構成でもよく、この場合、表示部１３は顔認識装置１０の画面全体を覆う構成となり、第１カメラ１１及び第２カメラ１２は表示部１３に一体的に形成されてもよい。第１カメラ１１及び第２カメラ１２は顔認識装置１０の表面のどこに配置されていてもよい。
【0032】
表示部１３は顔認識領域１３１を含んでいる。顔認識領域１３１は、第１カメラ１１が撮影する人物の顔の位置を検出部１４が有効に認識する領域である。顔認識領域１３１は、表示部１３上において実線又は点線によって表示されていてもよいしされていなくてもよいが、顔認識領域１３１は、表示部１３上において表示されている方が人物の動きを補助する点で好ましい。
【0033】
基準部１３２は、顔認識領域１３１の中心部を示す領域である。図３において、基準部１３２は、表示部１３の中心部に基準部１３２は横方向に帯状に形成されている。基準部１３２は、顔認識領域１３１の座標上の中心を、基準部１３２の中心として含む帯状領域でもよい。この場合、基準部１３２の垂直方向（高さ方向）の幅は、顔認識領域１３１の高さの所定割合以下の長さでもよく、所定割合は５％でもよいし１０％でもよいし、２０％でもよい。所定割合が小さいほど、人物の特徴を第２カメラ１２により認識する際の精度が上がる。
【0034】
基準部１３２の中心部基準部１３２はこの例に限られず、顔認識領域１３１の座標上の中心を、基準部１３２の座標上の中心として含む矩形領域でもよく、この場合、この矩形領域は顔認識領域１３１の面積の所定割合以下の領域でもよい。
【0035】
図４は、本開示の第１実施形態における有効顔領域３１の一例を示す図である。
【0036】
有効顔領域３１は、顔３０のうちの特定の領域であり、中心３２を含む。有効顔領域３１は、第１カメラ１１及び第２カメラ１２が撮影する人物の顔の特徴的な部分である。有効顔領域３１は一対の眉、一対の目、鼻及び口の少なくとも１つを含む領域でもよいし、さらに耳を含んでもよいし、さらに顎を含んでもよい。
【0037】
中心３２は、有効顔領域３１の座標的な中心部でもよく、この場合、中心３２は、有効顔領域３１を構成する矩形領域に含まれる２本の対角線の交点付近でもよい。中心３２は、鼻頭でもよいし、鼻と上唇の間でもよいし、両目の中間付近の場所でもよい。第１カメラ１１及び第２カメラ１２が撮影する人物を第１の人物とすると、この人物については第１の顔及び第１中心が定義される。
【0038】
図５は、本開示の第１実施形態における顔認識装置１０の処理フローを示すフローチャートである。
【0039】
ステップＳ１０１において、信号出力部１６は、初期位置に動くことを指示する装置動き信号を顔認識装置角度制御部２１及び顔認識装置可動部２２の少なくとも１つに出力する。なお、この処理の後、顔認識装置角度制御部２１及び顔認識装置可動部２２の少なくとも１つは、顔認識装置１０を初期位置に移動させ、及び/又は動かす。
【0040】
ステップＳ１０２において、検出部１４は、第２カメラ１２が第１の人物を検出したか否かを判定する。第１の人物が検出された場合、処理はステップＳ１０３に進み、そうでない場合、第１の人物を第２カメラ１２及び検出部１４が検出するまで処理はステップＳ１０２に留まる。
【0041】
ステップＳ１０３において、第１カメラ１１は第１の人物の第１の顔を撮影し、第１の人物の第１の位置用画像を取得する。
【0042】
ステップＳ１０４において、表示部１３は、第１カメラ１１が撮影した第１の顔の第１の位置用画像を表示する。
【0043】
ステップＳ１０５において、検出部１４は、表示部１３の中心部である基準部１３２と、表示部１３に表示された第１の顔のうちの有効顔領域の中心部である第１中心３２との第１のずれを検出する。第１のずれは、表示部１３上の距離でもよい。基準部１３２が図３に示すように帯状の場合は、第１中心が基準部１３２内に含まれていれば第１のずれは０でよく、第１中心が基準部１３２内に含まれていなければ、第１のずれは、第１中心と帯の外縁との最短距離でもよい。
【0044】
ステップＳ１０６において、検出部１４は、第１のずれが所定の閾値（例えば、第１の閾値）より小さいか否かを判定する。第１のずれが所定の閾値より小さい場合、処理はステップＳ１０７に進み、そうでない場合処理はステップＳ１０８に進む。所定の閾値は、表示部１３上の距離でもよいし、表示部１３のサイズに対する第１のずれの比でもよい。この場合、基準となる表示部１３のサイズは、表示部１３を構成する矩形に含まれる２本の対角線のうちの１本の距離でもよい。
【0045】
ステップＳ１０７において、第２カメラ１２は、表示部１３内の顔認識領域における第１の位置用画像に基づいて、第１の顔を撮影して、第１の人物の特徴を示す第１の特徴情報を取得する。第１の特徴情報は、第１の人物を一意に特定可能な程度に第１の人物の特徴を表す画像でもよいし、第１の人物の体温を表す情報でもよい。第１の人物の体温を表す情報は、第２カメラ１２が備える赤外線センサにより取得される各波長の強度でもよい。この場合、表示部１３は第１の人物の体温を表示してもよい。処理はその後終了する。
【0046】
ステップＳ１０８において、信号生成部１５は、第１のずれに基づいて装置動き信号を生成する。装置動き信号は、第１の人物と顔認識装置１０の高さの差が小さくなるように、顔認識装置１０を移動させる信号である。代替的に、または追加的に、顔認識装置１０の角度を変化させる場合、装置動き信号は顔認識装置１０を上、下、左及び右の少なくとも１つに動かす角度を示してもよい。装置動き信号の示す具体的な内容については既に述べたとおりである。
【0047】
ステップＳ１０９において、信号出力部１６は、顔認識装置角度制御部２１及び顔認識装置可動部２２の少なくとも１つに装置動き信号を出力する。その後処理はステップＳ１０２に遷移する。
【0048】
以上説明したように、本開示の第１実施形態に係る顔認識装置１０は、第１の人物の第１の顔を撮影して第１の位置用画像を取得するように構成される第１カメラ１１と、撮影された第１の顔の第１の位置用画像を表示するように構成される表示部１３と、表示部１３内の顔認識領域１３１における第１の位置用画像に基づいて、第１の顔を撮影して、第１の人物の特徴を示す第１の特徴情報を取得するように構成される第２カメラ１２と、表示部１３の中心部である基準部１３２と、表示部１３に表示された第１の顔のうちの有効顔領域３１の中心部である第１中心３２と、の第１のずれを検出するように構成される検出部１４と、第１のずれに基づいて、顔認識装置１０の動きに関する装置動き信号を生成するように構成される信号生成部１５と、装置動き信号を出力するように構成される信号出力部１６とを備える。
【0049】
これにより、顔の高さの位置が違うさまざまな利用者に適合できる顔認識手段を提供することができる。
【0050】
また、装置動き信号は、顔認識装置１０の移動量と、移動方向と、動く角度との少なくとも１つを含む。
【0051】
（第２実施形態）
図６は、本開示の第２実施形態における顔認識装置１０の機能構成図である。
図６は、本開示の第２実施形態における顔認識装置１０の機能構成図である。
【0052】
顔認識装置１０は、第１実施形態に加えて通知部１７を備える。第２実施形態において、信号生成部１５は人物動き信号を生成する。人物動き信号は、第１カメラ１１及び第２カメラ１２により撮影される第１の人物に対して顔認識装置１０への前進又は顔認識装置１０からの後退を促す情報を示す。人物動き信号は、さらに、水平方向と、高さ方向との少なくとも１つへの第１の人物の動きを促す情報を示してもよい。
【0053】
通知部１７は、顔認識装置１０が備えるスピーカーを介して、音声により人物動き信号を第１の人物に通知してもよいし、表示部１３上にテキストメッセージとして表示することによって人物動き信号を第１の人物に通知してもよいし、表示部１３上の何らかのアニメーションにより、人物動き信号を第１の人物に通知してもよい。
【0054】
図７は、本開示の第２実施形態における顔認識装置１０の動作例を示す図である。
【0055】
図７において、顔認識領域１３１と有効顔領域３１は重なっている。有効顔領域３１は顔認識領域１３１より大きく、顔認識領域１３１そのものが重なりと等しい。この状態は、第１の人物の第１の顔と顔認識装置１０との距離が近すぎる状態を示す。そこで、信号生成部１５は、第１の人物に対して顔認識装置１０からの後退を促す情報を示す人物動き信号を生成し、通知部１７は音声によって「１歩離れてください」との通知を第１の人物に出力している。
【0056】
図８は、本開示の第２実施形態における顔認識装置１０の動作例を示す図である。
【0057】
図８において、顔認識領域１３１と有効顔領域３１との重なりは、顔認識領域１３１の面積より小さすぎる。この状態は、第１の人物の第１の顔と顔認識装置１０との距離が遠すぎる状態を示す。そこで、信号生成部１５は、第１の人物に対して顔認識装置１０への前進を促す情報を示す人物動き信号を生成し、通知部１７は、人物動き信号に基づき、テキストメッセージによって「１歩近寄ってください」との通知を、表示部１３を介して第１の人物に出力している。
【0058】
図９及び１０は、本開示の第２実施形態における顔認識装置１０の処理フローを示すフローチャートである。
【0059】
ステップＳ１１０１からステップＳ１１０５までの処理は、ステップＳ１０１からステップＳ１０５の処理に対応する。
【0060】
ステップＳ１１０６において、検出部１４は、第１のずれが第１の所定の閾値以下であるか否かを判定する。第１のずれが第１の所定の閾値以下である場合、処理はステップＳ１１０７に進み、そうでない場合、処理はステップＳ１１０８に進む。なお、第１の所定の閾値の内容は第１実施形態と同様である。
【0061】
ステップＳ１１０７において、検出部１４は、顔認識領域１３１と有効顔領域３１との重なり具合を検出する。
【0062】
ステップＳ１１０８及びステップＳ１１１０の処理はステップＳ１０８及びステップＳ１０９の処理に対応する。
【0063】
ステップＳ１１０９において、顔認識領域１３１より重なりが小さいかどうかを検出部１４は検出する。顔認識領域１３１より重なりが小さい場合、処理はステップＳ１１１１に進む。そうでない場合、処理はステップＳ１１１２に進む。
【0064】
ステップＳ１１１１において、検出部１４は、顔認識領域に対する重なりの比が第２の所定の閾値以上であるか否かを判定する。第２の所定の閾値以上の場合、処理はステップＳ１１１５に進み、そうでない場合、処理はステップＳ１１１３に進む。
【0065】
ステップＳ１１１２において、信号生成部１５は、顔認識装置１０から離れることを促す人物動き信号を生成し、処理はステップＳ１１１４に進む。
【0066】
ステップＳ１１１３において、信号生成部１５は、顔認識装置１０に近づくことを促す人物動き信号を生成する。処理はステップＳ１１１４に進む。
【0067】
ステップＳ１１１４において、通知部１７は、人物動き信号を通知する。通知の態様は既述の通りである。
【0068】
図１０に移り、ステップＳ１１１５において、検出部１４は、表示部１３上に表示された第１の人物の顔の画像に基づいて、既知のアルゴリズムないしエンジンを用いて第１の人物の顔の向きを取得する。既知のアルゴリズムないしエンジンは、撮影画像に含まれる顔のパーツとそれらの位置関係により、顔を認識してもよい。
【0069】
人の顔を構成するパーツは、髪の毛、２つの眉、睫毛、両目、両耳、鼻、髭及び口を含むが、顔の形状、各パーツの形状、パーツ間の位置関係には一定のパターンが存在する。そこで、例えば、既知のアルゴリズムないしエンジンは、撮影画像に含まれる髪の毛と、少なくとも１つの眉と、睫毛と、少なくとも１つの目と、少なくとも１つの耳と、鼻と、髭と、口と、の少なくとも１つ若しくはそれらの位置関係又は大きさに基づいて、人物の顔及び顔の向きを認識してもよい。既知のアルゴリズムないしエンジンは、撮影画像に含まれる顔のパーツ各々を構成する複数の座標と、それらの位置関係とについての複数のサンプルを教師データとする機械学習により生成された学習済モデルに基づいて、撮影画像から人物の顔及び顔の向きを推定してもよい。
【0070】
また、人物の顔の向きを推定するための学習済モデルは、人物の顔についての撮影画像を入力として、人物の顔の領域の向きを出力とする教師データに基づいていてもよいし、これらに限らず、市場において入手可能な任意のモデルでもよい。機械学習は、多層構造、例えば３層以上のニューラルネットワークを用いた機械学習である深層学習でもよい。多層構造のニューラルネットワークとして、例えば、畳み込みニューラルネットワークが用いられてもよい。
【0071】
ステップＳ１１１６において、検出部１４は、第１の人物の顔の向きが正面か否かを判定する。正面の場合、処理はステップＳ１１１７に進み、そうでない場合処理はステップＳ１１１８に進む。
【0072】
ステップＳ１１１７の処理はステップＳ１０７の処理に対応する。つまり、第２カメラ１２は、表示部１３内の顔認識領域における第１の位置用画像に基づいて、第１の顔を撮影して、第１の人物の特徴を示す第１の特徴情報を取得する。
【0073】
ステップＳ１１１８において、信号生成部１５は、装置動き信号を生成する。装置動き信号は、第１の人物の顔の正面の向きに顔認識装置１０、特に、第２カメラ１２を正対させるように、顔認識装置１０を動かす角度を示す。
【0074】
ステップＳ１１１９において、信号出力部１６は、装置動き信号を顔認識装置角度制御部２１に出力する。これにより、顔認識装置角度制御部２１は顔認識装置１０の向きを第１の人物の顔の正面に対して正対させるように顔認識装置１０を動かす。
【0075】
ステップＳ１１２０において、検出部１４は、内蔵するタイマを起動させる。このタイマは、顔認識装置１０が装置動き信号に基づく動きを完了させるために十分な時間に設定される。
【0076】
ステップＳ１１２１において、タイマが満了すると処理はステップＳ１１２２に進む。
【0077】
ステップＳ１１２２において、検出部１４は、第１カメラ１１が第１の人物の顔を検出したか否かを判定する。第１の人物の顔が検出された場合処理はステップＳ１１１５に進み、そうでない場合、処理は「ＳＴＡＲＴ」に戻る。
【0078】
以上説明したように、本開示の第２実施形態に係る顔認識装置１０は、通知部１７をさらに備え、検出部１４は、顔認識領域１３１と、有効顔領域３１との重なりを検出するようにさらに構成され、重なりに基づいて、前後方向と、水平方向と、高さ方向との少なくとも１つへの第１の人物の動きを促す人物動き信号を信号生成部１５は生成するように構成され、通知部１７は、人物動き信号を通知するように構成される。
【0079】
また、顔認識装置１０の検出部１７は、顔認識領域１３１と、有効顔領域３１との重なりを検出するようにさらに構成され、第１カメラ１１は、重なりに基づいて、第１カメラ１１が備えるレンズの焦点距離を変化させるように構成される。つまり、第１カメラ１１は、第１の人物と顔認識装置１０との距離に応じて、第１カメラ１１の光学ズーム機能を調節する。
【0080】
また、顔認識装置１０の検出部１７は、顔認識領域１３１と、有効顔領域３１との重なりを検出するようにさらに構成され、表示部１３は、重なりに基づいて、第１の位置用画像を拡大又は縮小させるように構成される。つまり、表示部１３は、第１の人物と顔認識装置１０との距離に応じて、第１カメラ１１のデジタルズーム機能を調節する。
【0081】
これにより、顔の高さの位置が違うさまざまな利用者に適合できる顔認識手段を、被写体たる人物とインタラクティブな態様により提供することができる。
【0082】
（第３実施形態）
図１１は、本開示の第３実施形態における顔認識装置１０の動作例を示す図である。
図１１は、本開示の第３実施形態における顔認識装置１０の動作例を示す図である。
【0083】
図１１において、表示部１３は顔認識領域１３１に第１の顔３０a及び第２の顔３０ｂを表示している。つまり、顔認識装置１０付近に２人の人物がいて、第１カメラ１１が２人の人物それぞれの顔を検出している。顔認識領域１３１において、第１の顔３０ａは第２の顔３０ｂより基準部１３２に近いことがわかる。本実施形態において、顔認識領域１３１に複数の人物の顔が表示される場合に、検出部１４は、基準部１３２に近い方の顔を優先して検出し、検出された顔について第２カメラ１２は特徴情報を取得するように構成される。
【0084】
図１２及び１３は、本開示の第３実施形態における顔認識装置１０の処理フローを示すフローチャートである。
【0085】
ステップＳ２１０１及びステップＳ２１０２の処理はステップＳ１０１及びステップＳ１０２の処理に対応する。
【0086】
ステップＳ２１０３において、第１カメラ１１は人物の顔を撮影し、位置用画像を取得する。この場合、第１カメラ１１は複数の人物の顔を撮影することがある。
【0087】
ステップＳ２１０４において、表示部１３は、撮影された顔の位置用画像を表示する。この場合、表示部１３は複数の顔を撮影することがある。
【0088】
ステップＳ２１０５において、検出部１４は、表示部１３に表示された顔が２以上か否かを判定する。表示部１３に表示された顔が２以上の場合、処理はステップＳ２１０６に進み、そうでない場合処理はステップＳ２１０７に進む。
【0089】
ステップＳ２１０６において、検出部１４は、表示部１３に表示された全ての顔のそれぞれについて、有効顔領域３１の中心部と表示部１３の基準部１３２とのずれを検出する。
【0090】
ステップＳ２１０７の処理はステップＳ１０５の処理に対応する。つまり、検出部１４は、表示部１３の中心部である基準部１３２と、表示部１３に表示された第１の顔のうちの有効顔領域の中心部である第１中心３２との第１のずれを検出する。
【0091】
ステップＳ２１０８において、検出部１４は、表示部１３に表示された全ての顔のうち、有効顔領域３１の中心部と表示部１３の基準部１３２とのずれがもっとも小さい顔を「第１の顔」として特定する。つまり、特定された「第１の顔」は、第２カメラ１２によって人物の特徴を取得する対象として特定された顔である。
【0092】
ステップＳ２１０９の処理はステップＳ１０６の処理に対応する。つまり、検出部１４は、第１のずれが所定の閾値（例えば、第１の閾値）より小さいか否かを判定する。第１のずれが所定の閾値より小さい場合、処理はステップＳ２１１０に進み、そうでない場合処理はステップＳ２１１１に進む。
【0093】
ステップＳ２１１０の処理はステップＳ１１０９の処理に対応する。つまり、顔認識領域１３１より重なりが小さいかどうかを検出部１４は検出する。顔認識領域１３１より重なりが小さい場合、処理はステップＳ２１１４に進む。そうでない場合、処理はステップＳ２１１５に進む。
【0094】
ステップＳ２１１１の処理は、ステップＳ１０８の処理に対応する。つまり、信号生成部１５は、第１のずれに基づいて装置動き信号を生成する。
【0095】
ステップＳ２１１２の処理は、ステップＳ１１０９の処理に対応する。つまり、顔認識領域１３１より重なりが小さいかどうかを検出部１４は検出する。顔認識領域１３１より重なりが小さい場合、処理はステップＳ２１１４に進む。そうでない場合、処理はステップＳ２１１５に進む。
【0096】
ステップＳ２１１３の処理は、ステップＳ１０９の処理に対応する。つまり、信号出力部１６は、顔認識装置角度制御部２１及び顔認識装置可動部２２の少なくとも１つに装置動き信号を出力する。処理はその後ステップＳ２１０２に遷移する。
【0097】
図１３に移り、ステップＳ２１１４の処理はステップＳ１１１１の処理に対応する。つまり、検出部１４は、顔認識領域に対する重なりの比が第２の所定の閾値以上であるか否かを判定する。重なりの比が第２の所定の閾値以上の場合、処理はステップＳ２１１６に進み、そうでない場合、処理はステップＳ２１１７に進む。
【0098】
ステップＳ２１１５の処理は、ステップＳ１１１２の処理に対応する。つまり、信号生成部１５は、顔認識装置１０から離れることを促す人物動き信号を生成し、処理はステップＳ２１１８に進む。
【0099】
ステップＳ２１１６の処理はステップＳ１１１５の処理に対応する。つまり、検出部１４は、表示部１３上に表示された第１の人物の画像に基づいて、既知のアルゴリズムないしエンジンを用いて第１の人物の顔の向きを取得する。処理はステップＳ２１１９に進む。
【0100】
ステップＳ２１１７の処理はステップＳ１１１３の処理に対応する。つまり、信号生成部１５は、顔認識装置１０に近づくことを促す人物動き信号を生成する。処理はステップＳ２１１８に進む。
【0101】
ステップＳ２１１８の処理はステップＳ１１１４の処理に対応する。つまり、通知部１７は、人物動き信号を通知する。通知の態様は既述の通りである。処理はステップＳ２１０２に遷移する。
【0102】
ステップＳ２１１９の処理はステップＳ１１１６の処理に対応する。つまり、検出部１４は、第１の人物の顔の向きが正面か否かを判定する。正面の場合、処理はステップＳ２１２０に進み、そうでない場合処理はステップＳ２１２１に進む。
【0103】
ステップＳ２１２０の処理はステップＳ１１１７の処理に対応する。つまり、つまり、第２カメラ１２は、表示部１３内の顔認識領域における第１の位置用画像に基づいて、第１の顔を撮影して、第１の人物の特徴を示す第１の特徴情報を取得する。処理はその後終了する。
【0104】
ステップＳ２１２１からステップＳ２１２５の処理は、ステップＳ１１１８からステップＳ１１２２の処理に対応する。
【0105】
ステップＳ２１２１において、信号生成部１５は、装置動き信号を生成する。装置動き信号は、第１の人物の第１の顔の正面の向きに顔認識装置１０、特に、第２カメラ１２を正対させるように、顔認識装置１０を動かす角度を示す。
【0106】
ステップＳ２１２２において、信号出力部１６は、装置動き信号を顔認識装置角度制御部２１に出力する。これにより、顔認識装置角度制御部２１は顔認識装置１０の向きを第１の人物の第１の顔の正面の向きに対して正対させるように顔認識装置１０を動かす。
【0107】
ステップＳ２１２３において、検出部１４は、内蔵するタイマを起動させる。
【0108】
ステップＳ２１２４において、タイマが満了すると処理はステップＳ２１２５に進む。
【0109】
ステップＳ２１２５において、検出部１４は、第１カメラ１１が第１の人物の顔を検出したか否かを判定する。第１の人物の顔が検出された場合処理はステップＳ２１１６に進み、そうでない場合、処理は「ＳＴＡＲＴ」に戻る。
【0110】
なお、本実施形態において、第２の顔は複数でもよい。つまり、第２カメラ１２は複数のだい２の人物の顔を撮影してもよい。例えば、第２の顔３０ｂの他に、第２の顔３０ｃがあってもよい。この場合、第１カメラ１１は、複数の第２の人物それぞれの第２の顔を撮影して複数の第２の位置用画像を取得してもよい。表示部１３は、撮影された複数の第２の顔のそれぞれの第２の位置用画像を表示してもよい。
【0111】
検出部１４は、基準部１３２と、表示部１３に表示された複数の第２の顔のうちの有効顔領域それぞれの中心部である複数の第２中心と、の複数の第２のずれを検出してもよい。信号生成部１５は、第１のずれが複数の第２のずれのいずれより小さい場合、第１の人物についての装置動き信号を生成してもよい。
【0112】
以上説明したように、本実施形態に係る顔認識装置１０において、第１カメラ１１は、第１の人物と異なる１又は複数の第２の人物それぞれの１又は複数の第２の顔を撮影して第２の位置用画像を取得するようにさらに構成され、表示部１３は、撮影された１又は複数の第２の顔それぞれの１又は複数の第２の位置用画像を表示するようにさらに構成され、検出部１４は、基準部１３２と、表示部１３に表示された１又は複数の第２の顔のうちの有効顔領域それぞれの中心部である１又は複数の第２中心と、の１又は複数の第２のずれを検出するようにさらに構成され、信号生成部１５は、第１のずれが１又は複数の第２のずれのいずれより小さい場合、第１の人物についての装置動き信号を生成するように構成される。
【0113】
これにより、表示部１３に複数の人物の顔が表示された場合であっても、基準部１３２に最も近く表示された顔について第２カメラ１２はその特徴情報を取得することができ、顔の高さの位置が違うさまざまな利用者に適合できる顔認識手段を、被写体たる人物とインタラクティブな態様により提供することができる。
【0114】
（第４実施形態）
図１４は、本開示の第４実施形態における顔認識システムＳの構成例を示す図である。
図１４は、本開示の第４実施形態における顔認識システムＳの構成例を示す図である。
【0115】
【0116】
顔認識システムＳは顔認識装置１０、支持部２０、顔認識装置角度制御部２１及び顔認識装置可動部２２を備える。
【0117】
顔認識装置角度制御部２１により、顔認識装置１０は垂直方向及び水平方向の少なくとも１つの角度調整が可能になる。水平方向の角度調整は、人物が顔認識装置１０と正対していない場合、人物の位置に顔認識装置１０、特に第１カメラ１１及び第２カメラ１２の向きをその人物の顔の方向に向ける調整である。
【0118】
垂直方向の角度調整は、人物の顔の高さと顔認識装置１０の高さとが合っていない場合に、顔認識装置１０の角度を変化させることにより、人物の顔と顔認識装置１０とが正対するように制御する調整である。
【0119】
顔認識装置可動部２２は、顔認識装置１０の高さそのものを変化させる。
【0120】
顔認識装置角度制御部２１及び顔認識装置可動部２２の制御粒度は任意である。例えば、顔認識装置角度制御部２１は、信号出力部１６からの装置動き信号に基づいて、１回の制御で５度ごと角度調整してもよい。信号生成部１５は、人物の顔と顔認識装置１０の向きとのずれに応じた角度を適宜生成してもよい。
【0121】
顔認識装置可動部２２は、信号出力部１６からの装置動き信号に基づいて、１回の制御で５ｃｍあるいは１０ｃｍごと高さ調整してもよいし、信号生成部１５は、人物の第１中心と基準部１３２とのずれに応じて、ずれに対応する距離を示す装置動き信号を生成してもよい。
【0122】
図１５は、本実施形態に係る各装置のハードウェア構成を説明する説明図である。顔認識装置１０は、入出力モジュールＩ、記憶モジュールＭ、及び制御モジュールＰを含んで構成される。入出力モジュールＩは、通信モジュールＨ１１、接続モジュールＨ１２、ポインティングデバイスＨ２１、キーボードＨ２２、ディスプレイＨ２３、ボタンＨ３、マイクＨ４１、スピーカーＨ４２、カメラＨ５１、又はセンサＨ５２の一部或いは全部を含んで実現される。
【0123】
記憶モジュールＭは、ドライブＨ７を含んで実現される。記憶モジュールＭは、さらに、メモリＨ８の一部或いは全部を含んで構成されてもよい。制御モジュールＰは、メモリＨ８及びプロセッサＨ９を含んで実現される。これらのハードウェア構成要素は、バス（Ｂｕｓ）を介して、相互に通信可能に接続されるとともに、電源Ｈ６から電力を供給されている。
【0124】
接続モジュールＨ１２は、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉｕｌ Ｂｕｓ）等のデジタル入出力ポートである。携帯機器の場合、ポインティングデバイスＨ２１、キーボードＨ２２、及びディスプレイＨ２３は、タッチパネルである。センサＨ５２は、加速度センサ、ジャイロセンサ、ＧＰＳ受信モジュール、近接センサ等である。電源Ｈ６は、各装置を動かすために必要な電気を供給する電源ユニットである。携帯機器の場合、電源Ｈ６は、バッテリーである。
【0125】
ドライブＨ７は、ハードディスクドライブやソリッドステートドライブ等の補助記憶媒体である。ドライブＨ７は、ＥＥＰＲＯＭやフラッシュメモリ等の不揮発性メモリ、又は、光磁気ディスクドライブやフレキシブルディスクドライブであってもよい。また、ドライブＨ７は、例えば、各装置に内蔵されるものに限らず、ＩＦモジュールＨ１２のコネクタに接続された外付け型の記憶装置でもよい。
【0126】
メモリＨ８は、ランダムアクセスメモリ等の主記憶媒体である。なお、メモリＨ８は、キャッシュメモリであってもよい。メモリＨ８は、一又は複数のプロセッサＨ９によって命令が実行されるときに、これらの命令を格納する。プロセッサＨ９は、ＣＰＵ（中央演算装置）である。プロセッサＨ９は、ＭＰＵ（マイクロプロセッシングユニット）又はＧＰＵ（グラフィックスプロセッシングユニット）であってもよい。プロセッサＨ９は、メモリＨ８を介してドライブＨ７から、プログラム及び各種データを読み出して演算を行うことで、一又は複数のメモリＨ８に格納した命令を実行する。
【0127】
入出力モジュールＩは、表示部１３、信号出力部１６及び通知部１７を実現する。
【0128】
制御モジュールＰは、検出部１４及び信号生成部１５を実現する。
【0129】
以上、この発明の一態様として各実施形態や変形例に関して図面を参照して詳述してきたが、具体的な構成は各実施形態や変形例に限られるものではなく、この発明の要旨を逸脱しない範囲の設計変更等も含まれる。また、本開示の一態様は、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本開示の技術的範囲に含まれる。また、上記各実施形態や変形例に記載された要素であり、同様の効果を奏する要素同士を置換した構成も含まれる。
【0130】
例えば、上記各実施形態の一部又は全部を組み合わせることで本開示の一態様を実現してもよい。
【0131】
上述の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
【0132】
（付記１）
第１の人物の第１の顔を撮影して第１の位置用画像を取得するように構成される第１カメラと、
前記撮影された第１の顔の第１の位置用画像を表示するように構成される表示部と、
前記表示部内の顔認識領域における前記第１の位置用画像に基づいて、前記第１の顔を撮影して、前記第１の人物の特徴を示す第１の特徴情報を取得するように構成される第２カメラと、
前記表示部の中心部である基準部と、前記表示部に表示された前記第１の顔のうちの有効顔領域の中心部である第１中心と、の第１のずれを検出するように構成される検出部と、
前記第１のずれに基づいて、顔認識装置の動きに関する装置動き信号を生成するように構成される信号生成部と、
前記装置動き信号を出力するように構成される信号出力部と
を備える顔認識装置。
第１の人物の第１の顔を撮影して第１の位置用画像を取得するように構成される第１カメラと、
前記撮影された第１の顔の第１の位置用画像を表示するように構成される表示部と、
前記表示部内の顔認識領域における前記第１の位置用画像に基づいて、前記第１の顔を撮影して、前記第１の人物の特徴を示す第１の特徴情報を取得するように構成される第２カメラと、
前記表示部の中心部である基準部と、前記表示部に表示された前記第１の顔のうちの有効顔領域の中心部である第１中心と、の第１のずれを検出するように構成される検出部と、
前記第１のずれに基づいて、顔認識装置の動きに関する装置動き信号を生成するように構成される信号生成部と、
前記装置動き信号を出力するように構成される信号出力部と
を備える顔認識装置。
【0133】
（付記２）
前記装置動き信号は、前記顔認識装置の移動量と、移動方向と、動く角度との少なくとも１つを含む
付記１に記載の顔認識装置。
前記装置動き信号は、前記顔認識装置の移動量と、移動方向と、動く角度との少なくとも１つを含む
付記１に記載の顔認識装置。
【0134】
（付記３）
通知部をさらに備え、
前記検出部は、前記顔認識領域と、前記有効顔領域との重なりを検出するようにさらに構成され、
前記重なりに基づいて、前後方向と、水平方向と、高さ方向との少なくとも１つへの前記第１の人物の動きを促す人物動き信号を前記信号生成部は生成するように構成され、
前記通知部は、前記人物動き信号を通知するように構成される
付記１又は２に記載の顔認識装置。
通知部をさらに備え、
前記検出部は、前記顔認識領域と、前記有効顔領域との重なりを検出するようにさらに構成され、
前記重なりに基づいて、前後方向と、水平方向と、高さ方向との少なくとも１つへの前記第１の人物の動きを促す人物動き信号を前記信号生成部は生成するように構成され、
前記通知部は、前記人物動き信号を通知するように構成される
付記１又は２に記載の顔認識装置。
【0135】
（付記４）
前記検出部は、前記顔認識領域と、前記有効顔領域との重なりを検出するようにさらに構成され、
前記第１カメラは、前記重なりに基づいて、前記第１カメラが備えるレンズの焦点距離を変化させるように構成される
付記１から３のいずれかに一記載の顔認識装置。
前記検出部は、前記顔認識領域と、前記有効顔領域との重なりを検出するようにさらに構成され、
前記第１カメラは、前記重なりに基づいて、前記第１カメラが備えるレンズの焦点距離を変化させるように構成される
付記１から３のいずれかに一記載の顔認識装置。
【0136】
（付記５）
前記検出部は、前記顔認識領域と、前記有効顔領域との重なりを検出するようにさらに構成され、
前記表示部は、前記重なりに基づいて、前記第１の位置用画像を拡大又は縮小させるように構成される
付記１から４のいずれか一に記載の顔認識装置。
前記検出部は、前記顔認識領域と、前記有効顔領域との重なりを検出するようにさらに構成され、
前記表示部は、前記重なりに基づいて、前記第１の位置用画像を拡大又は縮小させるように構成される
付記１から４のいずれか一に記載の顔認識装置。
【0137】
（付記６）
前記第２カメラは、赤外線センサを備えるサーマルカメラである
付記１から５のいずれか一に記載の顔認識装置。
前記第２カメラは、赤外線センサを備えるサーマルカメラである
付記１から５のいずれか一に記載の顔認識装置。
【0138】
（付記７）
前記第１カメラは、前記第１の人物と異なる１又は複数の第２の人物それぞれの１又は複数の第２の顔を撮影して第２の位置用画像を取得するようにさらに構成され、
前記表示部は、前記撮影された１又は複数の第２の顔それぞれの１又は複数の第２の位置用画像を表示するようにさらに構成され、
前記検出部は、前記基準部と、前記表示部に表示された前記１又は複数の第２の顔のうちの有効顔領域それぞれの中心部である１又は複数の第２中心と、の１又は複数の第２のずれを検出するようにさらに構成され、
前記信号生成部は、前記第１のずれが前記１又は複数の第２のずれのいずれより小さい場合、前記第１の人物についての前記装置動き信号を生成するように構成される
付記１から６のいずれか一に記載の顔認識装置。
前記第１カメラは、前記第１の人物と異なる１又は複数の第２の人物それぞれの１又は複数の第２の顔を撮影して第２の位置用画像を取得するようにさらに構成され、
前記表示部は、前記撮影された１又は複数の第２の顔それぞれの１又は複数の第２の位置用画像を表示するようにさらに構成され、
前記検出部は、前記基準部と、前記表示部に表示された前記１又は複数の第２の顔のうちの有効顔領域それぞれの中心部である１又は複数の第２中心と、の１又は複数の第２のずれを検出するようにさらに構成され、
前記信号生成部は、前記第１のずれが前記１又は複数の第２のずれのいずれより小さい場合、前記第１の人物についての前記装置動き信号を生成するように構成される
付記１から６のいずれか一に記載の顔認識装置。
【0139】
（付記８）
前記第２カメラは前記第１カメラより高精細撮影が可能である
付記１から７のいずれか一に記載の顔認識装置。
前記第２カメラは前記第１カメラより高精細撮影が可能である
付記１から７のいずれか一に記載の顔認識装置。
【0140】
（付記９）
前記有効顔領域は、前記第１の人物の２つの眉、２つの目、鼻及び口の少なくとも１つを含む領域である
付記１から８のいずれか一に記載の顔認識装置。
前記有効顔領域は、前記第１の人物の２つの眉、２つの目、鼻及び口の少なくとも１つを含む領域である
付記１から８のいずれか一に記載の顔認識装置。
【0141】
（付記１０）
付記１から９のいずれか一に記載の顔認識装置が移動可能に接続された支持部を備える
顔認識システム。
付記１から９のいずれか一に記載の顔認識装置が移動可能に接続された支持部を備える
顔認識システム。
【0142】
（付記１１）
顔認識装置によって実行される顔認識の方法であって、
第１の人物の第１の顔を撮影して第１の位置用画像を取得するステップと、
前記撮影された第１の顔の第１の位置用画像を表示するステップと、
前記顔認識装置に含まれる表示部内の顔認識領域における前記第１の位置用画像に基づいて、前記第１の顔を撮影して、前記第１の人物の特徴を示す第１の特徴情報を取得するステップと、
前記表示部の中心部である基準部と、前記表示部に表示された前記第１の顔のうちの有効顔領域の中心部である第１中心と、の第１のずれを検出するステップと、
前記第１のずれに基づいて、顔認識装置の動きに関する装置動き信号を生成するステップと、
前記装置動き信号を出力するステップと、を含む
方法。
顔認識装置によって実行される顔認識の方法であって、
第１の人物の第１の顔を撮影して第１の位置用画像を取得するステップと、
前記撮影された第１の顔の第１の位置用画像を表示するステップと、
前記顔認識装置に含まれる表示部内の顔認識領域における前記第１の位置用画像に基づいて、前記第１の顔を撮影して、前記第１の人物の特徴を示す第１の特徴情報を取得するステップと、
前記表示部の中心部である基準部と、前記表示部に表示された前記第１の顔のうちの有効顔領域の中心部である第１中心と、の第１のずれを検出するステップと、
前記第１のずれに基づいて、顔認識装置の動きに関する装置動き信号を生成するステップと、
前記装置動き信号を出力するステップと、を含む
方法。
【0143】
（付記１２）
コンピュータに、
第１の人物の第１の顔を撮影して第１の位置用画像を取得するステップと、
撮影された第１の顔の第１の位置用画像を表示するステップと、
前記コンピュータに含まれる表示部内の顔認識領域における前記第１の位置用画像に基づいて、前記第１の顔を撮影して、前記第１の人物の特徴を示す第１の特徴情報を取得するステップと、
前記表示部の中心部である基準部と、前記表示部に表示された前記第１の顔のうちの有効顔領域の中心部である第１中心と、の第１のずれを検出するステップと、
前記第１のずれに基づいて、顔認識装置の動きに関する装置動き信号を生成するステップと、
前記装置動き信号を出力するステップと
を実行させるためのプログラム。
コンピュータに、
第１の人物の第１の顔を撮影して第１の位置用画像を取得するステップと、
撮影された第１の顔の第１の位置用画像を表示するステップと、
前記コンピュータに含まれる表示部内の顔認識領域における前記第１の位置用画像に基づいて、前記第１の顔を撮影して、前記第１の人物の特徴を示す第１の特徴情報を取得するステップと、
前記表示部の中心部である基準部と、前記表示部に表示された前記第１の顔のうちの有効顔領域の中心部である第１中心と、の第１のずれを検出するステップと、
前記第１のずれに基づいて、顔認識装置の動きに関する装置動き信号を生成するステップと、
前記装置動き信号を出力するステップと
を実行させるためのプログラム。
【符号の説明】
【0144】
１０…顔認識装置、１１…第１カメラ、１２…第２カメラ、１３…表示部、１４…検出部、１５…信号生成部、１６…信号出力部、１７…通知部
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【手続補正書】
【提出日】2024-07-10
【手続補正1】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項1】
第１の人物の第１の顔を撮影して第１の位置用画像を取得するように構成される第１カメラと、
前記撮影された第１の顔の第１の位置用画像を表示するように構成される表示部と、 前記表示部内の顔認識領域における前記第１の位置用画像に基づいて、前記第１の顔を撮影して、前記第１の人物の特徴を示す第１の特徴情報を取得するように構成される第２カメラと、
前記表示部の中心部である基準部と、前記表示部に表示された前記第１の顔のうちの有効顔領域の中心部である第１中心と、の第１のずれを検出するように構成される検出部と、
前記第１のずれに基づいて、顔認識装置の動きに関する装置動き信号を生成するように構成される信号生成部と、
前記装置動き信号を出力するように構成される信号出力部と
を備える顔認識装置。
前記撮影された第１の顔の第１の位置用画像を表示するように構成される表示部と、 前記表示部内の顔認識領域における前記第１の位置用画像に基づいて、前記第１の顔を撮影して、前記第１の人物の特徴を示す第１の特徴情報を取得するように構成される第２カメラと、
前記表示部の中心部である基準部と、前記表示部に表示された前記第１の顔のうちの有効顔領域の中心部である第１中心と、の第１のずれを検出するように構成される検出部と、
前記第１のずれに基づいて、顔認識装置の動きに関する装置動き信号を生成するように構成される信号生成部と、
前記装置動き信号を出力するように構成される信号出力部と
を備える顔認識装置。
【請求項2】
前記装置動き信号は、前記顔認識装置の移動量と、移動方向と、動く角度との少なくとも１つを含む
請求項１に記載の顔認識装置。
請求項１に記載の顔認識装置。
【請求項3】
通知部をさらに備え、
前記検出部は、前記顔認識領域と、前記有効顔領域との重なりを検出するようにさらに構成され、
前記重なりに基づいて、前後方向と、水平方向と、高さ方向との少なくとも１つへの前記第１の人物の動きを促す人物動き信号を前記信号生成部は生成するように構成され、 前記通知部は、前記人物動き信号を通知するように構成される
請求項１に記載の顔認識装置。
前記検出部は、前記顔認識領域と、前記有効顔領域との重なりを検出するようにさらに構成され、
前記重なりに基づいて、前後方向と、水平方向と、高さ方向との少なくとも１つへの前記第１の人物の動きを促す人物動き信号を前記信号生成部は生成するように構成され、 前記通知部は、前記人物動き信号を通知するように構成される
請求項１に記載の顔認識装置。
【請求項4】
前記検出部は、前記顔認識領域と、前記有効顔領域との重なりを検出するようにさらに構成され、
前記第１カメラは、前記重なりに基づいて、前記第１カメラが備えるレンズの焦点距離を変化させるように構成される
請求項１に記載の顔認識装置。
前記第１カメラは、前記重なりに基づいて、前記第１カメラが備えるレンズの焦点距離を変化させるように構成される
請求項１に記載の顔認識装置。
【請求項5】
前記検出部は、前記顔認識領域と、前記有効顔領域との重なりを検出するようにさらに構成され、
前記表示部は、前記重なりに基づいて、前記第１の位置用画像を拡大又は縮小させるように構成される
請求項１に記載の顔認識装置。
前記表示部は、前記重なりに基づいて、前記第１の位置用画像を拡大又は縮小させるように構成される
請求項１に記載の顔認識装置。
【請求項6】
前記第２カメラは、赤外線センサを備えるサーマルカメラである
請求項１に記載の顔認識装置。
請求項１に記載の顔認識装置。
【請求項7】
前記第１カメラは、前記第１の人物と異なる１又は複数の第２の人物それぞれの１又は複数の第２の顔を撮影して第２の位置用画像を取得するようにさらに構成され、
前記表示部は、前記撮影された１又は複数の第２の顔それぞれの１又は複数の第２の位置用画像を表示するようにさらに構成され、
前記検出部は、前記基準部と、前記表示部に表示された前記１又は複数の第２の顔のうちの有効顔領域それぞれの中心部である１又は複数の第２中心と、の１又は複数の第２のずれを検出するようにさらに構成され、
前記信号生成部は、前記第１のずれが前記１又は複数の第２のずれのいずれより小さい場合、前記第１の人物についての前記装置動き信号を生成するように構成される
請求項１に記載の顔認識装置。
前記表示部は、前記撮影された１又は複数の第２の顔それぞれの１又は複数の第２の位置用画像を表示するようにさらに構成され、
前記検出部は、前記基準部と、前記表示部に表示された前記１又は複数の第２の顔のうちの有効顔領域それぞれの中心部である１又は複数の第２中心と、の１又は複数の第２のずれを検出するようにさらに構成され、
前記信号生成部は、前記第１のずれが前記１又は複数の第２のずれのいずれより小さい場合、前記第１の人物についての前記装置動き信号を生成するように構成される
請求項１に記載の顔認識装置。
【請求項8】
請求項１から７のいずれか一項に記載の顔認識装置が移動可能に接続された支持部を備える
顔認識システム。
顔認識システム。
【請求項9】
顔認識装置によって実行される顔認識の方法であって、
第１の人物の第１の顔を撮影して第１の位置用画像を取得するステップと、
前記撮影された第１の顔の第１の位置用画像を表示するステップと、
前記顔認識装置に含まれる表示部内の顔認識領域における前記第１の位置用画像に基づいて、前記第１の顔を撮影して、前記第１の人物の特徴を示す第１の特徴情報を取得するステップと、
前記表示部の中心部である基準部と、前記表示部に表示された前記第１の顔のうちの有効顔領域の中心部である第１中心と、の第１のずれを検出するステップと、
前記第１のずれに基づいて、顔認識装置の動きに関する装置動き信号を生成するステップと、
前記装置動き信号を出力するステップと、を含む
方法。
第１の人物の第１の顔を撮影して第１の位置用画像を取得するステップと、
前記撮影された第１の顔の第１の位置用画像を表示するステップと、
前記顔認識装置に含まれる表示部内の顔認識領域における前記第１の位置用画像に基づいて、前記第１の顔を撮影して、前記第１の人物の特徴を示す第１の特徴情報を取得するステップと、
前記表示部の中心部である基準部と、前記表示部に表示された前記第１の顔のうちの有効顔領域の中心部である第１中心と、の第１のずれを検出するステップと、
前記第１のずれに基づいて、顔認識装置の動きに関する装置動き信号を生成するステップと、
前記装置動き信号を出力するステップと、を含む
方法。
【請求項10】
コンピュータに、
第１の人物の第１の顔を撮影して第１の位置用画像を取得するステップと、
撮影された第１の顔の第１の位置用画像を表示するステップと、
前記コンピュータに含まれる表示部内の顔認識領域における前記第１の位置用画像に基づいて、前記第１の顔を撮影して、前記第１の人物の特徴を示す第１の特徴情報を取得するステップと、
前記表示部の中心部である基準部と、前記表示部に表示された前記第１の顔のうちの有効顔領域の中心部である第１中心と、の第１のずれを検出するステップと、
前記第１のずれに基づいて、顔認識装置の動きに関する装置動き信号を生成するステップと、
前記装置動き信号を出力するステップと
を実行させるためのプログラム。
第１の人物の第１の顔を撮影して第１の位置用画像を取得するステップと、
撮影された第１の顔の第１の位置用画像を表示するステップと、
前記コンピュータに含まれる表示部内の顔認識領域における前記第１の位置用画像に基づいて、前記第１の顔を撮影して、前記第１の人物の特徴を示す第１の特徴情報を取得するステップと、
前記表示部の中心部である基準部と、前記表示部に表示された前記第１の顔のうちの有効顔領域の中心部である第１中心と、の第１のずれを検出するステップと、
前記第１のずれに基づいて、顔認識装置の動きに関する装置動き信号を生成するステップと、
前記装置動き信号を出力するステップと
を実行させるためのプログラム。