特許 7415318 画像処理装置、画像処理方法及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-01-09

(45)【発行日】2024-01-17

(54)【発明の名称】画像処理装置、画像処理方法及びプログラム

(51)【国際特許分類】

   A61B 5/0245 20060101AFI20240110BHJP

   A61B 5/02 20060101ALI20240110BHJP

   A61B 5/026 20060101ALI20240110BHJP

【ＦＩ】

A61B5/0245 100B

A61B5/02 310H

A61B5/026 120

【請求項の数】 20

(21)【出願番号】P 2018200206

(22)【出願日】2018-10-24

(65)【公開番号】P2019111317

(43)【公開日】2019-07-11

【審査請求日】2021-10-07

(31)【優先権主張番号】P 2017246941

(32)【優先日】2017-12-22

(33)【優先権主張国・地域又は機関】JP

(73)【特許権者】

【識別番号】000001443

【氏名又は名称】カシオ計算機株式会社

(74)【代理人】

【識別番号】100106002

【弁理士】

【氏名又は名称】正林 真之

(74)【代理人】

【識別番号】100120891

【弁理士】

【氏名又は名称】林 一好

(74)【代理人】

【識別番号】100126000

【弁理士】

【氏名又は名称】岩池 満

(72)【発明者】

【氏名】大塚 利彦

(72)【発明者】

【氏名】冨田 高弘

【審査官】▲高▼ 芳徳

(56)【参考文献】

【文献】米国特許出願公開第２０１７／０２３８８０５（ＵＳ，Ａ１）

【文献】特開２０１０－２６４０９５（ＪＰ，Ａ）

【文献】特開２０１６－０７７４２６（ＪＰ，Ａ）

【文献】国際公開第２０１７／０８５８９６（ＷＯ，Ａ１）

【文献】国際公開第２０１７／１５０１６９（ＷＯ，Ａ１）

【文献】特開２０１４－２３６８７７（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ａ６１Ｂ ５／００ － ５／０３

Ａ６１Ｂ ５／０６ － ５／２２

(57)【特許請求の範囲】

【請求項1】

撮像手段により撮像された被写体を含む画像から当該被写体の複数の異なる部位画像領域を検出し、
検出された前記被写体の複数の異なる部位画像領域夫々についての生体情報の検出の容易度を取得し、
取得された容易度に基づいて、前記複数の異なる部位画像領域から、前記被写体の生体情報の取得を行う部位画像領域を選択し、
部位画像領域の選択後に前記被写体の複数の異なる部位画像領域夫々についての生体情報の検出の容易度の変化の有無を判定し、
判定された前記生体情報の検出の容易度の変化の有無に基づいて、前記複数の部位画像領域において、前記被写体の生体情報の取得を行う部位画像領域を変更し、
前記容易度が高いほど短い測定時間で、前記容易度が低いほど長い測定時間で前記生体情報を取得する、
処理部を備えることを特徴とする画像処理装置。

【請求項2】

前記処理部は、
前記被写体の複数の部位画像領域夫々についての生体情報の検出の容易度のレベルを判定し、
前記容易度のレベルが所定値以上である部位画像領域を選択する、
ことを特徴とする請求項１に記載の画像処理装置。

【請求項3】

前記処理部は、
判定された前記生体情報の検出の容易度に基づいて、前記被写体の複数の部位画像領域から所定の部位画像領域を選択し、
前記選択された所定の部位画像領域から前記被写体の生体情報を取得する、
ことを特徴とする請求項１又は２に記載の画像処理装置。

【請求項4】

前記処理部は、
前記被写体の複数の部位画像領域夫々の領域範囲の大きさが大きいほど、前記生体情報の検出の容易度が高いものとして当該容易度を取得する、
ことを特徴とする請求項１乃至３の何れか１項に記載の画像処理装置。

【請求項5】

前記処理部は、
前記被写体の複数の部位画像領域夫々から前記被写体の脈拍を検出し、
前記検出された脈拍に基づいて、前記生体情報の検出の容易度を取得する、
ことを特徴とする請求項１乃至４の何れか１項に記載の画像処理装置。

【請求項6】

前記処理部は、
前記検出した脈拍に基づいて脈拍計測率を算出し、
前記算出された脈拍計測率に基づいて、前記生体情報の検出の容易度を判定する、
ことを特徴とする請求項５に記載の画像処理装置。

【請求項7】

前記処理部は、
前記撮像手段により撮像された前記被写体を含む画像が更新される毎に、前記選択を行う、
ことを特徴とする請求項１乃至６の何れか１項に記載の画像処理装置。

【請求項8】

発光手段を更に備え、
前記処理部は、前記被写体の部位画像領域の生体情報の検出の容易度を判定する場合に、前記生体情報の検出の容易度が高くなるように前記発光手段を制御する、
ことを特徴とする請求項１乃至７の何れか１項に記載の画像処理装置。

【請求項9】

前記処理部は、
選択された部位を報知する、
ことを特徴とする請求項１乃至８の何れか１項に記載の画像処理装置。

【請求項10】

前記処理部は、
選択された部位画像領域の領域範囲に応じて、取得された生体情報を報知する、
ことを特徴とする請求項１乃至９の何れか１項に記載の画像処理装置。

【請求項11】

前記処理部は、
検出された前記被写体の複数の部位画像領域に基づいて特定される前記被写体の被撮像位置に応じて、所定の被撮像位置への案内を報知する、
ことを特徴とする請求項１乃至１０の何れかに記載の画像処理装置。

【請求項12】

前記処理部は、
被写体毎に指定されている複数の部位夫々について、前記所定の部位画像領域の選択を行う、
ことを特徴とする請求項１乃至１１の何れかに記載の画像処理装置。

【請求項13】

前記処理部は、
前記生体情報の検出の容易度が所定基準以上の部位画像領域が複数存在する場合に、何れかの部位画像領域を選択し、選択した部位画像領域における検出の容易度に基づいて、前記被写体の生体情報の取得に関する選択を行なう、
ことを特徴とする請求項１乃至１２の何れか１項に記載の画像処理装置。

【請求項14】

前記処理部は、
前記生体情報の検出の容易度が所定基準以上の部位画像領域が複数存在する場合に、前記複数の部位画像領域をつなぎ合わせ、前記つなぎ合わせた部位画像領域における検出の容易度に基づいて、前記被写体の生体情報の取得に関する選択を行なう、
ことを特徴とする請求項１乃至１２の何れか１項に記載の画像処理装置。

【請求項15】

前記処理部は、前記生体情報の検出の容易度がもっとも高い部位画像領域における検出の容易度に基づいて、前記被写体の生体情報の取得に関する選択を行なう、
ことを特徴とする請求項１乃至１２の何れか１項に記載の画像処理装置。

【請求項16】

撮像手段により撮像された被写体を含む画像から当該被写体の複数の部位画像領域を検出し、
検出された前記被写体の複数の部位画像領域夫々についての生体情報の検出の容易度として、前記被写体の複数の部位画像領域夫々の領域範囲の大きさを判定し、
判定された前記被写体の複数の部位画像領域夫々の領域範囲の大きさに基づいて、前記複数の部位画像領域から、前記被写体の生体情報の取得を行う部位画像領域を選択する、
処理部を備え、
前記処理部は、
被写体の複数の部位画像領域夫々の領域範囲の大きさが大きいほど、生体情報の検出の容易度が高いと判定する、
ことを特徴とする画像処理装置。

【請求項17】

画像処理装置が実行する画像処理方法であって、
撮像手段により撮像された被写体を含む画像から当該被写体の複数の部位画像領域を検出するステップと、
検出された前記被写体の複数の異なる部位画像領域夫々についての生体情報の検出の容易度を取得するステップと、
取得された容易度に基づいて、前記複数の異なる部位画像領域から、前記被写体の生体情報の取得を行う部位画像領域を選択するステップと、
前記部位画像領域の選択後に前記被写体の複数の異なる部位画像領域夫々についての生体情報の検出の容易度の変化の有無を判定するステップと、
前記判定された前記生体情報の検出の容易度の変化の有無に基づいて、前記複数の部位画像領域において、前記被写体の生体情報の取得を行う部位画像領域を変更するステップと、
前記容易度が高いほど短い測定時間で、前記容易度が低いほど長い測定時間で前記生体情報を取得するステップと、
を含むことを特徴とする画像処理方法。

【請求項18】

画像処理装置が実行する画像処理方法であって、
撮像手段により撮像された被写体を含む画像から当該被写体の複数の部位画像領域を検出するステップと、
検出された前記被写体の複数の部位画像領域夫々についての生体情報の検出の容易度として、前記被写体の複数の部位画像領域夫々の領域範囲の大きさを判定するステップと、
判定された前記被写体の複数の部位画像領域夫々の領域範囲の大きさに基づいて、前記複数の部位画像領域から、前記被写体の生体情報の取得を行う部位画像領域を選択するス
テップと、
を含み、
前記領域範囲の大きさを判定するステップは、被写体の複数の部位画像領域夫々の領域範囲の大きさが大きいほど、生体情報の検出の容易度が高いと判定する、
ことを特徴とする画像処理方法。

【請求項19】

コンピュータに、
撮像手段により撮像された被写体を含む画像から当該被写体の複数の部位画像領域を検出する部位検出機能と、
検出された前記被写体の複数の異なる部位画像領域夫々についての生体情報の検出の容易度を取得する機能と、
前記取得された容易度に基づいて、前記複数の異なる部位画像領域から、前記被写体の生体情報の取得を行う部位画像領域を選択する機能と、
前記部位画像領域の選択後に前記被写体の複数の異なる部位画像領域夫々についての生体情報の検出の容易度の変化の有無を判定する機能と、
前記判定された前記生体情報の検出の容易度の変化の有無に基づいて、記複数の部位画像領域において、前記被写体の生体情報の取得を行う部位画像領域を変更する機能と、
前記容易度が高いほど短い測定時間で、前記容易度が低いほど長い測定時間で前記生体情報を取得する機能と、
を実現させることを特徴とするプログラム。

【請求項20】

コンピュータに、
撮像手段により撮像された被写体を含む画像から当該被写体の複数の部位画像領域を検出する機能と、
検出された前記被写体の複数の部位画像領域夫々についての生体情報の検出の容易度として、前記被写体の複数の部位画像領域夫々の領域範囲の大きさを判定する機能と、
判定された前記被写体の複数の部位画像領域夫々の領域範囲の大きさに基づいて、前記複数の部位画像領域から、前記被写体の生体情報の取得を行う部位画像領域を選択する機能と、
を実現させ、
前記領域範囲の大きさを判定する機能は、被写体の複数の部位画像領域夫々の領域範囲の大きさが大きいほど、生体情報の検出の容易度が高いと判定する、
ことを特徴とするプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、画像処理装置、画像処理方法及びプログラムに関する。

【背景技術】

【0002】

近年、ユーザを撮像した画像を解析することにより、ユーザの生体情報を測定する技術が存在する。
例えば特許文献１には、ユーザを撮像した画像から特定の被写体領域として人体の所定の部位を検出して、生体情報の１つである脈波伝搬速度の測定を行うという構成が開示されている。

【先行技術文献】

【特許文献】

【0003】

【文献】国際公開第２０１４／１３６３１０号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、特許文献１に開示の技術等の従来の技術では、撮像状態等によっては、測定精度が低くなってしまう場合があるという問題があった。

【0005】

本発明は、このような状況に鑑みてなされたものであり、より精度高く生体情報を測定することを目的とする。

【課題を解決するための手段】

【0006】

上記目的を達成するため、本発明の一態様の画像処理装置は、
撮像手段により撮像された被写体を含む画像から当該被写体の複数の異なる部位画像領域を検出し、
検出された前記被写体の複数の異なる部位画像領域夫々についての生体情報の検出の容易度を取得し、
取得された容易度に基づいて、前記複数の異なる部位画像領域から、前記被写体の生体情報の取得を行う部位画像領域を選択し、
部位画像領域の選択後に前記被写体の複数の異なる部位画像領域夫々についての生体情報の検出の容易度の変化の有無を判定し、
判定された前記生体情報の検出の容易度の変化の有無に基づいて、前記複数の部位画像領域において、前記被写体の生体情報の取得を行う部位画像領域を変更し、
前記容易度が高いほど短い測定時間で、前記容易度が低いほど長い測定時間で前記生体情報を取得する、
処理部を備えることを特徴とする。

【発明の効果】

【0007】

本発明によれば、より精度高く生体情報を測定することができる。

【図面の簡単な説明】

【0008】

【図1】本発明の一実施形態に係る画像処理システムの構成を示すブロック図である。

【図2】本発明の一実施形態に係る画像処理装置の前面の外観構成を示す構成図である。

【図3】本発明の一実施形態に係る画像処理装置の側面の外観構成を示す構成図である。

【図4】本発明の一実施形態に係る画像処理装置のハードウェアの構成を示すブロック図である。

【図5】本発明の一実施形態に係る画像処理装置の機能的構成のうち、生体情報測定処理を実行するための機能的構成を示す機能ブロック図である。

【図6】本発明の一実施形態に係る画像処理装置が実行する第１の生体情報測定処理の流れを説明するフローチャートである。

【図7】本発明の一実施形態に係る画像処理装置が実行する第２の生体情報測定処理の流れを説明するフローチャート（１／２）である。

【図8】本発明の一実施形態に係る画像処理装置が実行する第２の生体情報測定処理の流れを説明するフローチャート（２／２）である。

【図9】本発明の一実施形態の変形例に係る画像処理装置が実行する第１の生体情報測定処理の流れを説明するフローチャートである。

【発明を実施するための形態】

【0009】

以下、本発明の実施形態について、図面を用いて説明する。
本発明の実施形態に係る画像処理装置１は、ユーザが携帯可能な自立式の鏡として構成される。画像処理装置１は、ユーザの複数の部位画像夫々についての生体情報の取得のしやすさを判定する。また、画像処理装置１は、判定された生体情報の取得のしやすさ（すなわち、検出の容易度）に基づいて、ユーザの複数の部位画像から所定の部位画像を選択する。そして、画像処理装置１は、選択された所定の部位画像からユーザの生体情報を取得する。

【0010】

このような画像処理装置１によれば、生体情報の取得のしやすさという指標に基づいて、生体情報を取得する部位画像を選択することから、より精度高く生体情報を測定することができる。

【0011】

［システム構成］
図１は、本実施形態に係る画像処理装置１が含まれる画像処理システムＳの全体構成を示すブロック図である。図１に示すように、画像処理システムＳは、複数の画像処理装置１、ネットワーク２及びサーバ群３を含む。
画像処理装置１の台数には、特に制限はなく、ｎ台（ｎは、任意の自然数）の画像処理装置１が画像処理システム１に含まれていてよい。なお、以下の説明において、ｎ台の画像処理装置１を特に区別することなく説明する場合には、符号の末尾のアルファベットを省略し、単に「画像処理装置１」と称する。

【0012】

画像処理装置１は、上述したとおり生体情報の取得のしやすさという指標に基づいて、生体情報を取得する部位画像を選択する装置である。画像処理装置１は、ネットワーク２を介して、サーバ群３に含まれる各サーバと、相互に通信可能に接続されている。

【0013】

ネットワーク２は、例えば、インターネットや、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）や、携帯電話網の何れか又はこれらを組み合わせたネットワークにより実現される。

【0014】

サーバ群３には、画像処理装置１と協働する各種のサーバが含まれる。例えば、サーバ群３には、画像処理装置１のユーザを認証するための認証サーバが含まれる。また、例えば、サーバ群３には、画像処理装置１の機能を実現するためのアプリケーションソフトウェアを配信するアプリケーション配信サーバが含まれる。更に、例えば、サーバ群３には、画像処理装置１により測定された生体情報や、ユーザのプロファイル情報を格納する測定データ格納サーバが含まれる。ただし、これは一例に過ぎず、他の機能を有するサーバがサーバ群３に含まれていてもよい。また、サーバ群３に含まれる複数のサーバを、それぞれ別個のサーバ装置で実現してもよく、単一のサーバ装置にて実現するようにしてもよい。

【0015】

［外観構成］
図２は、本発明の一実施形態に係る画像処理装置１の前面の外観構成を示す構成図である。また、図３は、画像処理装置１の側面の外観構成を示す構成図である。画像処理装置１の前面の大きさは、例えば、ＩＳＯ（Ｉｎｔｅｒｎａｔｉｏｎａｌ Ｏｒｇａｎｉｚａｔｉｏｎ ｆｏｒ Ｓｔａｎｄａｒｄｉｚａｔｉｏｎ）２１６で規定されるＡ４サイズに形成される。

【0016】

図２及び図３に示すように、画像処理装置１は、鏡部３０と、脚部３１とを含んで構成される。鏡部３０は、反射面を有した鏡である。
また、脚部３１及びヒンジ部３２は、画像処理装置１を自立させるための機構である。脚部３１は、ヒンジ部３２によって鏡部３０に回動可能に接合される。
図３（Ａ）に示すように、ユーザは、画像処理装置１を携帯する際に、鏡部３０の側面と、脚部３１の側面とを揃えて、嵩張らない形状として持ち運ぶことができる。一方で、図３（Ｂ）に示すように、ユーザは、画像処理装置１を机等に設置して利用する際には、ヒンジ部３２を中心点として脚部３１を回動させることにより、画像処理装置１を自立させることができる。なお、画像処理装置１を自立可能とするために、ヒンジ部３２は、脚部３１が所定の角度を保った状態で保持するための構造を有している。

【0017】

図２に示すように、画像処理装置１は、外観に表れる構成として、更に、発光部１７、入力部１８、及び表示部１９を備えている。

【0018】

発光部１７は、鏡部３０に正対するユーザを照らすために発光する部分である。発光部１７が、ユーザを照らすことにより、画像処理装置１は、照明付きの鏡（「女優ミラー」と呼ばれる場合もある。）として機能する。また、発光部１７は、後述の生体情報測定処理において、生体情報を取得するために調光される。
発光部１７は、鏡部３０の上端に複数箇所配置される。ただし、図示の都合上、図２では、１つの発光部１７についてのみ符号を付し、他の発光部１７については符号を省略する。

【0019】

入力部１８は、ユーザによる操作入力を受け付ける部分である。入力部１８は、例えば複数のボタンにより実現される。図中では、一例として、小顔エステ、笑顔トレーニング、及び生体情報の記録等の各種のモードへの切り換えボタンや、画像処理装置１の電源のオン／オフの切り替えを行うためのボタンを図示する。

【0020】

表示部１９は、各種の情報を表示することにより、これら各種の情報をユーザに対して報知する部分である。表示部１９は、例えば、文字等のメッセージや、画像等を表示する。画像処理装置１では、鏡部３０を構成する反射部の反射面と、表示部１９の表示面とが、ユーザから同時に視認可能に、鏡部３０に正対するユーザの視認方向に重畳して配置される。

【0021】

例えば、液晶ディスプレイにより構成された表示部１９が、ハーフミラーにより構成された鏡部３０の視認方向における奥側に、並行に重ねて配置される。
このような配置により、ユーザは鏡部３０により反射された自身の顔と、表示部１９に表示された情報とを同時に視認することができる。なお、図２の例では、画面上部に表示部１９の表示領域を設け、画面下部に鏡部３０の反射領域を設けている。

【0022】

なお、図２には図示していないが、画像処理装置１は、更に撮像部１６を備える。撮像部１６は、画像処理装置１の利用時に、鏡部３０に正対するユーザを被写体として撮像する部分である。撮像部１６は、鏡部３０に正対するユーザの顔画像を撮像可能な位置に配置される。例えば、表示部１９と同様に、ハーフミラーにより構成された鏡部３０の視認方向における奥側に、表示部１９と並行に重ねて配置される。

【0023】

以上、画像処理装置１の外観構造について説明をした。ただし、この構造は一例に過ぎず、画像処理装置１の外観構造は、この例に限定されない。

【0024】

また、例えば、発光部１７が、鏡部３０の上部や下部に配置されてもよく、鏡部３０の周辺全体に配置されてもよい。更に、例えば、入力部１８の数や配置が変更されてもよい。また、例えば、表示部１９の一部がタッチパネルとして構成され、入力部１８と表示部１９とが一体に構成されてもよい。

【0025】

更に、例えば、表示部１９により実現される表示領域は、画面上部に配置してもよいが、他の位置に配置してもよい。例えば、鏡部３０の中央部分にユーザの顔が映し出されることを想定し、その中央部分の周辺に表示領域を配置するようにしてもよい。

【0026】

更に、例えば、画像処理装置１の前面の一部に鏡部３０を配置し、前面の他の一部に表示部１９を配置するようにしてもよい。つまり、鏡部３０と表示部１９とを必ずしも重畳して配置させなくてもよい。

【0027】

更に、例えば、ハーフミラーにより鏡部３０を構成し、一般的な液晶ディスプレイにより表示部１９を構成するのではなく、一般的な鏡により鏡部３０を構成し、透過型の液晶ディスプレイにより表示部１９を構成するようにしてもよい。この場合、一般的な鏡により構成された鏡部３０が、透過型の液晶ディスプレイにより構成された表示部１９の視認方向における奥側に、並行に重ねて配置されるようにするとよい。

【0028】

［ハードウェア構成］
図４は、画像処理装置１のハードウェアの構成を示すブロック図である。
図４に示すように、画像処理装置１は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１１と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１３と、バス１４と、入出力インターフェース１５と、撮像部１６と、発光部１７と、入力部１８と、表示部１９と、記憶部２０と、通信部２１と、ドライブ２２と、を備えている。

【0029】

ＣＰＵ１１は、ＲＯＭ１２に記録されているプログラム、または、記憶部２０からＲＡＭ１３にロードされたプログラムに従って各種の処理を実行する。

【0030】

ＲＡＭ１３には、ＣＰＵ１１が各種の処理を実行する上において必要なデータ等も適宜記憶される。

【0031】

ＣＰＵ１１、ＲＯＭ１２及びＲＡＭ１３は、バス１４を介して相互に接続されている。このバス１４にはまた、入出力インターフェース１５も接続されている。入出力インターフェース１５には、撮像部１６と、発光部１７と、入力部１８と、表示部１９と、記憶部２０と、及びドライブ２２が接続されている。

【0032】

撮像部１６は、図示はしないが、光学レンズ部と、イメージセンサと、を備えている。

【0033】

光学レンズ部は、被写体を撮影するために、光を集光するレンズ、例えばフォーカスレンズやズームレンズ等で構成される。
フォーカスレンズは、イメージセンサの受光面に被写体像を結像させるレンズである。ズームレンズは、焦点距離を一定の範囲で自在に変化させるレンズである。
撮像部１６にはまた、必要に応じて、焦点、露出、ホワイトバランス等の設定パラメータを調整する周辺回路が設けられる。

【0034】

イメージセンサは、光電変換素子や、ＡＦＥ（Ａｎａｌｏｇ Ｆｒｏｎｔ Ｅｎｄ）等から構成される。
光電変換素子は、例えばＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）型の光電変換素子等から構成される。光電変換素子には、光学レンズ部から被写体像が入射される。そこで、光電変換素子は、被写体像を光電変換（撮像）して画像信号を一定時間蓄積し、蓄積した画像信号をアナログ信号としてＡＦＥに順次供給する。
ＡＦＥは、このアナログの画像信号に対して、Ａ／Ｄ（Ａｎａｌｏｇ／Ｄｉｇｉｔａｌ）変換処理等の各種信号処理を実行する。各種信号処理によって、ディジタル信号が生成され、撮像部１６の出力信号として出力される。
このような撮像部１６の出力信号は、ＣＰＵ１１等に適宜供給される。

【0035】

発光部１７は、ＲＧＢカラーモデルにおける各色に対応するＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）等の発光体と、発光体を制御する制御回路とから構成される。制御回路は、発光体を制御することにより、照度や、ＲＧＢカラーモデルに基づいて発光体の発光における色成分を調整する。発光部１７は、画像処理装置１の起動と共に、ＲＧＢの色成分を所定の状態に調整して発光することにより、ユーザを照らす。この所定の状態とは、鏡部３０に映し出されたユーザの顔が自然に見える状態である。また、発光部１７は、ＣＰＵ１１からの指示に基づいて、生体情報が測定しやすくなるように、照度や色成分を調整して発光する。

【0036】

入力部１８は、各種ボタンやマイク等で構成され、ユーザの指示操作や指示音声に応じて各種情報を入力する。

【0037】

表示部１９は、液晶ディスプレイ等で構成され、ＣＰＵ１１が出力する画像データに対応する画像を表示する。鏡部３０は、ハーフミラーで構成され、例えば、ユーザの顔が映し出される。表示部１９と、鏡部３０の配置については、図２を参照して上述した通りである。

【0038】

記憶部２０は、ＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等の半導体メモリで構成され、各種データを記憶する。

【0039】

通信部２１は、ＣＰＵ１１が、ネットワーク２を介して他の装置（例えば、サーバ群３に含まれる各サーバ）との間で通信を行うための通信制御を行う。

【0040】

ドライブ２２は、リムーバブルメディア１００は装着可能なインターフェースにより構成される。ドライブ２２には、磁気ディスク、光ディスク、光磁気ディスク、あるいは半導体メモリ等よりなる、リムーバブルメディア１００が適宜装着される。リムーバブルメディア１００には、後述の生体情報測定処理を実行するためのプログラムや、画像データ等の各種データが格納される。ドライブ２２によってリムーバブルメディア１００から読み出されたプログラムや、画像データ等の各種のデータは、必要に応じて記憶部２０にインストールされる。

【0041】

なお、画像処理装置１は、上述したハードウェアに加えて、他のハードウェアを更に備えていてもよい。例えば、画像処理装置１は、ランプやスピーカあるいは振動用モータ等で構成され、光や音声あるいはバイブレーション信号を出力する出力部を備えていてもよい。

【0042】

［機能的構成］
図５は、画像処理装置１の機能的構成のうち、生体情報測定処理を実行するための機能的構成を示す機能ブロック図である。
生体情報測定処理とは、画像処理装置１が、ユーザを被写体とした画像を撮像し、撮像した画像からユーザの生体情報を取得する一連の処理である。
生体情報測定処理が実行される場合、図５に示すように、ＣＰＵ１１において、設定制御部１１１と、画像解析部１１２と、判定選択部１１３と、生体情報測定部１１４と、報知部１１５とが機能する。
また、記憶部２０の一領域には、測定データ記憶部２０１が設定される。

【0043】

測定データ記憶部２０１には、生体情報測定処理に関する各種のデータが格納される。例えば、測定データ記憶部２０１には、生体情報測定処理において測定された生体情報や、生体情報測定処理の処理対象としたユーザに関して設定された測定領域等のプロファイル情報が格納される。

【0044】

なお、測定データ記憶部２０１に格納される各情報は、記憶部２０にのみ格納されていてもよいが、ドライブ２２によってリムーバブルメディア１００に適宜格納されるようにしてもよい。更に、測定データ記憶部２０１に格納される各情報は、サーバ群３に含まれる測定データに適宜格納されるようにしてもよい。

【0045】

設定制御部１１１は、生体情報測定処理に関する設定等の制御を行う部分である。設定制御部１１１は、例えば、サーバ群３に含まれるアプリケーション配信サーバから、生体情報測定処理を行うためのアプリケーションソフトウェアを取得して、このアプリケーションソフトウェアを動作させる。また、設定制御部１１１は、例えば、サーバ群３に含まれる認証サーバと通信を行うことにより、生体情報測定処理を行うユーザを認証する。更に設定制御部１１１は、例えば、サーバ群３に含まれる測定データ格納サーバと通信を行うことにより、生体情報測定処理において測定された生体情報や、生体情報測定処理の処理対象としたユーザに関して設定された測定領域等のプロファイル情報を更新する。

【0046】

画像解析部１１２は、撮像部１６が撮像した、被写体としてユーザを含む画像を解析して、画像に含まれるユーザの複数の部位画像を検出する。例えば、画像解析部１１２は、ユーザの顔を含む顔画像に対して、輪郭や部位のパターンマッチングや肌色識別等のフェイストラッキングに関する処理を行うことで、顔の輪郭や眼の位置や肌の領域を認識し、額、頬、顎、及び首等の測定領域の検出を行う。また、画像解析部１１２は、検出した測定領域を判定選択部１１３に対して通知する。
なお、この画像解析部１１２により検出された測定領域は、非接触で生体情報を取得するための関心領域（ＲＯＩ：Ｒｅｇｉｏｎ ｏｆ ｉｎｔｅｒｅｓｔ）に相当する。

【0047】

判定選択部１１３は、画像解析部１１２が検出した測定領域に対して、生体情報の取得のしやすさに関する分類を行う。例えば、判定選択部１１３は、生体情報の取得のしやすさに応じて、測定領域それぞれにレベル付けを行う。

【0048】

レベル付けは任意の方法で行うことができる。例えば、測定領域が大きいほど、安定した測定領域であると考えられるので、判定選択部１１３は、測定領域が大きくなるにつれて高いレベルとなるようにレベル付け行う。

【0049】

あるいは、生体情報測定部１１４による計測結果に基づいてレベル付けを行う。例えば、生体情報測定部１１４が検出した脈波に基づいて算出される脈波検出率（脈波の検出に成功する確率）に基づいてレベル付けを行う。この場合、生体情報測定部１１４が脈波の検出に成功する確率である脈波検出率が高いほど、安定した測定領域であると考えられるので、判定選択部１１３は、脈拍計測率が高くなるにつれて高いレベルとなるようにレベル付け行う。

【0050】

また、判定選択部１１３は、生体情報の測定のしやすさが高くなるように、発光部１７を制御して照度や色成分を調整するようにしてもよい。

【0051】

このようにしてレベル付けを行った判定選択部１１３は、画像解析部１１２に検出された複数の測定領域の中で、レベルの高い領域を選択し、選択した測定領域を生体情報測定部１１４に対して通知する。

【0052】

生体情報測定部１１４は、判定選択部１１３から通知された測定領域の画像を対象として、実際にユーザに触れることなく、ユーザに対しては非接触で生体情報（バイタルデータと呼ばれることもある。）の計測を行う。計測は、例えば、測定領域における皮下の血液中ヘモグロビンが吸収する緑色信号に基づいて、心拍周波数近傍の成分を分析することにより行うことができる。生体情報測定部１１４が計測する生体情報は、例えば、脈拍、脈波、及び血流等である。

【0053】

また、生体情報測定部１１４は、１つの測定領域の画像を対象として計測を行ってもよいが、複数の測定領域の画像を対象として計測を行ってもよい。この場合、判定選択部１１３がレベルの高い測定領域を複数選択する。そして、生体情報測定部１１４が、この複数の測定領域を対象として測定を行う。この場合、生体情報測定部１１４は、脈拍の遅延がわかる離れた２点（例えば頬と額、又は、額か頬と手のひら等）の測定領域を対象として測定を行なうことにより、例えば、脈波伝播速度や、脈波伝播速度と相関する血圧変動を測定することができる。
また、生体情報測定部１１４は、測定した生体情報に対してノイズ除去等を行うことにより、平均化処理を施すようにしてもよい。

【0054】

なお、生体情報測定部１１４による生体情報の測定は、例えば、下記の参考文献に記載の技術を利用することにより行うことができる。
＜参考文献＞
東北大学 サイバーサイエンスセンター 先端情報技術研究部、東北大学 革新的イノベーション研究機構、“血行状態モニタリング装置「魔法の鏡」の開発に成功”、［online］、平成２８年９月２７日、［平成２９年１２月１５日検索］、インターネット＜URL：http://www.tohoku.ac.jp/japanese/newimg/pressimg/tohokuuniv-press20160927_01web.pdf＞

【0055】

生体情報測定部１１４は、測定した生体情報を報知部１１５や、設定制御部１１１に対して通知する。

【0056】

報知部１１５は、生体情報測定部１１４が測定した生体情報に基づいて、グラフ、数値、及びアイコン等の生体情報を報知するための画像を生成する。そして、報知部１１５は、生成した画像を表示部１９に対して表示することにより報知を行う。この場合に、報知部１１５は、鏡部３０上のユーザの顔の映っている位置を考慮して報知を行うようにするとよい。鏡部３０上のユーザの顔の映っている位置は、鏡部３０上の反射位置と表示部１９上の表示位置の対応関係と、画像解析部１１２がフェイストラッキングにより特定したユーザの顔の輪郭位置と、に基づいて、特定することができる。

【0057】

そして、報知部１１５は、例えば、ユーザの顔が映っている位置と重複しない領域に（すなわち、ユーザの顔と被らない領域に）、生体情報を報知するための波形データや必要な文字、画像情報を自動配置し表示するようにするとよい。報知部１１５が、このような情報をリアルタイムにデザインし直して表示することで、健康状態や予防指導の情報等が見やすく伝えことができる。

【0058】

あるいは、報知部１１５は、例えば、ユーザの顔が映っている位置に重ねて情報を表示するようにしてもよい。例えば、生体情報を取得しやすくするために、ユーザの顔が鏡部３０に正対するように、矢印や吹き出しを使って案内情報を表示するようにしてもよい。例えば、測定領域を安定に保つためフェイストラッキングの輪郭データから顔の位置(上下左右の向き)を正面(輪郭領域が最大になる位置)になるようにガイド（矢印やＣＧ（Ｃｏｍｐｕｔｅｒ ｇｒａｐｈｉｃｓ）による合成など）を表示することでユーザに明示的にフィードバックを行うと、継続して安定した測定領域を確保することができる。

【0059】

また、報知部１１５は、これらの表示を組み合わせるようにしてもよい。例えば、報知部１１５は、図２に示すように、マッサージの内容を示すテキストはユーザの顔が映っている位置と重複しない領域に表示し、マッサージの際の手の動きを示す矢印はユーザの顔が映っている位置に重ねて情報を表示するようにしてもよい。

【0060】

更に、報知部１１５は、表示部１９への表示以外の方法にて報知を行うようにしてもよい。例えば、報知部１１５は、図示を省略したスピーカから音声メッセージ等を出力させることによって報知を行うようにしてもよい。

【0061】

［動作］
次に、画像処理装置１の動作を説明する。ここで、画像処理装置１は、第１の生体情報測定処理と、第２の生体情報測定処理とを行う。
第１の生体情報測定処理は、検出された全ての測定領域に対してレベル付けを行い、レベルが高いと判定された測定領域を対象として生体情報を測定する処理である。すなわち、第１の生体情報測定処理は、処理の都度、レベルの高い場所を選択して測定を行う処理である。

【0062】

これに対して、第２の生体情報測定処理は、検出された全ての測定領域に対してレベル付けを行い、レベルが高いと判定された測定領域をユーザそれぞれについて紐付けておく。そして、その後は、紐付けてある測定領域を対象として生体情報を測定する処理である。すなわち、第２の生体情報測定処理は、ユーザ毎に設定された場所を選択して測定を行う処理である。

【0063】

以下では、まず、図６を参照して第１の生体情報測定処理について説明をする。次に、図７及び図８を参照して第２の生体情報測定処理について説明をする。なお、各生体情報測定処理は、画像処理装置１の起動や、ユーザの開始操作と共に開始される。ユーザの開始操作とは、例えば、ユーザによる生体情報測定処理の開始指示操作、もしくは、ユーザによる、小顔エステ、笑顔トレーニング、及び生体情報の記録等の各種のモードへの切り換え指示操作である。
この場合に、何れの生体情報測定処理を行うのかは、設定制御部１１１による設定や、ユーザの選択操作に応じて決定される。

【0064】

［第１の生体情報測定処理］
図６は、画像処理装置１が実行する第１の生体情報測定処理の流れを説明するフローチャートである。

【0065】

ステップＳ１１において、設定制御部１１１は、初期設定を行う。例えば、設定制御部１１１は、サーバ群３に含まれるアプリケーション配信サーバから、生体情報測定処理を行うためのアプリケーションソフトウェアを取得して、このアプリケーションソフトウェアを動作させる。また、設定制御部１１１は、アプリケーションソフトウェアの動作に伴い、撮像部１６や発光部１７の設定を行う、そして、設定制御部１１１は、撮像部１６による撮像を開始させると共に、発光部１７の発光を開始させる。

【0066】

ステップＳ１２において、画像解析部１１２は、フェイストラッキングを行うことにより、測定領域を検出する。具体的には、画像解析部１１２は、鏡部３０の前に正対したユーザを検出し、画像解析を行うことにより、測定領域を更に検出する。測定領域は、例えば、額、頬、顎、及び首等に対応する領域である。

【0067】

ステップＳ１３において、画像解析部１１２は、測定領域が検出できたか否かを判定する。測定領域が検出できた場合には、ステップＳ１３においてＹｅｓと判定され処理はステップＳ１４に進む。一方で、ユーザの顔の向きが適切でない等の理由で測定領域が検出できない場合には、ステップＳ１３においてＮｏと判定され、処理は再度ステップＳ１２に戻る。なお、ステップＳ１３において、画像解析部１１２は、測定領域が１つでも検出できたことを条件としてＹｅｓと判定してもよいが、測定領域が所定の数だけ検出できたことを条件としてＹｅｓと判定してもよい。

【0068】

ステップＳ１４において、判定選択部１１３は、生体情報の測定のしやすさが高くなるように、発光部１７を制御して照度や色成分を調整する。なお、この場合に、判定選択部１１３は、発光部１７に加えて表示部１９のバックライトを制御して照度や色成分を調整するようにしてもよい。更に、判定選択部１１３は、通信部２１を介した通信により、発光部１７に加えて画像処理装置１以外の装置が備える照明器具を制御して照度や色成分を調整するようにしてもよい。これにより、環境に合わせて安定した測定ができるようになる。

【0069】

ステップＳ１５において、判定選択部１１３は、ステップＳ１２において検出された測定領域それぞれに対してレベル付けを行う。レベル付けの方法は、上述したように、例えば、測定領域それぞれの大きさや、測定領域それぞれの脈波検出率に応じて行う。なお、脈波検出率に基づいてレベル付けを行う場合には、生体情報測定部１１４が、検出した測定領域それぞれに対して測定を行い、検出した測定領域それぞれについて脈波検出率を算出する。

【0070】

ステップＳ１６において、判定選択部１１３は、ステップＳ１５において行ったレベル付けにおいて、高レベルの測定領域（すなわち、所定レベル以上のレベルが付けられた測定領域）が検出されたか否かを判定する。

【0071】

高レベルの測定領域が検出された場合は、ステップＳ１６においてＹｅｓと判定され、処理はステップＳ１７に進む。一方で、高レベルの測定領域が検出されない場合は、ステップＳ１６においてＮｏと判定され、処理は再度ステップＳ１４に戻る。

【0072】

ステップＳ１７において、生体情報測定部１１４は、高レベルの測定領域から生体情報を測定する。この測定は、上述したように、測定領域の画像に基づいて行われるものであり、ユーザに対しては非接触に行われる。

【0073】

ステップＳ１８において、判定選択部１１３は、ステップＳ１７において実際に生体情報を測定する対象とした測定領域に対して、再度レベル付けを行う。そして、この測定領域のレベルが高レベルのままであるか否かを判定する。この測定領域のレベルが高レベルのままである場合には、ステップＳ１８においてＹｅｓと判定され、処理はステップＳ１９に進む。

【0074】

一方で、この測定領域のレベルが変更しており、高レベルでなくなっている場合には、ステップＳ１８においてＮｏと判定され、処理は再度ステップＳ１４に戻る。例えば、ステップＳ１７における生体情報の測定に、数秒～数十秒を要すると、測定中にユーザが顔の向き等を変える場合がある。この場合、測定領域が適切に撮像できなくなり、測定領域のレベルが低レベルとなることがあり得る。この場合に、ステップＳ１８においてＮｏと判定される。

【0075】

ステップＳ１８の処理において、生体情報を測定後に再度レベルを確認することにより、本実施形態では、高レベルの測定領域のみを対象として（すなわち、精度良く測定できる測定領域のみを対象として）測定された生体情報のみを取得することができる。なお、この再度のレベル付けは、生体情報の測定終了以外の条件に基づいて行われてもよい。例えば、ステップＳ１５にて前回行ったレベル付けから、所定時間（例えば、３０分）が経過したことを条件として、この再度のレベル付けを行なうようにしてもよい。すなわち、定期的に、この再度のレベル付けを行なうようにしてもよい。他にも、例えば、ユーザによる操作指示を受け付けたことを条件として、この再度のレベル付けを行なうようにしてもよい。

【0076】

ステップＳ１９において、報知部１１５は、ステップＳ１７において測定された生体情報を、表示部１９への表示等の方法で報知する。

【0077】

ステップＳ２０において、設定制御部１１１は、ステップＳ１７において測定された生体情報を、記憶部２０の測定データ記憶部２０１や、サーバ群３に含まれる測定データ格納サーバ等に保存する。この保存された測定データを、測定対象としたユーザと紐付けておくことで、ユーザの生体情報の履歴を生成することができる。この履歴は、例えば、ユーザの生体情報の推移の分析等の目的に利用することができる。また、保存された測定データを、測定対象としたユーザと紐付けない場合においても、いわゆるビックデータとして統計の分析等に利用することができる。

【0078】

なお、上述の説明では、便宜上ステップＳ１９の後に、ステップＳ２０を行うと説明しているが、ステップＳ２０を行ってからステップＳ１９を行ってもよく、ステップＳ１９とステップＳ２０を並行して行ってもよい。

【0079】

ステップＳ２１において、設定制御部１１１は、第１の生体情報測定処理を終了するか否かを判定する。設定制御部１１１は、例えば、生体情報が所定の回数だけ測定できたことや、ユーザから処理の終了操作を受け付けたことや、第１の生体情報測定処理を開始してから所定時間が経過したことを第１の生体情報測定処理を終了する条件として、判定を行う。

【0080】

このような第１の生体情報測定処理を終了する条件が満たされていない場合は、ステップＳ２１においてＮｏと判定され、処理は再度ステップＳ１７に戻る。一方で、このような第１の生体情報測定処理を終了する条件が満たされた場合は、ステップＳ２１においてＹｅｓと判定され、今回の第１の生体情報測定処理は終了する。
なお、次回以降に行われる第１の生体情報測定処理では、ステップＳ１１におけるアプリケーションの取得等の処理を省略するようにしてもよい。

【0081】

以上説明した第１の生体情報測定処理では、検出された測定領域の中からレベルの高い測定領域を選択し、選択した測定領域を対象として生体情報を測定することができる。ここで、レベルの高い測定領域は、生体情報を測定しやすい測定領域であることから、第１の生体情報測定処理によれば、より精度高く生体情報を測定することができる。

【0082】

また、第１の生体情報測定処理によれば、生体情報を測定後に、レベルの高い測定領域のままであり、レベルが低下していないことを確認することから、より精度高く生体情報を測定することを保証することができる。

【0083】

更に、第１の生体情報測定処理によれば、予めユーザのプロファイル情報を登録していなくとも、生体情報を測定することができる。

【0084】

［第２の生体情報測定処理］
図７及び図８は、画像処理装置１が実行する第２の生体情報測定処理の流れを説明するフローチャートである。

【0085】

ステップＳ３１において、設定制御部１１１は、初期設定を行う。初期設定の方法については、上述したステップＳ１１と同様であるので詳細な説明は省略する。
ステップＳ３２において、設定制御部１１１は、ユーザを識別するための個人認証を試み、個人認証に成功したか否かを判定する。個人認証に成功した場合は、ステップＳ３２においてＹｅｓと判定され、処理はステップＳ３３に進む。一方で、個人認証に失敗した場合は、ステップＳ３２においてＮｏと判定され、ステップＳ３２を繰り返す。なお、個人認証は、例えば、撮像部１６が撮像したユーザの顔画像を用いた顔認識や、入力部１８に含まれるマイクにて集音したユーザの音声を用いた声紋認識等により行うことができる。また、それ以外にも、所定の生体情報を利用した生体認証や、ユーザから入力されたパスワードを利用した認証等の他の認証方法により個人認証を行うようにしてもよい。

【0086】

ステップＳ３３において、設定制御部１１１は、個人認証により特定したユーザについてのプロファイル情報を、サーバ群３に含まれる認証サーバに対して問い合わせる。認証サーバは、問い合わせを受けたユーザについてのプロファイル情報の有無を確認する。そして、認証サーバは、プロファイル情報が存在する場合には、サーバ群３に含まれる測定データ格納サーバから、対応するプロファイル情報を取得する。そして、認証サーバは、取得したプロファイル情報を、問い合わせに対する応答として、設定制御部１１１に対して送信する。一方で、認証サーバは、プロファイル情報が存在する場合には、その旨を、問い合わせに対する応答として、設定制御部１１１に対して送信する。

【0087】

ここで、プロファイル情報には、ユーザの関連情報や、そのユーザについて指定されている個人別領域や、そのユーザについて指定されている測定対象とする生体情報の種類が含まれている。

【0088】

ここで、ユーザの関連情報とは、例えば、ユーザを識別するための識別情報や、ユーザの名前や年齢、身長体重等の情報や、認証を行うための認証元画像である。

【0089】

また、個人別領域とは、ユーザそれぞれについて紐付けてある特定の測定領域である。また、個人別領域の数は、測定対象とする生体情報により異なる。例えば、上述したように、脈拍や脈波については、１つの測定領域（例えば、額、頬、顎、及び首等の何れか１つの測定領域）から測定を行うことができる。そのため、脈拍や脈波を測定する場合には、個人別領域は１つでよい。一方で、脈波伝播速度や血圧変動については、脈拍の遅延がわかる離れた２点（例えば頬と額、又は、額か頬と手のひら等）の測定領域から測定を行うことができる。そのため、脈波伝播速度や血圧変動を測定する場合には、個人別領域は２つ必要となる。
なお、プロファイル情報には、測定時における発光部１７の設定内容等の、測定に関する関連情報が更に含まれていてもよい。

【0090】

ステップＳ３４において、設定制御部１１１は、認証サーバからの応答の内容を確認する。認証サーバからの応答の内容が、プロファイル情報である場合には、ステップＳ３４においてＹｅｓと判定され、処理はステップＳ３５に進む。一方で、認証サーバからの応答の内容が、プロファイル情報が存在しない旨である場合には、ステップＳ３４においてＮｏと判定され、処理はステップＳ３６に進む。

【0091】

ステップＳ３５において、設定制御部１１１は、認証サーバからの応答として受信したプロファイル情報を読み込む。

【0092】

ステップＳ３６において、設定制御部１１１は、今回処理の対象としているユーザについてのプロファイル情報を生成し、認証サーバへ送信すると共に、プロファイル情報の登録を依頼する。認証サーバは、受信したプロファイル情報を、測定データ格納サーバに格納することにより登録を行う。なお、この段階において、未だ個人別領域の設定が行われていないような場合には、個人別領域以外の情報についてのみ登録を行う。

【0093】

ステップＳ３７において、設定制御部１１１は、処理の対象としているユーザについて個人別領域の指定が有るか否かを判定する。
例えば、ステップＳ３５にて読み込んだプロファイル情報に個人別領域の指定が含まれている場合や、ユーザからの操作等に応じて個人別領域の指定がなされている場合には、ステップＳ３７においてＹｅｓと判定され、処理はステップＳ３８に進む。一方で、プロファイル情報に個人別領域の指定が含まれておらず、ユーザからの操作等に応じた個人別領域の指定もなされていない場合には、ステップＳ３７においてＮｏと判定され、処理はステップＳ４２に進む。

【0094】

ステップＳ３８において、設定制御部１１１は、プロファイル情報に基づいて、ユーザ個人に応じた設定を行う。例えば、設定制御部１１１は、プロファイル情報に基づいて、個人別領域や、測定対象とする生体情報の種類や、測定時における発光部１７の設定内容等を設定する。つまり、そのユーザについて測定を行うに適した状態に設定をする。

【0095】

ステップＳ３９において、画像解析部１１２は、フェイストラッキングを行うことにより、測定領域を検出する。本処理は、上述したステップＳ１２と同じ処理であるので、詳細な説明を省略する。

【0096】

ステップＳ４０において、判定選択部１１３は、ステップＳ３９において検出された測定領域に、ステップＳ３８にて設定した個人別領域と同じ領域が含まれているか否かを判定する。なお、個人別領域が１つの場合には、この１つの個人別領域について同じ領域が含まれているか否かを判定する。一方で、個人別領域が２つの場合には、この２つの個人別領域それぞれについて同じ領域が含まれているか否かを判定する。

【0097】

個人別領域と同じ領域（２つの個人別領域の場合には、そのそれぞれについて同じ領域）が含まれている場合には、ステップＳ４０においてＹｅｓと判定され、処理はステップＳ４６に進む。一方で、個人別領域と同じ領域（２つの個人別領域の場合には、そのそれぞれについて同じ領域）が含まれていない場合には、ステップＳ４０においてＮｏと判定され、処理はステップＳ４１に進む。

【0098】

ステップＳ４１において、報知部１１５は、個人別領域と同じ領域が検出されるように、前回の測定時における顔の位置（すなわち、前記個人別領域を検出できた位置）等となるように案内（ナビゲーション）を報知する。例えば、報知部１１５は、撮像部１６により撮像されるユーザの顔の位置や向きが、前回の測定時における位置や向きと同じになるように、矢印や吹き出しを使って案内情報を表示する。ユーザは、この案内表示を参照することにより、前回の測定時における位置や向きと同じになるように、顔の位置や向きを調整することができる。
これにより、次回のステップＳ３９において個人別領域と同じ測定領域が検出され、次回のステップＳ４０においてＹｅｓと判定されるようになる。

【0099】

他方、ステップＳ４２に進んだ場合は、個人別領域を設定するための処理が開始される。具体的には、ステップＳ４２において、判定選択部１１３は、生体情報の測定のしやすさが高くなるように、発光部１７を制御して照度や色成分を調整する。本処理は、上述したステップＳ１４と同じ処理であるので、詳細な説明を省略する。

【0100】

ステップＳ４３において、判定選択部１１３は、ステップＳ３２において検出された測定領域それぞれに対してレベル付けを行う。本処理は、上述したステップＳ１５と同じ処理であるので、詳細な説明を省略する。

【0101】

ステップＳ４４において、判定選択部１１３は、ステップＳ４３において行ったレベル付けにおいて、高レベルの測定領域（すなわち、所定レベル以上のレベルが付けられた測定領域）が検出されたか否かを判定する。
なお、２つの個人別領域が必要な場合には、異なる場所それぞれで、高レベルの測定領域が検出されたか否かを判定する。例えば、額で１箇所、頬で１箇所というように高レベルの測定領域が検出されたか否かを判定する。

【0102】

高レベルの測定領域が検出された場合は（２つの個人別領域が必要な場合には、異なる場所それぞれで、高レベルの測定領域が検出された場合は）、ステップＳ４４においてＹｅｓと判定され、処理はステップＳ４５に進む。一方で、高レベルの測定領域が検出されない場合は（２つの個人別領域が必要な場合には、異なる場所それぞれで、高レベルの測定領域が検出されない場合は）、ステップＳ４４においてＮｏと判定され、処理は再度ステップＳ４２に戻る。

【0103】

ステップＳ４５において、ステップＳ４４にて検出された高レベルの測定領域（２つの個人別領域が必要な場合には、異なる場所それぞれについての、高レベルの測定領域）、を今回処理の対象としているユーザの個人別領域として設定する。なお、異なる場所がどの場所とどの場所であるのかは、ユーザ毎に予め定めておいてもよいし、ステップＳ４４にて検出された高レベルの測定領域がどの場所であるのかに基づいて定めるようにしてもよい。

【0104】

ステップＳ４６において、ステップＳ３９にて検出された個人別領域や、ステップＳ４５にて設定された個人別領域から生体情報を測定する。この測定は、上述したように、測定領域の画像に基づいて行われるものであり、ユーザに対しては非接触に行われる。

【0105】

ステップＳ４７において、報知部１１５は、ステップＳ４６において測定された生体情報を、表示部１９への表示等の方法で報知する。本処理は、上述したステップＳ１９と同じ処理であるので、詳細な説明を省略する。

【0106】

ステップＳ４８において、設定制御部１１１は、ステップＳ４６において測定された生体情報を、記憶部２０の測定データ記憶部２０１や、サーバ群３に含まれる測定データ格納サーバ等に保存する。本処理は、上述したステップＳ２０と同じ処理であるので、詳細な説明を省略する。

【0107】

ステップＳ４９において、設定制御部１１１は、第２の生体情報測定処理を終了するか否かを判定する。本処理は、上述したステップＳ２１と同じ処理であり、第２の生体情報測定処理を終了する条件も、第１の生体情報測定処理を終了する条件と同じとできるので、詳細な説明を省略する。

【0108】

第２の生体情報測定処理を終了する条件が満たされていない場合は、ステップＳ４９においてＮｏと判定され、処理は再度ステップＳ４６に戻る。一方で、第２の生体情報測定処理を終了する条件が満たされた場合は、ステップＳ４９においてＹｅｓと判定され、処理はステップＳ５０に進む。

【0109】

ステップＳ５０において、設定制御部１１１は、今回処理の内容に基づいてプロファイル情報を更新し、認証サーバへ送信すると共に、プロファイル情報の登録を依頼する。例えば、設定制御部１１１は、今回の処理においてステップＳ４４にて設定した個人別領域や、ステップＳ４２における調光時の発光部１７の設定内容等に基づいてプロファイル情報を更新し、認証サーバへ送信すると共に、プロファイル情報の登録を依頼する。

【0110】

認証サーバは、受信したプロファイル情報を、測定データ格納サーバに格納することにより登録を行う。これにより、次回以降に行われる第２の生体情報測定処理では、ステップＳ３７においてＹｅｓと判定されることになり、ステップＳ４２～ステップＳ４５等の処理を省略することができる。
なお、次回以降に行われる第２の生体情報測定処理では、ステップＳ３１におけるアプリケーションの取得等の処理も省略するようにしてもよい。

【0111】

以上説明した第２の生体情報測定処理では、ユーザ個人毎に設定された個人別領域を対象として生体情報を測定することができる。ここで、個人別領域は、レベルの高い測定領域から選択されたものであり、生体情報を測定しやすい測定領域であることから、第２の生体情報測定処理によれば、より精度高く生体情報を測定することができる。

【0112】

また、第２の生体情報測定処理によれば、レベルの高い測定領域が、ユーザ個人毎に異なるような場合であっても、ユーザ個人毎に設定された個人別領域を設定することから、より精度高く生体情報を測定することを保証することができる。

【0113】

以上のように構成される画像処理装置１は、画像処理装置１は、画像解析部１１２と、生体情報測定部１１４と、判定選択部１１３と、を備える。
画像解析部１１２は、撮像部１６により撮像された被写体を含む画像から当該被写体の複数の部位画像を検出する。
生体情報測定部１１４は、画像解析部１１２により検出された被写体の複数の部位画像の少なくとも何れかから生体情報を取得する。
判定選択部１１３は、画像解析部１１２により検出された被写体の複数の部位画像夫々についての生体情報の検出の容易度を判定する。判定選択部１１３は、判定選択部１１３により判定された生体情報の検出の容易度に基づいて、被写体の生体情報の取得に関する選択を行なう。
これにより、生体情報の検出の容易度という指標に基づいて、生体情報の取得に関する選択を行なうことから、より精度高く生体情報を測定することができる。

【0114】

判定選択部１１３は、判定選択部１１３により判定された生体情報の検出の容易度に基づいて、被写体の複数の部位画像から所定の部位画像を選択する。
生体情報測定部１１４は、判定選択部１１３により選択された所定の部位画像から被写体の生体情報を取得する。
これにより、生体情報の検出の容易度という指標に基づいて、生体情報を取得する部位画像を選択することから、より生体情報を取得しやすい部位画像から生体情報を測定することができる。

【0115】

生体情報測定部１１４は、画像解析部１１２により検出された被写体の複数の部位画像夫々についての生体情報を取得する。
判定選択部１１３は、判定選択部１１３により判定された生体情報の検出の容易度に基づいて、生体情報測定部１１４により取得される複数の生体情報から生体情報を選択する。
これにより、生体情報の検出の容易度という指標に基づいて、より生体情報を取得しやすい部位画像から計測した生体情報を取得することができる。

【0116】

生体情報測定部１１４は、判定選択部１１３により選択された所定の部位画像についての生体情報の検出の容易度に応じて、生体情報の取得方法を異ならせる。
これにより、例えば、生体情報の検出の容易度が高いほど、測定時間を短くしても、精度高く生体情報を測定することができる。また、仮に生体情報の検出の容易度がそれほど高くない場合には、測定時間を長くすることにより、精度高く生体情報を測定することができる。

【0117】

判定選択部１１３は、被写体の複数の部位画像夫々の領域範囲の大きさに基づいて、生体情報の検出の容易度を判定する。
これにより、測定領域が大きいほど、安定した測定領域であるという基準に基づいて、生体情報の検出の容易度を判定することができる。

【0118】

生体情報測定部１１４は、被写体の複数の部位画像夫々から被写体の脈拍を検出する。
判定選択部１１３は、生体情報測定部１１４により検出された脈拍に基づいて、生体情報の検出の容易度を判定する。
これにより、脈拍という基準に基づいて、生体情報の検出の容易度を判定することができる。

【0119】

生体情報測定部１１４は、検出した脈拍に基づいて脈拍計測率を算出し、
判定選択部１１３は、生体情報測定部１１４により算出された脈拍計測率に基づいて生体情報の検出の容易度を判定する。
これにより、脈拍計測率が高いほど、安定した測定領域であるという基準に基づいて、生体情報の検出の容易度を判定することができる。

【0120】

判定選択部１１３は、撮像部１６により撮像された被写体を含む画像が更新される毎に、選択を行う。
これにより、画像が更新されて生体情報の検出の容易度が変化したとしても、より精度高く生体情報を測定することができる。

【0121】

画像処理装置１は、発光部１７を更に備え、
判定選択部１１３は、被写体の部位画像の生体情報の検出の容易度を判定する場合に、生体情報の検出の容易度が高くなるように発光部１７を制御する。
これにより、生体情報の検出の容易度が高くでき、より精度高く生体情報を測定することができる。

【0122】

画像処理装置１は、報知部１１５を更に備える。
報知部１１５は、判定選択部１１３により選択された部位を報知する。
これにより、被写体であるユーザは、現在どの部位が選択されているのかを把握できるので、選択された部位が適切に撮像されるように、顔の位置等を調整することができる。

【0123】

報知部１１５は、判定選択部１１３により選択された部位画像の領域範囲に応じて、生体情報測定部１１４により取得された生体情報を報知する。
これにより、被写体であるユーザの顔が映っている位置と重複しない領域に（すなわち、ユーザの顔と被らない領域に）、生体情報を報知するための波形データや必要な文字、画像情報を自動配置し表示することができる。あるいは、ユーザの顔が映っている位置に重ねて情報を表示することもできる。

【0124】

報知部１１５は、画像解析部１１２により検出された被写体の複数の部位画像に基づいて特定される被写体の被撮像位置に応じて、所定の被撮像位置への案内を報知する。
これにより、測定領域が適切に検出される、案内（ナビゲーション）を報知することができる。例えば、撮像部により撮像されるユーザの顔の位置や向きが、適切な位置や向きと同じになるように、矢印や吹き出しを使って案内情報を表示することができる。

【0125】

判定選択部１１３は、被写体毎に指定されている複数の部位夫々について、所定の部位画像の選択を行う。
これにより、生体情報の検出の容易度が高い測定領域が、ユーザ個人毎に異なるような場合であっても、より精度高く生体情報を測定することを保証することができる。

【0126】

判定選択部１１３は、生体情報の検出の容易度が所定基準以上の部位画像が複数存在する場合に、何れかの部位画像を選択し、該選択した部位画像における検出の容易度に基づいて、被写体の生体情報の取得に関する選択を行なう。
これにより、生体情報を検出する測定領域を限定できることから、生体情報を検出する処理を軽減することができる。

【0127】

判定選択部１１３は、生体情報の検出の容易度が所定基準以上の部位画像が複数存在する場合に、該複数の部位画像をつなぎ合わせ、該つなぎ合わせた部位画像における検出の容易度に基づいて、被写体の生体情報の取得に関する選択を行なう。
これにより、より広い測定領域を対象として、より精度高く生体情報を測定することができる。

【0128】

判定選択部１１３は、生体情報の検出の容易度がもっとも高い部位画像における検出の容易度に基づいて、被写体の生体情報の取得に関する選択を行なう。
これにより、最も高いレベルの測定領域を対象として、より精度高く生体情報を測定することができる。

【0129】

［変形例］
本発明は、上述の実施形態に限定されるものではなく、本発明の目的を達成できる範囲での変形、改良等は本発明に含まれるものである。

【0130】

＜生体情報を選択する変形例＞
例えば、上述の実施形態における、第１の生体情報測定処理を一部変形するようにしてもよい。例えば、図６を参照して上述したように、第１の生体情報処理では、判定選択部１１３が、検出された検出領域それぞれにレベル付けを行って（ステップＳ１５の処理に相当）、高レベルの測定領域を選択し（ステップＳ１６の処理に相当）、その後、生体情報測定部１１４が、生体情報を測定していた（ステップＳ１７の処理に相当）。

【0131】

これを変形して、まず、生体情報測定部１１４が、生体情報を取得し測定し（ステップＳ１７の処理に相当）、判定選択部１１３が、検出された検出領域それぞれにレベル付けを行って（ステップＳ１５の処理に相当）、高レベルの測定領域を選択し（ステップＳ１６の処理に相当）、選択された測定領域の生体情報を取得するようにしてもよい。この変形例における第１の生体情報測定処理について、以下、図９を参照して説明をする。

【0132】

［変形例における第１の生体情報測定処理］
図９は、画像処理装置１が実行する第１の生体情報測定処理の流れを説明するフローチャートである。

【0133】

ステップＳ６１において、設定制御部１１１は、ステップＳ１１と同様にして、初期設定を行う。
ステップＳ６２において、画像解析部１１２は、ステップＳ１２と同様にして、フェイストラッキングを行うことにより、測定領域を検出する。

【0134】

ステップＳ６３において、画像解析部１１２は、測定領域が検出できたか否かを判定する。測定領域が検出できた場合には、ステップＳ６３においてＹｅｓと判定され処理はステップＳ６４に進む。一方で、ユーザの顔の向きが適切でない等の理由で測定領域が検出できない場合には、ステップＳ６３においてＮｏと判定され、処理は再度ステップＳ６２に戻る。

【0135】

ステップＳ６４において、判定選択部１１３は、ステップＳ１４と同様にして、生体情報の測定のしやすさが高くなるように、発光部１７を制御して照度や色成分を調整する。
ステップＳ６５において、生体情報測定部１１４は、ステップＳ６２にて検出された全ての測定領域それぞれから生体情報を測定する。この測定は、上述したように、測定領域の画像に基づいて行われるものであり、ユーザに対しては非接触に行われる。

【0136】

ステップＳ６６において、判定選択部１１３は、ステップＳ６２において検出された全ての測定領域それぞれに対してレベル付けを行う。レベル付けの方法は、上述したステップＳ１５と同様にして、例えば、測定領域それぞれの大きさや、測定領域それぞれの脈波検出率に応じて行う。

【0137】

ステップＳ６７において、判定選択部１１３は、ステップＳ６６において行ったレベル付けにおいて、高レベルの測定領域（すなわち、所定レベル以上のレベルが付けられた測定領域）が検出されたか否かを判定する。高レベルの測定領域が検出された場合は、ステップＳ６７においてＹｅｓと判定され、処理はステップＳ６８に進む。一方で、高レベルの測定領域が検出されない場合は、ステップＳ６７においてＮｏと判定され、処理は再度ステップＳ６４に戻る。

【0138】

ステップＳ６８において、判定選択部１１３は、ステップＳ６６において全ての測定領域それぞれから測定された生体情報の中から、ステップＳ６６において行ったレベル付けにおいて高レベルの測定領域から測定した生体情報を選択する。

【0139】

ステップＳ６９において、報知部１１５は、ステップＳ６８において選択された生体情報を、表示部１９への表示等の方法で報知する。
ステップＳ７０において、設定制御部１１１は、ステップＳ６８において選択された生体情報を、記憶部２０の測定データ記憶部２０１や、サーバ群３に含まれる測定データ格納サーバ等に保存する。

【0140】

なお、上述の説明では、便宜上ステップＳ６９の後に、ステップＳ７０を行うと説明しているが、ステップＳ７０を行ってからステップＳ６９を行ってもよく、ステップＳ６９とステップＳ７０を並行して行ってもよい。

【0141】

ステップＳ７１において、設定制御部１１１は、変形例における第１の生体情報測定処理を終了するか否かを判定する。設定制御部１１１は、例えば、生体情報が所定の回数だけ測定できたことや、ユーザから処理の終了操作を受け付けたことや、変形例における第１の生体情報測定処理を開始してから所定時間が経過したことを変形例における第１の生体情報測定処理を終了する条件として、判定を行う。

【0142】

このような変形例における第１の生体情報測定処理を終了する条件が満たされていない場合は、ステップＳ７１においてＮｏと判定され、処理は再度ステップＳ６４に戻る。一方で、このような変形例における第１の生体情報測定処理を終了する条件が満たされた場合は、ステップＳ７１においてＹｅｓと判定され、変形例における第１の生体情報測定処理は終了する。
なお、次回以降に行われる変形例における第１の生体情報測定処理では、ステップＳ１１におけるアプリケーションの取得等の処理を省略するようにしてもよい。

【0143】

以上説明した変形例における第１の生体情報測定処理では、検出されたすべての測定領域のそれぞれから生体情報を測定する。また、全ての測定領域それぞれから測定された生体情報の中から、高レベルの測定領域から測定した生体情報を選択する。そして、選択した生体情報を報知する。ここで、レベルの高い測定領域は、生体情報を測定しやすい測定領域であることから、変形例における第１の生体情報測定処理によれば、より精度高く測定された生体情報を選択することができる。

【0144】

また、本変形における第１の生体情報測定処理によれば、選択に先立って、全ての測定領域について常に生体情報を測定する。そのため、一部の測定領域から測定を行なう場合に比べて、常時、高レベルの測定領域の生体情報を取得することができる。

【0145】

＜測定領域の選択に関する変形例＞
上述の実施形態では、ステップＳ１５、ステップＳ１６、及びステップＳ１７において、高レベルの測定領域（すなわち、所定レベル以上のレベルが付けられた測定領域）が検出されたか否かを判定し、高レベルの測定領域が検出されていた場合に、この高レベルの測定領域を対象として生体情報を測定していた。これに限らず、かかる処理を変形するようにしてもよい。

【0146】

例えば、高レベルの測定領域が複数検出された場合に、この複数の高レベルの測定領域の中から何れか１つの測定領域を選択するようにしてもよい。そして、選択された１つの測定領域から生体情報を検出するようにしてもよい。これにより、生体情報を検出する測定領域を限定できることから、生体情報を検出する処理を軽減することができる。

【0147】

あるいは、高レベルの測定領域が複数検出された場合に、この複数の高レベルの測定領域をつなぎ合わせて（すなわち、額、頬、顎、及び首といった部位を超えて）１つの測定領域として取り扱うようにしてもよい。そして、このつなぎ合わせた１つの測定領域から生体情報を検出するようにしてもよい。これにより、より広い測定領域を対象として、より精度高く生体情報を測定することができる。

【0148】

あるいは、高レベルの測定領域（すなわち、所定レベル以上のレベルが付けられた測定領域）が検出されたか否かを判定するのではなく、最も高いレベルの測定領域が何れの測定領域であるか判定するようにしてもよい。そして、最も高いレベルの測定領域であると判定された測定領域から生体情報を検出するようにしてもよい。これにより、最も高いレベルの測定領域を対象として、より精度高く生体情報を測定することができる。

【0149】

なお、本変形例を、図９を参照して上述した、ステップＳ６６、ステップＳ６７、及びステップＳ６８に適用するようにしてもよい。すなわち、高レベルの測定領域から測定した生体情報を選択する、という処理に本変形例を適用するようにしてもよい。

【0150】

＜他の変形例＞
他の変形例として、例えば、上述の実施形態において、ステップＳ１７やステップＳ４６では、測定対象とする測定領域のレベルを考慮することなく、生体情報の測定を行っていた。これを変形して、測定対象とする測定領域のレベルに応じて、生体情報の測定方法を異ならせるようにしてもよい。例えば、測定領域のレベルが高いほど、測定時間を短くするようにしてもよい。

【0151】

より具体的には、例えば高中低の３段階でレベル付けを行う場合には、高レベル（領域大／脈波検出率高）であれば測定時間を規定値より短縮し、中レベル（領域規定値／脈波検出率規定値）であれば規定値（デフォルト）の測定時間で計測し、低レベル（領域小／脈波検出率小）の場合、測定時間を規定値より長くする。
これにより、測定領域のレベルが高い場合（すなわち、生体情報の取得のしやすさが高い場合）には、短い測定時間で、精度高く生体情報を測定することができる。

【0152】

また、仮に測定領域のレベルがそれほど高くない場合（すなわち、生体情報の取得のしやすさがそれほど高くない場合）にも、測定時間を長くすることにより、精度高く生体情報を測定することができる。すなわち、レベルがそれほど高くない測定領域しか検出できない場合であっても、精度高く生体情報を測定することができる。

【0153】

他の変形例として、例えば、上述の実施形態において、第１の生体情報測定処理では、１つの測定領域から測定を行うことを想定していたが、これを変形して、第１の生体情報測定処理においても、脈拍の遅延がわかる離れた２点の測定領域から測定を行うようにしてもよい。つまり、第１の生体情報測定処理により、脈波伝播速度や血圧変動等の生体情報を測定するようにしてもよい。

【0154】

他の変形例として、例えば、上述の実施形態において、１つの測定領域又は２点の測定領域から測定を行うことを想定していたが、３点以上の測定領域から測定を行うようにしてもよい。

【0155】

他の変形例として、例えば、上述の実施形態において、画像処理装置１と、サーバ群３に含まれる各サーバとが協働することを想定していたが、各サーバの機能を画像処理装置１に追加して、画像処理装置１のみで全ての処理を行うようにしてもよい。

【0156】

また、上述の実施形態では、本発明が適用される画像処理装置１は、携帯可能な自立式の鏡に組み込まれた電子機器を例として説明したが、特にこれに限定されない。
例えば、本発明は、姿見等の大型の鏡に組み込まれた電子機器や、据え置き型の洗面化粧台に組み込まれた電子機器や、浴室に設置される鏡形状の電子機器に適用可能である。

【0157】

上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。
換言すると、図５の機能的構成は例示に過ぎず、特に限定されない。即ち、上述した一連の処理を全体として実行できる機能が画像処理装置１に備えられていれば足り、この機能を実現するためにどのような機能ブロックを用いるのかは特に図５の例に限定されない。

【0158】

また、１つの機能ブロックは、ハードウェア単体で構成してもよいし、ソフトウェア単体で構成してもよいし、それらの組み合わせで構成してもよい。
本実施形態における機能的構成は、演算処理を実行するプロセッサによって実現され、本実施形態に用いることが可能なプロセッサには、シングルプロセッサ、マルチプロセッサ及びマルチコアプロセッサ等の各種処理装置単体によって構成されるものの他、これら各種処理装置と、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）やＦＰＧＡ（Ｆｉｅｌｄ‐Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）等の処理回路とが組み合わせられたものを含む。

【0159】

一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、コンピュータ等にネットワークや記録媒体からインストールされる。
コンピュータは、専用のハードウェアに組み込まれているコンピュータであってもよい。また、コンピュータは、各種のプログラムをインストールすることで、各種の機能を実行することが可能なコンピュータ、例えば汎用のパーソナルコンピュータであってもよい。

【0160】

このようなプログラムを含む記録媒体は、ユーザにプログラムを提供するために装置本体とは別に配布される図２のリムーバブルメディア１００により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される記録媒体等で構成される。リムーバブルメディア１００は、例えば、磁気ディスク（フロッピディスクを含む）、光ディスク、または光磁気ディスク等により構成される。光ディスクは、例えば、ＣＤ－ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｋ－Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ），ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ），Ｂｌｕ－ｒａｙ（登録商標） Ｄｉｓｃ（ブルーレイディスク）等により構成される。光磁気ディスクは、ＭＤ（Ｍｉｎｉ－Ｄｉｓｋ）等により構成される。また、装置本体に予め組み込まれた状態でユーザに提供される記録媒体は、例えば、プログラムが記録されている図４のＲＯＭ１２や、図４、５の記憶部２０に含まれるハードディスク等で構成される。

【0161】

なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、その順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
また、本明細書において、システムの用語は、複数の装置や複数の手段等より構成される全体的な装置を意味するものとする。

【0162】

以上、本発明のいくつかの実施形態について説明したが、これらの実施形態は、例示に過ぎず、本発明の技術的範囲を限定するものではない。本発明はその他の様々な実施形態を取ることが可能であり、さらに、本発明の要旨を逸脱しない範囲で、省略や置換等種々の変更を行うことができる。これら実施形態やその変形は、本明細書等に記載された発明の範囲や要旨に含まれると共に、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

【0163】

以下に、本願の出願当初の特許請求の範囲に記載された発明を付記する。
［付記１］
撮像手段により撮像された被写体を含む画像から当該被写体の複数の部位画像を検出する部位検出手段と、
前記部位検出手段により検出された前記被写体の複数の部位画像の少なくとも何れかから生体情報を取得する生体情報取得手段と、
前記部位検出手段により検出された前記被写体の複数の部位画像夫々についての生体情報の検出の容易度を判定する判定手段と、
前記判定手段により判定された前記生体情報の検出の容易度に基づいて、前記被写体の生体情報の取得に関する選択を行なう選択手段と、
を備えることを特徴とする画像処理装置。
［付記２］
前記選択手段は、前記判定手段により判定された前記生体情報の検出の容易度に基づいて、前記被写体の複数の部位画像から所定の部位画像を選択し、
前記生体情報取得手段は、前記選択手段により選択された所定の部位画像から前記被写体の生体情報を取得する、
ことを特徴とする付記１に記載の画像処理装置。
［付記３］
前記生体情報取得手段は、前記部位検出手段により検出された前記被写体の複数の部位画像夫々についての生体情報を取得し、
前記選択手段は、前記判定手段により判定された前記生体情報の検出の容易度に基づいて、前記生体情報取得手段により取得される複数の生体情報から前記生体情報を選択する、
ことを特徴とする付記１に記載の画像処理装置。
［付記４］
前記生体情報取得手段は、前記選択手段により選択された所定の部位画像についての前記生体情報の検出の容易度に応じて、前記生体情報の取得方法を異ならせる、
ことを特徴とする付記１乃至３の何れか１に記載の画像処理装置。
［付記５］
前記判定手段は、前記被写体の複数の部位画像夫々の領域範囲の大きさに基づいて、前記生体情報の検出の容易度を判定する、
ことを特徴とする付記１乃至４の何れか１に記載の画像処理装置。
［付記６］
前記被写体の複数の部位画像夫々から前記被写体の脈拍を検出する脈拍検出手段を備え、
前記判定手段は、前記脈拍検出手段により検出された脈拍に基づいて、前記生体情報の検出の容易度を判定する、
ことを特徴とする付記１乃至５の何れか１に記載の画像処理装置。
［付記７］
前記脈拍検出手段は、前記検出した脈拍に基づいて脈拍計測率を算出し、
前記判定手段は、前記脈拍検出手段により算出された脈拍計測率に基づいて前記生体情報の検出の容易度を判定する、
ことを特徴とする付記６に記載の画像処理装置。
［付記８］
前記選択手段は、前記撮像手段により撮像された前記被写体を含む画像が更新される毎に、前記選択を行う、
ことを特徴とする付記１乃至７の何れか１に記載の画像処理装置。
［付記９］
発光手段を更に備え、
前記判定手段は、前記被写体の部位画像の生体情報の検出の容易度を判定する場合に、前記生体情報の検出の容易度が高くなるように前記発光手段を制御する、
ことを特徴とする付記１乃至８の何れか１に記載の画像処理装置。
［付記１０］
前記選択手段により選択された部位を報知する第１の報知手段を更に備える、
ことを特徴とする付記１乃至９の何れか１に記載の画像処理装置。
［付記１１］
前記選択手段により選択された部位画像の領域範囲に応じて、前記生体情報取得手段により取得された生体情報を報知する第２の報知手段を更に備える、
ことを特徴とする付記１乃至１０の何れか１に記載の画像処理装置。
［付記１２］
前記部位検出手段により検出された前記被写体の複数の部位画像に基づいて特定される前記被写体の被撮像位置に応じて、所定の被撮像位置への案内を報知する第３の報知手段を更に備える、
ことを特徴とする付記１乃至１１の何れかに記載の画像処理装置。
［付記１３］
前記選択手段は、被写体毎に指定されている複数の部位夫々について、前記所定の部位画像の選択を行う、
ことを特徴とする付記１乃至１２の何れかに記載の画像処理装置。
［付記１４］
前記選択手段は、前記生体情報の検出の容易度が所定基準以上の部位画像が複数存在する場合に、何れかの部位画像を選択し、該選択した部位画像における検出の容易度に基づいて、前記被写体の生体情報の取得に関する選択を行なう、
ことを特徴とする付記１乃至１３の何れか１に記載の画像処理装置。
［付記１５］
前記選択手段は、前記生体情報の検出の容易度が所定基準以上の部位画像が複数存在する場合に、該複数の部位画像をつなぎ合わせ、該つなぎ合わせた部位画像における検出の容易度に基づいて、前記被写体の生体情報の取得に関する選択を行なう、
ことを特徴とする付記１乃至１３の何れか１に記載の画像処理装置。
［付記１６］
前記選択手段は、前記生体情報の検出の容易度がもっとも高い部位画像における検出の容易度に基づいて、前記被写体の生体情報の取得に関する選択を行なう、
ことを特徴とする付記１乃至１３の何れか１に記載の画像処理装置。
［付記１７］
画像処理装置が実行する画像処理方法であって、
撮像手段により撮像された被写体を含む画像から当該被写体の複数の部位画像を検出する部位検出ステップと、
前記部位検出ステップにより検出された前記被写体の複数の部位画像の少なくとも何れかから生体情報を取得する生体情報取得ステップと、
前記部位検出ステップにより検出された前記被写体の複数の部位画像夫々についての生体情報の検出の容易度を判定する判定ステップと、
前記判定ステップにより判定された前記生体情報の検出の容易度に基づいて、前記被写体の生体情報の取得に関する選択を行なう選択ステップと、
を含むことを特徴とする画像処理方法。
［付記１８］
コンピュータに、
撮像手段により撮像された被写体を含む画像から当該被写体の複数の部位画像を検出する部位検出機能と、
前記部位検出機能により検出された前記被写体の複数の部位画像の少なくとも何れかから生体情報を取得する生体情報取得機能と、
前記部位検出機能により検出された前記被写体の複数の部位画像夫々についての生体情報の検出の容易度を判定する判定機能と、
前記判定機能により判定された前記生体情報の検出の容易度に基づいて、前記被写体の生体情報の取得に関する選択を行なう選択機能と、
を実現させることを特徴とするプログラム。

【符号の説明】

【0164】

１・・・画像処理装置，２・・・ネットワーク，３・・・サーバ群，１１・・・ＣＰＵ，１２・・・ＲＯＭ，１３・・・ＲＡＭ，１４・・・バス，１５・・・入出力インターフェース，１６・・・撮像部，１７・・・発光部，１８・・・入力部，１９・・・表示部，２０・・・記憶部，２１・・・通信部，２２・・・ドライブ，１００・・・リムーバブルメディア，１１１・・・設定制御部，１１２・・・画像解析部，１１３・・・判定選択部，１１４・・・生体情報取得部，１１５・・・報知部，２０１・・・測定データ記憶部，Ｓ・・・画像処理システム

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】