特許 7650166 情報処理装置、情報処理装置の制御方法およびプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2025-03-13

(45)【発行日】2025-03-24

(54)【発明の名称】情報処理装置、情報処理装置の制御方法およびプログラム

(51)【国際特許分類】

   G06F 9/48 20060101AFI20250314BHJP

   A61B 5/00 20060101ALI20250314BHJP

【ＦＩ】

G06F9/48 300H

A61B5/00 B

【請求項の数】 17

(21)【出願番号】P 2021034737

(22)【出願日】2021-03-04

(65)【公開番号】P2022135128

(43)【公開日】2022-09-15

【審査請求日】2024-03-01

(73)【特許権者】

【識別番号】000001007

【氏名又は名称】キヤノン株式会社

(74)【代理人】

【識別番号】100114775

【弁理士】

【氏名又は名称】高岡 亮一

(74)【代理人】

【識別番号】100121511

【弁理士】

【氏名又は名称】小田 直

(74)【代理人】

【識別番号】100208580

【弁理士】

【氏名又は名称】三好 玲奈

(72)【発明者】

【氏名】北島 光太郎

【審査官】坂庭 剛史

(56)【参考文献】

【文献】米国特許出願公開第２０１８／０３２１９７０（ＵＳ，Ａ１）

【文献】特開２００９－０９３４５２（ＪＰ，Ａ）

【文献】特開２０１８－０２８７３１（ＪＰ，Ａ）

【文献】特開２０１３－２５０６８１（ＪＰ，Ａ）

【文献】特開２０１４－１９１４５８（ＪＰ，Ａ）

【文献】国際公開第２０１５／０７５８４７（ＷＯ，Ａ１）

【文献】米国特許出願公開第２０１６／０３４２３０８（ＵＳ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｆ ９／４８

Ａ６１Ｂ ５／００

(57)【特許請求の範囲】

【請求項1】

複数のアプリケーションを同時に実行可能な情報処理装置であって、
撮像部を制御して撮像を行う撮像手段と、
第１のアプリケーションを実行中にバックグラウンドで第２のアプリケーションが実行可能か判定する判定手段と、
バックグラウンドで前記第２のアプリケーションを実行する実行手段と、を備え、
前記判定手段は、前記第１のアプリケーションの情報と、前記第１のアプリケーションを実行中に前記撮像部で前記情報処理装置のユーザを撮像した画像から算出される環境適性情報とに基づいて、バックグラウンドで前記第２のアプリケーションが実行可能か判定することを特徴とする情報処理装置。

【請求項2】

前記第１のアプリケーションの情報は、前記第１のアプリケーションの利用状態が前記第２のアプリケーションをバックグラウンドで実行するのに適した利用状態であるか判定するための情報であることを特徴とする請求項１に記載の情報処理装置。

【請求項3】

前記第１のアプリケーションの情報は、前記第１のアプリケーションのカテゴリまたは識別情報、前記第１のアプリケーションの平均的な利用時間、前記第１のアプリケーションを実行している前記情報処理装置の現在の場所情報、前記第１のアプリケーションを実行した際の前記情報処理装置の動きを示す情報のいずれか１つ以上の情報を含む情報であることを特徴とする請求項１または２に記載の情報処理装置。

【請求項4】

前記判定手段は、バックグラウンドで実行可能なアプリケーションの起動条件を示す情報を管理し、
該起動条件を示す情報として、バックグラウンドで実行可能なアプリケーションごとに、フォアグラウンドで実行されるアプリケーションのカテゴリまたは識別情報、バックグラウンドで実行可能なアプリケーションの平均的な利用時間、バックグラウンドで実行可能なアプリケーションを実行可能な場所情報、バックグラウンドで実行可能なアプリケーションを実行した際の前記情報処理装置の動きを示す情報、フォアグラウンドで実行されるアプリケーションのバックグラウンドにおいて該バックグラウンドで実行可能なアプリケーションを実行する適性の度合いを示す適性度の履歴情報のいずれか１つ以上の情報が管理されることを特徴とする請求項１乃至３のいずれか１項に記載の情報処理装置。

【請求項5】

前記判定手段は、前記第１のアプリケーションから取得した前記第１のアプリケーションの情報が前記起動条件を満たしているか判定することで、前記第２のアプリケーションが実行可能か判定することを特徴とする請求項４に記載の情報処理装置。

【請求項6】

前記環境適性情報には、前記第２のアプリケーションで利用する画像において被写体となる前記ユーザの状態を示す被写体情報または前記情報処理装置を利用している環境光の特性を示す環境光情報の少なくとも１つが含まれることを特徴とする請求項１に記載の情報処理装置。

【請求項7】

前記被写体情報は、前記ユーザの位置、姿勢、表情の変化に関する情報のいずれか１つ以上を含むことを特徴とする請求項６に記載の情報処理装置。

【請求項8】

前記第２のアプリケーションが、前記撮像部で前記情報処理装置のユーザを撮像した画像に基づいて、前記ユーザの状態を解析するアプリケーションである場合、前記被写体情報には前記解析の対象となる前記ユーザの特定の領域の露出割合が含まれることを特徴とする請求項６または７に記載の情報処理装置。

【請求項9】

前記環境光情報には、前記ユーザの明るさ、色温度、前記ユーザによる光の反射状態、前記ユーザの明るさの変化に関する情報のいずれか１つ以上を含むことを特徴とする請求項６乃至８のいずれか１項に記載の情報処理装置。

【請求項10】

前記判定手段は、前記環境適性情報に基づいて前記第１のアプリケーションのバックグラウンドで前記第２のアプリケーションを実行する適性の度合いを示す適性度を算出し、前記適性度と閾値とを比較してバックグラウンドで前記第２のアプリケーションが実行可能か判定することを特徴とする請求項１乃至９のいずれか１項に記載の情報処理装置。

【請求項11】

前記判定手段は、前記適性度を前記第１のアプリケーションのバックグラウンドで前記第２のアプリケーションを実行可能か判定する起動条件の情報として記録することを特徴とする請求項１０に記載の情報処理装置。

【請求項12】

前記第１のアプリケーションを実行中にバックグラウンドで実行可能なアプリケーションの候補が複数ある場合、前記判定手段は、前記第１のアプリケーションの情報と前記環境適性情報とに基づいて、複数のアプリケーションの中から前記第１のアプリケーションのバックグラウンドでの実行に最も適した第２のアプリケーションを判定することを特徴とする請求項１乃至１１のいずれか１項に記載の情報処理装置。

【請求項13】

撮像部を制御して撮像を行う撮像手段をさらに備え、
前記撮像部は、前記情報処理装置の表示部と同じ面に配置され、
前記第２のアプリケーションは、前記撮像部で前記情報処理装置のユーザを撮像した画像に基づいて、前記ユーザの状態を解析するアプリケーションであることを特徴とする請求項１乃至１２のいずれか１項に記載の情報処理装置。

【請求項14】

前記第２のアプリケーションが解析する前記ユーザの状態は、ユーザの生体情報であることを特徴とする請求項１３に記載の情報処理装置。

【請求項15】

前記判定手段が前記第２のアプリケーションが実行可能であると判定した場合に、前記第２のアプリケーションを実行するか否かをユーザに選択させる画面を表示部に表示する表示手段をさらに備え、
前記実行手段は、前記画面において前記第２のアプリケーションの実行をユーザが選択した場合にバックグラウンドで前記第２のアプリケーションを実行することを特徴とする請求項１乃至１４のいずれか１項に記載の情報処理装置。

【請求項16】

複数のアプリケーションを同時に実行可能な情報処理装置の制御方法であって、
撮像部を制御して撮像を行う工程と、
第１のアプリケーションを実行中にバックグラウンドで第２のアプリケーションが実行可能か判定する判定工程と、
バックグラウンドで前記第２のアプリケーションを実行する実行工程と、を有し、
前記判定工程では、前記第１のアプリケーションの情報と、前記第１のアプリケーションを実行中に前記撮像部で前記情報処理装置のユーザを撮像した画像から算出される環境適性情報とに基づいて、バックグラウンドで前記第２のアプリケーションが実行可能か判定することを特徴とする情報処理装置の制御方法。

【請求項17】

請求項１乃至１５のいずれか１項に記載の情報処理装置の各手段としてコンピュータを機能させるためのプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報処理装置、情報処理装置の制御方法およびプログラムに関する。

【背景技術】

【0002】

近年、デジタルカメラ等で撮影された画像を用いて脈波などのバイタルサインを非接触で計測してユーザの状態を解析する技術が提案されている。例えば特許文献１は、被験者が撮影された画像から胸部などの所定の部位の領域の撮像画像信号の濃度を算出し、濃度の時間変化からバイタルサインを計測する方法を開示している。これにより、特殊な計測器具等を装着することなくバイタルサインを計測することが可能となる。

【0003】

また、スマートフォンなどの携帯端末ではデジタルカメラ等の撮影機能を搭載していることが一般的であり、撮影機能を用いて撮影された画像を様々なアプリケーションで利用することが可能である。携帯端末に搭載されたデジタルカメラで撮影した画像を用いて、前述のような非接触でのバイタルサイン計測を実行するアプリケーションも提案されている。

【先行技術文献】

【特許文献】

【0004】

【文献】特開２００５－２１８５０７号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

しかしながら、非接触で安定したバイタルサイン計測をする場合にはある程度の計測時間が必要である。そのため、携帯端末で非接触のバイタルサイン計測を行うアプリケーションを実行する際には、ユーザは専用のバイタルサイン計測アプリケーションを起動してから計測が終了するまでの間、できるだけ動かないようにして待たなくてはならない。
このように、携帯端末のアプリケーションを利用して非接触で安定したバイタルサイン計測をするためにはある程度の計測時間が必要であり、計測の間はユーザの時間や動きを拘束してしまう。また、バイタルサイン計測の開始後に照明条件などが計測に適していない場合は、計測が失敗となってしまい、何度もアプリケーションの実行および計測操作をする必要が生じる。このように、日常的に利用する携帯端末等のアプリケーションを利用してユーザの状態を解析する場合、計測のたびにアプリケーションの起動と計測実行の操作をすることはユーザの手間になってしまう。

【0006】

本発明は、ユーザの状態を解析するアプリケーションを実行する際のユーザの手間を低減させることを目的とする。

【課題を解決するための手段】

【0007】

上記課題を解決するために、本発明の情報処理装置は、複数のアプリケーションを同時に実行可能な情報処理装置であって、撮像部を制御して撮像を行う撮像手段と、第１のアプリケーションを実行中にバックグラウンドで第２のアプリケーションが実行可能か判定する判定手段と、バックグラウンドで前記第２のアプリケーションを実行する実行手段と、を備える。前記判定手段は、前記第１のアプリケーションの情報と、前記第１のアプリケーションを実行中に前記撮像部で前記情報処理装置のユーザを撮像した画像から算出される環境適性情報とに基づいて、バックグラウンドで前記第２のアプリケーションが実行可能か判定する。

【発明の効果】

【0008】

本発明によれば、ユーザの状態を解析するアプリケーションを実行する際のユーザの手間を低減させることができる。

【図面の簡単な説明】

【0009】

【図1】携帯端末の構成を示すブロック図である。

【図2】携帯端末が表示する画像の例を示した図である。

【図3】バックグラウンド実行アプリケーションリストの例を示す図である。

【図4】バイタルサイン計測アプリケーションのバックグラウンドでの実行可否を判定する処理を示すフローチャートである。

【図5】環境適性情報の適性度について説明する図である。

【図6】適性度の算出特性を示す図である。

【発明を実施するための形態】

【0010】

本実施例では、本発明を適用する情報処理装置の一例として、カメラ付きスマートフォンなどの撮影機能を備えた携帯端末について説明する。図１は、カメラ付き携帯端末の構成例を示すブロック図である。携帯端末１００は、撮影機能を有する情報処理装置である。携帯端末１００は、撮像部１１０、メモリ制御部１０７、Ｄ／Ａ変換器１０８、表示部１０９、画像メモリ１０６、認識処理部１０４、記録Ｉ／Ｆ１１１を備える。携帯端末１００はさらに、システム制御部５０、操作部１２０、不揮発性メモリ１２１、システムメモリ１２２、通信部１２３を備える。

【0011】

撮像部１１０は、レンズ１０１、撮像素子１０２、Ａ／Ｄ変換器１０３を備える。レンズ１０１は、被写体の光学像を撮像素子１０２に結像させる。撮像素子１０２は、ＣＣＤやＣＭＯＳ素子等であり、光学像を電気信号（アナログ画像信号）に変換する。Ａ／Ｄ変換器１０３は、撮像素子１０２が出力したアナログ画像信号をデジタル画像信号に変換する。Ａ／Ｄ変換器１０３により変換されたデジタル画像信号（撮影画像）は、メモリ制御部１０７を介して、表示部１０９に表示されたり画像メモリ１０６や記録媒体１１２に記録されたりする。撮影画像は、静止画および動画像を含む。なお、本実施例では撮像部１１０が携帯端末１００の表示部１０９と同じ面に１つ配置されている例について説明するが、撮像部１１０は複数あってよいし、画面側に加えて携帯端末１００の裏側にも備えられていてもよい。

【0012】

認識処理部１０４は、撮影画像からシーンや人物の場所等を解析する。画像メモリ１０６は、撮影画像を記録するメモリである。メモリ制御部１０７は、画像メモリ１０６を制御する。Ｄ／Ａ変換器１０８は、デジタル信号をアナログ信号に変換するＤ／Ａ変換器である。表示部１０９は、ＬＣＤ（液晶表示装置）等の表示デバイスを有し、撮影画像、カメラの撮影モードに関する情報、撮影前のプレビュー画像、焦点検出時の合焦状態等を表示する。記録Ｉ／Ｆ１１１は、外部の記録媒体１１２とのインタフェースである。記録媒体１１２は、メモリカードやハードディスク等の記録媒体である。なお、認識処理部１０４およびメモリ制御部１０７は、システム制御部５０により実現されてもよい。

【0013】

システム制御部５０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）であり、携帯端末１００のシステム全体を制御する。また、システム制御部５０は、画像メモリ１０６に出力された画像データに対して各種画像処理を実施する。また、システム制御部５０は、各種アプリケーションを制御する。操作部１２０は、ユーザからの操作を受け付ける。不揮発性メモリ１２１は、ＥＥＰＲＯＭ等であり、携帯端末１００のシステムプログラムやアプリケーションのプログラム、各種パラメータなどを格納する。システムメモリ１２２は、ＲＡＭ等であり、システム制御部５０の動作用の定数、変数、不揮発性メモリ１２１から読みだしたプログラム等を展開する。通信部１２３は、外部機器との通信を行う。

【0014】

システム制御部５０は、不揮発性メモリ１２１に記録されたアプリケーションプログラムを実行することで、後述する本実施例の各処理を実現する。アプリケーションプログラムを実行する際、システム制御部５０は、システム制御部５０の動作用の定数、変数、不揮発性メモリ１２１から読み出したプログラム等をシステムメモリ１２２に展開し実行する。またシステム制御部５０は、複数のアプリケーションを並行して動作させることも可能である。本実施例では、システム制御部５０が実行するアプリケーションが、バイタルサイン計測アプリケーション、ＷＥＢブラウザアプリケーション、電子書籍アプリケーション等である場合を例に説明する。

【0015】

次に、携帯端末１００における撮影の基本動作について説明する。撮像素子１０２は、レンズ１０１を介して入射した光を光電変換し、入力画像信号（アナログ画像信号）としてＡ／Ｄ変換器１０３へ出力する。Ａ／Ｄ変換器１０３は撮像素子１０２から出力されるアナログ画像信号をデジタル画像信号に変換し、メモリ制御部１０７を介して画像メモリ１０６に出力する。システム制御部５０は、画像メモリ１０６に出力された画像に対してＲＧＢ同時化処理、ホワイトバランス等の色変換処理、γ変換処理等の各種画像処理を行う。

【0016】

画像メモリ１０６は、撮像素子１０２から出力された画像データや、表示部１０９に表示するための画像データを格納する。画像メモリ１０６に記録された画像は、後述するシステム制御部５０が実行する撮影画像を利用する各種アプリケーションで利用することが可能である。Ｄ／Ａ変換器１０８は、画像メモリ１０６に格納されている画像表示用のデータをアナログ信号に変換して表示部１０９に供給する。表示部１０９は、ＬＣＤ等の表示デバイスにＤ／Ａ変換器１０８からのアナログ信号に応じた表示を行う。またシステム制御部５０は、必要に応じて画像データを記録Ｉ／Ｆ１１１を介して記録媒体１１２に格納する。

【0017】

図２は、携帯端末１００が表示する画像の例を示した図である。各画面は、システム制御部５０の制御に応じて表示部１０９に表示される。図２（Ａ）は、アプリケーションの選択画面を示す図である。アプリケーションの選択画面では、事前にインストールされた複数のアプリケーション（例えば、アプリケーションＡ～Ｆ）のアイコンがユーザに提示される。例えば、アプリケーションＡはバイタルサイン計測アプリケーション、アプリケーションＢはＷＥＢブラウザアプリケーション、アプリケーションＣは電子書籍アプリケーションを示している。ユーザによって任意のアプリケーションが選択されると、システム制御部５０は選択されたアプリケーションを起動する。

【0018】

（バイタルサイン計測アプリケーション）
次に、ユーザによってアプリケーションＡ（バイタルサイン計測アプリケーション）が選択され、システム制御部５０がバイタルサイン計測アプリケーションを実行する場合の動作について説明する。バイタルサイン計測アプリケーションは、撮像した画像を用いてバイタルサイン等の生体情報を計測・解析するアプリケーションである。図２（Ｂ）および図２（Ｃ）は、バイタルサイン計測アプリケーションの利用時に表示される画面の例である。

【0019】

ユーザによってバイタルサイン計測アプリケーションが選択されると、システム制御部５０は、バイタルサイン計測アプリケーションを起動する。バイタルサイン計測アプリケーションの起動時にシステム制御部５０は、撮像部１１０を動作させバイタルサインの計測対象であるユーザを撮影させる。また、同時にシステム制御部５０は、携帯端末１００の表示部１０９に計測画面を表示する。図２（Ｂ）は、バイタルサイン計測アプリケーションの計測画面の例を示す図である。なお、撮像部１１０のレンズ１０１は、携帯端末１００の表示部１０９と同じ面に配置されている。そのため、ユーザは表示部１０９に表示される画面を見ながら撮像部１１０により自撮りをすることが可能である。

【0020】

計測画面には、撮影画像２０１、測定開始アイコン２０２、バイタルサイン２０３、設定アイコン２０４が表示される。撮影画像２０１は、撮像部１１０で撮影した画像であり、計測対象のユーザが表示される。測定開始アイコン２０２は、バイタルサインの計測を開始するためのアイコンである。システム制御部５０は、ユーザが測定開始アイコン２０２を押下したことを検出するとバイタルサインの計測を開始する。計測されたバイタルサインのデータは、バイタルサイン２０３に表示される。本実施例では、バイタルサインとして心拍数と血中酸素濃度を計測する例について説明する。なお、計測対象となるバイタルサインはこれに限られるものではなく、どのような種類のバイタルサインを計測する構成であっても構わない。また、バイタルサインの計測方法に関しては画像を利用する既知の技術を利用するものとし、どのような方法を利用してもよい。また、画像を利用したバイタルサインの計測方法に加えて、他の計測方法を実行しても構わない。

【0021】

設定アイコン２０４は、バイタルサイン計測アプリケーションの設定を行うためのアイコンである。設定アイコン２０４が押下されると、システム制御部５０は、バイタルサイン計測アプリケーションの設定画面を表示部１０９に表示する。図２（Ｃ）は、バイタルサイン計測アプリケーションの設定画面の例を示す図である。設定画面には、バックグラウンド実行アイコン２０５、カテゴリ設定２０６、追加・削除アイコン２０７、計測場所設定２０８、追加・削除アイコン２０９が表示される。

【0022】

設定画面では、バイタルサイン計測アプリケーションをフォアグラウンドで実行中の他のアプリケーション（フォアグラウンドアプリケーション、第１のアプリケーション）のバックグラウンドで実行するための設定を行うことが可能である。すなわち、設定画面では、バイタルサイン計測アプリケーションをバックグラウンドアプリケーション（第２のアプリケーション）として実行する場合の設定を行う。バックグラウンド実行アイコン２０５は、バイタルサイン計測アプリケーションのバックグラウンド実行のＯＮ／ＯＦＦを切り替えるためのアイコンである。バックグラウンド実行アイコン２０５をＯＮに設定することで他のアプリケーションを実行しながら、バックグラウンドでバイタルサイン計測アプリケーションを実行することが可能である。バックグラウンド実行アイコン２０５がＯＮに設定された場合、システム制御部５０が管理するバックグラウンド実行アプリケーションリストにバイタルサイン計測アプリケーションが追加される。

【0023】

図３は、バックグラウンド実行アプリケーションリストの例を示す図である。図３（Ａ）はバックグラウンド実行アプリケーションが１つの場合、図３（Ｂ）はバックグラウンド実行アプリケーションが複数の場合のバックグラウンド実行アプリケーションリストを示している。ここでは図３（Ａ）を用いてバックグラウンド実行アプリケーションリストについて説明する。

【0024】

バックグラウンド実行アプリケーションリストは、バックグラウンド実行アプリケーションごとに該アプリケーションのバックグラウンドでの起動条件を紐づけたテーブルである。バックグラウンド実行アプリケーションリストには、例えば、バックグラウンドで実行されるアプリケーションの識別ＩＤ３０１、実行場所３０２、時間条件３０３、カテゴリ３０４、適性度３０５が含まれる。識別ＩＤ３０１は、アプリケーションを一意に識別するためのＩＤである。例えば、ＡＰＰ＿０００３はバイタルサイン計測アプリケーションを示す識別ＩＤである。

【0025】

実行場所３０２は、バイタルサイン計測アプリケーションをバックグラウンドで実行する場所として指定された場所を示す。実行場所３０２で指定された場所の近辺でのみバイタルサイン計測アプリケーションをバックグラウンドで実行する。バイタルサイン計測アプリケーションをバックグラウンドで実行する場所は、バイタルサイン計測アプリケーションの設定画面（図２（Ｃ））の計測場所設定２０８で設定される。

【0026】

計測場所設定２０８は計測場所の指定設定であり、バイタルサイン計測アプリケーションをバックグラウンドで実行する際の場所を指定する。例えば、照明環境が良くバイタルサイン計測に適した自宅の場所を２０８の計測場所として登録しておくと、自宅にいるときのみバイタルサイン計測アプリケーションをバックグラウンドで実行することができる。これにより、屋外など照明環境が悪く、バイタルサイン計測を実行しても失敗することが多いような場所で無駄にバイタルサイン計測を実行することを防ぐことができる。計測場所設定２０８はユーザが追加・削除することが可能であり、追加・削除アイコン２０９を押下することで、バックグラウンドでバイタルサインの計測を実行する場所を設定することが可能である。計測場所設定２０８で設定された場所情報は、バックグラウンド実行アプリと関連付けて、バックグラウンド実行アプリケーションリストの実行場所３０２で管理される。

【0027】

時間条件３０３は、バックグラウンドアプリケーションの平均利用時間を示す情報である。例えば、バイタルサイン計測アプリケーションが利用される時間、すなわちバイタルサイン計測アプリケーションによる計測に必要な時間が２分以上である場合、時間条件３０３には「２ｍｉｎ以上」と指定される。

【0028】

カテゴリ３０４は、関連付けられたフォアグラウンドアプリケーションを示す。カテゴリ３０４に登録されたカテゴリのアプリケーションをフォアグラウンドで実行した時に、バックグラウンドでバイタルサイン計測を実行することが可能である。本実施例のバイタルサイン計測では携帯端末１００のフロントカメラでユーザを撮像する必要があり、ユーザが携帯端末１００の画面（表示部１０９）を見て利用することが想定されているアプリケーションが属する所定のカテゴリをカテゴリ３０４に登録する。すなわち、動画、電子書籍、ＷＥＢブラウザ等、表示部１０９に情報を表示する特性を有するカテゴリがカテゴリ３０４に登録される。

【0029】

図３（Ａ）の例では、ＣＡＴ＿００１（ＷＥＢブラウザ）もしくはＣＡＴ＿００２（電子書籍）のカテゴリに属するアプリケーションを実行する際に、バイタルサイン計測アプリケーションをバックグラウンドで実行することが可能であることを示している。したがって、ユーザがフォアグラウンドでＷＥＢブラウザを起動した際に、システム制御部５０は、バックグラウンドでバイタルサイン計測を行うかを判断し、バイタルサイン計測を行うと判断した場合はバイタルサイン計測を実行する。同様に、ユーザがフォアグラウンドで電子書籍アプリを起動した際に、システム制御部５０は、バックグラウンドでバイタルサイン計測を行うかを判断し、バイタルサイン計測を行うと判断した場合はバイタルサイン計測を実行する。

【0030】

バックグラウンドでバイタルサイン計測を実行可能なフォアグラウンドアプリのカテゴリ３０４は、デフォルトで設定されていてもよいし、バイタルサイン計測アプリケーションの設定画面（図２（Ｃ））のカテゴリ設定２０６でユーザにより設定されてもよい。例えば、追加・削除アイコン２０７を押下することで、関連付けるフォアグラウンドアプリケーションのカテゴリを設定することが可能である。図２（Ｃ）のカテゴリ設定２０６の例では、関連付けるフォアグラウンドアプリケーションのカテゴリにＷＥＢブラウザアおよび電子書籍が登録されている。バイタルサイン計測アプリケーションの設定画面で関連付けるアプリケーションのカテゴリとして登録されたカテゴリ情報は、バックグラウンド実行アプリと関連付けてバックグラウンド実行アプリケーションリストのカテゴリ３０４で管理される。なお、本実施例ではアプリケーションのカテゴリを設定登録してバックグラウンドでのアプリケーションの起動可否の判定に利用する例を説明するが、これに限られるものではない。例えば、カテゴリにかえてアプリケーション自体を設定登録してバックグラウンドでのアプリケーションの起動可否の判定に利用するようにしてもよい。

【0031】

適性度３０５は、各フォアグラウンドアプリケーションのバックグラウンドにおいて当該バックグラウンドアプリケーションを実行する適性の度合いを示す適性度の履歴情報である。適性度３０５は、過去に算出した適性度の平均値であり、フォアグラウンドアプリケーションごとに管理される。適性度の算出方法に関しては後述する。以上説明したように、バックグラウンド実行が有効となったアプリケーションのバックグラウンドでの起動条件がバックグラウンドアプリケーションリストとしてシステム制御部５０により管理される。

【0032】

（フォアグラウンドアプリケーション実行時の動作）
次に、バイタルサイン計測アプリケーションとは異なるアプリケーションをフォアグラウンドで実行した際に、バックグラウンドでバイタルサイン計測アプリケーションを実行可能か判定する処理について説明する。図４は、バイタルサイン計測アプリケーションのバックグラウンドでの実行可否を判定する処理を示すフローチャートである。図４に示される各処理は、システム制御部５０が、不揮発性メモリ１２１等の読み取り可能な記憶媒体に格納されたプログラムを実行することにより実現される。なお、図４の説明では、図３（Ａ）に示されるバックグラウンドアプリケーションリストがシステム制御部５０により管理され、フォアグラウンドで実行するアプリケーションとして電子書籍アプリケーションが選択される例について説明する。

【0033】

ステップＳ４０１で、システム制御部５０は、ユーザが選択したアプリケーションをフォアグラウンドで起動する。ユーザは、例えば、図２（Ａ）に示すような選択画面で複数のアプリケーションの中から１つのフォアグラウンドで実行するアプリケーションを選択する。ここで選択されるフォアグラウンドアプリケーションは、バイタルサイン計測アプリケーションとは異なるアプリケーションであり、例えば、電子書籍アプリケーションが選択されたものとする。

【0034】

ステップＳ４０２で、システム制御部５０は、バックグラウンドアプリケーションリストにバックグラウンドでの動作が有効になっているアプリケーションがあるか否かを確認する。バックグラウンドアプリケーションリストにバックグラウンドでの動作が有効になっているアプリケーションがある場合は、ステップＳ４０３に進む。一方、バックグラウンドアプリケーションリストにバックグラウンドでの動作が有効になっているアプリケーションがない場合は、本処理を終了し、ステップＳ４０１で選択されたフォアグラウンドのアプリケーションのみを実行する。図３（Ａ）の例では、バックグラウンド動作ＯＮのアプリとしてバイタルサイン計測アプリケーションが登録されている。図３（Ａ）のようにバックグラウンドアプリケーションリストにバイタルサイン計測アプリケーションが登録されている場合は、ステップＳ４０３に進む。

【0035】

ステップＳ４０３で、システム制御部５０は、ステップＳ４０１で選択されたフォアグラウンドアプリケーションに関する情報を取得する。フォアグラウンドアプリケーションに関する情報は、フォアグラウンドで実行するアプリケーションの利用状態が、バイタルサイン計測アプリケーシをバックグラウンドで起動するのに適した利用状態であるか判定するための情報である。本実施例においてシステム制御部５０はフォアグラウンドアプリケーション情報として、フォアグラウンドアプリケーションのカテゴリ、フォアグラウンドアプリケーションの平均的な利用時間を取得する。なお、フォアグラウンドアプリケーションのカテゴリ、平均的な利用時間の情報はシステム制御部５０が管理している。さらに、システム制御部５０は、ステップＳ４０１で選択されたフォアグラウンドアプリケーションに関する情報として、フォアグラウンドアプリケーションを実行中の携帯端末１００の現在の場所情報を取得する。場所情報は、携帯端末１００に内蔵されている不図示のＧＰＳ等から取得する。

【0036】

ステップＳ４０４で、システム制御部５０は、ステップＳ４０１で選択されたフォアグラウンドで実行するアプリケーションの利用状態が、バイタルサイン計測アプリケーシをバックグラウンドで起動するのに適した利用状態であるか判定する。システム制御部５０は、ステップＳ４０３で取得したフォアグラウンドアプリケーションの情報が、バックグラウンドでのバイタルサイン計測アプリケーションの起動条件を満たしているかを判定する。

【0037】

本実施例では、下記の４つの項目で示される起動条件により、フォアグラウンドアプリケーションの利用状態がバックグラウンドでのバイタルサイン計測アプリケーションの起動に適しているかを判断する例について説明する。
（１）フォアグラウンドアプリのカテゴリが合致しているか。
（２）平均利用時間が閾値以上か。
（３）過去の適性度は閾値以上か。
（４）実行場所が合致しているか。

【0038】

（１）では、現在フォアグラウンドで実行しているアプリケーション（以下、フォアグラウンドアプリとも記す）が、バックグラウンドでアプリケーションを実行可能と指定されているアプリケーションであるか判定する。例えば、音楽カテゴリに属する音楽を聴くためのアプリケーションの利用時は、ユーザは画面（表示部１０９）を見ずに利用する場合が多く、撮像部１１０で画面を見ているユーザを撮像してバイタルサイン計測に必要な画像を取得することができない恐れがある。そのため、バイタルサイン計測に必要な画像を撮像できる場合にのみ、バックグラウンドでバイタルサイン計測アプリケーションを実行する。すなわち、ユーザが携帯端末１００の画面（表示部１０９）を見て利用することが想定されている所定のカテゴリのアプリケーションがフォアグラウンドで実行されている場合にバックグラウンドでバイタルサイン計測アプリケーションを実行するよう制御する。具体的には、システム制御部５０は、フォアグラウンドアプリのカテゴリがバックグラウンド実行アプリケーションリストのカテゴリ３０４に含まれているかを判定する。例えば、システム制御部５０は、ステップＳ４０１で起動されたアプリケーションが電子書籍アプリケーションであった場合、バックグラウンド実行アプリケーションリストのカテゴリ３０４にフォアグラウンドアプリが含まれていると判定する。

【0039】

（２）では、フォアグラウンドアプリの平均使用時間が、該フォアグラウンドアプリに対応するバックグラウンドアプリケーションの平均使用時間以上であるか判定する。バイタルサイン計測には所定の計測時間が必要であり、フォアグラウンドでのアプリケーションの利用が計測時間未満である場合は、計測が失敗してしまう恐れがある。そのため、フォアグラウンドアプリの平均使用時間がバイタルサイン計測の平均的な計測時間以上である場合にのみ、バックグラウンドでバイタルサイン計測アプリケーションを実行する。具体的には、システム制御部５０は、フォアグラウンドアプリの平均使用時間がバックグラウンド実行アプリケーションリストの時間条件３０３の条件を満たすか判定する。例えば、システム制御部５０は、フォアグラウンドアプリである電子書籍アプリケーションの平均使用時間が２０分であった場合、バイタルサイン計測アプリケーションの時間条件３０３である２分以上を満たしていると判定する。

【0040】

（３）では、フォアグラウンドアプリがバックグラウンドでバイタルサイン計測アプリケーションを実行する適性のあるアプリケーションであるかを判定する。具体的には、システム制御部５０は、バックグラウンド実行アプリケーションリストにおいてフォアグラウンドアプリに対応する過去の適性度３０５の数値が所定の閾値以上であるか判定する。例えば適性度の閾値が０．５であった場合、フォアグラウンドアプリである電子書籍アプリケーションの過去の適性度３０５は０．７であるため、閾値以上であると判定する。

【0041】

（４）では、携帯端末１００のある場所がバイタルサイン計測アプリケーションで指定された計測場所の範囲に含まれているか判断する。具体的には、システム制御部５０は、現在携帯端末１００が存在する場所がバックグラウンド実行アプリケーションリストの実行場所３０２に含まれているか判定する。例えば、バックグラウンド実行アプリケーションリストの実行場所３０２に自宅が含まれている場合において、携帯端末１００の現在の位置情報が自宅のある場所を示している場合、携帯端末１００が実行場所３０２の範囲に含まれていると判定する。

【0042】

本実施例では、以上の４つの項目について全ての条件を満たす場合に、システム制御部５０は、フォアグラウンドで実行中のアプリケーションが、バイタルサイン計測アプリケーシをバックグラウンドで起動するのに適したアプリケーションであると判定する。フォアグラウンドアプリがバイタルサイン計測アプリケーシをバックグラウンドで起動するのに適したアプリケーションであると判定された場合は、ステップＳ４０５に進む。一方、フォアグラウンドアプリがバイタルサイン計測アプリケーシをバックグラウンドで起動するのに適したアプリケーションでない場合は、本処理を終了し、フォアグラウンドのアプリケーションのみを実行する。なお、本実施例ではステップＳ４０４で４つの項目で判定を行う例を説明したが、これに限られるものではなく、４つの項目のうちの一部で判定を行ってもよいし、他の条件を加えて判定を行ってもよい。また、ステップＳ４０４での判定項目に応じて、ステップＳ４０３で収集する情報を変更してよい。

【0043】

ステップＳ４０５～Ｓ４０７では、撮像部１１０を使って被写体となるユーザの状態と環境光の状態を解析し、バックグラウンドでのバイタルサイン計測アプリケーションの実行に適しているかを判断する。ステップＳ４０５で、システム制御部５０は、撮像部１１０を起動し、携帯端末１００のユーザの画像を所定時間（例えば１０秒間）撮影し、撮影画像を取得する。

【0044】

ステップＳ４０６で、システム制御部５０は、ステップＳ４０５で取得した画像を解析し、環境適性情報を取得する。なおシステム制御部５０は、画像に加えて画像を撮像した際の情報を利用してもよい。環境適性情報は、撮影した被写体の状態や撮影環境がバックグラウンドでのアプリケージョンの実行、すなわちバイタルサイン計測に適した状態であるかを判定するための評価情報である。環境適性情報には、被写体特性情報（被写体情報）と環境光特性情報（環境光情報）が含まれる。被写体特性情報は、被写体となるユーザと携帯端末１００の位置関係、該位置関係に起因するユーザの顔のサイズ、ユーザの顔の向きなどのユーザの姿勢、これらの位置・姿勢の変化、ユーザの表情の変化等、被写体の状態に関する情報である。環境光特性情報は、被写体であるユーザの明るさで示される撮影時の環境光の明るさ、色温度、ユーザによる光の反射状態、環境光の明るさの変化等、環境光に関する情報である。本実施例では、被写体特性情報として、（１）顔領域の適性度、（２）被写体の変動適性度を、また、環境光特性情報として、（３）環境光の照度適性度、（４）鏡面反射の適性度、（５）環境光の変動適性度を算出する例について説明する。各適性度はいずれも０～１の数値として算出する。なお、これらは環境適性情報の一例であり、バイタルサイン計測に適した状態であるか否かを判定するのに適した指標であれば他の指標であってもよい。

【0045】

環境適性情報の適性度の算出方法について図５および図６を用いて説明する。図５は、環境適性情報の適性度について説明する図である。図６は、適性度の算出特性を示す図である。撮影画像５００は、ステップＳ４０５において撮像部１１０で撮影された携帯端末１００のユーザの画像である。システム制御部５０は、顔、目、鼻、口の位置に基づき、適性度の取得領域を設定する。具体的には、システム制御部５０は、まず認識処理部１０４にユーザの顔中心位置および目、鼻、口の位置を検出させる。そして、検出された顔、目、鼻、口の位置に基づき、適性度を取得する複数の領域枠を設定する。顔領域枠５０１および顔領域枠５０２は、被写体（ユーザ）の顔領域を示している。例えば、認識処理部１０４により検出された顔、目、鼻、口の位置に基づき、顔領域枠５０１は右頬、顔領域枠５０２は左頬のあたりに設定される。背景領域枠５０３は被写体の右耳の右上の背景領域、背景領域枠５０４は被写体の右耳の右下の背景領域、背景領域枠５０５は被写体の左耳の左上の背景領域、背景領域枠５０６は被写体の左耳の左下の背景領域に設定される。

【0046】

被写体特性情報の（１）顔領域の適性度は、設定した顔領域枠５０１および顔領域枠５０２に顔領域が含まれている程度を示す評価値である。顔領域の適性度により、被写体のなるユーザの位置姿勢等の状態がバイタル計測のための撮影に適した状態であるか評価される。本実施例では被写体の状態がバイタル計測の実行に適しているかを判定するため、バイタルサイン計測の対象となる特定の領域（例えば、顔領域）が撮像可能かを特定の領域の露出割合から評価する。

【0047】

まず、システム制御部５０は、設定した顔領域枠（５０１，５０２）に対して肌の色の領域が占める割合を肌面積割合として算出する。例えばモノや髪の毛などで顔領域が隠れている場合には肌面積割合は小さくなり、隠れていない場合は大きな値となる。次に、システム制御部５０は、肌面積割合に基づいて顔領域適性度を算出する。顔領域適性度の算出は、例えば図６（Ａ）に示される顔領域適性度グラフの特性を用いて行われる。顔領域適性度グラフは、横軸が入力の肌面積割合を、縦軸が出力される顔領域適性度を示している。肌面積割合が０から第１の割合の間は顔領域適性度が０となり、肌面積割合が第１の割合から第１の割合より高い第２の割合の間は肌面積割合が増えるほど顔領域適性度も高くなり、肌面積割合が第２の割合以上である場合には顔領域適性度は１となる。このように肌面積割合が高いほど顔領域適性度の数値も高くなり、バイタルサイン計測に適した状態となる。一方、モノや髪の毛などで顔領域の多くが隠れている場合はバイタルサインの計測に適さないため、顔領域適性度は低くなる。

【0048】

被写体特性情報の（２）被写体の変動適性度は、被写体の動きを示す評価値である。被写体の変動適性度は、例えば、表情変化量、顔向き変化量、背景変化量から算出する。表情変化量は、被写体（ユーザ）の表情が時間的に変化すると大きくなり、表情変化がない場合は小さくなる指標である。システム制御部５０は、認識処理部１０４で検出した目、鼻、口の位置の相対関係の時間変化量から表情変化量を算出する。目、鼻、口の位置の相対的な時間変化量が大きい場合に、表情変化量が大きくなる。

【0049】

顔向き変化量は、被写体（ユーザ）の顔の向きが時間的に変化すると大きくなり、表情変化がない場合は小さくなる指標である。システム制御部５０は、認識処理部１０４で検出した目、鼻、口の位置から顔の向きを算出し、顔の向きの時間変化量から顔向き変化量を算出する。顔向きの時間変化量が大きくなると顔向き変化量が大きくなり、顔向きが一定の場合には顔向き変化量は小さくなる。

【0050】

背景変化量は、被写体（ユーザ）の背景が時間的に変化すると大きくなり、背景の変化が少ない場合は小さくなる指標である。システム制御部５０は、背景領域枠５０３～５０６の輝度の時間変動量から背景変化量を算出する。背景領域の輝度の時間変化量が大きい場合は、背景変動量が大きくなり、背景領域の輝度が一定の場合は小さくなる。

【0051】

図６（Ｂ）は、表情変化量、顔向き変化量、背景変化量の時間変化の例を示す被写体変動グラフである。被写体変動グラフは、横軸が時間を、縦軸が表情変化量、顔向き変化量、背景変化量を示している。システム制御部５０は、表情変化量、顔向き変化量、背景変化量の３種の変化量の何れかが、所定時間間隔ΔＴにおいて閾値Ｔｈ１より大きくなった時間の割合を被写体変動割合として算出する。所定時間間隔ΔＴは、例えばＴ２－Ｔ１である。

【0052】

次に、システム制御部５０は、算出した被写体変動割合に基づいて被写体変動適性度を算出する。被写体変動適性度の算出は、例えば図６（Ｃ）に示される被写体変動適性度グラフの特性を用いて行われる。被写体変動適性度グラフは、横軸が入力の被写体変動割合を、縦軸が出力される被写体変動適性度を示している。被写体変動割合が０の場合は被写体変動適性度が１となり、被写体変動割合が０から第１の割合の間は被写体変動割合が大きくなるにつれて被写体変動適性度が低くなる。そして、被写体変動割合が第１の割合を超えると被写体変動適性度が０となる。このように、被写体の変動割合が小さい場合に被写体変動適性度は高くなり、バイタルサイン計測に適した状態となる。一方、被写体の動きが大きい場合はバイタルサインの計測に適さないため、被写体変動適性度は低くなる。

【0053】

被写体特性情報の（３）環境光の照度適性度は、被写体の顔領域の明るさを示す評価値である。システム制御部５０は、被写体の照度に基づいて照度適性度を算出する。具体的には、まずシステム制御部５０は、顔領域枠５０１および顔領域枠５０２の照度を撮影画像もしくは撮像部１１０の露出パラメータから算出する。

【0054】

次に、システム制御部５０は、算出した顔領域枠５０１および顔領域枠５０２の照度に基づいて照度適性度を算出する。照度適性度の算出は、例えば図６（Ｄ）に示される照度適性度グラフの特性を用いて行われる。照度適性度グラフは、横軸が入力の照度を、縦軸が出力される照度適性度を示している。入力の照度は、例えば顔領域枠５０１および顔領域枠５０２の照度の平均である。照度が０から第１の値の間は照度適性度が０となり、照度が第１の値から第１の値より高い第２の値の間は照度が高くなるにつれ照度適性度も高くなる。照度が第２の値から第２の値より高い第３の値の間は照度適性度が１となり、照度が第３の値から第３の値より高い第４の値の間は照度が高くなるにつれ照度適性度は低くなる。照度が第４の値以上である場合には照度適性度は０となる。このように、暗すぎずなおかつ明るすぎない照度の場合に照度適性度は高くなり、バイタルサイン計測に適した状態となる。一方、暗すぎる場合や明るすぎる場合はバイタルサインの計測に適さないため、照度適性度は低くなる。

【0055】

被写体特性情報の（４）鏡面反射の適性度は、被写体の顔領域の反射を示す評価値である。システム制御部５０は、被写体の顔領域の鏡面反射画素の割合から鏡面反射の適性度を算出する。鏡面反射画素は、例えば、顔領域の輝度の平均値よりも所定の比率以上に高輝度になっている画素である。なお、鏡面反射画素を所定の輝度以上になっている画素としてもよい。具体的には、まずシステム制御部５０は、顔領域枠５０１および顔領域枠５０２の輝度の平均値を算出する。そしてシステム制御部５０は、顔領域枠５０１および顔領域枠５０２において、算出した平均値よりも所定の比率以上に高輝度になっている画素の割合を鏡面反射割合として算出する。

【0056】

次に、システム制御部５０は、算出した鏡面反射割合に基づいて鏡面反射適性度を算出する。鏡面反射適性度の算出は、例えば図６（Ｅ）に示される鏡面反射適性度グラフの特性を用いて行われる。鏡面反射適性度グラフは、横軸が入力の鏡面反射割合を、縦軸が出力される鏡面反射適性度を示している。鏡面反射割合が０から第１の割合の間は鏡面反射適性度が１となり、鏡面反射割合が第１の割合から第１の割合より高い第２の割合の間は鏡面反射割合が大きくなるにつれ鏡面反射適性度が低くなる。そして、鏡面反射割合が第２の割合を超えると鏡面反射適性度は０となる。このように、鏡面反射割合が小さい場合に鏡面反射適性度は高くなり、バイタルサイン計測に適した状態となる。一方、鏡面反射している画素はバイタルサイン計測には向かないため、鏡面反射割合が高い場合は鏡面反射適性度が低くなる。

【0057】

被写体特性情報の（５）環境光の輝度変化適性度は、被写体の顔領域の輝度の時間変化を示す評価値である。システム制御部５０は、まず、顔領域枠５０１および顔領域枠５０２の輝度の時間変化量を算出する。システム制御部５０は、算出した輝度の時間変化量が所定時間間隔ΔＴにおいて閾値Ｔｈ２より大きくなった時間の割合を輝度変動割合として算出する。図６（Ｆ）は、輝度変化量の時間変化の例を示す輝度変動グラフである。輝度変動グラフは、横軸が時間を、縦軸が輝度変化量を示している。所定時間間隔ΔＴは、例えばＴ４－Ｔ３である。

【0058】

次に、システム制御部５０は、算出した輝度変動割合に基づいて輝度変化適性度を算出する。輝度変化適性度の算出は、例えば図６（Ｇ）に示される輝度変化適性度グラフの特性を用いて行われる。輝度変化適性度グラフは、横軸が入力の輝度変動割合を、縦軸が出力される輝度変化適性度を示している。輝度変動割合が０の場合の輝度変化適性度は１であり、輝度変動割合が０から第１の割合の間は輝度変動割合が大きくなるにつれ輝度変化適性度は低くなる。そして、輝度変動割合が第１の割合を超えると輝度変化適性度は０となる。このように、輝度変動割合が小さい場合に輝度変化適性度は高くなり、バイタルサイン計測に適した状態となる。一方、屋外などで環境光の変化が激しい場合など輝度変動割合が大きい場合はバイタルサインの計測に適さないため、輝度変化適性度が低くなる。

【0059】

ステップＳ４０６では、以上のように（１）顔領域の適性度、（２）被写体の変動適性度、（３）環境光の照度適性度、（４）鏡面反射の適性度、（５）環境光の変動適性度を算出することで環境適性情報を取得する。ステップＳ４０７で、システム制御部５０は、環境適性情報に基づいて総合適性度を算出する。具体的にはシステム制御部５０は、ステップＳ４０６で算出した（１）～（５）の各適性度を全て乗算し、その結果を総合適性度とする。ステップＳ４０８で、システム制御部５０は、総合適性度が所定の閾値以上であるか判定する。総合適性度が所定の閾値以上である場合はバイタルサインの計測に適した環境であるため、ステップＳ４０９に進む。一方、総合適性度が閾値未満の場合はバイタルサインの計測には適さない環境であるため本処理を終了し、Ｓ４０１で選択されたフォアグラウンドのアプリケーションのみを実行する。

【0060】

ステップＳ４０９で、システム制御部５０は、バックグラウンドアプリケーションであるバイタルサイン計測アプリケーションの実行をユーザに提案する表示を表示部１０９に行う。図２（Ｄ）は、バイタルサイン計測アプリケーションのバックグラウンドでの実行を提案する画面の例を示す図である。フォアグラウンドで実行中のアプリケーションである電子書籍アプリケーションの画面２１０に重ねて、バイタルサイン計測を実行することを提案する提案アイコン２１１を表示する。ユーザにより提案アイコン２１１が押下されると、バックグラウンドでバイタルサイン計測アプリケーションが実行される。

【0061】

ステップＳ４１０で、システム制御部５０は、バックグラウンドでのバイタルサイン計測を実行する指示がされたかを判定する。具体的にはシステム制御部５０は、ユーザによって提案アイコン２１１が押下されたか否かにより、バックグラウンドでのバイタルサイン計測を実行する指示がされたかを判定する。ユーザによって提案アイコン２１１が押下され、バイタルサイン計測の実行が指示された場合は、ステップＳ４１１に進む。一方、提案アイコン２１１が押下されなかった場合は、ステップＳ４１２に進む。

【0062】

ステップＳ４１１で、システム制御部５０は、バックグラウンドでバイタルサイン計測アプリケーションを起動し、バイタルサイン計測を実行する。ステップＳ４１２で、システム制御部５０は、ステップＳ４０７で算出した環境適性情報に基づいた総合適性度をバックグラウンドアプリケーションリストの適性度３０５に反映して記録する。具体的には、システム制御部５０は、バックグラウンドアプリケーションリストに記録されている過去の適性度と今回ステップＳ４０７で新たに算出した総合適性度との平均値を算出し、算出した平均値を新たな総合適性度として更新し記録する。

【0063】

以上説明した通り、本実施例では、フォアグラウンドアプリ実行時に、フォアグラウンドアプリに関する情報とユーザを撮影して得た環境適性情報に基づき、バックグラウンドでバイタルサイン計測アプリケーションを実行可能か判断する。これにより、ユーザ自身が操作によってバイタルサイン計測アプリケーションを起動し、計測を実行する手間を省くことが可能となる。また、バックグラウンドでのバイタルサイン計測アプリケーションの実行に適していると判断した場合にのみバイタルサイン計測を実行するため、無駄な電力や処理負荷をかけることなく実行することが可能となる。

【0064】

なお、本実施例では、バックグラウンドで実行するアプリケーションとしてバイタルサイン計測アプリケーションを例に説明したが、携帯端末１００で撮影した画像を利用するアプリケーションであればどのようなアプリケーションであっても構わない。例えば、ユーザの姿勢を解析するアプリケーションやストレス度を解析するアプリケーションなど、ユーザの状態を解析するアプリケーションに適用することも可能である。

【0065】

また、本実施例では、バックグラウンドで実行可能か判断するためにステップＳ４０３で取得するフォアグラウンドアプリケーション情報として、アプリケーションのカテゴリと平均利用時間等を取得した。しかし、取得するフォアグラウンドアプリケーション情報はこれらに限定するものではなくフォアグラウンドのアプリケーションに関する情報であればどのような情報を利用してもよい。例えば、カテゴリではなく、フォアグラウンドのアプリケーションごとのＩＤ等の識別情報で判断してもよいし、フォアグラウンドのアプリケーションを実行した際の携帯端末１００の平均的な動きを示す情報で判断する処理を加えても構わない。例えば、ゲームのアプリケーションのようにアプリケーションを利用する際に端末を大きく動かすようなアプリケーションの場合は、バックグラウンドでバイタルサイン計測を実行するのに適さないと判定するような制御をすることも可能である。

【0066】

また、バックグラウンドアプリケーションリストで管理される情報も取得するフォアグラウンドアプリケーション情報に合わせて変更してよい。例えば、フォアグラウンドアプリケーション情報としてアプリケーションのＩＤを取得する場合には、バックグラウンドアプリケーションリストではカテゴリ３０４の代わりにまたはカテゴリ３０４に加えてアプリケーションのＩＤを管理する。また、フォアグラウンドアプリケーション情報として携帯端末１００の動き情報を取得する場合には、バックグラウンドアプリケーションリストでも動き情報を管理する。これらのバックグラウンドアプリケーションリストは、ステップＳ４０４の判定等で利用される。

【0067】

本実施例では、ステップＳ４０６で環境適性情報として、環境光の照度適性度、鏡面反射の適性度、環境光の変動適性度を取得する例を説明したが、これに限られるものではない。例えば、環境光の色温度や、環境光の角度（斜光の度合いなど）からバイタルサイン計測に向いている条件かを判断する構成をとることもできる。この場合、環境光の色温度が極端に高いか、低い場合は正しくバイタルサイン計測ができなくなる可能性があるためバックグラウンド実行しないように制御する。また強い斜光の場合もユーザの顔領域枠５０１と顔領域枠５０２で極端に明るさが異なってくる可能性があり、バイタルサイン計測の精度が悪化する恐れがあるためバックグラウンド実行しないように制御する。

【0068】

また、本実施例では、バックグラウンド実行に適していると判断した場合に、ステップＳ４０９でユーザに実行を提案する例について説明したが、ステップＳ４０９とステップＳ４１０を省略してユーザに提案せずに自動で実行する構成をとることも可能である。この場合、よりユーザの手間を低減させることが可能である。

【0069】

また、本実施例では、バックグラウンドアプリケーションリストに登録されるアプリケーションが１つの場合の例について説明したが、バックグラウンドアプリケーションリストには複数のアプリケーションが登録されていてもよい。バックグラウンドアプリケーションリストには複数のアプリケーションが登録されている場合、複数のバックグラウンドアプリケーション候補から１つを選択してユーザに提案するような構成をとることが可能である。

【0070】

バックグラウンドアプリケーションリストに登録されるアプリケーションが複数の場合の例を図３（Ｂ）に示す。図３（Ｂ）の例では、バックグラウンドアプリ３０６として、顔画像からバイタルサイン検出を行うアプリケーション（ＡＰＰ＿００３）の他に、ＡＰＰ＿００２４とＡＰＰ＿００５５が登録されている。ＡＰＰ＿００２４は、指の画像からバイタルサイン検出を行うアプリケーションである。ＡＰＰ＿００５５は、利用者の姿勢の正しさを計測する姿勢計測アプリケーションである。

【0071】

指の画像からバイタルサイン検出を行うアプリケーションは、指を撮像部１１０に押し当てた状態で、例えば、図示しないＬＥＤ光を指に照射し、画像の指の輝度の時間変化量からバイタルサインを検出するアプリケーションである。指の画像からバイタルサイン検出を行う方法は顔画像からバイタルサイン検出を行う方法と比較して、ユーザの顔変動量が大きい場合や環境光の変化が大きい場合でも計測できるが、指を携帯端末に密着している状態で計測しなくてはならない。姿勢検出のアプリケーションは、ユーザの上半身の画像を取得し姿勢の正しさを評価・利用するアプリケーションである。ユーザの上半身の画像を利用するため、バックグラウンドで実行するためにはユーザの上半身が写るような状態で携帯端末を利用している必要がある。

【0072】

システム制御部５０は、バックグラウンドアプリケーションリストで３つのアプリケーションについて、実行場所３０２、カテゴリ３０４、時間条件３０３、適性度３０５を管理する。そしてシステム制御部５０は、フォアグラウンドアプリが起動されると、バックグラウンドアプリケーションリストに登録された複数のアプリケーションの中から、現在の状況で最もバックグラウンドでの実行に適したアプリケーションを選択する。具体的には、まずステップＳ４０４で現在実行中のフォアグラウンドアプリのバックグラウンドでの起動の対象のアプリケーションであるかを判定する。バックグラウンド起動の対象であると判定された場合に、Ｓ４０５～Ｓ４０８において各バックグラウンドアプリケーションの適性度を算出する。バックグラウンド実行に適しているかの判断条件は各アプリケーションよって異なり、各アプリケーションに含まれる利用環境判定プログラムを実行することで各バックグラウンドアプリケーションの適性度を算出する。例えば、指の画像からバイタルサイン検出を行うアプリケーションの場合は、携帯端末を手で保持しているかを携帯端末の動き情報や撮影画像から検出する。姿勢計測アプリケーションの場合は、上半身が撮影できる状態で携帯端末を利用しているかを撮影画像から検出する。このように、システム制御部５０は、各バックグランドアプリケーション候補の適性度を算出する処理を実行し、適性度に基づいて最もバックグラウンド実行に適したアプリケーションを選択する。そして、ステップＳ４０９では適性度が最も高いアプリケーションをユーザへ提案する。これにより、複数のバックグラウンド候補から最も現在の携帯端末１００の利用状況に適したアプリケーションをユーザに提案することが可能となり、ユーザの負荷を低減させることができる。また、ステップＳ４０９で適性度が最も高いアプリケーションのみをユーザに提示するのではなく、適性度が閾値以上であるアプリケーションをすべてユーザに提示して、ユーザが実行するアプリケーションを選択できるようにしてもよい。また、適性度が最も高いアプリケーションをユーザに提示するのではなく、適性度が高い順番に自動でバックグラウンドにおいてアプリケーションを実行するように制御することも可能である。

【0073】

（その他の実施例）
本発明は、上述の実施例の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

【0074】

以上、本発明の好ましい実施例について説明したが、本発明は、これらの実施例に限定されず、その要旨の範囲内で種々の変形および変更が可能である。

【符号の説明】

【0075】

５０ システム制御部
１０１ 光学系
１０２ 撮像部
１０４ 認識処理部
１０９ 表示部
１２１ 不揮発性メモリ
１２２ システムメモリ

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】