特許 7659614 携帯端末、動画像取得方法、および動画像取得プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2025-04-01

(45)【発行日】2025-04-09

(54)【発明の名称】携帯端末、動画像取得方法、および動画像取得プログラム

(51)【国際特許分類】

   H04N 23/611 20230101AFI20250402BHJP

   H04N 23/45 20230101ALI20250402BHJP

【ＦＩ】

H04N23/611

H04N23/45

【請求項の数】 14

(21)【出願番号】P 2023211600

(22)【出願日】2023-12-15

(62)【分割の表示】P 2019226162の分割

【原出願日】2019-12-16

(65)【公開番号】P2024023681

(43)【公開日】2024-02-21

【審査請求日】2023-12-15

(73)【特許権者】

【識別番号】000005049

【氏名又は名称】シャープ株式会社

(74)【代理人】

【識別番号】100147304

【弁理士】

【氏名又は名称】井上 知哉

(74)【代理人】

【識別番号】100148493

【弁理士】

【氏名又は名称】加藤 浩二

(72)【発明者】

【氏名】富澤 亮太

(72)【発明者】

【氏名】足立 佳久

(72)【発明者】

【氏名】奥村 哲也

(72)【発明者】

【氏名】岩井 敬文

(72)【発明者】

【氏名】小川 莉絵子

(72)【発明者】

【氏名】田中 怜

(72)【発明者】

【氏名】樋口 浩一

【審査官】▲うし▼田 真悟

(56)【参考文献】

【文献】特開２０１０－１６１７０４（ＪＰ，Ａ）

【文献】特開２０１１－０１９０５１（ＪＰ，Ａ）

【文献】特開２０１５－２０５０５０（ＪＰ，Ａ）

【文献】特開２０１９－１０６６９４（ＪＰ，Ａ）

【文献】特開２０１３－１９７６６３（ＪＰ，Ａ）

【文献】特開２０１７－１２０９４２（ＪＰ，Ａ）

【文献】特開２０１４－１８４００２（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ２３／４０－２３／７６

Ａ６１Ｂ ５／０２－ ５／０３

Ａ６１Ｂ ５／０６－ ５／２２

Ｇ０３Ｂ １５／００

Ｇ０６Ｔ ７／００

Ｈ０４Ｍ １／００

Ｈ０４Ｍ １／２４－１／８２

(57)【特許請求の範囲】

【請求項1】

第１状態の動画像を取得する第１撮像部と、
動画像を表示する表示部が向く側とは反対側を向くように設けられ、前記第１状態の動画像に比較して画質が良好な第２状態の動画像を取得する第２撮像部と、
前記第２撮像部によって取得された画像の所定領域に含まれている顔と記憶部に記憶されている認証用顔データの顔とが所定の判定基準の範囲内にあるか否かを判定する顔判定部と、
前記顔判定部が前記画像の前記所定領域に含まれている顔と前記認証用顔データの顔とが前記所定の判定基準の範囲内にあると判定したことを条件として、前記第２状態の動画像を前記第２撮像部に取得させる動画像取得部と、を備えた、携帯端末。

【請求項2】

前記所定領域に前記顔が含まれているか否かを特定可能な情報を報知部に報知させる報知制御部を備えた、請求項１に記載の携帯端末。

【請求項3】

前記報知制御部は、前記顔判定部が前記所定領域に前記顔が含まれていないと判定した場合に、移動情報を前記報知部に報知させ、
前記移動情報は、前記所定領域に前記顔が含まれるように前記顔および前記携帯端末の少なくともいずれか一方を移動させることを促す情報である、請求項２に記載の携帯端末。

【請求項4】

前記移動情報は、前記所定領域に前記顔が含まれるように前記顔および前記携帯端末の少なくともいずれか一方を前後方向へ移動させることを促す情報である、請求項３に記載の携帯端末。

【請求項5】

前記顔判定部は、前記所定領域に含まれている前記顔を含む顔領域の割合を特定し、前記顔領域の割合に応じて異なる前記移動情報を前記報知部に報知させる制御を前記報知制御部に実行させる、請求項３または４に記載の携帯端末。

【請求項6】

前記顔は、前記顔の少なくとも一部の体表を含む、請求項３～５のいずれかに記載の携帯端末。

【請求項7】

前記少なくとも一部の体表は、予め定められた特定部分の体表を含む、請求項６に記載の携帯端末。

【請求項8】

前記報知制御部は、前記報知部を有するウェアラブル装置へ前記移動情報を送信する、請求項３～７のいずれかに記載の携帯端末。

【請求項9】

前記報知部は、音発生部、前記携帯端末に設けられた振動部、および、前記携帯端末に設けられ、かつ、前記第２撮像部が向く側を向く発光部の少なくともいずれか１つを含む、請求項２～８のいずれかに記載の携帯端末。

【請求項10】

前記画質が良好な前記第２状態の動画像は、前記第１状態の動画像に比較して、シグナルノイズ比の値が高い状態の動画像、ダイナミックレンジの値が大きい状態の動画像、およびビット深度の値が大きい状態の動画像うちの少なくともいずれか１つを含む、請求項１～９のいずれかに記載の携帯端末。

【請求項11】

前記動画像に基づいて生体情報を取得する生体情報推定部をさらに備えた、請求項１～１０のいずれかに記載の携帯端末。

【請求項12】

前記生体情報は、前記顔の血管を流れる血液の脈波データを含む、請求項１１に記載の携帯端末。

【請求項13】

第１状態の動画像を取得する第１撮像部、および、動画像を表示する表示部が向く側とは反対側を向くように設けられ、前記第１状態の動画像に比較して画質が良好な第２状態の動画像を取得する第２撮像部のうち、前記第２撮像部によって取得された画像の所定領域に含まれる顔と記憶部に記憶されている認証用顔データの顔とが所定の判定基準の範囲内にあるか否かを判定するステップと、
前記判定するステップにおいて前記画像の前記所定領域に含まれている顔と前記認証用顔データの顔とが前記所定の判定基準の範囲内にあると判定されたことを条件として、前記第２状態の動画像を前記第２撮像部に取得させるステップと、を備えた、動画像取得方法。

【請求項14】

コンピュータを、
第１状態の動画像を取得する第１撮像部、および、動画像を表示する表示部が向く側とは反対側を向くように設けられ、前記第１状態の動画像に比較して画質が良好な第２状態の動画像を取得する第２撮像部のうち、前記第２撮像部によって取得された画像の所定領域に含まれている顔と記憶部に記憶されている認証用顔データの顔とが所定の判定基準の範囲内にあるか否かを判定する顔判定部、および、
前記顔判定部が前記画像の前記所定領域に含まれている顔と前記認証用顔データの顔とが前記所定の判定基準の範囲内にあると判定したことを条件として、前記第２状態の動画像を前記第２撮像部に取得させる動画像取得部、として機能させるための、コンピュータ読み取り可能な動画像取得プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、携帯端末、動画像取得方法、および動画像取得プログラムに関する。

【背景技術】

【0002】

近年、携帯端末を用いて動画像を取得する技術の開発が行われている。たとえば、特許文献１に開示されている技術によれば、携帯端末のユーザは、自身の顔の動画像を自身で取得する、いわゆる自撮りを行うことができる。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２０１０－１６１７０４号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、自撮りに使用される撮像部によって取得された動画像のシグナルノイズ比、ダイナミックレンジ、またはビット深度などの指標で表される動画像の画質が良好ではない場合がある。この場合、ユーザ自身の顔の鮮明な動画像を取得することができない。

【0005】

本開示は、上記の問題に鑑みなされたものである。本開示の一態様の目的は、ユーザ自身の顔の鮮明な動画像を取得することができる携帯端末、動画像取得方法、および動画像取得プログラムを提供することである。

【課題を解決するための手段】

【0006】

本開示の一態様の携帯端末は、撮像部によって取得された画像の所定領域に顔が含まれているか否かを判定する顔判定部と、前記所定領域に前記顔が含まれていると判定された場合に、第１状態の動画像および前記第１状態の動画像に比較して画質が良好な第２状態の動画像のうち、前記第２状態の動画像を前記撮像部に取得させる動画像取得部と、を備え、前記撮像部は、前記第１状態の動画像を取得する第１撮像部と、前記画像を表示する表示部が向く側とは反対側を向くように設けられ、前記第２状態の動画像を取得する第２撮像部と、を含み、前記顔判定部は、前記第２撮像部によって取得された前記画像のみに対して前記所定領域に前記顔が含まれているか否かを判定し、
前記動画像取得部は、前記顔判定部によって、前記第２撮像部によって取得された前記画像の前記所定領域に前記顔が含まれていると判定された場合に、前記第２撮像部に前記第２状態の動画像を取得させる。

【0007】

本開示の一態様の動画像取得方法は、撮像部によって取得された画像の所定領域に顔が含まれているか否かを判定するステップと、前記所定領域に前記顔が含まれていると判定された場合に、第１状態の動画像および前記第１状態の動画像に比較して画質が良好な第２状態の動画像のうち、前記第２状態の動画像を前記撮像部に取得させるステップと、を備え、前記撮像部は、前記第１状態の動画像を取得する第１撮像部と、前記画像を表示する表示部が向く側とは反対側を向くように設けられ、前記第２状態の動画像を取得する第２撮像部と、を含み、前記顔判定部は、前記第２撮像部によって取得された前記画像のみに対して前記所定領域に前記顔が含まれているか否かを判定し、前記取得させるステップにおいては、前記判定するステップにおいて、前記第２撮像部によって取得された前記画像の前記所定領域に前記顔が含まれていると判定された場合に、前記第２撮像部に前記第２状態の動画像を取得させる。

【0008】

本開示の一態様の動画像取得プログラムは、コンピュータを、撮像部によって取得された画像の所定領域に顔が含まれているか否かを判定する顔判定部、および、前記顔判定部が前記所定領域に前記顔が含まれていると判定した場合に、第１状態の動画像および前記第１状態の動画像に比較して画質が良好な第２状態の動画像のうち、前記第２状態の動画像を前記撮像部に取得させる動画像取得部、として機能させるための、動画像取得プログラムであって、前記撮像部は、前記第１状態の動画像を取得する第１撮像部と、前記画像を表示する表示部が向く側とは反対側を向くように設けられ、前記第２状態の動画像を取得する第２撮像部と、を含み、前記顔判定部は、前記第２撮像部によって取得された前記画像のみに対して前記所定領域に前記顔が含まれているか否かを判定し、前記動画像取得部は、前記顔判定部によって、前記第２撮像部によって取得された前記画像の前記所定領域に前記顔が含まれていると判定された場合に、前記第２撮像部に前記第２状態の動画像を取得させる。

【図面の簡単な説明】

【0009】

【図1】実施の形態１の携帯端末の正面図である。

【図2】実施の形態１の携帯端末の背面図である。

【図3】実施の形態１の携帯端末の機能ブロック図である。

【図4】実施の形態１の携帯端末を用いてユーザが自身の顔の画像を取得している状態を示す図であって、表示部に表示されているユーザの顔の画像中での位置を示す第１の図である。

【図5】実施の形態１の携帯端末を用いてユーザが自身の顔の画像を取得していている状態を示す図であって、表示部に表示されているユーザの顔の画像の中での位置を示す第２の図である。

【図6】実施の形態１の携帯端末の表示部に表示されている顔領域、所定領域、および画像全体の位置関係を説明するための第１の図である。

【図7】実施の形態１の携帯端末の表示部に表示されている顔領域、所定領域、および画像全体の位置関係を説明するための第２の図である。

【図8】実施の形態１の携帯端末の表示部に表示されている顔領域、所定領域、および画像全体の位置関係を説明するための第３の図である。

【図9】実施の形態１の携帯端末の制御部が実行する制御処理を説明するためのフローチャートである。

【図10】実施の形態１の携帯端末の報知部が音発生部である場合の携帯端末の移動を促す報知態様の一例を説明するためのデータテーブルを示す図である。

【図11】実施の形態１の携帯端末の表示部に表示された生体情報の表示態様の一例を説明するための図である。

【図12】実施の形態２の携帯端末が、第１撮像部によって取得されている動画像のシグナルノイズ比を増加させるために、表示部の明るさを増加させている状態を説明するための図である。

【図13】実施の形態２の携帯端末の制御部が実行する制御処理を説明するためのフロートである。

【図14】実施の形態３の携帯端末、ならびに、ウェアラブル装置の制御部および報知部を説明するための図である。

【発明を実施するための形態】

【0010】

以下、実施の形態の携帯端末、動画像取得方法、および動画像取得プログラムを、図面を参照しながら説明する。なお、各図面については、同一又は同等の要素には同一の符号が付されているため、重複する説明は繰り返さない。

【0011】

（実施の形態１）
図１～図１１を用いて、実施の形態１の携帯端末１００、動画像取得方法、および動画像取得プログラムを説明する。

【0012】

図１は、実施の形態１の携帯端末１００の正面図である。図２は、実施の形態１の携帯端末１００の背面図である。本実施の形態の携帯端末１００は、人が持ち運ぶことができる程度の大きさおよび重量を有している。携帯端末１００は、スマートフォン、タブレット、ノートパソコン、または、動画像取得用の専用端末等のいかなるものであってもよい。

【0013】

図１および図２から分かるように、本実施の形態の携帯端末１００は、概ね長方形の輪郭を有している。携帯端末１００は、正面および背面が対向する板形状を有している。本実施の形態の携帯端末１００は、片手で把持できる程度の大きさを有しているものであることが好ましい。

【0014】

図１に示されるように、携帯端末１００は、正面に表示部Ｄ、第１撮像部Ｃ１、および音発生部Ｓを備えている。表示部Ｄは、正面側に居るユーザに向かって画像を表示する。表示部Ｄは、液晶ディスプレイ等によって構成されている。表示部Ｄは、情報を報知する報知部Ｎの一例として機能する。

【0015】

第１撮像部Ｃ１は、正面側に居るユーザの画像を取得することができる。第１撮像部Ｃ１は、静止画像および動画像のそれぞれを取得するために用いられる。音発生部Ｓは、正面側に居るユーザに向かって音を発生する。音発生部Ｓは、スピーカ等によって構成されている。音発生部Ｓも、情報を報知する報知部Ｎの一例として機能する。

【0016】

図２に示されるように、携帯端末１００は、背面に第２撮像部Ｃ２および発光部Ｌを備えている。第２撮像部Ｃ２は、表示部Ｄが向く側とは反対側を向くように設けられている。そのため、第２撮像部Ｃ２は、背面側に居る人または背面側に位置付けられた風景の画像を取得することができる。第２撮像部Ｃ２も、第１撮像部Ｃ１と同様に、静止画像および動画像のそれぞれを取得するために用いられる。発光部Ｌは、ＬＥＤ（Light Emitting Diode）等によって構成されている。発光部Ｌも、情報を報知する報知部Ｎの一例として機能する。

【0017】

図２に示されているように、携帯端末１００は、その内部に振動部Ｖを備えている。振動部Ｖは、電力の供給によって振動する部材で構成されている。振動部Ｖも、情報を報知する報知部Ｎの一例として機能する。

【0018】

図３は、携帯端末１００の機能ブロック図である。図３から分かるように、携帯端末１００は、撮像部Ｃ、制御部１０、および報知部Ｎを備えている。

【0019】

撮像部Ｃは、第１撮像部Ｃ１および第２撮像部Ｃ２を含んでいる。第１撮像部Ｃ１および第２撮像部Ｃ２のそれぞれは、ＲＧＢカメラまたは赤外線カメラ等で構成されている。第２撮像部Ｃ２によって取得される画像のシグナルノイズ比（Ｓ／Ｎ）は、第１撮像部Ｃ１によって取得される画像のシグナルノイズ比に比較して大きい。

【0020】

したがって、第２撮像部Ｃ２は、第１撮像部Ｃ１に比較して鮮明な画像を取得することができる。シグナルノイズ比は、たとえば、画像の輝度のシグナルノイズ比であってもよく、また、画像の色成分のシグナルノイズ比であってもよい。なお、本明細書においては、画像は、静止画像および動画像の双方を含む。

【0021】

制御部１０は、ＣＰＵ（Central Processing Unit）６および記憶部５によって構成されている。記憶部５は、携帯端末１００の外部の記録媒体または携帯端末１００と通信可能なサーバからインストールされた動画像取得プログラムＰを記憶している。動画像取得プログラムＰは、制御部（コンピュータ）１０のうちのＣＰＵ６を、顔判定部１、動画像取得部２、報知制御部３、および生体情報推定部４として機能させるためのものである。

【0022】

ＣＰＵ６は、記憶部５に記憶された動画像取得プログラムＰの制御指令にしたがって、たとえば、第１撮像部Ｃ１および第２撮像部Ｃ２のいずれかに静止画像または動画像を取得させたり、報知部Ｎに情報を報知させたりする。動画像取得プログラムＰが実行する制御処理は後述される。

【0023】

前述のＣＰＵ６は、本開示における携帯端末動画取得方法の主体は、コンピュータとしての制御部１０を備えている。このコンピュータが動画取得プログラムを実行することによって、本開示における携帯端末または動画取得方法の主体の機能が実現される。コンピュータは、動画取得プログラムにしたがって動作するプロセッサを主なハードウェア構成として備える。プロセッサは、動画取得プログラムを実行することによって機能を実現することができれば、その種類は問わない。プロセッサは、半導体集積回路（ＩＣ）、またはＬＳＩ（Ｌａｒｇｅ Ｓｃａｌｅ Ｉｎｔｅｇｒａｔｉｏｎ）を含む１つまたは複数の電子回路で構成される。複数の電子回路は、１つのチップに集積されてもよいし、複数のチップに設けられてもよい。複数のチップは１つの装置に集約されていてもよいし、複数の装置に備えられていてもよい。プログラムは、コンピュータが読み取り可能なＲＯＭ、光ディスク、ハードディスクドライブなどの非一時的記録媒体に記録される。プログラムは、記録媒体に予め格納されていてもよいし、インターネット等を含む広域通信網を介して記録媒体に供給されてもよい。

【0024】

具体的には、ＣＰＵ６は、顔判定部１、動画像取得部２、報知制御部３、および生体情報推定部４を備えている。生体情報推定部４は、生体情報として、脈波データを取得する脈波取得部を含む。ただし、生体情報は、生体の動画像から取得される生体に関する情報であれば、いかなるのであってもよい。

【0025】

なお、制御部１０は、本実施の形態においては、携帯端末１００内に設けられている。しかしながら、制御部１０は、携帯端末１００に内蔵されておらず、後述されるようにインターネット等の電気通信情報網または無線通信手段を経由して通信可能に接続されたサーバに設けられていてもよい。

【0026】

報知部Ｎは、発光部Ｌ、音発生部Ｓ、振動部Ｖ、および表示部Ｄを含んでいる。報知部Ｎは、ユーザの顔が画像に含まれていることを特定可能な情報を報知する。報知部Ｎは、ユーザの顔が画像の所定領域に含まれているか否かを特定可能な情報を報知してもよい。ユーザの顔が画像に含まれていることを特定可能な情報は、後述される。また、報知部Ｎは、移動情報を報知する。この移動情報は、ユーザの顔が画像に含まれるようにユーザの顔および携帯端末１００の少なくともいずれか一方を移動させることをユーザに促すための情報である。たとえば、報知部Ｎは、ユーザＨの顔が画像に含まれていない場合に、ユーザの顔が画像に含まれるように携帯端末１００またはユーザの顔の移動させるべき方向をユーザに報知する。

【0027】

なお、報知部Ｎは、ユーザの顔が画像に含まれるか否かを報知する代わりに、ユーザの顔が画像の所定領域が含まれるか否かを報知してもよい。このことは、以下の報知部Ｎの動作の全てに適用される。なお、所定領域が画像の全体であってもよい。

【0028】

報知部Ｎは、ユーザの顔が表示部Ｄの中の所定の範囲内の領域に入るようにユーザが顔または携帯端末１００を相対的に近づけたり遠ざけたりすることを促すために、前後の移動方向をユーザに報知してもよい。この場合、報知部Ｎは、ユーザの顔または携帯端末１００の前後の移動方向を、ユーザの顔または携帯端末１００の上下左右の移動方向とともに報知してもよい。また、報知部Ｎは、ユーザの顔または携帯端末１００の上下左右の移動方向とは別に、ユーザの顔または携帯端末１００の前後の移動方向を報知してもよい。

【0029】

動画像から、たとえば、脈波を取得する場合には、画像の中の顔が大きいほうが脈波の取得に使用できる画素数が多いため、脈波のシグナルノイズ比が高い。たとえば、画像中において顔が大き過ぎると、顔判定部１が画像中の顔を顔であると認識できないおそれがある。したがって、報知部Ｎは、ユーザの顔の全体が所定の範囲、たとえば、表示部Ｄに表示される枠内に入るようにユーザに顔の移動を促す報知を実行することが好ましい。ただし、顔判定部１の構成によっては、ユーザの顔の一部が画像の中に含まれているだけであっても、たとえば、脈波を正確に取得できる場合がある、そのため、報知部Ｎは、顔の一部、たとえば、額等のみが所定の範囲に入るようにユーザに顔の移動を促す報知を実行してもよい。

【0030】

発光部Ｌは、点滅、点灯、または消灯等の視覚情報を報知する。本実施の形態においては、発光部Ｌは、たとえば、第１撮像部Ｃ１または第２撮像部Ｃ２によって取得された画像にユーザの顔が含まれている場合に、点灯する。この発光部Ｌの点灯が、第１撮像部Ｃ１または第２撮像部Ｃ２によって取得された画像にユーザの顔が含まれていることを特定可能な情報である。ただし、発光部Ｌは、第２撮像部Ｃ２によって画像を取得する場合に、鮮明な動画像を取得するためのフラッシュとして使用されてもよい。発光部Ｌの数は、特に限定されない。

【0031】

発光部Ｌは、ユーザの顔が画像に含まれていない場合に、点滅の速度によって、ユーザに携帯端末１００または顔を移動させる量を報知してもよい。たとえば、発光部Ｌは、単位時間当たりの点滅の回数が多いほど、より長い距離だけ携帯端末１００を移動させることをユーザに促すものであってもよい。また、携帯端末１００が、たとえば、４つの矢印形状の発光部Ｌを有している場合、点灯している発光部Ｌの矢印が指し示す方向が、ユーザの顔または携帯端末１００を移動させるべき方向を示すものであってもよい。この場合、移動させるべき方向は、ユーザに自身の顔を画像に含ませることを促す移動情報である。また、携帯端末１００が、たとえば、複数のＬＥＤが直線状に並んだ発光部Ｌを有している場合、複数のＬＥＤの発光する順序が、ユーザの顔または携帯端末１００を移動させるべき方向を示すものであってもよい。

【0032】

また、発光部Ｌは、生体情報推定部４によって推定された生体情報としての脈波データのリズム、ならびに、血圧および脈拍の大きさの程度のそれぞれを、発光部Ｌの発光色、もしくは、発光リズムで報知してもよい。さらに、携帯端末１００が複数の発光部Ｌを有している場合には、発光する発光部Ｌの数または発光のパターンを異ならせることによって、脈波データのリズム、ならびに、血圧および脈拍の大きさの程度のそれぞれを報知してもよい。

【0033】

音発生部Ｓは、音の種類、または、言葉を含む音声等の聴覚情報を報知する。たとえば、音発生部Ｓは、第１撮像部Ｃ１または第２撮像部Ｃ２によって取得された画像にユーザの顔が含まれている場合に、その旨の表現した言葉を含む音声を発生させる。この音発生部Ｓが発する音声が、第１撮像部Ｃ１または第２撮像部Ｃ２によって取得された画像にユーザの顔が含まれていることを特定可能な情報である。たとえば、音発生部Ｓは、「ＯＫ」等の言葉を含む音声を発生させることによって、ユーザの顔が画像に含まれていることをユーザに報知してもよい。

【0034】

また、音発生部Ｓは、ユーザの顔が画像に含まれていない場合に、ユーザに携帯端末またはユーザの顔を移動させるべき方向を表す言葉を含む音声を発生させてもよい。たとえば、音発生部Ｓは、ユーザの顔が画像に含まれていない場合に、「携帯端末１００をさらに右へ移動させて下さい」等の言葉を含む音声によって、画像にユーザの顔が含まれるように、携帯端末１００を移動させるべき方向をユーザに報知してもよい。

【0035】

なお、音発生部Ｓは、受話器として使用されるスピーカであってよい。音発生部Ｓの数も、発光部Ｌの数と同様に、特に限定されない。なお、音発生部Ｓは、生体情報推定部４によって推定された生体情報としての脈波データのリズム、ならびに、血圧および脈拍の数値のそれぞれを言葉で表した音声を発生してもよい。

【0036】

振動部Ｖは、自身の振動に起因した携帯端末１００の振動の大きさまたは振動の種類等の触覚情報を報知する。振動部Ｖは、電力によって携帯端末１００を振動させるものであれば、いかなるものであってもよい。たとえば、振動部Ｖは、携帯端末１００を振動させること、または、振動さないことによって、ユーザの顔が画像に含まれていることを報知してもよい。この振動部Ｖが振動すること、または、振動部Ｖが振動しないことが、第１撮像部Ｃ１または第２撮像部Ｃ２によって取得された画像にユーザの顔が含まれていることを特定可能な情報である。

【0037】

また、たとえば、振動部Ｖは、ユーザの顔が画像に含まれていない場合に、振動の大きさによって、画像に顔を含ませるために必要である、携帯端末１００の移動量をユーザに報知してもよい。たとえば、振動部Ｖは、その振動が大きいほど、より長い距離だけ携帯端末１００を移動させる必要があることをユーザに報知してもよい。

【0038】

振動部Ｖは、携帯端末１００がマナーモードに設定されているときに、音発生部Ｓで音が発生できない場合にだけ使用されてもよい。なお、振動部Ｖは、生体情報推定部４によって推定された生体情報としての脈波データのリズム、ならびに、血圧および脈拍の大きさの程度のそれぞれを、振動部Ｖの振動態様を異ならせることによって報知してもよい。

【0039】

表示部Ｄは、液晶ディスプレイ等によって構成されている。表示部Ｄは、文字、記号、矢印、または図形等の視覚情報を報知する。表示部Ｄは、たとえば、生体情報推定部４によって推定された生体情報、たとえば、脈波データを表示する。ただし、表示部Ｄも、文字、記号、矢印、または図形等の視覚情報によって、ユーザの顔が画像に含まれていることを報知してもよい。ユーザは、携帯端末１００の第２撮像部Ｃ１で自身を撮像する場合には、携帯端末１００の裏側に鏡を配置し、鏡に映る表示部Ｄを見れば、自身の顔が画像に含まれているか否かを把握することができる。

【0040】

発光部Ｌ、音発生部Ｓ、振動部Ｖ、および表示部Ｄのうちの複数の部分によって、前述の報知部Ｎによる報知が行われてもよい。たとえば、ユーザの顔が画像に含まれている場合に、音発生部Ｓが音を発すると同時に、振動部Ｖが携帯端末１００を振動させ、かつ、発光部Ｌを発光させてもよい。この場合、音発生部Ｓが発する音および発光部Ｌが発する光の双方が、第１撮像部Ｃ１または第２撮像部Ｃ２によって取得された画像にユーザの顔が含まれていることを特定可能な情報である。

【0041】

上記した本実施の形態の携帯端末１００においては、本実施の形態の携帯端末１００は、後述される生体情報推定部４に生体情報を推定させる場合には、顔判定部１および動画像取得部２を次のように動作させる。

【0042】

顔判定部１は、撮像部Ｃによって取得された画像にユーザ顔が含まれているか否かを判定する。本実施の形態においては、顔判定部１は、顔の特定の一部が画像に含まれていない場合に、顔が画像に含まれていないと判定する。ただし、顔判定部１は、顔の全体が画像に含まれていない場合に、顔が画像に含まれていないと判定してもよい。

【0043】

たとえば、脈波データを取得する場合、額の体表の動画像が特定の一部の画像として好ましいのであれば、顔の特定の一部は額の体表であってもよい。この場合、顔判定部１は、たとえば、目の位置等から額の体表の位置を特定し、額の体表が画像に含まれているか否かを判定してもよい。なお、体表は、主に皮膚を含む。

【0044】

動画像取得部２は、顔判定部１によって画像の所定領域に顔が含まれていると判定された場合に、撮像部Ｃに動画像を取得させる。動画像取得部２は、第１状態の動画像および第１状態の動画像に比較して画質が良好な第２状態の動画像のうち、第２状態の動画像を撮像部Ｃに取得させる。そのため、鮮明な顔Ｆの動画像を取得することができる。なお、所定領域は、画像の全体であってもよいが、画像のいずれか一部であってもよい。

【0045】

動画像取得部２は、顔判定部１によって画像に顔が含まれていると判定された場合に、画質が相対的に良好ではない画像および画質が相対的に良好な画像のうちの相対的に良好な画質を有する画像を撮像部Ｃに取得させるものであれば、いかなるものであってもよい。この場合、静止画像または動画像の画質が良好であるとは、高画質であることを意味し、具体的には、シグナルノイズ比が高いこと、ダイナミックレンジが広いこと、または、ビット深度が深いこと等を意味する。

【0046】

シグナルノイズ比は、雑音に対する信号の比である。シグナルノイズ比の数値が大きいほど、画質は、良好である。なお、ダイナミックレンジとは、撮像部の信号の再現能力を示す指標であり、再生可能な信号の最大値と最小値の比率である。ダイナミックレンジの値が大きいほど、画質は、良好である。ビット深度とは、デジタル信号の離散信号（標本）１つあたりの情報量、すなわち量子化ビット数を意味する。ビット深度の数値が大きいほど、画質は、良好である。つまり、画質が良好な第２状態の動画像は、第１状態の動画像に比較して、シグナルノイズ比の値が高い状態の動画像、ダイナミックレンジの値が大きい状態の動画像、およびビット深度の値が大きい状態の動画像うちの少なくともいずれか１つを含んでいればよい。

【0047】

なお、良好な画質は、高画質とも言う。なお、以下の実施の形態の説明においては、画質が良好であることは、シグナルノイズ比が高いことによって例示される。

【0048】

より具体的には、第１撮像部Ｃ１は、第１状態の動画像を取得する。第２撮像部Ｃ２は、シグナルノイズ比が第１状態に比較して高い第２状態の動画像を取得する。この条件の下で、制御部１０は、後述される生体情報推定部４に生体情報を推定させる場合に、つまり、顔判定部１によって画像に顔が含まれていると判定された場合に、動画像取得部２が第２撮像部Ｃ２に第２の状態の動画像を取得させる。

【0049】

そのため、動画像取得部２は、第１撮像部Ｃ１によって取得される第１状態の動画像に比較してシグナルノイズ比が高い第２状態の動画像を取得できる。言い換えると、表示部Ｄが向く側とは反対側を向くように設けられた第２撮像部Ｃ２を用いて、鮮明な顔Ｆの動画像を取得することができる。このとき、報知制御部３は、画像の所定領域に顔が含まれていると顔判定部１が判定した場合に、所定領域に顔が含まれていることを特定可能な情報を報知部Ｎに報知させる。ただし、報知制御部３は、顔判定部１が画像の所定領域に顔が含まれているか否かを特定可能な情報を報知部Ｎに報知させるものであれば、いかなるものであってもよい。したがって、報知制御部３は、画像に顔が含まれていないと顔判定部１が判定した場合に、画像に顔が含まれていないことを特定可能な情報を報知部Ｎに報知させてもよい。

【0050】

生体情報推定部４は、第１状態に比較してシグナルノイズ比が高い第２状態の動画像に基づいてユーザの生体情報を推定する。つまり、より鮮明な動画像を用いて、ユーザの生体情報を推定する。そのため、生体情報をより正確に取得することができる。本実施の形態においては、生体情報は、顔Ｆの血管を流れる血液の脈波データである。そのため、脈波データをより正確に取得することができる。

【0051】

正面カメラである第１撮像部Ｃ１および表示部Ｄの組合せは、ビデオ通話のために使用されるか、または、手鏡の代用品として使用される。この場合、ユーザは、表示部Ｄに表示されている通話の相手方の顔または自身の顔を認識することさえできればよい。

【0052】

そのため、第１撮像部Ｃ１は第２撮像部Ｃ２と同程度までシグナルノイズ比が高いことを必要とされない。一方、背面カメラである第２撮像部Ｃ２は、一般に、鮮明な画像を取得したい場合に使用される。そのため、第２撮像部Ｃ２は、第１撮像部Ｃ１よりも高いシグナルノイズ比を必要とされる。

【0053】

本実施の形態のように、動画像に基づいて脈波データを取得する場合には、撮像部Ｃは、脈波データのような小さな動画像の変化を検出できる程度の感度を必要とされる。そのため、シグナルノイズ比が低い第１撮像部Ｃ１では、正確な脈波データを取得することができない。

【0054】

したがって、脈波データを取得するときには、シグナルノイズ比が高い動画像を取得できる第２撮像部Ｃ２が用いられることが好ましい。このことを考慮して、本実施の形態においては、背面カメラとしての第２撮像部Ｃ２によって脈波データを取得するための動画像を取得する。その結果、鮮明な動画像に基づいて脈波データを正確に取得することができる。

【0055】

本実施の形態の携帯端末１００によれば、正面カメラとしての第１撮像部Ｃ１の性能を向上させる必要がない。そのため、携帯端末１００の製造コストを増加させることなく、正確な脈波データを取得することができる。

【0056】

図４および図５は、それぞれ、携帯端末１００を用いてユーザＨが自身の画像を取得しているときの、表示部Ｄに表示されているユーザＨの顔Ｆの画像Ｉの状態の一例および他の例を示す図である。

【0057】

図４および図５から分かるように、本実施の形態においては、ユーザＨは、背面に設けられたシグナルノイズ比が高い第２撮像部Ｃ２を用いて、自身の顔Ｆの鮮明な動画像を取得する。この場合、ユーザＨは、表示部Ｄに表示されている画像Ｉの中にユーザＨの顔Ｆが含まれている否かを把握することができない。

【0058】

したがって、図４に示されているように、表示部Ｄに表示されている画像Ｉの中にユーザの顔Ｆの一部が含まれていない場合もあれば、図５に示されているように、表示部Ｄに表示されている画像Ｉの中にユーザの顔Ｆの全体が含まれている場合もある。図４および図５のいずれも、顔Ｆの体表の特定部分ＳＰが画像Ｉに含まれている。

【0059】

したがって、顔Ｆの体表の特定部分ＳＰが画像Ｉに含まれている場合に、動画像取得部２によって取得された体表の特定部分ＳＰの動画像を用いて、生体情報推定部４が生体情報の一例の脈波データを取得することができる。

【0060】

図４および図５から分かるように、背面カメラとしての第２撮像部Ｃ２で脈波データを取得する場合、第２撮像部Ｃ２によって取得されている画像Ｉに顔Ｆが含まれているか否かを、ユーザＨ自身が表示部Ｄを見て確認することができない。しかしながら、本実施の形態の携帯端末１００によれば、顔判定部１が、背面カメラとしての第２撮像部Ｃ２で取得された画像Ｉに顔Ｆが含まれていると判定した場合に、たとえば、音発生部Ｓが音を発生させたり、発光部Ｌが点灯したりする。これによれば、顔Ｆが第２撮像部Ｃ２によって取得された画像Ｉに含まれていることをユーザＨに報知することができる。

【0061】

図６～図８は、いずれも、携帯端末１００の使用時の表示部Ｄの所定領域Ｘに表示されているユーザＨの顔Ｆを含む顔領域ＦＲの状態の一例を示す図である。

【0062】

顔判定部１は、図６～図８に示される画像Ｉのうちの所定領域Ｘに顔Ｆが含まれているか否かを判定する。それにより、顔判定部１が画像Ｉの所定領域Ｘに顔Ｆが含まれていないと判定した場合に、報知制御部３は、顔Ｆが画像Ｉの所定領域Ｘに含まれるように顔Ｆおよび携帯端末１００のうちの少なくともいずれか一方を移動させることを促す移動情報を報知部Ｎに報知させる。そのため、鮮明な顔Ｆの動画像をより確実に取得することができる。

【0063】

報知部Ｎによって報知される移動情報は、発光部Ｌの点滅であったり、音発生部Ｓによる音の発生であったりする。この場合、ユーザＨは、顔Ｆおよび携帯端末１００の少なくともいずれか一方を移動させる。それにより、動画像取得部２はユーザＨの顔Ｆが所定領域Ｘの中に含まれた状態で、ユーザＨの顔Ｆの動画像を取得することができる。そのため、鮮明な顔Ｆの動画像をより確実に取得することができる。

【0064】

報知部Ｎは、音発生部Ｓ、携帯端末１００に設けられた振動部Ｖ、または、携帯端末１００に設けられ、かつ、第２撮像部Ｃ２が向く側を向く発光部Ｌである。これらの部分の報知機能を用いれば、鮮明な顔Ｆの動画像をより確実に取得することができる。

【0065】

図６～図８において、顔判定部１は、画像Ｉの所定領域Ｘに含まれている顔Ｆを含む顔領域ＦＲの割合を特定する。それにより、顔判定部１は、顔領域ＦＲの割合に応じて異なる移動情報を報知部Ｎに報知させる制御を報知制御部３に実行させる。そのため、顔Ｆの位置をより確実に画像Ｉの中に含めることができる。

【0066】

なお、顔判定部１は、予め記憶部５に記憶されている認証用顔データの顔と画像Ｉの所定領域Ｘに含まれている顔Ｆとを比較する。それにより、顔判定部１は、画像Ｉに含まれている顔Ｆと認証用顔データの顔とが所定の判定基準の範囲内にあるか否かを判定する。この判定方法は、公知のものでよい。その結果、顔判定部１が第２撮像部Ｃ２によって取得された画像Ｉの所定領域Ｘに含まれる顔Ｆと認証用顔データの顔とが所定の判定基準の範囲内にあると判定したことを条件として、動画像取得部２は、第２撮像部Ｃ２に動画像を取得させる。つまり、制御部１０は、ユーザ認証が適正に実行された場合に、第２撮像部Ｃ２による動画像の取得を実行させる。これによれば、記憶部５認証用顔データが記憶されている人以外の人が携帯端末１００を用いて生体情報を推定することを防止することができる。

【0067】

図９を用いて、本実施の形態の携帯端末１００の制御部１０が実行する制御処理を説明する。

【0068】

まず、制御部１０は、操作部としても機能する表示部Ｄのタッチパネルのタッチ操作に基づいて、生体情報推定部４に生体情報を推定させるための動画像取得プログラムＰを起動させる。それにより、ステップＳ１において、制御部１０は、第２撮像部Ｃ２を起動させる。次に、ステップＳ２において、動画像取得部２は、第２撮像部Ｃ２に画像Ｉを取得させる。

【0069】

その後、ステップＳ３において、第２撮像部Ｃ２によって取得された画像Ｉにおける顔Ｆを検出する。顔検出は、公知の技術によって行われる。たとえば、顔の検出方法としては、パターンマッチングなどの機械学習の方法などがある。顔検出においては、顔の位置が検出されてもよく、検出された顔から個人が特定されてもよい。この場合には、動画像取得部２は、生体情報推定部４によって推定された生体情報とともに、顔の位置に関する情報、または、個人を特定する情報など表示部Ｄに表示してもよい。

【0070】

ステップＳ４において、顔判定部１は、検出された顔Ｆが画像Ｉの所定領域Ｘに含まれているか否かを判定する。ステップＳ４において、顔Ｆが画像Ｉの所定領域Ｘに含まれていないと判定されれば、ステップＳ５において、報知制御部３は、画像Ｉの所定領域Ｘに顔Ｆが含まれるように、たとえば、携帯端末１００を移動させることをユーザＨに促す移動情報を報知部Ｎに報知させる。

【0071】

ステップＳ５においては、たとえば、報知制御部３は、画像Ｉの所定領域Ｘに顔Ｆを含ませるために、携帯端末１００をいずれの方向に移動させればよいかを指示する言葉を含む音声を音発生部Ｓに発生させる制御を実行する。携帯端末１００をいずれの方向に移動させればよいかを指示する言葉としては、たとえば、図１０に示されるデータテーブルから選択される。

【0072】

ステップＳ４において、顔判定部１は、画像Ｉの所定領域Ｘに顔Ｆが含まれていると判定された場合には、ステップＳ６において、報知制御部３は、画像Ｉの所定領域Ｘに顔Ｆが含まれていることを報知部Ｎに報知させる。

【0073】

その後、ステップＳ７において、ユーザ認証が適正か否かを判定する。ステップＳ６において、ユーザ認証が適正であると判定されれば、制御部１０は、ステップＳ１の処理を実行する。具体的には、顔判定部１は、予め記憶部５に記憶されている認証用顔データと画像Ｉの所定領域Ｘに含まれている顔Ｆとを比較し、顔Ｆが認証用顔データと同一の範囲内にあるか否かを判定する。つまり、顔判定部１は、予め記憶されている認証用顔データと画像Ｉの所定領域Ｘに含まれている顔Ｆとが所定の判定基準の範囲内にあるかを判定する。動画像取得部２は、顔判定部１によって予め記憶されている認証用顔データと画像に含まれている顔Ｆとが所定の判定基準の範囲内にあると判定されたことを条件として、第２撮像部Ｃ２に動画像を取得させる。

【0074】

これによれば、記憶部５に記憶されている個人の顔Ｆ、たとえば、携帯端末１００のユーザＨまたは所有者以外の者が生体情報の推定を求めている場合に、その者の生体情報の推定を実行させないようにすることができる。

【0075】

ステップＳ７において、ユーザ認証が適正であると判定されれば、ステップＳ８において、動画像取得部２は、第２撮像部Ｃ２によって動画像を取得する。その後、動画像取得部２は、動画像を、たとえば、１０秒間取得する。ステップＳ９において、生体情報推定部４は、第２撮像部Ｃ２によって取得された動画像から生体情報、たとえば、脈波データを取得する。

【0076】

脈波データは、公知の技術によって取得される。たとえば、公知の脈波データの取得方法としては、独立成分分析または色素成分分離などが挙げられる。脈波データは、第２撮像部Ｃ２によって取得された動画像に含まれる顔Ｆの中で、主に体表が含まれている特定部分ＳＰの画像を使用して取得される。そのとき、顔Ｆの体表の特定部分ＳＰの体表の脈波データが取得される。

【0077】

次に、ステップＳ１０において、取得された脈波データに基づいて、生体情報としての血圧および脈拍等を算出する。

【0078】

ステップＳ１１において、生体情報推定部４は、表示部Ｄを起動する。その後、ステップＳ１２において、表示部Ｄに脈波データ、血圧および脈拍等を表示する。生体情報推定部４は、表示部Ｄに脈波データの波形、血圧の値、および脈拍の値を表示させると、音発生部Ｓに音を発生させることにより、生体情報の推定の終了を報知させる。

【0079】

（変形例）
顔Ｆが画像Ｉの所定領域Ｘに含まれているか否かを報知部Ｎによって報知する場合の報知態様は、脈波データを表示部Ｄに表示する場合の報知部Ｎの報知態様と異なっていてもよい。たとえば、顔Ｆが画像Ｉの所定領域Ｘに含まれているか否かを音発生部Ｓが報知する場合の音と脈波データを表示部Ｄが表示する場合に音発生部Ｓが発する音とが異なっていてもよい。また、顔Ｆが画像Ｉの所定領域Ｘに含まれているか否かを発光部Ｌが報知する場合の光の色または点滅パターンと脈波データを表示部Ｄが表示する場合の発光部Ｌの光の色または点滅パターンとが異なっていてもよい。

【0080】

さらに、顔Ｆが画像Ｉの所定領域Ｘに含まれているか否かを報知する場合の振動部Ｖの振動パターンと脈波データを表示部Ｄに表示する場合の振動部Ｖの振動パターンとが異なっていてもよい。加えて、顔Ｆが画像Ｉの所定領域Ｘに含まれているか否かを報知する場合には振動部Ｖを振動させる一方、脈波データを表示部Ｄに表示する場合には音発生部Ｓに音を発生させてもよい。

【0081】

顔Ｆが画像Ｉの所定領域Ｘに含まれていると判定された後、脈波データを表示部Ｄに表示するまで、顔Ｆが画像Ｉの所定領域Ｘに含まれていることを報知部Ｎに継続して報知させてもよい。たとえば、顔Ｆが画像Ｉの所定領域Ｘに含まれていると判定された後、脈波データを表示部Ｄに表示するまで、音発生部Ｓに同じ音を発生させ続けてもよい。

【0082】

また、顔Ｆが画像Ｉの所定領域Ｘに含まれていると判定され後、発光部Ｌを点灯させ、脈波データを表示部Ｄに表示する直前で、発光部Ｌを消灯させてもよい。さらに、顔Ｆが画像Ｉに含まれていると判定された後、脈波データを表示部Ｄに表示するまで、振動部Ｖを振動させ続けてもよい。

【0083】

報知部Ｎによる報知のタイミングは、いかなるものであってもよい。たとえば、顔Ｆが画像Ｉの所定領域Ｘに含まれていると判定されたときだけ、その旨の報知部Ｎによる報知を実行してもよい。また、顔Ｆが画像Ｉの所定領域Ｘに含まれていないと判定されているときだけ、その旨の報知部Ｎによる報知を行ってもよい。

【0084】

脈波データを推定するための第２撮像部Ｃ２による動画像の取得は、顔Ｆが画像Ｉの所定領域Ｘに含まれていると判定されると同時に開始されてもよい。また、脈波データを取得するための第２撮像部Ｃ２による動画像の取得は、顔Ｆが画像Ｉの所定領域Ｘに含まれていると判定されてから事前に設定された所定時間（たとえば、１秒）が経過した後に開始されてもよい。

【0085】

さらに、事前に指定された個人の顔Ｆが画像Ｉの所定領域Ｘに含まれていると判定されたときにのみ、第２撮像部Ｃ２によって動画像を取得してもよい。また、顔Ｆが画像Ｉの所定領域Ｘに含まれていないと判定されたときも、第２撮像部Ｃ２によって動画像を取得してもよい。その場合、顔Ｆが画像Ｉの所定領域Ｘに含まれていると判定された期間だけ、生体情報推定部４が脈波データを取得する。

【0086】

動画像取得部２が脈波データを推定するための動画像を取得している期間においても、顔判定部１が画像Ｉの所定領域Ｘに顔Ｆが含まれているか否かを判定してもよい。動画像取得部２が動画像を取得している期間において、画像Ｉの所定領域Ｘに顔Ｆが含まれていると判定されなくなった場合には、動画像取得部２は、動画像の取得を終了してもよい。

【0087】

この場合、動画像取得部２による動画像の取得している時間の長さは、所望時間よりも短くなる。この場合、生体情報推定部４は、所望時間より短くなった時間における脈波データを取得してもよい。また、生体情報推定部４は、所望時間より短くなった時間における脈波データを取得することなく、制御処理を終了してもよい。この場合、動画像取得部２は、画像Ｉを再度取得し、画像Ｉの所定領域Ｘに顔Ｆが含まれているか否かの判定を行い、所望時間分の動画像が取得できるまで、動画像取得部２による動画像の取得と顔判定部１による判定とを繰り返して行ってもよい。また、顔Ｆが画像Ｉの所定領域Ｘに含まれていないときに、報知制御部３は、その旨の報知を報知部Ｎにさせてもよい。

【0088】

動画像取得部２は、前述の所望時間が設定されていない場合に、動画像を取得し続けてもよい。たとえば、動画像取得部２が動画像を取得しながら、顔判定部１が、画像Ｉに顔Ｆが含まれているか否かの判定を行ってもよい。この場合、動画像取得部２は、顔判定部１が画像Ｉの所定領域Ｘに顔Ｆに含まれていると判定しなくなるまで、動画像を取得し続けてもよい。この場合、動画像取得部２が動画像の取得を終了させてから、生体情報推定部４が脈波データを推定してもよい。また、生体情報推定部４は、動画像取得部２が動画像を取得し続けている状態で、顔判定部１が画像Ｉの所定領域Ｘに顔Ｆが含まれていないと判定されるまでに取得された動画像を用いて、脈波データを取得してもよい。

【0089】

表示部Ｄは、生体情報推定部４が取得した脈波データだけでなく、脈波データから導出される生体関連情報を表示してもよい。生体関連情報には、前述の血圧、脈拍数および呼吸数などが含まれる。

【0090】

携帯端末１００が表示部Ｄを含んでいなくてもよい。この場合、生体情報推定部４が取得した生体情報、たとえば、脈波データ、および、脈波データから導出された生体関連情報を他の機器、たとえば、後述されるウェアラブル装置に表示させてもよい。

【0091】

また、生体情報推定部４が取得した生体情報および生体関連情報は、携帯端末１００の記憶部５から他の機器へ送信されてもよい。生体情報推定部４取得した生体情報および生体関連情報は、携帯端末１００から分離している記録媒体、または、携帯端末１００から分離可能な状態で記憶部５の一部となっている記録媒体に記憶されてもよい。

【0092】

また、携帯端末１００は、顔判定部１、動画像取得部２、報知制御部３、生体情報推定部４、および記憶部５の少なくともいずれか１つを含んでいなくてもよい。この場合、携帯端末１００に含まれていない部分は、携帯端末１００と通信可能な外部の機器に設けられている。この場合、携帯端末１００は、外部の機器との通信によって、顔判定部１、動画像取得部２、報知制御部３、生体情報推定部４、および記憶部５の全体の機能を発揮する。

【0093】

特に、携帯端末１００は生体情報推定部４を含んでいなくてもよい。この場合、携帯端末１００は、単に、動画像取得部２が第２撮像部Ｃ２を動作させて、顔Ｆが含まれた画像Ｉを取得し、画像Ｉを外部機器へ送信するものであってよい。この場合、携帯端末１００は、外部の生体情報推定部４から生体情報を受信し、表示部Ｄに生体情報を表示してもよい。これによれば、携帯端末１００の処理負担を軽減することができる。

【0094】

顔検出においては、顔領域ＦＲが検出される。検出された顔領域ＦＲと画角が適切な状態になるように設定された所定領域Ｘとの位置関係に応じて、報知部Ｎの報知のパターンを変更してもよい。たとえば、図６に示されるように、顔領域ＦＲが所定領域Ｘ内に含まれているときには、報知部Ｎは、その旨を報知パターンＡで報知する。図７に示されているように、顔領域ＦＲの一部が所定領域Ｘからはみ出しているが、顔領域ＦＲの全体が画角内、すなわち、画像Ｉに含まれているときには、報知部Ｎは、その旨を報知パターンＢで報知する。

【0095】

図８に示されるように、顔領域ＦＲの一部が画角、すなわち画像Ｉからはみ出しているときには、報知部Ｎは、その旨の報知パターンＣを報知する。たとえば、報知部Ｎが、振動部Ｖである場合、報知パターンＡ～Ｃは、次のようなものである。報知パターンＡは、振動部Ｖを振動させないパターンである。報知パターンＢは、振動部Ｖを断続的に振動させるパターンである。報知パターンＣは、振動部Ｖを連続的に振動させるパターンである。

【0096】

報知制御部３は、画像Ｉの中の顔Ｆの位置に応じて、顔Ｆを移動させるべき移動方向または携帯端末１００を移動させるべき移動方向を決定し、その移動方向を報知部Ｎに報知させてもよい。たとえば、音発生部Ｓは、移動方向に応じて異なる複数種類の音声の中から選択された１種類の音声を発生させてもよい。そのとき、音発生部Ｓが発生する音声は移動方向を表現した言葉を含んでいてもよい。

【0097】

音発生部Ｓが携帯端末１００とは異なる場所に設けられている場合には、音が聞こえてくる方向をユーザＨが向けば、画像Ｉに顔Ｆが含まれるように、ユーザＨが顔Ｆの向きを変更するように音発生部Ｓが設定されていてもよい。

【0098】

報知制御部３は、発光部Ｌまたは振動部Ｖに、移動方向に応じて異なる種類の光または振動をさせてもよい。携帯端末１００が複数の発光部Ｌを有している場合には、報知制御部３は、複数の発光部Ｌを移動方向に沿って順次点灯させてもよい。振動部Ｖの振動またはその他の動作によって、画像Ｉに顔Ｆが含まれるように、ユーザＨの手の状態の変更を誘導してもよい。

【0099】

（実施の形態２）
次に、実施の形態２の携帯端末１００を説明する。なお、下記において実施の形態１の携帯端末１００と同様である点については、その説明は繰り返さない。本実施の形態の携帯端末１００は、次の点で、実施の形態１の携帯端末１００と異なる。

【0100】

図１２は、本実施の形態の携帯端末１００の第１撮像部Ｃ１がシグナルノイズ比を増加させるために表示部Ｄの明るさを増加させている状態を説明するための図である。

【0101】

実施の形態１において説明したように、第１撮像部Ｃ１と表示部Ｄとは、同じ側を向くように設けられている。本実施の形態においては、正面カメラとしての第１撮像部Ｃ１でユーザＨの顔Ｆの動画像を取得する。したがって、本実施の形態においては、基本的には、実施の形態１の記載の第２撮像部Ｃ２が第１撮像部Ｃ１に読み替えられる。

【0102】

実施の形態１において説明したように、第１撮像部Ｃ１のシグナルノイズ比は、第２撮像部Ｃ２のシグナルノイズ比よりも小さい。本実施の形態においても、シグナルノイズ比の代わりに、ダイナミックレンジ、または、ビット深度が用いられてもよい。したがって、第１撮像部Ｃ１によって取得された画像は、第２撮像部Ｃ２によって取得された画像に比較して、不鮮明である。

【0103】

ただし、実施の形態２では、第１撮像部Ｃ１によって取得される画像の画質が第２撮像部Ｃ２によって取得される画像の画質よりも良好でないことは必須ではない。第１撮像部Ｃ１によって取得される画像の画質が第２撮像部Ｃ２によって取得される画像の画質と同一かまたは第２撮像部Ｃ２によって取得される画像の画質よりも良好であってもよい。

【0104】

本実施の形態においては、シグナルノイズ比等の画像の画質を相対的に良好にする目的で、表示部Ｄを照明として使用すると、表示部Ｄで自分の顔を確認することができない。この場合、制御部１０は、実施の形態１で説明した報知部Ｎによる報知を実行する。なお、本実施の形態の説明においては、画質が良好であることは、シグナルノイズ比が高いことによって例示される。

【0105】

図１２に示されるように、本実施の形態の携帯端末１００によれば、動画像取得部２は、顔判定部１によって画像Ｉの所定領域Ｘに顔Ｆが含まれていると判定された場合に、画像Ｉを表示するときに比較して表示部Ｄの明るさを増加させる。それにより、第１撮像部Ｃ１のシグナルノイズ比を増加させる。その結果、第１撮像部Ｃ１を用いて、比較的鮮明なユーザＨの顔Ｆの動画像を取得することができる。この場合、第１撮像部Ｃ１のシグナルノイズ比を、第２撮像部Ｃ２のシグナルノイズ比よりも高くすることが好ましい。つまり、第１撮像部Ｃ１によって取得される動画像を第２撮像部Ｃ２によって取得される動画像より鮮明にすることが好ましい。

【0106】

その後、第１撮像部Ｃ１に第２状態の動画像を取得させることができる。これは、明るい環境で取得される動画像の方が、暗い環境で取得される動画像に比較して、カメラに入射する光の量が多いため、より鮮明な動画像を取得できるからである。本実施の形態の携帯端末１００によれば、同じ側を向く表示部Ｄおよび第１撮像部Ｃ１を利用して、鮮明な顔Ｆの動画像を取得することができる。

【0107】

なお、表示部Ｄの代わりに、図示されない正面に設けられた発光部（発光部Ｌと同一構造）の明るさを増加させた状態で、第１撮像部Ｃ１に第２状態の動画像を取得させてもよい。これによっても、鮮明な顔Ｆの動画像を取得することができる。したがって、本実施の形態の携帯端末１００によっても、正確な脈波データを取得することができる。なお、図示されない正面に設けられた発光部を使用する場合においても、発光部が発する光のまぶしさに起因して表示部Ｄで自分の顔が確認できない場合がある。この場合においても、制御部１０は、実施の形態１で説明した報知部Ｎによる報知を実行してもよい。

【0108】

本実施の形態においても、報知制御部３は、画像Ｉの所定領域Ｘに顔Ｆが含まれていることを報知部Ｎに報知させることができる。また、報知制御部３は、画像Ｉの所定領域Ｘに顔Ｆが含まれるように、顔Ｆおよび携帯端末１００の少なくともいずれか一方を移動させることを促す移動情報を報知部Ｎに報知させることができる。

【0109】

たとえば、表示部Ｄに第１撮像部Ｃ１によって取得された画像Ｉを表示しない場合に、音発生部Ｓ、発光部Ｌ、または振動部Ｖなどの状態を変化させることによって、顔Ｆが画像Ｉの所定領域Ｘに含まれているか否かをユーザＨに報知してもよい。なお、表示部Ｄに第１撮像部Ｃ１によって取得された画像Ｉを表示する場合、ユーザは、表示部Ｄに表示されている顔Ｆを見ることによって、画像Ｉの所定領域Ｘに顔Ｆが含まれているか否かを判断することができる。

【0110】

図１３は、本実施の形態の携帯端末１００の制御部１０が実行する制御を説明するためのフロートである。

【0111】

図１３に示されるフローチャートは、ステップ１Ａおよびステップ８Ａの処理において、図１０に示されるフローチャートと異なる。

【0112】

ステップＳ１Ａにおいては、制御部１０は、第２撮像部Ｃ２の代わりに、第１撮像部Ｃ１を起動する。そのため、ステップＳ２においては、第１撮像部Ｃ１で画像Ｉを取得する。また、ステップＳ８Ａにおいては、生体情報推定部４は、表示部Ｄまたは発光部Ｌの明るさが増加した状態で、第１撮像部Ｃ１によってユーザＨの顔Ｆを含む動画像を取得する。

【0113】

上記の点以外の構成に関しては、本実施の形態の携帯端末１００と実施の形態１の携帯端末１００とは同一である。本実施の形態の携帯端末１００によっても、鮮明な顔Ｆの動画像をより確実に取得することができる。

【0114】

（実施の形態３）
次に、実施の形態３の携帯端末１００を説明する。なお、下記において実施の形態１または２の携帯端末１００と同様である点については、その説明は繰り返さない。本実施の形態の携帯端末１００は、次の点で、実施の形態１の携帯端末１００と異なる。

【0115】

図１４は、本実施の形態の携帯端末１００の報知部Ｎがウェアラブル装置ＷＤである場合の報知態様を説明するための図である。

【0116】

本実施の形態の携帯端末１００は、撮像部Ｃと通信部ＣＯＭ１を備えている。しかしながら、本実施の形態の携帯端末１００は、制御部１０を有していない。制御部１０は、インターネットＩＮ等の電気通信情報網によって携帯端末１００と通信可能に接続されたサーバＳＶに設けられている。

【0117】

サーバＳＶは、制御部１０内の動画像取得プログラムＰを記憶した記録媒体として機能する。本実施の形態においては、携帯端末１００の撮像部Ｃは、サーバＳＶの制御部１０によって制御される。撮像部Ｃは、通信部ＣＯＭ１を経由して、撮像部Ｃが取得した静止画像または動画像をウェアラブル装置ＷＤへ送信する。

【0118】

ウェアラブル装置ＷＤは、ユーザＨの手首に装着された腕時計である。ウェアラブル装置ＷＤは、通信部ＣＯＭ２と報知部Ｎとを含んでいる。報知部Ｎは、表示部Ｄを含んでいる。ウェアラブル装置ＷＤは、携帯端末１００の通信部ＣＯＭ１から受信した画像を、通信部ＣＯＭ２を経由して、制御部１０へ送信する。なお、ウェアラブル装置ＷＤは、制御部１０および通信部ＣＯＭ１を含んでいれば、ヘルメット、メガネ、帽子、手袋、指輪、服、またはマフラー等のいかなる装身具の一部となっていてもよい。

【0119】

制御部１０に含まれる報知制御部３は、顔判定部１が画像Ｉの所定領域Ｘに顔Ｆが含まれていると判定した場合に、その旨を報知部Ｎに報知させる。報知制御部３は、顔判定部１が画像Ｉに顔Ｆが含まれていないと判定した場合に、移動情報を報知部Ｎに報知させる。移動情報は、画像Ｉの所定領域Ｘに顔Ｆが含まれるように顔Ｆおよび携帯端末１００の少なくともいずれか一方を移動させることをユーザＨに促す情報である。

【0120】

また、生体情報推定部４は、推定された生体情報、たとえば、脈波データ、血圧、および脈拍等を表示部Ｄに表示させる。本実施の形態の携帯端末１００によっても、動画像取得部２は、鮮明な顔Ｆの鮮明な動画像を取得することができるため、生体情報推定部４は、正確な脈波データを取得することができる。

【0121】

本開示における携帯端末１００または動画像取得方法の主体は、コンピュータとして制御部１０を備えている。このコンピュータが動画像取得プログラムＰを実行することによって、本開示における携帯端末１００または動画像取得方法の主体の機能が実現される。

【0122】

コンピュータとしての制御部１０は、動画像取得プログラムＰにしたがって動作するプロセッサ（ＣＰＵ６）を主なハードウェア構成として備える。プロセッサ（ＣＰＵ６）は、動画像取得プログラムＰを実行することによって機能を実現することができれば、その種類は問わない。プロセッサ（ＣＰＵ６）は、半導体集積回路（ＩＣ）、またはＬＳＩ(Large Scale Integration)を含む１つまたは複数の電子回路で構成される。複数の電子回路は、１つのチップに集積されてもよいし、複数のチップに設けられてもよい。複数のチップは１つの装置に集約されていてもよいし、複数の装置に備えられていてもよい。

【0123】

動画像取得プログラムＰは、コンピュータが読み取り可能なＲＯＭ（Read Only Memory）、光ディスク、ハードディスクドライブなどの非一時的記録媒体に記録される。動画像取得プログラムＰは、記録媒体に予め格納されていてもよいし、インターネット等を含む広域通信網を介して記録媒体に供給されてもよい。

【符号の説明】

【0124】

１ 顔判定部
２ 動画像取得部
３ 報知制御部
４ 生体情報推定部
１００ 携帯端末
Ｃ１ 第１撮像部
Ｃ２ 第２撮像部
Ｄ 表示部
Ｆ 顔
Ｉ 画像
Ｌ 発光部
Ｎ 報知部
Ｓ 音発生部
ＷＤ ウェアラブル装置

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】