特許 7677440 情報処理システム、情報処理装置、情報処理方法、プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2025-05-07

(45)【発行日】2025-05-15

(54)【発明の名称】情報処理システム、情報処理装置、情報処理方法、プログラム

(51)【国際特許分類】

   G16H 40/00 20180101AFI20250508BHJP

【ＦＩ】

G16H40/00

【請求項の数】 8

(21)【出願番号】P 2023550845

(86)(22)【出願日】2021-09-29

(86)【国際出願番号】 JP2021035857

(87)【国際公開番号】W WO2023053267

(87)【国際公開日】2023-04-06

【審査請求日】2024-02-07

(73)【特許権者】

【識別番号】000004237

【氏名又は名称】日本電気株式会社

(74)【代理人】

【識別番号】100103894

【弁理士】

【氏名又は名称】家入 健

(72)【発明者】

【氏名】大西 祥史

(72)【発明者】

【氏名】二瓶 浩一

(72)【発明者】

【氏名】岩井 孝法

【審査官】永野 一郎

(56)【参考文献】

【文献】特許第６９１１１８５（ＪＰ，Ｂ１）

【文献】国際公開第２０１８／０７９１０６（ＷＯ，Ａ１）

【文献】中国特許出願公開第１１１３７０１１２（ＣＮ，Ａ）

【文献】米国特許出願公開第２０２１／０１２８０５９（ＵＳ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｑ １０／００－９９／００

Ｇ１６Ｈ １０／００－８０／００

(57)【特許請求の範囲】

【請求項1】

第１端末が対象者を含む映像を第２端末からネットワークを介して受信する際の通信状況を取得する通信状況取得手段と、
前記対象者の生体情報を測定する測定手段と、
前記通信状況に基づいて前記生体情報の測定可否を判定する判定手段と、
前記第１端末に、前記判定手段による前記生体情報の測定可否情報を出力する指示手段と、
を備える、情報処理システム。

【請求項2】

前記判定手段が前記生体情報の測定ができないと判定した場合、前記指示手段は、前記第２端末に、前記生体情報を測定できるように前記対象者を誘導する指示情報を出力する、
請求項１に記載の情報処理システム。

【請求項3】

前記生体情報の測定を開始する入力を受け付ける受付手段を含み、
前記指示手段は、前記判定手段による判定結果に基づいて、前記受付手段が入力を受け付けていないことが入力前にわかるよう前記測定可否情報を出力する、
請求項２に記載の情報処理システム。

【請求項4】

前記第１端末は、前記対象者の映像を表示するとともに、前記指示手段による前記測定可否情報を表示する第１表示手段を含み、
前記第２端末は、前記指示手段による前記指示情報を表示する第２表示手段を含む、
請求項２又は３項に記載の情報処理システム。

【請求項5】

第１端末が対象者を含む映像を第２端末からネットワークを介して受信する際の通信状況を取得する通信状況取得手段と、
前記対象者の生体情報を測定する測定手段と、
前記通信状況に基づいて前記生体情報の測定可否を判定する判定手段と、
前記第１端末に、前記生体情報の測定可否情報を出力するように制御する制御手段と、
を備える、情報処理装置。

【請求項6】

前記判定手段が前記生体情報の測定ができないと判定した場合、前記制御手段は、前記第２端末に、前記生体情報を測定できるように前記対象者を誘導する指示情報を出力するように制御する、
請求項５に記載の情報処理装置。

【請求項7】

コンピュータが、
第１端末が対象者を含む映像を第２端末からネットワークを介して受信する際の通信状況を取得し、
前記対象者の生体情報を測定し、
前記通信状況に基づいて前記生体情報の測定可否を判定し、
前記第１端末に、前記生体情報の測定可否情報を出力する、
情報処理方法。

【請求項8】

第１端末が対象者を含む映像を第２端末からネットワークを介して受信する際の通信状況を取得し、
前記対象者の生体情報を測定し、
前記通信状況に基づいて前記生体情報の測定可否を判定し、
前記第１端末に、前記生体情報の測定可否情報を出力する、
処理をコンピュータに実行させるプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、情報処理システム、情報処理装置、情報処理方法、プログラムが格納された非一時的なコンピュータ可読媒体に関する。

【背景技術】

【0002】

特許文献１には、通信端末装置とサーバ装置と医療機関端末とがネットワークを介して接続された遠隔診断システムが開示されている。通信端末装置に内蔵されたカメラによって患者の病変部分を撮影した画像データや問診データ、位置データはネットワークを介してサーバ装置に送信される。この遠隔診断システムでは、遠隔診断を行う際、患者の健康状態の他、患者が現在いる遠隔地の地域情報を取得し、その地域特有の病気及びその地域で現在流行している病気を考慮している。

【0003】

特許文献２では、生体組織の形状、運動特性、性状特性などの生体組織の特性を測定し、映像情報に変換して、ネットワークを介して伝送する超音波診断装置が開示されている。この超音波診断装置では、定期的にネットワークの通信状況を監視し、該通信状況に応じて外部の機器に伝送する映像フォーマットを選択することで、診断に必要な時間分解能を維持している。

【先行技術文献】

【特許文献】

【0004】

【文献】特開２０１２－２２１４４７号公報

【文献】特開２００７－１９０１５４号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

患者の映像に基づき医師が診断を行う医療サービス提供システムでは、患者の体表が映った映像中の体表の状態変化を示す情報に基づき生体情報を測定する場合がある。このような生体情報の測定中に、ネットワークの通信状況が悪くなると、測定された生体情報の信頼度が低下して誤診につながる恐れがあり、医療サービスの質の低下が懸念される。

【0006】

特許文献２では、伝送する映像情報をネットワークの伝送許容量に応じた情報量に適合させるため、ネットワークの通信状況に応じて、画像圧縮率の程度が高い画像処理方法、低い画像処理方法から適切な映像フォーマットを選択している。しかしながら、患者の映像から生体情報を測定する場合、画像処理が施された映像情報を用いると、信頼度の高い生体情報を得ることが困難である。

【0007】

本開示の目的は、通信状況による医療サービスの質の低下を抑制することが可能な情報処理システム、情報処理装置、情報処理方法及びプログラムが格納された非一時的なコンピュータ可読媒体を提供することにある。

【課題を解決するための手段】

【0008】

一態様に係る情報処理システムは、第１端末が対象者を含む映像を第２端末からネットワークを介して受信する際の通信状況を取得する通信状況取得手段と、前記通信状況に基づいて、前記第１端末及び前記第２端末の少なくとも一方に、前記第１端末の使用者、前記第２端末の使用者、及び、前記対象者の少なくともいずれかを誘導する指示情報を出力する指示手段とを備えるものである。

【0009】

一態様に係る情報処理装置は、第１端末が対象者を含む映像を第２端末からネットワークを介して受信する際の通信状況を取得する通信状況取得手段と、前記通信状況に基づいて、前記第１端末及び前記第２端末の少なくとも一方に、前記第１端末の使用者、前記第２端末の使用者、及び、前記対象者の少なくともいずれかを誘導する指示情報を出力するように制御する制御手段とを備えるものである。

【0010】

一態様に係る情報処理方法は、第１端末が対象者を含む映像を第２端末からネットワークを介して受信する際の通信状況を取得し、前記通信状況に基づいて、前記第１端末及び前記第２端末の少なくとも一方に、前記第１端末の使用者、前記第２端末の使用者、及び、前記対象者の少なくともいずれかを誘導する指示情報を出力する。

【0011】

一態様に係る非一時的なコンピュータ可読媒体は、第１端末が対象者を含む映像を第２端末からネットワークを介して受信する際の通信状況を取得し、前記通信状況に基づいて、前記第１端末及び前記第２端末の少なくとも一方に、前記第１端末の使用者、前記第２端末の使用者、及び、前記対象者の少なくともいずれかを誘導する指示情報を出力する処理をコンピュータに実行させるプログラムが格納されたものである。

【発明の効果】

【0012】

上述の態様によれば、通信状況による医療サービスの質の低下を抑制することが可能な情報処理システム、情報処理装置、情報処理方法及びプログラムが格納された非一時的なコンピュータ可読媒体を提供することができる。

【図面の簡単な説明】

【0013】

【図1】実施形態に係る情報処理システムの構成を示すブロック図である。

【図2】実施形態に係る情報処理装置を含む情報処理システムの構成例を示す図である。

【図3】図２の医師側端末の構成の一例を示すブロック図である。

【図4】図２の患者側端末の構成の一例を示すブロック図である。

【図5】医師側端末の表示内容の一例を説明する図である。

【図6】患者側端末の表示内容の一例を説明する図である。

【図7】実施形態に係る情報処理の流れの一例を説明するシーケンス図である。

【発明を実施するための形態】

【0014】

以下、図面を参照して本開示の実施形態について説明する。なお、以下の記載及び図面は、説明の明確化のため、適宜、省略及び簡略化がなされている。また、以下の各図面において、同一の要素には同一の符号が付されており、必要に応じて重複説明は省略されている。また、以下で示す具体的な数値などは、本開示の理解を容易とするための例示にすぎず、これに限定されるものではない。

【0015】

実施形態は、医療サービスを提供する施設と遠隔地にある医療サービスを受ける対象者がいる施設との間で、ネットワークを介して対象者の映像データを伝送し、対象者の映像に基づいて医師等の専門家が診断を行う、医療サービス提供技術に関する。

【0016】

図１は、実施形態に係る情報処理システム１００の構成を示すブロック図である。図１に示すように、情報処理システム１００は、通信状況取得手段１０１、指示手段１０２を備える。取得手段１０１は、第１端末が対象者を含む映像を第２端末からネットワークを介して受信する際の通信状況を取得する。指示手段１０２は、通信状況に基づいて、第１端末及び第２端末の少なくとも一方に、第１端末の使用者、第２端末の使用者、及び、対象者の少なくともいずれかを誘導する指示情報を出力する。

【0017】

このように、通信状況を考慮して、第１端末の使用者、第２端末の使用者、及び、対象者の少なくともいずれかを誘導する指示情報を出力することで、指示情報を受けた者自身が指示情報を参照して行動することができる。このようにして指示情報を受けた者が行動することで、通信状況による医療サービスの質の低下を抑制することが可能となる。

【0018】

次に、図２～４を参照して、実施形態に係る情報処理システム１００の具体的な例について説明する。図２は、実施形態に係る情報処理装置１を含む情報処理システム１００の構成例を示す図である。図２に示すように、情報処理システム１００は、医師側端末１０、患者側端末２０を含む。

【0019】

図３は、図２の医師側端末１０の構成の一例を示すブロック図である。図３では、医師側端末１０のハードウェア構成のほか、情報処理装置１内に実現される論理的な機能ブロックが示されている。図４は、図２の患者側端末２０の構成の一例を示すブロック図である。図４では、患者側端末２０のハードウェア構成のほか、演算装置６内に実現される論理的な機能ブロックが示されている。

【0020】

情報処理システム１００は、医療サービスを受ける対象者が自宅に在宅したまま、医療サービス提供者から各種サービスの提供を受ける、遠隔診療（オンライン診療、在宅診療）を支援するものである。ここで、医療サービス提供者には、医師、看護師、理学療法士、介護士等が含まれる。また、遠隔診療には、医師等が行う治療や処置といった狭義の医療行為の他、理学療法士が行うリハビリテーション、介護士が行う健康管理、服薬管理等の広義の医療行為も含まれる。説明を簡単にするため、医療サービス提供者を「医師」と記載する。

【0021】

医療サービスを受ける対象者は、例えば、患者、健康診断を受ける者（被健診者）、介護を受ける者（被介護者）等である。説明を簡単にするため、医療サービスを受ける対象者を「患者」と記載する。なお、ＤｔｏＤｔｏＰ（Doctor to Doctor to Patient）型の遠隔診療の場合は、患者側端末２０を使用する使用者として医師が患者と同席している場合がある。また、患者の診察を補助するために、看護師や介護士等が同席している場合もある。患者側端末２０の使用者には、これらの医療関係者等が含まれる。また、医療サービスを提供する施設は、例えば、病院、診療所、介護施設等である。説明を簡単にするため、医療サービスを提供する施設を「病院」と記載する。

【0022】

医師側端末１０と患者側端末２０とは、ネットワークＮで接続され、リアルタイムで双方向通信を行う。ここで、ネットワークＮは、インターネット、専用線等の通信ネットワークである。インターネットの場合、ＶＰＮ（Virtual Private Network）等で閉域網が形成されていることが好ましい。

【0023】

医師側端末１０は病院に設置され、患者側端末２０は遠隔地にある患者宅に設置される。医師側端末１０、患者側端末２０は、パーソナルコンピュータ、サーバマシン、タッチパネルによる入出力が可能なタブレット端末、スマートフォン等であり得る。医師側端末１０、患者側端末２０は専用機であってもよく、汎用の情報端末に専用のアプリケーションをインストールすることにより実現されてもよい。病院にいる医師は、医師側端末１０を用いて、遠隔地にいる患者側端末２０を使用する患者との間でリアルタイムなやり取りを行うことができる。

【0024】

このような情報処理システム１００を用いた遠隔診療では、医師は、患者宅から伝送された映像に基づいて診断を行う。医師側端末１０は、患者を撮影した映像から、当該患者の生体情報を取得することができる。生体情報とは、人の映像から測定可能な生体に関する情報であり、例えば、心拍数、血圧値、酸素飽和度等があげられる。

【0025】

医師側端末１０は、例えば、患者の体表が映った映像中の体表の状態変化を示す情報に基づき、生体情報を得ることができる。体表の状態変化を示す情報の一例として、例えば、患者の血液の流れに基づく体表の色の変化がある。患者を撮影した映像データの各フレームには、患者の体表の色の変化が含まれる。医師側端末１０では、患者の体表の色の変化に基づき、心拍数を測定することができる。

【0026】

また、経皮的動脈血酸素飽和度（ＳｐＯ_２）は、血中のヘモグロビンが酸素とどのくらい結合しているかをパーセントで表したものである。顔などの体表に光を当てたときの反射光強度は、血管内のヘモグロビン量の変動により時間的に変化する。医師側端末１０は、映像を解析することでＳｐＯ_２を推定することができる。

【0027】

このような時間的に変化する情報に基づいて生体情報を測定する際に、通信状況が悪くなることがある。ここで、通信状況とは、例えば、通信帯域幅やスループット等に基づく指標である。通信状況の悪化に伴う映像の乱れや通信遅延の増加により、患者の映像をリアルタイムに伝送することが難しくなる。

【0028】

例えば、患者側端末２０から医師側端末１０へ伝送される映像データの単位時間当たりのデータ量が減ると、この映像データから測定される生体情報の精度が低くなってしまう。実施の形態では、医師、患者、患者側端末２０の使用者に対して、通信状況に応じて必要な情報を提供することで、医療サービスの質の低下を防止する。

【0029】

図３に示すように、医師側端末１０は、情報処理装置１、表示装置１１、撮影装置１２、記憶装置１３、入力装置１４、通信装置１５、音声入力装置１６、音声出力装置１７を含み、これらはバス１８により相互に接続されている。情報処理装置１は、例えばＣＰＵ（Central Processing Unit）やＧＰＵ（Graphics Processing Unit）等の演算処理装置である。

【0030】

情報処理装置１は、論理的な機能ブロックとしての通信状況取得部２、制御部３、測定部４、判定部５を備える。通信状況取得部２、制御部３、測定部４、判定部５は、それぞれ特許請求の範囲に記載の通信状況取得手段、制御手段、測定手段、判定手段に対応する。

【0031】

通信状況取得部２は、医師側端末１０が対象者を含む映像データを患者側端末２０からネットワークＮを介して受信する際の通信状況を取得する。なお、患者を含む映像データは、ネットワークに接続された、図示しないデータベースに格納されたものであってもよい。この場合、通信状況取得部２は、該データベースから映像データを取得するときの通信状況を取得することができる。

【0032】

上述したように、通信状況取得部２は、通信状況として、例えば、その時点で実現されている通信帯域幅や通信遅延などを取得することができる。これは、医師側端末１０の接続先である患者側端末２０の自己診断の結果等を用いることができる。

【0033】

また、通信状況取得部２は、例えば、数十秒先までのスループット変動を予測して、通信状況として取得することも可能である。一例では、通信状況取得部２は、過去１分間の通信スループット変動をＡＩ（artificial intelligence）で分析し、予測モデルをリアルタイムに構築して、将来の通信スループット変動を予測することができる。

【0034】

制御部３は、通信状況取得部２で取得した通信状況に基づいて、医師側端末１０及び患者側端末２０の少なくとも一方に、医師側端末１０の使用者である医師、患者側端末２０の使用者及び患者の少なくともいずれかを誘導する指示情報を出力するように制御する。すなわち、制御部３は、医療サービスの質の低下を抑制するために、医師、患者自身の動作を誘導する指示情報を生成する。

【0035】

測定部４は、患者を含む映像データから、該患者の生体情報を測定する。なお、測定部４は、映像データに含まれる患者に関連する関連情報を取得して、関連情報の１つ又は１つ以上の組合せに基づいて、測定する１つ以上の生体情報を決定してもよい。関連情報には、カルテ情報、問診情報、ＡＤＬ（Activities of Daily Living）等の日常生活動作の能力を示す能力情報、処方、介護、リハビリ等の記録を示す情報、患者が診察を受けている診療科の情報が含まれる。これらの情報は、外部の管理サーバに保存され、管理されていてもよい。

【0036】

また、測定部４は、関連情報の１つ又は１つ以上の組合せに基づいて、所定の生体情報を測定対象としないことを決定してもよい。例えば、診療科毎に測定すべき所定の生体情報が設定されており、この所定の生体情報に含まれないものを測定対象から除外することができる。

【0037】

以下の説明では、測定部４が生体情報として心拍数を測定する例について説明する。測定部４は、映像データから患者の顔領域を、体表を示す皮膚色領域として検出し、該顔領域の時間的な色の変化に基づいて、心拍数を測定する。上記のように患者の映像データの顔領域から心拍数を測定している場合に、例えば、通信遅延が発生し、顔領域の色の変化にかかる時間が変わってしまうと、測定結果の心拍数の信頼度が低下する。

【0038】

そこで、判定部５は、通信状況に基づいて生体情報の測定可否を判定する。判定部５は、例えば、通信遅延時間が所定の値よりも大きい場合に、生体情報の測定ができないと判定することができる。制御部３は、医師側端末１０に、判定部５による生体情報の測定可否情報を出力する。すなわち、制御部３は、医師側端末１０に対して、「通信状況の悪化により生体情報の測定ができません。」との指示情報を生成する。医師による生体情報の測定の開始タイミングは、通信状況を考慮して、患者の映像を高画質にできるタイミングで行うことができる。これにより、医師による信頼度の低い生体情報に基づく誤診を防ぐことが可能となる。

【0039】

また、判定部５が生体情報生体情報の測定ができないと判定した場合に、制御部３は、患者側端末２０に、生体情報を測定できるように患者を誘導する指示情報を出力することも可能である。例えば、通信帯域幅が狭く、単位時間当たりの伝送されるデータ量が小さい場合には、制御部３は、患者側端末２０に対して、「患部をカメラに近づけてください」との指示を生成することができる。

【0040】

患者が物理的に患部をカメラに近づけることで、患者の映像を医師が診断をするのに必要な解像度を満たすものとすることができる。このように、通信状況に応じて指示情報を生成することで、医師や患者の行動を誘導することができ、より質の高い医療サービスを提供することが可能となる。

【0041】

さらに、例えば、通信状況の予測値が取得された場合、判定部５は、予測値が示す所定の時間（例えば１０秒）経過した後に生体情報の測定可能になることを判定することも可能である。この場合、制御部３は、医師側端末１０に対して、「１０秒後に心拍数の測定が可能となります。しばらくお待ちください。」との指示情報を生成することができる。これにより、医師は待ち時間の予測が可能となる。

【0042】

また、この時、制御部３は、患者側端末２０に対して、「１０秒後に心拍数の測定が開始されます。顔をカメラに向けて動かさないでください。」との指示を生成することができる。これにより、遠隔診療を円滑に実行することが可能となる。また、患者に静止を要求するタイミングを通信状況が良いときにすることができ、高画質の患者の映像を取得することが可能となる。

【0043】

表示装置１１は、ＬＣＤ（Liquid Crystal Display）等であり、各種情報を表示する。図５は、医師側端末の表示内容の一例を説明する図である。図５に示すように、表示装置１１は、映像表示領域１１１、情報表示領域１１２、測定ボタン１１３を有する。

【0044】

映像表示領域１１１には、患者側端末２０から伝送される患者の映像が表示される。情報表示領域１１２には、患者の映像データから測定された生体情報が表示される。また、情報表示領域１１２には通信状況に応じて生成された医師の行動を誘導する指示情報が表示される。

【0045】

医師は、指示情報を参照して、生体情報の測定が実行できるか否か、生体情報が測定できない場合には測定可能となるまでの時間等を把握することができる。すなわち、実施の形態では、表示装置１１が、医師側端末１０の使用者である医者に生体情報の測定可否情報を通知する通知手段となる。なお、通知手段としては、音声や、報知音パターン、発光パターン、振動パターン等、医者に測定可否情報を通知できるものであれば特に限定されない。

【0046】

なお、情報表示領域１１２には、カルテ情報（例えば、持病、病歴、検査情報等）、問診情報等が表示されてもよい。また、医師側端末１０は、音声解析部をさらに備え、情報表示領域１１２には、医者と患者との会話を音声認識した内容と関連する情報が表示されてもよい。例えば、患者の「頭が痛い」との音声情報から、測定部４により測定される生体情報が決定され、表示装置１１は測定された所定のバイタルサイン（血圧値や心拍数等）を表示することができる。

【0047】

また、情報表示領域１１２は、医師と患者との会話の音声認識結果を活用して、症状に応じた病名の候補を表示してもよい。また、症状から病名を絞り込んだ後、病名を確定するために、情報表示領域１１２はどのような質問したらいいかのリコメンド情報を表示してもよい。

【0048】

撮影装置１２は、例えばビデオカメラであり、医師側端末１０を使用する医師を撮影することができる。撮影装置１２は、所定の撮影範囲（撮影画角）を所定の撮影レートで医者を撮影して、時系列の複数の画像データによって構成される動画データを生成する。

【0049】

記憶装置１３は、例えばＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Drive）、又はフラッシュメモリ等の不揮発性記憶装置である。記憶装置１３は、情報処理装置１が備える構成要素の各機能を実現するプログラムを記憶している。情報処理装置１がこのプログラムを実行することで、情報処理装置１が備える構成要素の各機能が実現される。

【0050】

記憶装置１３は、ＲＡＭ（Random Access Memory）やＲＯＭ（Read Only Memory）等のメモリを含んでいてもよい。情報処理装置１は、上記プログラムを実行する際、これらのプログラムをメモリ上に読み出してから実行しても良いし、メモリ上に読み出さずに実行しても良い。また、記憶装置１３は、情報処理装置１が備える構成要素が保持する情報、例えば、測定部４が生体情報を測定するために必要な情報等を記憶する役割も果たす。

【0051】

入力装置１４は、医師側端末１０の使用者である医師の操作入力を受け付ける装置であり、例えば、キーボード、マウス等である。表示装置１１と入力装置１４とが一体化され、タッチパネルとして実現されてもよい。医師は、入力装置１４を用いて、測定ボタン１１３をクリックすることで、生体情報の測定の開始及び終了を決定することができる。

【0052】

なお、生体情報の測定可否情報には、生体情報が測定できるか否かを示す情報のみでなく、所定の処理を行った情報も含まれる。例えば、制御部３は、判定部５による判定結果に基づいて、入力装置１４が入力を受け付けていないことが医師の入力前にわかるような測定可否情報を出力することができる。すなわち、表示装置１１における測定ボタン１１３の表示をブラックアウトさせる。これにより、医師が生体情報の測定の開始を入力する前に、入力の受付が停止されていることがわかる。

【0053】

なお、制御部３は、入力装置１４への入力（生体情報の測定の開始及び終了）に応じて、患者への指示情報を変更してもよい。例えば、医師が心拍数の測定の開始を入力したとき、制御部３は、患者側端末２０へ「心拍数の測定を開始します。カメラに正対してください。」との情報を出力することができる。また、医師が生体情報の測定の終了を入力したとき、制御部３は、患者側端末２０へ「測定が終了しました。」との情報を出力することができる。これにより、医師の挙動を遠隔地にいる患者に知らせることができ、オンライン診療における、医師と患者の円滑なコミュニケーションを支援することが可能となる。

【0054】

通信装置１５は、例えば、無線伝送路を介して外部の患者側端末２０との間でデータを送受信する。例えば、通信装置１５は、医者を含む映像データを患者側端末２０へ送信し、患者を含む映像データを患者側端末２０から受信する。また、上述した各種演算に必要な情報が外部の管理サーバに保存されている場合は、通信装置１５はこれらの情報を管理サーバから受信する。

【0055】

音声入力装置１６は、例えばマイクであり、医者が発した音声を、音声データとして収集する。撮影装置１２により生成された動画データと音声入力装置１６により収集された音声データを合成することで、映像データが生成される。

【0056】

情報表示領域１１２は、音声入力装置１６により収集された医師の音声データと、患者を含む映像データに含まれる音声情報を音声認識して、その結果を活用した表示を行うことも可能である。音声出力装置１７は、例えばスピーカーであり、患者側端末２０から伝送された患者の映像データに含まれる音声を再生する。

【0057】

次に、患者側端末２０について説明する。図４に示すように、患者側端末２０は、演算装置６、表示装置２１、撮影装置２２、記憶装置２３、入力装置２４、通信装置２５、音声入力装置２６、音声出力装置２７を含み、これらはバス２８により相互に接続されている。

【0058】

なお、表示装置２１、撮影装置２２、記憶装置２３、入力装置２４、通信装置２５、音声入力装置２６、音声出力装置２７は、それぞれ表示装置１１、撮影装置１２、記憶装置１３、入力装置１４、通信装置１５、音声入力装置１６、音声出力装置１７と一般的な機能は同一であるため、適宜説明を省略する。

【0059】

演算装置６は、例えばＣＰＵやＧＰＵ等の演算処理装置である。演算装置６は、論理的な機能ブロックとしての指示部７を備える。指示部７は、医師側端末１０から送信される、患者及びまたは患者側端末２０の使用者を誘導する指示情報を出力する。指示部７は、例えば、後述する表示装置２１に指示情報を表示させたり、音声出力装置２７に指示情報を音声で再生させたりすることができる。

【0060】

表示装置２１は、ＬＣＤ等であり、各種情報を表示する。図６は、患者側端末の表示内容の一例を説明する図である。表示装置２１は、映像表示領域２１１、情報表示領域２１２を有する。映像表示領域２１１には、医師側端末１０から伝送される医者を含む映像データが表示される。

【0061】

情報表示領域２１２には、患者及び／又は患者側端末２０の使用者を誘導する指示情報が表示される。上述したように、通信状況に基づいて生体情報の測定ができないと判定された場合、指示部７は「「通信状況の悪化により生体情報の測定ができません。」との指示情報を受信し、情報表示領域２１２に表示させる。情報表示領域２１２に表示させる、患者や医師側端末１０の使用者を誘導する指示情報には、上述の顔を停止させる指示の他、測定する生体情報に応じて、顔をカメラに近づける指示、患部をカメラに近づける指示等が含まれる。

【0062】

また、例えば、関連情報に基づいて、患者の映像に基づいて心拍数の測定を行うことが決定された場合、情報表示領域２１２は、心拍数の測定を行うことを事前に患者に通知する表示を行うことができる。

【0063】

さらに、上述したように、通信状況の予測値が取得された場合において、１０秒後に心拍数を測定するときには、指示部７は「１０秒後に心拍数の測定が開始されます。顔をカメラに向けて動かさないでください。」との指示情報を受信し、情報表示領域２１２に表示させる。これにより、患者は、この通知から、何を測定しているか、いつ測定が開始されるか、どのような行動をすればよいかがわかり、患者自身の状況の調整を誘導することができ、信頼度が高い生体情報を測定することが可能となる。

【0064】

なお、指示情報の出力は、指示部７が表示装置２１へ表示させることで指示情報を出力する例に限定されない。例えば、指示部７は、音声出力装置２７に音声で指示情報を出力させてもよい。また、指示部７は、報知音や光、振動のパターンで指示情報を出力することも可能である。

【0065】

撮影装置２２は、例えばビデオカメラであり、患者側端末２０を使用する患者を撮影することができる。撮影装置２２は、所定の撮影範囲（撮影画角）を所定の撮影レートで患者を撮影して、時系列の複数の画像データによって構成される動画データを生成する。

【0066】

記憶装置２３は、例えばＨＤＤ、ＳＳＤ、又はフラッシュメモリ等の不揮発性記憶装置である。記憶装置２３は、演算装置６が備える指示部７の機能を実現するプログラムを記憶している。演算装置６がこのプログラムを実行することで、指示部７の機能が実現される。また、記憶装置１３と同様に、記憶装置２３は、ＲＡＭやＲＯＭ等のメモリを含んでいてもよい。記憶装置１３は、指示部７が指示情報を出力する処理を行うために必要なデータ等を記憶する役割も果たす。

【0067】

入力装置２４は、患者側端末２０の使用者である患者の操作入力を受け付ける装置であり、例えば、キーボード、マウス等である。表示装置２１と入力装置２４とが一体化され、タッチパネルとして実現されてもよい。

【0068】

通信装置２５は、例えば無線伝送路を介して外部の医師側端末１０との間でデータを送受信する。例えば、医者を含む映像データ、患者を含む映像データ、指示情報は通信装置２５を介して伝送される。

【0069】

音声入力装置２６は、例えばマイクであり、患者が発した音声を収集する。撮影装置２２により生成された動画データと音声入力装置２６により収集された音声情報を合成することで、映像データが生成される。すなわち、この映像データには、患者の動作情報と音声情報とが含まれる。音声出力装置２７は、例えばスピーカーであり、医師側端末１０から伝送された医者の映像データに含まれる音声を再生する。また、患者の行動を誘導する指示情報が音声で出力される場合には、音声出力装置２７は該指示情報を音声で再生することができる。

【0070】

ここで、図７を参照して、実施形態に係る情報処理方法について説明する。図７は、実施形態に係る情報処理の流れの一例を説明するシーケンス図である。まず、患者側端末２０は、医師側端末１０に患者を含む映像データを送信する（Ｓ１０）。医師側端末１０の通信状況取得部２は、患者を含む映像データを送信する際の通信状況を取得する（Ｓ１１）。

【0071】

そして、制御部３は、通信状況に基づいて、医師側端末１０及び患者側端末２０の少なくとも一方に、医師、患者及び患者側端末２０の使用者の少なくともいずれかを誘導する指示情報を生成し（Ｓ１２）、患者側端末２０へ送信する（Ｓ１３）。患者側端末２０の指示部７は、該指示情報取得し、例えば、表示装置２１にこの指示情報を表示させて出力する（Ｓ１４）。

【0072】

以上説明したように、実施の形態によれば、通信状況に応じて、患者及び／又は患者側端末２０の使用者の行動を誘導する指示情報を、提供することができる。これにより、患者や患者側端末２０の使用者が指示情報に従って誘導され、測定される生体情報の改善することができ、医療サービスへの向上を図ることが可能となる。

【0073】

なお、図３に示す例では、情報処理システム１００が情報処理装置１を含む例を示したが、この構成に限定されるものではない。例えば、情報処理装置１は、データセンター等に設置されたサーバとして実現することも可能である。患者側端末２０からの患者を含む画像データは該サーバに送信され、サーバが上述した指示情報を生成する処理を実行する。

【0074】

なお、図面に記載された様々な処理を行う各機能ブロックは、ハードウェア的には、プロセッサ、メモリ、その他の回路で構成することができる。また、上述した処理を、プロセッサにプログラムを実行させることにより実現することも可能である。従って、これらの機能ブロックは、ハードウェアのみ、ソフトウェアのみ、又はそれらの組合せによっていろいろな形で実現でき、いずれかに限定されるものではない。

【0075】

上述したプログラムは、様々なタイプの非一時的なコンピュータ可読媒体（non-transitory computer readable medium）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（tangible storage medium）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ－ＲＯＭ（Read Only Memory）、ＣＤ－Ｒ、ＣＤ－Ｒ／Ｗ、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Programmable ROM）、ＥＰＲＯＭ（Erasable PROM）、フラッシュＲＯＭ、ＲＡＭ（Random Access Memory））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（transitory computer readable medium）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。

【0076】

以上、実施の形態を参照して本開示を説明したが、本開示は上述した実施の形態に限定されるものではない。本開示の構成や詳細には、本開示のスコープ内で当業者が理解し得る様々な変更をすることができる。

【0077】

また、上述した実施の形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。

【0078】

（付記１）
第１端末が対象者を含む映像を第２端末からネットワークを介して受信する際の通信状況を取得する通信状況取得手段と、
前記通信状況に基づいて、前記第１端末及び前記第２端末の少なくとも一方に、前記第１端末の使用者、前記第２端末の使用者、及び、前記対象者の少なくともいずれかを誘導する指示情報を出力する指示手段と、
を備える、情報処理システム。
（付記２）
前記対象者の生体情報を測定する測定手段と、
前記通信状況に基づいて前記生体情報の測定可否を判定する判定手段と、をさらに含み、
前記指示手段は、前記第１端末に、前記判定手段による前記生体情報の測定可否情報を出力する、
付記１に記載の情報処理システム。
（付記３）
前記判定手段が前記生体情報の測定ができないと判定した場合、前記指示手段は、前記第２端末に、前記生体情報を測定できるように前記対象者を誘導する指示情報を出力する、
付記２に記載の情報処理システム。
（付記４）
前記生体情報の測定を開始する入力を受け付ける受付手段を含み、
前記指示手段は、前記判定手段による判定結果に基づいて、前記受付手段が入力を受け付けていないことが入力前にわかるよう前記測定可否情報を出力する、
付記２又は３に記載の情報処理システム。
（付記５）
前記第１端末は、前記対象者の映像を表示するとともに、前記指示手段による前記指示情報を表示する第１表示手段を含み、
前記第２端末は、前記指示手段による前記指示情報を表示する第２表示手段を含む、
付記１～４のいずれか１項に記載の情報処理システム。
（付記６）
第１端末が対象者を含む映像を第２端末からネットワークを介して受信する際の通信状況を取得する通信状況取得手段と、
前記通信状況に基づいて、前記第１端末及び前記第２端末の少なくとも一方に、前記第１端末の使用者、前記第２端末の使用者、及び、前記対象者の少なくともいずれかを誘導する指示情報を出力するように制御する制御手段と、
を備える、情報処理装置。
（付記７）
前記対象者の生体情報を測定する測定手段と、
前記通信状況に基づいて前記生体情報の測定可否を判定する判定手段と、をさらに含み、
前記制御手段は、前記第１端末に、前記判定手段による前記生体情報の測定可否情報を出力するように制御する、
付記６に記載の情報処理装置。
（付記８）
前記判定手段が前記生体情報の測定ができないと判定した場合、前記制御手段は、前記第２端末に、前記生体情報を測定できるように前記対象者を誘導する指示情報を出力するように制御する、
付記７に記載の情報処理装置。
（付記９）
前記生体情報の測定を開始する入力を受け付ける受付手段を含み、
前記制御手段は、前記判定手段による判定結果に基づいて、前記受付手段が入力を受け付けていないことが入力前にわかるよう前記測定可否情報を出力するように制御する、
付記７又は８に記載の情報処理装置。
（付記１０）
前記制御手段は、
前記第１端末に含まれる第１表示手段に、前記対象者の映像を表示させるとともに、前記指示情報を表示させ、
前記第２端末に含まれる第２表示手段に前記指示情報を表示させる、
付記６～９のいずれか１項に記載の情報処理装置。
（付記１１）
第１端末が対象者を含む映像を第２端末からネットワークを介して受信する際の通信状況を取得し、
前記通信状況に基づいて、前記第１端末及び前記第２端末の少なくとも一方に、前記第１端末の使用者、前記第２端末の使用者、及び、前記対象者の少なくともいずれかを誘導する指示情報を出力する、
情報処理方法。
（付記１２）
前記対象者の生体情報を測定し、
前記通信状況に基づいて前記生体情報の測定可否を判定し、
前記第１端末に、前記生体情報の測定可否情報を出力する、
付記１１に記載の情報処理方法。
（付記１３）
前記生体情報の測定ができないと判定された場合、前記第２端末に、前記生体情報を測定できるように前記対象者を誘導する指示情報を出力する、
付記１２に記載の情報処理方法。
（付記１４）
前記測定可否の判定結果に基づいて、前記生体情報の測定を開始する入力を受け付ける受付手段が入力を受け付けていないことが入力前にわかるよう前記測定可否情報を出力する、
付記１２又は１３に記載の情報処理方法。
（付記１５）
前記第１端末に含まれる第１表示手段に、前記対象者の映像を表示させるとともに、前記指示情報を表示させ、
前記第２端末に含まれる第２表示手段に前記指示情報を表示させる、
付記１１～１４のいずれか１項に記載の情報処理方法。
（付記１６）
第１端末が対象者を含む映像を第２端末からネットワークを介して受信する際の通信状況を取得し、
前記通信状況に基づいて、前記第１端末及び前記第２端末の少なくとも一方に、前記第１端末の使用者、前記第２端末の使用者、及び、前記対象者の少なくともいずれかを誘導する指示情報を出力する、
処理をコンピュータに実行させるプログラムが格納された非一時的なコンピュータ可読媒体。
（付記１７）
前記対象者の生体情報を測定し、
前記通信状況に基づいて前記生体情報の測定可否を判定し、
前記第１端末に、前記生体情報の測定可否情報を出力する、
処理をコンピュータに実行させる、
付記１６に記載のプログラムが格納された非一時的なコンピュータ可読媒体。
（付記１８）
前記生体情報の測定ができないと判定された場合、前記第２端末に、前記生体情報を測定できるように前記対象者を誘導する指示情報を出力する、
付記１７に記載のプログラムが格納された非一時的なコンピュータ可読媒体。
（付記１９）
前記測定可否の判定結果に基づいて、前記生体情報の測定を開始する入力を受け付ける受付手段が入力を受け付けていないことが入力前にわかるよう前記測定可否情報を出力する、
処理をコンピュータに実行させる、
付記１７又は１８に記載のプログラムが格納された非一時的なコンピュータ可読媒体。
（付記２０）
前記第１端末に含まれる第１表示手段に、前記対象者の映像を表示させるとともに、前記指示情報を表示させ、
前記第２端末に含まれる第２表示手段に前記指示情報を表示させる、
処理をコンピュータに実行させる、
付記１６～１９のいずれか１項に記載のプログラムが格納された非一時的なコンピュータ可読媒体。

【符号の説明】

【0079】

１ 情報処理装置
２ 通信状況取得部
３ 制御部
４ 測定部
５ 判定部
６ 演算装置
７ 指示部
１０ 医師側端末
１１ 表示装置
１２ 撮影装置
１３ 記憶装置
１４ 入力装置
１５ 通信装置
１６ 音声入力装置
１７ 音声出力装置
１８ バス
２０ 患者側端末
２１ 表示装置
２２ 撮影装置
２３ 記憶装置
２４ 入力装置
２５ 通信装置
２６ 音声入力装置
２７ 音声出力装置
２８ バス
１００ 情報処理システム
１０１ 通信状況取得手段
１０２ 指示手段
１１１ 映像表示領域
１１２ 情報表示領域
１１３ 測定ボタン
２１１ 映像表示領域
２１２ 情報表示領域
Ｎ ネットワーク

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】