IP Force 特許公報掲載プロジェクト 2022.1.31 β版

知財求人 - 知財ポータルサイト「IP Force」

<>
  • -システム 図1
  • -システム 図2
  • -システム 図3
  • -システム 図4
  • -システム 図5
  • -システム 図6
  • -システム 図7
  • -システム 図8
  • -システム 図9
  • -システム 図10
< >
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2026106943
(43)【公開日】2026-06-30
(54)【発明の名称】システム
(51)【国際特許分類】
   G16H 50/20 20180101AFI20260623BHJP
   G16H 20/70 20180101ALI20260623BHJP
   G16H 10/00 20180101ALI20260623BHJP
   G16H 50/00 20180101ALI20260623BHJP
   G16H 15/00 20180101ALI20260623BHJP
【FI】
G16H50/20
G16H20/70
G16H10/00
G16H50/00
G16H15/00
【審査請求】未請求
【請求項の数】9
【出願形態】OL
(21)【出願番号】P 2024222021
(22)【出願日】2024-12-18
(71)【出願人】
【識別番号】591280485
【氏名又は名称】ソフトバンクグループ株式会社
(74)【代理人】
【識別番号】110002147
【氏名又は名称】弁理士法人酒井国際特許事務所
(72)【発明者】
【氏名】久保木 裕子
【テーマコード(参考)】
5L099
【Fターム(参考)】
5L099AA04
5L099AA15
5L099AA21
(57)【要約】
【課題】実施形態に係るシステムは、患者の症状や痛みの程度を正確に把握し、適切な改善策を提案することを目的とする。
【解決手段】実施形態に係るシステムは、解析部と、可視化部と、推測部と、提案部と、レポート生成部とを備える。解析部は、ユーザの言葉、表情、音声を解析する。可視化部は、解析部によって解析された情報に基づいてリアルタイムで痛み等の症状や程度を可視化する。推測部は、可視化部によって可視化された情報に基づいて病名や原因を推測する。提案部は、推測部によって推測された情報に基づいてパーソナライズされた改善策を提案する。レポート生成部は、提案部によって提案された情報に基づいて診療用レポートを生成する。
【選択図】図1
【特許請求の範囲】
【請求項1】
ユーザの言葉、表情、音声を解析する解析部と、
前記解析部によって解析された情報に基づいてリアルタイムで痛み等の症状や程度を可視化する可視化部と、
前記可視化部によって可視化された情報に基づいて病名や原因を推測する推測部と、
前記推測部によって推測された情報に基づいてパーソナライズされた改善策を提案する提案部と、
前記提案部によって提案された情報に基づいて診療用レポートを生成するレポート生成部と、を備える
ことを特徴とするシステム。
【請求項2】
定期オンライン面談や通院・服薬等のリマインダー機能を提供するリマインダー部を備える
ことを特徴とする請求項1に記載のシステム。
【請求項3】
継続的な自己学習を行う学習部を備える
ことを特徴とする請求項1に記載のシステム。
【請求項4】
最新の医療知識を更新する更新部を備える
ことを特徴とする請求項1に記載のシステム。
【請求項5】
前記解析部は、
ユーザの感情を推定し、推定したユーザの感情に基づいて解析の精度を調整する
ことを特徴とする請求項1に記載のシステム。
【請求項6】
前記解析部は、
解析時に、ユーザの過去の健康データを参照して解析の精度を向上させる
ことを特徴とする請求項1に記載のシステム。
【請求項7】
前記解析部は、
解析時に、ユーザの生活習慣や環境情報を考慮して解析を行う
ことを特徴とする請求項1に記載のシステム。
【請求項8】
前記解析部は、
ユーザの感情を推定し、推定したユーザの感情に基づいて解析結果の表示方法を調整する
ことを特徴とする請求項1に記載のシステム。
【請求項9】
前記解析部は、
解析時に、ユーザの地理的位置情報を考慮して解析を行う
ことを特徴とする請求項1に記載のシステム。
【発明の詳細な説明】
【技術分野】
【0001】
本開示の技術は、システムに関する。
【背景技術】
【0002】
特許文献1には、少なくとも一つのプロセッサにより遂行される、ペルソナチャットボット制御方法であって、ユーザ発話を受信するステップと、前記ユーザ発話を、チャットボットのキャラクターに関する説明と関連した指示文を含むプロンプトに追加するステップと前記プロンプトをエンコードするステップと、前記エンコードしたプロンプトを言語モデルに入力して、前記ユーザ発話に応答するチャットボット発話を生成するステップ、を含む、方法が開示されている。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特開2022-180282号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
従来の技術では、患者の症状や痛みの程度を正確に把握し、適切な改善策を提案することが難しく、医療機関での診療時間が増加するおそれがある。
【0005】
実施形態に係るシステムは、患者の症状や痛みの程度を正確に把握し、適切な改善策を提案することを目的とする。
【課題を解決するための手段】
【0006】
実施形態に係るシステムは、解析部と、可視化部と、推測部と、提案部と、レポート生成部とを備える。解析部は、ユーザの言葉、表情、音声を解析する。可視化部は、解析部によって解析された情報に基づいてリアルタイムで痛み等の症状や程度を可視化する。推測部は、可視化部によって可視化された情報に基づいて病名や原因を推測する。提案部は、推測部によって推測された情報に基づいてパーソナライズされた改善策を提案する。レポート生成部は、提案部によって提案された情報に基づいて診療用レポートを生成する。
【発明の効果】
【0007】
実施形態に係るシステムは、患者の症状や痛みの程度を正確に把握し、適切な改善策を提案することができる。
【図面の簡単な説明】
【0008】
図1】第1実施形態に係るデータ処理システムの構成の一例を示す概念図である。
図2】第1実施形態に係るデータ処理装置およびスマートデバイスの要部機能の一例を示す概念図である。
図3】第2実施形態に係るデータ処理システムの構成の一例を示す概念図である。
図4】第2実施形態に係るデータ処理装置およびスマート眼鏡の要部機能の一例を示す概念図である。
図5】第3実施形態に係るデータ処理システムの構成の一例を示す概念図である。
図6】第3実施形態に係るデータ処理装置およびヘッドセット型端末の要部機能の一例を示す概念図である。
図7】第4実施形態に係るデータ処理システムの構成の一例を示す概念図である。
図8】第4実施形態に係るデータ処理装置およびロボットの要部機能の一例を示す概念図である。
図9】複数の感情がマッピングされる感情マップを示す。
図10】複数の感情がマッピングされる感情マップを示す。
【発明を実施するための形態】
【0009】
以下、添付図面に従って本開示の技術に係るシステムの実施形態の一例について説明する。
【0010】
先ず、以下の説明で使用される文言について説明する。
【0011】
以下の実施形態において、符号付きのプロセッサ(以下、単に「プロセッサ」と称する)は、1つの演算装置であってもよいし、複数の演算装置の組み合わせであってもよい。また、プロセッサは、1種類の演算装置であってもよいし、複数種類の演算装置の組み合わせであってもよい。演算装置の一例としては、CPU(Central Processing Unit)、GPU(Graphics Processing Unit)、GPGPU(General-Purpose computing on Graphics Processing Units)、APU(Accelerated Processing Unit)、またはTPU(Tensor Processing Unit)などが挙げられる。
【0012】
以下の実施形態において、符号付きのRAM(Random Access Memory)は、一時的に情報が格納されるメモリであり、プロセッサによってワークメモリとして用いられる。
【0013】
以下の実施形態において、符号付きのストレージは、各種プログラムおよび各種パラメータなどを記憶する1つまたは複数の不揮発性の記憶装置である。不揮発性の記憶装置の一例としては、フラッシュメモリ(SSD(Solid State Drive))、磁気ディスク(例えば、ハードディスク)、または磁気テープなどが挙げられる。
【0014】
以下の実施形態において、符号付きの通信I/F(Interface)は、通信プロセッサおよびアンテナなどを含むインタフェースである。通信I/Fは、複数のコンピュータ間での通信を司る。通信I/Fに対して適用される通信規格の一例としては、5G(5th Generation Mobile Communication System)、Wi-Fi(登録商標)、またはBluetooth(登録商標)などを含む無線通信規格が挙げられる。
【0015】
以下の実施形態において、「Aおよび/またはB」は、「AおよびBのうちの少なくとも1つ」と同義である。つまり、「Aおよび/またはB」は、Aだけであってもよいし、Bだけであってもよいし、AおよびBの組み合わせであってもよい、という意味である。また、本明細書において、3つ以上の事柄を「および/または」で結び付けて表現する場合も、「Aおよび/またはB」と同様の考え方が適用される。
【0016】
[第1実施形態]
図1には、第1実施形態に係るデータ処理システム10の構成の一例が示されている。
【0017】
図1に示すように、データ処理システム10は、データ処理装置12およびスマートデバイス14を備えている。データ処理装置12の一例としては、サーバが挙げられる。
【0018】
データ処理装置12は、コンピュータ22、データベース24、および通信I/F26を備えている。コンピュータ22は、プロセッサ28、RAM30、およびストレージ32を備えている。プロセッサ28、RAM30、およびストレージ32は、バス34に接続されている。また、データベース24および通信I/F26も、バス34に接続されている。通信I/F26は、ネットワーク54に接続されている。ネットワーク54の一例としては、WAN(Wide Area Network)および/またはLAN(Local Area Network)などが挙げられる。
【0019】
スマートデバイス14は、コンピュータ36、受付装置38、出力装置40、カメラ42、および通信I/F44を備えている。コンピュータ36は、プロセッサ46、RAM48、およびストレージ50を備えている。プロセッサ46、RAM48、およびストレージ50は、バス52に接続されている。また、受付装置38、出力装置40、およびカメラ42も、バス52に接続されている。
【0020】
受付装置38は、タッチパネル38Aおよびマイクロフォン38Bなどを備えており、ユーザ入力を受け付ける。タッチパネル38Aは、指示体(例えば、ペンまたは指など)の接触を検出することにより、指示体の接触によるユーザ入力を受け付ける。マイクロフォン38Bは、ユーザの音声を検出することにより、音声によるユーザ入力を受け付ける。制御部46Aは、タッチパネル38Aおよびマイクロフォン38Bによって受け付けたユーザ入力を示すデータをデータ処理装置12に送信する。データ処理装置12では、特定処理部290(図2参照)が、ユーザ入力を示すデータを取得する。
【0021】
出力装置40は、ディスプレイ40Aおよびスピーカ40Bなどを備えており、データをユーザが知覚可能な表現形(例えば、音声および/またはテキスト)で出力することでデータをユーザに対して提示する。ディスプレイ40Aは、プロセッサ46からの指示に従ってテキストおよび画像などの可視情報を表示する。スピーカ40Bは、プロセッサ46からの指示に従って音声を出力する。カメラ42は、レンズ、絞り、およびシャッタなどの光学系と、CMOS(Complementary Metal-Oxide-Semiconductor)イメージセンサまたはCCD(Charge Coupled Device)イメージセンサなどの撮像素子とが搭載された小型デジタルカメラである。
【0022】
通信I/F44は、ネットワーク54に接続されている。通信I/F44および26は、ネットワーク54を介してプロセッサ46とプロセッサ28との間の各種情報の授受を司る。
【0023】
図2には、データ処理装置12およびスマートデバイス14の要部機能の一例が示されている。
【0024】
図2に示すように、データ処理装置12では、プロセッサ28によって特定処理が行われる。ストレージ32には、特定処理プログラム56が格納されている。特定処理プログラム56は、本開示の技術に係る「プログラム」の一例である。プロセッサ28は、ストレージ32から特定処理プログラム56を読み出し、読み出した特定処理プログラム56をRAM30上で実行する。特定処理は、プロセッサ28がRAM30上で実行する特定処理プログラム56に従って特定処理部290として動作することによって実現される。
【0025】
ストレージ32には、データ生成モデル58および感情特定モデル59が格納されている。データ生成モデル58および感情特定モデル59は、特定処理部290によって用いられる。特定処理部290は、感情特定モデル59を用いてユーザの感情を推定し、ユーザの感情を用いた特定処理を行うことができる。感情特定モデル59を用いた感情推定機能(感情特定機能)では、ユーザの感情の推定や予測などを含め、ユーザの感情に関する種々の推定や予測などが行われるが、かかる例に限定されない。また、感情の推定や予測には、例えば、感情の分析(解析)なども含まれる。
【0026】
スマートデバイス14では、プロセッサ46によって特定処理が行われる。ストレージ50には、特定処理プログラム60が格納されている。特定処理プログラム60は、データ処理システム10によって特定処理プログラム56と併用される。プロセッサ46は、ストレージ50から特定処理プログラム60を読み出し、読み出した特定処理プログラム60をRAM48上で実行する。特定処理は、プロセッサ46がRAM48上で実行する特定処理プログラム60に従って、制御部46Aとして動作することによって実現される。なお、スマートデバイス14には、データ生成モデル58および感情特定モデル59と同様のデータ生成モデルおよび感情特定モデルを有し、これらモデルを用いて特定処理部290と同様の処理を行うこともできる。
【0027】
なお、データ処理装置12以外の他の装置がデータ生成モデル58を有してもよい。例えば、サーバ装置(例えば、生成サーバ)がデータ生成モデル58を有してもよい。この場合、データ処理装置12は、データ生成モデル58を有するサーバ装置と通信を行うことで、データ生成モデル58が用いられた処理結果(予測結果など)を得る。また、データ処理装置12は、サーバ装置であってもよいし、ユーザが保有する端末装置(例えば、携帯電話、ロボット、家電など)であってもよい。次に、第1実施形態に係るデータ処理システム10による処理の一例について説明する。
【0028】
(形態例1)
本発明の実施形態に係るCare AIエージェントシステムは、物理的や心理的に辛い時の症状を解析し、改善策を提案するシステムである。このCare AIエージェントシステムは、ユーザの言葉、表情、音声を解析し、リアルタイムで痛み等の症状や程度を可視化し、病名や原因を推測する。次に、パーソナライズされた改善策を提案し、自分専用のAIキャラクターによる共感の声掛けを行う。これにより、医療機関向けに診療用レポートを生成し、迅速で適切な治療が可能となり、診療時間の短縮や医療精度の向上が期待できる。また、患者の心理的負担の軽減や物理的症状の緩和も図られる。さらに、定期オンライン面談や通院・服薬等のリマインダー機能により、日常的かつ継続的なケアが可能となる。Care AIエージェントは、継続的な自己学習で進化し、最新の医療知識も常に更新される。これにより、家族や周囲に迷惑をかけたくないが辛いと感じるユーザに対して、共感し寄り添う存在となる。例えば、Care AIエージェントシステムは、ユーザの言葉、表情、音声を解析する。例えば、Care AIエージェントシステムは、ユーザの言葉を解析し、感情や症状を特定する。次に、Care AIエージェントシステムは、ユーザの表情を解析し、痛みや不快感の程度を判断する。さらに、Care AIエージェントシステムは、ユーザの音声を解析し、ストレスや疲労のレベルを推測する。これにより、Care AIエージェントシステムは、ユーザの状態を総合的に把握し、適切な改善策を提案することができる。これにより、Care AIエージェントシステムは、ユーザの症状をリアルタイムで解析し、適切な改善策を提案することができる。
【0029】
実施形態に係るCare AIエージェントシステムは、解析部と、可視化部と、推測部と、提案部と、レポート生成部とを備える。解析部は、ユーザの言葉、表情、音声を解析する。解析部は、例えば、ユーザの言葉を解析し、感情や症状を特定する。解析部は、例えば、ユーザの表情を解析し、痛みや不快感の程度を判断する。解析部は、例えば、ユーザの音声を解析し、ストレスや疲労のレベルを推測する。可視化部は、解析部によって解析された情報に基づいてリアルタイムで痛み等の症状や程度を可視化する。可視化部は、例えば、痛みの強さをグラフで表示する。可視化部は、例えば、疲労感のレベルを色で示す。可視化部は、例えば、ストレスの度合いを数値で表す。推測部は、可視化部によって可視化された情報に基づいて病名や原因を推測する。推測部は、例えば、痛みの部位や強さから病名を推測する。推測部は、例えば、疲労感の原因を特定する。推測部は、例えば、ストレスの要因を分析する。提案部は、推測部によって推測された情報に基づいてパーソナライズされた改善策を提案する。提案部は、例えば、痛みの緩和方法を提案する。提案部は、例えば、疲労回復のための運動を提案する。提案部は、例えば、ストレス軽減のためのリラクゼーション方法を提案する。レポート生成部は、提案部によって提案された情報に基づいて診療用レポートを生成する。レポート生成部は、例えば、診療用レポートに痛みの強さや部位を記載する。レポート生成部は、例えば、診療用レポートに疲労感のレベルや原因を記載する。レポート生成部は、例えば、診療用レポートにストレスの度合いや要因を記載する。これにより、実施形態に係るCare AIエージェントシステムは、ユーザの言葉、表情、音声を解析し、リアルタイムで症状や程度を可視化し、病名や原因を推測し、パーソナライズされた改善策を提案し、診療用レポートを生成することができる。
【0030】
解析部は、ユーザの言葉、表情、音声を解析する。解析部は、例えば、ユーザの言葉を解析し、感情や症状を特定する。具体的には、自然言語処理技術を用いてユーザの発言内容を解析し、キーワードや文脈から感情や症状を抽出する。例えば、ユーザが「頭が痛い」と言った場合、解析部は「痛み」というキーワードを抽出し、その痛みの部位が頭であることを特定する。また、ユーザの表情を解析し、痛みや不快感の程度を判断する。表情解析には、画像認識技術を用いて、顔の表情筋の動きや目の開閉、口角の上がり具合などを解析する。例えば、ユーザが眉をひそめている場合、解析部はその表情から痛みや不快感を感じていると判断する。さらに、ユーザの音声を解析し、ストレスや疲労のレベルを推測する。音声解析には、音声認識技術を用いて、声のトーンやピッチ、話す速度などを解析する。例えば、ユーザの声が震えている場合、解析部はその音声からストレスを感じていると推測する。これにより、解析部は、ユーザの言葉、表情、音声から多角的に情報を収集し、感情や症状を特定することができる。
【0031】
可視化部は、解析部によって解析された情報に基づいてリアルタイムで痛み等の症状や程度を可視化する。具体的には、解析部から得られたデータを基に、ユーザの痛みの強さをグラフで表示する。例えば、痛みの強さを0から10のスケールで表し、時間の経過とともに変化する痛みの強さを折れ線グラフで表示する。また、疲労感のレベルを色で示す。例えば、疲労感が低い場合は緑色、中程度の場合は黄色、高い場合は赤色で表示する。さらに、ストレスの度合いを数値で表す。例えば、ストレスの度合いを0から100のスケールで数値化し、ユーザがどの程度のストレスを感じているかを視覚的に示す。これにより、可視化部は、ユーザの症状や程度を直感的に理解できるようにし、リアルタイムでの状況把握を支援することができる。さらに、可視化部は、ユーザが過去に経験した症状や程度を履歴として保存し、比較することもできる。これにより、ユーザの症状の変化や改善の傾向を把握しやすくなる。
【0032】
推測部は、可視化部によって可視化された情報に基づいて病名や原因を推測する。具体的には、痛みの部位や強さから病名を推測する。例えば、頭痛が頻繁に発生し、その強さが一定以上である場合、偏頭痛の可能性があると推測する。また、疲労感の原因を特定する。例えば、長時間の作業や睡眠不足が続いている場合、疲労感の原因が過労や睡眠不足であると推測する。さらに、ストレスの要因を分析する。例えば、ユーザが特定の状況や環境でストレスを感じている場合、その要因が仕事のプレッシャーや人間関係の問題であると推測する。推測部は、AIを用いてこれらのデータを解析し、複数のシナリオをシミュレーションすることで、最も可能性の高い病名や原因を特定する。これにより、推測部は、ユーザの症状や程度に基づいて、病名や原因を高精度で推測し、適切な対策を講じるための情報を提供することができる。さらに、推測部は、過去のデータや統計情報を活用して、長期的なリスク評価やトレンド分析を行うこともできる。
【0033】
提案部は、推測部によって推測された情報に基づいてパーソナライズされた改善策を提案する。具体的には、痛みの緩和方法を提案する。例えば、頭痛の場合は、冷やすことや休息を取ることを提案する。また、疲労回復のための運動を提案する。例えば、軽いストレッチやウォーキングを行うことで、疲労感を軽減する方法を提案する。さらに、ストレス軽減のためのリラクゼーション方法を提案する。例えば、深呼吸や瞑想を行うことで、ストレスを軽減する方法を提案する。提案部は、ユーザの個別の状況やニーズに応じて、最適な改善策を提供することができる。これにより、提案部は、ユーザが自身の症状や程度に応じた適切な対策を講じることを支援し、健康状態の改善を促進することができる。さらに、提案部は、ユーザのフィードバックを収集し、提案内容の精度や効果を継続的に改善することができる。
【0034】
レポート生成部は、提案部によって提案された情報に基づいて診療用レポートを生成する。具体的には、診療用レポートに痛みの強さや部位を記載する。例えば、頭痛の強さが10段階中7であり、部位が前頭部であることを記載する。また、診療用レポートに疲労感のレベルや原因を記載する。例えば、疲労感のレベルが10段階中8であり、原因が睡眠不足であることを記載する。さらに、診療用レポートにストレスの度合いや要因を記載する。例えば、ストレスの度合いが100段階中70であり、要因が仕事のプレッシャーであることを記載する。レポート生成部は、これらの情報を一元的にまとめ、医療従事者が容易に理解できる形式で提供することができる。これにより、レポート生成部は、医療従事者がユーザの症状や程度を迅速に把握し、適切な診療を行うための支援を行うことができる。さらに、レポート生成部は、過去のレポートを保存し、ユーザの症状の変化や改善の傾向を追跡することもできる。これにより、医療従事者は、ユーザの長期的な健康状態を把握しやすくなる。
【0035】
リマインダー部は、定期オンライン面談や通院・服薬等のリマインダー機能を提供する。リマインダー部は、例えば、週に一度のオンライン面談をリマインドする。リマインダー部は、例えば、月に一度の通院をリマインドする。リマインダー部は、例えば、毎日の服薬をリマインドする。これにより、定期オンライン面談や通院・服薬等のリマインダー機能を提供することで、日常的かつ継続的なケアが可能となる。リマインダー部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、リマインダー部は、ユーザのスケジュール情報を生成AIに入力し、リマインダーの生成を生成AIに実行させることができる。
【0036】
学習部は、継続的な自己学習を行う。学習部は、例えば、機械学習アルゴリズムを用いて自己学習を行う。学習部は、例えば、データの更新頻度を設定して自己学習を行う。学習部は、例えば、ユーザのフィードバックを基に自己学習を行う。これにより、継続的な自己学習を行うことで、システムの精度が向上し、最新の医療知識を常に更新することができる。学習部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、学習部は、ユーザのフィードバックデータを生成AIに入力し、自己学習の実行を生成AIに行わせることができる。
【0037】
更新部は、最新の医療知識を更新する。更新部は、例えば、新しい治療法を更新する。更新部は、例えば、最新の研究結果を更新する。更新部は、例えば、新しい薬剤情報を更新する。これにより、最新の医療知識を更新することで、常に最新の情報に基づいたケアが可能となる。更新部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、更新部は、最新の研究結果データを生成AIに入力し、医療知識の更新を生成AIに行わせることができる。
【0038】
解析部は、解析時に、ユーザの過去の健康データを参照して解析の精度を向上させることができる。解析部は、例えば、ユーザの過去の診療記録を参照し、現在の症状と比較して解析を行う。解析部は、例えば、ユーザの過去の健康診断結果を基に、現在の健康状態を解析する。解析部は、例えば、ユーザの過去の薬剤使用履歴を参照し、薬剤の影響を考慮して解析を行う。これにより、ユーザの過去の健康データを参照することで、解析の精度が向上する。解析部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、解析部は、ユーザの過去の健康データを生成AIに入力し、解析の精度向上を生成AIに行わせることができる。
【0039】
解析部は、解析時に、ユーザの生活習慣や環境情報を考慮して解析を行うことができる。解析部は、例えば、ユーザの食生活や運動習慣を考慮して解析を行う。解析部は、例えば、ユーザの住環境や職場環境を考慮して解析を行う。解析部は、例えば、ユーザの睡眠パターンやストレスレベルを考慮して解析を行う。これにより、ユーザの生活習慣や環境情報を考慮することで、より正確な解析が可能となる。解析部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、解析部は、ユーザの生活習慣データを生成AIに入力し、解析の実行を生成AIに行わせることができる。
【0040】
解析部は、解析時に、ユーザの地理的位置情報を考慮して解析を行うことができる。解析部は、例えば、ユーザの現在地の気候や環境を考慮して解析を行う。解析部は、例えば、ユーザの住んでいる地域の医療リソースを考慮して解析を行う。解析部は、例えば、ユーザの地理的位置に基づいて、特定の地域で流行している病気を考慮して解析を行う。これにより、ユーザの地理的位置情報を考慮することで、より正確な解析が可能となる。解析部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、解析部は、ユーザの地理的位置情報を生成AIに入力し、解析の実行を生成AIに行わせることができる。
【0041】
解析部は、解析時に、ユーザのソーシャルメディア活動を分析し、関連する情報を解析に反映させることができる。解析部は、例えば、ユーザのソーシャルメディア投稿からストレスレベルを推定し、解析に反映させる。解析部は、例えば、ユーザのソーシャルメディアでの活動頻度を考慮して解析を行う。解析部は、例えば、ユーザのソーシャルメディアでの友人関係やコミュニケーションパターンを分析し、解析に反映させる。これにより、ユーザのソーシャルメディア活動を分析することで、より正確な解析が可能となる。解析部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、解析部は、ユーザのソーシャルメディアデータを生成AIに入力し、解析の実行を生成AIに行わせることができる。
【0042】
可視化部は、可視化時に、症状の重要度に基づいて可視化の詳細度を調整することができる。可視化部は、例えば、重要度の高い症状については詳細なグラフを提供する。可視化部は、例えば、重要度の低い症状については簡略化されたグラフを提供する。可視化部は、例えば、症状の重要度に応じて、異なる色や形状のグラフを提供する。これにより、症状の重要度に基づいて可視化の詳細度を調整することで、より適切な可視化が可能となる。可視化部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、可視化部は、症状の重要度データを生成AIに入力し、詳細度の調整を生成AIに行わせることができる。
【0043】
可視化部は、可視化時に、症状のカテゴリに応じて異なる可視化手法を適用することができる。可視化部は、例えば、痛みの症状についてはヒートマップを提供する。可視化部は、例えば、精神的な症状については折れ線グラフを提供する。可視化部は、例えば、身体的な症状については棒グラフを提供する。これにより、症状のカテゴリに応じて異なる可視化手法を適用することで、より適切な可視化が可能となる。可視化部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、可視化部は、症状のカテゴリデータを生成AIに入力し、可視化手法の適用を生成AIに行わせることができる。
【0044】
可視化部は、可視化時に、症状の発生時期に基づいて可視化の優先順位を決定することができる。可視化部は、例えば、最近発生した症状を優先して可視化する。可視化部は、例えば、過去の症状の発生時期を考慮して可視化の順序を決定する。可視化部は、例えば、症状の発生頻度に基づいて可視化の優先順位を決定する。これにより、症状の発生時期に基づいて可視化の優先順位を決定することで、より適切な可視化が可能となる。可視化部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、可視化部は、症状の発生時期データを生成AIに入力し、優先順位の決定を生成AIに行わせることができる。
【0045】
可視化部は、可視化時に、症状の関連性に基づいて可視化の順序を調整することができる。可視化部は、例えば、関連性の高い症状をまとめて可視化する。可視化部は、例えば、関連性の低い症状を個別に可視化する。可視化部は、例えば、症状の関連性に基づいて、異なる色や形状のグラフを提供する。これにより、症状の関連性に基づいて可視化の順序を調整することで、より適切な可視化が可能となる。可視化部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、可視化部は、症状の関連性データを生成AIに入力し、順序の調整を生成AIに行わせることができる。
【0046】
推測部は、推測時に、症状の相互関係を考慮して推測の精度を向上させることができる。推測部は、例えば、複数の症状の相互関係を分析し、病名を推測する。推測部は、例えば、症状の発生順序を考慮して推測を行う。推測部は、例えば、症状の強度や頻度を基に推測を行う。これにより、症状の相互関係を考慮することで、推測の精度が向上する。推測部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、推測部は、症状の相互関係データを生成AIに入力し、推測の精度向上を生成AIに行わせることができる。
【0047】
推測部は、推測時に、ユーザの属性情報を考慮して推測を行うことができる。推測部は、例えば、ユーザの年齢や性別を考慮して推測を行う。推測部は、例えば、ユーザの職業や生活習慣を考慮して推測を行う。推測部は、例えば、ユーザの既往歴や家族歴を考慮して推測を行う。これにより、ユーザの属性情報を考慮することで、より正確な推測が可能となる。推測部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、推測部は、ユーザの属性情報を生成AIに入力し、推測の実行を生成AIに行わせることができる。
【0048】
推測部は、推測時に、症状の地理的分布を考慮して推測を行うことができる。推測部は、例えば、特定の地域で流行している病気を考慮して推測を行う。推測部は、例えば、ユーザの住んでいる地域の医療リソースを考慮して推測を行う。推測部は、例えば、ユーザの地理的位置に基づいて、特定の地域で発生しやすい症状を考慮して推測を行う。これにより、症状の地理的分布を考慮することで、より正確な推測が可能となる。推測部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、推測部は、症状の地理的分布データを生成AIに入力し、推測の実行を生成AIに行わせることができる。
【0049】
推測部は、推測時に、関連文献を参照して推測の精度を向上させることができる。推測部は、例えば、最新の医学論文を参照して推測を行う。推測部は、例えば、過去の症例報告を基に推測を行う。推測部は、例えば、関連する医学書籍を参照して推測を行う。これにより、関連文献を参照することで、推測の精度が向上する。推測部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、推測部は、関連文献データを生成AIに入力し、推測の精度向上を生成AIに行わせることができる。
【0050】
提案部は、提案時に、症状の重要度に基づいて提案の詳細度を調整することができる。提案部は、例えば、重要度の高い症状については詳細な提案を提供する。提案部は、例えば、重要度の低い症状については簡略化された提案を提供する。提案部は、例えば、症状の重要度に応じて、異なる色や形状の提案を提供する。これにより、症状の重要度に基づいて提案の詳細度を調整することで、より適切な提案が可能となる。提案部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、提案部は、症状の重要度データを生成AIに入力し、詳細度の調整を生成AIに行わせることができる。
【0051】
提案部は、提案時に、症状のカテゴリに応じて異なる提案アルゴリズムを適用することができる。提案部は、例えば、痛みの症状については特定の治療法を提案する。提案部は、例えば、精神的な症状についてはカウンセリングを提案する。提案部は、例えば、身体的な症状については運動療法を提案する。これにより、症状のカテゴリに応じて異なる提案アルゴリズムを適用することで、より適切な提案が可能となる。提案部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、提案部は、症状のカテゴリデータを生成AIに入力し、提案アルゴリズムの適用を生成AIに行わせることができる。
【0052】
提案部は、提案時に、症状の発生時期に基づいて提案の優先順位を決定することができる。提案部は、例えば、最近発生した症状を優先して提案する。提案部は、例えば、過去の症状の発生時期を考慮して提案の順序を決定する。提案部は、例えば、症状の発生頻度に基づいて提案の優先順位を決定する。これにより、症状の発生時期に基づいて提案の優先順位を決定することで、より適切な提案が可能となる。提案部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、提案部は、症状の発生時期データを生成AIに入力し、優先順位の決定を生成AIに行わせることができる。
【0053】
提案部は、提案時に、症状の関連性に基づいて提案の順序を調整することができる。提案部は、例えば、関連性の高い症状をまとめて提案する。提案部は、例えば、関連性の低い症状を個別に提案する。提案部は、例えば、症状の関連性に基づいて、異なる色や形状の提案を提供する。これにより、症状の関連性に基づいて提案の順序を調整することで、より適切な提案が可能となる。提案部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、提案部は、症状の関連性データを生成AIに入力し、順序の調整を生成AIに行わせることができる。
【0054】
レポート生成部は、レポート生成時に、症状の重要度に基づいてレポートの詳細度を調整することができる。レポート生成部は、例えば、重要度の高い症状については詳細なレポートを提供する。レポート生成部は、例えば、重要度の低い症状については簡略化されたレポートを提供する。レポート生成部は、例えば、症状の重要度に応じて、異なる色や形状のレポートを提供する。これにより、症状の重要度に基づいてレポートの詳細度を調整することで、より適切なレポートが可能となる。レポート生成部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、レポート生成部は、症状の重要度データを生成AIに入力し、詳細度の調整を生成AIに行わせることができる。
【0055】
レポート生成部は、レポート生成時に、症状のカテゴリに応じて異なるレポート生成アルゴリズムを適用することができる。レポート生成部は、例えば、痛みの症状については特定のレポート生成アルゴリズムを適用する。レポート生成部は、例えば、精神的な症状については別のレポート生成アルゴリズムを適用する。レポート生成部は、例えば、身体的な症状についてはさらに別のレポート生成アルゴリズムを適用する。これにより、症状のカテゴリに応じて異なるレポート生成アルゴリズムを適用することで、より適切なレポートが可能となる。レポート生成部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、レポート生成部は、症状のカテゴリデータを生成AIに入力し、レポート生成アルゴリズムの適用を生成AIに行わせることができる。
【0056】
レポート生成部は、レポート生成時に、症状の発生時期に基づいてレポートの優先順位を決定することができる。レポート生成部は、例えば、最近発生した症状を優先してレポートに記載する。レポート生成部は、例えば、過去の症状の発生時期を考慮してレポートの順序を決定する。レポート生成部は、例えば、症状の発生頻度に基づいてレポートの優先順位を決定する。これにより、症状の発生時期に基づいてレポートの優先順位を決定することで、より適切なレポートが可能となる。レポート生成部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、レポート生成部は、症状の発生時期データを生成AIに入力し、優先順位の決定を生成AIに行わせることができる。
【0057】
レポート生成部は、レポート生成時に、症状の関連性に基づいてレポートの順序を調整することができる。レポート生成部は、例えば、関連性の高い症状をまとめてレポートに記載する。レポート生成部は、例えば、関連性の低い症状を個別にレポートに記載する。レポート生成部は、例えば、症状の関連性に基づいて、異なる色や形状のレポートを提供する。これにより、症状の関連性に基づいてレポートの順序を調整することで、より適切なレポートが可能となる。レポート生成部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、レポート生成部は、症状の関連性データを生成AIに入力し、順序の調整を生成AIに行わせることができる。
【0058】
リマインダー部は、リマインダー通知時に、ユーザの過去の行動履歴を参照して最適な通知方法を選定することができる。リマインダー部は、例えば、ユーザの過去の行動履歴を基に、最適な通知方法を選定する。リマインダー部は、例えば、ユーザの過去の行動パターンを分析し、最適な通知タイミングを選定する。リマインダー部は、例えば、ユーザの過去の行動履歴を参照し、最適な通知内容を選定する。これにより、ユーザの過去の行動履歴を参照することで、最適な通知方法を選定することができる。リマインダー部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、リマインダー部は、ユーザの過去の行動履歴データを生成AIに入力し、通知方法の選定を生成AIに行わせることができる。
【0059】
リマインダー部は、リマインダー通知時に、ユーザのデバイス情報を考慮して最適な通知方法を選定することができる。リマインダー部は、例えば、ユーザがスマートフォンを使用している場合、画面サイズに合わせた通知方法を提供する。リマインダー部は、例えば、ユーザがタブレットを使用している場合、大きな画面に最適化された通知方法を提供する。リマインダー部は、例えば、ユーザがスマートウォッチを使用している場合、簡潔で視認性の高い通知方法を提供する。これにより、ユーザのデバイス情報を考慮することで、最適な通知方法を選定することができる。リマインダー部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、リマインダー部は、ユーザのデバイス情報を生成AIに入力し、通知方法の選定を生成AIに行わせることができる。
【0060】
学習部は、学習時に、過去の学習データを参照して学習アルゴリズムを最適化することができる。学習部は、例えば、過去の学習データを基に、最適な学習アルゴリズムを選定する。学習部は、例えば、過去の学習データを分析し、学習アルゴリズムのパラメータを調整する。学習部は、例えば、過去の学習データを参照し、学習アルゴリズムの精度を向上させる。これにより、過去の学習データを参照することで、学習アルゴリズムを最適化することができる。学習部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、学習部は、過去の学習データを生成AIに入力し、学習アルゴリズムの最適化を生成AIに行わせることができる。
【0061】
学習部は、学習時に、症状の発生時期に基づいて学習データの重み付けを行うことができる。学習部は、例えば、最近発生した症状のデータに重みを付けて学習する。学習部は、例えば、過去の症状の発生時期を考慮して学習データの重み付けを行う。学習部は、例えば、症状の発生頻度に基づいて学習データの重み付けを行う。これにより、症状の発生時期に基づいて学習データの重み付けを行うことで、より適切な学習が可能となる。学習部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、学習部は、症状の発生時期データを生成AIに入力し、重み付けを生成AIに行わせることができる。
【0062】
更新部は、更新時に、過去の更新データを参照して更新アルゴリズムを最適化することができる。更新部は、例えば、過去の更新データを基に、最適な更新アルゴリズムを選定する。更新部は、例えば、過去の更新データを分析し、更新アルゴリズムのパラメータを調整する。更新部は、例えば、過去の更新データを参照し、更新アルゴリズムの精度を向上させる。これにより、過去の更新データを参照することで、更新アルゴリズムを最適化することができる。更新部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、更新部は、過去の更新データを生成AIに入力し、更新アルゴリズムの最適化を生成AIに行わせることができる。
【0063】
更新部は、更新時に、症状の発生時期に基づいて更新データの重み付けを行うことができる。更新部は、例えば、最近発生した症状のデータに重みを付けて更新する。更新部は、例えば、過去の症状の発生時期を考慮して更新データの重み付けを行う。更新部は、例えば、症状の発生頻度に基づいて更新データの重み付けを行う。これにより、症状の発生時期に基づいて更新データの重み付けを行うことで、より適切な更新が可能となる。更新部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、更新部は、症状の発生時期データを生成AIに入力し、重み付けを生成AIに行わせることができる。
【0064】
実施形態に係るシステムは、上述した例に限定されず、例えば、以下のように、種々の変更が可能である。
【0065】
解析部は、解析時に、ユーザの過去の健康データを参照して解析の精度を向上させることができる。例えば、ユーザの過去の診療記録を参照し、現在の症状と比較して解析を行うことができる。また、ユーザの過去の健康診断結果を基に、現在の健康状態を解析することができる。さらに、ユーザの過去の薬剤使用履歴を参照し、薬剤の影響を考慮して解析を行うことができる。これにより、ユーザの過去の健康データを参照することで、解析の精度が向上する。
【0066】
解析部は、解析時に、ユーザの生活習慣や環境情報を考慮して解析を行うことができる。例えば、ユーザの食生活や運動習慣を考慮して解析を行うことができる。また、ユーザの住環境や職場環境を考慮して解析を行うことができる。さらに、ユーザの睡眠パターンやストレスレベルを考慮して解析を行うことができる。これにより、ユーザの生活習慣や環境情報を考慮することで、より正確な解析が可能となる。
【0067】
解析部は、解析時に、ユーザの地理的位置情報を考慮して解析を行うことができる。例えば、ユーザの現在地の気候や環境を考慮して解析を行うことができる。また、ユーザの住んでいる地域の医療リソースを考慮して解析を行うことができる。さらに、ユーザの地理的位置に基づいて、特定の地域で流行している病気を考慮して解析を行うことができる。これにより、ユーザの地理的位置情報を考慮することで、より正確な解析が可能となる。
【0068】
解析部は、解析時に、ユーザのソーシャルメディア活動を分析し、関連する情報を解析に反映させることができる。例えば、ユーザのソーシャルメディア投稿からストレスレベルを推定し、解析に反映させることができる。また、ユーザのソーシャルメディアでの活動頻度を考慮して解析を行うことができる。さらに、ユーザのソーシャルメディアでの友人関係やコミュニケーションパターンを分析し、解析に反映させることができる。これにより、ユーザのソーシャルメディア活動を分析することで、より正確な解析が可能となる。
【0069】
可視化部は、可視化時に、症状の重要度に基づいて可視化の詳細度を調整することができる。例えば、重要度の高い症状については詳細なグラフを提供することができる。また、重要度の低い症状については簡略化されたグラフを提供することができる。さらに、症状の重要度に応じて、異なる色や形状のグラフを提供することができる。これにより、症状の重要度に基づいて可視化の詳細度を調整することで、より適切な可視化が可能となる。
【0070】
可視化部は、可視化時に、症状のカテゴリに応じて異なる可視化手法を適用することができる。例えば、痛みの症状についてはヒートマップを提供することができる。また、精神的な症状については折れ線グラフを提供することができる。さらに、身体的な症状については棒グラフを提供することができる。これにより、症状のカテゴリに応じて異なる可視化手法を適用することで、より適切な可視化が可能となる。
【0071】
以下に、形態例1の処理の流れについて簡単に説明する。
【0072】
ステップ1:解析部は、ユーザの言葉、表情、音声を解析する。例えば、ユーザの言葉を解析し、感情や症状を特定する。ユーザの表情を解析し、痛みや不快感の程度を判断する。ユーザの音声を解析し、ストレスや疲労のレベルを推測する。
ステップ2:可視化部は、解析部によって解析された情報に基づいてリアルタイムで痛み等の症状や程度を可視化する。例えば、痛みの強さをグラフで表示し、疲労感のレベルを色で示し、ストレスの度合いを数値で表す。
ステップ3:推測部は、可視化部によって可視化された情報に基づいて病名や原因を推測する。例えば、痛みの部位や強さから病名を推測し、疲労感の原因を特定し、ストレスの要因を分析する。
ステップ4:提案部は、推測部によって推測された情報に基づいてパーソナライズされた改善策を提案する。例えば、痛みの緩和方法を提案し、疲労回復のための運動を提案し、ストレス軽減のためのリラクゼーション方法を提案する。
ステップ5:レポート生成部は、提案部によって提案された情報に基づいて診療用レポートを生成する。例えば、診療用レポートに痛みの強さや部位を記載し、疲労感のレベルや原因を記載し、ストレスの度合いや要因を記載する。
【0073】
(形態例2)
本発明の実施形態に係るCare AIエージェントシステムは、物理的や心理的に辛い時の症状を解析し、改善策を提案するシステムである。このCare AIエージェントシステムは、ユーザの言葉、表情、音声を解析し、リアルタイムで痛み等の症状や程度を可視化し、病名や原因を推測する。次に、パーソナライズされた改善策を提案し、自分専用のAIキャラクターによる共感の声掛けを行う。これにより、医療機関向けに診療用レポートを生成し、迅速で適切な治療が可能となり、診療時間の短縮や医療精度の向上が期待できる。また、患者の心理的負担の軽減や物理的症状の緩和も図られる。さらに、定期オンライン面談や通院・服薬等のリマインダー機能により、日常的かつ継続的なケアが可能となる。Care AIエージェントは、継続的な自己学習で進化し、最新の医療知識も常に更新される。これにより、家族や周囲に迷惑をかけたくないが辛いと感じるユーザに対して、共感し寄り添う存在となる。例えば、Care AIエージェントシステムは、ユーザの言葉、表情、音声を解析する。例えば、Care AIエージェントシステムは、ユーザの言葉を解析し、感情や症状を特定する。次に、Care AIエージェントシステムは、ユーザの表情を解析し、痛みや不快感の程度を判断する。さらに、Care AIエージェントシステムは、ユーザの音声を解析し、ストレスや疲労のレベルを推測する。これにより、Care AIエージェントシステムは、ユーザの状態を総合的に把握し、適切な改善策を提案することができる。これにより、Care AIエージェントシステムは、ユーザの症状をリアルタイムで解析し、適切な改善策を提案することができる。
【0074】
実施形態に係るCare AIエージェントシステムは、解析部と、可視化部と、推測部と、提案部と、レポート生成部とを備える。解析部は、ユーザの言葉、表情、音声を解析する。解析部は、例えば、ユーザの言葉を解析し、感情や症状を特定する。解析部は、例えば、ユーザの表情を解析し、痛みや不快感の程度を判断する。解析部は、例えば、ユーザの音声を解析し、ストレスや疲労のレベルを推測する。可視化部は、解析部によって解析された情報に基づいてリアルタイムで痛み等の症状や程度を可視化する。可視化部は、例えば、痛みの強さをグラフで表示する。可視化部は、例えば、疲労感のレベルを色で示す。可視化部は、例えば、ストレスの度合いを数値で表す。推測部は、可視化部によって可視化された情報に基づいて病名や原因を推測する。推測部は、例えば、痛みの部位や強さから病名を推測する。推測部は、例えば、疲労感の原因を特定する。推測部は、例えば、ストレスの要因を分析する。提案部は、推測部によって推測された情報に基づいてパーソナライズされた改善策を提案する。提案部は、例えば、痛みの緩和方法を提案する。提案部は、例えば、疲労回復のための運動を提案する。提案部は、例えば、ストレス軽減のためのリラクゼーション方法を提案する。レポート生成部は、提案部によって提案された情報に基づいて診療用レポートを生成する。レポート生成部は、例えば、診療用レポートに痛みの強さや部位を記載する。レポート生成部は、例えば、診療用レポートに疲労感のレベルや原因を記載する。レポート生成部は、例えば、診療用レポートにストレスの度合いや要因を記載する。これにより、実施形態に係るCare AIエージェントシステムは、ユーザの言葉、表情、音声を解析し、リアルタイムで症状や程度を可視化し、病名や原因を推測し、パーソナライズされた改善策を提案し、診療用レポートを生成することができる。
【0075】
解析部は、ユーザの言葉、表情、音声を解析する。解析部は、例えば、ユーザの言葉を解析し、感情や症状を特定する。具体的には、自然言語処理技術を用いてユーザの発言内容を解析し、キーワードや文脈から感情や症状を抽出する。例えば、ユーザが「頭が痛い」と言った場合、解析部は「痛み」というキーワードを抽出し、その痛みの部位が頭であることを特定する。また、ユーザの表情を解析し、痛みや不快感の程度を判断する。表情解析には、画像認識技術を用いて、顔の表情筋の動きや目の開閉、口角の上がり具合などを解析する。例えば、ユーザが眉をひそめている場合、解析部はその表情から痛みや不快感を感じていると判断する。さらに、ユーザの音声を解析し、ストレスや疲労のレベルを推測する。音声解析には、音声認識技術を用いて、声のトーンやピッチ、話す速度などを解析する。例えば、ユーザの声が震えている場合、解析部はその音声からストレスを感じていると推測する。これにより、解析部は、ユーザの言葉、表情、音声から多角的に情報を収集し、感情や症状を特定することができる。
【0076】
可視化部は、解析部によって解析された情報に基づいてリアルタイムで痛み等の症状や程度を可視化する。具体的には、解析部から得られたデータを基に、ユーザの痛みの強さをグラフで表示する。例えば、痛みの強さを0から10のスケールで表し、時間の経過とともに変化する痛みの強さを折れ線グラフで表示する。また、疲労感のレベルを色で示す。例えば、疲労感が低い場合は緑色、中程度の場合は黄色、高い場合は赤色で表示する。さらに、ストレスの度合いを数値で表す。例えば、ストレスの度合いを0から100のスケールで数値化し、ユーザがどの程度のストレスを感じているかを視覚的に示す。これにより、可視化部は、ユーザの症状や程度を直感的に理解できるようにし、リアルタイムでの状況把握を支援することができる。さらに、可視化部は、ユーザが過去に経験した症状や程度を履歴として保存し、比較することもできる。これにより、ユーザの症状の変化や改善の傾向を把握しやすくなる。
【0077】
推測部は、可視化部によって可視化された情報に基づいて病名や原因を推測する。具体的には、痛みの部位や強さから病名を推測する。例えば、頭痛が頻繁に発生し、その強さが一定以上である場合、偏頭痛の可能性があると推測する。また、疲労感の原因を特定する。例えば、長時間の作業や睡眠不足が続いている場合、疲労感の原因が過労や睡眠不足であると推測する。さらに、ストレスの要因を分析する。例えば、ユーザが特定の状況や環境でストレスを感じている場合、その要因が仕事のプレッシャーや人間関係の問題であると推測する。推測部は、AIを用いてこれらのデータを解析し、複数のシナリオをシミュレーションすることで、最も可能性の高い病名や原因を特定する。これにより、推測部は、ユーザの症状や程度に基づいて、病名や原因を高精度で推測し、適切な対策を講じるための情報を提供することができる。さらに、推測部は、過去のデータや統計情報を活用して、長期的なリスク評価やトレンド分析を行うこともできる。
【0078】
提案部は、推測部によって推測された情報に基づいてパーソナライズされた改善策を提案する。具体的には、痛みの緩和方法を提案する。例えば、頭痛の場合は、冷やすことや休息を取ることを提案する。また、疲労回復のための運動を提案する。例えば、軽いストレッチやウォーキングを行うことで、疲労感を軽減する方法を提案する。さらに、ストレス軽減のためのリラクゼーション方法を提案する。例えば、深呼吸や瞑想を行うことで、ストレスを軽減する方法を提案する。提案部は、ユーザの個別の状況やニーズに応じて、最適な改善策を提供することができる。これにより、提案部は、ユーザが自身の症状や程度に応じた適切な対策を講じることを支援し、健康状態の改善を促進することができる。さらに、提案部は、ユーザのフィードバックを収集し、提案内容の精度や効果を継続的に改善することができる。
【0079】
レポート生成部は、提案部によって提案された情報に基づいて診療用レポートを生成する。具体的には、診療用レポートに痛みの強さや部位を記載する。例えば、頭痛の強さが10段階中7であり、部位が前頭部であることを記載する。また、診療用レポートに疲労感のレベルや原因を記載する。例えば、疲労感のレベルが10段階中8であり、原因が睡眠不足であることを記載する。さらに、診療用レポートにストレスの度合いや要因を記載する。例えば、ストレスの度合いが100段階中70であり、要因が仕事のプレッシャーであることを記載する。レポート生成部は、これらの情報を一元的にまとめ、医療従事者が容易に理解できる形式で提供することができる。これにより、レポート生成部は、医療従事者がユーザの症状や程度を迅速に把握し、適切な診療を行うための支援を行うことができる。さらに、レポート生成部は、過去のレポートを保存し、ユーザの症状の変化や改善の傾向を追跡することもできる。これにより、医療従事者は、ユーザの長期的な健康状態を把握しやすくなる。
【0080】
リマインダー部は、定期オンライン面談や通院・服薬等のリマインダー機能を提供する。リマインダー部は、例えば、週に一度のオンライン面談をリマインドする。リマインダー部は、例えば、月に一度の通院をリマインドする。リマインダー部は、例えば、毎日の服薬をリマインドする。これにより、定期オンライン面談や通院・服薬等のリマインダー機能を提供することで、日常的かつ継続的なケアが可能となる。リマインダー部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、リマインダー部は、ユーザのスケジュール情報を生成AIに入力し、リマインダーの生成を生成AIに実行させることができる。
【0081】
学習部は、継続的な自己学習を行う。学習部は、例えば、機械学習アルゴリズムを用いて自己学習を行う。学習部は、例えば、データの更新頻度を設定して自己学習を行う。学習部は、例えば、ユーザのフィードバックを基に自己学習を行う。これにより、継続的な自己学習を行うことで、システムの精度が向上し、最新の医療知識を常に更新することができる。学習部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、学習部は、ユーザのフィードバックデータを生成AIに入力し、自己学習の実行を生成AIに行わせることができる。
【0082】
更新部は、最新の医療知識を更新する。更新部は、例えば、新しい治療法を更新する。更新部は、例えば、最新の研究結果を更新する。更新部は、例えば、新しい薬剤情報を更新する。これにより、最新の医療知識を更新することで、常に最新の情報に基づいたケアが可能となる。更新部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、更新部は、最新の研究結果データを生成AIに入力し、医療知識の更新を生成AIに行わせることができる。
【0083】
解析部は、ユーザの感情を推定し、推定したユーザの感情に基づいて解析の精度を調整することができる。解析部は、例えば、ユーザがストレスを感じている場合、感情の変動を考慮して解析の精度を高める。解析部は、例えば、ユーザがリラックスしている場合、感情の安定性を前提に解析を行う。解析部は、例えば、ユーザが不安を感じている場合、感情の不安定さを補正して解析を行う。これにより、ユーザの感情に基づいて解析の精度を調整することで、より正確な解析が可能となる。感情の推定は、例えば、感情エンジンまたは生成AIなどを用いて感情推定機能を用いて実現される。生成AIは、テキスト生成AI(例えば、LLM)やマルチモーダル生成AIなどであるが、かかる例に限定されない。解析部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、解析部は、ユーザの感情データを生成AIに入力し、解析の精度調整を生成AIに行わせることができる。
【0084】
解析部は、解析時に、ユーザの過去の健康データを参照して解析の精度を向上させることができる。解析部は、例えば、ユーザの過去の診療記録を参照し、現在の症状と比較して解析を行う。解析部は、例えば、ユーザの過去の健康診断結果を基に、現在の健康状態を解析する。解析部は、例えば、ユーザの過去の薬剤使用履歴を参照し、薬剤の影響を考慮して解析を行う。これにより、ユーザの過去の健康データを参照することで、解析の精度が向上する。解析部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、解析部は、ユーザの過去の健康データを生成AIに入力し、解析の精度向上を生成AIに行わせることができる。
【0085】
解析部は、解析時に、ユーザの生活習慣や環境情報を考慮して解析を行うことができる。解析部は、例えば、ユーザの食生活や運動習慣を考慮して解析を行う。解析部は、例えば、ユーザの住環境や職場環境を考慮して解析を行う。解析部は、例えば、ユーザの睡眠パターンやストレスレベルを考慮して解析を行う。これにより、ユーザの生活習慣や環境情報を考慮することで、より正確な解析が可能となる。解析部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、解析部は、ユーザの生活習慣データを生成AIに入力し、解析の実行を生成AIに行わせることができる。
【0086】
解析部は、ユーザの感情を推定し、推定したユーザの感情に基づいて解析結果の表示方法を調整することができる。解析部は、例えば、ユーザが緊張している場合、シンプルで視認性の高い表示方法を提供する。解析部は、例えば、ユーザがリラックスしている場合、詳細な情報を含む表示方法を提供する。解析部は、例えば、ユーザが急いでいる場合、要点を押さえた表示方法を提供する。これにより、ユーザの感情に基づいて解析結果の表示方法を調整することで、より適切な表示が可能となる。感情の推定は、例えば、感情エンジンまたは生成AIなどを用いて感情推定機能を用いて実現される。生成AIは、テキスト生成AI(例えば、LLM)やマルチモーダル生成AIなどであるが、かかる例に限定されない。解析部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、解析部は、ユーザの感情データを生成AIに入力し、表示方法の調整を生成AIに行わせることができる。
【0087】
解析部は、解析時に、ユーザの地理的位置情報を考慮して解析を行うことができる。解析部は、例えば、ユーザの現在地の気候や環境を考慮して解析を行う。解析部は、例えば、ユーザの住んでいる地域の医療リソースを考慮して解析を行う。解析部は、例えば、ユーザの地理的位置に基づいて、特定の地域で流行している病気を考慮して解析を行う。これにより、ユーザの地理的位置情報を考慮することで、より正確な解析が可能となる。解析部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、解析部は、ユーザの地理的位置情報を生成AIに入力し、解析の実行を生成AIに行わせることができる。
【0088】
解析部は、解析時に、ユーザのソーシャルメディア活動を分析し、関連する情報を解析に反映させることができる。解析部は、例えば、ユーザのソーシャルメディア投稿からストレスレベルを推定し、解析に反映させる。解析部は、例えば、ユーザのソーシャルメディアでの活動頻度を考慮して解析を行う。解析部は、例えば、ユーザのソーシャルメディアでの友人関係やコミュニケーションパターンを分析し、解析に反映させる。これにより、ユーザのソーシャルメディア活動を分析することで、より正確な解析が可能となる。解析部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、解析部は、ユーザのソーシャルメディアデータを生成AIに入力し、解析の実行を生成AIに行わせることができる。
【0089】
可視化部は、ユーザの感情を推定し、推定したユーザの感情に基づいて可視化の表現方法を調整することができる。可視化部は、例えば、ユーザがストレスを感じている場合、シンプルで視認性の高いグラフを提供する。可視化部は、例えば、ユーザがリラックスしている場合、詳細なデータを含むグラフを提供する。可視化部は、例えば、ユーザが不安を感じている場合、安心感を与える色合いのグラフを提供する。これにより、ユーザの感情に基づいて可視化の表現方法を調整することで、より適切な可視化が可能となる。感情の推定は、例えば、感情エンジンまたは生成AIなどを用いて感情推定機能を用いて実現される。生成AIは、テキスト生成AI(例えば、LLM)やマルチモーダル生成AIなどであるが、かかる例に限定されない。可視化部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、可視化部は、ユーザの感情データを生成AIに入力し、表現方法の調整を生成AIに行わせることができる。
【0090】
可視化部は、可視化時に、症状の重要度に基づいて可視化の詳細度を調整することができる。可視化部は、例えば、重要度の高い症状については詳細なグラフを提供する。可視化部は、例えば、重要度の低い症状については簡略化されたグラフを提供する。可視化部は、例えば、症状の重要度に応じて、異なる色や形状のグラフを提供する。これにより、症状の重要度に基づいて可視化の詳細度を調整することで、より適切な可視化が可能となる。可視化部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、可視化部は、症状の重要度データを生成AIに入力し、詳細度の調整を生成AIに行わせることができる。
【0091】
可視化部は、可視化時に、症状のカテゴリに応じて異なる可視化手法を適用することができる。可視化部は、例えば、痛みの症状についてはヒートマップを提供する。可視化部は、例えば、精神的な症状については折れ線グラフを提供する。可視化部は、例えば、身体的な症状については棒グラフを提供する。これにより、症状のカテゴリに応じて異なる可視化手法を適用することで、より適切な可視化が可能となる。可視化部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、可視化部は、症状のカテゴリデータを生成AIに入力し、可視化手法の適用を生成AIに行わせることができる。
【0092】
可視化部は、ユーザの感情を推定し、推定したユーザの感情に基づいて可視化の長さを調整することができる。可視化部は、例えば、ユーザが急いでいる場合、短くて要点を押さえたグラフを提供する。可視化部は、例えば、ユーザがリラックスしている場合、詳細な説明を含む長めのグラフを提供する。可視化部は、例えば、ユーザが興奮している場合、視覚的に刺激的なエフェクトを加えたグラフを提供する。これにより、ユーザの感情に基づいて可視化の長さを調整することで、より適切な可視化が可能となる。感情の推定は、例えば、感情エンジンまたは生成AIなどを用いて感情推定機能を用いて実現される。生成AIは、テキスト生成AI(例えば、LLM)やマルチモーダル生成AIなどであるが、かかる例に限定されない。可視化部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、可視化部は、ユーザの感情データを生成AIに入力し、長さの調整を生成AIに行わせることができる。
【0093】
可視化部は、可視化時に、症状の発生時期に基づいて可視化の優先順位を決定することができる。可視化部は、例えば、最近発生した症状を優先して可視化する。可視化部は、例えば、過去の症状の発生時期を考慮して可視化の順序を決定する。可視化部は、例えば、症状の発生頻度に基づいて可視化の優先順位を決定する。これにより、症状の発生時期に基づいて可視化の優先順位を決定することで、より適切な可視化が可能となる。可視化部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、可視化部は、症状の発生時期データを生成AIに入力し、優先順位の決定を生成AIに行わせることができる。
【0094】
可視化部は、可視化時に、症状の関連性に基づいて可視化の順序を調整することができる。可視化部は、例えば、関連性の高い症状をまとめて可視化する。可視化部は、例えば、関連性の低い症状を個別に可視化する。可視化部は、例えば、症状の関連性に基づいて、異なる色や形状のグラフを提供する。これにより、症状の関連性に基づいて可視化の順序を調整することで、より適切な可視化が可能となる。可視化部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、可視化部は、症状の関連性データを生成AIに入力し、順序の調整を生成AIに行わせることができる。
【0095】
推測部は、ユーザの感情を推定し、推定したユーザの感情に基づいて推測の基準を調整することができる。推測部は、例えば、ユーザがストレスを感じている場合、感情の変動を考慮して推測の基準を調整する。推測部は、例えば、ユーザがリラックスしている場合、感情の安定性を前提に推測を行う。推測部は、例えば、ユーザが不安を感じている場合、感情の不安定さを補正して推測を行う。これにより、ユーザの感情に基づいて推測の基準を調整することで、より正確な推測が可能となる。感情の推定は、例えば、感情エンジンまたは生成AIなどを用いて感情推定機能を用いて実現される。生成AIは、テキスト生成AI(例えば、LLM)やマルチモーダル生成AIなどであるが、かかる例に限定されない。推測部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、推測部は、ユーザの感情データを生成AIに入力し、推測の基準調整を生成AIに行わせることができる。
【0096】
推測部は、推測時に、症状の相互関係を考慮して推測の精度を向上させることができる。推測部は、例えば、複数の症状の相互関係を分析し、病名を推測する。推測部は、例えば、症状の発生順序を考慮して推測を行う。推測部は、例えば、症状の強度や頻度を基に推測を行う。これにより、症状の相互関係を考慮することで、推測の精度が向上する。推測部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、推測部は、症状の相互関係データを生成AIに入力し、推測の精度向上を生成AIに行わせることができる。
【0097】
推測部は、推測時に、ユーザの属性情報を考慮して推測を行うことができる。推測部は、例えば、ユーザの年齢や性別を考慮して推測を行う。推測部は、例えば、ユーザの職業や生活習慣を考慮して推測を行う。推測部は、例えば、ユーザの既往歴や家族歴を考慮して推測を行う。これにより、ユーザの属性情報を考慮することで、より正確な推測が可能となる。推測部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、推測部は、ユーザの属性情報を生成AIに入力し、推測の実行を生成AIに行わせることができる。
【0098】
推測部は、ユーザの感情を推定し、推定したユーザの感情に基づいて推測結果の表示順序を調整することができる。推測部は、例えば、ユーザが緊張している場合、シンプルで視認性の高い表示順序を提供する。推測部は、例えば、ユーザがリラックスしている場合、詳細な情報を含む表示順序を提供する。推測部は、例えば、ユーザが急いでいる場合、要点を押さえた表示順序を提供する。これにより、ユーザの感情に基づいて推測結果の表示順序を調整することで、より適切な表示が可能となる。感情の推定は、例えば、感情エンジンまたは生成AIなどを用いて感情推定機能を用いて実現される。生成AIは、テキスト生成AI(例えば、LLM)やマルチモーダル生成AIなどであるが、かかる例に限定されない。推測部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、推測部は、ユーザの感情データを生成AIに入力し、表示順序の調整を生成AIに行わせることができる。
【0099】
推測部は、推測時に、症状の地理的分布を考慮して推測を行うことができる。推測部は、例えば、特定の地域で流行している病気を考慮して推測を行う。推測部は、例えば、ユーザの住んでいる地域の医療リソースを考慮して推測を行う。推測部は、例えば、ユーザの地理的位置に基づいて、特定の地域で発生しやすい症状を考慮して推測を行う。これにより、症状の地理的分布を考慮することで、より正確な推測が可能となる。推測部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、推測部は、症状の地理的分布データを生成AIに入力し、推測の実行を生成AIに行わせることができる。
【0100】
推測部は、推測時に、関連文献を参照して推測の精度を向上させることができる。推測部は、例えば、最新の医学論文を参照して推測を行う。推測部は、例えば、過去の症例報告を基に推測を行う。推測部は、例えば、関連する医学書籍を参照して推測を行う。これにより、関連文献を参照することで、推測の精度が向上する。推測部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、推測部は、関連文献データを生成AIに入力し、推測の精度向上を生成AIに行わせることができる。
【0101】
提案部は、ユーザの感情を推定し、推定したユーザの感情に基づいて提案の表現方法を調整することができる。提案部は、例えば、ユーザがストレスを感じている場合、シンプルで視認性の高い提案を提供する。提案部は、例えば、ユーザがリラックスしている場合、詳細な情報を含む提案を提供する。提案部は、例えば、ユーザが不安を感じている場合、安心感を与える表現方法で提案を提供する。これにより、ユーザの感情に基づいて提案の表現方法を調整することで、より適切な提案が可能となる。感情の推定は、例えば、感情エンジンまたは生成AIなどを用いて感情推定機能を用いて実現される。生成AIは、テキスト生成AI(例えば、LLM)やマルチモーダル生成AIなどであるが、かかる例に限定されない。提案部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、提案部は、ユーザの感情データを生成AIに入力し、表現方法の調整を生成AIに行わせることができる。
【0102】
提案部は、提案時に、症状の重要度に基づいて提案の詳細度を調整することができる。提案部は、例えば、重要度の高い症状については詳細な提案を提供する。提案部は、例えば、重要度の低い症状については簡略化された提案を提供する。提案部は、例えば、症状の重要度に応じて、異なる色や形状の提案を提供する。これにより、症状の重要度に基づいて提案の詳細度を調整することで、より適切な提案が可能となる。提案部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、提案部は、症状の重要度データを生成AIに入力し、詳細度の調整を生成AIに行わせることができる。
【0103】
提案部は、提案時に、症状のカテゴリに応じて異なる提案アルゴリズムを適用することができる。提案部は、例えば、痛みの症状については特定の治療法を提案する。提案部は、例えば、精神的な症状についてはカウンセリングを提案する。提案部は、例えば、身体的な症状については運動療法を提案する。これにより、症状のカテゴリに応じて異なる提案アルゴリズムを適用することで、より適切な提案が可能となる。提案部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、提案部は、症状のカテゴリデータを生成AIに入力し、提案アルゴリズムの適用を生成AIに行わせることができる。
【0104】
提案部は、ユーザの感情を推定し、推定したユーザの感情に基づいて提案の長さを調整することができる。提案部は、例えば、ユーザが急いでいる場合、短くて要点を押さえた提案を提供する。提案部は、例えば、ユーザがリラックスしている場合、詳細な説明を含む長めの提案を提供する。提案部は、例えば、ユーザが興奮している場合、視覚的に刺激的なエフェクトを加えた提案を提供する。これにより、ユーザの感情に基づいて提案の長さを調整することで、より適切な提案が可能となる。感情の推定は、例えば、感情エンジンまたは生成AIなどを用いて感情推定機能を用いて実現される。生成AIは、テキスト生成AI(例えば、LLM)やマルチモーダル生成AIなどであるが、かかる例に限定されない。提案部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、提案部は、ユーザの感情データを生成AIに入力し、提案の長さの調整を生成AIに行わせることができる。
【0105】
提案部は、提案時に、症状の発生時期に基づいて提案の優先順位を決定することができる。提案部は、例えば、最近発生した症状を優先して提案する。提案部は、例えば、過去の症状の発生時期を考慮して提案の順序を決定する。提案部は、例えば、症状の発生頻度に基づいて提案の優先順位を決定する。これにより、症状の発生時期に基づいて提案の優先順位を決定することで、より適切な提案が可能となる。提案部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、提案部は、症状の発生時期データを生成AIに入力し、優先順位の決定を生成AIに行わせることができる。
【0106】
提案部は、提案時に、症状の関連性に基づいて提案の順序を調整することができる。提案部は、例えば、関連性の高い症状をまとめて提案する。提案部は、例えば、関連性の低い症状を個別に提案する。提案部は、例えば、症状の関連性に基づいて、異なる色や形状の提案を提供する。これにより、症状の関連性に基づいて提案の順序を調整することで、より適切な提案が可能となる。提案部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、提案部は、症状の関連性データを生成AIに入力し、順序の調整を生成AIに行わせることができる。
【0107】
レポート生成部は、ユーザの感情を推定し、推定したユーザの感情に基づいてレポートの表現方法を調整することができる。レポート生成部は、例えば、ユーザがストレスを感じている場合、シンプルで視認性の高いレポートを提供する。レポート生成部は、例えば、ユーザがリラックスしている場合、詳細な情報を含むレポートを提供する。レポート生成部は、例えば、ユーザが不安を感じている場合、安心感を与える表現方法でレポートを提供する。これにより、ユーザの感情に基づいてレポートの表現方法を調整することで、より適切なレポートが可能となる。感情の推定は、例えば、感情エンジンまたは生成AIなどを用いて感情推定機能を用いて実現される。生成AIは、テキスト生成AI(例えば、LLM)やマルチモーダル生成AIなどであるが、かかる例に限定されない。レポート生成部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、レポート生成部は、ユーザの感情データを生成AIに入力し、表現方法の調整を生成AIに行わせることができる。
【0108】
レポート生成部は、レポート生成時に、症状の重要度に基づいてレポートの詳細度を調整することができる。レポート生成部は、例えば、重要度の高い症状については詳細なレポートを提供する。レポート生成部は、例えば、重要度の低い症状については簡略化されたレポートを提供する。レポート生成部は、例えば、症状の重要度に応じて、異なる色や形状のレポートを提供する。これにより、症状の重要度に基づいてレポートの詳細度を調整することで、より適切なレポートが可能となる。レポート生成部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、レポート生成部は、症状の重要度データを生成AIに入力し、詳細度の調整を生成AIに行わせることができる。
【0109】
レポート生成部は、レポート生成時に、症状のカテゴリに応じて異なるレポート生成アルゴリズムを適用することができる。レポート生成部は、例えば、痛みの症状については特定のレポート生成アルゴリズムを適用する。レポート生成部は、例えば、精神的な症状については別のレポート生成アルゴリズムを適用する。レポート生成部は、例えば、身体的な症状についてはさらに別のレポート生成アルゴリズムを適用する。これにより、症状のカテゴリに応じて異なるレポート生成アルゴリズムを適用することで、より適切なレポートが可能となる。レポート生成部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、レポート生成部は、症状のカテゴリデータを生成AIに入力し、レポート生成アルゴリズムの適用を生成AIに行わせることができる。
【0110】
レポート生成部は、ユーザの感情を推定し、推定したユーザの感情に基づいてレポートの長さを調整することができる。レポート生成部は、例えば、ユーザが急いでいる場合、短くて要点を押さえたレポートを提供する。レポート生成部は、例えば、ユーザがリラックスしている場合、詳細な説明を含む長めのレポートを提供する。レポート生成部は、例えば、ユーザが興奮している場合、視覚的に刺激的なエフェクトを加えたレポートを提供する。これにより、ユーザの感情に基づいてレポートの長さを調整することで、より適切なレポートが可能となる。感情の推定は、例えば、感情エンジンまたは生成AIなどを用いて感情推定機能を用いて実現される。生成AIは、テキスト生成AI(例えば、LLM)やマルチモーダル生成AIなどであるが、かかる例に限定されない。レポート生成部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、レポート生成部は、ユーザの感情データを生成AIに入力し、レポートの長さの調整を生成AIに行わせることができる。
【0111】
レポート生成部は、レポート生成時に、症状の発生時期に基づいてレポートの優先順位を決定することができる。レポート生成部は、例えば、最近発生した症状を優先してレポートに記載する。レポート生成部は、例えば、過去の症状の発生時期を考慮してレポートの順序を決定する。レポート生成部は、例えば、症状の発生頻度に基づいてレポートの優先順位を決定する。これにより、症状の発生時期に基づいてレポートの優先順位を決定することで、より適切なレポートが可能となる。レポート生成部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、レポート生成部は、症状の発生時期データを生成AIに入力し、優先順位の決定を生成AIに行わせることができる。
【0112】
レポート生成部は、レポート生成時に、症状の関連性に基づいてレポートの順序を調整することができる。レポート生成部は、例えば、関連性の高い症状をまとめてレポートに記載する。レポート生成部は、例えば、関連性の低い症状を個別にレポートに記載する。レポート生成部は、例えば、症状の関連性に基づいて、異なる色や形状のレポートを提供する。これにより、症状の関連性に基づいてレポートの順序を調整することで、より適切なレポートが可能となる。レポート生成部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、レポート生成部は、症状の関連性データを生成AIに入力し、順序の調整を生成AIに行わせることができる。
【0113】
リマインダー部は、ユーザの感情を推定し、推定したユーザの感情に基づいてリマインダーの通知方法を調整することができる。リマインダー部は、例えば、ユーザがストレスを感じている場合、シンプルで視認性の高い通知方法を提供する。リマインダー部は、例えば、ユーザがリラックスしている場合、詳細な情報を含む通知方法を提供する。リマインダー部は、例えば、ユーザが不安を感じている場合、安心感を与える通知方法を提供する。これにより、ユーザの感情に基づいてリマインダーの通知方法を調整することで、より適切な通知が可能となる。感情の推定は、例えば、感情エンジンまたは生成AIなどを用いて感情推定機能を用いて実現される。生成AIは、テキスト生成AI(例えば、LLM)やマルチモーダル生成AIなどであるが、かかる例に限定されない。リマインダー部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、リマインダー部は、ユーザの感情データを生成AIに入力し、通知方法の調整を生成AIに行わせることができる。
【0114】
リマインダー部は、リマインダー通知時に、ユーザの過去の行動履歴を参照して最適な通知方法を選定することができる。リマインダー部は、例えば、ユーザの過去の行動履歴を基に、最適な通知方法を選定する。リマインダー部は、例えば、ユーザの過去の行動パターンを分析し、最適な通知タイミングを選定する。リマインダー部は、例えば、ユーザの過去の行動履歴を参照し、最適な通知内容を選定する。これにより、ユーザの過去の行動履歴を参照することで、最適な通知方法を選定することができる。リマインダー部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、リマインダー部は、ユーザの過去の行動履歴データを生成AIに入力し、通知方法の選定を生成AIに行わせることができる。
【0115】
リマインダー部は、ユーザの感情を推定し、推定したユーザの感情に基づいてリマインダーの優先順位を決定することができる。リマインダー部は、例えば、ユーザがストレスを感じている場合、重要なリマインダーを優先して通知する。リマインダー部は、例えば、ユーザがリラックスしている場合、全てのリマインダーを均等に通知する。リマインダー部は、例えば、ユーザが不安を感じている場合、安心感を与えるリマインダーを優先して通知する。これにより、ユーザの感情に基づいてリマインダーの優先順位を決定することで、より適切な通知が可能となる。感情の推定は、例えば、感情エンジンまたは生成AIなどを用いて感情推定機能を用いて実現される。生成AIは、テキスト生成AI(例えば、LLM)やマルチモーダル生成AIなどであるが、かかる例に限定されない。リマインダー部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、リマインダー部は、ユーザの感情データを生成AIに入力し、優先順位の決定を生成AIに行わせることができる。
【0116】
リマインダー部は、リマインダー通知時に、ユーザのデバイス情報を考慮して最適な通知方法を選定することができる。リマインダー部は、例えば、ユーザがスマートフォンを使用している場合、画面サイズに合わせた通知方法を提供する。リマインダー部は、例えば、ユーザがタブレットを使用している場合、大きな画面に最適化された通知方法を提供する。リマインダー部は、例えば、ユーザがスマートウォッチを使用している場合、簡潔で視認性の高い通知方法を提供する。これにより、ユーザのデバイス情報を考慮することで、最適な通知方法を選定することができる。リマインダー部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、リマインダー部は、ユーザのデバイス情報を生成AIに入力し、通知方法の選定を生成AIに行わせることができる。
【0117】
学習部は、ユーザの感情を推定し、推定したユーザの感情に基づいて学習データの選定を行うことができる。学習部は、例えば、ユーザがストレスを感じている場合、ストレス軽減に関するデータを優先して学習する。学習部は、例えば、ユーザがリラックスしている場合、リラックス状態を維持するためのデータを学習する。学習部は、例えば、ユーザが不安を感じている場合、不安軽減に関するデータを優先して学習する。これにより、ユーザの感情に基づいて学習データの選定を行うことで、より適切な学習が可能となる。感情の推定は、例えば、感情エンジンまたは生成AIなどを用いて感情推定機能を用いて実現される。生成AIは、テキスト生成AI(例えば、LLM)やマルチモーダル生成AIなどであるが、かかる例に限定されない。学習部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、学習部は、ユーザの感情データを生成AIに入力し、学習データの選定を生成AIに行わせることができる。
【0118】
学習部は、学習時に、過去の学習データを参照して学習アルゴリズムを最適化することができる。学習部は、例えば、過去の学習データを基に、最適な学習アルゴリズムを選定する。学習部は、例えば、過去の学習データを分析し、学習アルゴリズムのパラメータを調整する。学習部は、例えば、過去の学習データを参照し、学習アルゴリズムの精度を向上させる。これにより、過去の学習データを参照することで、学習アルゴリズムを最適化することができる。学習部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、学習部は、過去の学習データを生成AIに入力し、学習アルゴリズムの最適化を生成AIに行わせることができる。
【0119】
学習部は、ユーザの感情を推定し、推定したユーザの感情に基づいて学習の頻度を調整することができる。学習部は、例えば、ユーザがストレスを感じている場合、学習の頻度を減らしてユーザの負担を軽減する。学習部は、例えば、ユーザがリラックスしている場合、学習の頻度を増やしてデータの精度を向上させる。学習部は、例えば、ユーザが不安を感じている場合、学習の頻度を調整してユーザの不安を軽減する。これにより、ユーザの感情に基づいて学習の頻度を調整することで、より適切な学習が可能となる。感情の推定は、例えば、感情エンジンまたは生成AIなどを用いて感情推定機能を用いて実現される。生成AIは、テキスト生成AI(例えば、LLM)やマルチモーダル生成AIなどであるが、かかる例に限定されない。学習部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、学習部は、ユーザの感情データを生成AIに入力し、学習の頻度の調整を生成AIに行わせることができる。
【0120】
学習部は、学習時に、症状の発生時期に基づいて学習データの重み付けを行うことができる。学習部は、例えば、最近発生した症状のデータに重みを付けて学習する。学習部は、例えば、過去の症状の発生時期を考慮して学習データの重み付けを行う。学習部は、例えば、症状の発生頻度に基づいて学習データの重み付けを行う。これにより、症状の発生時期に基づいて学習データの重み付けを行うことで、より適切な学習が可能となる。学習部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、学習部は、症状の発生時期データを生成AIに入力し、重み付けを生成AIに行わせることができる。
【0121】
更新部は、ユーザの感情を推定し、推定したユーザの感情に基づいて更新データの選定を行うことができる。更新部は、例えば、ユーザがストレスを感じている場合、ストレス軽減に関するデータを優先して更新する。更新部は、例えば、ユーザがリラックスしている場合、リラックス状態を維持するためのデータを更新する。更新部は、例えば、ユーザが不安を感じている場合、不安軽減に関するデータを優先して更新する。これにより、ユーザの感情に基づいて更新データの選定を行うことで、より適切な更新が可能となる。感情の推定は、例えば、感情エンジンまたは生成AYに基づいて、更新の頻度を調整することができる。更新部は、例えば、ユーザがストレスを感じている場合、更新の頻度を減らしてユーザの負担を軽減する。更新部は、例えば、ユーザがリラックスしている場合、更新の頻度を増やしてデータの精度を向上させる。更新部は、例えば、ユーザが不安を感じている場合、更新の頻度を調整してユーザの不安を軽減する。これにより、ユーザの感情に基づいて更新の頻度を調整することで、より適切な更新が可能となる。感情の推定は、例えば、感情エンジンまたは生成AIなどを用いて感情推定機能を用いて実現される。生成AIは、テキスト生成AI(例えば、LLM)やマルチモーダル生成AIなどであるが、かかる例に限定されない。更新部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、更新部は、ユーザの感情データを生成AIに入力し、更新の頻度の調整を生成AIに行わせることができる。
【0122】
更新部は、更新時に、過去の更新データを参照して更新アルゴリズムを最適化することができる。更新部は、例えば、過去の更新データを基に、最適な更新アルゴリズムを選定する。更新部は、例えば、過去の更新データを分析し、更新アルゴリズムのパラメータを調整する。更新部は、例えば、過去の更新データを参照し、最新の医療知識を常に更新する。これにより、家族や周囲に迷惑をかけたくないが辛いと感じるユーザに対して、共感し寄り添う存在となる。
【0123】
更新部は、更新時に、過去の更新データを参照して更新アルゴリズムを最適化することができる。更新部は、例えば、過去の更新データを基に、最適な更新アルゴリズムを選定する。更新部は、例えば、過去の更新データを分析し、更新アルゴリズムのパラメータを調整する。更新部は、例えば、過去の更新データを参照し、更新アルゴリズムの精度を向上させる。これにより、過去の更新データを参照することで、更新アルゴリズムを最適化することができる。更新部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、更新部は、過去の更新データを生成AIに入力し、更新アルゴリズムの最適化を生成AIに行わせることができる。
【0124】
更新部は、更新時に、症状の発生時期に基づいて更新データの重み付けを行うことができる。更新部は、例えば、最近発生した症状のデータに重みを付けて更新する。更新部は、例えば、過去の症状の発生時期を考慮して更新データの重み付けを行う。更新部は、例えば、症状の発生頻度に基づいて更新データの重み付けを行う。これにより、症状の発生時期に基づいて更新データの重み付けを行うことで、より適切な更新が可能となる。更新部における上述した処理の一部または全部は、例えば、AIを用いて行われてもよく、AIを用いずに行われてもよい。例えば、更新部は、症状の発生時期データを生成AIに入力し、重み付けを生成AIに行わせることができる。
【0125】
実施形態に係るシステムは、上述した例に限定されず、例えば、以下のように、種々の変更が可能である。
【0126】
解析部は、ユーザの感情を推定し、推定したユーザの感情に基づいて解析の精度を調整することができる。例えば、ユーザがストレスを感じている場合、感情の変動を考慮して解析の精度を高めることができる。また、ユーザがリラックスしている場合、感情の安定性を前提に解析を行うことができる。さらに、ユーザが不安を感じている場合、感情の不安定さを補正して解析を行うことができる。これにより、ユーザの感情に基づいて解析の精度を調整することで、より正確な解析が可能となる。
【0127】
解析部は、解析時に、ユーザの過去の健康データを参照して解析の精度を向上させることができる。例えば、ユーザの過去の診療記録を参照し、現在の症状と比較して解析を行うことができる。また、ユーザの過去の健康診断結果を基に、現在の健康状態を解析することができる。さらに、ユーザの過去の薬剤使用履歴を参照し、薬剤の影響を考慮して解析を行うことができる。これにより、ユーザの過去の健康データを参照することで、解析の精度が向上する。
【0128】
解析部は、解析時に、ユーザの生活習慣や環境情報を考慮して解析を行うことができる。例えば、ユーザの食生活や運動習慣を考慮して解析を行うことができる。また、ユーザの住環境や職場環境を考慮して解析を行うことができる。さらに、ユーザの睡眠パターンやストレスレベルを考慮して解析を行うことができる。これにより、ユーザの生活習慣や環境情報を考慮することで、より正確な解析が可能となる。
【0129】
解析部は、ユーザの感情を推定し、推定したユーザの感情に基づいて解析結果の表示方法を調整することができる。例えば、ユーザが緊張している場合、シンプルで視認性の高い表示方法を提供することができる。また、ユーザがリラックスしている場合、詳細な情報を含む表示方法を提供することができる。さらに、ユーザが急いでいる場合、要点を押さえた表示方法を提供することができる。これにより、ユーザの感情に基づいて解析結果の表示方法を調整することで、より適切な表示が可能となる。
【0130】
解析部は、解析時に、ユーザの地理的位置情報を考慮して解析を行うことができる。例えば、ユーザの現在地の気候や環境を考慮して解析を行うことができる。また、ユーザの住んでいる地域の医療リソースを考慮して解析を行うことができる。さらに、ユーザの地理的位置に基づいて、特定の地域で流行している病気を考慮して解析を行うことができる。これにより、ユーザの地理的位置情報を考慮することで、より正確な解析が可能となる。
【0131】
解析部は、解析時に、ユーザのソーシャルメディア活動を分析し、関連する情報を解析に反映させることができる。例えば、ユーザのソーシャルメディア投稿からストレスレベルを推定し、解析に反映させることができる。また、ユーザのソーシャルメディアでの活動頻度を考慮して解析を行うことができる。さらに、ユーザのソーシャルメディアでの友人関係やコミュニケーションパターンを分析し、解析に反映させることができる。これにより、ユーザのソーシャルメディア活動を分析することで、より正確な解析が可能となる。
【0132】
可視化部は、ユーザの感情を推定し、推定したユーザの感情に基づいて可視化の表現方法を調整することができる。例えば、ユーザがストレスを感じている場合、シンプルで視認性の高いグラフを提供することができる。また、ユーザがリラックスしている場合、詳細なデータを含むグラフを提供することができる。さらに、ユーザが不安を感じている場合、安心感を与える色合いのグラフを提供することができる。これにより、ユーザの感情に基づいて可視化の表現方法を調整することで、より適切な可視化が可能となる。
【0133】
可視化部は、可視化時に、症状の重要度に基づいて可視化の詳細度を調整することができる。例えば、重要度の高い症状については詳細なグラフを提供することができる。また、重要度の低い症状については簡略化されたグラフを提供することができる。さらに、症状の重要度に応じて、異なる色や形状のグラフを提供することができる。これにより、症状の重要度に基づいて可視化の詳細度を調整することで、より適切な可視化が可能となる。
【0134】
可視化部は、可視化時に、症状のカテゴリに応じて異なる可視化手法を適用することができる。例えば、痛みの症状についてはヒートマップを提供することができる。また、精神的な症状については折れ線グラフを提供することができる。さらに、身体的な症状については棒グラフを提供することができる。これにより、症状のカテゴリに応じて異なる可視化手法を適用することで、より適切な可視化が可能となる。
【0135】
可視化部は、ユーザの感情を推定し、推定したユーザの感情に基づいて可視化の長さを調整することができる。例えば、ユーザが急いでいる場合、短くて要点を押さえたグラフを提供することができる。また、ユーザがリラックスしている場合、詳細な説明を含む長めのグラフを提供することができる。さらに、ユーザが興奮している場合、視覚的に刺激的なエフェクトを加えたグラフを提供することができる。これにより、ユーザの感情に基づいて可視化の長さを調整することで、より適切な可視化が可能となる。
【0136】
以下に、形態例2の処理の流れについて簡単に説明する。
【0137】
ステップ1:解析部は、ユーザの言葉、表情、音声を解析する。例えば、ユーザの言葉を解析し、感情や症状を特定する。ユーザの表情を解析し、痛みや不快感の程度を判断する。ユーザの音声を解析し、ストレスや疲労のレベルを推測する。
ステップ2:可視化部は、解析部によって解析された情報に基づいてリアルタイムで痛み等の症状や程度を可視化する。例えば、痛みの強さをグラフで表示し、疲労感のレベルを色で示し、ストレスの度合いを数値で表す。
ステップ3:推測部は、可視化部によって可視化された情報に基づいて病名や原因を推測する。例えば、痛みの部位や強さから病名を推測し、疲労感の原因を特定し、ストレスの要因を分析する。
ステップ4:提案部は、推測部によって推測された情報に基づいてパーソナライズされた改善策を提案する。例えば、痛みの緩和方法を提案し、疲労回復のための運動を提案し、ストレス軽減のためのリラクゼーション方法を提案する。
ステップ5:レポート生成部は、提案部によって提案された情報に基づいて診療用レポートを生成する。例えば、診療用レポートに痛みの強さや部位を記載し、疲労感のレベルや原因を記載し、ストレスの度合いや要因を記載する。
【0138】
特定処理部290は、特定処理の結果をスマートデバイス14に送信する。スマートデバイス14では、制御部46Aが、出力装置40に対して特定処理の結果を出力させる。マイクロフォン38Bは、特定処理の結果に対するユーザ入力を示す音声を取得する。制御部46Aは、マイクロフォン38Bによって取得されたユーザ入力を示す音声データをデータ処理装置12に送信する。データ処理装置12では、特定処理部290が音声データを取得する。
【0139】
データ生成モデル58は、いわゆる生成AI(Artificial Intelligence)である。データ生成モデル58の一例としては、ChatGPT(登録商標)(インターネット検索<URL: https://openai.com/blog/chatgpt>)などの生成AIが挙げられる。データ生成モデル58は、ニューラルネットワークに対して深層学習を行わせることによって得られる。データ生成モデル58には、指示を含むプロンプトが入力され、かつ、音声を示す音声データ、テキストを示すテキストデータ、および画像を示す画像データ(例えば、静止画のデータまたは動画のデータ)などの推論用データが入力される。データ生成モデル58は、入力された推論用データをプロンプトにより示される指示に従って推論し、推論結果を音声データ、テキストデータ、および画像データなどのうちの1以上のデータ形式で出力する。データ生成モデル58は、例えば、テキスト生成AI、画像生成AI、マルチモーダル生成AIなどを含む。ここで、推論とは、例えば、分析、分類、予測、および/または要約などを指す。特定処理部290は、データ生成モデル58を用いながら、上述した特定処理を行う。データ生成モデル58は、指示を含まないプロンプトから推論結果を出力するように、ファインチューニングされたモデルであってもよく、この場合、データ生成モデル58は、指示を含まないプロンプトから推論結果を出力することができる。データ処理装置12などにおいて、データ生成モデル58は複数種類含まれており、データ生成モデル58は、生成AI以外のAIを含む。生成AI以外のAIは、例えば、線形回帰、ロジスティック回帰、決定木、ランダムフォレスト、サポートベクターマシン(SVM)、k-meansクラスタリング、畳み込みニューラルネットワーク(CNN)、リカレントニューラルネットワーク(RNN)、生成的敵対的ネットワーク(GAN)、またはナイーブベイズなどであり、種々の処理を行うことができるが、かかる例に限定されない。また、AIは、AIエージェントであってもよい。また、上述した各部の処理がAIで行われる場合、その処理は、AIで一部または全部が行われるが、かかる例に限定されない。また、生成AIを含むAIで実施される処理は、ルールベースでの処理に置き換えてもよく、ルールベースの処理は、生成AIを含むAIで実施される処理に置き換えてもよい。
【0140】
また、上述したデータ処理システム10による処理は、データ処理装置12の特定処理部290またはスマートデバイス14の制御部46Aによって実行されるが、データ処理装置12の特定処理部290とスマートデバイス14の制御部46Aとによって実行されてもよい。また、データ処理装置12の特定処理部290は、処理に必要な情報をスマートデバイス14または外部の装置などから取得したり収集したりし、スマートデバイス14は、処理に必要な情報をデータ処理装置12または外部の装置などから取得したり収集したりする。
【0141】
上述した解析部、可視化部、推測部、提案部、レポート生成部、リマインダー部、学習部、および更新部を含む複数の要素の各々は、例えば、スマートデバイス14およびデータ処理装置12のうちの少なくとも一方で実現される。例えば、解析部は、スマートデバイス14のカメラ42やマイクロフォン38Bを用いてユーザの言葉、表情、音声を解析し、制御部46Aによって感情や症状を特定する。可視化部は、例えば、スマートデバイス14のディスプレイ40Aを用いて痛みの強さや疲労感のレベルを表示する。推測部は、例えば、データ処理装置12の特定処理部290によって病名や原因を推測する。提案部は、例えば、データ処理装置12の特定処理部290によってパーソナライズされた改善策を提案する。レポート生成部は、例えば、データ処理装置12の特定処理部290によって診療用レポートを生成する。リマインダー部は、例えば、スマートデバイス14の制御部46Aによって定期オンライン面談や通院・服薬等のリマインダー機能を提供する。学習部は、例えば、データ処理装置12の特定処理部290によって継続的な自己学習を行う。更新部は、例えば、データ処理装置12の特定処理部290によって最新の医療知識を更新する。各部と装置や制御部との対応関係は、上述した例に限定されず、種々の変更が可能である。
【0142】
[第2実施形態]
図3には、第2実施形態に係るデータ処理システム210の構成の一例が示されている。
【0143】
図3に示すように、データ処理システム210は、データ処理装置12およびスマート眼鏡214を備えている。データ処理装置12の一例としては、サーバが挙げられる。
【0144】
データ処理装置12は、コンピュータ22、データベース24、および通信I/F26を備えている。コンピュータ22は、プロセッサ28、RAM30、およびストレージ32を備えている。プロセッサ28、RAM30、およびストレージ32は、バス34に接続されている。また、データベース24および通信I/F26も、バス34に接続されている。通信I/F26は、ネットワーク54に接続されている。ネットワーク54の一例としては、WANおよび/またはLANなどが挙げられる。
【0145】
スマート眼鏡214は、コンピュータ36、マイクロフォン238、スピーカ240、カメラ42、および通信I/F44を備えている。コンピュータ36は、プロセッサ46、RAM48、およびストレージ50を備えている。プロセッサ46、RAM48、およびストレージ50は、バス52に接続されている。また、マイクロフォン238、スピーカ240、およびカメラ42も、バス52に接続されている。
【0146】
マイクロフォン238は、ユーザが発する音声を受け付けることで、ユーザから指示などを受け付ける。マイクロフォン238は、ユーザが発する音声を捕捉し、捕捉した音声を音声データに変換してプロセッサ46に出力する。スピーカ240は、プロセッサ46からの指示に従って音声を出力する。
【0147】
カメラ42は、レンズ、絞り、およびシャッタなどの光学系と、CMOS(Complementary Metal-Oxide-Semiconductor)イメージセンサまたはCCD(Charge Coupled Device)イメージセンサなどの撮像素子とが搭載された小型デジタルカメラであり、ユーザの周囲(例えば、一般的な健常者の視界の広さに相当する画角で規定された撮像範囲)を撮像する。
【0148】
通信I/F44は、ネットワーク54に接続されている。通信I/F44および26は、ネットワーク54を介してプロセッサ46とプロセッサ28との間の各種情報の授受を司る。通信I/F44および26を用いたプロセッサ46とプロセッサ28との間の各種情報の授受はセキュアな状態で行われる。
【0149】
図4には、データ処理装置12およびスマート眼鏡214の要部機能の一例が示されている。図4に示すように、データ処理装置12では、プロセッサ28によって特定処理が行われる。ストレージ32には、特定処理プログラム56が格納されている。
【0150】
プロセッサ28は、ストレージ32から特定処理プログラム56を読み出し、読み出した特定処理プログラム56をRAM30上で実行する。特定処理は、プロセッサ28がRAM30上で実行する特定処理プログラム56に従って、特定処理部290として動作することによって実現される。
【0151】
ストレージ32には、データ生成モデル58および感情特定モデル59が格納されている。データ生成モデル58および感情特定モデル59は、特定処理部290によって用いられる。特定処理部290は、感情特定モデル59を用いてユーザの感情を推定し、ユーザの感情を用いた特定処理を行うことができる。感情特定モデル59を用いた感情推定機能(感情特定機能)では、ユーザの感情の推定や予測などを含め、ユーザの感情に関する種々の推定や予測などが行われるが、かかる例に限定されない。また、感情の推定や予測には、例えば、感情の分析(解析)なども含まれる。
【0152】
スマート眼鏡214では、プロセッサ46によって特定処理が行われる。ストレージ50には、特定処理プログラム60が格納されている。プロセッサ46は、ストレージ50から特定処理プログラム60を読み出し、読み出した特定処理プログラム60をRAM48上で実行する。特定処理は、プロセッサ46がRAM48上で実行する特定処理プログラム60に従って、制御部46Aとして動作することによって実現される。なお、スマート眼鏡214には、データ生成モデル58および感情特定モデル59と同様のデータ生成モデルおよび感情特定モデルを有し、これらモデルを用いて特定処理部290と同様の処理を行うこともできる。
【0153】
なお、データ処理装置12以外の他の装置がデータ生成モデル58を有してもよい。例えば、サーバ装置がデータ生成モデル58を有してもよい。この場合、データ処理装置12は、データ生成モデル58を有するサーバ装置と通信を行うことで、データ生成モデル58が用いられた処理結果(予測結果など)を得る。また、データ処理装置12は、サーバ装置であってもよいし、ユーザが保有する端末装置(例えば、携帯電話、ロボット、家電など)であってもよい。
【0154】
特定処理部290は、特定処理の結果をスマート眼鏡214に送信する。スマート眼鏡214では、制御部46Aが、スピーカ240に対して特定処理の結果を出力させる。マイクロフォン238は、特定処理の結果に対するユーザ入力を示す音声を取得する。制御部46Aは、マイクロフォン238によって取得されたユーザ入力を示す音声データをデータ処理装置12に送信する。データ処理装置12では、特定処理部290が音声データを取得する。
【0155】
データ生成モデル58は、いわゆる生成AIである。データ生成モデル58の一例としては、ChatGPTなどの生成AIが挙げられる。データ生成モデル58は、ニューラルネットワークに対して深層学習を行わせることによって得られる。データ生成モデル58には、指示を含むプロンプトが入力され、かつ、音声を示す音声データ、テキストを示すテキストデータ、および画像を示す画像データ(例えば、静止画のデータまたは動画のデータ)などの推論用データが入力される。データ生成モデル58は、入力された推論用データをプロンプトにより示される指示に従って推論し、推論結果を音声データ、テキストデータ、および画像データなどのうちの1以上のデータ形式で出力する。データ生成モデル58は、例えば、テキスト生成AI、画像生成AI、マルチモーダル生成AIなどを含む。ここで、推論とは、例えば、分析、分類、予測、および/または要約などを指す。特定処理部290は、データ生成モデル58を用いながら、上述した特定処理を行う。データ生成モデル58は、指示を含まないプロンプトから推論結果を出力するように、ファインチューニングされたモデルであってもよく、この場合、データ生成モデル58は、指示を含まないプロンプトから推論結果を出力することができる。データ処理装置12などにおいて、データ生成モデル58は複数種類含まれており、データ生成モデル58は、生成AI以外のAIを含む。生成AI以外のAIは、例えば、線形回帰、ロジスティック回帰、決定木、ランダムフォレスト、サポートベクターマシン(SVM)、k-meansクラスタリング、畳み込みニューラルネットワーク(CNN)、リカレントニューラルネットワーク(RNN)、生成的敵対的ネットワーク(GAN)、またはナイーブベイズなどであり、種々の処理を行うことができるが、かかる例に限定されない。また、AIは、AIエージェントであってもよい。また、上述した各部の処理がAIで行われる場合、その処理は、AIで一部または全部が行われるが、かかる例に限定されない。また、生成AIを含むAIで実施される処理は、ルールベースでの処理に置き換えてもよく、ルールベースの処理は、生成AIを含むAIで実施される処理に置き換えてもよい。
【0156】
第2実施形態に係るデータ処理システム210は、第1実施形態に係るデータ処理システム10と同様の処理を行う。データ処理システム210による処理は、データ処理装置12の特定処理部290またはスマート眼鏡214の制御部46Aによって実行されるが、データ処理装置12の特定処理部290とスマート眼鏡214の制御部46Aとによって実行されてもよい。また、データ処理装置12の特定処理部290は、処理に必要な情報をスマート眼鏡214または外部の装置などから取得したり収集したりし、スマート眼鏡214は、処理に必要な情報をデータ処理装置12または外部の装置などから取得したり収集したりする。
【0157】
上述した解析部、可視化部、推測部、提案部、レポート生成部、リマインダー部、学習部、および更新部を含む複数の要素の各々は、例えば、スマート眼鏡214およびデータ処理装置12のうちの少なくとも一方で実現される。例えば、解析部は、スマート眼鏡214のカメラ42やマイクロフォン238を用いてユーザの言葉、表情、音声を解析し、制御部46Aによって感情や症状を特定する。可視化部は、例えば、スマート眼鏡214のディスプレイを用いて痛みの強さや疲労感のレベルを表示する。推測部は、例えば、データ処理装置12の特定処理部290によって病名や原因を推測する。提案部は、例えば、データ処理装置12の特定処理部290によってパーソナライズされた改善策を提案する。レポート生成部は、例えば、データ処理装置12の特定処理部290によって診療用レポートを生成する。リマインダー部は、例えば、スマート眼鏡214の制御部46Aによって定期オンライン面談や通院・服薬等のリマインダー機能を提供する。学習部は、例えば、データ処理装置12の特定処理部290によって継続的な自己学習を行う。更新部は、例えば、データ処理装置12の特定処理部290によって最新の医療知識を更新する。各部と装置や制御部との対応関係は、上述した例に限定されず、種々の変更が可能である。
【0158】
[第3実施形態]
図5には、第3実施形態に係るデータ処理システム310の構成の一例が示されている。
【0159】
図5に示すように、データ処理システム310は、データ処理装置12およびヘッドセット型端末314を備えている。データ処理装置12の一例としては、サーバが挙げられる。
【0160】
データ処理装置12は、コンピュータ22、データベース24、および通信I/F26を備えている。コンピュータ22は、プロセッサ28、RAM30、およびストレージ32を備えている。プロセッサ28、RAM30、およびストレージ32は、バス34に接続されている。また、データベース24および通信I/F26も、バス34に接続されている。通信I/F26は、ネットワーク54に接続されている。ネットワーク54の一例としては、WANおよび/またはLANなどが挙げられる。
【0161】
ヘッドセット型端末314は、コンピュータ36、マイクロフォン238、スピーカ240、カメラ42、通信I/F44、およびディスプレイ343を備えている。コンピュータ36は、プロセッサ46、RAM48、およびストレージ50を備えている。プロセッサ46、RAM48、およびストレージ50は、バス52に接続されている。また、マイクロフォン238、スピーカ240、カメラ42、およびディスプレイ343も、バス52に接続されている。
【0162】
マイクロフォン238は、ユーザが発する音声を受け付けることで、ユーザから指示などを受け付ける。マイクロフォン238は、ユーザが発する音声を捕捉し、捕捉した音声を音声データに変換してプロセッサ46に出力する。スピーカ240は、プロセッサ46からの指示に従って音声を出力する。
【0163】
カメラ42は、レンズ、絞り、およびシャッタなどの光学系と、CMOS(Complementary Metal-Oxide-Semiconductor)イメージセンサまたはCCD(Charge Coupled Device)イメージセンサなどの撮像素子とが搭載された小型デジタルカメラであり、ユーザの周囲(例えば、一般的な健常者の視界の広さに相当する画角で規定された撮像範囲)を撮像する。
【0164】
通信I/F44は、ネットワーク54に接続されている。通信I/F44および26は、ネットワーク54を介してプロセッサ46とプロセッサ28との間の各種情報の授受を司る。通信I/F44および26を用いたプロセッサ46とプロセッサ28との間の各種情報の授受はセキュアな状態で行われる。
【0165】
図6には、データ処理装置12およびヘッドセット型端末314の要部機能の一例が示されている。図6に示すように、データ処理装置12では、プロセッサ28によって特定処理が行われる。ストレージ32には、特定処理プログラム56が格納されている。
【0166】
プロセッサ28は、ストレージ32から特定処理プログラム56を読み出し、読み出した特定処理プログラム56をRAM30上で実行する。特定処理は、プロセッサ28がRAM30上で実行する特定処理プログラム56に従って、特定処理部290として動作することによって実現される。
【0167】
ストレージ32には、データ生成モデル58および感情特定モデル59が格納されている。データ生成モデル58および感情特定モデル59は、特定処理部290によって用いられる。特定処理部290は、感情特定モデル59を用いてユーザの感情を推定し、ユーザの感情を用いた特定処理を行うことができる。感情特定モデル59を用いた感情推定機能(感情特定機能)では、ユーザの感情の推定や予測などを含め、ユーザの感情に関する種々の推定や予測などが行われるが、かかる例に限定されない。また、感情の推定や予測には、例えば、感情の分析(解析)なども含まれる。
【0168】
ヘッドセット型端末314では、プロセッサ46によって特定処理が行われる。ストレージ50には、特定プログラム60が格納されている。プロセッサ46は、ストレージ50から特定プログラム60を読み出し、読み出した特定プログラム60をRAM48上で実行する。特定処理は、プロセッサ46がRAM48上で実行する特定プログラム60に従って、制御部46Aとして動作することによって実現される。なお、ヘッドセット型端末314には、データ生成モデル58および感情特定モデル59と同様のデータ生成モデルおよび感情特定モデルを有し、これらモデルを用いて特定処理部290と同様の処理を行うこともできる。
【0169】
なお、データ処理装置12以外の他の装置がデータ生成モデル58を有してもよい。例えば、サーバ装置がデータ生成モデル58を有してもよい。この場合、データ処理装置12は、データ生成モデル58を有するサーバ装置と通信を行うことで、データ生成モデル58が用いられた処理結果(予測結果など)を得る。また、データ処理装置12は、サーバ装置であってもよいし、ユーザが保有する端末装置(例えば、携帯電話、ロボット、家電など)であってもよい。
【0170】
特定処理部290は、特定処理の結果をヘッドセット型端末314に送信する。ヘッドセット型端末314では、制御部46Aが、スピーカ240およびディスプレイ343に対して特定処理の結果を出力させる。マイクロフォン238は、特定処理の結果に対するユーザ入力を示す音声を取得する。制御部46Aは、マイクロフォン238によって取得されたユーザ入力を示す音声データをデータ処理装置12に送信する。データ処理装置12では、特定処理部290が音声データを取得する。
【0171】
データ生成モデル58は、いわゆる生成AIである。データ生成モデル58の一例としては、ChatGPTなどの生成AIが挙げられる。データ生成モデル58は、ニューラルネットワークに対して深層学習を行わせることによって得られる。データ生成モデル58には、指示を含むプロンプトが入力され、かつ、音声を示す音声データ、テキストを示すテキストデータ、および画像を示す画像データ(例えば、静止画のデータまたは動画のデータ)などの推論用データが入力される。データ生成モデル58は、入力された推論用データをプロンプトにより示される指示に従って推論し、推論結果を音声データ、テキストデータ、および画像データなどのうちの1以上のデータ形式で出力する。データ生成モデル58は、例えば、テキスト生成AI、画像生成AI、マルチモーダル生成AIなどを含む。ここで、推論とは、例えば、分析、分類、予測、および/または要約などを指す。特定処理部290は、データ生成モデル58を用いながら、上述した特定処理を行う。データ生成モデル58は、指示を含まないプロンプトから推論結果を出力するように、ファインチューニングされたモデルであってもよく、この場合、データ生成モデル58は、指示を含まないプロンプトから推論結果を出力することができる。データ処理装置12などにおいて、データ生成モデル58は複数種類含まれており、データ生成モデル58は、生成AI以外のAIを含む。生成AI以外のAIは、例えば、線形回帰、ロジスティック回帰、決定木、ランダムフォレスト、サポートベクターマシン(SVM)、k-meansクラスタリング、畳み込みニューラルネットワーク(CNN)、リカレントニューラルネットワーク(RNN)、生成的敵対的ネットワーク(GAN)、またはナイーブベイズなどであり、種々の処理を行うことができるが、かかる例に限定されない。また、AIは、AIエージェントであってもよい。また、上述した各部の処理がAIで行われる場合、その処理は、AIで一部または全部が行われるが、かかる例に限定されない。また、生成AIを含むAIで実施される処理は、ルールベースでの処理に置き換えてもよく、ルールベースの処理は、生成AIを含むAIで実施される処理に置き換えてもよい。
【0172】
第3実施形態に係るデータ処理システム310は、第1実施形態に係るデータ処理システム10と同様の処理を行う。データ処理システム310による処理は、データ処理装置12の特定処理部290またはヘッドセット型端末314の制御部46Aによって実行されるが、データ処理装置12の特定処理部290とヘッドセット型端末314の制御部46Aとによって実行されてもよい。また、データ処理装置12の特定処理部290は、処理に必要な情報をヘッドセット型端末314または外部の装置などから取得したり収集したりし、ヘッドセット型端末314は、処理に必要な情報をデータ処理装置12または外部の装置などから取得したり収集したりする。
【0173】
上述した解析部、可視化部、推測部、提案部、レポート生成部、リマインダー部、学習部、および更新部を含む複数の要素の各々は、例えば、ヘッドセット型端末314およびデータ処理装置12のうちの少なくとも一方で実現される。例えば、解析部は、ヘッドセット型端末314のカメラ42やマイクロフォン238を用いてユーザの言葉、表情、音声を解析し、制御部46Aによって感情や症状を特定する。可視化部は、例えば、ヘッドセット型端末314のディスプレイ343を用いて痛みの強さや疲労感のレベルを表示する。推測部は、例えば、データ処理装置12の特定処理部290によって病名や原因を推測する。提案部は、例えば、データ処理装置12の特定処理部290によってパーソナライズされた改善策を提案する。レポート生成部は、例えば、データ処理装置12の特定処理部290によって診療用レポートを生成する。リマインダー部は、例えば、ヘッドセット型端末314の制御部46Aによって定期オンライン面談や通院・服薬等のリマインダー機能を提供する。学習部は、例えば、データ処理装置12の特定処理部290によって継続的な自己学習を行う。更新部は、例えば、データ処理装置12の特定処理部290によって最新の医療知識を更新する。各部と装置や制御部との対応関係は、上述した例に限定されず、種々の変更が可能である。
【0174】
[第4実施形態]
図7には、第4実施形態に係るデータ処理システム410の構成の一例が示されている。
【0175】
図7に示すように、データ処理システム410は、データ処理装置12およびロボット414を備えている。データ処理装置12の一例としては、サーバが挙げられる。
【0176】
データ処理装置12は、コンピュータ22、データベース24、および通信I/F26を備えている。コンピュータ22は、プロセッサ28、RAM30、およびストレージ32を備えている。プロセッサ28、RAM30、およびストレージ32は、バス34に接続されている。また、データベース24および通信I/F26も、バス34に接続されている。通信I/F26は、ネットワーク54に接続されている。ネットワーク54の一例としては、WANおよび/またはLANなどが挙げられる。
【0177】
ロボット414は、コンピュータ36、マイクロフォン238、スピーカ240、カメラ42、通信I/F44、および制御対象443を備えている。コンピュータ36は、プロセッサ46、RAM48、およびストレージ50を備えている。プロセッサ46、RAM48、およびストレージ50は、バス52に接続されている。また、マイクロフォン238、スピーカ240、カメラ42、および制御対象443も、バス52に接続されている。
【0178】
マイクロフォン238は、ユーザが発する音声を受け付けることで、ユーザから指示などを受け付ける。マイクロフォン238は、ユーザが発する音声を捕捉し、捕捉した音声を音声データに変換してプロセッサ46に出力する。スピーカ240は、プロセッサ46からの指示に従って音声を出力する。
【0179】
カメラ42は、レンズ、絞り、およびシャッタなどの光学系と、CMOSイメージセンサまたはCCDイメージセンサなどの撮像素子とが搭載された小型デジタルカメラであり、ユーザの周囲(例えば、一般的な健常者の視界の広さに相当する画角で規定された撮像範囲)を撮像する。
【0180】
通信I/F44は、ネットワーク54に接続されている。通信I/F44および26は、ネットワーク54を介してプロセッサ46とプロセッサ28との間の各種情報の授受を司る。通信I/F44および26を用いたプロセッサ46とプロセッサ28との間の各種情報の授受はセキュアな状態で行われる。
【0181】
制御対象443は、表示装置、目部のLED、並びに、腕、手および足などを駆動するモータなどを含む。ロボット414の姿勢や仕草は、腕、手および足などのモータを制御することにより制御される。ロボット414の感情の一部は、これらのモータを制御することにより表現できる。また、ロボット414の目部のLEDの発光状態を制御することによっても、ロボット414の表情を表現できる。
【0182】
図8には、データ処理装置12およびロボット414の要部機能の一例が示されている。図8に示すように、データ処理装置12では、プロセッサ28によって特定処理が行われる。ストレージ32には、特定処理プログラム56が格納されている。
【0183】
プロセッサ28は、ストレージ32から特定処理プログラム56を読み出し、読み出した特定処理プログラム56をRAM30上で実行する。特定処理は、プロセッサ28がRAM30上で実行する特定処理プログラム56に従って、特定処理部290として動作することによって実現される。
【0184】
ストレージ32には、データ生成モデル58および感情特定モデル59が格納されている。データ生成モデル58および感情特定モデル59は、特定処理部290によって用いられる。特定処理部290は、感情特定モデル59を用いてユーザの感情を推定し、ユーザの感情を用いた特定処理を行うことができる。感情特定モデル59を用いた感情推定機能(感情特定機能)では、ユーザの感情の推定や予測などを含め、ユーザの感情に関する種々の推定や予測などが行われるが、かかる例に限定されない。また、感情の推定や予測には、例えば、感情の分析(解析)なども含まれる。
【0185】
ロボット414では、プロセッサ46によって特定処理が行われる。ストレージ50には、特定プログラム60が格納されている。プロセッサ46は、ストレージ50から特定プログラム60を読み出し、読み出した特定プログラム60をRAM48上で実行する。特定処理は、プロセッサ46がRAM48上で実行する特定プログラム60に従って、制御部46Aとして動作することによって実現される。なお、ロボット414には、データ生成モデル58および感情特定モデル59と同様のデータ生成モデルおよび感情特定モデルを有し、これらモデルを用いて特定処理部290と同様の処理を行うこともできる。
【0186】
なお、データ処理装置12以外の他の装置がデータ生成モデル58を有してもよい。例えば、サーバ装置がデータ生成モデル58を有してもよい。この場合、データ処理装置12は、データ生成モデル58を有するサーバ装置と通信を行うことで、データ生成モデル58が用いられた処理結果(予測結果など)を得る。また、データ処理装置12は、サーバ装置であってもよいし、ユーザが保有する端末装置(例えば、携帯電話、ロボット、家電など)であってもよい。
【0187】
特定処理部290は、特定処理の結果をロボット414に送信する。ロボット414では、制御部46Aが、スピーカ240および制御対象443に対して特定処理の結果を出力させる。マイクロフォン238は、特定処理の結果に対するユーザ入力を示す音声を取得する。制御部46Aは、マイクロフォン238によって取得されたユーザ入力を示す音声データをデータ処理装置12に送信する。データ処理装置12では、特定処理部290が音声データを取得する。
【0188】
データ生成モデル58は、いわゆる生成AIである。データ生成モデル58の一例としては、ChatGPTなどの生成AIが挙げられる。データ生成モデル58は、ニューラルネットワークに対して深層学習を行わせることによって得られる。データ生成モデル58には、指示を含むプロンプトが入力され、かつ、音声を示す音声データ、テキストを示すテキストデータ、および画像を示す画像データ(例えば、静止画のデータまたは動画のデータ)などの推論用データが入力される。データ生成モデル58は、入力された推論用データをプロンプトにより示される指示に従って推論し、推論結果を音声データ、テキストデータ、および画像データなどのうちの1以上のデータ形式で出力する。データ生成モデル58は、例えば、テキスト生成AI、画像生成AI、マルチモーダル生成AIなどを含む。ここで、推論とは、例えば、分析、分類、予測、および/または要約などを指す。特定処理部290は、データ生成モデル58を用いながら、上述した特定処理を行う。データ生成モデル58は、指示を含まないプロンプトから推論結果を出力するように、ファインチューニングされたモデルであってもよく、この場合、データ生成モデル58は、指示を含まないプロンプトから推論結果を出力することができる。データ処理装置12などにおいて、データ生成モデル58は複数種類含まれており、データ生成モデル58は、生成AI以外のAIを含む。生成AI以外のAIは、例えば、線形回帰、ロジスティック回帰、決定木、ランダムフォレスト、サポートベクターマシン(SVM)、k-meansクラスタリング、畳み込みニューラルネットワーク(CNN)、リカレントニューラルネットワーク(RNN)、生成的敵対的ネットワーク(GAN)、またはナイーブベイズなどであり、種々の処理を行うことができるが、かかる例に限定されない。また、AIは、AIエージェントであってもよい。また、上述した各部の処理がAIで行われる場合、その処理は、AIで一部または全部が行われるが、かかる例に限定されない。また、生成AIを含むAIで実施される処理は、ルールベースでの処理に置き換えてもよく、ルールベースの処理は、生成AIを含むAIで実施される処理に置き換えてもよい。
【0189】
第4実施形態に係るデータ処理システム410は、第1実施形態に係るデータ処理システム10と同様の処理を行う。データ処理システム410による処理は、データ処理装置12の特定処理部290またはロボット414の制御部46Aによって実行されるが、データ処理装置12の特定処理部290とロボット414の制御部46Aとによって実行されてもよい。また、データ処理装置12の特定処理部290は、処理に必要な情報をロボット414または外部の装置などから取得したり収集したりし、ロボット414は、処理に必要な情報をデータ処理装置12または外部の装置などから取得したり収集したりする。
【0190】
上述した解析部、可視化部、推測部、提案部、レポート生成部、リマインダー部、学習部、および更新部を含む複数の要素の各々は、例えば、ロボット414およびデータ処理装置12のうちの少なくとも一方で実現される。例えば、解析部は、ロボット414のカメラ42やマイクロフォン238を用いてユーザの言葉、表情、音声を解析し、制御部46Aによって感情や症状を特定する。可視化部は、例えば、ロボット414のディスプレイを用いて痛みの強さや疲労感のレベルを表示する。推測部は、例えば、データ処理装置12の特定処理部290によって病名や原因を推測する。提案部は、例えば、データ処理装置12の特定処理部290によってパーソナライズされた改善策を提案する。レポート生成部は、例えば、データ処理装置12の特定処理部290によって診療用レポートを生成する。リマインダー部は、例えば、ロボット414の制御部46Aによって定期オンライン面談や通院・服薬等のリマインダー機能を提供する。学習部は、例えば、データ処理装置12の特定処理部290によって継続的な自己学習を行う。更新部は、例えば、データ処理装置12の特定処理部290によって最新の医療知識を更新する。各部と装置や制御部との対応関係は、上述した例に限定されず、種々の変更が可能である。
【0191】
なお、感情エンジンとしての感情特定モデル59は、特定のマッピングに従い、ユーザの感情を決定してよい。具体的には、感情特定モデル59は、特定のマッピングである感情マップ(図9参照)に従い、ユーザの感情を決定してよい。また、感情特定モデル59は、同様に、ロボットの感情を決定し、特定処理部290は、ロボットの感情を用いた特定処理を行うようにしてもよい。
【0192】
図9は、複数の感情がマッピングされる感情マップ400を示す図である。感情マップ400において、感情は、中心から放射状に同心円に配置されている。同心円の中心に近いほど、原始的状態の感情が配置されている。同心円のより外側には、心境から生まれる状態や行動を表す感情が配置されている。感情とは、情動や心的状態も含む概念である。同心円の左側には、概して脳内で起きる反応から生成される感情が配置されている。同心円の右側には概して、状況判断で誘導される感情が配置されている。同心円の上方向および下方向には、概して脳内で起きる反応から生成され、かつ、状況判断で誘導される感情が配置されている。また、同心円の上側には、「快」の感情が配置され、下側には、「不快」の感情が配置されている。このように、感情マップ400では、感情が生まれる構造に基づいて複数の感情がマッピングされており、同時に生じやすい感情が、近くにマッピングされている。
【0193】
これらの感情は、感情マップ400の3時の方向に分布しており、普段は安心と不安のあたりを行き来する。感情マップ400の右半分では、内部的な感覚よりも状況認識の方が優位に立つため、落ち着いた印象になる。
【0194】
感情マップ400の内側は心の中、感情マップ400の外側は行動を表すため、感情マップ400の外側に行くほど、感情が目に見える(行動に表れる)ようになる。
【0195】
ここで、人の感情は、姿勢や血糖値のような様々なバランスを基礎としており、それらのバランスが理想から遠ざかると不快、理想に近づくと快という状態を示す。ロボットや自動車やバイクなどにおいても、姿勢やバッテリー残量のような様々なバランスを基礎として、それらのバランスが理想から遠ざかると不快、理想に近づくと快という状態を示すように感情を作ることができる。感情マップは、例えば、光吉博士の感情地図(音声感情認識および情動の脳生理信号分析システムに関する研究、徳島大学、博士論文:https://ci.nii.ac.jp/naid/500000375379)に基づいて生成されてよい。感情地図の左半分には、感覚が優位にたつ「反応」と呼ばれる領域に属する感情が並ぶ。また、感情地図の右半分には、状況認識が優位にたつ「状況」と呼ばれる領域に属する感情が並ぶ。
【0196】
感情マップでは学習を促す感情が2つ定義される。1つは、状況側にあるネガティブな「懺悔」や「反省」の真ん中周辺の感情である。つまり、「もう2度とこんな想いはしたくない」「もう叱られたくない」というネガティブな感情がロボットに生じたときである。もう1つは、反応側にあるポジティブな「欲」のあたりの感情である。つまり、「もっと欲しい」「もっと知りたい」というポジティブな気持ちのときである。
【0197】
感情特定モデル59は、ユーザ入力を、予め学習されたニューラルネットワークに入力し、感情マップ400に示す各感情を示す感情値を取得し、ユーザの感情を決定する。このニューラルネットワークは、ユーザ入力と、感情マップ400に示す各感情を示す感情値との組み合わせである複数の学習データに基づいて予め学習されたものである。また、このニューラルネットワークは、図10に示す感情マップ900のように、近くに配置されている感情同士は、近い値を持つように学習される。図10では、「安心」、「安穏」、「心強い」という複数の感情が、近い感情値となる例を示している。
【0198】
上記実施形態では、1台のコンピュータ22によって特定処理が行われる形態例を挙げたが、本開示の技術はこれに限定されず、コンピュータ22を含めた複数のコンピュータによる特定処理に対する分散処理が行われるようにしてもよい。
【0199】
上記実施形態では、ストレージ32に特定処理プログラム56が格納されている形態例を挙げて説明したが、本開示の技術はこれに限定されない。例えば、特定処理プログラム56がUSB(Universal Serial Bus)メモリなどの可搬型のコンピュータ読み取り可能な非一時的格納媒体に格納されていてもよい。非一時的格納媒体に格納されている特定処理プログラム56は、データ処理装置12のコンピュータ22にインストールされる。プロセッサ28は、特定処理プログラム56に従って特定処理を実行する。
【0200】
また、ネットワーク54を介してデータ処理装置12に接続されるサーバなどの格納装置に特定処理プログラム56を格納させておき、データ処理装置12の要求に応じて特定処理プログラム56がダウンロードされ、コンピュータ22にインストールされるようにしてもよい。
【0201】
なお、ネットワーク54を介してデータ処理装置12に接続されるサーバなどの格納装置に特定処理プログラム56の全てを格納させておいたり、ストレージ32に特定処理プログラム56の全てを記憶させたりしておく必要はなく、特定処理プログラム56の一部を格納させておいてもよい。
【0202】
特定処理を実行するハードウェア資源としては、次に示す各種のプロセッサを用いることができる。プロセッサとしては、例えば、ソフトウェア、すなわち、プログラムを実行することで、特定処理を実行するハードウェア資源として機能する汎用的なプロセッサであるCPUが挙げられる。また、プロセッサとしては、例えば、FPGA(Field-Programmable Gate Array)、PLD(Programmable Logic Device)、またはASIC(Application Specific Integrated Circuit)などの特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路が挙げられる。何れのプロセッサにもメモリが内蔵または接続されており、何れのプロセッサもメモリを使用することで特定処理を実行する。
【0203】
特定処理を実行するハードウェア資源は、これらの各種のプロセッサのうちの1つで構成されてもよいし、同種または異種の2つ以上のプロセッサの組み合わせ(例えば、複数のFPGAの組み合わせ、またはCPUとFPGAとの組み合わせ)で構成されてもよい。また、特定処理を実行するハードウェア資源は1つのプロセッサであってもよい。
【0204】
1つのプロセッサで構成する例としては、第1に、1つ以上のCPUとソフトウェアの組み合わせで1つのプロセッサを構成し、このプロセッサが、特定処理を実行するハードウェア資源として機能する形態がある。第2に、SoC(System-on-a-chip)などに代表されるように、特定処理を実行する複数のハードウェア資源を含むシステム全体の機能を1つのICチップで実現するプロセッサを使用する形態がある。このように、特定処理は、ハードウェア資源として、上記各種のプロセッサの1つ以上を用いて実現される。
【0205】
更に、これらの各種のプロセッサのハードウェア的な構造としては、より具体的には、半導体素子などの回路素子を組み合わせた電気回路を用いることができる。また、上記の特定処理はあくまでも一例である。従って、主旨を逸脱しない範囲内において不要なステップを削除したり、新たなステップを追加したり、処理順序を入れ替えたりしてもよいことは言うまでもない。
【0206】
また、上述した例では、第1実施形態から第4実施形態に分けて説明したが、これらの実施形態の一部または全部は組み合わされてもよい。また、スマートデバイス14、スマート眼鏡214、ヘッドセット型端末314、およびロボット414は一例であって、それぞれを組み合わせてもよく、それ以外の装置であってもよい。また、上述した例では、形態例1と形態例2に分けて説明したが、これらは組み合わせてもよい。
【0207】
以上に示した記載内容および図示内容は、本開示の技術に係る部分についての詳細な説明であり、本開示の技術の一例に過ぎない。例えば、上記の構成、機能、作用、および効果に関する説明は、本開示の技術に係る部分の構成、機能、作用、および効果の一例に関する説明である。よって、本開示の技術の主旨を逸脱しない範囲内において、以上に示した記載内容および図示内容に対して、不要な部分を削除したり、新たな要素を追加したり、置き換えたりしてもよいことは言うまでもない。また、錯綜を回避し、本開示の技術に係る部分の理解を容易にするために、以上に示した記載内容および図示内容では、本開示の技術の実施を可能にする上で特に説明を要しない技術常識等に関する説明は省略されている。
【0208】
本明細書に記載された全ての文献、特許出願および技術規格は、個々の文献、特許出願および技術規格が参照により取り込まれることが具体的かつ個々に記された場合と同程度に、本明細書中に参照により取り込まれる。
【0209】
(付記1)
ユーザの言葉、表情、音声を解析する解析部と、
前記解析部によって解析された情報に基づいてリアルタイムで痛み等の症状や程度を可視化する可視化部と、
前記可視化部によって可視化された情報に基づいて病名や原因を推測する推測部と、
前記推測部によって推測された情報に基づいてパーソナライズされた改善策を提案する提案部と、
前記提案部によって提案された情報に基づいて診療用レポートを生成するレポート生成部と、を備える
ことを特徴とするシステム。
(付記2)
定期オンライン面談や通院・服薬等のリマインダー機能を提供するリマインダー部を備える
ことを特徴とする付記1に記載のシステム。
(付記3)
継続的な自己学習を行う学習部を備える
ことを特徴とする付記1に記載のシステム。
(付記4)
最新の医療知識を更新する更新部を備える
ことを特徴とする付記1に記載のシステム。
(付記5)
前記解析部は、
ユーザの感情を推定し、推定したユーザの感情に基づいて解析の精度を調整する
ことを特徴とする付記1に記載のシステム。
(付記6)
前記解析部は、
解析時に、ユーザの過去の健康データを参照して解析の精度を向上させる
ことを特徴とする付記1に記載のシステム。
(付記7)
前記解析部は、
解析時に、ユーザの生活習慣や環境情報を考慮して解析を行う
ことを特徴とする付記1に記載のシステム。
(付記8)
前記解析部は、
ユーザの感情を推定し、推定したユーザの感情に基づいて解析結果の表示方法を調整する
ことを特徴とする付記1に記載のシステム。
(付記9)
前記解析部は、
解析時に、ユーザの地理的位置情報を考慮して解析を行う
ことを特徴とする付記1に記載のシステム。
(付記10)
前記解析部は、
解析時に、ユーザのソーシャルメディア活動を分析し、関連する情報を解析に反映させる
ことを特徴とする付記1に記載のシステム。
(付記11)
前記可視化部は、
ユーザの感情を推定し、推定したユーザの感情に基づいて可視化の表現方法を調整する
ことを特徴とする付記1に記載のシステム。
(付記12)
前記可視化部は、
可視化時に、症状の重要度に基づいて可視化の詳細度を調整する
ことを特徴とする付記1に記載のシステム。
(付記13)
前記可視化部は、
可視化時に、症状のカテゴリに応じて異なる可視化手法を適用する
ことを特徴とする付記1に記載のシステム。
(付記14)
前記可視化部は、
ユーザの感情を推定し、推定したユーザの感情に基づいて可視化の長さを調整する
ことを特徴とする付記1に記載のシステム。
(付記15)
前記可視化部は、
可視化時に、症状の発生時期に基づいて可視化の優先順位を決定する
ことを特徴とする付記1に記載のシステム。
(付記16)
前記可視化部は、
可視化時に、症状の関連性に基づいて可視化の順序を調整する
ことを特徴とする付記1に記載のシステム。
(付記17)
前記推測部は、
ユーザの感情を推定し、推定したユーザの感情に基づいて推測の基準を調整する
ことを特徴とする付記1に記載のシステム。
(付記18)
前記推測部は、
推測時に、症状の相互関係を考慮して推測の精度を向上させる
ことを特徴とする付記1に記載のシステム。
(付記19)
前記推測部は、
推測時に、ユーザの属性情報を考慮して推測を行う
ことを特徴とする付記1に記載のシステム。
(付記20)
前記推測部は、
ユーザの感情を推定し、推定したユーザの感情に基づいて推測結果の表示順序を調整する
ことを特徴とする付記1に記載のシステム。
(付記21)
前記推測部は、
推測時に、症状の地理的分布を考慮して推測を行う
ことを特徴とする付記1に記載のシステム。
(付記22)
前記推測部は、
推測時に、関連文献を参照して推測の精度を向上させる
ことを特徴とする付記1に記載のシステム。
(付記23)
前記提案部は、
ユーザの感情を推定し、推定したユーザの感情に基づいて提案の表現方法を調整する
ことを特徴とする付記1に記載のシステム。
(付記24)
前記提案部は、
提案時に、症状の重要度に基づいて提案の詳細度を調整する
ことを特徴とする付記1に記載のシステム。
(付記25)
前記提案部は、
提案時に、症状のカテゴリに応じて異なる提案アルゴリズムを適用する
ことを特徴とする付記1に記載のシステム。
(付記26)
前記提案部は、
ユーザの感情を推定し、推定したユーザの感情に基づいて提案の長さを調整する
ことを特徴とする付記1に記載のシステム。
(付記27)
前記提案部は、
提案時に、症状の発生時期に基づいて提案の優先順位を決定する
ことを特徴とする付記1に記載のシステム。
(付記28)
前記提案部は、
提案時に、症状の関連性に基づいて提案の順序を調整する
ことを特徴とする付記1に記載のシステム。
(付記29)
前記レポート生成部は、
ユーザの感情を推定し、推定したユーザの感情に基づいてレポートの表現方法を調整する
ことを特徴とする付記1に記載のシステム。
(付記30)
前記レポート生成部は、
レポート生成時に、症状の重要度に基づいてレポートの詳細度を調整する
ことを特徴とする付記1に記載のシステム。
(付記31)
前記レポート生成部は、
レポート生成時に、症状のカテゴリに応じて異なるレポート生成アルゴリズムを適用する
ことを特徴とする付記1に記載のシステム。
(付記32)
前記レポート生成部は、
ユーザの感情を推定し、推定したユーザの感情に基づいてレポートの長さを調整する
ことを特徴とする付記1に記載のシステム。
(付記33)
前記レポート生成部は、
レポート生成時に、症状の発生時期に基づいてレポートの優先順位を決定する
ことを特徴とする付記1に記載のシステム。
(付記34)
前記レポート生成部は、
レポート生成時に、症状の関連性に基づいてレポートの順序を調整する
ことを特徴とする付記1に記載のシステム。
(付記35)
前記リマインダー部は、
ユーザの感情を推定し、推定したユーザの感情に基づいてリマインダーの通知方法を調整する
ことを特徴とする付記2に記載のシステム。
(付記36)
前記リマインダー部は、
リマインダー通知時に、ユーザの過去の行動履歴を参照して最適な通知方法を選定する
ことを特徴とする付記2に記載のシステム。
(付記37)
前記リマインダー部は、
ユーザの感情を推定し、推定したユーザの感情に基づいてリマインダーの優先順位を決定する
ことを特徴とする付記2に記載のシステム。
(付記38)
前記リマインダー部は、
リマインダー通知時に、ユーザのデバイス情報を考慮して最適な通知方法を選定する
ことを特徴とする付記2に記載のシステム。
(付記39)
前記学習部は、
ユーザの感情を推定し、推定したユーザの感情に基づいて学習データの選定を行う
ことを特徴とする付記3に記載のシステム。
(付記40)
前記学習部は、
学習時に、過去の学習データを参照して学習アルゴリズムを最適化する
ことを特徴とする付記3に記載のシステム。
(付記41)
前記学習部は、
ユーザの感情を推定し、推定したユーザの感情に基づいて学習の頻度を調整する
ことを特徴とする付記3に記載のシステム。
(付記42)
前記学習部は、
学習時に、症状の発生時期に基づいて学習データの重み付けを行う
ことを特徴とする付記3に記載のシステム。
(付記43)
前記更新部は、
ユーザの感情を推定し、推定したユーザの感情に基づいて更新データの選定を行う
ことを特徴とする付記4に記載のシステム。
(付記44)
前記更新部は、
更新時に、過去の更新データを参照して更新アルゴリズムを最適化する
ことを特徴とする付記4に記載のシステム。
(付記45)
前記更新部は、
ユーザの感情を推定し、推定したユーザの感情に基づいて更新の頻度を調整する
ことを特徴とする付記4に記載のシステム。
(付記46)
前記更新部は、
更新時に、症状の発生時期に基づいて更新データの重み付けを行う
ことを特徴とする付記4に記載のシステム。
【符号の説明】
【0210】
10、210、310、410 データ処理システム
12 データ処理装置
14 スマートデバイス
214 スマート眼鏡
314 ヘッドセット型端末
414 ロボット
図1
図2
図3
図4
図5
図6
図7
図8
図9
図10