2026-91166 データ処理装置、データ処理方法、及びデータ処理プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2026091166

(43)【公開日】2026-06-03

(54)【発明の名称】データ処理装置、データ処理方法、及びデータ処理プログラム

(51)【国際特許分類】

   G06Q 50/10 20120101AFI20260527BHJP

【ＦＩ】

G06Q50/10

【審査請求】未請求

【請求項の数】6

【出願形態】ＯＬ

(21)【出願番号】P 2024204256

(22)【出願日】2024-11-22

(71)【出願人】

【識別番号】591280485

【氏名又は名称】ソフトバンクグループ株式会社

(74)【代理人】

【識別番号】110001519

【氏名又は名称】弁理士法人太陽国際特許事務所

(72)【発明者】

【氏名】孫 正義

【テーマコード（参考）】

5L050

【Ｆターム（参考）】

5L050CC11

(57)【要約】

【課題】ユーザが一度に２つのタスクを実行し得る音声を左右のイヤフォンから提供可能な装置、方法、及びプログラムを提供することを目的とする。
【解決手段】データ処理装置は、プロセッサを備え、前記プロセッサは、ユーザの左右の耳にそれぞれ装着される２つのイヤフォンのうちの少なくとも一方に設けられたマイクロフォン、カメラ、及びセンサの少なくともいずれかから出力されるユーザデータを収集し、前記ユーザデータに基づいて、コンテンツが互いに異なる２つの音声データを取得し、前記２つの音声データのうちの一方を前記２つのイヤフォンのうちの一方へ送信するとともに、前記２つの音声データのうちの他方を前記２つのイヤフォンのうちの他方へ送信する。
【選択図】図７

【特許請求の範囲】

【請求項1】

プロセッサを備え、前記プロセッサは、
ユーザの左右の耳にそれぞれ装着される２つのイヤフォンのうちの少なくとも一方に設けられたマイクロフォン、カメラ、及びセンサの少なくともいずれかから出力されるユーザデータを収集し、
前記ユーザデータに基づいて、コンテンツが互いに異なる２つの音声データを取得し、
前記２つの音声データのうちの一方を前記２つのイヤフォンのうちの一方へ送信するとともに、前記２つの音声データのうちの他方を前記２つのイヤフォンのうちの他方へ送信する、
データ処理装置。

【請求項2】

前記プロセッサは、
前記ユーザデータに基づいて、２つのプロンプトをそれぞれ生成し、
前記２つのプロンプトを用いて前記２つの音声データをそれぞれ取得する、
請求項１に記載のデータ処理装置。

【請求項3】

前記プロセッサは、
前記２つの音声データに応じて、前記２つのイヤフォンのうちの少なくとも一方の音量を調整するコマンドを発行する、
請求項１に記載のデータ処理装置。

【請求項4】

前記プロセッサは、前記ユーザデータとして少なくとも前記ユーザの生体データを収集する、
請求項１に記載のデータ処理装置。

【請求項5】

コンピュータが、
ユーザの左右の耳にそれぞれ装着される２つのイヤフォンのうちの少なくとも一方に設けられたマイクロフォン、カメラ、及びセンサの少なくともいずれかから出力されるユーザデータを収集することと、
前記ユーザデータに基づいて、コンテンツが互いに異なる２つの音声データを取得することと、
前記２つの音声データのうちの一方を前記２つのイヤフォンのうちの一方へ送信するとともに、前記２つの音声データのうちの他方を前記２つのイヤフォンのうちの他方へ送信することと、を有する、
データ処理方法。

【請求項6】

コンピュータに、
ユーザの左右の耳にそれぞれ装着される２つのイヤフォンのうちの少なくとも一方に設けられたマイクロフォン、カメラ、及びセンサの少なくともいずれかから出力されるユーザデータを収集させ、
前記ユーザデータに基づいて、コンテンツが互いに異なる２つの音声データを取得させ、
前記２つの音声データのうちの一方を前記２つのイヤフォンのうちの一方へ送信するとともに、前記２つの音声データのうちの他方を前記２つのイヤフォンのうちの他方へ送信させる、
データ処理プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本開示の技術は、データ処理装置、データ処理方法、及びデータ処理プログラムに関する。

【背景技術】

【0002】

特許文献１には、少なくとも一つのプロセッサにより遂行される、ペルソナチャットボット制御方法であって、ユーザ発話を受信するステップと、前記ユーザ発話を、チャットボットのキャラクターに関する説明と関連した指示文を含むプロンプトに追加するステップと前記プロンプトをエンコードするステップと、前記エンコードしたプロンプトを言語モデルに入力して、前記ユーザ発話に応答するチャットボット発話を生成するステップ、を含む、方法が開示されている。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０２２－１８０２８２号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

従来の技術では、左右のイヤフォンから同一の音声しか提供されないため、ユーザは一度に一つのタスクしか実行できないという問題があった。そこで、本開示では、ユーザが一度に２つのタスクを実行し得る音声を左右のイヤフォンから提供可能な装置、方法、及びプログラムを提供することを目的とする。

【課題を解決するための手段】

【0005】

本開示の第１態様に係るデータ処理装置は、プロセッサを備え、前記プロセッサは、ユーザの左右の耳にそれぞれ装着される２つのイヤフォンのうちの少なくとも一方に設けられたマイクロフォン、カメラ、及びセンサの少なくともいずれかから出力されるユーザデータを収集し、前記ユーザデータに基づいて、コンテンツが互いに異なる２つの音声データを取得し、前記２つの音声データのうちの一方を前記２つのイヤフォンのうちの一方へ送信するとともに、前記２つの音声データのうちの他方を前記２つのイヤフォンのうちの他方へ送信する。

【0006】

本開示の第２態様に係るデータ処理装置は、第１態様に係るデータ処理装置において、前記プロセッサは、前記ユーザデータに基づいて、２つのプロンプトをそれぞれ生成し、前記２つのプロンプトを用いて前記２つの音声データをそれぞれ取得する。

【0007】

本開示の第３態様に係るデータ処理装置は、第１態様又は第２態様に係るデータ処理装置において、前記プロセッサは、前記２つの音声データに応じて、前記２つのイヤフォンのうちの少なくとも一方の音量を調整するコマンドを発行する。

【0008】

本開示の第４態様に係るデータ処理装置は、第１態様から第３態様のいずれか一つに係るデータ処理装置において、前記プロセッサは、前記ユーザデータとして少なくとも前記ユーザの生体データを収集する。

【0009】

本開示の第５態様に係るデータ処理方法は、コンピュータが、ユーザの左右の耳にそれぞれ装着される２つのイヤフォンのうちの少なくとも一方に設けられたマイクロフォン、カメラ、及びセンサの少なくともいずれかから出力されるユーザデータを収集することと、前記ユーザデータに基づいて、コンテンツが互いに異なる２つの音声データを取得することと、前記２つの音声データのうちの一方を前記２つのイヤフォンのうちの一方へ送信するとともに、前記２つの音声データのうちの他方を前記２つのイヤフォンのうちの他方へ送信することと、を有する。

【0010】

本開示の第６態様に係るデータ処理プログラムは、コンピュータに、ユーザの左右の耳にそれぞれ装着される２つのイヤフォンのうちの少なくとも一方に設けられたマイクロフォン、カメラ、及びセンサの少なくともいずれかから出力されるユーザデータを収集させ、前記ユーザデータに基づいて、コンテンツが互いに異なる２つの音声データを取得させ、前記２つの音声データのうちの一方を前記２つのイヤフォンのうちの一方へ送信するとともに、前記２つの音声データのうちの他方を前記２つのイヤフォンのうちの他方へ送信させる。

【図面の簡単な説明】

【0011】

【図1】図１は第１の実施形態に係るデータ処理システムの構成の一例を示す概念図である。

【図2】図２はデータ処理装置及びイヤフォンの要部機能の一例を示す概念図である。

【図3A】図３Ａはイヤフォンの構成例を示す図である。

【図3B】図３Ｂはユーザがイヤフォンを装着した状態を示す図である。

【図3C】図３Ｃはカメラ４２の画角について説明するための図である。

【図3D】図３Ｄはユーザがイヤフォンを装着した状態を示す図である。

【図3E】図３Ｅはユーザがイヤフォンを装着した状態を示す図である。

【図3F】図３Ｆはユーザがイヤフォンを装着した状態を示す図である。

【図4】データ処理装置の特定処理部の機能構成を概略的に示す。

【図5】データ処理装置による特定処理の動作フローの一例を概略的に示す。

【図6】第２の実施形態に係るデータ処理システムの構成の一例を示す概念図である。

【図7】第２の実施形態に係るデータ処理装置による特定処理の動作フローの一例を示す概念図である。

【発明を実施するための形態】

【0012】

以下、添付図面に従って本開示の技術に係るデータ処理装置、データ処理方法、及びプログラムの実施形態の一例について説明する。

【0013】

先ず、以下の説明で使用される文言について説明する。

【0014】

以下の実施形態において、符号付きのプロセッサ（以下、単に「プロセッサ」と称する）は、１つの演算装置であってもよいし、複数の演算装置の組み合わせであってもよい。また、プロセッサは、１種類の演算装置であってもよいし、複数種類の演算装置の組み合わせであってもよい。演算装置の一例としては、ＣＰＵ（Central Processing Unit）、ＧＰＵ（Graphics Processing Unit）、ＧＰＧＰＵ（General-Purpose computing on Graphics Processing Units）、又はＡＰＵ（Accelerated Processing Unit）等が挙げられる。

【0015】

以下の実施形態において、符号付きのＲＡＭ（Random Access Memory）は、一時的に情報が格納されるメモリであり、プロセッサによってワークメモリとして用いられる。

【0016】

以下の実施形態において、符号付きのストレージは、各種プログラム及び各種パラメータ等を記憶する１つ又は複数の不揮発性の記憶装置である。不揮発性の記憶装置の一例としては、フラッシュメモリ（ＳＳＤ（Solid State Drive））、磁気ディスク（例えば、ハードディスク）、又は磁気テープ等が挙げられる。

【0017】

以下の実施形態において、符号付きの通信Ｉ／Ｆ（Interface）は、通信プロセッサ及びアンテナ等を含むインタフェースである。通信Ｉ／Ｆは、複数のコンピュータ間での通信を司る。通信Ｉ／Ｆに対して適用される通信規格の一例としては、５Ｇ（5th Generation Mobile Communication System）、Ｗｉ－Ｆｉ（登録商標）、又はＢｌｕｅｔｏｏｔｈ（登録商標）等を含む無線通信規格が挙げられる。

【0018】

以下の実施形態において、「Ａ及び／又はＢ」は、「Ａ及びＢのうちの少なくとも１つ」と同義である。つまり、「Ａ及び／又はＢ」は、Ａだけであってもよいし、Ｂだけであってもよいし、Ａ及びＢの組み合わせであってもよい、という意味である。また、本明細書において、３つ以上の事柄を「及び／又は」で結び付けて表現する場合も、「Ａ及び／又はＢ」と同様の考え方が適用される。

【0019】

＜第１の実施形態＞
図１には、第１の実施形態に係るデータ処理システム１０の構成の一例が示されている。

【0020】

図１に示すように、データ処理システム１０は、データ処理装置１２及びイヤフォン１４を備えている。データ処理装置１２の一例としては、サーバが挙げられる。本実施形態において、データ処理装置１２は、本開示の技術に係る「データ処理装置」の一例である。

【0021】

データ処理装置１２は、コンピュータ２２、データベース２４、及び通信Ｉ／Ｆ２６を備えている。コンピュータ２２は、本開示の技術に係る「コンピュータ」の一例である。コンピュータ２２は、プロセッサ２８、ＲＡＭ３０、及びストレージ３２を備えている。プロセッサ２８、ＲＡＭ３０、及びストレージ３２は、バス３４に接続されている。また、データベース２４及び通信Ｉ／Ｆ２６も、バス３４に接続されている。通信Ｉ／Ｆ２６は、ネットワーク５４に接続されている。ネットワーク５４の一例としては、ＷＡＮ（Wide Area Network）及び／又はＬＡＮ（Local Area Network）等が挙げられる。

【0022】

イヤフォン１４は、コンピュータ３６、マイクロフォン３８、スピーカ４０、カメラ４２、及び通信Ｉ／Ｆ４４を備えている。コンピュータ３６は、プロセッサ４６、ＲＡＭ４８、及びストレージ５０を備えている。プロセッサ４６、ＲＡＭ４８、及びストレージ５０は、バス５２に接続されている。また、マイクロフォン３８、スピーカ４０、及びカメラ４２も、バス５２に接続されている。

【0023】

マイクロフォン３８は、ユーザ２０が発する音声を受け付けることで、ユーザ２０から指示等を受け付ける。マイクロフォン３８は、ユーザ２０が発する音声を捕捉し、捕捉した音声を音声データに変換してプロセッサ４６に出力する。スピーカ４０は、プロセッサ４６からの指示に従って音声を出力する。以下ではマイクロフォン３８を単にマイク３８と称する場合がある。

【0024】

カメラ４２は、レンズ、絞り、及びシャッタ等の光学系と、ＣＭＯＳ（Complementary Metal-Oxide-Semiconductor）イメージセンサ又はＣＣＤ（Charge Coupled Device）イメージセンサ等の撮像素子とが搭載された小型デジタルカメラであり、ユーザ２０の周囲（例えば、一般的な健常者の視界の広さに相当する画角で規定された撮像範囲）を撮像する。

【0025】

通信Ｉ／Ｆ４４は、ネットワーク５４に接続されている。通信Ｉ／Ｆ４４及び２６は、ネットワーク５４を介してプロセッサ４６とプロセッサ２８との間の各種情報の授受を司る。

【0026】

図２には、データ処理装置１２及びイヤフォン１４の要部機能の一例が示されている。

【0027】

図２に示すように、データ処理装置１２では、プロセッサ２８によって特定処理が行われる。ストレージ３２には、特定処理プログラム５６が格納されている。特定処理プログラム５６は、本開示の技術に係る「データ処理プログラム」の一例である。プロセッサ２８は、ストレージ３２から特定処理プログラム５６を読み出し、読み出した特定処理プログラム５６をＲＡＭ３０上で実行する。特定処理は、プロセッサ２８がＲＡＭ３０上で実行する特定処理プログラム５６に従って特定処理部２９０として動作することによって実現される。

【0028】

ストレージ３２には、データ生成モデル５８が格納されている。データ生成モデル５８は、特定処理部２９０によって用いられる。

【0029】

（イヤフォン１４）
イヤフォン１４では、プロセッサ４６によって受付出力処理が行われる。ストレージ５０には、受付出力プログラム６０が格納されている。プロセッサ４６は、ストレージ５０から受付出力プログラム６０を読み出し、読み出した受付出力プログラム６０をＲＡＭ４８上で実行する。受付出力処理は、プロセッサ４６がＲＡＭ４８上で実行する受付出力プログラム６０に従って、制御部４６Ａとして動作することによって実現される。

【0030】

イヤフォン１４は、図３Ａに示すように、ユーザ２０の外耳道に装着されるカナル型のイヤフォンと解釈してよい。なお、イヤフォン１４は、カナル型に限定されず、ユーザ２０の内耳に挿入して装着されるインナーイヤー型のイヤフォンでもよく、ユーザ２０の耳の全体を覆うヘッドフォン型のイヤフォンでもよい。２つのイヤフォン１４のそれぞれに、マイクロフォン３８、スピーカ４０、及びカメラ４２が設けられている。ユーザ２０の耳に装着される２つのイヤフォン１４で収集された音及び画像は、データベース２４にライフログとして記録されてよい。

【0031】

ライフログは、ユーザ２０が日常生活でとった行動の履歴と解釈してよく、ユーザ２０に紐付く音及び画像、具体的には、日常生活の中でマイクロフォン３８で収集された音、カメラ４２で撮影された画像を含んでよい。ライフログには、ユーザ２０に紐付く音及び画像が、それらが取得された日時、場所などに対応付けて記録されてよい。

【0032】

マイクロフォン３８で収集された音は、ユーザ２０が会話している相手の声、散歩やサイクリングをしているときにユーザ２０の周囲で発生する音（車の走行音、鳥のさえずり、川のせせらぎ、風になびく木々の音）などを含んでよい。

【0033】

図３Ｃに示すように、カメラ４２は、ユーザ２０の前方を捉える画角内の風景を撮像してよく、ユーザ２０の前方以外、例えばユーザ２０の側方、後方、下方、上方などを捉える画角内の風景を撮像してもよい。カメラ４２で撮影された画像は、ユーザ２０が会話している相手の姿、散歩やサイクリングをしているときユーザ２０の周囲の風景、ユーザ２０の共に歩くペットの姿などを含んでよい。

【0034】

２つのイヤフォン１４のそれぞれにカメラ４２が設けられているため、図３Ｂに示すようにユーザ２０の耳に装着された２つのイヤフォン１４は、左耳と右耳に特定の距離を隔てて配置される。従って、例えばビデオカメラなどのように１つの筐体に２眼カメラを並べて配置する場合に比べて、２つのカメラ４２の配置間隔を広くできるため、３Ｄセンシングがし易くなる。３Ｄセンシングは、三次元形状を計測することと解釈してよい。

【0035】

また、２つのイヤフォン１４がユーザ２０の耳に装着されると、ユーザ２０の左右の目の位置に近い箇所に、２つのカメラ４２が配置されるため、肉眼で見た画像と略等しい撮像（撮影画像）を、データベース２４にライフログとして記録できる。従って、特定処理において、ユーザ２０からの問い合わせに対応する情報、つまりユーザ２０の発話の内容に対応する情報を再現し易くなる。

【0036】

２つのイヤフォン１４がユーザ２０に装着されている間は、カメラ４２で撮像された画像の全部または一部がデータベース２４にライフログとして記録されてよい。具体的には、２つのイヤフォン１４がユーザ２０に装着されたとき、カメラ４２で撮像された画像のデータベース２４への記録が開始され、２つのイヤフォン１４がユーザ２０から外されたときに当該画像のデータベース２４への記録が終了してよい。

【0037】

２つのイヤフォン１４がユーザ２０に装着されている間は、マイクロフォン３８で収集された音の全部または一部がデータベース２４にライフログとして記録されてよい。具体的には、２つのイヤフォン１４がユーザ２０に装着されたとき、マイクロフォン３８で収集された音のデータベース２４への記録が開始され、２つのイヤフォン１４がユーザ２０から外されたときに当該音のデータベース２４への記録が終了してよい。

【0038】

次に、データ処理装置１２が、イヤフォン１４を装着したユーザ２０から、ユーザ２０の記憶または行動に関する発話を受け付けた場合に、ユーザ２０の発話の内容に対応する情報をユーザ２０に提案する特定処理を行う際の、特定処理部２９０の処理について説明する。

【0039】

（特定処理）
本実施形態における特定処理では、ユーザデータを入力し、入力したユーザデータに応じた所定の推論結果を生成するデータ生成モデルを用いた特定処理を行う。具体的には、特定処理では、イヤフォン１４を装着したユーザ２０から、ユーザ２０の記憶または行動に関する発話をユーザデータとして受け付けた場合、データベース２４を参照することで、発話の内容に対応する情報をユーザ２０に提案する処理を実行する。具体的には、データベース２４にライフログが記録された後、イヤフォン１４を装着したユーザ２０が、ユーザ２０の記憶または行動に関する発話をした場合、特定処理として、データベース２４を参照することで、発話の内容に対応する情報を、ユーザ２０に提案する処理を実行してよい。

【0040】

（特定処理の第１例）
特定処理部２９０は、発話の内容として、イヤフォンを装着したユーザが特定の記憶を思い出すきっかけとなるメッセージを要求した場合、ライフログに基づき選択された１または複数のメッセージを、発話の内容（要求）に対応する情報として、メッセージの要求元のユーザに提案してよい。

【0041】

例えば、イヤフォン１４を装着したユーザ２０が自身の記憶を思い出そうとして「〇月〇日〇時ごろにＡさんに対して発した言葉は？」と発した場合、特定処理部２９０は、特定処理として、当該メッセージをプロンプトとしてデータ生成モデル５８に入力する。特定処理部２９０は、データベース２４のライフログを参照してデータ生成モデル５８で得られた出力に基づいて、「素敵なレストランを見つけたので予約しよう、と発していたと思います」というメッセージを生成してよい。当該メッセージは、ユーザ２０の発話の内容に対応する情報の一例と解釈してよい。

【0042】

例えば、イヤフォン１４を装着したユーザ２０が自身の記憶を思い出そうとして「〇月〇日〇時ごろに誰と話していた？」と発した場合、特定処理部２９０は、特定処理として、当該メッセージをプロンプトとしてデータ生成モデル５８に入力する。特定処理部２９０は、データベース２４のライフログを参照してデータ生成モデル５８で得られた出力に基づいて、「そのときは２人友人、おそらくＢさんとＣさんを交えて会話していたようです」というメッセージを生成してよい。当該メッセージは、ユーザ２０の発話の内容に対応する情報の一例と解釈してよい。

【0043】

例えば、イヤフォン１４を装着したユーザ２０が自身の感情を思い出そうとして「〇月〇日〇時ごろにＡさんと会話していたときの私の気持ちは？」と発した場合、特定処理部２９０は、特定処理として、当該メッセージをプロンプトとしてデータ生成モデル５８に入力する。特定処理部２９０は、データベース２４のライフログを参照してデータ生成モデル５８で得られた出力に基づいて、「そのとき、あなたは沢山笑っていたため友人に好感を持ちとても喜んでいたようです」というメッセージを生成してよい。当該メッセージは、ユーザ２０の発話の内容に対応する情報の一例と解釈してよい。

【0044】

（特定処理の第２例）
特定処理部２９０は、発話の内容として、イヤフォン１４を装着したユーザ２０が特定の事柄をつぶやいた場合、ライフログに基づき事柄に対して推奨されるユーザ２０の行動を、発話の内容（つぶやき）に対応する情報として、メッセージの要求元のユーザ２０に提案してよい。

【0045】

例えば、イヤフォン１４を装着したユーザ２０が特定の小売店で買い物をしているとき、「何を買おうかな？」と発した場合、特定処理部２９０は、特定処理として、当該メッセージをプロンプトとしてデータ生成モデル５８に入力する。特定処理部２９０は、データベース２４のライフログを参照してデータ生成モデル５８で得られた出力に基づいて、「数ヶ月前、このお店で商品Ａを購入した後、あまり美味しくないとコメントしていましたので、今回は、最近発売された商品Ｂ、商品Ｃなどを購入するのはいかがでしょうか」というメッセージを生成してよい。当該メッセージは、ユーザ２０の発話の内容に対応する情報の一例と解釈してよい。

【0046】

（特定処理の第３例）
図３Ｄに示すように、イヤフォン１４を装着したユーザ２０がパソコンを操作しているとき「一昨日検索した製品Ａの名前はなんだった？」と発した場合、特定処理部２９０は、特定処理として、当該メッセージをプロンプトとしてデータ生成モデル５８に入力する。データ生成モデル５８は、データベース２４のライフログを参照して、過去のユーザ２０が操作しているときのパソコンの画面の映像を解析することで、特定の出力を生成する。特定処理部２９０は、データ生成モデル５８で得られた出力に基づいて、「製品Ａは○○○です」というメッセージを生成してよい。当該メッセージは、ユーザ２０の発話の内容に対応する情報の一例と解釈してよい。

【0047】

（特定処理の第４例）
図３Ｅに示すように、イヤフォン１４を装着したユーザ２０がサイクリングをしているとき「この近くで絶景が見える場所があったけど、どこだろう？」と発した場合、特定処理部２９０は、特定処理として、当該メッセージをプロンプトとしてデータ生成モデル５８に入力する。データ生成モデル５８は、データベース２４のライフログを参照して、ユーザ２０が以前訪れた場所とその場所までの経路などを解析することで、特定の出力を生成する。特定処理部２９０は、データ生成モデル５８で得られた出力に基づいて、「ここから５００ｍ進んだところにある○○岬だと思います。」というメッセージを生成してよい。当該メッセージは、ユーザ２０の発話の内容に対応する情報の一例と解釈してよい。

【0048】

（特定処理の第５例）
図３Ｆに示すように、イヤフォン１４を装着したユーザ２０が訪問先のＡ社のＸ氏と出会ったとき「この人の名前を教えて？」と発した場合、特定処理部２９０は、特定処理として、当該メッセージをプロンプトとしてデータ生成モデル５８に入力する。データ生成モデル５８は、データベース２４のライフログを参照し、ユーザ２０がＡ社を訪れたときに出会った人の履歴などから、特定の出力を生成する。特定処理部２９０は、データ生成モデル５８で得られた出力に基づいて、「氏名は○○だと思います」というメッセージを生成してよい。当該メッセージは、ユーザ２０の発話の内容に対応する情報の一例と解釈してよい。

【0049】

特定処理部２９０は、図４に示すように、入力部２９１、処理部２９２、及び出力部２９３を備えている。

【0050】

入力部２９１は、イヤフォン１４で受け付けたユーザ入力を取得する。具体的には、イヤフォン１４で受け付けたユーザの音声を取得する

【0051】

処理部２９２は、データ生成モデル５８を用いた特定処理を行う。具体的には、データ生成モデル５８に、ユーザから入力された音声を入力し、生成結果を得る。より具体的には、イヤフォン１４を装着したユーザ２０からユーザ２０の記憶または行動に関する発話を受け付けた場合、発話の内容に対応する情報をユーザ２０に提案する処理を、特定処理として行う。

【0052】

出力部２９３は、特定処理の結果をイヤフォン１４に送信する。イヤフォン１４では、制御部４６Ａが、スピーカ４０に対して特定処理の結果を出力させる。マイクロフォン３８は、特定処理の結果に対するユーザ入力を示す音声を取得する。制御部４６Ａは、マイクロフォン３８によって取得されたユーザ入力を示す音声データをデータ処理装置１２に送信する。データ処理装置１２では、特定処理部２９０が音声データを取得する。

【0053】

データ生成モデル５８は、いわゆる生成系ＡＩ（Artificial Intelligence）である。データ生成モデル５８の一例としては、ＣｈａｔＧＰＴ（登録商標）（インターネット検索＜URL: https://openai.com/blog/chatgpt＞）、Ｇｅｍｉｎｉ（登録商標）（インターネット検索＜URL: https://gemini.google.com/?hl=ja＞）等の生成系ＡＩが挙げられる。データ生成モデル５８は、ニューラルネットワークに対して深層学習を行わせることによって得られる。データ生成モデル５８には、指示を含むプロンプトが入力され、かつ、音声を示す音声データ、テキストを示すテキストデータ、及び画像を示す画像データ等の推論用データが入力される。データ生成モデル５８は、入力された推論用データをプロンプトにより示される指示に従って推論し、推論結果を音声データ及びテキストデータ等のデータ形式で出力する。ここで、推論とは、例えば、分析、分類、予測、及び／又は要約等を指す。

【0054】

次に、データ処理システム１０の作用について説明する。

【0055】

特定処理の流れの一例について図５を参照しながら説明する。なお、図５に示す特定処理の流れは、本開示の技術に係る「データ処理方法」の一例である。

【0056】

ステップＳ３００で、データ処理装置１２は、２つのイヤフォン１４で収集された音及び画像を含むユーザデータを入力する。

【0057】

ステップＳ３０２で、データ処理装置１２は、イヤフォン１４を装着したユーザからユーザ２０の記憶または行動に関する発話を受け付けた場合、ユーザ２０のライフログに基づき、発話の内容に対応する情報をユーザ２０に提案する処理を、特定処理として実行する。

【0058】

ステップＳ３０３で、データ処理装置１２は、特定処理の結果をスピーカ４０から再生させる処理を実行する。

【0059】

図６には、第２の実施形態に係るデータ処理システム１０の構成の一例が示されている。第１の実施形態では、データ処理システム１０を、１つの音声を再生するシングル音声再生に適用させた場合を一例として示した。しかしながら、シングル音声再生では、左右のイヤフォンから同一の音声しか提供されないため、ユーザは一度に一つのタスクしか実行できないという問題があった。このような問題を解決すべく、第２の実施形態では、データ処理システム１０を、２つのイヤフォンからそれぞれ異なる２つの音声を再生するデュアル音声再生に適用させた場合について説明する。

【0060】

第２の実施形態に係るデータ処理システム１０は、データ処理装置１２と、左耳用のイヤフォン１４Ｌと、右耳用のイヤフォン１４Ｒと、を備える。イヤフォン１４Ｌ及びイヤフォン１４Ｒは、ネットワーク５４を介してデータ処理装置１２と通信可能に接続されている。

【0061】

第２の実施形態では、左耳用のイヤフォン１４Ｌ及び右耳用のイヤフォン１４Ｒからそれぞれ異なる２つの音声が再生される。そのため、左右の音声が混じってしまうことを避けることが重要となる。したがって、イヤフォン１４Ｌ及びイヤフォン１４Ｒは、骨伝導型やオープンイヤー型ではなく、インナーイヤー型のイヤフォンであることが好ましく、密着性の高いカナル型のイヤフォンであることが特に好ましい。

【0062】

左耳用のイヤフォン１４Ｌ及び右耳用のイヤフォン１４Ｒの各々は、第１の実施形態に係るイヤフォン１４と同一の構成を備えていてよい。すなわち、左耳用のイヤフォン１４Ｌは、コンピュータ３６Ｌ、マイクロフォン３８Ｌ、スピーカ４０Ｌ、カメラ４２Ｌ、及び通信Ｉ／Ｆ４４Ｌを備えてよい。また、コンピュータ３６Ｌは、プロセッサ４６Ｌ、ＲＡＭ４８Ｌ、及びストレージ５０Ｌを備えてよい。これに加えて、左耳用のイヤフォン１４Ｌは、センサ４５Ｌを備えてよい。これらの構成は、バス５２Ｌに接続され、互いに通信可能であってよい。

【0063】

同様に、右耳用のイヤフォン１４Ｒは、コンピュータ３６Ｒ、マイクロフォン３８Ｒ、スピーカ４０Ｒ、カメラ４２Ｒ、及び通信Ｉ／Ｆ４４Ｒを備えてよい。また、コンピュータ３６Ｒは、プロセッサ４６Ｒ、ＲＡＭ４８Ｒ、及びストレージ５０Ｒを備えてよい。これに加えて、右耳用のイヤフォン１４Ｒは、センサ４５Ｒを備えてよい。これらの構成は、バス５２Ｒに接続され、互いに通信可能であってよい。

【0064】

センサ４５Ｌ及びセンサ４５Ｒ（「センサ４５」と総称する。）は、イヤフォン１４Ｌ及びイヤフォン１４Ｒを装着したユーザの生体データを計測する。生体データとしては、例えば、体温及び脳波等が挙げられてよい。

【0065】

このようなデータ処理システム１０において、データ処理装置１２は、イヤフォン１４Ｌ及びイヤフォン１４Ｒとの間で、それぞれ異なるデータストリームを送受信可能に構成されてよい。この際、データ処理装置１２は、イヤフォン１４Ｌ及びイヤフォン１４Ｒとの間で左右独立伝送方式を採用しつつ、左右のデータストリームにおいて異なる音声データを送信してよい。

【0066】

これにより、イヤフォン１４Ｌ及びイヤフォン１４Ｒは、異なる音声を再生可能である。なお、ここでいう、異なる音声を再生するとは、再生元となるコンテンツ自体が異なる別々の音声を再生することを意味しており、ステレオ再生のように同一のコンテンツを異なる定位で再生することとは全く異なる意味として解釈されてよい。

【0067】

図７には、第２の実施形態に係るデータ処理装置１２による特定処理の動作フローの一例が示されている。本フローは、ユーザがデュアル音声再生を開始する旨のボタンを押下する、又はその旨を発話することにより開始されてよい。

【0068】

ステップＳ４０１において、プロセッサ２８は、ユーザデータを収集する。例えば、プロセッサ２８は、マイクロフォン３８Ｌ、カメラ４２Ｌ、センサ４５Ｌ、マイクロフォン３８Ｒ、カメラ４２Ｒ、及びセンサ４５Ｒの少なくともいずれかから出力されるユーザデータを収集してよい。この際、プロセッサ２８は、ユーザデータとして少なくともユーザの生体データを収集してもよい。プロセッサ２８は、例えばこのようにして、ユーザの左右の耳にそれぞれ装着される２つのイヤフォンのうちの少なくとも一方に設けられたマイクロフォン、カメラ、及びセンサの少なくともいずれかから出力されるユーザデータを収集してよい。

【0069】

ステップＳ４０２Ｌにおいて、プロセッサ２８は、左耳用のプロンプトを生成する。また、ステップＳ４０２Ｒにおいて、プロセッサ２８は、右耳用のプロンプトを生成する。

【0070】

一例として、プロセッサ２８は、ステップＳ４０１において収集したマイクロフォン３８Ｌ及び３８Ｒの少なくともいずれかの出力から、２つのコンテンツの再生を指示する発話を検知する。例えば、ユーザが「音楽とスケジュールを同時再生して？」と発話したことを検知したとする。また、プロセッサ２８は、ステップＳ４０１において収集したカメラ４２Ｌ及び４２Ｒの少なくともいずれかの出力から、ユーザの行動を検知する。例えば、ユーザが海沿いを歩いていることを検知したとする。また、プロセッサ２８は、ステップＳ４０１において収集したセンサ４５Ｌ及び４５Ｒの少なくともいずれかの出力から、ユーザの状態を検知する。例えば、ユーザのストレスレベルが高いことを検知したとする。

【0071】

この場合、プロセッサ２８は、２つのコンテンツの再生を指示する発話から、「カレンダーアプリにアクセスし、本日のスケジュールを読み上げて下さい。」というプロンプトを左耳用のプロンプトとして生成してよい。また、プロセッサ２８は、２つのコンテンツの再生を指示する発話と、ユーザの行動と、ユーザの状態とから、「海をテーマとした癒しの音楽を再生して下さい。」というプロンプトを右耳用のプロンプトとして生成してよい。プロセッサ２８は、例えばこのようにして、ユーザデータに基づいて、２つのプロンプトをそれぞれ生成してよい。

【0072】

ステップＳ４０３Ｌにおいて、プロセッサ２８は、左耳用の音声データを取得する。また、ステップＳ４０３Ｒにおいて、プロセッサ２８は、右耳用の音声データを取得する。

【0073】

例えば、プロセッサ２８は、ステップＳ４０２Ｌにおいて生成した左耳用のプロンプトをデータ生成モデル５８へ入力してよい。これに応じて、プロセッサ２８は、「本日のスケジュールは、１０時から１１時に第１会議室でミーティング、１２時から１３時にムハンマドさんとランチ、１７時迄にヤンさんへ報告書を提出、の３点です。」という音声データを、左耳用の音声データとしてデータ生成モデル５８から取得してよい。

【0074】

また、プロセッサ２８は、ステップＳ４０２Ｒにおいて生成した右耳用のプロンプトをデータ生成モデル５８へ入力してよい。これに応じて、プロセッサ２８は、海をテーマとした癒しの音楽の楽曲データを、右耳用の音声データとしてデータ生成モデル５８から取得してよい。これにより、プロセッサ２８は、２つのプロンプトを用いて２つの音声データをそれぞれ取得してよい。プロセッサ２８は、例えばこのようにして、ユーザデータに基づいて、コンテンツが互いに異なる２つの音声データを取得することができる。

【0075】

ステップＳ４０４Ｌにおいて、プロセッサ２８は、左耳用の音声データを左耳用のイヤフォン１４Ｌへ送信する。また、プロセッサ２８は、ステップＳ４０４Ｒにおいて、右耳用の音声データを右耳用のイヤフォン１４Ｒへ送信する。

【0076】

例えば、プロセッサ２８は、ステップＳ４０３Ｌにおいて取得した左耳用の音声データを、通信Ｉ／Ｆ２６及びネットワーク５４を介して通信Ｉ／Ｆ４４Ｌへ送信してよい。また、プロセッサ２８は、ステップＳ４０３Ｒにおいて取得した右耳用の音声データを、通信Ｉ／Ｆ２６及びネットワーク５４を介して通信Ｉ／Ｆ４４Ｒへ送信してよい。プロセッサ２８は、例えばこのようにして、２つの音声データのうちの一方を２つのイヤフォンのうちの一方へ送信するとともに、２つの音声データのうちの他方を２つのイヤフォンのうちの他方へ送信してよい。

【0077】

これにより、左耳用のイヤフォン１４Ｌにおいては、スピーカ４０Ｌから「本日のスケジュールは、１０時から１１時に第１会議室でミーティング、１２時から１３時にムハンマドさんとランチ、１７時迄にヤンさんへ報告書を提出、の３点です。」という音声が再生される。また、右耳用のイヤフォン１４Ｒにおいては、スピーカ４０Ｒから海をテーマとした癒しの音楽の楽曲データが再生される。

【0078】

ここで、右耳用のイヤフォン１４Ｒにおいて再生される音声データは、エンターテインメントに関するタスクである。一方、左耳用のイヤフォン１４Ｌにおいて再生される音声データは、ビジネスに関するタスクである。したがって、左耳用のイヤフォン１４Ｌにおいて再生される音声データは、右耳用のイヤフォン１４Ｒにおいて再生される音声データよりも重要なデータであるといえる。そこで、プロセッサ２８は、次に、左右の音量のバランスを調整する。

【0079】

ステップＳ４０５Ｌにおいて、プロセッサ２８は、左耳用の音量を調整するコマンドを発行する。また、ステップＳ４０５Ｒにおいて、プロセッサ２８は、右耳用の音量を調整するコマンドを発行する。

【0080】

例えば、プロセッサ２８は、左耳用のイヤフォン１４Ｌにおいて再生される音声データが右耳用のイヤフォン１４Ｒにおいて再生される音声データよりも音量が大きくなるように、左耳用の音量を上げるコマンドを発行する。また、プロセッサ２８は、右耳用のイヤフォン１４Ｒにおいて再生される音声データが左耳用のイヤフォン１４Ｌにおいて再生される音声データよりも音量が小さくなるように、右耳用の音量を下げるコマンドを発行する。これにより、左右の音量が最適化される。プロセッサ２８は、例えばこのようにして、２つの音声データに応じて、２つのイヤフォンのうちの少なくとも一方の音量を調整するコマンドを発行してよい。

【0081】

そして、プロセッサ２８は、本フローを終了する。なお、ステップＳ４０２Ｌ～４０５Ｌの処理と、ステップＳ４０２Ｒ～４０５Ｒの処理とは、互いに独立して実行される。したがって、左右のイヤフォンで別々のＡＩアシスタントを同時に起動させるデュアルＡＩアシスタントシステムが提供されてよい。

【0082】

なお、上述の説明では、音楽とスケジュールの読み上げを一例として示したが、本開示の技術は様々な組み合わせに適用することも可能である。このような組み合わせとしては、例えば、音楽とメールの読み上げ、ニュースの読み上げとスケジュールの読み上げ、及び音楽とナビゲーションの案内等が挙げられる。

【0083】

このように、第２の実施形態に係るデータ処理装置１２は、ユーザの左右の耳にそれぞれ装着される２つのイヤフォンのうちの少なくとも一方に設けられたマイクロフォン、カメラ、及びセンサの少なくともいずれかから出力されるユーザデータを収集し、ユーザデータに基づいて、コンテンツが互いに異なる２つの音声データを取得し、２つの音声データのうちの一方を２つのイヤフォンのうちの一方へ送信するとともに、２つの音声データのうちの他方を２つのイヤフォンのうちの他方へ送信する。これにより、第２の実施形態に係るデータ処理装置１２によれば、ユーザが一度に２つのタスクを実行し得る音声を左右のイヤフォンから提供することができるので、時間の有効活用に資することができる。

【0084】

この際、データ処理装置１２は、ユーザデータに基づいて、２つのプロンプトを生成し、２つのプロンプトを用いて２つの音声データをそれぞれ取得してよい。これにより、データ処理装置１２によれば、ＡＩアシスタントを並行して動作させることができる。

【0085】

また、データ処理装置１２は、２つの音声データに応じて、２つのイヤフォンのうちの少なくとも一方の音量を調整するコマンドを発行してよい。これにより、データ処理装置１２によれば、コンテンツの重要度に応じて左右の音量を最適化することができる。

【0086】

また、データ処理装置１２は、ユーザデータとして少なくともユーザの生体データを収集してよい。これにより、データ処理装置１２によれば、生体データを収集する手段を別途設けることなく、イヤフォンからの出力のみを用いて生体データをも考慮した音声データを取得して提供することができる。

【0087】

なお、第２の実施形態に係る技術は様々な形に変形又は応用することもできる。一般に、人間の脳は、左脳が言語をつかさどる脳であり、右脳がイメージをつかさどる脳であることが知られている。そして、人間の耳から脳への神経系の構造は、左耳から入った情報は右脳へ、右耳から入った情報は左脳へ伝わる、という交叉状態になっている。

【0088】

したがって、左耳用のプロンプト及び右耳用のプロンプトを生成するにあたっては、プロセッサ２８は、このような人体の特徴をも考慮してよい。すなわち、音楽を左耳から右脳へ伝えるべく、音楽を再生する旨のプロンプトを左耳用のプロンプトとして生成してもよい。また、文章を右耳から左脳へ伝えるべく、スケジュールやメールを読み上げる旨のプロンプトを右耳用のプロンプトとして生成してもよい。

【0089】

以上、本開示に係るシステムをデータ処理装置１２の機能を主として説明したが、本開示に係るシステムはサーバに実装されているとは限らない。本開示に係るシステムは、一般的な情報処理システムとして実装されていてもよい。本開示は、例えば、パーソナルコンピュータで動作するソフトウェアプログラム、スマートフォン等で動作するアプリケーションとして実装されてもよい。本開示に係る方法はSaaS(Software as a Service)形式でユーザに対して提供されてもよい。

【0090】

上記実施形態では、１台のコンピュータ２２によって特定処理が行われる形態例を挙げたが、本開示の技術はこれに限定されず、コンピュータ２２を含めた複数のコンピュータによる特定処理に対する分散処理が行われるようにしてもよい。

【0091】

上記実施形態では、ストレージ３２に特定処理プログラム５６が格納されている形態例を挙げて説明したが、本開示の技術はこれに限定されない。例えば、特定処理プログラム５６がＵＳＢ（Universal Serial Bus）メモリなどの可搬型のコンピュータ読み取り可能な非一時的格納媒体に格納されていてもよい。非一時的格納媒体に格納されている特定処理プログラム５６は、データ処理装置１２のコンピュータ２２にインストールされる。プロセッサ２８は、特定処理プログラム５６に従って特定処理を実行する。

【0092】

また、ネットワーク５４を介してデータ処理装置１２に接続されるサーバ等の格納装置に特定処理プログラム５６を格納させておき、データ処理装置１２の要求に応じて特定処理プログラム５６がダウンロードされ、コンピュータ２２にインストールされるようにしてもよい。

【0093】

なお、ネットワーク５４を介してデータ処理装置１２に接続されるサーバ等の格納装置に特定処理プログラム５６の全てを格納させておいたり、ストレージ３２に特定処理プログラム５６の全てを記憶させたりしておく必要はなく、特定処理プログラム５６の一部を格納させておいてもよい。

【0094】

特定処理を実行するハードウェア資源としては、次に示す各種のプロセッサを用いることができる。プロセッサとしては、例えば、ソフトウェア、すなわち、プログラムを実行することで、特定処理を実行するハードウェア資源として機能する汎用的なプロセッサであるＣＰＵが挙げられる。また、プロセッサとしては、例えば、ＦＰＧＡ（Field-Programmable Gate Array）、ＰＬＤ（Programmable Logic Device）、又はＡＳＩＣ（Application Specific Integrated Circuit）などの特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路が挙げられる。何れのプロセッサにもメモリが内蔵又は接続されており、何れのプロセッサもメモリを使用することで特定処理を実行する。

【0095】

特定処理を実行するハードウェア資源は、これらの各種のプロセッサのうちの１つで構成されてもよいし、同種又は異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡの組み合わせ、又はＣＰＵとＦＰＧＡとの組み合わせ）で構成されてもよい。また、特定処理を実行するハードウェア資源は１つのプロセッサであってもよい。

【0096】

１つのプロセッサで構成する例としては、第１に、１つ以上のＣＰＵとソフトウェアの組み合わせで１つのプロセッサを構成し、このプロセッサが、特定処理を実行するハードウェア資源として機能する形態がある。第２に、ＳｏＣ（System-on-a-chip）などに代表されるように、特定処理を実行する複数のハードウェア資源を含むシステム全体の機能を１つのＩＣチップで実現するプロセッサを使用する形態がある。このように、特定処理は、ハードウェア資源として、上記各種のプロセッサの１つ以上を用いて実現される。

【0097】

更に、これらの各種のプロセッサのハードウェア的な構造としては、より具体的には、半導体素子などの回路素子を組み合わせた電気回路を用いることができる。また、上記の特定処理はあくまでも一例である。従って、主旨を逸脱しない範囲内において不要なステップを削除したり、新たなステップを追加したり、処理順序を入れ替えたりしてもよいことは言うまでもない。

【0098】

以上に示した記載内容及び図示内容は、本開示の技術に係る部分についての詳細な説明であり、本開示の技術の一例に過ぎない。例えば、上記の構成、機能、作用、及び効果に関する説明は、本開示の技術に係る部分の構成、機能、作用、及び効果の一例に関する説明である。よって、本開示の技術の主旨を逸脱しない範囲内において、以上に示した記載内容及び図示内容に対して、不要な部分を削除したり、新たな要素を追加したり、置き換えたりしてもよいことは言うまでもない。また、錯綜を回避し、本開示の技術に係る部分の理解を容易にするために、以上に示した記載内容及び図示内容では、本開示の技術の実施を可能にする上で特に説明を要しない技術常識等に関する説明は省略されている。

【0099】

本明細書に記載された全ての文献、特許出願及び技術規格は、個々の文献、特許出願及び技術規格が参照により取り込まれることが具体的かつ個々に記された場合と同程度に、本明細書中に参照により取り込まれる。

【0100】

なお、以上の説明に関して更に以下の付記を開示する。

【0101】

（付記１）
マイク、スピーカ、及びカメラを含みユーザの耳に装着される２つのイヤフォンで収集された音及び画像を含むユーザデータを入力する入力部と、
前記ユーザデータに応じた所定の推論結果を生成するデータ生成モデルを用いた特定処理を行う処理部と、
前記特定処理の結果を前記スピーカから再生させる出力部と、
を備え、
前記入力部は、前記マイクで検出された音と前記カメラで撮影された画像とを、前記ユーザデータとして入力し、
前記処理部は、前記イヤフォンを装着した前記ユーザから前記ユーザの記憶または行動に関する発話を受け付けた場合、前記ユーザに紐付く前記音及び前記画像が記録された前記ユーザのライフログに基づき、前記発話の内容に対応する情報を前記ユーザに提案する処理を、前記特定処理として行う、データ処理装置。

【0102】

（付記２）
前記処理部は、前記発話の内容として、前記イヤフォンを装着した前記ユーザが特定の記憶を思い出すきっかけとなるメッセージを要求した場合、前記ライフログに基づき選択された１または複数のメッセージを、前記発話の内容に対応する情報として、前記ユーザに提案する、付記１に記載のデータ処理装置。

【0103】

（付記３）
前記処理部は、前記発話の内容として、前記イヤフォンを装着した前記ユーザが特定の事柄をつぶやいた場合、前記ライフログに基づき前記事柄に対して推奨される前記ユーザの行動を、前記発話の内容に対応する情報として、前記ユーザに提案する、付記１または２に記載のデータ処理装置。

【0104】

（付記４）
マイク、スピーカ、及びカメラを含みユーザの耳に装着される２つのイヤフォンで収集された音及び画像を含むユーザデータを入力し、前記ユーザデータに応じた所定の推論結果を生成するデータ生成モデルを用いた特定処理を、コンピュータが実行するデータ処理方法であって、
前記マイクで検出された音と前記カメラで撮影された画像とを、前記ユーザデータとして入力し、
前記イヤフォンを装着した前記ユーザから前記ユーザの記憶または行動に関する発話を受け付けた場合、前記ユーザに紐付く前記音及び前記画像が記録された前記ユーザのライフログに基づき、前記発話の内容に対応する情報を前記ユーザに提案する処理を、前記特定処理として実行し、
前記特定処理の結果を前記スピーカから再生させる処理を、
前記コンピュータが実行するデータ処理方法。

【0105】

（付記５）
マイク、スピーカ、及びカメラを含みユーザの耳に装着される２つのイヤフォンで収集された音及び画像を含むユーザデータを入力し、前記ユーザデータに応じた所定の推論結果を生成するデータ生成モデルを用いた特定処理を、コンピュータに実行させるデータ処理プログラムであって、
前記マイクで検出された音と前記カメラで撮影された画像とを、前記ユーザデータとして入力し、
前記イヤフォンを装着した前記ユーザから前記ユーザの記憶または行動に関する発話を受け付けた場合、前記ユーザに紐付く前記音及び前記画像が記録された前記ユーザのライフログに基づき、前記発話の内容に対応する情報を前記ユーザに提案する処理を、前記特定処理として実行し、
前記特定処理の結果を前記スピーカから再生させる処理を、
前記コンピュータに実行させるデータ処理プログラム。

【符号の説明】

【0106】

１０ データ処理システム
１２ データ処理装置
１４ イヤフォン
２９０ 特定処理部
２９１ 入力部
２９２ 処理部
２９３ 出力部

【図1】

【図2】

【図3A】

【図3B】

【図3C】

【図3D】

【図3E】

【図3F】

【図4】

【図5】

【図6】

【図7】