特開 2021-43629 端末制御プログラム、端末装置、端末制御方法および情報通信方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】特開2021-43629(P2021-43629A)

(43)【公開日】2021年3月18日

(54)【発明の名称】端末制御プログラム、端末装置、端末制御方法および情報通信方法

(51)【国際特許分類】

   G06F 3/048 20130101AFI20210219BHJP

   H04M 1/00 20060101ALI20210219BHJP

【ＦＩ】

   G06F3/048

   H04M1/00 U

【審査請求】未請求

【請求項の数】13

【出願形態】ＯＬ

【全頁数】14

(21)【出願番号】特願2019-164421(P2019-164421)

(22)【出願日】2019年9月10日

(71)【出願人】

【識別番号】504315532

【氏名又は名称】株式会社ロゼッタ

(71)【出願人】

【識別番号】000235543

【氏名又は名称】飛島建設株式会社

(74)【代理人】

【識別番号】100131451

【弁理士】

【氏名又は名称】津田 理

(74)【代理人】

【識別番号】100167933

【弁理士】

【氏名又は名称】松野 知紘

(72)【発明者】

【氏名】中村 俊介

(72)【発明者】

【氏名】岸上 功一

(72)【発明者】

【氏名】井上 隆

(72)【発明者】

【氏名】吉野 敦子

【テーマコード（参考）】

5E555

5K127

【Ｆターム（参考）】

5E555AA13

5E555AA18

5E555BA01

5E555BA04

5E555BB01

5E555BB04

5E555BC01

5E555BC04

5E555BE17

5E555CA12

5E555CA42

5E555CB12

5E555CB44

5E555CB48

5E555CC01

5E555DA02

5E555DA08

5E555DB41

5E555DB56

5E555DC01

5E555DD11

5E555EA22

5E555EA24

5E555FA00

5K127BA03

5K127BB23

5K127BB33

5K127DA12

5K127DA15

5K127GA14

(57)【要約】

【課題】より使いやすい端末装置間の通信を実現する端末制御プログラム、端末装置、端末制御方法および情報通信方法を提供する。
【解決手段】ユーザが用いる第１端末装置を、前記ユーザが用いる第２端末装置と無線通信を確立する無線通信制御手段と、前記第１端末装置に対する前記ユーザの操作に応答して、第１処理を前記第２端末装置で行わせるための第１制御データを前記第２端末装置に無線送信する送信手段と、前記第２端末装置に対する前記ユーザの操作に応答して前記第２端末装置から送信される第２制御データを無線受信する受信手段と、前記第２制御データに応じた第２処理を行う処理手段と、として機能させる端末制御プログラムが提供される。
【選択図】図２

【特許請求の範囲】

【請求項1】

ユーザが用いる第１端末装置を、
前記ユーザが用いる第２端末装置と無線通信を可能とするために、前記第２端末装置とペアリングするペアリング手段と、
前記第１端末装置に対する前記ユーザの操作に応答して、第１処理を前記第２端末装置で行わせるための第１制御データを前記第２端末装置に無線送信する送信手段と、
前記第２端末装置に対する前記ユーザの操作に応答して前記第２端末装置から送信される第２制御データを無線受信する受信手段と、
前記第２制御データに応じた第２処理を行う処理手段と、として機能させる端末制御プログラム。

【請求項2】

前記第１制御データは、前記第１端末装置の入力インターフェースに対する前記ユーザの第１操作を示し、
前記第２制御データは、前記第２端末装置の入力インターフェースに対する前記ユーザの第２操作を示す、請求項１に記載の端末制御プログラム。

【請求項3】

前記第１操作は、第３処理を前記処理手段に行わせるための操作であり、
前記第１処理は、前記第３処理に対応し、
前記第２操作は、第４処理を前記第２端末装置に行わせるための操作であり、
前記第２処理は、前記第４処理に対応する、請求項２に記載の端末制御プログラム。

【請求項4】

前記第１処理は、前記第１端末装置によって取得された第１文字列を前記第２端末装置のディスプレイに表示させることであり、
前記第１制御データは、前記第１文字列の情報を含み、
前記第２処理は、前記第２端末装置によって取得された第２文字列を前記第１端末装置のディスプレイに表示させることであり、
前記第２制御データは、前記第２文字列の情報を含む、請求項１乃至３のいずれかに記載の端末制御プログラム。

【請求項5】

前記第１処理は、前記第１端末装置によって取得された第１画像を前記第２端末装置のディスプレイに表示させることであり、
前記第１制御データは、データ量を減らした前記第１画像の情報を含み、
前記第２処理は、前記第２端末装置によって取得された第２画像を前記第１端末装置のディスプレイに表示させることであり、
前記第２制御データは、データ量を減らした前記第２画像の情報を含む、請求項１乃至４のいずれかに記載の端末制御プログラム。

【請求項6】

前記第１制御データは、前記第１端末装置のディスプレイで行われる第１表示に関する情報を含み、
前記第１処理は、前記第２端末装置のディスプレイに前記第１表示に対応する第２表示を行わせることであり、
前記第２制御データは、前記第２端末装置のディスプレイで行われる第３表示に関する情報を含み、
前記第２処理は、前記第１端末装置のディスプレイに前記第３表示に対応する第４表示を行うことである、請求項１乃至５のいずれかに記載の端末制御プログラム。

【請求項7】

前記ペアリング手段は、ペアリングを行うために必要なデータを含む第１識別コードを前記第１端末装置のディスプレイに表示させる、請求項１乃至６のいずれかに記載の端末制御プログラム。

【請求項8】

前記ペアリング手段は、前記第２端末装置のディスプレイに表示された、ペアリングを行うために必要なデータを含む第２識別コードを読み取ることによって、前記第２端末装置とペアリングする、請求項１乃至７のいずれかに記載の端末制御プログラム。

【請求項9】

前記第１端末装置は、スマートフォンまたはタブレット端末であり、
前記第２端末装置は、ウェアラブルデバイスである、請求項１乃至８のいずれかに記載の端末制御プログラム。

【請求項10】

前記第２端末装置に比べて、操作性が高い入力インターフェースを前記第１端末装置が備える、請求項１乃至９のいずれかに記載の端末制御プログラム。

【請求項11】

ユーザが用いる端末装置であって、
前記ユーザが用いる他の端末装置と無線通信を可能とするために、前記他の端末装置とペアリングするペアリング手段と、
前記端末装置に対する前記ユーザの操作に応答して、第１処理を前記他の端末装置で行わせるための第１制御データを前記他の端末装置に無線送信する送信手段と、
前記他の端末装置に対する前記ユーザの操作に応答して前記他の端末装置から送信される第２制御データを無線受信する受信手段と、
前記第２制御データに応じた第２処理を行う処理手段と、とを備える端末装置。

【請求項12】

ユーザが用いる第１端末装置が、
前記ユーザが用いる第２端末装置と無線通信を可能とするために、前記第２端末装置とペアリングし、
前記第１端末装置に対する前記ユーザの操作に応答して、第１処理を前記第２端末装置で行わせるための第１制御データを前記第２端末装置に無線送信し、
前記第２端末装置に対する前記ユーザの操作に応答して前記第２端末装置から送信される第２制御データを無線受信し、
前記第２制御データに応じた第２処理を行う、端末制御方法。

【請求項13】

ユーザが用いる第１端末装置と、前記ユーザが用いる第２端末装置と、を用いた情報通信方法であって、
前記第１端末装置と前記第２端末装置とが無線通信可能とするために、前記第１端末装置と前記第２端末装置とをペアリングし、
前記第１端末装置に対する前記ユーザの操作に応答して、前記第１端末装置が、第１処理を前記第２端末装置で行わせるための第１制御データを前記第２端末装置に無線送信し、
前記第２端末装置が、前記第１制御データを前記第１端末装置から無線受信し、
前記第２端末装置が、前記第１制御データに応じた前記第１処理を行い、
前記第２端末装置に対する前記ユーザの操作に応答して、前記第２端末装置が、第２処理を前記第１端末装置で行わせるための第２制御データを前記第１端末装置に無線送信し、
前記第１端末装置が、前記第２制御データを前記第２端末装置から無線受信し、
前記第１端末装置が、前記第２制御データに応じた第２処理を行う、情報通信方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、端末装置間で通信を行うための端末制御プログラム、端末装置、端末制御方法および情報通信方法に関する。

【背景技術】

【0002】

特許文献１には、スマートフォンによる処理結果をＨＭＤ（Head Mount Display）に表示するシステムが開示されている。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０１９−３６９１４号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかし、特許文献１では、スマートフォンとＨＭＤとの間にケーブル接続の変換装置が必要であり、煩わしい。また、スマートフォンの処理結果をＨＭＤに表示することしかできない。

【0005】

本発明はこのような問題点に鑑みてなされたものであり、本発明の課題は、より使いやすい端末装置間の通信を実現する端末制御プログラム、端末装置、端末制御方法および情報通信方法を提供することである。

【課題を解決するための手段】

【0006】

本発明の一態様によれば、ユーザが用いる第１端末装置を、前記ユーザが用いる第２端末装置と無線通信を可能とするために、前記第２端末装置とペアリングするペアリング手段と、前記第１端末装置に対する前記ユーザの操作に応答して、第１処理を前記第２端末装置で行わせるための第１制御データを前記第２端末装置に無線送信する送信手段と、前記第２端末装置に対する前記ユーザの操作に応答して前記第２端末装置から送信される第２制御データを無線受信する受信手段と、前記第２制御データに応じた第２処理を行う処理手段と、として機能させる端末制御プログラムが提供される。

【0007】

前記第１制御データは、前記第１端末装置の入力インターフェースに対する前記ユーザの第１操作を示し、前記第２制御データは、前記第２端末装置の入力インターフェースに対する前記ユーザの第２操作を示してもよい。

【0008】

前記第１操作は、第３処理を前記処理手段に行わせるための操作であり、前記第１処理は、前記第３処理に対応し、前記第２操作は、第４処理を前記第２端末装置に行わせるための操作であり、前記第２処理は、前記第４処理に対応してもよい。

【0009】

前記第１処理は、前記第１端末装置によって取得された第１文字列を前記第２端末装置のディスプレイに表示させることであり、前記第１制御データは、前記第１文字列の情報を含み、前記第２処理は、前記第２端末装置によって取得された第２文字列を前記第１端末装置のディスプレイに表示させることであり、前記第２制御データは、前記第２文字列の情報を含んでもよい。

【0010】

前記第１処理は、前記第１端末装置によって取得された第１画像を前記第２端末装置のディスプレイに表示させることであり、前記第１制御データは、データ量を減らした前記第１画像の情報を含み、前記第２処理は、前記第２端末装置によって取得された第２画像を前記第１端末装置のディスプレイに表示させることであり、前記第２制御データは、データ量を減らした前記第２画像の情報を含んでもよい。

【0011】

前記第１制御データは、前記第１端末装置のディスプレイで行われる第１表示に関する情報を含み、前記第１処理は、前記第２端末装置のディスプレイに前記第１表示に対応する第２表示を行わせることであり、前記第２制御データは、前記第２端末装置のディスプレイで行われる第３表示に関する情報を含み、前記第２処理は、前記第１端末装置のディスプレイに前記第３表示に対応する第４表示を行うことであってもよい。

【0012】

前記ペアリング手段は、ペアリングを行うために必要なデータを含む第１識別コードを前記第１端末装置のディスプレイに表示させてもよい。

【0013】

前記ペアリング手段は、前記第２端末装置のディスプレイに表示された、ペアリングを行うために必要なデータを含む第２識別コードを読み取ることによって、前記第２端末装置とペアリングしてもよい。

【0014】

前記第１端末装置は、スマートフォンまたはタブレット端末であり、前記第２端末装置は、ウェアラブルデバイスであってもよい。

【0015】

前記第２端末装置に比べて、操作性が高い入力インターフェースを前記第１端末装置が備えてもよい。

【0016】

本発明の別の態様によれば、ユーザが用いる端末装置であって、前記ユーザが用いる他の端末装置と無線通信を可能とするために、前記他の端末装置とペアリングするペアリング手段と、前記端末装置に対する前記ユーザの操作に応答して、第１処理を前記他の端末装置で行わせるための第１制御データを前記他の端末装置に無線送信する送信手段と、前記他の端末装置に対する前記ユーザの操作に応答して前記他の端末装置から送信される第２制御データを無線受信する受信手段と、前記第２制御データに応じた第２処理を行う処理手段と、とを備える端末装置が提供される。

【0017】

本発明の別の態様によれば、ユーザが用いる第１端末装置が、前記ユーザが用いる第２端末装置と無線通信を可能とするために、前記第２端末装置とペアリングし、前記第１端末装置に対する前記ユーザの操作に応答して、第１処理を前記第２端末装置で行わせるための第１制御データを前記第２端末装置に無線送信し、前記第２端末装置に対する前記ユーザの操作に応答して前記第２端末装置から送信される第２制御データを無線受信し、前記第２制御データに応じた第２処理を行う、端末制御方法が提供される。

【0018】

本発明の別の態様によれば、ユーザが用いる第１端末装置と、前記ユーザが用いる第２端末装置と、を用いた情報通信方法であって、前記第１端末装置と前記第２端末装置とが無線通信可能とするために、前記第１端末装置と前記第２端末装置とをペアリングし、前記第１端末装置に対する前記ユーザの操作に応答して、前記第１端末装置が、第１処理を前記第２端末装置で行わせるための第１制御データを前記第２端末装置に無線送信し、前記第２端末装置が、前記第１制御データを前記第１端末装置から無線受信し、前記第２端末装置が、前記第１制御データに応じた前記第１処理を行い、前記第２端末装置に対する前記ユーザの操作に応答して、前記第２端末装置が、第２処理を前記第１端末装置で行わせるための第２制御データを前記第１端末装置に無線送信し、前記第１端末装置が、前記第２制御データを前記第２端末装置から無線受信し、前記第１端末装置が、前記第２制御データに応じた第２処理を行う、情報通信方法が提供される。

【発明の効果】

【0019】

使いやすい端末装置間の通信が実現される。

【図面の簡単な説明】

【0020】

【図1A】一実施形態に係る情報通信システムの概略構成を示す図。

【図1B】一実施形態に係る情報通信システムの概略構成を示す図。

【図2】情報通信システムの処理動作の一例を示すシーケンス図。

【発明を実施するための形態】

【0021】

以下、本発明に係る実施形態について、図面を参照しながら具体的に説明する。

【0022】

（第１の実施形態）
図１Ａおよび図１Ｂは、一実施形態に係る情報通信システムの概略構成を示す図である。図示のように、情報通信システムは、モバイル端末１と、ウェアラブルデバイス２とを備えている。モバイル端末１は、スマートフォンやタブレット端末といった端末装置であり、特定のユーザが用いるものである。ウェアラブルデバイス２も同じユーザが用いることを想定した端末装置である。本実施形態では、建設現場での使用を例示すべく、ウェアラブルデバイス２はヘルメット型となっている。

【0023】

モバイル端末１は、入力インターフェース１１と、出力インターフェース１２と、通信部１３と、制御部１４とを有する。

【0024】

入力インターフェース１１は、タッチパッド１１ａ、ボタン１１ｂ、カメラ１１ｃおよびマイク１１ｄなどを含む。出力インターフェース１２は、ディスプレイ１２ａ、スピーカ１２ｂなどを含む。タッチパッド１１ａとディスプレイ１２ａとが重ねられてタッチパネルを構成する。

【0025】

通信部１３はアンテナや通信用ＩＣなどから構成され、ウェアラブルデバイス２との無線通信を行う。通信手段に特に制限はないが、例えばＢｌｕｔｏｏｔｈ（登録商標）のような短距離無線通信でもよいし、ＷｉＦｉ（登録商標）などでもよい。

【0026】

制御部１４は、ペアリング部１４１と、送信部１４２と、受信部１４３と、処理部１４４とを有する。これらの一部または全部は、モバイル端末１のプロセッサが所定のプログラムを実行することで実現されてもよいし、ハードウェアで構成されてもよい。

【0027】

ペアリング部１４１はウェアラブルデバイス２とのペアリングを行う。送信部１４２は、ウェアラブルデバイス２に所定の処理を行わせるための制御データをウェアラブルデバイス２に送信する。受信部１４３は制御データをウェアラブルデバイス２から受信する。処理部１４４は、入力インターフェース１１に対する操作に応じた処理や、ウェアラブルデバイス２から受信した制御データに応じた処理を行う。制御データや処理の具体例については後述する。

【0028】

一方、ウェアラブルデバイス２は、入力インターフェース２１と、出力インターフェース２２と、通信部２３と、制御部２４とを有する。

【0029】

入力インターフェース２１は、ボタン２１ａ、カメラ２１ｂおよびマイク２１ｃなどを含む。出力インターフェース２２は、ディスプレイ２２ａ、スピーカ２２ｂなどを含む。

【0030】

本実施形態では、建設現場において、技術者がモバイル端末１とウェアラブルデバイス２の両方を用いることを主に想定している。そのため、ウェアラブルデバイス２は、ヘルメットに入力インターフェース２１や出力インターフェース２２を設けた形態となっている（図１Ａ参照）。具体的には、ヘルメット着用時に技術者の視界に入る位置にディスプレイ２２ａが設けられ、その近傍にマイク２１ｃも設けられる。また、ヘルメット着用時に耳の近傍の位置にボタン２１ａおよびスピーカ２２ｂが設けられる。また、ヘルメット着用時に技術者の前方を撮影できる位置にカメラ２１ｂが設けられる。

【0031】

通信部２３はアンテナや通信用ＩＣなどから構成され、モバイル端末１との無線通信を行う。

【0032】

制御部２４は、ペアリング部２４１と、送信部２４２と、受信部２４３と、処理部２４４とを有する。これらの一部または全部は、ウェアラブルデバイス２のプロセッサが所定のプログラムを実行することで実現されてもよいし、ハードウェアで構成されてもよい。

【0033】

ペアリング部２４１はモバイル端末１とのペアリングを行う。送信部２４２は、モバイル端末１に所定の処理を行わせるための制御データをモバイル端末１に送信する。受信部２４３は制御データをモバイル端末１から受信する。処理部２４４は、入力インターフェース２１に対する操作に応じた処理や、モバイル端末１から受信した制御データに応じた処理を行う。制御データや処理の具体例については後述する。

【0034】

モバイル端末１とウェアラブルデバイス２とを比較すると、それぞれ長所・短所がある。技術者が作業と並行して処理を行うのはウェアラブルデバイス２の方が優れている。ウェアラブルデバイス２を用いると、現場で前方とディスプレイ２２ａを同時に見ながら、マイク２１ｃを用いて処理を行うことができるためである。一方、ファイル操作や文字列入力といった処理はモバイル端末１の方が優れている。タッチパネルに代表されるように、より操作性が高い入力インターフェース１１および高性能な出力インターフェース１２を有するためである。モバイル端末１と同等の入力インターフェースおよび出力インターフェースをウェアラブルデバイス２に設けるのは非現実的である。

【0035】

そこで、本実施形態では、モバイル端末１およびウェアラブルデバイス２の双方の長所を活かすべく、それぞれが得意な操作を自身が行い、そうでない操作を他方と連携することで補うこととする。具体的には、上述した制御部１４，２４を設け、双方向に制御を行うことで、モバイル端末１およびウェアラブルデバイス２が互いに連携できる。以下、詳細に説明する。

【0036】

図２は、情報通信システムの処理動作の一例を示すシーケンス図である。

【0037】

まず、ユーザは、モバイル端末１の入力インターフェース１１に対して、ウェアラブルデバイス２とペアリングするための所定の操作を行う。この操作に応じて、モバイル端末１のペアリング部１４１はＱＲコード（登録商標）のような識別コードをディスプレイ１２ａに表示させる（ステップＳ１）。この識別コードは、モバイル端末１を特定する固有識別データなど、ペアリングに必要な情報を含んでいる。例えば、短距離無線通信の場合、識別コードはモバイル端末１の端末名およびＩＤを含んでいる。また、ＷｉＦｉ接続の場合、識別コードはモバイル端末１のＩＰアドレス、ＭＡＣアドレス、ＷｉＦｉのＳＳＩＤおよびパスワードを含んでいる。

【0038】

続いて、同ユーザはウェアラブルデバイス２の入力インターフェース２１に対して、モバイル端末１とのペアリングするための所定の操作を行う。この操作に応じて、ウェアラブルデバイス２のペアリング部２４１は、カメラ２１ｂを制御し、モバイル端末１のディスプレイ１２ａに表示された識別コードを撮影し、認識する（ステップＳ１１）。そして、ペアリング部２４１は識別コードに含まれるモバイル端末１の固有識別データをウェアラブルデバイス２のメモリ（不図示）に保存する。これにより、ウェアラブルデバイス２がモバイル端末１とペアリングされる（ステップＳ１２）。

【0039】

そして、ウェアラブルデバイス２のペアリング部２４１は自身の固有識別データをモバイル端末１に無線送信する（ステップＳ１３）。そして、モバイル端末１の受信部１４３は固有識別データを受信し、ペアリング部１４１はウェアラブルデバイス２の固有識別データをモバイル端末１のメモリ（不図示）に保存する。これにより、モバイル端末１がウェアラブルデバイス２とペアリングされる（ステップＳ２）。

【0040】

以上により、モバイル端末１とウェアラブルデバイス２との間で互いにペアリングが完了して無線通信が確立され（ステップＳ３）、互いに無線で通信できるようになる。このような手法でペアリングを行うことで、モバイル端末１の周囲に多数のウェアラブルデバイス２がある場合であっても、自身が用いるウェアラブルデバイス２と確実かつ簡易にペアリングできる。

【0041】

なお、ペアリングは、通信相手（ウェアラブルデバイス２から見たモバイル端末１、あるいは、モバイル端末１から見たウェアラブルデバイス２）を特定する固有識別データを自身のメモリに保存する処理をいう。ペアリングは、上述したような固有識別データを含んだ識別コードを利用する手法や、通信相手に自身の固有識別データを無線送信する手法以外にも種々考え得る。

【0042】

例えば、ユーザがモバイル端末１やウェアラブルデバイス２に通信相手の固有識別データを入力してもよい。あるいは、モバイル端末１（ウェアラブルデバイス２）の無線通信制御部１４１（２４１）が、周囲に存在するすべてのデバイスに無線信号をブロードキャスト送信し、デバイスから返ってきたデータからユーザが選択を行って、固有識別データを取得してもよい。また、過去の通信履歴情報（例えば、前回の接続先相手）から固有識別データを取得してもよい。

【0043】

その後、必要な時点で、モバイル端末１の送信部１４２はウェアラブルデバイス２に所定の処理を行わせるための制御データをウェアラブルデバイス２に送信し（ステップＳ４）、ウェアラブルデバイス２の受信部２４３によって受信される。この制御データはウェアラブルデバイス２の固有識別データを送信先情報として含んでおり、これにより特定のウェアラブルデバイス２に対して制御データを送信できる。また、制御データはモバイル端末１の固有識別データを送信元情報として含んでおり、これにより制御データを受信したウェアラブルデバイス２は特定のモバイル端末１からの制御データであることを認識できる。

【0044】

モバイル端末１からの制御データを受信したウェアラブルデバイス２の処理部２４４は、制御データに応じた処理を行う（ステップＳ１４）。

【0045】

また、必要な時点で、ウェアラブルデバイス２の送信部２４２はモバイル端末１に所定の処理を行わせるための制御データをモバイル端末１に送信し（ステップＳ１５）、モバイル端末１の受信部１４３によって受信される。この制御データはモバイル端末１の固有識別データを送信先情報として含んでおり、これにより特定のモバイル端末１に対して制御データを送信できる。また、制御データはウェアラブルデバイス２の固有識別データを送信元情報として含んでおり、これにより制御データを受信したモバイル端末１は特定のウェアラブルデバイス２からの制御データであることを認識できる。

【0046】

ウェアラブルデバイス２からの制御データを受信したモバイル端末１の処理部１４４は、制御データに応じた処理を行う（ステップＳ５）。

【0047】

以上のステップＳ４，Ｓ５，Ｓ１４，Ｓ１５が必要なだけ行われる。なお、ステップＳ４，Ｓ１５における制御データ送信のトリガは任意である。例えば、トリガは、ユーザによってモバイル端末１の入力インターフェース１１あるいはウェアラブルデバイス２の入力インターフェース２１に対して所定の操作が行われたことであってよい。所定の操作は、カメラ２１ｂによる撮影開始指示、編集操作や保存操作などであってよい。あるいは、所定の操作は制御データの送信を指示する操作であってよい。

【0048】

続いて、モバイル端末１およびウェアラブルデバイス２による処理および制御データの例を述べる。

【0049】

第１の例として、図２のステップＳ４において、モバイル端末１からウェアラブルデバイス２に送信される制御データは、入力インターフェース１１に対するユーザ操作の情報を含んでいてもよい。そして、ステップＳ１４では、ウェアラブルデバイス２の処理部２４４が制御データに含まれるユーザ操作に応じた処理を行う。入力インターフェース１１に対するユーザ操作がモバイル端末１の処理部１４４に特定の処理を行わせるための操作である場合、対応する処理がウェアラブルデバイス２の処理部２４４によって行われる。

【0050】

同様に、図２のステップＳ１５において、ウェアラブルデバイス２からモバイル端末１に送信される制御データは、入力インターフェース２１に対するユーザ操作の情報を含んでいてもよい。そして、ステップＳ５では、モバイル端末１の処理部１４４が制御データに含まれるユーザ操作に応じた処理を行う。入力インターフェース２１に対するユーザ操作がウェアラブルデバイス２の処理部２４４に特定の処理を行わせるための操作である場合、対応する処理がモバイル端末１の処理部１４４によって行われる。

【0051】

入力インターフェース１１に対するユーザ操作は、例えばボタン１１ｂのタップである。このボタン１１ｂがウェアラブルデバイス２のボタン２１ａと対応している場合、モバイル端末１においてボタン１１ｂをタップしたときに行われる処理と対応する処理が、ウェアラブルデバイス２においても行われる。また、入力インターフェース１１に対するユーザ操作は、マイク１１ｄに対する音声認識コマンドの発話であってもよい。この場合、このコマンドがウェアラブルデバイス２において行われる。

【0052】

このように、制御データがモバイル端末１に対するユーザ操作の情報を含む場合、あたかもウェアラブルデバイス２に対して操作が行われたかのように、処理部２４４が処理を行う。言い換えると、モバイル端末１を用いてウェアラブルデバイス２を制御できる。逆も同様である。

【0053】

第２の例として、図２のステップＳ４において、モバイル端末１からウェアラブルデバイス２に送信される制御データは文字列の情報を含んでいてもよい。この文字列は、例えばモバイル端末１のディスプレイ１２ａに表示されている文字列、タッチパッド１１ａを用いて入力中の文字列、ユーザによるマイク１１ｄに対する発話を文字列に変換したものなど、モバイル端末１によって取得されたものであってよい。そして、ステップＳ１４では、ウェアラブルデバイス２の処理部２４４が制御データに含まれる文字列をディスプレイ２２ａに表示させたり、スピーカ２２ｂから出力したりする。

【0054】

同様に、ステップＳ１５において、ウェアラブルデバイス２からモバイル端末１に送信される制御データは文字列の情報を含んでいてもよい。この文字列は、例えばウェアラブルデバイス２のディスプレイ２２ａに表示されている文字列や、ユーザによるマイク２１ｃに対する発話を音声認識によって文字列に変換したものなど、ウェアラブルデバイス２によって取得されたものであってよい。そして、ステップＳ５では、モバイル端末１の処理部１４４が制御データに含まれる文字列をディスプレイ１２ａに表示させたり、スピーカ１２ｂから出力したりする。

【0055】

文字列の具体例として、画像を保存する際の編集中のファイル名、レポート作成時の入力中のコメント、マイク１１ｄ，２１ｃに対する発話を音声認識した文字データ、入力中のテキストデータなどが挙げられる。この場合、文字列が新たに取得される度に、制御データとして送信されてもよい。

【0056】

より具体的な例として、ファイル名の編集など文字列の入力は、モバイル端末１のタッチパッド１１ａを用いる方がやりやすい。そこで、入力された文字列をモバイル端末１からウェアラブルデバイス２に送信することで、モバイル端末１で入力された文字列をウェアラブルデバイス２のディスプレイ２２ａに表示させることができる。

【0057】

また、建設現場において、技術者の発話を記録に残したいことがある。この場合、ウェアラブルデバイス２のマイク２１ｃに対する発話を音声認識した文字列をウェアラブルデバイス２からモバイル端末１に送信することで、技術者の発話を文字列としてモバイル端末１のディスプレイ１２ａに表示させることができる。必要に応じて、同技術者はモバイル端末１のタッチパッド１１ａを用いて文字列を修正等することができる。

【0058】

第３の例として、図２のステップＳ４において、モバイル端末１からウェアラブルデバイス２に送信される制御データは画像にデータを含んでいてもよい。この画像は、例えばモバイル端末１のディスプレイ１２ａに表示されている画像、カメラ１１ｃによって撮影された画像など、モバイル端末１によって取得されたものであってよい。そして、ステップＳ１４では、ウェアラブルデバイス２の処理部２４４が制御データに含まれる画像をディスプレイ２２ａに表示させる。

【0059】

同様に、図２のステップＳ１５において、ウェアラブルデバイス２からモバイル端末１に送信される制御データは画像データを含んでいてもよい。この画像は、例えばウェアラブルデバイス２のディスプレイ２２ａに表示されている画像、カメラ２１ｂによって撮影された画像など、ウェアラブルデバイス２によって取得されたものであってよい。そして、ステップＳ５では、モバイル端末１の処理部１４４が制御データに含まれる画像をディスプレイ１２ａに表示させる。

【0060】

ステップＳ４，Ｓ１５において、制御データに含まれる画像は、モバイル端末１あるいはウェアラブルデバイス２によって取得された画像そのものでもよいが、処理部１４４，２４４が画素数を減らしたり圧縮したりして、データ量を減らした画像（例えば、サムネイル）であるのが望ましい。モバイル端末１とウェアラブルデバイス２との間の通信速度が遅いときであっても、スムーズに制御データを送信できるためである。

【0061】

具体例として、建設現場において、技術者の視線で撮影された画像を保存したいことがある。この場合、技術者はマイク２１ｃに対する音声指示によって、簡易にカメラ２１ｂで撮影を行うことができる。そして、得られた画像そのものをウェアラブルデバイス２に保存しつつ、画素数を減らした画像をすぐさま（リアルタイムに）モバイル端末１に送信する。これにより、同技術者はモバイル端末１のディスプレイ１２ａに撮影された画像を表示させることができる。ウェアラブルデバイス２に保存された画素数が多い画像は高速での通信が可能な状態で（非リアルタイムに）モバイル端末１やその他必要な送信先に送信すればよい。

【0062】

また、別の具体例として、モバイル端末１のディスプレイ１２ａに表示されている画像に対して、タッチパッド１１ａを用いて付加的な描画を行った場合（目印を付ける等）、この付加的な描画の情報がウェアラブルデバイス２に送信される。そして、ウェアラブルデバイス２のディスプレイ２２ａには、すでに表示されている画像に対して、モバイル端末１に対して行われた描画が重畳表示される。

【0063】

第４の例として、図２のステップＳ４において、モバイル端末１からウェアラブルデバイス２に送信される制御データは、モバイル端末１のディスプレイ１２ａにおける表示に関するデータを含んでいてもよい。そして、ステップＳ１４では、ウェアラブルデバイス２の処理部２４４が表示に関するデータを実行し、ディスプレイ２２ａに当該表示に対応する表示を行う。

【0064】

同様に、図２のステップＳ１５において、ウェアラブルデバイス２からモバイル端末１に送信される制御データは、ウェアラブルデバイス２のディスプレイ２２ａにおける表示に関するデータを含んでいてもよい。そして、ステップＳ５では、モバイル端末１の処理部１４４が表示に関するデータを実行し、ディスプレイ１２ａに当該表示に対応する表示を行う。

【0065】

具体例として、表示に関するデータは、複数の画像を表示するプレビュー画面において表示中のファイル名であってよい。このようなファイル名を含む制御データを受信したウェアラブルデバイス２（モバイル端末１）は、ファイル名をディスプレイ２２ａ（１２ａ）に表示させる。表示ファイルが変わると、表示されるファイル名も更新される。

【0066】

あるいは、表示に関するデータは点滅するボタンを指定する情報であってもよい。このような情報を含む制御データを受信したウェアラブルデバイス２（モバイル端末１）は、ディスプレイ２２ａ（１２ａ）に表示されている対応するボタンを点滅表示させる。

【0067】

なお、モバイル端末１は、ウェアラブルデバイス２とペアリングしていないときの動作に特に制限はない。例えば、モバイル端末１が単独で動作してもよいし、単独では動作しなくてもよい。前者の場合、本機能を利用するためのユーザＩＤを複数のユーザで共有するような使い方ができる。後者の場合は、本機能を利用するためのユーザＩＤを単一のユーザのみが使えることとなる。

【0068】

このように、本実施形態では、モバイル端末１とウェアラブルデバイス２との間で無線通信を行い、かつ、双方向に制御データの送受信が可能である。よって、非常に使いやすい情報通信が実現される。

【0069】

なお、上述した実施形態では、モバイル端末１とウェアラブルデバイス２との通信を主に説明してきたが、これらはさらにクラウドサーバや遠隔のパソコンと通信可能であってもよい。一例として、遠隔のパソコンは建設現場から離れた場所に設置される。そして、建設現場と当該離れた場所において遠隔会議を行うことも可能となる。

【0070】

また、本実施形態の用途に制限はなく、ウェアラブルデバイス２は、上述したように建設現場用にヘルメット型でもよいし、観光客用に眼鏡型であってもよい。

【0071】

上述した実施形態は、本発明が属する技術分野における通常の知識を有する者が本発明を実施できることを目的として記載されたものである。上記実施形態の種々の変形例は、当業者であれば当然になしうることであり、本発明の技術的思想は他の実施形態にも適用しうることである。したがって、本発明は、記載された実施形態に限定されることはなく、特許請求の範囲によって定義される技術的思想に従った最も広い範囲とすべきである。

【符号の説明】

【0072】

１ モバイル端末
１１ 入力インターフェース
１１ａ タッチパッド
１１ｂ ボタン
１１ｃ カメラ
１１ｄ マイク
１２ 出力インターフェース
１２ａ ディスプレイ
１２ｂ スピーカ
１３ 通信部
１４ 制御部
１４１ ペアリング部
１４２ 送信部
１４３ 受信部
１４４ 処理部
２ ウェアラブルデバイス
２１ 入力インターフェース
２１ａ ボタン
２１ｂ カメラ
２１ｃ マイク
２２ 出力インターフェース
２２ａ ディスプレイ
２２ｂ スピーカ
２３ 通信部
２４ 制御部
２４１ ペアリング部
２４２ 送信部
２４３ 受信部
２４４ 処理部

【図1A】

【図1B】

【図2】