特表 2022-522658 計算能力の低いデバイスを動作させるためのシステム、方法、コンピュータプログラム、モバイルデバイス、及びキット

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2022-04-20

(54)【発明の名称】計算能力の低いデバイスを動作させるためのシステム、方法、コンピュータプログラム、モバイルデバイス、及びキット

(51)【国際特許分類】

   G06F 9/50 20060101AFI20220413BHJP

   G06F 3/048 20220101ALI20220413BHJP

   H04L 67/04 20220101ALI20220413BHJP

【ＦＩ】

G06F9/50 150A

G06F3/048

H04L67/04

【審査請求】未請求

【予備審査請求】未請求

(21)【出願番号】P 2021549447

(86)(22)【出願日】2020-03-10

(85)【翻訳文提出日】2021-08-20

(86)【国際出願番号】 EP2020056378

(87)【国際公開番号】W WO2020182825

(87)【国際公開日】2020-09-17

(31)【優先権主張番号】102019106281.0

(32)【優先日】2019-03-12

(33)【優先権主張国・地域又は機関】DE

(81)【指定国・地域】

【公序良俗違反の表示】

（特許庁注：以下のものは登録商標）

１．ＢＬＵＥＴＯＯＴＨ

(71)【出願人】

【識別番号】521371049

【氏名又は名称】トーズ テクノロジーズ ゲーエムベーハー

【氏名又は名称原語表記】ＴＯＯＺ ＴＥＣＨＮＯＬＯＧＩＥＳ ＧＭＢＨ

【住所又は居所原語表記】Ｔｕｒｎｓｔｒａｓｓｅ ２７， ７３４３０ Ａａｌｅｎ， Ｇｅｒｍａｎｙ

(74)【代理人】

【識別番号】110002871

【氏名又は名称】特許業務法人坂本国際特許商標事務所

(72)【発明者】

【氏名】ファラーバド ルーズべ

(72)【発明者】

【氏名】カルタル エルサン

【テーマコード（参考）】

5E555

【Ｆターム（参考）】

5E555AA11

5E555AA66

5E555BA04

5E555BB04

5E555BC04

5E555BD03

5E555DA09

5E555FA00

(57)【要約】

基本的に計算能力の低いデバイスを動作させる仮想オペレーティングシステムアプリケーション（２２）がモバイルデバイス（１６）上で実行されるシステム、方法、コンピュータプログラム、及びデバイスが提供される。仮想オペレーティングシステムにより、別のデバイスのためのアプリケーション（２６Ａ、２６Ｂ）の実行又は別のデバイスのためのプロキシとしての動作を、モバイルデバイス上で実行される他のアプリケーションにより制御することが可能となるかもしれない。
【選択図】図２

【特許請求の範囲】

【請求項1】

システムにおいて：
オペレーティングシステム（２１）と第一のインタフェース（１７）を含むモバイルデバイス（１６）と、
ディスプレイ（１１）と第二のインタフェース（１５）を含む別のデバイス（１０）と、を含み、前記モバイルデバイスは、前記モバイルデバイスの前記オペレーティングシステム（２１）の下で実行される仮想オペレーティングシステムアプリケーション（２２）をさらに含み、前記仮想オペレーティングシステムアプリケーション（２２）は、
－前記モバイルデバイス（１６）と前記別のデバイス（１０）との間の前記第一のインタフェース（１７）及び前記第二のインタフェース（１５）を介する接続を管理し、
－前記別のデバイス（１０）に、前記別のデバイスの前記ディスプレイ（１１）上で表示されることになるスクリーンフレームを提供し、
－前記別のデバイス（１０）からの入力を受信して処理し、
－前記モバイルデバイス上での前記別のデバイス（１０）のためのアプリケーション（２６Ａ、２６Ｂ）の実行を可能にする
ように構成されるシステム。

【請求項2】

前記別のデバイス（１０）は、前記モバイルデバイス（１６）より低い計算能力を有する、請求項１のシステム。

【請求項3】

前記別のデバイス（１０）は追加のアプリケーションのインストールと実行ができない、請求項１又は２のシステム。

【請求項4】

前記仮想オペレーティングシステムアプリケーション（２２）は、前記アプリケーション（２６Ａ、２６Ｂ）の前記モバイルデバイスのデバイス（１９）との通信を可能にする、請求項１～３の何れか１項のシステム。

【請求項5】

前記仮想オペレーティングシステムアプリケーション（２２）は、前記アプリケーション（２６Ａ、２６Ｂ）からスクリーンコンテンツを受信し、前記スクリーンコンテンツに基づいて前記スクリーンフレームを前記別の装置（１０）に提供するように構成される、請求項１～４の何れか１項のシステム。

【請求項6】

前記アプリケーション（２６Ａ、２６Ｂ）はナビゲーションアプリケーションを含む、請求項１～５の何れか１項のシステム。

【請求項7】

前記モバイルデバイス（１６）はスマートフォン又はタブレットコンピュータである、請求項１～６の何れか１項のシステム。

【請求項8】

前記別のデバイス（１０）はスマートグラス（３０）である、請求項１～７の何れか１項のシステム。

【請求項9】

前記仮想オペレーティングシステムアプリケーション（２２）は、コマンド及び／又はコンフィギュレーション情報を前記別のデバイス（１０）に送信するように構成される、請求項１～８の何れか１項のシステム。

【請求項10】

前記仮想オペレーティングシステムアプリケーション（２２）は、前記モバイルデバイス（１６）上の別のアプリケーション（２８）と通信するように構成される、請求項１～８の何れか１項のシステム。

【請求項11】

前記別のアプリケーション（２８）は、前記仮想オペレーティングシステムアプリケーションとは独立して前記モバイルデバイス（１６）の前記オペレーティングシステムの下で動作する、請求項１０のシステム。

【請求項12】

方法において、
モバイルデバイス上で、別のデバイスのための仮想オペレーティングシステムアプリケーション（２２）を実行するステップを含み、
前記仮想オペレーティングシステムアプリケーション（２２）は：
－前記モバイルデバイス（１６）と前記別のデバイス（１０）との間の前記モバイルデバイス（１６）の第一のインタフェース（１７）及び前記別のデバイス（１０）の第二のインタフェース（１５）を介した接続を管理し、
－前記別のデバイス（１０）に、前記別のデバイスの前記ディスプレイ（１１）上に表示されることになるスクリーンフレームを提供し、
－前記別のデバイス（１０）からの入力を受信して処理し、
－前記モバイルデバイス（１６）上で前記別のデバイス（１０）のためのアプリケーション（２６Ａ、２６Ｂ）の実行を可能にしている方法。

【請求項13】

前記仮想オペレーティングシステムアプリケーション（２２）は、前記アプリケーション（２６Ａ、２６Ｂ）の前記モバイルデバイスのデバイス（１９）との通信を可能にする、請求項１２の方法。

【請求項14】

前記仮想オペレーティングシステムアプリケーション（２２）は、前記アプリケーション（２６Ａ、２６Ｂ）からスクリーンコンテンツを受信し、前記スクリーンコンテンツに基づいてスクリーンフレームを前記別のデバイス（１０）に提供する、請求項１２又は１３の方法。

【請求項15】

前記アプリケーション（２６Ａ、２６Ｂ）はナビゲーションアプリケーションを含む、請求項１２～１４の何れか１項の方法。

【請求項16】

前記仮想オペレーティングシステムアプリケーション（２２）はコマンド及び／又はコンフィギュレーション情報を前記別のデバイス（１０）に送信する、請求項１２～１５の何れか１項の方法。

【請求項17】

前記仮想オペレーティングシステムアプリケーション（２２）は前記モバイルデバイス（１６）上の別のアプリケーション（２８）と通信する、請求項１２～１６の何れか１項の方法。

【請求項18】

プロセッサ上で実行されると、請求項１２～１７の何れか１項の方法が実行されるようにするプログラムコードを含むコンピュータプログラム。

【請求項19】

請求項１８のコンピュータプログラムを含む記憶媒体。

【請求項20】

請求項１８のコンピュータプログラムが記憶されたモバイルデバイス（１６）。

【請求項21】

キットにおいて：
請求項１８のコンピュータプログラム又は請求項１９の記憶媒体と、
前記コンピュータプログラムの前記仮想オペレーティングシステムアプリケーション（２２）を使って動作させられる別のデバイス（１０）と、
を含むキット。

【請求項22】

前記別のデバイス（１０）はスマートグラスである、請求項２１のキット。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は一般に、比較的低い計算能力を有するデバイスの動作に関する。

【背景技術】

【0002】

多くのデバイスが、コンテンツを表示するためのディスプレイ及び／又はユーザが入力を行えるようにする入力装置を備えている。このような入力装置は、いわゆるタッチスクリーンを使ってディスプレイと組み合わせられてよい。このようなデバイスの幾つかは、スペース又はコストの制約から、比較的低い計算能力しか利用できない。例えば、ディスプレイはいわゆるスマートグラスと呼ばれるグラスに組み込まれてよいが、このようなスマートグラスのスペースの制約により、また重量を考慮して、このようなスマートグラスに高い計算能力を持たせるのは難しい。しかしながら、例えばこのような計算能力の低いデバイスを介してユーザに様々な情報を提供することが望ましい。計算能力の低いこのようなデバイスを、本明細書では「シンデバイス」とも呼ぶ。

【0003】

比較的小型のデバイスをスマートフォンやタブレット等のモバイルデバイスに連結することによって機能を高める幾つかの方式がある。例えばスマートウォッチの場合、アプリケーションプログラム（本明細書ではアプリとも呼ぶ）がスマートウォッチにインストールされ、それに対応するアプリケーションプログラムがモバイルデバイスにインストールされ、これらのアプリが相互に通信して、スマートウォッチに、例えばモバイルデバイスの音楽や動画等のマルチメディアファイルへのアクセス、モバイルデバイスからの着信の転送、その他の機能が提供される。

【0004】

しかしながら、この解決策には、対応するアプリをスマートデバイスにインストールする必要があり、これは計算能力が非常に低いか、又はそれ以外にアプリのインストールができないデバイスでは不可能かもしれない。

【0005】

他の従来の方式は、リモートディスプレイ技術を使用することである。この場合、スマートフォンやタブレット等のモバイルデバイス上に表示されたコンテンツは基本的に、そのミラーが計算能力の低いデバイスに保存され、そこにも表示される。例えば、Ｂｌｕｅｔｏｏｔｈ又はその他の無線通信がこのスクリーンミラーリングに使用されてよい。しかしながら、この手法にも幾つかの欠点がある。例えば、計算能力の低いデバイスとモバイルデバイスは通常、スクリーンサイズが異なる。モバイルデバイス上に示されるコンテンツは通常、モバイルデバイスのスクリーン用に設計され、他のデバイス上で同じコンテンツを表示すると、不満足な結果につながるかもしれない。さらに、この方式では、モバイルデバイスを計算能力の低いデバイスと基本的に独立して動作させることは難しく、すなわち換言すれば、この解決策では、そのデバイス上で異なるアプリケーションを使用することが困難となるかもしれない。

【発明の概要】

【発明が解決しようとする課題】

【0006】

したがって、目的は、このようなシンデバイスを動作させるための改善された解決策を提供することである。

【課題を解決するための手段】

【0007】

これに関して、特許請求項１に定義されるシステム、特許請求項１２に定義される方法、特許請求項１８に定義されるコンピュータプログラム、特許請求項２０に定義されるモバイルデバイス、及び特許請求項２１に定義されるキットが提供される。従属請求項は別の実施形態を定義する。

【0008】

ある実施形態によれば、システムが提供され、これは：
オペレーティングシステムと第一のインタフェースを含むモバイルデバイスと、
ディスプレイと第二のインタフェースを含む別のデバイスと、を含み、
モバイルデバイスは、モバイルデバイスのオペレーティングシステムの下で実行される仮想オペレーティングシステムアプリケーションをさらに含み、仮想オペレーティングシステムアプリケーションは、
－モバイルデバイスと別のデバイスとの間の第一のインタフェース及び第二のインタフェースを介する接続を管理し、
－別のデバイスに、別のデバイスのディスプレイ上で表示されることになるスクリーンフレームを提供し、
－別のデバイスからの入力を受信して処理し、
－モバイルデバイス上での別のデバイスのためのアプリケーションの実行を可能にする
ように構成される。

【0009】

計算能力の低いデバイスのための仮想オペレーティングシステムをモバイルデバイス上で実行することにより、計算能力の低いデバイスに機能を提供しながら、依然として他のアプリケーションを用いてモバイルデバイスを動作させることができる。このようにして、計算能力の低いデバイスに合わせて作成されるアプリケーションが提供されるかもしれない。さらに、このようなアプリケーションは、計算能力の低いデバイスからの入力（例えばセンサ入力）とモバイルデバイス、例えばＧＰＳセンサ等のモバイルデバイスのセンサからの入力の両方を使用することができる。

【0010】

別のデバイスは、モバイルデバイスより計算能力が低くてよく、すなわち上で説明した「シンデバイス」であってよい。

【0011】

幾つかの実施形態において、別のデバイスは、追加のアプリケーションのインストールと実行ができない。このような別のデバイスの場合、アプリケーションは仮想オペレーティングシステムアプリケーションを使ってモバイルデバイス上で、仮想オペレーティングシステムの範囲内か、又は仮想オペレーティングシステムと共に実行されるが、モバイルデバイスのオペレーティングシステムにより提供されてよいプロセス間通信メカニズムを使って通信する独立したアプリケーションとして実行されてよい。したがって、仮想オペレーティングシステムはモバイルデバイス上で別のアプリケーションと通信してよい。

【0012】

仮想オペレーティングシステムはまた、別のデバイスにコマンド及び／又はコンフィギュレーション情報を送信するように構成されてよく、それによって別のデバイスはモバイルデバイスから基本的に完全に操作されてよい。

【0013】

幾つかの実施形態における仮想オペレーティングシステムアプリケーションでは、モバイルデバイスのデバイス（コンポーネント）とのアプリケーションの通信が可能であり、それによってこれらのデバイスはアプリケーションによって使用されてよい。

【0014】

仮想オペレーティングシステムアプリケーションは、アプリケーションからスクリーンコンテンツを受信し、そのスクリーンに基づいてスクリーンフレームを別のデバイスに提供するように構成されてよい。

【0015】

アプリケーションは、ナビゲーションアプリケーションを含んでいてよい。

【0016】

モバイルデバイスは、スマートフォン又はタブレットコンピュータであってよい。

【0017】

別のデバイスはスマートグラスであってよい。

【0018】

別の実施形態によれば、方法が提供され、これは：
モバイルデバイス上で、別のデバイスのための仮想オペレーティングシステムアプリケーションを実行させるステップを含み、仮想オペレーティングシステムアプリケーションは、
－モバイルデバイスと別のデバイスとの間のモバイルデバイスの第一のインタフェース及び別のデバイスの第二のインタフェースを介した通信を管理し、
－別のデバイスに、別のデバイスのディスプレイ上に表示されることになるスクリーンフレームを提供し、
－別のデバイスからの入力を受信して処理し、
－モバイルデバイス上で別のデバイスのためのアプリケーションの実行を可能にしている。

【0019】

仮想オペレーティングシステムアプリケーションは、モバイルデバイスのデバイス（コンポーネント）とのアプリケーションの通信を可能にするかもしれない。

【0020】

仮想オペレーティングシステムは、コマンド及び／又はコンフィギュレーション情報を別のデバイスに送信してよい。

【0021】

仮想オペレーティングシステムは、モバイルデバイス上の別のアプリケーションと通信してよく、それによってこれらの別のアプリケーションは、例えば仮想オペレーティングシステムを介して別のデバイスにスクリーンを送信し、又は別のデバイスからの入力を受信してよい。

【0022】

仮想オペレーティングシステムアプリケーションは、アプリケーションからスクリーンコンテンツを受信し、そのスクリーンコンテンツに基づいてスクリーンフレームを別のデバイスに提供してよい。

【0023】

アプリケーションは、ナビゲーションアプリケーションを含んでいてよい。

【0024】

他の実施形態によれば、コンピュータプログラムが提供され、これは、プロセッサ上で実行されると、前述の方法が実行されるようにするプログラムコードを含む。

【0025】

コンピュータプログラムを含む記憶媒体、特に有形記憶媒体も提供される。

【0026】

さらに、コンピュータプログラムがそこに記憶されたモバイルデバイスが提供される。

【0027】

他の実施形態によれば、キットが提供され、これは：
前述のコンピュータプログラム又は記憶媒体と、
コンピュータプログラムの仮想オペレーティングシステムアプリケーションを使って動作させられる別のデバイスと、
を含む。

【0028】

このようなキットを用いて、ユーザは自分のモバイルデバイスで、コンピュータプログラムをモバイルデバイスにインストールすることによって別のデバイスを動作できるようにしてよい。

【0029】

別のデバイスはスマートグラスであってよい。

【0030】

下記において、よりよく理解できるようにするために、添付の図面を参照しながら実施形態を説明する。

【図面の簡単な説明】

【0031】

【図1】ある実施形態によるシステムのブロック図である。

【図2】仮想オペレーティングシステムを含む幾つかの実施形態のオペレーティングシステムの構造を示すブロック図である。

【図3】別の実施形態によるシステムの略図である。

【図4】ある実施形態による方法を示すフローチャートである。

【図5】特定のアプリケーションに関するある実施形態によるシステムの例示的な動作を示す略図である。

【発明を実施するための形態】

【0032】

以下に各種の実施形態を詳しく説明する。これらの実施形態は例として示されているにすぎず、限定的と解釈されないものとすることに留意すべきである。異なる実施形態の特徴を組み合わせて別の実施形態を形成してもよい。実施形態のうちの１つに関して説明された変更、改良、又は詳細はまた、他の実施形態にも当てはまるかもしれず、したがって何度も説明しない。

【0033】

実施形態を詳しく説明する前に、以下で提供される用語の幾つかの定義を示す。

【0034】

モバイルデバイスとは、本明細書で使用されるかぎり、人が持ち歩くように設計されたコンピューティングデバイスである。その結果、このようなモバイルデバイスの重量は２ｋｇ未満、通常、１ｋｇ以下未満であり、寸法は５０ｃｍ・５０ｃｍ・２ｃｍ未満、通常、それより小さい。典型的なモバイルデバイスは、スマートフォン又はタブレットである。多くのモバイルデバイスは、コンテンツを表示し、ユーザ入力を受信するためのタッチスクリーンのほか、ＧＰＳセンサ等のその他のセンサを有する。モバイルデバイスは典型的に、各種のカスタムアプリケーション（アプリ）を実行させるのに十分な計算能力を有する。実施形態において、モバイルデバイスは典型的に、追加的なこのようなアプリケーションのインストールを可能にするオペレーティングシステムを実行する。

【0035】

計算能力の低いデバイスとは、本明細書ではシンデバイスと略すが、モバイルデバイスより計算能力が低いデバイスである。多くの場合、シンデバイスはファームウェアのみを有し、カスタムアプリケーション、すなわちデバイスの動作に絶対的に必要なプログラムの一部ではない追加のアプリケーション又は、換言すればデバイスの中核的機能に関していないプログラムはインストールできない。このようなシンデバイスで使用されるプロセッサは、モバイルデバイスで使用されるプロセッサより低パワーであり、例えば比較的単純なマイクロコントローラ又は、さらには基本的入力又は出力を扱う単純な論理回路であるかもしれない。

【0036】

実施形態において、シンデバイスのためのオペレーティングシステムは、モバイルデバイス上のアプリケーションとして動作する。このオペレーティングシステムは「仮想オペレーティングシステムアプリケーション」とも呼ばれ、これは、それがそのためのオペレーティングシステム可能を提供するデバイス（シンデバイス）上ではなく、他のデバイス（モバイルデバイス）上で動作するからである。後により詳しく説明するように、これによってシンデバイスのための追加的アプリケーションのインストール、及び／又は利用時にシンデバイスから少なくとも部分的に独立したモバイルデバイスのフレキシブルな使用が可能となる。

【0037】

図１は、ある実施形態によるシステムを示し、図２は図１のシステムのオペレーティングシステム構造をさらに説明するためのロジック図である。

【0038】

図１のシステムは、シンデバイス１０とモバイルデバイス１６を含む。シンデバイス１０は、ディスプレイ１１に連結されたプロセッサ１３と、１つ又は複数の入力装置１２と、メモリ１４と、を含む。プロセッサとは、本明細書で使用されるかぎり、１つのプロセッサに限定されず、複数のプロセッサが提供される可能性も含んでいてよい。

【0039】

ディスプレイとは、本明細書で使用されるかぎり、コンテンツを表示するために使用されるかもしれないあらゆるデバイスである。例えば、当初言及したスマートグラスの場合、ディスプレイは、グラスのユーザから見えるようにコンテンツを投射するある種の投射システムを含んでいても、又はＴＦＴディスプレイや液晶ディスプレイ等のより従来的なディスプレイを含んでいてもよい。入力装置は、ユーザが入力することができるようにし得るあらゆる装置であってよい。幾つかの実施形態において、入力装置は、ディスプレイ１１をいわゆるタッチスクリーンとして提供することによって実装されてよい。入力装置の他の例には、シンデバイス１０を操作する人のジェスチャを感知するカメラセンサ又は人から音声コマンドを受信するためのマイクロフォンが含まれる。メモリ１４は、シンデバイス１０を動作させるのに必要なプロセッサ１３への命令を記憶する。幾つかの実施形態において、シンデバイス１０は、カスタムアプリケーションをメモリ１４又はシンデバイス１０の他の場所にインストールできない。

【0040】

シンデバイス１０は、モバイルデバイス１６と通信するためのインフェース１５をさらに含む。この通信のために、モバイルデバイス１６はそれに対応するインタフェース１７を含む。図１の実施形態において、インタフェース１５、１７は無線インタフェースである。適当な無線インタフェースの１つの例はＢｌｕｅｔｏｏｔｈインタフェースである。しかしながら、それ以外の種類の無線インタフェースも使用されてよい。このようなインタフェースは通常、スマートフォン又はタブレット等の市販のモバイルデバイス内に存在する。図のデバイスのほかに、デバイス１０は例えばセンサ等のその他のコンポーネントを含んでいてもよい。

【0041】

モバイルデバイス１６は、プロセッサ１８と、１つ又は複数の他のデバイス１９と、メモリ１１０と、を含む。

【0042】

他のデバイス１９は、スマートフォンやタブレット等のモバイルデバイスで従来使用される、センサのような何れのデバイスを含んでいてもよく、これは例えばＧＰＳセンサ、ラウドスピーカ、マイクロフォン、ディスプレイ、タッチスクリーン、ボタン等である。メモリ１１０は、フラッシュメモリのような書き込み可能メモリを含み、この場合、カスタムアプリケーションがインストールされてよい。図１のシステムでは、これらのカスタムアプリケーションの１つは仮想オペレーティングシステムアプリケーションであり、これは基本的にオペレーティングシステムをシンデバイス１０に提供する。ここで、このコンセプトについて、図２をさらに参照しながら説明する。

【0043】

シンデバイス１０側に「シンファームウェア」２０が提供される。シンファームウェアは、シンデバイス１０上の、シンデバイス１０の動作に必要な、シンデバイス１０の各種の可能を提供することに基本的に限定されるファームウェアである。さらに、モバイルデバイス１６内には仮想オペレーティングシステムアプリケーション２２がインストールされ、モバイルデバイスの通常のオペレーティングシステム（ＯＳ）２１の下で実行される。シンファームウェア２０は、この仮想オペレーティングシステムアプリケーション２２と相互作用して、各種の可能をシンデバイス１０に提供する。

【0044】

シンファームウェア２０は、シンデバイスとモバイルデバイスとのペアリング及びペアリング解除を行う、すなわち図１のインタフェース１５、１７を使った無線接続を確立又は終了する機能を有する。特にＢｌｕｅｔｏｏｔｈ通信又はその他の無線アプリケーションのためのペアリングは、２つのデバイスが初めて接続されるときのプロセスである。

【0045】

さらに、シンファームウェア２０はモバイルデバイス１６上で動作する仮想オペレーティングシステムアプリケーション２２に接続され、及びそこから切断される機能を有する。シンファームウェア２０はすると、仮想オペレーティングシステムアプリケーション２２から、ディスプレイ１１上で表示されるためのスクリーンフレームを受信し、入力装置１２からのユーザ入力又はセンサデータ等のその他のデータを仮想オペレーティングシステムアプリケーション２２に送信する。幾つかの実施形態において、シンファームウェア２０はまた、要求に応じて、バッテリ状態等のシンデバイス１０のデバイス状態を仮想オペレーティングシステムアプリケーション２２に送信してよい。

【0046】

したがって、シンファームウェア２０は仮想オペレーティングシステムアプリケーション２２に入力（ユーザ入力及び／又はその他のセンサ入力）を送信し、仮想オペレーティングシステムアプリケーション２２から表示されるべきスクリーンフレームを受信する。

【0047】

仮想オペレーティングシステムアプリケーション２２はスクリーンフレームをシンファームウェア２０に提供し、シンファームウェア２０からの入力を受信するためのリモートディスプレイ及び入力／出力ハンドラ２３を含む。さらに、リモートディスプレイと入力／出力ハンドラ２３を介して、コマンド及び／又はコンフィギュレーション情報がシンファームウェア２０に送信されてもよい。例示的なコマンドには、スクリーンオン／オフコマンド、音声捕捉オン／オフコマンド、切断コマンド等が含まれていてよい。例示的なコンフィギュレーションには、ディスプレイ消灯時間閾値、ディスプレイの明るさ等が含まれていてよい。

【0048】

入力及び出力は、コンテンツプロバイダインタフェースユニット２４によってさらに処理され、これは一方の送信方向（シンファームウェア２０へ）ではスクリーンコンテンツを、リモートディスプレイ及び入力／出力ハンドラ２３を介してシンファームウェア２０に送信されるスクリーンフレームフォーマットに変換し、他方の送信方向（シンファームウェア２０から）ではリモートディスプレイ及び入力／出力ハンドラ２３からの入力を受信し、これらをアプリケーション又はオペレーティングシステムの各部のような別のコンポーネントに提供する。エクステンションマネージャ２５は、そのうち２つのアプリケーション２６Ａ、２６Ｂ（ここではミニアプリとよばれる）だけが示されている、仮想オペレーティングシステム「上」で動作するミニアプリのインストール／コンフィギュレーション／取外しを管理する役割を果たし、モバイルデバイス１６の他のデバイス（例えば、他のデバイス１９）と通信して、例えばモバイルデバイス１６からのセンサ入力をミニアプリ２６Ａ、２６Ｂに提供してよい。リモートディスプレイ及び入力／出力ハンドラ２３、入力／出力抽象化コンポーネント２４、並びにエクステンションマネージャ２５は、仮想オペレーティングシステムアプリケーション２２の別々のコンポーネントとして表現されているが、これは単に便宜のためで、仮想オペレーティングシステムアプリケーション２２により提供される幾つかの機能をよりよく理解できるようにするものにすぎず、これらは別々のコンポーネントとして実装しなければならないわけではない点に留意すべきである。

【0049】

ミニアプリ２６Ａ、２６Ｂは、シンデバイス１０の追加的な機能を提供するためにシンデバイス１０用として設計されたアプリケーションである。このようなミニアプリの例は、シンデバイス１０のディスプレイ１１を用いたナビゲーションを可能にするナビゲーションアプリ又は、ビデオプレイヤアプリケーション等、シンデバイス上にコンテンツを提供するための他の何れかのアプリケーションである。ミニアプリ２６Ａ、２６Ｂは一般に、基本的な仮想オペレーティングシステムアプリケーション２２に加えてインストールされるアプリケーションであり、例えば仮想オペレーティングシステムアプリケーション２２とは異なるベンダにより提供されてよい。換言すれば、エスクテンションマネージャ２５により、仮想オペレーティングシステム内のミニアプリのインストール／コンフィギュレーション／取外しを可能にし、コンテンツプロバイダインタフェースユニット２４はミニアプリ２６Ａ、２６Ｂ及びモバイルオペレーティングシステム２１上のその他のアプリケーションとのインタフェースを提供し、それによってこれらがシンファームウェア２０からの、又はモバイルデバイス１６の他のデバイス１９からの入力にアクセスでき、これらがシンデバイス１０のディスプレイ１１上に表示されるコンテンツを変更できるようにする。

【0050】

さらに、仮想モバイルオペレーティングシステムアプリケーション２２は、モバイルデバイスオペレーティングシステム２１の下でモバイルデバイス上にインストールされる他のアプリケーション２８（例えば、サードパーティアプリケーション）と通信してよい。他のアプリケーション２８は、モバイルデバイスオペレーティングシステム２１により提供される通信インタフェース２７を使用してよいモバイルデバイス上で実行される、独立して開発されたモバイルアプリケーションである。通信インタフェース２７は一般に、モバイルオペレーティングシステム２１の下のアプリケーション間の通信のために機能する。このような通信インタフェースは通常、モバイルデバイスのオペレーティングシステムによって提供される。通信インタフェース２７を使って、仮想モバイルオペレーティングシステムアプリケーション２２は他のアプリケーション２８と通信してよい。このようにして、他のアプリケーション２８はシンデバイスからのセンサ／ユーザデータを受信し、（必要であれば）シンデバイスにスクリーンコンテンツを送信してよく、この際、図１のインタフェース１７を使ってシンデバイスに直接接続する必要がなく、仮想モバイルオペレーティングシステムアプリケーション２２と直接通信するだけでよい。

【0051】

他のアプリケーション２８は典型的に、それ自体の独立したユーザインタフェース及びビジネスロジックを有するが、上述のようにして、シンデバイスにコンテンツを送信し、シンデバイス入力データを受信することにより、そのユーザインタラクションモデルを拡張してもよい。このような別のアプリケーション２８の例には、スポーツアクティビティアプリ（例えば、シンデバイス上にスポーツ関連情報を示し、シンデバイスからモーションデータを受信してよい）、仮想オペレーティングシステムとは別に開発された（しかしながら、ナビゲーションもミニアプリと同様のシナリオを提供する）ナビゲーションアプリ、ソーシャルネットワーキング及びメッセージアプリ等が含まれる。

【0052】

幾つかの実施形態において、シンデバイス１０は、ソフトウェア（記憶媒体上又はダウンロード用）としての仮想オペレーティングシステムアプリケーション２２と共にキットで提供されてよく、それによってユーザは仮想オペレーティングシステムアプリケーションを自分のモバイルデバイス（例えば、スマートフォン、タブレット）にインストールしてシンデバイス１０を動作させることができる。

【0053】

図３は、シンデバイス及びモバイルデバイスの例を示す例示的システムを示している。図３の例示的なシステムにおいて、シンデバイスはスマートグラス３０として実装され、表示ユニット３１Ａ、３１Ｂはグラス内に埋め込まれて、スマートグラス３０を装着する人に対してコンテンツを示す。モバイルデバイスは、スマートフォン又はタブレット３２として実装される。

【0054】

図４は、ある実施形態による方法を示すフローチャートであり、仮想オペレーティングシステムアプリケーションの動作を図解する。

【0055】

図４の方法は一連のステップとして示されているが、これらのステップが示されている順番は限定的と解釈されるべきではない。特に、幾つかのステップは連続して実行されてもよい点に留意すべきである。

【0056】

４０で、モバイルデバイスにおいてシンデバイスからの入力、例えばユーザ入力を検出するシンデバイスのセンサからの入力を受信するステップを含む方法。４１で、入力は仮想オペレーティングシステム（例えば、図２の２２）を介して、任意選択により仮想オペレーティングシステムアプリケーションにインストールされたミニアプリ及び／又はモバイルデバイスのセンサ等のモバイルデバイスのデバイスを使って処理される。４２で、方法は、シンデバイスに対し、シンデバイス上で表示されるべきスクリーンフレームを送信するステップを含む。さらに、図２に関して説明したように、コマンド又はコンフィギュレーション情報がシンデバイスに送信されてもよい。

【0057】

次に、仮想オペレーティングシステムアプリケーション及びミニアプリの例示的な動作を図５を参照しながら説明する。図５では、ユーザが仮想オペレーティングシステムを自分のモバイルデバイスにすでにインストールしており、シンデバイス、例えば図３のスマートグラス３０を持ち、これがモバイルデバイスとペアリングされていることを前提とする。

【0058】

さらに、ユーザがモバイルデバイスの仮想オペレーティングシステムアプリケーションにナビゲーションミニアプリをインストールしてあることも前提である。

【0059】

図５は、上から下へ、シンデバイスが仮想オペレーティングシステムアプリケーション及びその上にインストールされたナビゲーションミニアプリを使ってどのように動作するかの例示的なタイムラインを示す。

【0060】

まず、５０でユーザはモバイルデバイス上で仮想オペレーティングシステムアプリケーションを開く（起動させる）。すると、５１で仮想オペレーティングシステムアプリケーションが起動し、５２でシンデバイスを探す。すると、通信は例えばハンドシェイク手順５３を使って開始され、５４でホームスクリーンとも呼ばれるスタートスクリーンフレームが仮想オペレーティングシステムアプリケーションからシンデバイスに送信されて表示される。５５で、ユーザは次にモバイルデバイス上の仮想オペレーティングシステムの下で実行されるナビゲーションミニアプリを開く。５６のナビゲーションミニアプリの起動手順と初期化の後、５７でミニアプリのスタートスクリーンがレンダリングされ、５８で表示されるべきスクリーンフレームとしてシンデバイスに送信される。

【0061】

次に５９で、ユーザは所望の目的地を入力する。幾つかの実施形態において、これは、モバイルデバイスのタッチスクリーンのような入力装置を使って行われてよい。他の実施形態において、これは、それを通じて目的地が音声により入力されるマイクロフォンのような、シンデバイスのある入力デバイスを使って行われてもよい。ナビゲーションミニアプリはすると、５１０で、例えばモバイルデバイスのＧＰＳセンサを使用するモバイルデバイスからの現在地を要求し、５１１で位置の更新を受信する。数字５１２は、この更新が繰り返し行われるかもしれないことを示している。５３０、５３１に示されるように、さらに、シンデバイスのセンサ（例えば、方位センサ）からのセンサデータの更新もまた、ナビゲーションミニアプリにより要求されてよい。

【0062】

５１４で、ナビゲーションミニアプリはすると、確認スクリーンをレンダリングし、５１５でそれがシンデバイスに対し、シンデバイス上で表示されるべきスクリーンフレームとして送信される。

【0063】

すると、５１６でユーザはナビゲーションを開始する。図５の実施形態では、これはシンデバイス上のボタンを押すことによって行われる。他の実施形態において、これは音声コマンド等のシンデバイス上の他の動作又はモバイルデバイスの入力装置を使用する動作によって行われてもよい。５１７で、シンデバイスは仮想オペレーティングシステムにボタンが押されたことを報告し、５１８で仮想オペレーティングシステムアプリケーションはナビゲーションミニアプリにこれを提供する。５３２、５３３で示されるように、ナビゲーションミニアプリはまた、シンデバイスからのセンサ更新（例えば、方位センサ）を受信してよい。次に、５１９で、ナビゲーションミニアプリは第一のステップ（どこまで行く、又は運転するかの第一の命令）を計算し、５２０で対応するスクリーンをレンダリングし、それが５２１で表示のためにシンデバイスに提供される。ユーザの移動中、ナビゲーションはループ５２２で続けられ、５２３で位置が更新され、５２４で次のステップがナビゲーションミニアプリにより計算され、対応するスクリーンが５２５でレンダリングされ、それが５２６でシンデバイス上で表示されるように送信される。５２４で次のステップが計算される前に、幾つかの実施例において、ナビゲーションミニアプリはまた、５３４、５３５に示されるように、シンデバイスからのセンサ更新（例えば、方位センサ）も受信してよい。

【0064】

ナビゲーションが完了すると、５２７の何れかの時点で、ユーザはナビゲーションミニアプリを終了し、するとこれが５２８で閉じる。その後、５２９で、５４で表示のために送信されたホームストクリーンに対応するホームスクリーンが表示のためにシンデバイスに送信される。

【0065】

図５のフローは、そこに仮想オペレーティングシステムアプリケーション及びミニアプリがインストールされたモバイルデバイスとシンデバイスとの間の考え得る通信を図解するための例にすぎず、これに対応する通信はその他の種類のミニアプリのためにも行われてよい点に留意すべきである。

【図1】

【図2】

【図3】

【図4】

【図5】

【国際調査報告】