特表 2022-517943 リアルタイム通信のデバイス拡張

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公表特許公報(A)

(11)【公表番号】

(43)【公表日】2022-03-11

(54)【発明の名称】リアルタイム通信のデバイス拡張

(51)【国際特許分類】

   H04L 67/146 20220101AFI20220304BHJP

【ＦＩ】

H04L67/146

【審査請求】有

【予備審査請求】未請求

(21)【出願番号】P 2021539663

(86)(22)【出願日】2020-01-06

(85)【翻訳文提出日】2021-08-17

(86)【国際出願番号】 US2020012321

(87)【国際公開番号】W WO2020146235

(87)【国際公開日】2020-07-16

(31)【優先権主張番号】62/789,189

(32)【優先日】2019-01-07

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】16/291,596

(32)【優先日】2019-03-04

(33)【優先権主張国・地域又は機関】US

(81)【指定国・地域】

【公序良俗違反の表示】

（特許庁注：以下のものは登録商標）

１．Ｌｉｎｕｘ

２．ｉＯＳ

(71)【出願人】

【識別番号】397074301

【氏名又は名称】サイトリックス システムズ，インコーポレイテッド

(74)【代理人】

【識別番号】110002310

【氏名又は名称】特許業務法人あい特許事務所

(72)【発明者】

【氏名】ベジャンキ，サンソッシュ クマール

(72)【発明者】

【氏名】シュクラバク，セルギー

(72)【発明者】

【氏名】サンピエリ，トーマス ジョン

(72)【発明者】

【氏名】ボシコ，ドミトロ

(57)【要約】

本明細書には、モバイルデバイスからの入力データを使用して通信を拡張するための方法およびシステムが記載されている。１つまたはそれ以上の入力デバイス402を有するモバイルデバイス401との接続を確立することができるコンピューティングデバイス301は、バーコードを表示することができ、このバーコードは、モバイルデバイス401によってスキャンされるときに、モバイルデバイス401をして、ウェブページへとアクセスさせる。ウェブページは、モバイルデバイス401をして、入力デバイス402からの入力データを、例えば、モバイルデバイス401上で実行されるウェブブラウザを介して、かつコンピューティングデバイス301へと伝送させるように構成されている。入力データは、コンピューティングデバイス301により、コンピューティングデバイス301に接続された物理入力デバイス402を複製する目的で使用される。コンピューティングデバイス301は、入力データを異なるコンピューティングデバイスに伝送することができる。
【選択図】図５

【特許請求の範囲】

【請求項1】

方法であって、
コンピューティングデバイスにより、モバイルデバイスのユーザから入力データを受信するように構成された前記モバイルデバイスとの接続を確立することと、
前記コンピューティングデバイスに接続された物理入力デバイスを複製するために、前記コンピューティングデバイスにより、前記モバイルデバイスから前記入力データを受信することと、
前記モバイルデバイスと第２のコンピューティングデバイスとの間の通信を確立するために、前記コンピューティングデバイスにより、かつ前記第２のコンピューティングデバイスに、前記入力データを伝送することと、を含む方法。

【請求項2】

前記モバイルデバイスとの前記接続を確立することは、前記コンピューティングデバイスと関連付けられたウェブページに対応するバーコードを表示することを含み、前記入力データを受信することは、前記ウェブページを介して前記入力データを受信することを含む、請求項１に記載の方法。

【請求項3】

前記バーコードは、前記ウェブページと関連付けられたユニフォームリソースロケータ（ＵＲＬ）を含む、請求項２に記載の方法。

【請求項4】

前記コンピューティングデバイスにより、かつ前記コンピューティングデバイスに接続された１つまたはそれ以上の出力デバイスを介して、前記入力データを出力することをさらに含む、請求項１に記載の方法。

【請求項5】

前記モバイルデバイスから前記入力データを受信することは、前記モバイルデバイス上で実行されるウェブブラウザを介して前記入力データを受信することを含む、請求項１に記載の方法。

【請求項6】

前記入力データを受信することは、前記モバイルデバイスの異なる入力デバイスにそれぞれが対応する複数組の入力データを受信することを含む、請求項１に記載の方法。

【請求項7】

前記物理入力デバイスは、カメラ、マイクロフォン、または加速度計のうちの１つまたはそれ以上であるデバイスタイプを有する、請求項１に記載の方法。

【請求項8】

装置であって、
１つまたはそれ以上のプロセッサと、
命令を記憶するメモリと、を備え、前記命令は、前記１つまたはそれ以上のプロセッサによって実行されるときに、前記装置をして、
モバイルデバイスのユーザから入力データを受信するように構成された前記モバイルデバイスとの接続を確立することと、
前記装置に接続された物理入力デバイスを複製するために、前記モバイルデバイスから前記入力データを受信することと、
前記モバイルデバイスとコンピューティングデバイスとの間の通信を確立するために、前記コンピューティングデバイスに前記入力データを伝送することと、を行わせる、装置。

【請求項9】

前記モバイルデバイスとの前記接続を確立することは、前記装置と関連付けられたウェブページに対応するバーコードを表示することを含み、前記入力データを受信することは、前記ウェブページを介して前記入力データを受信することを含む、請求項８に記載の装置。

【請求項10】

前記バーコードは、前記ウェブページと関連付けられたユニフォームリソースロケータ（ＵＲＬ）を含む、請求項９に記載の装置。

【請求項11】

前記命令は、前記１つまたはそれ以上のプロセッサによって実行されるときに、前記装置をして、１つまたはそれ以上の出力デバイスを介して前記入力データを出力することをさらに行わせる、請求項８に記載の装置。

【請求項12】

前記モバイルデバイスから前記入力データを受信することは、前記モバイルデバイス上で実行されるウェブブラウザを介して前記入力データを受信することを含む、請求項８に記載の装置。

【請求項13】

前記入力データを受信することは、前記モバイルデバイスの異なる入力デバイスにそれぞれが対応する複数組の入力データを受信することを含む、請求項８に記載の装置。

【請求項14】

前記物理入力デバイスは、カメラ、マイクロフォン、または加速度計のうちの１つまたはそれ以上であるデバイスタイプを有する、請求項８に記載の装置。

【請求項15】

命令を記憶する非一時的コンピュータ可読媒体であって、前記命令は、コンピューティングデバイスによって実行されるときに、前記コンピューティングデバイスをして、
モバイルデバイスのユーザから入力データを受信するように構成された前記モバイルデバイスとの接続を確立することと、
前記装置に接続された物理入力デバイスを複製するために、前記モバイルデバイスから前記入力データを受信することと、
前記モバイルデバイスとコンピューティングデバイスとの間の通信を確立するために、前記コンピューティングデバイスに前記入力データを伝送することと、を行わせる、非一時的コンピュータ可読媒体。

【請求項16】

前記モバイルデバイスとの前記接続を確立することは、前記装置と関連付けられたウェブページに対応するバーコードを表示することを含み、前記入力データを受信することは、前記ウェブページを介して前記入力データを受信することを含む、請求項１５に記載の非一時的コンピュータ可読媒体。

【請求項17】

前記バーコードは、前記ウェブページと関連付けられたユニフォームリソースロケータ（ＵＲＬ）を含む、請求項１６に記載の非一時的コンピュータ可読媒体。

【請求項18】

前記命令は、前記コンピューティングデバイスによって実行されるときに、前記コンピューティングデバイスをして、１つまたはそれ以上の出力デバイスを介して前記入力データを出力することをさらに行わせる、請求項１５に記載の非一時的コンピュータ可読媒体。

【請求項19】

前記モバイルデバイスから前記入力データを受信することは、前記モバイルデバイス上で実行されるウェブブラウザを介して前記入力データを受信することを含む、請求項１５に記載の非一時的コンピュータ可読媒体。

【請求項20】

前記入力データを受信することは、前記モバイルデバイスの異なる入力デバイスにそれぞれが対応する複数組の入力データを受信することを含む、請求項１５に記載の非一時的コンピュータ可読媒体。

【発明の詳細な説明】

【技術分野】

【0001】

本明細書に記載の発明の態様は、概してコンピューティングデバイス、コミュニケーション（例えば、映像会議や音声会議）、モバイルデバイスなどに関するものである。

【背景技術】

【0002】

映像会議や音声会議など、コンピュータによって実施されるコミュニケーションがますます普及してきた。現在の通信技術は、２人以上のユーザがコミュニケーションを行うのに、カメラおよび／またはマイクロフォンに頼ることが多い。例えば、会議室内のユーザの集団と通信会議に参加している他のユーザとの間でのコミュニケーションを支援する目的で、多くの会議室では、テーブル周りの一連のマイクロフォン、および中央に設置された大型のカメラが使用されている。通信には、他の入力デバイス（ひいては他の入力データ）も必要とされ得る。例えば、リアルタイムビデオゲームでは、異なるコンピューティングデバイスのユーザが入力データを提供するのに、ゲームコントローラが必要となり得る。

【発明の概要】

【0003】

以下の内容は、本明細書に記載されている発明の様々な態様を簡略化してまとめたものである。この概要は、包括的な概略ではなく、必須または肝要な要素を特定したり、請求項の範囲を明確化したりすることを意図してはいない。以下の概要は、後述の詳細な説明に入る前の導入部として、いくつかの概念を簡略化して提示しているに過ぎない。

【0004】

コンピューティングデバイスは、所与の時期に接続され得る入力デバイスの数および範囲に関して実用上の制限を有していてもよい。例えば、会議室内のコンピューティングデバイスは、会議室内の参加者全員の映像および音声を捕捉するための単一のカメラと単一のマイクロフォンとを有していてもよい。多数のカメラおよびマイクロフォンを前述のコンピューティングデバイス（例えば、会議室内の各参加者用のマイクロフォン）に接続することが望ましいかもしれないが、実用上の制限（例えば、ポートの数、利用可能な処理能力、コスト）により、それができない場合がある。

【0005】

上記の先行技術の制限を克服し、本明細書を読んで理解すれば明らかとなる他の制限を克服するために、本明細書に記載の態様は、モバイルデバイスからの入力データをローカルコンピューティングデバイスによって使用することに関する。

【0006】

コンピューティングデバイスは、仮想入力デバイスで構成されていてもよい。この仮想入力デバイスは、例えば、カメラやマイクロフォンなどの物理入力デバイスを複製するコンピューティングデバイス上で実行されるソフトウェアであってもよい。仮想入力デバイスは、ネットワーク経由でモバイルデバイスとコンピューティングデバイスとの間の通信を確立するように構成されていてもよい。かかる通信は、モバイルデバイスをして、モバイルデバイス上で実行されるウェブブラウザを介してウェブページへとアクセスさせることによって確立されることができ、このウェブページは、モバイルデバイスをして、プロトコル経由で、かつコンピューティングデバイスの仮想入力デバイスへと入力データを伝送させる。いくつかの例において、モバイルデバイスは、かかる入力データを、モバイルデバイスの１つまたはそれ以上の入力デバイス（例えば、カメラまたはマイクロフォン）からコンピューティングデバイスの仮想入力デバイスに伝送するように構成されていてもよい。入力データは、例えば、モバイルデバイスのカメラからの映像ストリーム、モバイルデバイスの加速度計からのデータ、モバイルデバイスのマイクロフォンからの音声ストリームなどであってもよい。コンピューティングデバイスは、モバイルデバイスからの入力データを、映像および／または音声会議、ビデオゲームなどでの使用など、第２のコンピューティングデバイスとの通信に使用し得ることから、入力を受信し、かつ出力を生成して、コンピューティングデバイス上でアプリケーションを実行するために、煩雑な追加アクセサリまたは周辺構成要素を接続する必要、または他の方法で設置する必要がなくなる。コンピューティングデバイスは、（例えば、複数のモバイルデバイスおよび／またはモバイルデバイスの複数の入力デバイスからの）複数組の入力データを受信することができ、異なるコンピューティングデバイスへの伝送のために、および／または、例えば、コンピューティングデバイスのディスプレイに表示される映像のように、コンピューティングデバイスの１つまたはそれ以上の出力デバイスを介した出力のために、かかる入力データをまとめるように構成されていてもよい。

【0007】

例えば、コンピューティングデバイスは、会議室内のデスクトップコンピュータであることができ、モバイルデバイスは、ユーザと関連付けられたスマートフォンまたはタブレットであってもよい。デスクトップコンピュータ上で実行される仮想入力デバイスアプリケーションは、デスクトップコンピュータの表示デバイスにバーコードを表示するように構成されていてもよい。モバイルデバイスは、モバイルデバイスのカメラを使用して、記号を検出することができ、例えば、記号に埋め込まれ、かつ仮想入力デバイスアプリケーションと関連付けられたユニフォームリソースロケータ（ＵＲＬ）にアクセスすることなどによって、仮想入力デバイスアプリケーションとの通信を確立することができる。モバイルデバイスは、ＷｅｂＲＴＣプロトコルなどのプロトコルを介して、および／またはモバイルデバイスのウェブブラウザアプリケーションを使用して、モバイルデバイスの入力データを仮想入力デバイスアプリケーションに送信するように構成されていてもよい。これにより、モバイルデバイスは、モバイルデバイスにインストールされるのが典型的であるソフトウェアを使用して、デスクトップコンピュータに入力データを伝送することができる。コンピューティングデバイスは、かかる追加の周辺構成部分を調達および設置するために必要な時間および費用をかけずに、仮想入力デバイスアプリケーションを使用して、入力データを、コンピューティングデバイスに物理的に接続されたデバイスが起点であるのように扱うように構成されていてもよい。

【0008】

これらの態様および追加的な態様が、以下でさらに詳述する開示内容により理解されるであろう。

【0009】

本明細書に記載の態様およびそれらの利点は、添付の図面を考慮して以下の説明を参照することにより、より深い理解が得られ得る。これらの図面において、同様の参照番号は同様の特徴を示している。

【図面の簡単な説明】

【0010】

【図1】本明細書に記載された１つまたはそれ以上の例示的な態様に従って使用され得るコンピュータシステムアーキテクチャ例を示している。

【図2】本明細書に記載された１つまたはそれ以上の例示的な態様に従って使用され得るリモートアクセスシステムアーキテクチャ例を示している。

【図3】通信セッション例を示している。

【図4】モバイルデバイスとの通信セッション例を示している。

【図5】モバイルデバイスからの入力データがローカルコンピューティングデバイスへと流れる通信セッション例を示している。

【図6】ローカルコンピューティングデバイスおよびモバイルデバイスに関するシーケンス図を示している。

【図7】ローカルコンピューティングデバイス上で実行され、かつ映像会議通話を表示する表示デバイスを示している。

【図8】複数のモバイルデバイスがローカルコンピューティングデバイスに接続している映像会議通話を示している。

【図9】モバイルデバイスに関してローカルコンピューティングデバイスによって実施され得るステップを表したフローチャートである。

【図10】複数のモバイルデバイスに関してローカルコンピューティングデバイスによって実施され得るステップを表したフローチャートである。

【図11】ウェブページに関してローカルコンピューティングデバイスによって実施され得るステップを表したフローチャートである。

【図12】ウェブページに関してモバイルデバイスによって実施され得るステップを表したフローチャートである。

【発明を実施するための形態】

【0011】

様々な実施の形態に関する以降の記述においては、本明細書の一部を形成する上記の添付図面が参照されており、本明細書に記載された態様が実施され得る様々な実施の形態が例として示されている。本明細書に記載された範囲から逸脱しない限り、他の実施の形態を利用したり、構造上および機能上の変更を行ったりし得るものと理解されたい。様々な態様で、他の実施の形態が可能であり、種々の異なる方法で実施または実行することができる。

【0012】

以下に詳述する主題の一般的な紹介として、本明細書に記載された態様は、コンピューティングデバイス間の映像会議および音声会議といったコミュニケーションに関するものである。かかるコミュニケーションは、カメラ、マイクロフォン、ポインタ（例えば、コンピュータのマウスやタッチスクリーン）、および／または他の入力デバイスの使用を伴い得る。かかるコミュニケーションに関わるコンピューティングデバイスは、スマートフォン、ラップトップ、タブレットなどのモバイルデバイスと、例えばネットワーク経由で通信することができ得る。かかるモバイルデバイスは、カメラ、マイクロフォン、タッチスクリーンなどの入力デバイスも備え得る。

【0013】

本明細書で使われている表現や用語は説明上のものであり、制限的なものとみなすべきでない。本明細書で使われている句および用語には、むしろ最も広義の解釈および意味が与えられるべきである。「含む」、「備える」、およびこれらの変形が使用されている場合には、以降に列挙された項目およびそれらの均等物、ならびに追加項目およびそれらの均等物を包含するものとする。「接続」、「連結」という用語、および同様の用語が使用されている場合には、直接的および間接的な搭載、接続、連結、位置付け、および係合を含むものとする。

【0014】

コンピューティングアーキテクチャ
コンピュータソフトウェア、ハードウェア、およびネットワークは、特にスタンドアロン、被ネットワーク接続、リモートアクセス（リモートデスクトップとも称される）、被仮想化、および／またはクラウドベースの環境など、種々の異なるシステム環境で利用され得る。

【0015】

図１は、本明細書に記載された１つまたはそれ以上の例示的な態様を、スタンドアロンおよび／または被ネットワーク接続環境で実装する目的で使用され得るシステムアーキテクチャおよびデータ処理デバイスの一例を表している。様々なネットワークノード１０３、１０５、１０７、および１０９は、インターネットなどのワイドエリアネットワーク（ＷＡＮ）１０１を介して相互接続され得る。追加または代替として、プライベートイントラネット、企業ネットワーク、ローカルエリアネットワーク（ＬＡＮ）、メトロポリタンエリアネットワーク（ＭＡＮ）、無線ネットワーク、パーソナルネットワーク（ＰＡＮ）など、他のネットワークが使用され得る。ネットワーク１０１は説明用であり、より少数または追加的なコンピュータネットワークに置き換えられてもよい。ローカルエリアネットワーク１３３は、任意の既知のＬＡＮトポロジーのうちの１つまたはそれ以上を有することができ、イーサネットなど、様々な異なるプロトコルのうちの１つまたはそれ以上を使用することができる。デバイス１０３、１０５、１０７および１０９、ならびに他のデバイス（非図示）は、ツイストペアワイヤ、同軸ケーブル、光ファイバ、電波、または他の通信媒体を介して、ネットワークのうちの１つまたはそれ以上に接続され得る。

【0016】

本明細書で使用され、図面に描かれている「ネットワーク」という用語は、遠隔の記憶デバイスが１つまたはそれ以上の通信経路を介して連結されているシステムを表すだけでなく、記憶能力を有するかかるシステムに随時連結され得るスタンドアロンデバイスも表す。したがって、「ネットワーク」という用語は、「物理ネットワーク」だけでなく、すべての物理ネットワークにまたがって所在する単一の実体に帰属するデータで構成される「コンテンツネットワーク」も含む。

【0017】

構成要素としては、データサーバ１０３、ウェブサーバ１０５、クライアントコンピュータ１０７、１０９が挙げられ得る。データサーバ１０３は、本明細書に記載された１つまたはそれ以上の例示的な態様を実施するためのデータベースおよび制御ソフトウェアの全体的なアクセス、制御、および管理を提供する。データサーバ１０３はウェブサーバ１０５に接続されることができ、ユーザはウェブサーバ１０５を介して、リクエストされたデータと対話し、データを取得する。代替として、データサーバ１０３は、ウェブサーバそのものとなってインターネットに直接接続されてもよい。データサーバ１０３は、ローカルエリアネットワーク１３３、ワイドエリアネットワーク１０１（例えば、インターネット）、直接もしくは間接的な接続を介して、または他の何らかのネットワークを介して、ウェブサーバ１０５に接続され得る。

【0018】

ユーザは、リモートコンピュータ１０７、１０９を使用してデータサーバ１０３と対話することができ、例えば、ウェブブラウザを使用して、ウェブサーバ１０５がホストする１つまたはそれ以上の外部公開されたウェブサイトを介してデータサーバ１０３に接続することができる。クライアントコンピュータ１０７、１０９は、データサーバ１０３に記憶されているデータにアクセスするために、データサーバ１０３と連携して使用され得るか、他の目的で使用され得る。例えば、クライアントデバイス１０７から、ユーザは、当技術分野で既知のインターネットブラウザを使用して、またはコンピュータネットワーク（インターネットなど）を経由してウェブサーバ１０５および／もしくはデータサーバ１０３と通信するソフトウェアアプリケーションを実行することによって、ウェブサーバ１０５にアクセスすることができる。

【0019】

サーバおよびアプリケーションは、同じ物理マシン上で組み合わせられ、別々の仮想アドレスまたは論理アドレスを保持し得るか、別々の物理マシン上に所在することができる。

【0020】

図１は、使用され得るネットワークアーキテクチャの一例を表しているに過ぎず、当業者であれば、使用される特定のネットワークアーキテクチャおよびデータ処理デバイスが多様であることができ、本明細書にさらに記載のとおり、それらが提供する機能に対して二次的であることを理解するであろう。例えば、ウェブサーバ１０５およびデータサーバ１０３によって提供されるサービスは、単一サーバ上で組み合わせられ得る。

【0021】

各構成要素１０３、１０５、１０７、１０９は、任意のタイプの既知のコンピュータ、サーバ、またはデータ処理デバイスであってもよい。データサーバ１０３は、例えば、データサーバ１０３の動作全体を制御するプロセッサ１１１を含んでいてもよい。データサーバ１０３は、ランダムアクセスメモリ（ＲＡＭ）１１３、読み出し専用メモリ（ＲＯＭ）１１５、ネットワークインターフェース１１７、入出力インターフェース１１９（例えば、キーボード、マウス、ディスプレイ、プリンタなど）、およびメモリ１２１をさらに含み得る。入出力（Ｉ／Ｏ）１１９は、データまたはファイルの読み出し、書き込み、表示、および／または印刷を行うための様々なインターフェースユニットおよびドライブを含んでいてもよい。

【0022】

メモリ１２１は、データ処理デバイス１０３の動作全体を制御するためのオペレーティングシステムソフトウェア１２３と、本明細書に記載された態様を実施するようにデータサーバ１０３に指示するための制御ロジック１２５と、本明細書に記載された態様と組み合わせて使用してもしなくてもよい二次的な機能、サポート機能、および／または他の機能を提供する他のアプリケーションソフトウェア１２７と、をさらに記憶することができる。本明細書では、制御ロジック１２５はデータサーバソフトウェア１２５とも称されてもよい。データサーバソフトウェア１２５の機能とは、制御ロジック１２５へと符号化された規則に基づいて自動的に行われ、システムに入力を提供するユーザによって手動で行われる動作もしくは決定、および／またはユーザ入力（例えば、クエリやデータアップデートなど）に基づく自動処理の組み合わせのことであってもよい。

【0023】

メモリ１２１は、第１のデータベース１２９および第２のデータベース１３１を含む、本明細書に記載された１つまたはそれ以上の態様の実施に使用されるデータも記憶することができる。第１のデータベース１２９は、第２のデータベース１３１を（例えば、別々のテーブルやレポートなどとして）含み得る。つまり、情報は、システム設計に応じて、単一のデータベースに記憶すること、または異なる論理、仮想、もしくは物理データベースへと分けることができる。デバイス１０５、１０７、および１０９は、デバイス１０３に関して説明したのと同様のアーキテクチャまたは異なるアーキテクチャを有していてもよい。当業者であれば、例えば、処理負荷を複数のコンピュータに分配したり、地理的な箇所、ユーザのアクセスレベル、サービス品質（ＱｏＳ）などに基づいてトランザクションを分離したりする目的で、本明細書に記載されているデータ処理デバイス１０３（またはデバイス１０５、１０７、もしくは１０９）の機能が複数のデータ処理デバイスに分散され得るということを理解するであろう。

【0024】

１つまたはそれ以上の態様は、本明細書に記載のとおり、１つまたはそれ以上のプログラムモジュールなど、１つまたはそれ以上のコンピュータまたは他のデバイスによって実行されるコンピュータ使用可能もしくは可読データおよび／またはコンピュータ実行可能命令で具現化され得る。一般に、プログラムモジュールとしては、コンピュータまたは他のデバイス内のプロセッサによって実行されるときに、特定のタスクを実施したり、特定の抽象データ型を実装したりするルーチン、プログラム、オブジェクト、構成要素、データ構造体などが挙げられる。モジュールは、実行のために後でコンパイルされるソースコードプログラミング言語で記述され得るか、ハイパーテキストマークアップ言語（ＨＴＭＬ）または拡張マークアップ言語（ＸＭＬ）（これらに限定されない）などのスクリプト言語で記述され得る。

【0025】

コンピュータ実行可能命令は、不揮発性記憶デバイスなどのコンピュータ可読媒体に記憶される。ハードディスク、ＣＤ－ＲＯＭ、光学式記憶デバイス、磁気記憶デバイス、および／またはそれらの任意の組み合わせなど、任意の適切なコンピュータ可読記憶媒体が利用され得る。加えて、本明細書に記載されているデータまたはイベントを表す様々な伝送（非記憶）媒体は、金属線、光ファイバ、および／または無線伝送媒体（例えば、空気および／または空間）などの信号伝導媒体を通過する電磁波という形態で、送信元と送信先との間で転送され得る。本明細書に記載されている様々態様は、方法、データ処理システム、またはコンピュータプログラム製品として具現化され得る。そのため、様々な機能の全体または一部は、ソフトウェア、ファームウェア、および／または、集積回路、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）などのハードウェアもしくはハードウェア等価物で具現化され得る。本明細書に記載されている１つまたはそれ以上の態様をより効果的に実装する目的で、特定のデータ構造体が使用されることができ、かかるデータ構造体は、本明細書に記載されているコンピュータ実行可能命令およびコンピュータ使用可能データの範囲内で企図される。

【0026】

図２をさらに参照すると、本明細書に記載されている１つまたはそれ以上の態様が、リモートアクセス環境で実装されている。図２は、本明細書に記載された１つまたはそれ以上の例示的な態様に従って使用され得る例示的なコンピューティング環境２００内のコンピューティングデバイス２０１を含むシステムアーキテクチャ例を示している。コンピューティングデバイス２０１は、単一サーバまたは複数サーバのデスクトップ仮想化システム（例えば、リモートアクセスまたはクラウドシステム）内のサーバ２０６ａとして使用され、クライアントアクセスデバイスに仮想マシンを提供するように構成することができる。コンピューティングデバイス２０１は、コンピューティングデバイス２０１の動作全体を制御するためのプロセッサ２０３と、ＲＡＭ２０５、ＲＯＭ２０７、入出力（Ｉ／Ｏ）モジュール２０９、およびメモリ２１５など、コンピューティングデバイス２０１の関連構成要素を有していてもよい。

【0027】

Ｉ／Ｏモジュール２０９は、コンピューティングデバイス２０１のユーザが入力を提供する手段であり得るマウス、キーパッド、タッチスクリーン、スキャナ、光学式読取機、および／もしくはスタイラス（または他の入力デバイス（複数であってもよい。以下「複数可」と表示する））を含み得ることに加え、音声出力を提供するための１つまたはそれ以上のスピーカと、テキスト、オーディオビジュアル、および／またはグラフィッカル出力を提供するための１つまたはそれ以上の映像表示デバイスと、も含み得る。

【0028】

ソフトウェアは、本明細書に記載されているような様々な機能を実施するために、コンピューティングデバイス２０１を特殊目的のコンピューティングデバイスへと構成するための命令をプロセッサ２０３に提供する目的で、メモリ２１５および／または他のストレージ内に記憶され得る。例えば、メモリ２１５は、オペレーティングシステム２１７、アプリケーションプログラム２１９、および関連付けられたデータベース２２１など、コンピューティングデバイス２０１で使用されるソフトウェアを記憶することができる。
コンピューティングデバイス２０１は、端末２４０（クライアントデバイスおよび／またはクライアントマシンとも称される）など、１つまたはそれ以上のリモートコンピュータへの接続をサポートする被ネットワーク接続環境で動作することができる。端末２４０は、コンピューティングデバイス１０３もしくは２０１に関して上述した要素の多くまたはすべてを含むパーソナルコンピュータ、モバイルデバイス、ラップトップコンピュータ、タブレット、またはサーバであってもよい。

【0029】

図２に描かれているネットワーク接続は、ローカルエリアネットワーク（ＬＡＮ）２２５およびワイドエリアネットワーク（ＷＡＮ）２２９を含むが、他のネットワークも含み得る。コンピューティングデバイス２０１は、ＬＡＮネットワーク接続環境で使用される場合、ネットワークインターフェースまたはアダプタ２２３を介してＬＡＮ２２５に接続されてもよい。ＷＡＮネットワーク接続環境で使用される場合、コンピューティングデバイス２０１は、コンピュータネットワーク２３０（例えば、インターネット）などのＷＡＮ２２９を経由した通信を確立するためのモデムまたは他のワイドエリアネットワークインターフェース２２７を含んでいてもよい。

【0030】

図示されたネットワーク接続は例示的なものであり、コンピュータ間の通信リンクを確立する他の手段が使用され得るということは理解されよう。コンピューティングデバイス２０１および／または端末２４０は、バッテリ、スピーカ、アンテナ（非図示）など、他の様々な構成要素を含むモバイル端末（例えば、携帯電話、スマートフォン、携帯型情報端末（ＰＤＡ）、ノートパソコンなど）であってもよい。

【0031】

また、本明細書に記載の態様は、数々の他の汎用または特殊目的のコンピューティングシステム環境または構成でも動作可能であってもよい。本明細書に記載の態様で使用するのに適し得る他のコンピューティングシステム、環境、および／または構成の例としては、パーソナルコンピュータ、サーバコンピュータ、ハンドヘルドまたはラップトップデバイス、マルチプロセッサシステム、マイクロプロセッサベースのシステム、セットトップボックス、プログラミング可能家電製品、ネットワークパーソナルコンピュータ（ＰＣ）、ミニコンピュータ、メインフレームコンピュータ、上記のシステムまたはデバイスのいずれかを含む分散コンピューティング環境などが挙げられるが、これらに限定されない。

【0032】

図２に示すとおり、１つまたはそれ以上のクライアントデバイス２４０は、１つまたはそれ以上のサーバ２０６ａ～２０６ｎ（本明細書では概して「サーバ（複数可）２０６」と称される）と通信することができる。コンピューティング環境２００は、サーバ（複数可）２０６とクライアントマシン（複数可）２４０との間に設置されたネットワーク機器を含んでいてもよい。ネットワーク機器は、クライアント／サーバ接続を管理することができ、場合によっては、複数のバックエンドサーバ２０６間でクライアント接続の負荷分散を行うことができる。

【0033】

クライアントマシン（複数可）２４０は、単一クライアントマシン２４０または単一群のクライアントマシン２４０と称されてもよく、サーバ（複数可）２０６は、単一サーバ２０６または単一群のサーバ２０６と称されてもよい。単一クライアントマシン２４０は、１つより多くのサーバ２０６と通信することができ、および／または、単一サーバ２０６は、１つより多くのクライアントマシン２４０と通信することができる。単一クライアントマシン２４０は、単一サーバ２０６と通信することができる。

【0034】

クライアントマシン２４０は、クライアントマシン（複数可）、クライアント（複数可）、クライアントコンピュータ（複数可）、クライアントデバイス（複数可）、クライアントコンピューティングデバイス（複数可）、ローカルマシン、リモートマシン、クライアントノード（複数可）、エンドポイント（複数可）、またはエンドポイントノード（複数可）という非網羅的な用語のうちのいずれか１つによって表現され得る。サーバ２０６は、サーバ（複数可）、ローカルマシン、リモートマシン、サーバファーム（複数可）、またはホストコンピューティングデバイス（複数可）という非網羅的な用語のうちのいずれか１つによって表現され得る。

【0035】

クライアントマシン２４０は、仮想マシンであってもよい。仮想マシンは、任意の仮想マシンであることができ、および／または、仮想マシンは、例えば、シトリックス・システムズ（Ｃｉｔｒｉｘ Ｓｙｓｔｅｍｓ）、ＩＢＭ、ＶＭｗａｒｅ、またはその他任意のハイパーバイザによって開発されたハイパーバイザなど、タイプ１またはタイプ２のハイパーバイザによって管理される任意の仮想マシンであってもよい。いくつかの態様においては、仮想マシンがハイパーバイザによって管理され得るのに対し、他の態様においては、仮想マシンが、サーバ２０６上で実行されるハイパーバイザ、またはクライアント２４０上で実行されるハイパーバイザによって管理され得る。

【0036】

クライアントデバイス２４０は、サーバ２０６または遠隔地にある他のマシン上でリモートで実行されるアプリケーションによって生成されたアプリケーション出力を表示することができる。クライアントデバイス２４０は、アプリケーションウィンドウ、ブラウザ、または他の出力ウィンドウに出力を表示するために、仮想マシンレシーバプログラムまたはアプリケーションを実行することができる。一例において、アプリケーションはデスクトップであるのに対し、他の例においては、アプリケーションが、デスクトップを生成または提示するアプリケーションである。デスクトップは、ローカルおよび／またはリモートのアプリケーションを統合できるオペレーティングシステムのインスタンスにユーザインターフェースを提供するグラフィカルシェルを含む。

【0037】

本明細書で使用されているアプリケーションとは、オペレーティングシステムのインスタンスが（および任意選択でデスクトップも）ロードされた後に実行されるプログラムのことである。

【0038】

サーバ２０６は、リモートプレゼンテーションプロトコルまたは他のプログラムを使用して、クライアント上で実行されるシンクライアントまたはリモートディスプレイアプリケーションにデータを送信し、これによって、サーバ２０６上で実行されるアプリケーションによって生成された表示出力を提示することができる。シンクライアントまたはリモートディスプレイプロトコルは、フロリダ州フォートローダーデールにあるシトリックス・システムズ社（Ｃｉｔｒｉｘ Ｓｙｓｔｅｍｓ， Ｉｎｃ．）が開発したインディペンデントコンピューティングアーキテクチャ（ＩＣＡ）プロトコル、またはワシントン州レドモンドにあるマイクロソフト社（Ｍｉｃｒｏｓｏｆｔ Ｃｏｒｐｏｒａｔｉｏｎ）が製造したリモートデスクトッププロトコル（ＲＤＰ）という非網羅的なプロトコルリスト内のいずれか１つであってもよい。

【0039】

リモートコンピューティング環境は、例えばクラウドコンピューティング環境において、論理的にグループ化されてサーバファーム２０６にまとめられるような１つより多くのサーバ２０６ａ～２０６ｎを含んでいてもよい。サーバファーム２０６は、論理的にグループ化されつつ地理的に分散したサーバ２０６、または論理的にグループ化されつつ互いに近接して所在するサーバ２０６を含んでいてもよい。

【0040】

サーバファーム２０６内で地理的に分散したサーバ２０６ａ～２０６ｎは、ＷＡＮ（ワイド）、ＭＡＮ（メトロポリタン）、またはＬＡＮ（ローカル）を使用して通信することができ、ここで、異なる地理的領域は、異なる大陸、異なる大陸領域、異なる国、異なる州、異なる都市、異なるキャンパス、異なる部屋、または前述の地理的位置の任意の組み合わせとして特徴付けることができる。サーバファーム２０６は、単一の実体として管理されることができ、および／または、サーバファーム２０６は、複数のサーバファームを含むことができる。

【0041】

サーバファームは、略同様のタイプのオペレーティングシステムプラットフォーム（例えば、ＷＩＮＤＯＷＳ（登録商標）、ＵＮＩＸ（登録商標）、ＬＩＮＵＸ、ｉＯＳ、ＡＮＤＲＯＩＤ（登録商標）、ＳＹＭＢＩＡＮなど）を実行するサーバ２０６を含んでいてもよい。サーバファーム２０６は、第１のタイプのオペレーティングシステムプラットフォームを実行する第１の群の１つまたはそれ以上のサーバと、第２のタイプのオペレーティングシステムプラットフォームを実行する第２の群の１つまたはそれ以上のサーバと、を含んでいてもよい。

【0042】

サーバ２０６は、必要に応じて任意のタイプのサーバ、例えば、ファイルサーバ、アプリケーションサーバ、ウェブサーバ、プロキシサーバ、機器、ネットワーク機器、ゲートウェイ、アプリケーションゲートウェイ、ゲートウェイサーバ、仮想化サーバ、展開サーバ、セキュアソケットレイヤ（ＳＳＬ）ＶＰＮサーバ、ファイアウォール、ウェブサーバ、アプリケーションサーバとして構成されていてもよいか、マスターアプリケーションサーバ、アクティブディレクトリを実行するサーバ、もしくはファイアウォール機能、アプリケーション機能、または負荷分散機能を提供するアプリケーション加速プログラムを実行するサーバとして構成されていてもよい。また、他のサーバタイプも使用され得る。
第１のサーバ２０６ａは、クライアントマシン２４０からリクエストを受信することができ、リクエストを第２のサーバ２０６ｂ（非図示）に転送し、第２のサーバ２０６ｂ（非図示）からの応答を使用してクライアントマシン２４０によって生成されたリクエストに応答する。第１のサーバ２０６ａは、クライアントマシン２４０にとって利用可能なアプリケーション一覧と、アプリケーション一覧内で識別されたアプリケーションをホストするアプリケーションサーバ２０６と関連付けられたアドレス情報と、を取得することができる。第１のサーバ２０６ａはその後、ウェブインターフェースを使用してクライアントのリクエストに対する応答を提示することができ、識別されたアプリケーションへのアクセスをクライアント２４０に提供するために、クライアント２４０と直接通信することができる。１つまたはそれ以上のクライアント２４０および／または１つまたはそれ以上のサーバ２０６は、ネットワーク２３０、例えばネットワーク１０１を経由してデータを伝送することができる。

【0043】

図３は、通信セッション例を示している。かかる通信セッションは、例えば、映像通話や音声通話などであることができ、かつリアルタイムであってもよい。ローカルコンピューティングデバイス３０１は、コンピュータネットワーク２３０を介して、リモートコンピューティングデバイス３０４と通信することができる。ローカルコンピューティングデバイス３０１および／またはリモートコンピューティングデバイス３０４は、コンピューティングデバイス２０１と同一または同様であってもよい。ローカルコンピューティングデバイス３０１およびリモートコンピューティングデバイス３０４は、説明の便宜上、ローカルおよびリモートとして区別されているが、互いに任意の特定の距離に所在する必要はない。ローカルコンピューティングデバイス３０１およびリモートコンピューティングデバイス３０４のは両方とも、入力デバイス３０２を有していてもよい。ローカルコンピューティングデバイス３０１用の入力デバイス３０２は、カメラ３０３ａ、マイクロフォン３０３ｂ、および／またはキーボード３０３ｃを備えていてもよい。リモートコンピューティングデバイス３０４用の入力デバイス３０２は、カメラ３０３ｄ、マイクロフォン３０３ｅ、および／またはゲームコントローラ３０３ｆを備えていてもよい。入力デバイス３０２は、Ｉ／Ｏモジュール２０９を備えていてもよく、および／またはＩ／Ｏモジュール２０９の一部であってもよい。

【0044】

ローカルコンピューティングデバイス３０１および／またはリモートコンピューティングデバイス３０４のいずれかまたは両方は、入力デバイス３０２からの入力データを相互に伝送するように構成されていてもよい。例えば、ローカルコンピューティングデバイス３０１は、カメラ３３０ａからの入力データをリモートコンピューティングデバイス３０４に伝送することができ、リモートコンピューティングデバイスは、マイクロフォン３０３ｂからの入力データをローカルコンピューティングデバイス３０１に伝送することができる。

【0045】

ローカルコンピューティングデバイス３０１および／またはリモートコンピューティングデバイス３０４は、表示デバイスやスピーカなどの出力デバイス（非図示）を使用して、かかる入力データをそれぞれのデバイスのユーザに出力するように構成されていてもよい。例えば、ローカルコンピューティングデバイス３０１は、リモートコンピューティングデバイス３０４のカメラ３０３ｄからの映像を備えるインターフェースを表示スクリーン上に表示し得ると共に、ローカルコンピューティングデバイス３０１と通信可能に連結されたスピーカを介して、リモートコンピューティングデバイス３０４のマイクロフォン３０３ｅからの入力データを、ローカルコンピューティングデバイス３０１のユーザに出力することができる。

【0046】

ローカルコンピューティングデバイス３０１および／またはリモートコンピューティングデバイス３０４など、任意のコンピューティングデバイスを介して伝送された入力データは、圧縮、再フォーマット、および／または他の方法で所望どおりに変更され得る。例えば、ローカルコンピューティングデバイスは、映像をリモートコンピューティングデバイス３０４に伝送する前に、カメラ３０３ａからの映像を圧縮および符号化することができる。

【0047】

図３に描かれた通信セッションの性質および品質は、入力デバイス３０２のうちのどれがリモートコンピューティングデバイス３０４および／またはローカルコンピューティングデバイス３０１にとって利用可能であるかに依存することができる。例えば、リモートコンピューティングデバイス３０４は、ローカルコンピューティングデバイス３０１に映像を伝送できるようにするためにウェブカムを接続する必要があり得るデスクトップコンピュータであってもよい。別の例として、ローカルコンピューティングデバイス３０１のマイクロフォン３０３ｂに欠陥があり得る。つまり、マイクロフォン３０３ｂからの入力データは、ローカルコンピューティングデバイス３０１のユーザとリモートコンピューティングデバイス３０４のユーザとの間の通信を困難にするような過度に劣悪な品質を有していてもよい。さらなる別の例として、多くのコンピューティングデバイス（ローカルコンピューティングデバイス３０１および／またはリモートコンピューティングデバイス３０４を含む）は、加速度計を備えていない。つまり、かかる加速度計を含む通信セッション（例えば、かかる加速度計を含むリアルタイムビデオゲーム）で、特殊かつ高価なデバイスをローカルコンピューティングデバイス３０１および／またはリモートコンピューティングデバイス３０４に追加する必要があり得る。

【0048】

通信拡張
図４は、モバイルデバイス４０１を含む通信セッション例を示している。ローカルコンピューティングデバイス３０１、リモートコンピューティングデバイス３０４、および入力デバイス３０２は同じものである。モバイルデバイス４０１は、スマートフォン、タブレット、または他の同様のコンピューティングデバイスであることができ、および／またはコンピューティングデバイス２０１と同一または同様であってもよい。モバイルデバイス４０１は、例えばコンピュータネットワーク２３０を介して、ローカルコンピューティングデバイス３０１に通信可能に接続され得る。追加および／または代替として、モバイルデバイス４０１は、（例えば、ユニバーサルシリアルバス（ＵＳＢ）コードを介して）ローカルコンピューティングデバイス３０１に直接接続され得る。

【0049】

モバイルデバイス４０１は、カメラ４０３ａ、マイクロフォン４０３ｂ、および／または加速度計４０３ｃなど、１つまたはそれ以上の入力デバイス４０２を有していてもよい。入力デバイス４０２は、入力デバイス３０２と同一または同様であってもよい。入力デバイス４０２は、音声デバイス、映像デバイス、ゲームコントローラなどの入力デバイスタイプと関連付けられ得る。例えば、モバイルデバイス４０１がスマートフォンであれば、１つまたはそれ以上のカメラ（例えば、前面カメラおよび背面カメラ）とマイクロフォンとを有していてもよい。モバイルデバイス４０１は、入力デバイス４０２からの入力データを、例えばコンピュータネットワーク２３０経由で、ローカルコンピューティングデバイス３０１および／またはリモートコンピューティングデバイス３０４に伝送するように構成されていてもよい。例えば、モバイルデバイス４０１は、ローカルコンピューティングデバイス３０１との音声通信セッションを確立するように構成されることができ、モバイルデバイス４０１は、ユーザの声を入力データとしてマイクロフォン４０３ｂからローカルコンピューティングデバイス３０１に伝送する。別の例として、モバイルデバイス４０１は、モバイルデバイス上で実行されるウェブブラウザを使用して、タッチ入力および／またはカメラ４０３ａからの映像データを伝送するように構成されていてもよい。

【0050】

ローカルコンピューティングデバイス３０１は、モバイルデバイス４０１からの入力データをリモートコンピューティングデバイス３０４に伝送するように構成されていてもよい。さらに後述するとおり、ローカルコンピューティングデバイス３０１は、それによって、モバイルデバイス４０１からの入力データを使用して、接続された物理入力デバイスの存在を複製することができる。例えば、モバイルデバイス４０１は、コンピュータネットワーク２３０経由で、カメラ４０３ａからの入力データをローカルコンピューティングデバイス３０１に伝送することができ、ローカルコンピューティングデバイス３０１は、入力データをリモートコンピューティングデバイス３０４に伝送することができる。
図５は、入力デバイス４０２からの入力データがモバイルデバイス４０１からローカルコンピューティングデバイス３０１へと流れる通信セッション例を示している。ローカルコンピューティングデバイス３０１は、仮想入力デバイス５０１を有して構成されていてもよい。仮想入力デバイス５０１は、入力デバイス４０２などの入力デバイスの存在をエミュレートし得るソフトウェアおよび／またはハードウェアであってもよい。かかるエミュレーションは、コンピューティングデバイスに接続された物理入力デバイスを複製することができる。例えば、かかるエミュレーションは、コンピューティングデバイスに接続された入力デバイス（例えば、モバイルデバイス４０１上の入力デバイス）の機能を、異なるコンピューティングデバイス（例えば、ローカルコンピューティングデバイス３０１）上で提供することを含んでいてもよい。

【0051】

仮想入力デバイス５０１は、より大きなソフトウェアスイート（例えば、映像会議アプリケーション）の一部であることができ、および／またはスタンドアロンのソフトウェア（例えば、ドライバまたはコンピュータプログラム）であってもよい。例えば、仮想入力デバイス５０１は、１つまたはそれ以上のドライバであることができ、この１つまたはそれ以上のドライバは、カメラ４０３ａおよび／またはマイクロフォン４０３ｂの存在を複製するローカルコンピューティングデバイス３０１のオペレーティングシステムにインストールされている。仮想入力デバイス５０１は、入力デバイス４０２に基づいて１つまたはそれ以上の入力デバイスをエミュレートするように構成されていてもよい。例えば、仮想入力デバイス５０１は、モバイルデバイス４０１がどの入力デバイスを有するかを判断することができ、その後、ローカルコンピューティングデバイス３０１上の入力デバイスの機能を、ローカルコンピューティングデバイスに直接接続されている物理入力デバイスであるかのように複製することにより、各入力デバイスをエミュレートすることができる。仮想入力デバイス５０１は、複数の入力デバイスを同時にエミュレートすることができ、その結果、例えば、仮想入力デバイス５０１は、（例えば、モバイルデバイス４０１のカメラ４０３ａおよびマイクロフォン４０３ｂから）映像および音声の両方を受信および／または伝送することができる。

【0052】

なお、仮想入力デバイス５０１は、メディアエンジン５０３ａおよび通信エンジン５０３ｂを備えていてもよい。通信エンジン５０３ｂは、入力デバイス４０２からの入力データをローカルコンピューティングデバイス３０１に伝送するようモバイルデバイスに促すために、モバイルデバイス４０１の通信エンジン５０４ｂとの通信を確立するなどして、モバイルデバイス４０１との通信を確立するように構成されていてもよい。例えば、通信エンジン５０３ｂは、モバイルデバイス４０１上で実行されるウェブブラウザを介してモバイルデバイス４０１がアクセスするＵＲＬを通信エンジン５０４ｂに伝送するように構成されていてもよい。別の例として、通信エンジン５０３ｂは、ローカルコンピューティングデバイス３０１をモバイルデバイス４０１に対して認証するか、またはその逆を行うように構成されていてもよい。通信エンジン５０３ｂは、仮想入力デバイス５０１に対応するウェブページを生成するように構成されたハイパーテキスト転送プロトコル（ＨＴＴＰ）サーバを備えていてもよい。例えば、通信エンジン５０３ｂは、モバイルデバイス４０１からローカルコンピューティングデバイス３０１への入力データの転送を開始するためにモバイルデバイス４０１によってアクセスされ得るＷｅｂＲＴＣプロトコル準拠のウェブページを生成するように構成されていてもよい。

【0053】

ローカルコンピューティングデバイス３０１のメディアエンジン５０３ａは、モバイルデバイス４０１のメディアエンジン５０４ａから、入力デバイス４０２からの入力データを受信するように構成されていてもよい。例えば、メディアエンジン５０３ａは、入力データを受信するように構成されたソフトウェアを備えていてもよく、メディアエンジン５０４ａは、ＷｅｂＲＴＣプロトコルを使用して入力データを送信するように構成されたソフトウェアを備えていてもよい。

【0054】

メディアエンジン５０４ａは、入力デバイス４０２からの入力データをメディアエンジン５０３ａに送信する前に、かかる入力データを処理および／またはフォーマットするように構成されていてもよい。入力データは、例えば、帯域幅を節約したり、出力デバイス５０２を介した出力用に入力データをフォーマットしたりするために、符号化され、および／または他の方法で圧縮された上で伝送され得る。例えば、ローカルコンピューティングデバイス３０１は、映像を備える入力データを特定の映像コーデックを用いて符号化するリクエストを、通信エンジン５０３ｂを介して通信エンジン５０４ｂに伝送することができる。別の例として、メディアエンジン５０４ａは、メディアエンジン５０３ａへの入力データの伝送を改善するために、限られた量の帯域幅、および／または閾値を超える遅延を有するネットワーク（例えば、コンピュータネットワーク２３０）に基づき、入力デバイス４０２からの入力データを圧縮して伝送することができる。

【0055】

メディアエンジン５０３ａによって受信された入力データ、およびメディアエンジン５０４ａからの入力データは、ローカルコンピューティングデバイス３０１の出力デバイス５０２に提供され得る。ローカルコンピューティングデバイス３０１の出力デバイス５０２は、表示スクリーン、スピーカ、または出力用に構成された他のデバイスを備えていてもよい。例えば、ローカルコンピューティングデバイス３０１は、カメラ４０３ａからの映像データを、メディアエンジン５０４ａおよびメディアエンジン５０３ａを介して受信することができ、出力デバイス５０２の表示スクリーンに映像データを表示させることができる。別の例として、ローカルコンピューティングデバイス３０１は、マイクロフォン４０３ｂからの音声データを、メディアエンジン５０４ａおよびメディアエンジン５０３ａを介して受信することができ、出力デバイス５０２の１つまたはそれ以上のスピーカを使用して音声データを出力することができる。

【0056】

ローカルコンピューティングデバイス３０１によって受信された入力データは、出力デバイス５０２を介して出力される前に、フォーマット、配置、および／または他の形で修正され得る。例えば、ローカルコンピューティングデバイス３０１は、映像会議における異なるユーザにそれぞれが対応する複数の映像フィードを表示することができ、映像フィードのうちの１つは、カメラ４０３ａから受信した入力データを符号化した小型版であってもよい。別の例として、メディアエンジン５０４ａからメディアエンジン５０３ａに送信された、マイクロフォン４０３ｂからの入力データは、音声会議における不本意なノイズを低減するために、１つまたはそれ以上のノイズフィルタに通されてもよい。

【0057】

通信エンジン５０３ｂおよび通信エンジン５０４ｂは、ローカルコンピューティングデバイス３０１とモバイルデバイス４０１との間の通信（例えば、メディアエンジン５０４ａからメディアエンジン５０３ａへの入力データの伝送）を管理するように構成されていてもよい。例えば、通信エンジン５０３ｂおよび通信エンジン５０４ｂは、ローカルコンピューティングデバイス３０１とモバイルデバイス４０１との間のセッションをインスタンス化および／または管理することができる。別の例として、通信エンジン５０４ｂは、入力デバイス４０２の各入力デバイスのリストを通信エンジン５０３ｂに伝送することができる。さらに別の例として、通信エンジン５０３ｂは、音声および／または映像入力データを求めるリクエストを通信エンジン５０４ｂに伝送することができる。

【0058】

通信アプリケーション６０１のユーザの観点からの例として、ユーザはまず、自分のスマートフォン（例えば、モバイルデバイス４０１）を使用して、ローカルコンピューティングデバイス３０１の表示スクリーンに表示されたバーコードをスキャンすることができる。バーコードをスキャンしたことを受けて、ユーザのスマートフォンは、ウェブブラウザを使用して、ユーザのスマートフォンとローカルコンピューティングデバイス３０１との間のＷｅｂＲＴＣ接続を初期化するウェブページ（例えば、ローカルコンピューティングデバイス上で実行されるもの）へとナビゲートすることができる。このＷｅｂＲＴＣ接続により、ユーザはその後、スマートフォンからローカルコンピューティングデバイス３０１に映像および／または音声を送信できるようになり得る。このようにして、ユーザのスマートフォンは、特殊なアプリケーションではなく、標準的なウェブブラウザを使用して、ローカルコンピューティングデバイス３０１との通信を確立することができる。

【0059】

図６は、ローカルコンピューティングデバイス３０１およびモバイルデバイス４０１に関するシーケンス図を示している。ローカルコンピューティングデバイスは、映像および／または音声会議アプリケーションやビデオゲームなど、通信を実施するように構成された通信アプリケーション６０１を実行することができる。モバイルデバイス４０１は、ウェブブラウザ６０２などのアプリケーションを有して構成されていてもよい。図６には、ローカルコンピューティングデバイス３０１および／またはモバイルデバイス４０１の要素間に矢印が示されているが、かかる要素間で特定のフォーマットまたはデータを伝送する必要はない。

【0060】

ステップ６０３で、通信アプリケーション６０１は、仮想入力デバイス５０１をロードすることができる。仮想入力デバイス５０１は、ローカルコンピューティングデバイスに接続された入力デバイスをエミュレートするようにロードされ得る。仮想入力デバイス５０１をロードすることは、仮想入力デバイス５０１を、ローカルコンピューティングデバイス３０１のオペレーティングシステムに、および／またはローカルコンピューティングデバイス３０１上で実行されるソフトウェアに入力デバイスとして提示させることを含んでいてもよい。仮想入力デバイス５０１をロードすることは、入力デバイス４０２をオペレーティングシステムに、および／またはローカルコンピューティングデバイス３０１上で実行されるソフトウェアに登録することを含んでいてもよい。仮想入力デバイス５０１をロードすることは、入力デバイス４０２のうち、ローカルコンピューティングデバイス３０１上でエミュレートする１つまたはそれ以上の入力デバイスを決定することを含んでいてもよい。例えば、ローカルコンピューティングデバイス３０１は、入力デバイス４０２のリストをモバイルデバイス４０１に照会することができ、そのリストに基づいて、ローカルコンピューティングデバイス３０１で１つまたはそれ以上の入力デバイスをエミュレートすることができる。

【0061】

仮想入力デバイス５０１をロードすることは、メディアエンジン５０３ａおよび／または通信エンジン５０３ｂを初期化することを含んでいてもよい。メディアエンジン５０３ａおよび／または通信エンジン５０３ｂの初期化は、１つまたはそれ以上のエミュレートされた入力デバイスを仮想入力デバイス５０１のオペレーティングシステムに表示することを含んでいてもよい。メディアエンジン５０３ａおよび／または通信エンジン５０３ｂの初期化は、ローカルコンピューティングデバイス３０１上で実行される１つまたはそれ以上のアプリケーションによって行われ得る。例えば、ローカルコンピューティングデバイス３０１で電話会議アプリケーションを実行すると、メディアエンジン５０３ａおよび／または通信エンジン５０３ｂが初期化され得る。

【0062】

ステップ６０４ａで、仮想入力デバイス５０１は、通信アプリケーション６０１を介してバーコードを表示することができる。バーコードは、出力デバイス５０２の一部であり得る表示デバイスを介して表示され得る。バーコードは、日本の愛知県知多郡にあるデンソーウェーブ社（Ｄｅｎｓｏ Ｗａｖｅ Ｃｏｒｐｏｒａｔｉｏｎ）によるクイックレスポンス（ＱＲ）コードなど、１次元または２次元のバーコードであってもよい。バーコードは、仮想入力デバイス５０１および／またはローカルコンピューティングデバイス３０１の一意のＵＲＬまたは識別子などの情報を含んでいてもよい。例えば、仮想入力デバイス５０１は、ローカルコンピューティングデバイス３０１上で、特定のＵＲＬおよび／またはインターネットプロトコル（ＩＰ）アドレスにおいてＨＴＴＰサーバをインスタンス化することができ、ＨＴＴＰサーバを介して仮想入力デバイス５０１に対応するウェブページを表示することができ、特定のＵＲＬおよび／またはＩＰアドレスを含むバーコードを表示することができる。ステップ６０４ａはバーコードに関して記載されているが、仮想入力デバイス５０１および／またはローカルコンピューティングデバイス３０１についての他の明示が表示され得る。例えば、仮想入力デバイス５０１と関連付けられた短縮ＵＲＬが表示され得る。別の例として、ローカルコンピューティングデバイス３０１と関連付けられたＩＰアドレスが表示され得る。

【0063】

ステップ６０４ｂでは、モバイルデバイス４０１が、ウェブブラウザ６０２を使用して、ステップ６０４ａで表示されたバーコードを、例えばカメラ４０３ａを使用してスキャンすることができる。ローカルコンピューティングデバイス３０１およびモバイルデバイス４０１によって、かかるバーコードを使用することには、モバイルデバイス４０１のユーザが、かかる詳細を手動で入力する必要性が回避されるという利点があり得る。追加または代替として、ステップ６０４ａおよび６０４ｂは飛ばしてもよく、ユーザが、仮想入力デバイス５０１および／またはローカルコンピューティングデバイス３０１の一意の識別子を入力するように促されてもよい（例えば、ユーザが、仮想入力デバイス５０１および／またはローカルコンピューティングデバイス３０１に対応するＵＲＬをウェブブラウザ６０２に入力するように手動で促されてもよい）。

【0064】

ステップ６０５ａで、仮想入力デバイス５０１は、メディアエンジン５０３ａを初期化する。ステップ６０５ｂで、仮想入力デバイス５０１は、通信エンジン５０３ｂを初期化する。ステップ６０５ｃで、ウェブブラウザ６０２は、通信エンジン５０４ｂを初期化する。ステップ６０５ｄで、ウェブブラウザ６０２は、メディアエンジン５０４ａを初期化する。ステップ６０５ａ、ステップ６０５ｂ、ステップ６０５ｃ、およびステップ６０５ｄというこの特定の順序は、図６に示す順序である必要はない。例えば、メディアエンジン５０３ａは、最初または最後に初期化されたり、メディアエンジン５０４ａに対して任意の関係で初期化されたりすることができる。初期化は、メディアエンジン５０３ａ、通信エンジン５０３ｂ、メディアエンジン５０４ａ、および／または通信エンジン５０４ｂを、ローカルコンピューティングデバイス３０１および／またはモバイルデバイス４０１についての情報を有して構成することを含んでいてもよい。初期化は、メディアエンジン５０３ａ、通信エンジン５０３ｂ、メディアエンジン５０４ａ、および／または通信エンジン５０４ｂを、入力デバイス４０２のうちの１つまたはそれ以上の識別情報など、入力デバイス４０２についての情報を有して構成することを含んでいてもよい。

【0065】

メディアエンジン５０４ａおよび／または通信エンジン５０４ｂの初期化は、ウェブブラウザ６０２によってアクセスされたウェブページに基づいてもよく、ステップ６０４ｂでスキャンされたバーコードに基づいてもよい。仮想入力デバイス５０１は、モバイルデバイス４０１をして、メディアエンジン５０４ａおよび／または通信エンジン５０４ｂを初期化させるウェブページへと、バーコードを介してアクセスさせ得る。メディアエンジン５０４ａおよび／またはメディアエンジン５０３ａの初期化が、ＪＡＶＡＳＣＲＩＰＴ（登録商標）および／またはＷｅｂＲＴＣなどのプログラミング言語を使用して実施され得るのに対し、通信エンジン５０４ｂおよび／または通信エンジン５０３ｂの初期化は、ウェブソケット（ｗｅｂｓｏｃｋｅｔ）の使用を含んでいてもよい。それにより、メディアエンジン５０４ａおよび／または通信エンジン５０４ｂの初期化が、モバイルデバイス４０１のウェブブラウザ６０２を使用して実施されることができ、その結果、モバイルデバイス４０１は、ウェブページにアクセスしてステップを実施し得るため、特別にインストールされたソフトウェアを備える必要がない。モバイルデバイス４０１がアクセスするウェブページは、ローカルコンピューティングデバイス３０１により、例えばＨＴＴＰサーバソフトウェアを介してホストされ得る。そのため、ステップ６０４ａでローカルコンピューティングデバイスによって表示されるバーコードは、ローカルコンピューティングデバイス３０１のＵＲＬおよび／またはＩＰアドレスに対応することができ、そのＵＲＬおよび／またはＩＰアドレス自体が、モバイルデバイス４０１をしてメディアエンジン５０４ａおよび／または通信エンジン５０４ｂを初期化させるウェブページに対応することができる。

【0066】

ステップ６０６では、通信エンジン５０３ｂと通信エンジン５０４ｂとの間でシグナリングが実施され得る。シグナリングは、入力デバイス４０２、仮想入力デバイス５０１、ローカルコンピューティングデバイス３０１、および／またはモバイルデバイス４０１についての情報を交換することを含んでいてもよい。かかる情報は、例えば、入力データが利用可能であるという明示を備えていてもよい。例えば、ローカルコンピューティングデバイス３０１は、モバイルデバイス４０１に対して認証することができ、入力デバイス４０２のうち、仮想入力デバイス５０１を介して受信およびエミュレートする１つまたはそれ以上の入力デバイスを決定することができる。別の例として、ローカルコンピューティングデバイス３０１は、通信アプリケーション６０１が実行を停止し、入力デバイス４０２からの入力データが不要となったという明示をモバイルデバイス４０１に伝送することができる。かかるシグナリングは、例えばセッション記述プロトコル（ＳＤＰ）を介してプロトコルデータを交換することを含んでいてもよい。

【0067】

ステップ６０７では、入力デバイス４０２のうちの１つまたはそれ以上が初期化され得る。初期化は、入力デバイス４０２のうちの１つまたはそれ以上からの入力データの受信を活性化させるか、他の形で開始するための任意のステップを含んでいてもよい。例えば、初期化は、カメラ４０３および／またはマイクロフォン４０３ｂを活性化させることと、かかる入力デバイスから入力データのストリームを受信し始めることと、を含んでいてもよい。初期化は、モバイルデバイス４０１上で実行されるオペレーティングシステムが入力デバイス４０２からの入力データを受信するのに必要とする任意のステップを含んでいてもよい。例えば、モバイルデバイス４０１がセキュリティ機能を備えたスマートフォンである場合、モバイルデバイス４０１のユーザは、ウェブブラウザ６０２により、カメラ４０３へのアクセスを手動で承認する必要があることがある。

【0068】

ステップ６０８ａ、ステップ６０８ｂ、ステップ６０８ｃ、およびステップ６０８ｄで、入力データは、モバイルデバイス４０１の入力デバイス４０２からローカルコンピューティングデバイス３０１の通信アプリケーション６０１へとストリームで送信され得る。ステップ６０８ａで、入力データは、入力デバイス４０２からメディアエンジン５０４ａへと送信され得る。ステップ６０８ｂで、入力データは、モバイルデバイス４０１のメディアエンジン５０４ａからローカルコンピューティングデバイス３０１のメディアエンジン５０３ａへと送信され得る。ステップ６０８ｃで、入力データは、メディアエンジン５０３ａから仮想入力デバイス５０１へと送信され得る。ステップ６０８ｄで、仮想入力デバイス５０１は、入力データを通信アプリケーション６０１に送信することができる。これにより、通信アプリケーション６０１は、入力データを、ローカルコンピューティングデバイス３０１に物理的に接続されている入力デバイスが起点であるかのように扱うことができる。このようにして、ローカルコンピューティングデバイス３０１上で実行されるアプリケーションは、モバイルデバイス４０１から入力データを取得するように特別に構成される必要がなくなる。

【0069】

図７は、映像会議通話を示す表示デバイス７０１を表している。表示デバイス７０１は、以下に詳述するとおり、同じ部屋にいる複数のユーザが、別のコンピューティングデバイス（例えば、リモートコンピューティングデバイス３０４）との通信を確立するために通信アプリケーション６０１にアクセスできるように構成されていてもよい。表示デバイス７０１は、ローカルコンピューティングデバイス３０１の出力デバイス５０２の一部であってもよい。表示デバイス７０１は、通信アプリケーション６０１の出力を表示することができる。

【0070】

図６に描かれたステップに基づき、モバイルデバイス４０１からの映像は、モバイルデバイス７０４ａからの映像として表示デバイス７０１に表示される。第２のモバイルデバイス７０２ａ、第３のモバイルデバイス７０２ｂ、および第４のモバイルデバイス７０２ｃも表示され、ひいては、第２のモバイルデバイス７０４ｂからの映像、第３のモバイルデバイス７０４ｃからの映像、および第４のモバイルデバイス７０４ｄからの映像が、表示デバイス７０１に表示される。第５のモバイルデバイス７０２ｄは、通信アプリケーション６０１に接続でき得るが、まだ通信アプリケーション６０１に接続していない場合がある。表示デバイス７０１にはバーコード７０３も表示されており、図６に示すステップと同様のステップを実施して、入力データ（例えば、第５のモバイルデバイス７０２ｄからのカメラデータ）をローカルコンピューティングデバイス３０１に伝送し、これによって表示デバイス７０１に表示するために、バーコード７０３が第５のモバイルデバイス７０２ｄでスキャンされ得る。その入力データはまだ表示されていないが、モバイルデバイス７０４ａからの映像、第２のモバイルデバイス７０４ｂからの映像、第３のモバイルデバイス７０４ｃからの映像、および第４のモバイルデバイス７０４ｄからの映像と共に表示デバイス７０１に表示され得る。

【0071】

表示デバイス７０１は、同じ部屋にいる複数のユーザが、追加の機器を（例えば、ローカルコンピューティングデバイス３０１に対して）接続および／または設定することなく、通信アプリケーション６０１にアクセスできるように構成されていてもよい。例えば、通信アプリケーション６０１がビデオゲームである場合、既存のプレイヤーの映像ストリーム（例えば、モバイルデバイス７０４ａからの映像）と共に表示デバイス７０１上にバーコードを配置することにより、他のユーザによってアクティビティが中断されることなく、かつ通信アプリケーション６０１を実行するコンピューティングデバイスに追加の入力デバイスを直接差し込む必要なく、ユーザが自身を通信アプリケーション６０１に追加でき得るという利点がある。別の例として、通信アプリケーション６０１は、通信アプリケーション６０１を実行するコンピューティングデバイスに追加のマイクロフォンおよび／またはカメラを接続することなく、出席者が（例えば、スマートフォンを使用して）参加し得る即興の会合を可能にし得るオンライン会議アプリケーションであってもよい。

【0072】

図８は、ローカルコンピューティングデバイス３０１に複数のモバイルデバイスが接続されている映像会議通話を示している。図８に描かれた映像会議通話は、図７に示されたものと同一または同様であり得るため、例えば、モバイルデバイス４０１、第２のモバイルデバイス７０２ａ、第３のモバイルデバイス７０２ｂ、および第４のモバイルデバイス７０２ｃは、図７に示されたものと同じであってもよい。モバイルデバイス４０１、第２のモバイルデバイス７０２ａ、第３のモバイルデバイス７０２ｂ、および第４のモバイルデバイス７０２ｃなど複数のモバイルデバイスが、ローカルコンピューティングデバイス３０１の仮想入力デバイス５０１のメディアエンジン５０３ａに接続することができる。例えば、メディアエンジン５０３ａは、異なるモバイルデバイスとそれぞれ関連付けられた複数のピア接続を維持することができ、それにより、複数の異なるモバイルデバイスから入力データを同時に受信することができる。

【0073】

ローカルコンピューティングデバイス３０１の出力デバイス５０２の一部として、入力データ作成装置８０１が示されている。入力データ作成装置８０１は、複数組の入力データ（例えば、異なるモバイルデバイスからの複数の映像ストリーム）を収集し、出力デバイス５０２を介した提示および／または出力のためにその入力データをまとめるように構成されていてもよい。例えば、入力データ作成装置８０１は、図７に示す方法などで、複数の映像ストリームを収集するように、かつ電話会議用にそれらがすべて同時に参照できるよう配置するように構成されていてもよい。特定の例として、入力データ作成装置８０１は、映像を備える複数の入力ストリームを受信することができ、表示デバイス７０１上の利用可能なスペースを入力ストリームの数で分割することができ、各入力ストリームを表示デバイス７０１の異なる部分に表示することができる。別の例として、入力データ作成装置８０１は、あるモバイルデバイスからの音声が発話を示したことに基づき、他のモバイルデバイスからの音声の音量を下げる（ただし出力はする）ように構成されていてもよい。例えば、入力データ作成装置８０１は、音声（例えば、話し声の音声）を備える複数組の入力データを受信することができ、すべての音声が同時に出力されたときに略同じ音量になるように、それぞれの組の入力データのゲインを修正することができる。このようにして、入力データ作成装置８０１および／またはメディアエンジン５０３ａにおける複数のピア接続は、複数組の入力データの受信および出力を容易にすることができ、その結果、単一のコンピューティングデバイス（例えば、ローカルコンピューティングデバイス３０１）は、複数の映像ストリーム、音声ストリーム、または他の同様の入力データを同時に提示および／または出力することができる。

【0074】

図９は、ローカルコンピューティングデバイス３０１によって実施され得るフローチャート例である。ステップ９０１では、仮想入力デバイス５０１などの仮想入力デバイスが初期化され得る。初期化は、仮想入力デバイスと関連付けられた実行可能プログラムまたはソフトウェアを稼働すること、および／または仮想入力デバイス５０１をローカルコンピューティングデバイス３０１が利用できるようにすること、を含んでいてもよい。初期化により、仮想入力デバイス５０１が、１つまたはそれ以上の入力デバイスの存在をエミュレートすることができる。

【0075】

ステップ９０２では、モバイルデバイス４０１および／またはモバイルデバイス７０２ａ～７０２ｄなど、１つまたはそれ以上のモバイルデバイスとの接続が確立され得る。接続は、コンピュータネットワーク２３０などのネットワークを介して行われ得る。接続は、仮想入力デバイス５０１を介して確立されることができ、および／またはＷｅｂＲＴＣなどのプロトコルを介して確立され得る。接続は、ローカルコンピューティングデバイス３０１とモバイルデバイス（複数可）との間の通信を認証および／または暗号化する１つまたはそれ以上のメッセージを備えていてもよい。接続は、通信エンジン５０４ｂおよび／または通信エンジン５０３ｂを介して確立され得る。接続を確立することは、（例えば、ＨＴＴＰサーバを実行してウェブページを利用可能にすることにより、）仮想入力デバイス５０１と関連付けられたウェブページを初期化することを含んでいてもよい。接続を確立することは、ウェブページの箇所についての明示（例えば、ウェブページと関連付けられたＵＲＬを含むバーコード）を生成および／または表示することを含んでいてもよい。

【0076】

ステップ９０３では、モバイルデバイス（複数可）から入力データが受信され得る。入力データは、入力デバイス４０２を介して受信されることができ、メディアエンジン５０４ａを介して伝送されることができ、および／またはメディアエンジン５０３ａによって受信されることができ、および／または出力デバイス５０２によって出力され得る。入力データは、メディアエンジン５０３ａによって受信されたときに、（例えば、メディアエンジン５０４ａによって）処理および／またはフォーマットされることができ、および／またはメディアエンジン５０４ａによって受信およびフォーマットされ得る。入力データをフォーマットすることは、入力データの想定用途に基づき得る。例えば、入力データが、映像会議アプリケーションによって使用される映像データを備える場合、映像データは、映像会議アプリケーションによって使用され得るコーデックを用いて符号化され得る。入力データは、ステップ９０２で接続を確立するのに使用されたプロトコルとは異なるプロトコル内にあり得る。例えば、ステップ９０２で確立された接続がＨＴＴＰ接続を介し得るのに対し、入力データはＷｅｂＲＴＣを介して伝送され得るため、モバイルデバイスの典型的なウェブブラウザで容易に利用可能なプロトコルが使用され得る。入力データは、モバイルデバイス（複数可）上で実行されるウェブブラウザを介して受信され得る。仮想入力デバイス５０１には、複数の異なるモバイルデバイスが接続され得ることから、仮想入力デバイス５０１は、モバイルデバイスのうち、どのモバイルデバイスから入力データを受信するかに基づいて入力データを受信および分離するように構成されていてもよい。例えば、モバイルデバイス４０１のメディアエンジン５０４ａは、入力デバイスによって生成された入力データに、モバイルデバイス４０１を一意に識別する情報を挿入することができる。追加および／または代替として、メディアエンジン５０３ａは、入力データと関連付けられたセッションであって、通信エンジン５０３ｂによって確立されたセッションに基づき、受信した入力データをタグ付けすることができる。

【0077】

ステップ９０４では、受信した入力データを異なるコンピューティングデバイスに伝送すべきかどうかが決定され得る。仮想入力デバイスを実行するコンピューティングデバイスは、受信した入力データを（例えば、コンピューティングデバイスに接続された表示デバイス上で）自ら出力することができ、および／または入力データを異なるコンピューティングデバイスに（例えば、ネットワーク経由で、通信アプリケーションを実行するサーバに）伝送することができる。答えが「はい」であれば、ステップ９０５で、入力データは、（例えば、リモートコンピューティングデバイス３０４など、異なるコンピューティングデバイスに、かつコンピュータネットワーク２３０経由で）伝送され得る。例えば、入力データは、電話会議アプリケーションを実行するリモートサーバに伝送されることができ、その結果、電話会議アプリケーションによって入力データが使用され得る。そうでなければ、ステップ９０６で、入力データが（例えば、出力デバイス５０２を使用して）出力され得る。例えば、入力データを受信したコンピューティングデバイスは、自ら電話会議アプリケーションを実行中であることができ、その結果、受信した入力データは、さらに伝送されることなくコンピューティングデバイスによって出力され得る。

【0078】

図１０は、ローカルコンピューティングデバイス３０１により、かつ複数のモバイルデバイスに関して実施され得るフローチャート例である。ステップ１００１は、ステップ９０１と同一または同様であってもよい。ステップ１００２は、ステップ９０２と同一または同様であることができ、ステップ１００１で、ローカルコンピューティングデバイス３０１は、複数の異なるモバイルデバイスとの接続を確立することができる。例えば、モバイルデバイスは、会議室などにあるモバイルデバイス４０１および／またはモバイルデバイス７０２ａ～７０２ｄであってもよい。ステップ９０３と同一または同様であり得るステップ１００３で、複数組の入力データは、異なるモバイルデバイスから受信され得る。ステップ１００４では、ステップ１００３で受信した複数組の入力データがまとめられ得る。複数組の入力データをまとめることは、例えば入力データ作成装置８０１により、入力データの音声および／または映像をまとめて単一の出力ストリームにすることを含んでいてもよい。例えば、複数の映像ストリームは、単一の映像ストリームが表示されるように出力ディスプレイ上に配置されることができ、複数の映像ストリームのそれぞれは、単一の映像ストリームの異なる部分を備える。別の例として、複数の音声ストリームは、スピーカによる出力のために単一の音声ストリームにまとめられ得る。ステップ９０４、ステップ９０５、およびステップ９０６と同一または同様であり得るステップ１００５、ステップ１００６、およびステップ１００７で、まとめられた入力データは、異なるコンピューティングデバイスに伝送されることができ、および／または出力され得る。

【0079】

図１１は、ローカルコンピューティングデバイス３０１などのローカルコンピューティングデバイスによって実施され得るフローチャートである。ステップ１１０１において、ローカルコンピューティングデバイスは、モバイルデバイス４０１および／またはモバイルデバイス７０２ａ～７０２ｄなどのモバイルデバイスから入力データを受信するように構成されていてもよいウェブページを生成することができる。ウェブページの生成は、例えば、モバイルデバイス上で実行されるウェブブラウザを使用して、１つまたはそれ以上のモバイルデバイスによってアクセスされ得るサーバ（例えば、ＨＴＴＰサーバ）を実行することを含んでいてもよい。ウェブページは、モバイルデバイスをして、例えばＷｅｂＲＴＣプロトコルを介して入力データを伝送させるコードを備えていてもよい。

【0080】

ステップ１１０２で、ローカルコンピューティングデバイスは、ウェブページについての明示を表示することができる。明示は、例えば、ウェブページのＵＲＬおよび／または他の識別子を含むバーコードであることができ、モバイルデバイスがバーコードを使用してウェブページを見つけられるようになっている。かかるバーコードは、１次元や２次元などであってもよい。追加および／または代替として、明示は、ウェブページと関連付けられた短縮ＵＲＬおよび／またはＩＰアドレスであってもよい。

【0081】

ステップ１１０３で、ローカルコンピューティングデバイスは、ウェブページを介して、かつモバイルデバイスから、入力データを受信することができる。ステップ１１０３は、ステップ９０３および／または１００３と同一または同様であってもよい。入力データは、メディアエンジン５０３ａおよび／またはメディアエンジン５０４ａを介して受信され得る。入力データは、ＷｅｂＲＴＣなどのプロトコルを介して受信されることができ、ローカルコンピューティングデバイスが、モバイルデバイス上で実行されるウェブブラウザを介して入力データを受信できるようになっている。ステップ９０４、ステップ９０５、および／もしくはステップ９０６と同一または同様であり得るステップ１１０４、ステップ１１０５、およびステップ１１０６、ならびに／またはステップ１００５、ステップ１００６、および／もしくはステップ１００７で、入力データは、異なるコンピューティングデバイスに伝送されることができ、および／または出力され得る。

【0082】

図１２は、モバイルデバイス４０１などのモバイルデバイスによって実施され得るフローチャートである。ステップ１２０１で、モバイルデバイスは、ウェブページについての明示を判断することができる。ウェブページについての明示を判断することは、例えば、ユーザが入力デバイスを使用してモバイルデバイスにＵＲＬおよび／もしくはＩＰアドレスを手動で入力することにより、ならびに／または、ＵＲＬおよび／もしくはＩＰアドレスを含むバーコードをスキャンすることにより、ウェブページのＵＲＬ、またはウェブページと関連付けられたＩＰアドレスを受信することを含んでいてもよい。

【0083】

ステップ１２０２で、モバイルデバイスは、ウェブページをロードすることができ、ステップ１２０３で、モバイルデバイスは、コンピューティングデバイスと、ウェブページを介して、通信を確立することができる。ウェブページをロードすることは、モバイルデバイスで実行されるウェブブラウザでウェブページをロードすることを含んでいてもよい。ウェブページは、モバイルデバイス上で実行されるウェブブラウザを介して実行され得るコード（例えば、ＷｅｂＲＴＣコマンドや、ＪＡＶＡＳＣＲＩＰＴ（登録商標）などのプログラミング言語など）を備えていてもよい。ウェブページ（例えば、ウェブページ上のコード）を使用して、モバイルデバイスは、コンピューティングデバイスとの通信を確立（例えば、ローカルコンピューティングデバイス３０１の通信エンジン５０３ｂとの通信を確立）することができる。ステップ１２０２でロードされたウェブページ上のコードは、通信エンジン５０４ｂとして機能し得るため、モバイルデバイス４０１がローカルコンピューティングデバイス３０１と通信するように特別に構成される必要はない。

【0084】

ステップ１２０４で、モバイルデバイスは、入力デバイス（例えば、入力デバイス４０２）からの入力データをコンピューティングデバイス（例えば、ローカルコンピューティングデバイス３０１）に伝送することができる。入力データは、ＷｅｂＲＴＣなどのプロトコルを介して伝送され得る。入力データは、例えばメディアエンジン５０４ａによってフォーマットおよび／または処理され得る。例えば、ステップ１２０３で確立された通信は、ローカルコンピューティングデバイス３０１が特定のフォーマットの映像を求めるリクエストをモバイルデバイス４０１に伝送することを含むことができ、メディアエンジン５０４ａは、カメラ４０３ａからの映像を特定のフォーマットで符号化することができる。

【0085】

主題は、構造的な特徴および／または方法論的な行為に特有の言語で記載したものの、添付の請求項において定義される主題は、上記の特定の特徴または行為に必ずしも制限されるものではないことを理解すべきである。むしろ、上記の特定の特徴および行為は、以下の請求項の実装例として記載されている。

【0086】

関連出願の相互参照
本出願は、２０１９年１月７日に出願された米国仮特許出願第６２／７８９，１８９号、および２０１９年３月４日に出願された米国非仮特許出願第１６／２９１，５９６号に対する優先権を主張するものであり、両出願の内容は、参照により、それらの全体が本明細書に明示的に組み込まれる。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【手続補正書】

【提出日】2021-08-20

【手続補正1】

【補正対象書類名】特許請求の範囲

【補正対象項目名】全文

【補正方法】変更

【補正の内容】

【特許請求の範囲】

【請求項1】

方法であって、
ユーザから入力データを受信するように構成された複数のモバイルデバイスとの接続を、コンピューティングデバイスによって確立することと、
前記コンピューティングデバイスにより、前記複数のモバイルデバイスから前記入力データを受信することと、
前記複数のモバイルデバイスからの前記入力データに基づき、前記コンピューティングデバイスに接続された物理入力デバイスを複製することと、
前記コンピューティングデバイスにより、前記複製された物理入力デバイスを、前記コンピューティングデバイスと第２のコンピューティングデバイスとの間の通信を確立するために、アプリケーションで使用することと、を含む方法。

【請求項2】

前記複数のモバイルデバイスとの前記接続を確立することは、前記コンピューティングデバイスと関連付けられたウェブページに対応するバーコードを表示することを含み、前記入力データを受信することは、前記ウェブページを介して前記入力データを受信することを含む、請求項１に記載の方法。

【請求項3】

前記バーコードは、前記ウェブページと関連付けられたユニフォームリソースロケータ（ＵＲＬ）を含む、請求項２に記載の方法。

【請求項4】

前記コンピューティングデバイスにより、かつ前記コンピューティングデバイスに接続された１つまたはそれ以上の出力デバイスを介して、前記入力データを出力することをさらに含む、請求項１に記載の方法。

【請求項5】

前記複数のモバイルデバイスから前記入力データを受信することは、前記複数のモバイルデバイス上で実行される１つまたはそれ以上のウェブブラウザを介して前記入力データを受信することを含む、請求項１に記載の方法。

【請求項6】

前記入力データを受信することは、前記複数のモバイルデバイスの異なる入力デバイスに対応する複数組の入力データを受信することを含む、請求項１に記載の方法。

【請求項7】

前記物理入力デバイスは、カメラ、マイクロフォン、または加速度計のうちの１つまたはそれ以上であるデバイスタイプを有する、請求項１に記載の方法。

【請求項8】

装置であって、
１つまたはそれ以上のプロセッサと、命令を記憶するメモリと、を備え、
前記命令は、前記１つまたはそれ以上のプロセッサによって実行されるときに、前記装置をして、
ユーザから入力データを受信するように構成された複数のモバイルデバイスとの接続を確立することと、
前記複数のモバイルデバイスから前記入力データを受信することと、
前記複数のモバイルデバイスからの前記入力データに基づき、前記装置に接続された物理入力デバイスを複製することと、
前記複製された物理入力デバイスを、前記装置とコンピューティングデバイスとの間の通信を確立するために、アプリケーションで使用することと、を行わせる、装置。

【請求項9】

前記命令は、前記１つまたはそれ以上のプロセッサによって実行されるときに、前記装置をして、前記装置と関連付けられたウェブページに対応するバーコードを表示させることにより、前記装置をして、前記複数のモバイルデバイスとの 前記接続を確立することを行わせ、前記入力データを受信することは、前記ウェブページを介して前記入力データを受信することを含む、請求項８に記載の装置。

【請求項10】

前記バーコードは、前記ウェブページと関連付けられたユニフォームリソースロケータ（ＵＲＬ）を含む、請求項９に記載の装置。

【請求項11】

前記命令は、前記１つまたはそれ以上のプロセッサによって実行されるときに、前記装置をして、１つまたはそれ以上の出力デバイスを介して前記入力データを出力することをさらに行わせる、請求項８に記載の装置。

【請求項12】

前記命令は、前記１つまたはそれ以上のプロセッサによって実行されるときに、前記装置をして、前記複数のモバイルデバイス上で実行される１つまたはそれ以上のウェブブラウザを介して前記入力データを受信させることにより、前記装置をして、前記複数のモバイルデバイスから前記入力データを受信することを行わせる、請求項８に記載の装置。

【請求項13】

前記命令は、前記１つ以上のプロセッサによって実行されるときに、前記装置をして、前記複数のモバイルデバイスの異なる入力デバイスにそれぞれが対応する複数組の入力データを受信させることにより、前記装置をして、前記入力データを受信することを行わせる、請求項８に記載の装置。

【請求項14】

前記物理入力デバイスは、カメラ、マイクロフォン、または加速度計のうちの１つまたはそれ以上であるデバイスタイプを有する、請求項８に記載の装置。

【請求項15】

命令を記憶する非一時的コンピュータ可読媒体であって、前記命令は、コンピューティングデバイスによって実行されるときに、前記コンピューティングデバイスをして、
ユーザから入力データを受信するように構成された複数のモバイルデバイスとの接続を確立することと、
前記複数のモバイルデバイスから前記入力データを受信することと、
前記複数のモバイルデバイスからの前記入力データに基づき、前記コンピューティングデバイスに接続された物理入力デバイスを複製することと、
前記複製された物理入力デバイスを、前記コンピューティングデバイスと第２のコンピューティングデバイスとの間の通信を確立するために、アプリケーションで使用することと、を行わせる、非一時的コンピュータ可読媒体。

【請求項16】

前記命令は、実行されるときに、前記コンピューティングデバイスをして、前記コンピューティングデバイスと関連付けられたウェブページに対応するバーコードを表示させることにより、前記コンピューティングデバイスをして、前記複数のモバイルデバイスとの前記接続を確立することを行わせ、前記入力データを受信することは、前記ウェブページを介して前記入力データを受信することを含む、請求項１５に記載の非一時的コンピュータ可読媒体。

【請求項17】

前記バーコードは、前記ウェブページと関連付けられたユニフォームリソースロケータ（ＵＲＬ）を含む、請求項１６に記載の非一時的コンピュータ可読媒体。

【請求項18】

前記命令は、前記コンピューティングデバイスによって実行されるときに、前記コンピューティングデバイスをして、１つまたはそれ以上の出力デバイスを介して前記入力データを出力することをさらに行わせる、請求項１５に記載の非一時的コンピュータ可読媒体。

【請求項19】

前記命令は、実行されるときに、前記コンピューティングデバイスをして、前記複数のモバイルデバイス上で実行される１つまたはそれ以上のウェブブラウザを介して前記入力データを受信させることにより、前記コンピューティングデバイスをして、前記複数のモバイルデバイスから前記入力データを受信することを行わせる、請求項１５に記載の非一時的コンピュータ可読媒体。

【請求項20】

前記命令は、実行されるときに、前記コンピューティングデバイスをして、前記複数のモバイルデバイスの異なる入力デバイスに対応する複数組の入力データを受信させることにより、前記コンピューティングデバイスをして、前記入力データを受信することを行わせる、請求項１５に記載の非一時的コンピュータ可読媒体。

【請求項21】

複数のモバイルデバイスからの入力データを受信するための接続を前記複数のモバイルデバイスに提供することと、
前記複数のモバイルデバイスからの前記入力データに基づき、前記コンピューティングデバイスに接続された物理入力デバイスを複製することと、
前記複製された物理入力デバイスを使用して、前記コンピューティングデバイスと第２のコンピューティングデバイスとの間の通信を提供することと、を含む、コンピュータ実施方法。

【請求項22】

前記接続を提供することは、
ウェブページを示すバーコードを表示することと、
前記ウェブページを介して前記入力データを受信することと、を含む、請求項２１に記載の方法。

【請求項23】

前記バーコードは、前記ウェブページのユニフォームリソースロケータ（ＵＲＬ）を含む、請求項２２に記載の方法。

【請求項24】

前記コンピューティングデバイスにより、前記コンピューティングデバイスに接続された１つまたはそれ以上の他のデバイスを介して前記入力データを出力することをさらに含む、請求項２１に記載の方法。

【請求項25】

前記複数のモバイルデバイス上で実行可能な１つまたはそれ以上のウェブブラウザを介して前記入力データを受信することをさらに含む、請求項２１に記載の方法。

【請求項26】

前記複数のモバイルデバイスの第１のモバイルデバイスの第１の入力デバイスに対応する第１の組のデータを、前記入力データの一部として受信することと、
前記第１のモバイルデバイスの第２の入力デバイスに対応する第２の組のデータを、前記入力データの一部として受信することと、をさらに含む、請求項２１に記載の方法。

【請求項27】

前記物理入力デバイスは、カメラ、マイクロフォン、または加速度計のうちの１つまたはそれ以上である、請求項２１に記載の方法。

【請求項28】

装置であって、
１つまたはそれ以上のプロセッサと、命令を記憶するメモリと、を備え、前記命令は、前記１つまたはそれ以上のプロセッサによって実行されるときに、前記装置をして、
複数のモバイルデバイスからの入力データを受信するための接続を前記複数のモバイルデバイスに提供することと、
前記複数のモバイルデバイスからの前記入力データに基づき、前記装置に接続された物理入力デバイスを複製することと、
前記複製された物理入力デバイスを使用して、前記装置とコンピューティングデバイスとの間の通信を提供することと、を行わせる、装置。

【請求項29】

前記命令は、前記１つまたはそれ以上のプロセッサによって実行されるときに、前記装置をして、ウェブページに対応するバーコードを表示させることと、前記ウェブページを介して前記入力データを受信させることとにより、前記装置をして、前記接続を提供することを行わせる、請求項２８に記載の装置。

【請求項30】

前記バーコードは、前記ウェブページと関連付けられたユニフォームリソースロケータ（ＵＲＬ）を含む、請求項２９に記載の装置。

【請求項31】

前記命令は、前記１つまたはそれ以上のプロセッサによって実行されるときに、前記装置をして、１つまたはそれ以上の出力デバイスを介して前記入力データを出力することをさらに行わせる、請求項２８に記載の装置。

【請求項32】

前記命令は、前記１つまたはそれ以上のプロセッサによって実行されるときに、前記装置をして、前記複数のモバイルデバイス上で実行される１つまたはそれ以上のウェブブラウザを介して前記入力データを受信することをさらに行わせる、請求項２８に記載の装置。

【請求項33】

前記命令は、前記１つまたはそれ以上のプロセッサによって実行されるときに、前記装置をして、前記複数のモバイルデバイスの第１のモバイルデバイスの第１の入力デバイスに対応する第１の組のデータを、前記入力データの一部として受信させることと、前記第１のモバイルデバイスの第２の入力デバイスに対応する第２の組のデータを、前記入力データの一部として受信させることとにより、前記装置をして、前記入力データを受信することを行わせる、請求項２８に記載の装置。

【請求項34】

前記物理入力デバイスは、カメラ、マイクロフォン、または加速度計のうちの１つまたはそれ以上であるデバイスタイプを有する、請求項２８に記載の装置。

【請求項35】

命令を記憶する非一時的コンピュータ可読媒体であって、前記命令は、コンピューティングデバイスの１つまたはそれ以上のプロセッサによって実行されるときに、前記コンピューティングデバイスをして、
複数のモバイルデバイスからの入力データを受信するための接続を前記複数のモバイルデバイスに提供することと、
前記複数のモバイルデバイスからの前記入力データに基づき、前記コンピューティングデバイスに接続された物理入力デバイスを複製することと、
前記複製された物理入力デバイスを使用して、前記コンピューティングデバイスにより、前記コンピューティングデバイスと第２のコンピューティングデバイスとの間の通信を提供することと、を行わせる、非一時的コンピュータ可読媒体。

【請求項36】

前記命令は、前記コンピューティングデバイスの前記１つまたはそれ以上のプロセッサによって実行されるときに、前記コンピューティングデバイスをして、ウェブページに対応するバーコードを表示させることと、前記ウェブページを介して前記入力データを受信させることとにより、前記コンピューティングデバイスをして、前記接続を提供することを行わせる、請求項３５に記載の非一時的コンピュータ可読媒体。

【請求項37】

前記バーコードは、前記ウェブページと関連付けられたユニフォームリソースロケータ（ＵＲＬ）を含む、請求項３６に記載の非一時的コンピュータ可読媒体。

【請求項38】

前記命令は、前記コンピューティングデバイスの前記１つまたはそれ以上のプロセッサによって実行されるときに、前記コンピューティングデバイスをして、１つまたはそれ以上の出力デバイスを介して前記入力データを出力することをさらに行わせる、請求項３５に記載の非一時的コンピュータ可読媒体。

【請求項39】

前記命令は、前記コンピューティングデバイスの前記１つまたはそれ以上のプロセッサによって実行されるときに、前記コンピューティングデバイスをして、前記複数のモバイルデバイスを実行する１つまたはそれ以上のウェブブラウザを介して前記入力データを受信することをさらに行わせる、請求項３５に記載の非一時的コンピュータ可読媒体。

【請求項40】

前記命令は、前記コンピューティングデバイスの前記１つまたはそれ以上のプロセッサによって実行されるときに、前記コンピューティングデバイスをして、
前記複数のモバイルデバイスの第１のモバイルデバイスの第１の入力デバイスに対応する第１の組のデータを、前記入力データの一部として受信することと、
前記第１のモバイルデバイスの第２の入力デバイスに対応する第２の組のデータを、前記入力データの一部として受信することと、をさらに行わせる、請求項３５に記載の非一時的コンピュータ可読媒体。

【国際調査報告】