特許 5876640 ウィジェット−ベースの通信メタファでモード中立の通信を提供するステムと方法。

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】5876640

(24)【登録日】2016年1月29日

(45)【発行日】2016年3月2日

(54)【発明の名称】ウィジェット−ベースの通信メタファでモード中立の通信を提供するステムと方法。

(51)【国際特許分類】

   G06F 15/00 20060101AFI20160218BHJP

   G06F 13/00 20060101ALI20160218BHJP

【ＦＩ】

   G06F15/00 470

   G06F13/00 357A

【請求項の数】10

【外国語出願】

【全頁数】20

(21)【出願番号】特願2010-76641(P2010-76641)

(22)【出願日】2010年3月30日

(65)【公開番号】特開2010-238239(P2010-238239A)

(43)【公開日】2010年10月21日

【審査請求日】2013年2月5日

(31)【優先権主張番号】61/164753

(32)【優先日】2009年3月30日

(33)【優先権主張国】US

(73)【特許権者】

【識別番号】508214019

【氏名又は名称】アバイア インク．

(74)【代理人】

【識別番号】100081053

【弁理士】

【氏名又は名称】三俣 弘文

(72)【発明者】

【氏名】バージット ゲッパート

(72)【発明者】

【氏名】フランク ロスラー

【審査官】 漆原 孝治

(56)【参考文献】

【文献】 米国特許第０６４１５０２０（ＵＳ，Ｂ１）

【文献】 特表２００９−５０２０４８（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｆ １５／００

Ｇ０６Ｆ １３／００

(57)【特許請求の範囲】

【請求項1】

通信を管理する方法において、
（Ａ）グラフィカル・ユーザ・インターフェース（２００）を介して、相互接続されたグラフィカル要素の組（２０２，２０４，２０６）と相互通信可能スペース（６０２）とを、通信セッション（２０１）に参加していない不参加ユーザ（３０４）に提示するステップ（９０２）と、
（Ｘ）前記通信セッション（２０１）に参加している複数の通信中ユーザが前記相互通信可能スペースにいる時に、前記通信セッション（２０１）を表示する為に、複数の通信中ユーザを接続するステップと、
前記複数の通信中ユーザ中の各ユーザは、前記相互接続されたグラフィカル要素の組の中の独自のグラフィカル要素で表示され、前記各独自のグラフィカル要素は、自身の上に重ねられた、前記通信ユーザにより現在使用されている通信形態を表すグラフィカル・サブ要素（２０２ｂ，２０４ｂ，２０６ｂ）を含み、
（Ｂ）前記相互接続されたグラフィカル要素の組に関連し、前記通信セッションに関するアクションを有するユーザ入力を受領するステップ（９０４）と、
（Ｃ）前記アクションを、前記受領したユーザ入力に基づいて、実行するステップ（９０６）と、
を有することを特徴とする通信を管理する方法。

【請求項2】

前記グラフィカル・サブ要素は、更なる通信形態を示し、前記通信形態を介して、関連するユーザが通信セッションに接続されることを特徴とする請求項１記載の方法。

【請求項3】

前記グラフィカル・サブ要素は、関連するユーザに対し利用可能な通信形態を示すことを特徴とする請求項１記載の方法。

【請求項4】

（Ｄ）特定のグラフィカル・サブ要素を示す第１ユーザ入力を受領するステップと、
（Ｅ）前記特定のグラフィカル・サブ要素に基づくオプションのメニューとそれぞれの関連ユーザとを表示するステップと、
（Ｆ）前記オプションのメニュー内のオプションを選択する第２ユーザ入力を受領するステップと、
（Ｇ）前記通信セッションを前記第２ユーザ入力に基づいて操作するステップと、
を更に有することを特徴とする請求項１記載の方法。

【請求項5】

前記（Ｇ)ステップは、前記通信セッションとは別個の通信セッションを創設することを特徴とする請求項４記載の方法。

【請求項6】

前記グラフィカル・ユーザ・インターフェースは、入力を、モード中立のユーザ制御、モード中立のボタン、モード中立のジェスチャの少なくとも１つを介して、受領することを特徴とする請求項１記載の方法。

【請求項7】

プロセッサと前記プロセッサを制御する第１と第２と第３と第４のモジュールとを有し通信をモード中立に管理するシステムにおいて、
前記第１モジュールは、
（Ａ）グラフィカル・ユーザ・インターフェース（２００）を介して、相互接続されたグラフィカル要素の組（２０２，２０４，２０６）と相互通信可能スペース（６０２）とを、通信セッション（２０１）に参加していない不参加ユーザ（３０４）に提示するステップ（９０２）を実行し、
前記第２モジュールは、
（Ｘ）前記通信セッション（２０１）に参加している複数の通信中ユーザが前記相互通信可能スペースにいる時に、前記通信セッション（２０１）を表示する為に、複数の通信中ユーザを接続するステップを実行し、
前記複数の通信中ユーザ中の各ユーザは、前記相互接続されたグラフィカル要素の組の中の独自のグラフィカル要素で表示され、前記各独自のグラフィカル要素は、自身の上に重ねられた、前記通信ユーザにより現在使用されている通信形態を表すグラフィカル・サブ要素（２０２ｂ，２０４ｂ，２０６ｂ）を含み、
前記第３モジュールは、
（Ｂ）前記相互接続されたグラフィカル要素の組に関連し、前記通信セッションに関するアクションを有するユーザ入力を受領するステップ（９０４）を実行し、
前記第４モジュールは、
Ｃ）前記アクションを、前記受領したユーザ入力に基づいて、実行するステップ（９０６）を実行する
ことを特徴とするプロセッサと前記プロセッサを制御する第１モジュールとを有し、通信をモード中立に管理するシステム。

【請求項8】

前記グラフィカル・サブ要素は、前記通信形態の利用可能性を提示することを特徴とする請求項７記載のシステム。

【請求項9】

前記プロセッサを制御する第５モジュールを更に有し、前記第５モジュールは、前記グラフィカル・サブ要素を、変更されたユーザ通信の詳細に基づいて更新することを特徴とする請求項７記載のシステム。

【請求項10】

インストラクションを記憶するコンピュータで読み取り可能な記憶媒体において、前記プロセッサがインストラクションを実行すると、前記プロセッサは、
（Ａ）グラフィカル・ユーザ・インターフェース（２００）を介して、相互接続されたグラフィカル要素の組（２０２，２０４，２０６）と相互通信可能スペース（６０２）とを、通信セッション（２０１）に参加していない不参加ユーザ（３０４）に提示するステップ（９０２）と、
（Ｘ）前記通信セッション（２０１）に参加している複数の通信中ユーザが前記相互通信可能スペースにいる時に、前記通信セッション（２０１）を表示する為に、複数の通信中ユーザを接続するステップと、
前記複数の通信中ユーザ中の各ユーザは、前記相互接続されたグラフィカル要素の組の中の独自のグラフィカル要素で表示され、前記各独自のグラフィカル要素は、自身の上に重ねられた、前記通信ユーザにより現在使用されている通信形態を表すグラフィカル・サブ要素（２０２ｂ，２０４ｂ，２０６ｂ）を含み、
（Ｂ）前記相互接続されたグラフィカル要素の組に関連し、前記通信セッションに関するアクションを有するユーザ入力を受領するステップ（９０４）と、
（Ｃ）前記アクションを、前記受領したユーザ入力に基づいて、実行するステップ（９０６）と、
を含む動作を実行することを特徴とするコンピュータで読み取り可能な記憶媒体。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、通信に関し、特に通信セッションを、グラフィカル・ユーザ・インターフェースを介して、表示し管理するシステムと方法に関する。通信セッションには、様々なモード（例、電話の呼びのセッション、インスタントメッセージ・セッション、電子メール・セッション、テレビ会議・セッション、マルチ・メディア・セッション等）が有る。

【背景技術】

【0002】

タッチトーン電話は、何年にも亘って機能ボタンやメニューを追加しながら補強され続けてきた。これ等の機能へのインターフェースは、単純なボタンから階層型のメニューへと展開してきた。このような階層型のメニューは、トラックボール、ポインター等により駆動される。機能の数が増えるに従って、インターフェースは、より多くのボタン、シーケンス、或いはボタンの組合せを追加している。このようなフューチャ（機能特徴）が増えることにより、様々なレベルで複雑な大量のインターフェースが必要となる。時にユーザは、キーの機能をルートで覚えさせることに頼っているが、この方法は、必ずしも実際的ではなく又望ましいことではない。近年、タッチ型ディスプレイを具備するスマートフォンが、同様な機能の提供を開始している。しかしこのようなタッチ型のディスプレイは、ディスプレイの上であっても、機能ボタンやメニューをまた増やしている。

【発明の概要】

【発明が解決しようとする課題】

【0003】

更にユーザは、他の様々な通信形態（モード）に移行しつつある。例えばテキストメッセージ、インスタントメッセージ、電子メール、チャットセッション、電話会議（video conferencing）等である。これ等の通信モードを、従来の電話機に組み込むことは、複雑さや難しさが何倍にもなる。現在必要なものは、より直感的な通信管理インターフェースである。

【課題を解決するための手段】

【0004】

本発明は、通信セッションの管理を改善することに関する。特願２０１０−０７４２３６のグラフィカル・インターフェースは、ユーザが他の様々なユーザとの間で通信セッションを設定し、ユーザを通信セッションから外すことができる。通信に関連するウィジェット（widgets：時計やカレンダなどの小さなプログラム）を有するグラフィカル・ユーザ・インターフェースに基づいて、様々なタイプの通信セッションを早急かつ効率的に管理するグラフィカル・ユーザ・インターフェースのシステムと方法とそれを記憶した記憶媒体を開示する。システムの実施例において、システムは、ユーザに対し、グラフィカル・ユーザ・インターフェース上に、特定の通信セッションあるいは通信セッションのグループの構造を表す接続されたグラフィカル要素の組を表示する。本発明は、モード的に中立な通信のグラフィカル・インターフェースを説明する。このグラフィカル・インターフェースにおいて、通信セッションの参加者のアイコン又はイメージが、ユーザにより通信ウィジェットをそれぞれのアイコンに付加することにより、連結される。通信ウィジェットは、通信の様々なモードに関係する。例えば、電話、電話会議、テレビ会議、ウェブ会議、ＩＭセッション、電子メール等である。通信モードは、削除したり変化したりあるいは修正したりできるが、これはインターフェース内の通信ウィジェットの使用を管理することにより行うことができる。図２に本発明に関連する機器を介し、その後に図１のシステムあるいは通信機器で説明する。図１は、本発明のコンセプトを実行するものである。より詳細な方法とグラフィカル・インターフェースを以下説明する。

【0005】

図２のグラフィカル・ユーザ・インターフェース２００は、電話会議で通信する３人のユーザを有する通信セッションを開示する。グラフィカル・ユーザ・インターフェース２００は、ユーザ入力を受領する。このユーザ入力は、マルチモードのユーザ入力であり、通信セッションを管理する。例えば、電話会議中のユーザは、コンタクト先リスト２１８からコンタクト先を選択するために、ドラッグとドロップ入力を実行するか、あるいは動かし配置し、新たなコンタクト先を通信セッションに追加する。システムは、この様な入力を受領すると、そのコンタクト先の電話番号に自動的に電話をかけて、このコンタクト先を電話会議に追加する。ユーザは、呼びからドロップされるが、これはユーザを表す接続されたグラフィカル要素を、ゴミ箱２２０にドラッグするか、あるいは参加者を通信セッションから削除することを表すアイコンをドラッグすることにより行われる。

【0006】

通信セッションは、通信モードの種類を問わない。グラフィカル・インターフェース上に表示された通信セッション内の接続されたユーザのメタファは、発呼者／被呼者であるユーザ、インスタントメッセージ・ユーザ、電子メール・ユーザ、テレビ会議を介して接続されたユーザ等を表す。

【0007】

グラフィカル要素の表示と、グラフィカル要素が如何に接続されるか、ユーザがグラフィカル要素と如何に相互作用するかは、通信セッションのニーズと現在の能動的コンテキストによって、変わる。例えば、グラフィカル要素は、テキスト、タイトル、ポジション、或いは各ユーザに関するデータを含む。ユーザ間の接続メタファは、接続の種類（電話、画像等）、接続の質（ローバンドとハイバンド）、参加者が最初のユーザに対する階層的関係（友人か、同僚か、知人か、信頼していないユーザか）、接続の状態（有効か、無効か、ホールド状態か等）を表す。
例えば、ユーザは、コンタクト先を選択して、その後に同一タイプのユーザ入力を用いて（ドラッグとドロップ、フリッキング、ジェスチャ等）、コンタクト先とのあらゆるタイプの通信モードを開始することができる。ユーザは、様々な通信モードに対する様々な入力機構を知る必要はない。この変形例は、様々な実施例として議論する。

【図面の簡単な説明】

【0008】

【図1】システムの実施例を表す図。

【図2】通信セッションのビューを表す図。

【図3】通信セッションのネットワーク・ビューを表す図。

【図4】通信セッションのユーザ用のグラフィカルなサブ要素を表す図。

【図5】グラフィカルなサブ要素用の更なるコンテキスト・センシティブなメニューを表す図。

【図6】通信セッションの第１のグラフィカル・ビューを表す図。

【図7】通信セッションの第２のグラフィカル・ビューを表す図。

【図8】グラフィカル・ユーザ・インターフェース内のグラフィカルなサブ要素の応用例を表す図。

【図9】本発明の方法を表すフローチャート図。

【発明を実施するための形態】

【0009】

図１において、システム（汎用コンピュータ）１００は、プロセッサ（ＣＰＵ，プロセッサ）１２０と、システム・バス１１０とを有する。プロセッサ１２０は、様々なシステム構成要素である。システム・バス１１０は、メモリ１３０とＲＯＭ１４０とＲＡＭ１５０等のシステム構成要素を、プロセッサ１２０に接続する。システム１００はキャッシュ１２２を有する。キャッシュ１２２は、高速メモリで、プロセッサ１２０に直接接続されるか、近くに配置されるか、或いはその一部として一体に形成される。システム１００は、メモリ１３０又は記憶装置１６０からのデータを、キャッシュ１２２に一時的にコピーして、プロセッサ１２０が迅速にアクセスできるようにしている。かくして、キャッシュ１２２は、プロセッサがデータを取り出すのを待つことにより、プロセッサ１２０の処理が遅延するのを回避し、性能を向上させる。これ等のモジュールは、プロセッサ１２０を制御して様々なアクションを実行する。他のメモリ１３０も同様に使用可能である。メモリ１３０は、様々な性能特徴を有する複数の種類のメモリを含む。このシステムは、複数のプロセッサ１２０を有するシステム１００上で動作するか、それ等をネットワークで繋いだグループで動作するか、或いはクラスタ上で動作して、より大きな処理能力を与えるようにしている。プロセッサ１２０は、汎用プロセッサと、ハードウエアのモジュール或いはソフトウエアのモジュールを含む。例えば、第１モジュール１６２、第２モジュール１６４、第３モジュール１６６で構成され、これ等は記憶装置１６０内に配置され、プロセッサ１２０と特定目的のプロセッサとを制御する。この特定目的プロセッサでは、ソフトウエアのインストラクションが、実際のプロセッサのデザイン（ハードウエア）に組み込まれている。プロセッサ１２０は、自己保有型のコンピュータシステムであり、複数のコア又はプロセッサと、バスと、メモリコントローラと、キャッシュ等を含む。マルチコアプロセッサは、対称或いは非対称性の何れでもよい。

【0010】

システム・バス１１０は、あらゆるタイプのバス構造体を含み、例えば、メモリバス、メモリコントローラ、周辺バス、ローカルバスであり、あらゆるバス構造を利用したものを含む。ＲＯＭ１４０内に記憶されるベーシックな入力／出力（basic input/outout:ＢＩＯＳ）は、ベーシックなルーチンを与える。このベーシックなルーチンは、システム１００内の構成要素の間の情報の伝送を助ける、例えばスタートアップ時の情報の伝送を助ける。システム１００は記憶装置１６０を含む。この記憶装置１６０は、例えばハードディスクドライブ、磁気ディスクドライブ、光学ディスクドライブ、テープドライブ等である。記憶装置１６０は、ソフトウエアモジュール１６２，１６４，１６６を有し、プロセッサ１２０を制御する。また他のハードウエアモジュール又はソフトウエアモジュールを組み込み可能である。記憶装置１６０は、システム・バス１１０にドライブインターフェースで接続される。このドライブインターフェースとそれに関連するコンピュータに読み込み可能な記憶媒体は、コンピュータで読み込み可能なインストラクション（データ構造）、プログラムモジュール、或いはシステム１００用の他のデータの非揮発性の記憶媒体を提供する。一態様によれば、特定の機能を実行するハードウエアモジュールは、ソフトウエアコンポーネントを含む。このソフトウエアコンポーネントは、機能を実行するために必要なハードウエア（プロセッサ１２０，システム・バス１１０，出力装置１７０）と接続された書き換え不可能なコンピュータ読み込み媒体内に記憶される。これ等のベーシックな構成要素は当業者には公知である。システム１００は、小型コンピュータ、携帯用コンピュータ、デスクトップコンピュータ、コンピュータサーバー等でもよい。

【0011】

本発明の一実施例では、記憶装置１６０はハードディスクであるが、他のあらゆる種類の記憶媒体も当業者は容易に想到できる。例えば磁気カッセト、フラッシュメモリカード、ＤＶＤ、カートリッジ、ＲＡＭ１５０、ＲＯＭ１４０、或いはビットストリームを含むケーブル或いは無線信号も、本発明で用いることができる。書き換え不可能なコンピュータで読み込み媒体は、エネルギー、キャリア信号、電磁波、信号そのもののような媒体を含まない。

【0012】

システム１００とユーザの間の双方向動作を可能とするために、入力装置１９０は、あらゆる数の種類の入力機構、例えば、マイクロフォン、タッチセンサ、グラフィカル入力、キーボード、マウス、モーション入力、音声認識装置等である。出力装置１７０は、当業者に公知の複数の出力機構の内の１つである。出力装置１７０が、グラフィカルディスプレイを有し、タッチ入力を受領することができる場合には、入力装置１９０と出力装置１７０は、同一の要素或いはディスプレイである。一実施例においては、マルチモードのシステムにより、ユーザは、システム１００と通信するために複数の入力を提供できる。通信インターフェース１８０は、ユーザ入力とシステム出力を管理する。本発明は、特定のハードウエア要素上で動作することに限定されず、基本的な機能は、改良されたハードウエア或いはファームウエアで置換できる。

【0013】

図示したシステムの実施例は、個別の機能ブロックとして示されている。例えば、プロセッサ１２０として示されている。これ等のブロックの有する機能は、共有ハードウエア、専用ハードウエア、ソフトウエアを実行できるハードウエア、汎用コンピュータ上で実行されるソフトウエアと等価で機能する専用のハードウエア（例、プロセッサ１２０）で実行できる。例えば、図１のプロセッサの機能は、１つの共有プロセッサ或いは複数のプロセッサで提供できる。本明細書において、プロセッサとは、ソフトウエアを実行できるハードウエアに限定されるものではない。ここに示した実施例は、マイクロプロセッサ、デジタル信号プロセッサ、ＤＳＰ、ハードウエア、ＲＯＭ１４０、上記した操作を実行するソフトウエアを記憶するＲＯＭ１４０と、結果を記憶するＲＡＭ１５０とを有する。これらは、ＶＬＳＩハードウエアと汎用のＤＳＰと組み合わせたカスタムＶＬＳＩ回路でもよい。

【0014】

本発明の様々な実施例の論理動作は、
（１）汎用コンピュータ内のプログラム可能な回路内で実行される、ステップ操作、手順のシーケンスとして、
（２）専用使用のプログラム可能な回路内で実行される、ステップ操作、手順のシーケンスとして、
（３）プログラム可能回路内に組み込まれたマシンモジュール或いはプログラムエンジンとして
実行される。
図１のシステム１００は、本発明の方法の全て或いは一部は、本発明の記憶媒体内のインストラクションに応じて実行する。このような論理動作は、プロセッサ１２０を制御するため、モジュールのプログラムに合わせて特定の機能を実行するモジュールとして実現される。例えば図１では、３個のモジュール即ち第１モジュール１６２と第２モジュール１６４と第３モジュール１６６が、プロセッサ１２０を制御するよう構築されたモジュールとして示されている。これ等のモジュールは、記憶装置１６０内に記憶されＲＡＭ１５０、ルーチンではメモリ１３０にロードされ、或いはコンピュータで読み込み可能なメモリ内に記憶される。

【0015】

図２で、通信セッションを管理するグラフィカル・インターフェースについて説明する。図１に示すようなシステム１００は、グラフィカル・ユーザ・インターフェース２００を表示するよう構成される。それを図２に示す。システム１００は、入力を受領し、通信セッションを操作し管理する。一態様において、システム１００は、通信機器、例えば、電話機、インスタント・メッセンジャ、パソコンあるいは携帯型コンピュータ、電子メール装置と相互作用して通信セッションを管理する。例えば、ユーザは、コンピュータと通信する卓上型の電話機を有してもよい。このコンピュータは、電話機とインターフェースし、図２に示すようなディスプレイを提示して、電話機を用いて通信セッションを管理する。ユーザは、接触すべき人を特定し、同一モードを用いてあらゆるタイプの通信を開始し、又他のタイプの通信も開始する。このシステムは、この点に関し特別な要件はない。ドラッグとドロップ、ジェスチャ、タッピング、あるいはあらゆる入力モードを用いて、電話の呼び、電話会議、ＩＭ又は電子メール・セッション等を、開始し確立することができる。あらゆる通信形態は、セッションの制御に関して同一のものとして折り扱う。例えば、通信セッションの開始、終了、分離、併合、あるいは参加者の追加と削除は、全て同一あるいは類似の通信形態で、管理できる。様々な入力の一例は、ユーティリティ・アイコン２０８、２１０、２１２、２１４、２１６、２２０に関し記載し、あらゆる入力モードを適用して、ユーティリティを使用することがでる。

【0016】

このアプローチの利点は、システムは、更なる通信モードを、図２のユーティリティ・アイコンにより表示される既存のモードに追加することができる点にあり、更に新たな通信を如何に管理するかの方法が、既に使用されている同一の通信形態を介して適用できる点にある。ユーティリティ・アイコン上でのドラッグとドロップの操作、又はジェスチャ操作が、ユーティリティ・アイコンを特定のコンタクト先に接続し、ユーザとコンタクト先との間の通信セッションを開始すると仮定する。システムは、新たな通信メカニズム、例えば、グーグル・ウェブ・サービス（新たなウェブ・アイコン）を組み込み、そのサービスを他のサービスと同一の管理形態（グーグル・ウェブ・アイコン（Google Wave icon）上のドラッグとドロップ又はジェスチャ）で実行できる。

【0017】

図２は、通信セッションの第１のグラフィカル・ビューを示す。図１に示すシステム１００は、グラフィカル・ユーザ・インターフェースを表示し、入力を受領して、通信セッションを操作する。一態様において、システム１００は、通信機器（例、電話機、インスタント・メッセンジャ、パソコンあるいは携帯型コンピュータ、電子メールの装置）と通信する。他の態様において、システム１００は、通信セッションの機能を組み込むことができる。システム１００は、入力を、キーボードあるいはスクリーン上のキーボード、マウス、スタイラス、タッチスクリーン、音声コマンド、非接触ジェスチャ、１回又は複数回タッチのジェスチャを介して、受領する。システム１００は、複数のモード入力を受領することもできる。通信セッションを確立する前に、システム１００は、ブランクのホーム・スクリーンを示す。そこに通信ユーティリティ２０８、２１０、２１２、２１４、２１６、２１８、２２０を表すグラフィカル要素を示す。ブランク・スクリーンは、壁紙イメージあるいは他のパターンを含む。一変形例において、システム１００は、サマリあるいはウェルカム・ページを示し、ニュースのサマリ、メッセージ、コンタクト先、カレンダ事象の更新、あるいは構成オプション等を表示する。他の変形例において、システム１００は、デフォルトの入力機構を示し、例えば、電話番号をダイアルするようなテンキー・パッドを示す。

【0018】

ディスプレイであるグラフィカル・ユーザ・インターフェース２００は、３つの接続されたグラフィカル要素２０２、２０４、２０６の通信セッションを示す。表示された通信セッション２０１は、リアルタイムの通信を表す。この場合、リアルタイムの通信は、グラフィカル要素であるフランク・グリムス（Frank Grimes）２０２、マックス・パワー（max Power）２０４、カール（Karl）２０６間の３方向電話会議である。これはグラフィカル要素２０２、２０４、２０６間をラインで繋ぐことにより、示されている。図２は、フランク・グリムスの観点から見た電話会議のグラフィカル・ディスプレイである。それ以降の図は、他の参加者から見た同一の電話会議を表す。

【0019】

通信セッションの視覚化とユーザ制御は、様々な通信形態に対し、中立であり、それらはユーザが呼びに加わったり、他の通信セッションに加わったりする時にでも、同一に取り扱う。唯一の異なる点は、特定の通信形態、例えば、通信形態アイコン２０８、２１０、２１２、２１４、２１６に対し使用されるインディケータである。例えば、図２において、ビデオの代わりにＩＭを介して接続するカールは、ビデオ２０６ｂからＩＭへモード・アイコンの変化をするだけである。

【0020】

ユーザは、更なる参加者を、通信セッションに同様な方法で追加できる。ユーザは、参加者を通信セッションから外すことができるが、これは、そのユーザをゴミ箱アイコン２２０にドラッグすることにより、フリッキング動作を提供することにより、その参加者に関連して「Ｘ」をクリックすることにより、参加者をハイライトして装置を振動させることにより行うことができる。最後のケースは、装置が加速度計(accelerometer)を具備している場合であるが、更に物理的あるいはグラフィカルな切断ボタンをクリックすることにより行うこともできる。通信セッションが電話を介して行う態様においては、システム１００は、参加者を通信セッションから外すが、これはユーザが電話機の受話器を置いた場合である。参加者が通信セッションから離れると、システム１００は、彼らのアイコンを、通信セッションのグラフィカル表示から外す。

【0021】

ここに示すグラフィカル要素は、アイコンであるが、イメージ、テキスト、画像、アニメーション、カリカチュア、アバタを含んでもよい。ユーザは、ユーザ自身のグラフィカル要素を自分用にするか、あるいはカメラ又はビデオカメラからのイメージのライブ・ストリームを供給することもできる。更にグラフィカル要素は、テキストの関連ストリング２０２ａ、２０４ａ、２０６ａを有する。テキストのストリングは、名前、肩書き、役職、電話番号、電子メール・アドレス、現在の状態、プレゼンス情報、ロケーションあるいは他の利用可能な情報を含む。テキストのシーケンスは、グラフィカル要素とは切り離されているがそれに関連している。別の構成として、システム１００は、テキストのストリングをグラフィカル要素の上に重ねたり、あるいはテキストをグラフィカル要素の一部として一体化することもできる。テキストあるいはグラフィカル要素の全て又は一部は、テキストあるいはグラフィカル要素に関連するユーザに関連する更なる情報（ブログ、マイクロ・ブログ、電子メール・アドレス、プレゼンス情報等）にハイパーリンクすることができる。識別子２０２ａ、２０４ａ、２０６ａは、それらコンタクト先の通信の利用可能なモード（例、ＩＭのみ）、プレゼンス情報（社内にいるが電話中である）、スケジュール情報（その人は、暇あるいは暇ではないが１時間のみ空いている）のグラフィック又はアイコンを含む。グラフィカル形式の情報は、現地時間（local time）、通信セッションのホストがいる時間帯(time zone)、あるいは体内時間(biological time)を含む。この情報によりユーザは、そのコンタクト先との通信を求めるべきか否かを知ることができる。このような情報は、通信セッションのエンティティを表すアイコンあるいはグラフィックと共に、表示される。

【0022】

システム１００は、各アイコンに対し、グラフィカル・サブ要素２０２ｂ、２０４ｂ、２０６ｂを有する。これらは各参加者の通信モードを表す。例えば、マックス・パワー２０４は、インスタント・メッセージ（ＩＭ）のクライアント２０４ｂを介して参加し、フランク・グリムス２０２は、電話機２０２ｂを介して参加し、カールはテレビ会議・クライアント２０６ｂを介して参加している。システム１００は、モード的に中立である。これは、システム１００は、各通信モード、例えば、電話、携帯電話、ボイス・オーバー・インターネット・プロトコル（ＶｏＩＰ）、インスタント・メッセージ、電子メール、テキスト・メッセージ、スクリーン共有を、同一に扱うことを意味する。ユーザがあるモードから別のモードに変わると、グラフィカル・サブ要素もそれに応じて変わる。例えば、フランク・グリムス２０２が、普通の電話から携帯電話に変わると、電話アイコン２０２ｂは携帯電話アイコンに変わる。

【0023】

グラフィカル要素は、電話会議に関する情報を伝達するが、これは、種類、サイズ、色、ボーダ、輝度、位置等を変えることにより、行う。例えば、ラインは、参加者間の関係を示す。ユーザは、手動で自分自身のアイコンあるいは他人のアイコンの変化をトリガするか、あるいはシステム１００は、変化の事象を検出し、それに応じてグラフィカル要素を変更する。変化の事象は、接触された参加者、コンテキスト、ペルソナ、接続状態、プレゼンス等に基づく。例えば、ある人が、テキスト・メッセージを話しているあるいはタイプしていると、システム１００はその人のアイコンを拡大する。別の例としては、システム１００は、電話会議の各人が、どのくらい話しているのかを追跡し、電話会議の全会話時間に基づいて、グラフィカル要素を上下させる。

【0024】

別の変形例として、システム１００は、グラフィカル要素２０２、２０４、２０６の接続するリンクを修正するが、これはその太さ、長さ、色、スタイル等を変更することにより、あるいはリンクをアニメートすることにより、行う。これらの変更は、現在アクティブな参加者、共有資源、アクティブな通信セッション、保持している通信セッション、ミュート状態にある通信セッション、ペンディング状態にある通信セッション、連結している通信セッション、マルチ・パーティー・ライン、サイドバー会話、監視状態のトランスファー、無監視状態のトランスファー、選択的転送、通信セッションを複数の通信セッションに選択的に分割すること等を含む。

【0025】

一態様において、ユーザは、入力、例えば、ジェスチャ（例えば、ドラッグ＆ドロップ、タッチスクリーンでのタップ＆ドラッグ、他の指示的ユーザ入力の実行）を提供して、電話会議を操作し管理する。例えば、ユーザは、コール・アイコン２０８、ビデオ会議アイコン２１０、ＩＭアイコン２１２、電子メール・アイコン２１４、又はソーシャル・メディア・アイコン２１６をクリックして、他のユーザを通信セッションに参加するよう促すことができる。ユーザは、これらのアイコンをドラッグし、それを現在の通信セッションのコンタクト先あるいは参加者上にドロップすることができる。例えば、来入する通信セッションが、ある通信形態（例えば、ＩＭ）の場合に、ユーザは、コール・アイコンを来入通信セッションにドラッグして、来入する通信セッションを受け入れるが、それをＩＭから呼びに再度ネゴシエートする。ユーザは、通信セッションを開始することができるが、それは適宜のアイコンをコンタクト先にドラッグしドロップすることにより、行うことができる。ソーシャル・メディアは、ウェブサイト、例えば、フェイスブック（Facebook)、ツイッター（Twitter)、リンクトイン（LinkedIn)、マイスペース（MySpace)等を含む。別の構成として、ユーザは、コンタクトリスト２１８をブラウザし、所望のコンタクト先をドラッグしドロップして、その所望のコンタクト先を電話会議に加えることもできる。システム１００は、自動的にその人に彼らの所望のモードでコンタクトすることができる。例えば、送信者の好ましいモード、プレゼンス情報に基づいた現在利用可能なモード、参加者間で共通に利用可能なモードで、接触して、その人を電話会議に加えることができる。システム１００は、他の情報、例えば、カレンダ、ノート、メモ、個人的なプレゼンス情報、時間等を表示することができる。システム１００のディスプレイは、ユーザが構築可能である。通信セッション２０１内の各参加者、あるいはコンタクトリスト内のコンタクト先は、複数の関連するアドレス、電話番号、コンタクト先、例えば、職場の電話番号、自宅の電話番号、携帯の電話番号、職場の電子メール、自宅の電子メール、ＡＩＭアドレス、フェースブック・チャット・アドレス等を有することができる。そして各参加者は、アイコンあるいは識別子を有する。例えば、参加者のみならず、コンタクト・モードも示すようなシンボルである。

【0026】

来入する通信セッションのアイコンは、ブリンク（blink）したり、バウンス（bounce）したり、パルス（pulse）を発したり、大きくなったり（grow）、縮んだり（shrink）、振動したり（vibrate）、変色したり（change color）、可聴警報音を送ったり（send an audible alert）、ある種の通知を、来入する通信セッションのユーザに提供する。ユーザは、来入するリクエストを、他の現在の通信セッションと同様な方法で相互作用し操作することができる。システム１００は、アクティブ通信セッションと、来入するリクエストを表す通信セッションとを区別しない。例えば、ユーザは、来入する呼びを通信セッションのトップにドラッグしドロップすることにより、来入する呼びを直接通信セッションに加えることができる。他の例において、ユーザは、来入する通信セッションをゴミ箱のアイコンにドラッグしドロップして無視するか、来入する通信セッションをダブルクリックして、来入する発呼者をボイスメールに送るか、あるいは発呼者を保持するために、タップしホールドすることができる。

【0027】

一態様において、ユーザのプレフェレンス（優先）は、グラフィカル要素と関連するテキストにより搬送される情報の量と種類をガイドする。ユーザの優先は、見る人の優先あるいはソース・パーソン（発信元）の優先から得られる。例えば、見る人は、優先を設定して、他人の電子メール・アドレスを示そうとするが、ソース・パーソンは、電子メール・アドレスを、共有しないものとして設定する。ソース・パーソンの優先（即ち情報の「所有者」の優先）は、第三者の優先を上書き（無効に）する。

【0028】

一つの可能なユーザ入力は、図２に示す通信セッションを分割することである。ユーザは、マウス・ドラッグでラインを引いたり、タッチスクリーン上に指を指して通信セッションを２つのグループに分割することにより、行う。システム１００は、通信セッションを、同時進行する２つの通信セッションに分割する。一態様において、通信セッションのマネージャは、ある限られた時間通信セッションを分割するが、その後、通信セッションは自動的に再び一緒になる。例えば、マネージャは、「チームＡは、ストラテジＡの賛否を議論する。チームＢは、ストラテジＢの賛否を議論する。５分後に再び議論に戻り報告する。」と言う。その後、マネージャはラインを引くか、あるいはブレークアウト・セッション用にグループを選択し、持続時間を設定する。ダイアログとアイコンは、通信セッションが分離した時に表れて、利用可能なオプションを提示して分離を管理する。システム１００は、通信セッションを分割し、所定時間後にそれらを再結合することができる。マネージャは、追加された設定、例えば、ブレークアウト・セッションの間、グループ間のサイドバー会話を禁止するような設定を、示すことができる。マネージャは、ブレークアウト・セッションから独立し、各ブレークアウト・セッションを、音声、サマリ、あるいはリアルタイムのテキストで、モニターすることができる。

【0029】

図２は、インターフェース２００を示す。このインターフェース２００は、新たな通信モードを受領し、それを提示し、ユーザに対し他のモードと同一の通信形態を介して管理できるようにしている。呼び２０８、ビデオ２１０、ＩＭ２１２、電子メール２１４、ソーシャル・ネットワーク２１６用のユーティリティ・アイコンに加えて、システムは、新たな通信モードを一体化できるものとする。モード的に中立的な通信形態の１つの利点は、システムは、新たな通信モードを実行できるが、ユーザが、通信セッション内で、この新たなモードを制御し管理することができる点である。これは他の通信モードと同一の入力形態を適用することにより行う。グラフィカル・ユーザ・インターフェースの制御は、セッションの開始と終了に関し、上記と同様である。システム１００は、自動的に新たなモードの機能を一体化して、セッション制御機能を可能にする。例えば、セッションを開始する、終了する、分離するが、これはユーザに馴染みのある通信形態を用いて管理される。

【0030】

その後、システムは、新たなモードを表すユーティリティ・アイコン（図２に図示せず）を、ユーザに提示する。この時点でユーザは、新たな管理形態を知る必要はないが、セッション制御に関し同一の動作（semantics）を続けられる。同じ呼びの接続メタファ、制御ボタン、ジェスチャ、音声コマンド、フリッカー・ムーブメント、装置の振動あるいはユーザ入力の他のタイプの操作は、モード的に中立状態を保持する。これらの入力形態の全ては再使用され、インターフェースに適用されて、通信の更なるモードあるいは通信機器の更なるモードを得る。

【0031】

次に図３に示す通信セッションのネットワーク・ビュー３００について議論する。通信ネットワーク３０２は、様々な通信機器３０４、３０６、３０８、３１０、３１２を接続し、装置から装置へ情報を転送する。通信ネットワーク３０２は、ポッツ（ＰＯＴＳ：従来のアナログ電話回線サービス）ネットワーク、非同期転送モード（ＡＴＭ：５３バイトの固定長のデータであるセルを基本的な通信の単位とする、Virtual Circuit cell relay（仮想回線セルリレー）による通信プロトコル）ネットワーク、サービス総合デジタル網（ＩＳＤＮ：各家庭に配線されている銅線電話回線を利用したデジタル通信サービス）、フレーム・リレー・ネットワーク（frame relay network）、イーサネット・ネットワーク（Ethernet network：コンピュータネットワークの規格のひとつ）、トークン・リング・ネットワーク（token-ring network：トークンを使って指定の数のロケーションで一方向でデータを送信するＬＡＮトポロジー）、あるいは他の適宜の有線あるいは無線のネットワークの内の１つあるいはその組み合わせである。このネットワークは、接続されたノード３１４、３１６、３１８、３２０を有し、これらが接続と伝送の機能の全てあるいは一部を実行する。これらの機能は、グラフィカル・ユーザ・インターフェース上の通信セッションのグラフィカル表示の基礎をなすものである。このようなネットワーク・ノード３１４、３１６、３１８、３２０は、ネットワーク３０２内の全ての機能を実行するか、あるいはエンド・ユーザの通信機器３０４、３０６、３０８、３１２と共に動作して、通信セッションを操作する。

【0032】

一態様にいて、集中化したエンティティは、通信セッションを制御する。集中化いたエンティティは、ネットワーク内に存在するか、あるいはネットワークを介して通信する。中央のエンティティは、集中化した企業インテリジェンス・サーバ（centralized enterprise intelligence server）として動作する。別の態様において、通信セッションの制御と機能は、ネットワークあるいはクラウド（cloud）内の複数のサーバ・リソース３１４、３１６、３１８、３２０内に分散していてもい。集中化インテリジェンスとクラウド内に分散したインテリジェンスに加えて、ネットワーク３０２は、この機能をピアツーピア（peer-to-peer：サーバとクライアントといった区別なしに、接続されたコンピュータ同士が同格で通信し合うネットワーク形態）のアプローチを用いて、エンドポイント上のインテリジェンスで提供することもできる。ある変形例では、標準化された機能は、標準化に適合したサーバに提供し、標準化されていない機能は、エンドポイント間に分布させる構成も可能である。

【0033】

各通信機器のディスプレイは、同一の通信セッションの様々なアスペクトあるいはビューを示す。例えば、通信機器３０４のディスプレイは、図２に示す同一の参加者２０２、２０４、２０６と同一のディスプレイを示す。通信機器３０６のディスプレイは、通信機器３０６の視点から見た通信セッションの別のビューにおける同一の参加者２０２、２０４、２０６を示す。同様に、通信機器３０８、３１２は、別のビューで同一の参加者２０２、２０４、２０６を示す。一態様において、携帯機器３０８は、無線送信機３１０と接続してネットワークに接続される。携帯機器３０８は、自分自身の通信セッションのビューを生成するか、あるいは別の装置のディスプレイを生成する。

【0034】

図３は、通信セッション内の誰かにコンタクトしようとする人あるいはエンティティのビューを示す。例えば、メアリーが通信機器３０４を有し、フランク２０２に電話しようとする場合を想定する。彼女が電話をし許可が下りると、メアリーには、参加者２０２、２０４、２０６を示すフランクの通信セッションのビューが提示される。これは、通信のタイプに関する変動する詳細レベルの情報（誰が電話しているか、その電話の趣旨は何か等の情報）を提供する。かくしてメアリーにはオプションが提示される。何故なら彼女はこの知識があるからである。メアリーが電話の代わりにＩＭ又は電子メールを望んでいるとすると、彼女は電話会議に参加することを要求する。彼女は、フランクが電話中であり１時間後に電話で彼女に返事をすることを知っている旨のメッセージをフランク２０２に送ろうとする。メアリーに、彼女が電話しようとしている相手の通信セッションのプレゼンスのグラフィカル・イメージが提示されることにより、彼女にとって、フランク２０２との通信について、いかに次のステップを最適にとるかを効率的に決定できる。

【0035】

図４は、ディスプレイ４００上に示された通信セッションのユーザ用のグラフィカル・サブ要素を示す。通信セッションは、マックス・パワー（Max Power）２０４と、フランク・グリムス（Frank Grimes）２０２、カール（Karl）２０６とを有する。グラフィカル・サブ要素の１つのタイプは、現在の通信形態を示す。ユーザは、自分自身の通信モードを変更することができる。これは例えば、別の接続形態アイコンをタッピングすることにより、行うことができる。これによりユーザは、ある通信形態から別のミッド・セッションに、手動であるいはシームレスに、切り替えることができる。携帯電話を介して通信セッションに参加しており、現在ウェブカムの近傍にいるユーザは、テレビ会議・アイコンを、通信セッション上にドラッグして、携帯電話からビデオ会議に切り替えることができる。

【0036】

例えば、マックス・パワー２０４は、現在インスタント・メッセージを介して通信している。フランク・グリムス２０２は電話で通信している。カール２０６はテレビ会議で通信している。図４は、これらのグラフィカル・サブ要素を、個人のアバタの左上コーナ上にある小さなアイコンで示しているが、このようなグラフィカル・サブ要素を様々な方法で表示できる。例えば、システム１００は、１つのインスタント・メッセージ・アイコン近傍にあるインスタント・メッセージを介して通信するユーザのアバタをグループ分けすることができる。システム１００は、リンクの太さ、色、長さ、テクスチャ、アニメーション、デコレーション等を、他のグラフィカル・サブ要素との組み合わせの代わり、変えることができる。

【0037】

現在の通信形態アイコンに加えて、通信セッション内の各参加者のアイコンは、利用可能な又は好ましい通信形態を表示する関連サブアイコンあるいはグラフィカル・サブ要素を有する。例えば、マックス・パワー２０４は、電話のサブアイコン４０８、ＩＭのサブアイコン４１０、電子メールのサブアイコン４１２を有する。フランク・グリムス４１４は、電話のサブアイコン４１４、テレビ会議のサブアイコン４１６、ソーシャル・メディアのサブアイコン４１８を有する。カール２０６は、テレビ会議のサブアイコン４２０、ＩＭのサブアイコン４２２、電子メールのサブアイコン４２４を有する。ユーザは、他の通信セッション参加者と、これらのサブアイコン又はグラフィカル・サブ要素を介して、相互作用する。例えば、カール２０６とのサイドバー通信セッションを設定するために、マックス・パワー２０４は、カール２０６に関連するＩＭサブアイコン４２２をクリックする。ユーザは、通信セッション内の自分のサブアイコンを修正することができる。例えば、フランク・グリムス２０２は、ソーシャル・メディアのサブアイコン４１８をドラッグして、それをサブアイコンのグループから外すことができる。別の構成として、フランク・グリムス２０２は、テレビ会議のサブアイコン４１６をクリックし、電話の接続をテレビ会議の接続に変更するが、通信セッションへの接続は維持したまま、行われる。

【0038】

あるケースでは、サブアイコンは、機能性の複数の関連するファセット（facets)を表すことができる。図５は、グラフィカル・サブ要素用の更なるコンテクストにセンシティブなメニューのディスプレイ５００を示す。ユーザは、このコンテクストにセンシティブなメニューに、アクセスすることができるが、これは、サブアイコンをタッピングしホールドすること、ダブルクリックすること、サブアイコン上をスウィップすること、サブアイコンを右クリックすること、カーソルをサブアイコン上を滑らすことにより、行うことができる。システム１００は、コンテクストにセンシティブなメニューを生成することができるが、これは、入力の種類、通信セッションの現在の状態、又は他の関連情報に基づいて、生成される。例えば、マックス・パワー２０４が、電子メール・サブアイコン５０４をクリックすると、システム１００は、コンテクストにセンシティブなメニュー５０６を表示して、通信セッションの記述を、電子メールを介して送信し、ＩＭから電子メールに切り替え、新たな電子メール・ベースの通信セッションを提示するか、あるいは他のオプションを提示する。フランク・グリムスが、マックス・パワーに関連する同じ電子メールのサブアイコン５０４をクリックすると、システム１００は、コンテクストにセンシティブなメニューの別組のオプションを生成する。システム１００は、電話の可聴音をテキストに変換して、自動音声認識（ＡＳＲ）を介してセッションをテキスト・メッセージ化する、あるいは他の方法でテキストから音声（ＴＴＳ:text-to-speech）へ変換する。かくして、マックス２０４は、ＩＭを介して、フランク２０２とは通信し、カール２０６とは、同一セッションであるが、別のモードで通信できる。これらの差は、セッション・ディスプレイで、視覚的に表示される。

【0039】

ディスプレイ５００は、いずれの参加者にも関連しない追加的サブアイコンを有し、参加者の優先とは無関係に、全て利用可能な通信形態を得ることができる。ユーザは、サブアイコンを追加的サブアイコンからユーザにドラッグして、現在利用できないあるいは好ましくない通信形態を介して、相互作用を要求することができる。例えば、マックス・パワー２０４のアイコンは、テレビ会議用の関連するサブアイコンを有さない。フランク・グリムスは、テレビ会議用のサブアイコンを、追加的サブアイコンからマックス・パワ２０４上にドラッグして、テレビ会議を要求することができる。

【0040】

図６は、通信セッションのグラフィカル・ビューを有する第１のユーザ・インターフェース６００を示す。ユーザ・インターフェース６００は、通信セッション・ビュー６０２と様々な制御機能を有し、通信セッション６０４、例えば、通信形態ボタン６１４、通信接続制御ボタン６１６、コンタクト先のディレクトリ６１８、共通アクション・ボタン６２０を、操作する。「ミュージックをホールドすること」、「音声記録」、「音声から音声への変換」は、共通のアクション・ボタン６２０の一例である。この構成は、例示的なものである。他の構成も様々な方法で配列された要素を含むことができる。

【0041】

通信セッション・ビュー６０２は、３人の参加者、ジョン（John）６０６と、モー（Moe）６０８と、カーリー（Carly）６１０が参加している通信セッション６０４を示す。この実施例において、通信セッション・ビュー６０２は、中央ハブ即ちセッション・マネージャ６１２を有し、これが参加者をリンクする。各参加者のアイコンは、関連するアイコンの組を有し、これにより利用可能なあるいは現在使用されている通信形態を表す。例えば、ジョン６０６は、携帯電話アイコン６０６ａと、ウェブカム・アイコン６０６ｂを有する。モー６０８は、ウェブカム・アイコン６０８ａと、電話アイコン６０８ｂと、コンピュータ・アイコン６０８ｃを有する。カーリー６１０は、電話アイコン６１０ａと、コンピュータ・アイコン６１０ｂと、ウェブカム・アイコン６１０ｃを有する。ユーザは、ユーザ・インターフェース６００の様々な部分から、グラフィカル要素をドラッグしドロップして、様々なアクションを実行する。例えば、参加者を通信セッション６０４に加えること、新たな通信セッションを形成すること、通信セッションを終了すること、通信セッションを分割すること、情報を共有すること等である。

【0042】

図７は、通信セッションのグラフィカル・ビューを有する第２のユーザ・インターフェース７００を示す。図７は、図６とは異なるが、同一の情報を示すス。ユーザ・インターフェース７００は、通信セッション・ビュー７０２と様々な制御機能を有し、通信セッション７０４、例えば、通信形態ボタン７１４、基本的入出力ボタン７１６、コンタクト先のディレクトリ７１８、共通アクション・ボタン７２０を、操作する。この構成は、例示的なものである。他の構成も様々な方法で配列された要素を含むことができる。
通信セッション・ビュー７０２は、３人の参加者、ジョン（John）７０６と、モー（Moe）７０８と、カーリー（Carly）７１０が参加している通信セッション７０４を示す。この実施例において、通信セッション・ビュー７０２は、リンクしたアイコンではなく、共有領域を占有する四角形を示す。この実施例においては、通信セッション・ビュー７０２は、中央ハブ即ちセッション・マネージャ７１２のグラフィカル表示を含まない。各参加者の四角形は、関連するアイコンの組を有し、これにより利用可能なあるいは現在使用されている通信形態を表す。例えば、ジョン７０６は、携帯電話アイコン７０６ａと、ウェブカム・アイコン７０６ｂを有する。モー７０８は、ウェブカム・アイコン７０８ａと、電話アイコン７０８ｂと、コンピュータ・アイコン７０８ｃを有する。カーリー７１０は、電話アイコン７１０ａと、コンピュータ・アイコン７１０ｂと、ウェブカム・アイコン７１０ｃを有する。ユーザは、ユーザ・インターフェース７００の様々な部分から、グラフィカル要素をドラッグしドロップして、様々なアクションを実行する。例えば、参加者を通信セッション７０４に加えること、新たな通信セッションを形成すること、通信セッションを終了すること、通信セッションを分割すること、情報を共有すること等である。

【0043】

ユーザは、自分自身のあるいは他人の通信形態を、通信形態ボタン７１４を介して操作することができる。例えば、ユーザは、通信形態ボタン７１４を参加者のアイコン、例えば、ジョン７０６のアイコン上にクリックしドラッグする、即ち動かすことができる。このアクションによりシステム１００は、指定された通信形態にシフトする。あるいはジョン７０６が指定された通信形態に変更しようとしているか否かを、ジョン７０６に問い合わせることができる。

【0044】

基本的入力／出力ボタン７１６は、ユーザに基本的な機能を与えて、これにより通信セッションを操作したり、新たな通信セッションを形成したり、システムの問い合わせに応答したりする。例えば、ユーザが新たな参加者を通信セッションに参加させようとした時には、ユーザは「新たな」ボタンをクリックする。システム１００は、ダイアログをユーザに提示して、どのコンタクト先を通信セッションに追加すべきかを決定し、「確かですか？（Are you sure?）」のような確認ダイアログを提示する。その後、ユーザは、「ＯＫ」ボタンをタップして確認し、その後にシステム１００は、選択されたコンタクト先を新たな参加者として追加する。

【0045】

図８は、グラフィカル・ユーザ・インターフェース（ＧＵＩ）のグラフィカル・サブ要素のアプリケーションの一例を示す。この実施例は、２人の参加者８０２、８０４が参加している通信セッション８００を示す。通信セッション８００を示すグラフィカル・ユーザ・インターフェース（ＧＵＩ）は、通信セッション・ハブ、即ちセッション・マネージャ８０６のグラフィカル表示を含む。各参加者のアイコンは、通信セッション・ハブ８０６に、現在使用されている、好ましい、通信形態を表す複数のラインを介して、接続されている。例えば、参加者８０２は、通信セッション・ハブ８０６に、３本のラインで接続されている。第１のラインは電話８０８で、第２のラインはテレビ会議８１０で、第３のラインはインスタント・メッセージ８１２である。参加者８０４は、通信セッション・ハブ８０６に２本のラインで接続されている。第１のラインは電話８１４で、第２のランはテキスト・メッセージ８１６である。

【0046】

ユーザは、個々のラインを他のコンタクト先にクリックしドラッグして、更なる通信セッションを確立することができる。例えば、参加者参加者８０２、８０４が、多くの参加者を有する通信セッションの一部であるとすると、参加者８０２は、参加者８０４とサイドバーを確立するが、これはＩＭライン８１２をドラッグし、それを参加者８０４上に直接ドロップすることで行う。その後、サイドバーを終了するために参加者８０４は、ＩＭライン８１２を通信セッション・ハブ８０６に戻すようドラッグする。

【0047】

別の態様において、通信セッションは、各参加者に対し複数の通信形態を有する。例えば、通信セッションは、テレビ会議であり、このテレビ会議において、全ての参加者は、ビデオ・ストリーム（ビデオカメラを利用している場合）を有し、ある参加者は、オーディオ・ストリーム（マイクロフォンを利用している場合）を有し、通信セッションは、ビデオ・ストリームの元でテキストベースのチャットを有する。この実施例において、グラフィカル表示の各参加者は、通信セッションに、１本、２本、３本のグラフィカル・リンクを介して接続される。このグラフィカル・リンクが、実際の通信形態を表す。ユーザは、個別に通信セッションへの各通信形態のリンクを制御（終了、追加、無音、中止等）できる。例えば、参加者８０２は、テレビ会議・リンク（ビデオ・ストリームを他の参加者８０４にハブ８０６を介して供給するリンク）８１０を中止しているが、他の２つの通信形態、電話８０８とＩＭ８１２は維持している。この場合、参加者８０２は、後でテレビ会議・リンク８１０を再開することができる。

【0048】

次に図９を参照して本発明の方法を説明する。本発明の方法は、図１のシステムを例に議論する。図２、図４−８は、図９の方法のグラフィカル・インターフェースの一例を示す。

【0049】

図９は、グラフィカル・ユーザ・インターフェースのウィジェットを用いて、中立的に通信モードを管理する方法を示す。システム１００は、グラフィカル・ユーザ・インターフェースを介して、接続されたグラフィカル要素の組を表す。この接続されたグラフィカル要素が、複数の通信ユーザを含む通信セッションの構造を表す。ユーザを表す各グラフィカル要素は、ユーザ通信の詳細を示すグラフィカル・サブ要素を更に含む。グラフィカル・サブ要素あるいは通信ウィジェットは、関連するユーザが通信セッションに接続される通信モードを示す。グラフィカル・サブ要素は、関連するユーザに対し利用可能な通信モードを示す。あるグラフィカル・サブ要素は、電話アイコン、携帯電話アイコン、インスタント・メッセージ・アイコン、カメラ・アイコン、ビデオカメラ・アイコン、マイクロフォン・アイコン、テキスト・メッセージ・アイコン、ドキュメント・アイコン、ヘッドセット・アイコン、電子メール・アイコンを含む。ライン、形状、近接性、共通形状、共通の色、共通の外観のいずれかが、グラフィカル・ユーザ・インターフェースの中の連結されたグラフィカル要素を接続する。一態様において、システム１００は、通信詳細を変更することに基づいて、グラフィカル・サブ要素をダイナミックに更新する。例えば、ユーザが、インスタント・メッセージからテレビ会議にシフトした場合には、システム１００は、それぞれのサブアイコンを更新して、そのシフトを反映する。

【0050】

システム１００は、接続されたグラフィカル要素の組に関連するユーザ入力を受領する。このユーザ入力は、通信セッションに関連するアクションを有する（９０４）。ユーザ入力は、マウスのクリック、タッチスクリーン上での指の接触あるいは他の適宜の入力である。ユーザは、アイコンをクリックし、ドラッグし、ドロップし、即ち動かして、ユーザの入力とすることができる。

【0051】

モード的に中立な方法でユーザ制御に適用する例を次に説明する。例えば、図７に示すディスプレイは、「ＯＫ」ボタン、「ＣＡＮＣＥＬ」ボタン、「ＵＮＤＯ」ボタン（左向き矢印）と「ＲＥＤＯ」（右向き矢印）を、ベーシックな入力／出力ボタン７１６の一部として有する。これによりユーザは、連続するステップで呼びの接続グラフを編集し、その後ユーザが「ＯＫ」ボタンで確認した後に、全てのアクションを実行する。「ＣＡＮＣＥＬ」と「ＵＮＤＯ／ＲＥＤＯ」ボタンにより、ユーザは、アクションを実行する前に修正することができる。例えば、ユーザは、最初にラインハルト（Reinhard）を現在のオーディオ・セッションに追加し、その後にデビッド（David）、更にＪＣを追加することができる。ＯＫボタンを押した後、システム１００は、同時にこの３人の新たな参加者にダイアルをする。ユーザは、類似のステップのシーケンスを適用して、３人の新たな参加者を、既存のＩＭセッションに追加できる。モード的に中立なＧＵＩの例の違いは、オーディオ・セッションを拡張するための、新たな参加者に対するドロップ・ターゲットは、参加者ウィンドウ内のオーディオ・アイコンであり、一方、ＩＭセッションを拡張するためのドロップ・ターゲットは、ＩＭアイコンである。他の変形例において、ユーザは、全ての所望の個人のアイコンを、汎用の通信セッションアイコンにドラッグするだけでよい。システム１００は、全ての所望の人に対する共通の通信形態を決定し、この共通の通信形態で各人に接触する。

【0052】

システム１００は、受領したユーザ入力に基づいて、アクションを実行する（９０６)。システム１００は、特定のグラフィカル・サブ要素を示す第１ユーザ入力を受領し、この特定のグラフィカル・サブ要素に基づいたオプション・メニューとそれぞれの関連するユーザを表示し、前記オプションのメニュー内のオプションを選択する第２のユーザ入力を受領し、この第２のユーザ入力に基づいて、通信セッションを操作する。一実施例において、システム１００は、通信セッションを操作するが、これは、個別の通信セッションを生成することにより行なう。

【0053】

インターフェースは、全ての通信形態をセッション制御と同一に取り扱う。例えば、あらゆるモード又はタイプの通信セッションは、同一のユーザ入力通信形態を用いて、制御管理される。かくして通信セッションが、開始し、終了し、分離され、参加者が追加されたり外されたりするは、同一の通信形態（ドラッグ＆ドロップ、音声、ジェスチャ入力、タッピング等)が、別の通信モードでも、同一の機能を実行できる。４人の参加者がいるＩＭチャット・セッションは、２人のＩＭチャット参加者のセッションに二分割できるが、これは、４人の参加者がいる電話会議を、２人参加者がいる電話会議に二分割するのと同一の形態で、行なわれる。通信セッションは、ウェブ上のテレビ会議あるいはセッションを共有するスクリーンである。セッション制御に関しユーザが実行する操作は、同じでる。

【0054】

かくして図２、図４−８に示すインターフェースは、新たな通信モードをサポートし、これにより、ユーザが他の通信モードと同一の通信形態で新たな通信モードを管理できるようになる。例えば、システムが、Google wave のような通信モードを、呼び、ビデオ、ＩＭ、電子メールあるいはソーシャルに加えて、統合すると、グラフィカル・ユーザ・インターフェース制御は、同一となる。システム１００は、新たなモードを受領し、一体化されたプロセスを実行して、通信セッションをこの新たなモードの元で制御（例えば、開始、終了、分離等)を行なう。その後、システムは、新たなモードを表すユーティリティ・アイコンをユーザに示す。この時点で、ユーザは、新たな通信形態についての知識は必要ないが、セッション制御に関し同一の動作手順(semantics)を維持する。同一の呼び接続メタファ(metaphors：ユーザの効果的な理解を促すための手法)、制御ボタン、ジェスチャ、音声コマンド、フリッカー・ムーブメント、装置の振動、あるいはユーザ入力の他のタイプの操作は、モード中立を維持する。これらの入力形態の全てを再使用し、通信機器の更なるモードに対するインターフェースに適用される。

【0055】

用語「コンピュータで読み取り可能な媒体」とは、コンピュータが実行するプロセスを記憶する媒体或いは伝送媒体を意味する。媒体とは、非揮発性媒体、揮発性媒体、伝送媒体を意味する。非揮発性の媒体とは、ＮＶＲＡＭ、磁気ディスク又は光学ディスクである。揮発性媒体とは、ＤＲＡＭ、メインメモリを意味する。このコンピュータで読み取り可能な媒体の一般的なものとしては、フロッピーディスク、フレキシブルディスク、ハードディスク、磁気ディスク、他の磁気媒体、磁気光学媒体、ＣＤ−ＲＯＭ、パンチカード、ペーパーテープ等、更にＲＡＭ、ＰＲＯＭ、ＥＰＲＯＭ、ＦＬＡＳＨ−ＥＰＲＯＭ、メモリカード、メモリチップ、或いはカートリッジ等がある。ｅ−ｍａｉｌ或いは他の自己保存型の情報アーカイブに付属したデジタルファイルは、記憶媒体に等価な分配型の記憶媒体であり、本発明でいう記憶媒体と見なすことができる。コンピュータで読み取り可能な媒体がデータベースとして構築された場合には、このデータベースは、あらゆる種類のデータベース、例えば関連型、階層型、オブジェクト志向型のいずれをも含む。
他の実施例においては、開示された方法は、コンピュータで読み取り可能な記憶媒体に記憶されたソフトウエアで実行され、コントローラとメモリとを有するプログラムされた汎用コンピュータ、特殊目的コンピュータ、マイクロプロセッサ等で実施される。これ等の実施例においては、本発明のシステムと方法は、パソコンに組み込まれたプログラムで実行できる。例えばアプレット、ＪＡＶＡ、Ｃグラフィカル・インターフェーススクプリト、サーバ或いはコンピュータ、ワークステーションに記録された資源或いは専用の測定システムに組み込まれたルーチン等で実施できる。
本発明のシステムは、本発明のシステムと方法をソフトウエア又はハードウエアのシステムに物理的に組み込むことにより実施することもできる。 本発明は、特定の標準及びプロトコルを例に説明したが、本発明はこのような標準とプロトコルに制限されるものではない。他の類似の標準とプロトコルも本発明で用いることができる。これ等の標準とプロトコルは、今後開発されるより効率的な標準とプロトコルで置換されるかも知れないが、このような置換も本発明の一態様（一実施例）と考えられる。

【0056】

以上の説明は、本発明の一実施例に関するもので、この技術分野の当業者であれば、本発明の種々の変形例を考え得るが、それらはいずれも本発明の技術的範囲に包含される。特許請求の範囲の構成要素の後に記載した括弧内の番号は、図面の部品番号に対応し、発明の容易なる理解の為に付したものであり、発明を限定的に解釈するために用いてはならない。また、同一番号でも明細書と特許請求の範囲の部品名は必ずしも同一ではない。これは上記した理由による。用語「又は」に関して、例えば「Ａ又はＢ」は、「Ａのみ」、「Ｂのみ」ならず、「ＡとＢの両方」を選択することも含む。特に記載のない限り、装置又は手段の数は、単数か複数かを問わない。

【符号の説明】

【0057】

１００ システム
１１０ システム・バス
１２０ プロセッサ
１２２ キャッシュ
１３０ メモリ
１４０ ＲＯＭ
１５０ ＲＡＭ
１６０ 記憶装置
１７０ 出力装置
１８０ 通信インターフェース
１９０ 入力装置
２００ グラフィカル・ユーザ・インターフェース
２０８，２１０，２１２，２１４，２１６，２２０ ユーティリティ・アイコン
２０２，２０４，２０６ グラフィカル要素
２０２ フランク・グリムス
２０４ マックス・パワー
２０６ カール
２０２ａ，２０４ａ，２０６ａ 識別子

図５
記述を送る
電子メールに切り替える
新たな電子メール・セッションを作る


図９
開始
９０２：グラフィカル・ユーザ・インターフェース(ＧＵＩ)を介して、接続されたグラフィカル要素の組を提示する。前記接続されたグラフィカル要素の組は、複数の通信ユーザを含む通信セッションを表し、前記各グラフィカル要素は、ユーザを表示し、更にユーザの通信の詳細を示すグラフィカル要素を含み、
９０４：前記接続されたグラフィカル要素の組に関連するユーザ入力を受領する。前記ユーザ入力は、前記通信セッションに関するアクションを有し、
９０６：前記アクションを前記入力した受領したユーザ入力に基づいて実行する。
終了

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】