特許7416519 | 知財ポータル「IP Force」

知財求人 - 知財ポータルサイト「IP Force」

▶ オナー　デバイス　カンパニー　リミテッドの特許一覧

特許7416519マルチ端末マルチメディアデータ通信方法及びシステム

書誌要約請求の範囲詳細な説明課題実施例実施するための形態図面の説明

目に優しい文字サイズ小中大 PDF Top

< >

1
2
3
4
5
6
7A
7B
8A
8B
9
10A
10B
11
12A
12B
13
14
15
16
17(a)
17(b)
17(c)
18(a)
18(b)
18(c)
19(a)
19(b)
20(a)
20(b)
20(c)
21
22(a)
22(b)
23(a)
23(b)
23(c)
24
25
26
27
28A
28B
29A
29B
30(a)
30(b)
30(c)
31(a)
31(b)
32

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-01-09

(45)【発行日】2024-01-17

(54)【発明の名称】マルチ端末マルチメディアデータ通信方法及びシステム

(51)【国際特許分類】

G10K 15/04 20060101AFI20240110BHJP

G06F 3/16 20060101ALI20240110BHJP

H04L 65/403 20220101ALI20240110BHJP

【ＦＩ】

G10K15/04 302D

G06F3/16 500

H04L65/403

【請求項の数】 13

(21)【出願番号】P 2021566505

(86)(22)【出願日】2020-06-18

(65)【公表番号】

(43)【公表日】2022-08-23

(86)【国際出願番号】 CN2020096679

(87)【国際公開番号】W WO2020253754

(87)【国際公開日】2020-12-24

【審査請求日】2021-12-10

(31)【優先権主張番号】201910533498.0

(32)【優先日】2019-06-19

(33)【優先権主張国・地域又は機関】CN

【前置審査】

(73)【特許権者】

【識別番号】521218881

【氏名又は名称】オナーデバイスカンパニーリミテッド

(74)【代理人】

【識別番号】110000877

【氏名又は名称】弁理士法人ＲＹＵＫＡ国際特許事務所

(72)【発明者】

【氏名】ヤン、シャオ

(72)【発明者】

【氏名】リー、チュンジアン

【審査官】大石剛

(56)【参考文献】

【文献】特開２０１３－２３１９５１（ＪＰ，Ａ）

【文献】特開２００５－０７７４８５（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ１０Ｋ１５／０４

Ｇ０６Ｆ３／１６

Ｈ０４Ｌ６５／４０３

(57)【特許請求の範囲】

【請求項1】

１つのマスター電子デバイス、１つの第１のスレーブ電子デバイス、及び１つの第２のスレーブ電子デバイスを備える複数の電子デバイスに適用される、マルチ端末マルチメディアデータ通信方法であって、
前記マスター電子デバイスが、前記第１のスレーブ電子デバイス及び前記第２のスレーブ電子デバイスとの接続を別々に確立する段階であって、前記マスター電子デバイス及び前記第１のスレーブ電子デバイスは、同一の無線ローカルエリアネットワークに位置する、段階と、
前記第１のスレーブ電子デバイスが、第１の再生命令を受信し、前記第１のスレーブ電子デバイスが、前記第１の再生命令を前記マスター電子デバイスに送信する段階と、
前記マスター電子デバイスが、前記第１の再生命令に応答して第１のマルチメディアデータを再生し、同時に、前記第１のマルチメディアデータの少なくとも一部を前記第１のスレーブ電子デバイス及び前記第２のスレーブ電子デバイスに送信し、前記マスター電子デバイス、前記第１のスレーブ電子デバイス、及び前記第２のスレーブ電子デバイスが前記第１のマルチメディアデータを同期的に再生することを可能にする段階と、
前記第１のスレーブ電子デバイスが、第１のボーカルを受信し、同時に、前記第２のスレーブ電子デバイスが、第２のボーカルを受信する段階と、
前記マスター電子デバイスが、前記第１のスレーブ電子デバイスによって送信された前記第１のボーカルを受信し、前記第２のスレーブ電子デバイスによって送信された前記第２のボーカルを受信し、前記マスター電子デバイスが、前記第１のボーカル、前記第２のボーカル、及び前記第１のマルチメディアデータをミキシングして再生用の第２のマルチメディアデータを生成する段階と
を備える、方法であって、
前記マスター電子デバイス、前記第１のスレーブ電子デバイス、及び前記第２のスレーブ電子デバイスが前記第１のマルチメディアデータを同期的に再生することを可能にする前記段階は、具体的には、
前記マスター電子デバイスが、前記マスター電子デバイスと前記第１のスレーブ電子デバイスとの間の第１のクロックオフセットを決定する段階、
前記マスター電子デバイスが、前記マスター電子デバイスと前記第２のスレーブ電子デバイスとの間の第２のクロックオフセットを決定する段階、
前記マスター電子デバイスが、前記第１のクロックオフセットに従って、前記第１のスレーブ電子デバイスが前記第１のマルチメディアデータを再生する第１の再生開始時点を決定する段階であって、前記第１の再生開始時点は、前記第１のスレーブ電子デバイスが前記第１のマルチメディアデータを再生する開始時点を表すために用いられる、段階、及び
前記マスター電子デバイスが、前記第２のクロックオフセットに従って、前記第２のスレーブ電子デバイスが前記第１のマルチメディアデータを再生する第２の再生開始時点を決定する段階であって、前記第２の再生開始時点は、前記第２のスレーブ電子デバイスが前記第１のマルチメディアデータを再生する開始時点を表すために用いられる、段階
である、又は、
前記マスター電子デバイスが、前記マスター電子デバイスが前記第１のマルチメディアデータを再生する開始時点を前記第１のスレーブ電子デバイス及び前記第２のスレーブ電子デバイスに送信する段階、
前記第１のスレーブ電子デバイスが、前記マスター電子デバイスと前記第１のスレーブ電子デバイスとの間の前記第１のクロックオフセットを決定し、前記マスター電子デバイスが前記第１のマルチメディアデータを再生する前記開始時点と前記第１のクロックオフセットとに従い、前記第１のスレーブ電子デバイスが、前記第１のマルチメディアデータを再生する前記第１の再生開始時点を決定する段階、及び
前記第２のスレーブ電子デバイスが、前記マスター電子デバイスと前記第２のスレーブ電子デバイスとの間の前記第２のクロックオフセットを決定し、前記マスター電子デバイスが前記第１のマルチメディアデータを再生する前記開始時点と前記第２のクロックオフセットとに従い、前記第２のスレーブ電子デバイスが、前記第１のマルチメディアデータを再生する前記第２の再生開始時点を決定する段階、である、又は、
前記マスター電子デバイスが、前記マスター電子デバイスと前記第１のスレーブ電子デバイスとの間の前記第１のクロックオフセットを決定する段階、
前記マスター電子デバイスが、前記マスター電子デバイスと前記第２のスレーブ電子デバイスとの間の前記第２のクロックオフセットを決定する段階、
前記マスター電子デバイスが、前記マスター電子デバイスが前記第１のマルチメディアデータを再生する前記開始時点と前記第１のクロックオフセットとを前記第１のスレーブ電子デバイスに送信する段階、
前記マスター電子デバイスが、前記マスター電子デバイスが前記第１のマルチメディアデータを再生する前記開始時点と前記第２のクロックオフセットとを前記第２のスレーブ電子デバイスに送信する段階、
前記第１のスレーブ電子デバイスが、前記マスター電子デバイスが前記第１のマルチメディアデータを再生する前記開始時点と前記第１のクロックオフセットとに従い、前記第１のスレーブ電子デバイスが前記第１のマルチメディアデータを再生する前記第１の再生開始時点を決定する段階、及び
前記第２のスレーブ電子デバイスが、前記マスター電子デバイスが前記第１のマルチメディアデータを再生する前記開始時点と前記第２のクロックオフセットとに従い、前記第２のスレーブ電子デバイスが前記第１のマルチメディアデータを再生する前記第２の再生開始時点を決定する段階、であり、
前記マスター電子デバイスが、前記第１のスレーブ電子デバイス及び前記第２のスレーブ電子デバイスとの接続を別々に確立する前記段階は、
前記マスター電子デバイスが、１つのＷｉ－Ｆｉ（登録商標）接続識別子及びネットワーク情報を示す二次元コードを表示し、前記第１のスレーブ電子デバイスが、前記二次元コードをスキャンすることで前記Ｗｉ－Ｆｉ（登録商標）接続識別子を認識することによって前記マスター電子デバイスとの前記接続を確立する段階と、
前記マスター電子デバイス及び前記第２のスレーブ電子デバイスが同一の無線ローカルエリアネットワークに位置していない場合、前記マスター電子デバイスが、前記二次元コードを前記第２のスレーブ電子デバイスに送信し、前記第２のスレーブ電子デバイスが、前記二次元コードに対するタッチ操作に応じて前記二次元コードに示される前記ネットワーク情報を解析することによって前記マスター電子デバイスとの前記接続を確立する段階と、を有する、
方法。

【請求項2】

前記マスター電子デバイスが前記第１のマルチメディアデータをクラウドサーバからダウンロードする段階をさらに備える、請求項１に記載の方法。

【請求項3】

前記マスター電子デバイスが、前記第１のボーカル、前記第２のボーカル、及び前記第１のマルチメディアデータをミキシングして再生用の第２のマルチメディアデータを生成する前記段階は、前記マスター電子デバイスが、前記第１のボーカル及び前記第２のボーカルに対しアンチハウリングを実行して、前記アンチハウリング後のボーカルを取得し、前記アンチハウリング後のボーカルと前記第１のマルチメディアデータとをミキシングして、前記第２のマルチメディアデータを生成する段階を含む、請求項１または２に記載の方法。

【請求項4】

前記マスター電子デバイスが、前記第１のボーカル、前記第２のボーカル、及び前記第１のマルチメディアデータをミキシングして再生用の第２のマルチメディアデータを生成する前記段階の後に、前記方法は、
前記マスター電子デバイスが、前記第２のマルチメディアデータを前記第２のスレーブ電子デバイスに送信する段階と、
前記マスター電子デバイス及び前記第２のスレーブ電子デバイスが、前記第２のマルチメディアデータを同期的に再生する段階と
をさらに備える、請求項１から３のいずれか一項に記載の方法。

【請求項5】

前記第１のマルチメディアデータの前記少なくとも一部は、前記第１のマルチメディアデータのオーディオ、ビデオ、又は歌詞を含む、請求項１に記載の方法。

【請求項6】

前記マスター電子デバイスが、ユーザによって入力された第２の再生命令を受信する段階と、
前記マスター電子デバイスが、前記第２の再生命令に応答して第３のマルチメディアデータを再生し、同時に、前記第３のマルチメディアデータの少なくとも一部を前記第１のスレーブ電子デバイス及び前記第２のスレーブ電子デバイスに送信し、前記マスター電子デバイス、前記第１のスレーブ電子デバイス、及び前記第２のスレーブ電子デバイスが前記第３のマルチメディアデータを同期的に再生することを可能にする段階と、
前記第１のスレーブ電子デバイスが、前記第１のボーカルを受信し、同時に、前記第２のスレーブ電子デバイスが、前記第２のボーカルを受信する段階と、
前記マスター電子デバイスが、前記第１のスレーブ電子デバイスによって送信された前記第１のボーカルを受信し、前記第２のスレーブ電子デバイスによって送信された前記第２のボーカルを受信し、前記マスター電子デバイスが、前記第１のボーカル、前記第２のボーカル、及び前記第３のマルチメディアデータをミキシングして再生用の第４のマルチメディアデータを生成する段階と
をさらに備える、請求項１に記載の方法。

【請求項7】

前記第１のスレーブ電子デバイスが、前記第１のボーカルを受信し、同時に、前記第２のスレーブ電子デバイスが、前記第２のボーカルを受信し、同時に、前記マスター電子デバイスが、第３のボーカルを受信する段階と、
前記マスター電子デバイスが、前記第１のスレーブ電子デバイスによって送信された前記第１のボーカルを受信し、前記第２のスレーブ電子デバイスによって送信された前記第２のボーカルを受信し、前記マスター電子デバイスが、前記第１のボーカル、前記第２のボーカル、前記第３のボーカル、及び前記第４のマルチメディアデータをミキシングして再生用の第５のマルチメディアファイルを生成する段階と
さらに備える、請求項６に記載の方法。

【請求項8】

１つのマスター電子デバイス、１つの第１のスレーブ電子デバイス、及び１つの第２のスレーブ電子デバイスを備える、マルチ端末マルチメディアデータ通信システムであって、
前記マスター電子デバイスが、前記第１のスレーブ電子デバイス及び前記第２のスレーブ電子デバイスとの接続を別々に確立するよう構成され、前記マスター電子デバイス及び前記第１のスレーブ電子デバイスは、同一の無線ローカルエリアネットワークに位置し、
前記第１のスレーブ電子デバイスが、第１の再生命令を受信するよう構成され、前記第１のスレーブ電子デバイスが、前記第１の再生命令を前記マスター電子デバイスに送信するようさらに構成され、
前記マスター電子デバイスが、前記第１の再生命令に応答して第１のマルチメディアデータを再生し、同時に、前記第１のマルチメディアデータの少なくとも一部を前記第１のスレーブ電子デバイス及び前記第２のスレーブ電子デバイスに送信し、前記マスター電子デバイス、前記第１のスレーブ電子デバイス、及び前記第２のスレーブ電子デバイスが前記第１のマルチメディアデータを同期的に再生することを可能するようさらに構成され、
前記第１のスレーブ電子デバイスが、第１のボーカルを受信するようさらに構成され、同時に、前記第２のスレーブ電子デバイスが、第２のボーカルを受信するよう構成され、
前記マスター電子デバイスが、前記第１のスレーブ電子デバイスによって送信された前記第１のボーカルを受信し、前記第２のスレーブ電子デバイスによって送信された前記第２のボーカルを受信するようさらに構成され、前記マスター電子デバイスが、前記第１のボーカル、前記第２のボーカル、及び前記第１のマルチメディアデータをミキシングして再生用の第２のマルチメディアデータを生成するようさらに構成され、
前記マスター電子デバイス、前記第１のスレーブ電子デバイス、及び前記第２のスレーブ電子デバイスが前記第１のマルチメディアデータを同期的に再生することを可能にすることは、具体的には、
前記マスター電子デバイスが、前記マスター電子デバイスと前記第１のスレーブ電子デバイスとの間の第１のクロックオフセットを決定するよう構成され、
前記マスター電子デバイスが、前記マスター電子デバイスと前記第２のスレーブ電子デバイスとの間の第２のクロックオフセットを決定するようさらに構成され、
前記マスター電子デバイスが、前記第１のクロックオフセットに従って、前記第１のスレーブ電子デバイスが前記第１のマルチメディアデータを再生する第１の再生開始時点を決定するようさらに構成され、前記第１の再生開始時点は、前記第１のスレーブ電子デバイスが前記第１のマルチメディアデータを再生する開始時点を表すために用いられ、及び
前記マスター電子デバイスが、前記第２のクロックオフセットに従って、前記第２のスレーブ電子デバイスが前記第１のマルチメディアデータを再生する第２の再生開始時点を決定するようさらに構成され、前記第２の再生開始時点は、前記第２のスレーブ電子デバイスが前記第１のマルチメディアデータを再生する開始時点を表すために用いられる、こと
である、又は、
前記マスター電子デバイスが、前記マスター電子デバイスが前記第１のマルチメディアデータを再生する開始時点を前記第１のスレーブ電子デバイス及び前記第２のスレーブ電子デバイスに送信するよう構成され、
前記第１のスレーブ電子デバイスが、前記マスター電子デバイスと前記第１のスレーブ電子デバイスとの間の前記第１のクロックオフセットを決定し、前記マスター電子デバイスが前記第１のマルチメディアデータを再生する前記開始時点と前記第１のクロックオフセットとに従い、前記第１のスレーブ電子デバイスが、前記第１のマルチメディアデータを再生する前記第１の再生開始時点を決定するよう構成され、及び
前記第２のスレーブ電子デバイスが、前記マスター電子デバイスと前記第２のスレーブ電子デバイスとの間の前記第２のクロックオフセットを決定し、前記マスター電子デバイスが前記第１のマルチメディアデータを再生する前記開始時点と前記第２のクロックオフセットとに従い、前記第２のスレーブ電子デバイスが、前記第１のマルチメディアデータを再生する前記第２の再生開始時点を決定するよう構成されること、
である、又は、
前記マスター電子デバイスが、前記マスター電子デバイスと前記第１のスレーブ電子デバイスとの間の前記第１のクロックオフセットを決定するよう構成され、
前記マスター電子デバイスが、前記マスター電子デバイスと前記第２のスレーブ電子デバイスとの間の前記第２のクロックオフセットを決定するよう構成され、
前記マスター電子デバイスが、前記マスター電子デバイスが前記第１のマルチメディアデータを再生する前記開始時点と前記第１のクロックオフセットとを前記第１のスレーブ電子デバイスに送信するよう構成され、
前記マスター電子デバイスが、前記マスター電子デバイスが前記第１のマルチメディアデータを再生する前記開始時点と前記第２のクロックオフセットとを前記第２のスレーブ電子デバイスに送信するよう構成され、
前記第１のスレーブ電子デバイスが、前記マスター電子デバイスが前記第１のマルチメディアデータを再生する前記開始時点と前記第１のクロックオフセットとに従い、前記第１のスレーブ電子デバイスが前記第１のマルチメディアデータを再生する前記第１の再生開始時点を決定するよう構成され、及び
前記第２のスレーブ電子デバイスが、前記マスター電子デバイスが前記第１のマルチメディアデータを再生する前記開始時点と前記第２のクロックオフセットとに従い、前記第２のスレーブ電子デバイスが前記第１のマルチメディアデータを再生する前記第２の再生開始時点を決定するよう構成される、ことであり、
前記第１のスレーブ電子デバイス及び前記第２のスレーブ電子デバイスとの接続を別々に確立するよう構成されている前記マスター電子デバイスは、
前記マスター電子デバイスが、１つのＷｉ－Ｆｉ（登録商標）接続識別子及びネットワーク情報を示す二次元コードを表示するよう構成され、前記第１のスレーブ電子デバイスが、前記二次元コードをスキャンすることで前記Ｗｉ－Ｆｉ（登録商標）接続識別子を認識することによって前記マスター電子デバイスとの前記接続を確立するよう構成され、及び
前記マスター電子デバイス及び前記第２のスレーブ電子デバイスが同一の無線ローカルエリアネットワークに位置していない場合、前記マスター電子デバイスが、前記二次元コードを前記第２のスレーブ電子デバイスに送信するよう構成され、前記第２のスレーブ電子デバイスが、前記二次元コードに対するタッチ操作に応じて前記二次元コードに示される前記ネットワーク情報を解析することによって前記マスター電子デバイスとの前記接続を確立するよう構成される
システム。

【請求項9】

前記マスター電子デバイスが、前記第１のボーカル、前記第２のボーカル、及び前記第１のマルチメディアデータをミキシングして再生用の前記第２のマルチメディアデータを生成した後に、前記システムは、
前記マスター電子デバイスが、前記第２のマルチメディアデータを前記第２のスレーブ電子デバイスに送信するようさらに構成され、
前記マスター電子デバイス及び前記第２のスレーブ電子デバイスが、前記第２のマルチメディアデータを同期的に再生する
ことをさらに備える、請求項８に記載のシステム。

【請求項10】

前記第１のマルチメディアデータの前記少なくとも一部は、前記第１のマルチメディアデータのオーディオ、ビデオ、又は歌詞を含む、請求項８に記載のシステム。

【請求項11】

前記マスター電子デバイスが、ユーザによって入力された第２の再生命令を受信するよう構成され、
前記マスター電子デバイスが、前記第２の再生命令に応答して第３のマルチメディアデータを再生し、同時に、前記第３のマルチメディアデータの少なくとも一部を前記第１のスレーブ電子デバイス及び前記第２のスレーブ電子デバイスに送信し、前記マスター電子デバイス、前記第１のスレーブ電子デバイス、及び前記第２のスレーブ電子デバイスが前記第３のマルチメディアデータを同期的に再生することを可能にするようさらに構成され、
前記第１のスレーブ電子デバイスが、前記第１のボーカルを受信するよう構成され、同時に、前記第２のスレーブ電子デバイスが、前記第２のボーカルを受信するよう構成され、
前記マスター電子デバイスが、前記第１のスレーブ電子デバイスによって送信された前記第１のボーカルを受信し、前記第２のスレーブ電子デバイスによって送信された前記第２のボーカルを受信するようさらに構成され、前記マスター電子デバイスが、前記第１のボーカル、前記第２のボーカル、及び前記第３のマルチメディアデータをミキシングして再生用の第４のマルチメディアデータを生成するようさらに構成される
ことをさらに備える、請求項８に記載のシステム。

【請求項12】

前記第１のスレーブ電子デバイスが、前記第１のボーカルを受信するようさらに構成され、同時に、前記第２のスレーブ電子デバイスが、前記第２のボーカルを受信するようさらに構成され、同時に、前記マスター電子デバイスが、第３のボーカルを受信するようさらに構成され、
前記マスター電子デバイスが、前記第１のスレーブ電子デバイスによって送信された前記第１のボーカルを受信し、前記第２のスレーブ電子デバイスによって送信された前記第２のボーカルを受信するようさらに構成され、前記マスター電子デバイスが、前記第１のボーカル、前記第２のボーカル、前記第３のボーカル、及び前記第４のマルチメディアデータをミキシングして再生用の第５のマルチメディアファイルを生成するようさらに構成される
ことをさらに備える、請求項１１に記載のシステム。

【請求項13】

コンピュータに、請求項１から７のいずれか一項に記載のマルチ端末マルチメディアデータ通信方法を実行させる、コンピュータプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

［関連出願の相互参照］
本願は、２０１９年６月１９日に国家知識産権局に出願された、「マルチ端末マルチメディアデータ通信方法及びシステム（ＭＵＬＴＩ－ＴＥＲＭＩＮＡＬＭＵＬＴＩＭＥＤＩＡＤＡＴＡＣＯＭＭＵＮＩＣＡＴＩＯＮＭＥＴＨＯＤＡＮＤＳＹＳＴＥＭ）」と題された中国特許出願第２０１９１０５３３４９８．０号の優先権を主張し、その全体が参照により本明細書に組み込まれる。

【0002】

本願の実施形態は、マルチメディア技術の分野に関連し、特に、マルチ端末マルチメディアデータ通信方法及びシステムに関連する。

【背景技術】

【0003】

携帯電話、タブレットコンピュータ、パーソナルコンピュータ（ｐｅｒｓｏｎａｌｃｏｍｐｕｔｅｒ、ＰＣ）及び無線スピーカ等のモバイル端末のオーディオデバイスの需要及びインテリジェントな開発により、複数のスマートデバイスは、通常、同時に家に存在し、有線又は無線手段によって同一のローカルエリアネットワークに接続されており、これは、ユーザのエンターテイメント体験を高めるべく、クロスデバイスの相互作用及び共同エンターテイメントに重要な開発の方向性を作り出す。

【0004】

マルチデバイスカラオケ（ｍｕｌｔｉ－ｄｅｖｉｃｅＫａｒａｏｋｅ）等の、現在のマルチ端末共同アップストリーム及びダウンストリームマルチメディアアプリケーションは、通常、複数の電子デバイス（例えば、携帯電話）を含む。複数の電子デバイスのうちの１つはマスターであり、その他はスレーブである。マスターによってカラオケルームを確立した後、部屋のオーナは、ＫＴＶ機能をオンにし、他のスレーブは、カラオケルームに参加し得る。部屋のオーナは、オンラインで歌を注文し得る。歌は、ＫＴＶルームにおける一般的なＭＶと同様に、ピクチャ、字幕、及び伴奏を含む。視聴者は、スレーブによってマイクロフォンを要求し得る。部屋のオーナが要求を承認した後、視聴者は、オンラインで歌を注文し、マイクロフォンを用いるために整列し始める。それがマイクロフォンを用いる視聴者の順番で、視聴者によって注文された歌が再生され始めるとき、視聴者は歌手になる。視聴者は、スレーブによって伴奏の音量及びボーカルの音量を調節し得る。しかしながら、この時点では、マスターは、依然として歌を制御する権限（歌を休止する又は歌をスキップする）を有する。上記処理において、「マイクロフォン」は、マイクロフォンが接続された状態で異なる視聴者に連続して渡されて、歌手は、常に１人である。この場合、実際の複数人のＫＴＶのように数人が同時にカラオケする利用シナリオが、実装できていない。

【発明の概要】

【0005】

本願の実施形態は、マルチ端末マルチメディアデータ通信方法及びシステムを提供し、その結果、複数の端末が、新しい体験を提供すべく新しい用途を確立するために共同し得、複数のデバイスが相互接続され得、マルチメディアコンテンツを好都合に共有し得、これにより、複数のデバイスの有利な機能を十分に利用する。さらに、本発明はまた、マルチデバイス共同に基づくエコロジー及びアプリケーションシステムを構築することに役立つ。

【0006】

前述の目的を実現すべく、以下の技術的解決手段が本願の実施形態に用いられる。

【0007】

第１の態様によれば、本願の一実施形態は、複数の電子デバイスに適用される、マルチ端末マルチメディアデータ通信方法を提供する。上記複数の電子デバイスは、１つのマスター電子デバイス、１つの第１のスレーブ電子デバイス、及び１つの第２のスレーブ電子デバイスを含む。上記方法は、上記マスター電子デバイスが、上記第１のスレーブ電子デバイス及び上記第２のスレーブ電子デバイスとの接続を別々に確立する段階と、上記第１のスレーブ電子デバイスが、第１の再生命令を受信し、上記第１のスレーブ電子デバイスが、上記第１の再生命令を上記マスター電子デバイスに送信する段階と、上記マスター電子デバイスが、上記第１の再生命令に応答して第１のマルチメディアデータを再生し、同時に、上記第１のマルチメディアデータの少なくとも一部を上記第１のスレーブ電子デバイス及び上記第２のスレーブ電子デバイスに送信し、上記マスター電子デバイス、上記第１のスレーブ電子デバイス、及び上記第２のスレーブ電子デバイスが上記第１のマルチメディアデータを同期的に再生することを可能にする段階と、上記第１のスレーブ電子デバイスが、第１のボーカルを受信し、同時に、上記第２のスレーブ電子デバイスが、第２のボーカルを受信する段階と、上記マスター電子デバイスが、上記第１のスレーブ電子デバイスによって送信された上記第１のボーカルを受信し、上記第２のスレーブ電子デバイスによって送信された上記第２のボーカルを受信し、上記マスター電子デバイスが、上記第１のボーカル、上記第２のボーカル、及び上記第１のマルチメディアデータをミキシングして再生用の第２のマルチメディアデータを生成する段階とを含む。

【0008】

本解決手段において、上記マスター電子デバイスは、複数のスレーブ電子デバイスとの接続を確立し、上記マスター電子デバイスと上記複数のスレーブ電子デバイスとの間のマルチメディアデータ相互作用を実装し得る。ユーザは、上記第１のスレーブ電子デバイスを用いることによって上記第１の再生命令を上記マスター電子デバイスに送信し得る。上記マスター電子デバイスは、上記第１の再生命令に応答して上記第１のマルチメディアデータを再生する。上記マスター電子デバイス及び上記複数のスレーブ電子デバイスが上記第１のマルチメディアデータを同期的に再生することを可能にすべく、上記マスター電子デバイスは、上記第１のマルチメディアデータの少なくとも一部を上記複数のスレーブ電子デバイスに送信し得、同時に、同期アルゴリズムを用いることによってリアルタイムで上記マスター電子デバイスと上記複数のスレーブ電子デバイスとの間のデータ同期状態を監視し得る。上記複数のスレーブ電子デバイスは、その後、それぞれのユーザのボーカルを同時に受信し得る。例えば、上記第１のスレーブ電子デバイスは、上記第１のボーカルを受信し、同時に、上記第２のスレーブ電子デバイスは、上記第２のボーカルを受信する。上記複数のスレーブ電子デバイスは、上記それぞれのユーザの上記受信されたボーカルを上記マスター電子デバイスに送信する。上記マスター電子デバイスは、上記受信されたボーカル及び上記第１のマルチメディアデータをミキシングし、アンチハウリング及びオーディオミキシングを実行し、再生用の上記第２のマルチメディアデータを生成する。

【0009】

上記第１の態様を参照して、上記第１の態様の第１の実施形態において、上記マスター電子デバイス、上記第１のスレーブ電子デバイス、及び上記第２のスレーブ電子デバイスが上記第１のマルチメディアデータを同期的に再生することを可能にする上記段階は、具体的には、上記マスター電子デバイスが、上記マスター電子デバイスと上記第１のスレーブ電子デバイスとの間の第１のクロックオフセットを決定する段階、上記マスター電子デバイスが、上記マスター電子デバイスと上記第２のスレーブ電子デバイスとの間の第２のクロックオフセットを決定する段階、上記マスター電子デバイスが、上記第１のクロックオフセットに従って、上記第１のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する第１の再生開始時点を決定する段階であって、上記第１の再生開始時点は、上記第１のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する開始時点を表すために用いられる、段階、及び上記マスター電子デバイスが、上記第２のクロックオフセットに従って、上記第２のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する第２の再生開始時点を決定する段階であって、上記第２の再生開始時点は、上記第２のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する開始時点を表すために用いられる、段階である。

【0010】

本解決手段において、複数の端末デバイスが上記第１のマルチメディアデータを同期的に再生することを可能にすべく、上記マスター電子デバイスは、上記マスター電子デバイスと上記第１のスレーブ電子デバイスとの間の上記決定された第１のクロックオフセットを用いることによって、上記第１のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する上記第１の再生開始時点を決定する。上記第１の再生開始時点は、上記第１のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する上記開始時点を表すために用いられる。上記マスター電子デバイスは、上記マスター電子デバイスと上記第２のスレーブ電子デバイスとの間の上記第２のクロックオフセットを用いることによって、上記第２のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する上記第２の再生開始時点を決定する。上記第２の再生開始時点は、上記第２のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する上記開始時点を表すために用いられる。したがって、上記マスター電子デバイス、上記第１のスレーブ電子デバイス、及び上記第２のスレーブ電子デバイスが上記第１のマルチメディアデータを同期的に再生することを可能にすべく、上記マスター電子デバイスは、上記マスター電子デバイスが上記第１のマルチメディアデータを再生する開始時点、上記第１のクロックオフセット、及び上記第２のクロックオフセットを用いることによって、上記第１のスレーブ電子デバイス及び上記第２のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する上記再生開始時点を調節し得る。

【0011】

クロックオフセットがスレーブ電子デバイスによって決定され得ることを留意する必要がある。この場合、上記マスター電子デバイスは、上記マスター電子デバイスが上記第１のマルチメディアデータを再生する上記開始時点を上記第１のスレーブ電子デバイス及び上記第２のスレーブ電子デバイスに送信する。上記第１のスレーブ電子デバイスは、上記マスター電子デバイスと上記第１のスレーブ電子デバイスとの間の上記第１のクロックオフセットを決定し、上記マスター電子デバイスが上記第１のマルチメディアデータを再生する上記開始時点及び上記第１のクロックオフセットに従って上記第１のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する上記開始時点を決定する。同様に、上記第２のスレーブ電子デバイスは、上記マスター電子デバイスと上記第２のスレーブ電子デバイスとの間の上記第２のクロックオフセットを決定し、上記マスター電子デバイスが上記第１のマルチメディアデータを再生する上記開始時点及び上記第２のクロックオフセットに従って上記第２のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する上記開始時点を決定する。

【0012】

他の可能な場合において、上記マスター電子デバイスは、クロックオフセットを決定し、上記マスター電子デバイスの再生開始時点及び上記クロックオフセットをスレーブ電子デバイスに送信し、上記スレーブ電子デバイスは、再生開始時点を決定する。上記マスター電子デバイスは、上記マスター電子デバイスと上記第１のスレーブ電子デバイスとの間の上記第１のクロックオフセットを決定する。上記マスター電子デバイスは、上記マスター電子デバイスと上記第２のスレーブ電子デバイスとの間の上記第２のクロックオフセットを決定する。上記マスター電子デバイスは、上記マスター電子デバイスが上記第１のマルチメディアデータを再生する上記開始時点及び上記第１のクロックオフセットを上記第１のスレーブ電子デバイスに送信する。上記第１のスレーブ電子デバイスは、上記マスター電子デバイスが上記第１のマルチメディアデータを再生する上記開始時点及び上記第１のクロックオフセットに従って、上記第１のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する上記開始時点を決定する。上記マスター電子デバイスは、上記マスター電子デバイスが上記第１のマルチメディアデータを再生する上記開始時点及び上記第２のクロックオフセットを上記第２のスレーブ電子デバイスに送信する。上記第２のスレーブ電子デバイスは、上記マスター電子デバイスが上記第１のマルチメディアデータを再生する上記開始時点及び上記第２のクロックオフセットに従って、上記第２のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する上記開始時点を決定する。

【0013】

上記第１の態様又は上記第１の態様の上記第１の実施形態を参照して、上記第１の態様の第２の実施形態において、上記マスター電子デバイスが、上記第１のスレーブ電子デバイス及び上記第２のスレーブ電子デバイスとの接続を別々に確立する上記段階は、上記マスター電子デバイス及び上記第１のスレーブ電子デバイスは、同一の無線ローカルエリアネットワークに位置する場合、上記マスター電子デバイスが、１つのＷｉ－Ｆｉ（登録商標）接続識別子を表示し、上記第１のスレーブ電子デバイスが、上記Ｗｉ－Ｆｉ（登録商標）接続識別子を認識することによって上記マスター電子デバイスとの上記接続を確立する段階を含む。

【0014】

本解決手段において、上記マスター電子デバイス及び上記第１のスレーブ電子デバイスは、同一の無線ローカルエリアネットワークに位置する。すなわち、上記マスター電子デバイス及び上記第１のスレーブ電子デバイスは、同一の場所に位置する。上記マスター電子デバイス及び上記第１のスレーブ電子デバイスは、Ｗｉ－Ｆｉ（登録商標）を介した接続を確立する。この場合、上記マスター電子デバイスは、１つのＷｉ－Ｆｉ（登録商標）接続識別子を表示する。上記Ｗｉ－Ｆｉ（登録商標）接続識別子は、Ｗｉ－Ｆｉ（登録商標）名と、Ｗｉ－Ｆｉ（登録商標）パスワードと、上記マスター電子デバイスのアドレス及びポート番号とを含むＷｉ－Ｆｉ（登録商標）ネットワーキング情報を保持する。上記第１のスレーブ電子デバイスは、上記Ｗｉ－Ｆｉ（登録商標）識別子を認識することによって、上記マスター電子デバイスとの上記接続を確立し得る。

【0015】

上記第１の態様又は上記第１の態様の上記第１の実施形態を参照して、上記第１の態様の第３の実施形態において、上記マスター電子デバイスが、上記第１のスレーブ電子デバイス及び上記第２のスレーブ電子デバイスとの接続を別々に確立する上記段階は、上記マスター電子デバイス及び上記第２のスレーブ電子デバイスが同一の無線ローカルエリアネットワークに位置していない場合、上記マスター電子デバイスが、ネットワーク情報を上記第２のスレーブ電子デバイスに送信し、上記第２のスレーブ電子デバイスが、上記ネットワーク情報を構文解析することによって上記マスター電子デバイスとの上記接続を確立する段階を含む。

【0016】

本解決手段において、上記マスター電子デバイス及び上記第２のスレーブ電子デバイスが、異なる地理的な位置であり得る。この場合、上記マスター電子デバイス及び上記第２のスレーブ電子デバイスが、同一のローカルエリアネットワークにいない。この場合、上記マスター電子デバイスは、上記ネットワーク情報を上記第２のスレーブ電子デバイスに送信し得る。上記第２のスレーブ電子デバイスは、上記ネットワーク情報を構文解析することによって、上記マスター電子デバイスとの上記接続を確立する。上記ネットワーク情報は、上記マスター電子デバイスのＩＰアドレス及びポート番号を含み得る。上記マスター電子デバイス及び上記第２のスレーブ電子デバイスが、Ｗｉ－Ｆｉ（登録商標）及びデータ通信ネットワークを介した上記接続を確立し得る。

【0017】

上記第１の態様の上記第３の実施形態を参照して、上記第１の態様の第４の実施形態において、上記マスター電子デバイスが、上記第１のボーカル、上記第２のボーカル、及び上記マルチメディアデータをミキシングして再生用の第２のマルチメディアデータを生成する上記段階の後に、上記方法は、上記マスター電子デバイスが、上記第２のマルチメディアデータを上記第２のスレーブ電子デバイスに送信する段階と、上記マスター電子デバイス及び上記第２のスレーブ電子デバイスが、上記第２のマルチメディアデータを同期的に再生する段階とをさらに含む。

【0018】

本解決手段において、上記第２のスレーブ電子デバイス及び上記マスター電子デバイスが同一の場所に位置していないので、上記第１のスレーブ電子デバイスによって送信された上記第１のボーカルを受信し、上記第２のスレーブ電子デバイスによって送信された上記第２のボーカルを受信した後に、上記マスター電子デバイスは、上記第１のボーカル、上記第２のボーカル、及び上記第１のマルチメディアデータをミキシングする。上記第２のマルチメディアデータが生成された後に、上記第２のマルチメディアデータを同一の場所に位置していない上記第２のスレーブ電子デバイスと共有すべく、上記マスター電子デバイスは、上記第２のマルチメディアデータを上記第２のスレーブ電子デバイスに送信し、上記第２のスレーブ電子デバイスが上記第２のマルチメディアデータを再生することを可能にする。上記処理において、上記マスター電子デバイス及び上記第２のスレーブ電子デバイスが上記第２のマルチメディアデータを同期的に再生することを可能にすべく、上記マスター電子デバイスは、リアルタイムで上記マスター電子デバイスと上記第２のスレーブ電子デバイスとの間の上記同期を監視する必要がある。

【0019】

上記第１の態様を参照して、上記第１の態様の第５の実施形態において、上記第１のマルチメディアデータの少なくとも一部は、上記第１のマルチメディアデータのオーディオ、ビデオ、又は歌詞を含む。

【0020】

本解決手段において、上記第１のマルチメディアデータの上記少なくとも一部は、オーディオ、ビデオ、歌詞、オーディオ及びビデオ、オーディオ及び歌詞、ビデオ及び歌詞、並びに、オーディオ、ビデオ、及び歌詞のうちの１つであり得る。

【0021】

上記第１の態様を参照して、上記第１の態様の第６の実施形態において、上記方法は、上記マスター電子デバイスが、ユーザによって入力された第２の再生命令を受信する段階と、上記マスター電子デバイスが、上記第２の再生命令に応答して第３のマルチメディアデータを再生し、同時に、上記第３のマルチメディアデータの少なくとも一部を上記第１のスレーブ電子デバイス及び上記第２のスレーブ電子デバイスに送信し、上記マスター電子デバイス、上記第１のスレーブ電子デバイス、及び上記第２のスレーブ電子デバイスが上記第３のマルチメディアデータを同期的に再生することを可能にする段階と、上記第１のスレーブ電子デバイスが、上記第１のボーカルを受信し、同時に、上記第２のスレーブ電子デバイスが、上記第２のボーカルを受信する段階と、上記マスター電子デバイスが、上記第１のスレーブ電子デバイスによって送信された上記第１のボーカルを受信し、上記第２のスレーブ電子デバイスによって送信された上記第２のボーカルを受信し、上記マスター電子デバイスが、上記第１のボーカル、上記第２のボーカル、及び上記第３のマルチメディアデータをミキシングして再生用の第４のマルチメディアデータを生成する段階とをさらに含む。

【0022】

本解決手段において、上記ユーザは、再生命令を上記マスター電子デバイスに直接送達し得、上記マスター電子デバイスは、上記再生命令に応答して上記第３のマルチメディアデータを再生する。上記第３のマルチメディアデータが、上記第１のマルチメディアデータと同一であってもよく、上記第１のマルチメディアデータとは異なっていてもよいことを留意する必要がある。

【0023】

上記第１の態様又は上記第１の態様の上記第６の実施形態を参照して、上記第１の態様の第７の実施形態において、上記方法は、上記第１のスレーブ電子デバイスが、上記第１のボーカルを受信し、同時に、上記第２のスレーブ電子デバイスが、上記第２のボーカルを受信し、同時に、上記マスター電子デバイスが、第３のボーカルを受信する段階と、上記マスター電子デバイスが、上記第１のスレーブ電子デバイスによって送信された上記第１のボーカルを受信し、上記第２のスレーブ電子デバイスによって送信された上記第２のボーカルを受信し、上記マスター電子デバイスが、上記第１のボーカル、上記第２のボーカル、上記第３のボーカル、及び上記第４のマルチメディアデータをミキシングして再生用の第５のマルチメディアファイルを生成する段階とをさらに含む。

【0024】

本願の上記解決手段において、上記マスター電子デバイスは、代替的には、ユーザのボーカルを受信し得る。この場合、上記第１の電子デバイス、上記第２の電子デバイス、及び上記マスター電子デバイスは、それぞれのユーザのボーカルを同時に受信し得る。例えば、上記第１のスレーブ電子デバイスは、上記第１のボーカルを受信し、同時に、上記第２のスレーブ電子デバイスは、上記第２のボーカルを受信し、同時に、上記マスター電子デバイスは、上記第３のボーカルを受信する。上記第１のスレーブ電子デバイスは、上記受信された第１のボーカルを上記マスター電子デバイスに送信し、上記第２のスレーブ電子デバイスは、上記受信された第２のボーカルを上記マスター電子デバイスに送信する。上記マスター電子デバイスは、上記第１のボーカル、上記第２のボーカル、上記第３のボーカル、及び上記第４のマルチメディアデータをミキシングして再生用の上記第５のマルチメディアファイルを生成する。

【0025】

第２の態様によれば、本願の一実施形態は、１つのマスター電子デバイス、１つの第１のスレーブ電子デバイス、及び１つの第２のスレーブ電子デバイスを含み、上記マスター電子デバイスが、上記第１のスレーブ電子デバイス及び上記第２のスレーブ電子デバイスとの接続を別々に確立するよう構成され、上記第１のスレーブ電子デバイスが、第１の再生命令を受信するよう構成され、上記第１の電子デバイスが、上記第１の再生命令を上記マスター電子デバイスに送信するようさらに構成され、上記マスター電子デバイスが、上記第１の再生命令に応答して第１のマルチメディアデータを再生し、同時に、上記第１のマルチメディアデータの少なくとも一部を上記第１のスレーブ電子デバイス及び上記第２のスレーブ電子デバイスに送信し、上記マスター電子デバイス、上記第１のスレーブ電子デバイス、及び上記第２のスレーブ電子デバイスが上記第１のマルチメディアデータを同期的に再生することを可能にするようさらに構成され、上記第１のスレーブ電子デバイスが、上記第１のボーカルを受信するようさらに構成され、同時に、上記第２のスレーブ電子デバイスが、上記第２のボーカルを受信するよう構成され、上記マスター電子デバイスが、上記第１のスレーブ電子デバイスによって送信された上記第１のボーカルを受信し、上記第２のスレーブ電子デバイスによって送信された上記第２のボーカルを受信するよう構成され、上記マスター電子デバイスが、上記第１のボーカル、上記第２のボーカル、及び上記第１のマルチメディアデータをミキシングして再生用の第２のマルチメディアデータを生成するようさらに構成される、マルチ端末マルチメディアデータ通信システムを提供する。

【0026】

【0027】

上記第２の態様を参照して、上記第２の態様の第１の実施形態において、上記マスター電子デバイス、上記第１のスレーブ電子デバイス、及び上記第２のスレーブ電子デバイスが上記第１のマルチメディアデータを同期的に再生することを可能することは、具体的には、上記マスター電子デバイスが、上記マスター電子デバイスと上記第１のスレーブ電子デバイスとの間の第１のクロックオフセットを決定するよう構成され、上記マスター電子デバイスが、上記マスター電子デバイスと上記第２のスレーブ電子デバイスとの間の第２のクロックオフセットを決定するようさらに構成され、上記マスター電子デバイスが、上記第１のクロックオフセットに従って、上記第１のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する第１の再生開始時点を決定するようさらに構成され、上記第１の再生開始時点は、上記第１のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する開始時点を表すために用いられ、上記マスター電子デバイスが、上記第２のクロックオフセットに従って、上記第２のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する第２の再生開始時点を決定するようさらに構成され、上記第２の再生開始時点は、上記第２のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する開始時点を表すために用いられることである。

【0028】

【0029】

【0030】

【0031】

上記第２の態様又は上記第１の態様の上記第１の実施形態を参照して、上記第２の態様の第２の実施形態において、上記マスター電子デバイスが、上記第１のスレーブ電子デバイス及び上記第２のスレーブ電子デバイスとの接続を別々に確立することは、上記マスター電子デバイス及び上記第１のスレーブ電子デバイスは、同一の無線ローカルエリアネットワークに位置する場合、上記マスター電子デバイスが、１つのＷｉ－Ｆｉ（登録商標）接続識別子を表示するよう構成され、上記第１のスレーブ電子デバイスが、上記Ｗｉ－Ｆｉ（登録商標）接続識別子を認識することによって上記マスター電子デバイスとの上記接続を確立するよう構成されることを含む。

【0032】

本解決手段において、上記マスター電子デバイス及び上記第１のスレーブ電子デバイスは、同一の無線ローカルエリアネットワークに位置する。すなわち、上記マスター電子デバイス及び上記第１のスレーブ電子デバイスは、同一の場所に位置する。上記マスター電子デバイス及び上記第１のスレーブ電子デバイスは、Ｗｉ－Ｆｉ（登録商標）を介した接続を確立する。この場合、上記マスター電子デバイスは、１つのＷｉ－Ｆｉ（登録商標）接続識別子を表示する。上記Ｗｉ－Ｆｉ（登録商標）接続識別子は、Ｗｉ－Ｆｉ名と、Ｗｉ－Ｆｉ（登録商標）パスワードと、上記マスター電子デバイスのアドレス及びポート番号とを含むＷｉ－Ｆｉ（登録商標）ネットワーキング情報を保持する。上記第１のスレーブ電子デバイスは、上記Ｗｉ－Ｆｉ（登録商標）識別子を認識することによって、上記マスター電子デバイスとの上記接続を確立し得る。

【0033】

上記第２の態様又は上記第２の態様の上記第１の実施形態を参照して、上記第１の態様の第３の実施形態において、上記マスター電子デバイスが、上記第１のスレーブ電子デバイス及び上記第２のスレーブ電子デバイスとの接続を別々に確立することは、上記マスター電子デバイス及び上記第２のスレーブ電子デバイスが同一の無線ローカルエリアネットワークに位置していない場合、上記マスター電子デバイスが、ネットワーク情報を上記第２のスレーブ電子デバイスに送信するよう構成され、上記第２のスレーブ電子デバイスが、上記ネットワーク情報を構文解析することによって上記マスター電子デバイスとの上記接続を確立するよう構成されることを含む。

【0034】

本解決手段において、上記マスター電子デバイス及び上記第２のスレーブ電子デバイスは、異なる地理的な位置であり得る。この場合、上記マスター電子デバイス及び上記第２のスレーブ電子デバイスが、同一のローカルエリアネットワークにいない。この場合、上記マスター電子デバイスは、上記ネットワーク情報を上記第２のスレーブ電子デバイスに送信し得る。上記第２のスレーブ電子デバイスは、上記ネットワーク情報を構文解析することによって、上記マスター電子デバイスとの上記接続を確立する。上記ネットワーク情報は、上記マスター電子デバイスのＩＰアドレス及びポート番号を含み得る。上記マスター電子デバイス及び上記第２のスレーブ電子デバイスは、Ｗｉ－Ｆｉ（登録商標）及びデータ通信ネットワークを介した上記接続を確立し得る。

【0035】

上記第２の態様の上記第３の実施形態を参照して、上記第２の態様の第４の実施形態において、上記マスター電子デバイスが、上記第１のボーカル、上記第２のボーカル、及び上記マルチメディアデータをミキシングして再生用の第２のマルチメディアデータを生成した後に、上記システムは、上記マスター電子デバイスが、上記第２のマルチメディアデータを上記第２のスレーブ電子デバイスに送信するようさらに構成され、上記マスター電子デバイス及び上記第２のスレーブ電子デバイスが、上記第２のマルチメディアデータを同期的に再生することをさらに含む。

【0036】

【0037】

上記第２の態様を参照して、上記第２の態様の第５の実施形態において、上記第１のマルチメディアデータの少なくとも一部は、上記第１のマルチメディアデータのオーディオ、ビデオ、又は歌詞を含む。

【0038】

【0039】

上記第２の態様を参照して、上記第２の態様の第６の実施形態において、上記システムは、上記マスター電子デバイスが、ユーザによって入力された第２の再生命令を受信するよう構成され、上記マスター電子デバイスが、上記第２の再生命令に応答して第３のマルチメディアデータを再生し、同時に、上記第３のマルチメディアデータの少なくとも一部を上記第１のスレーブ電子デバイス及び上記第２のスレーブ電子デバイスに送信し、上記マスター電子デバイス、上記第１のスレーブ電子デバイス、及び上記第２のスレーブ電子デバイスが上記第３のマルチメディアデータを同期的に再生することを可能にするようさらに構成され、上記第１のスレーブ電子デバイスが、上記第１のボーカルを受信するよう構成され、同時に、上記第２のスレーブ電子デバイスが、上記第２のボーカルを受信するよう構成され、上記マスター電子デバイスが、上記第１のスレーブ電子デバイスによって送信された上記第１のボーカルを受信し、上記第２のスレーブ電子デバイスによって送信された上記第２のボーカルを受信するようさらに構成され、上記マスター電子デバイスが、上記第１のボーカル、上記第２のボーカル、及び上記第３のマルチメディアデータをミキシングして再生用の第４のマルチメディアデータを生成するようさらに構成されることをさらに含む。

【0040】

【0041】

上記第２の態様又は上記第２の態様の上記第６の実施形態を参照して、上記第２の態様の第７の実施形態において、上記システムは、上記第１のスレーブ電子デバイスが、上記第１のボーカルを受信するようさらに構成され、同時に、上記第２のスレーブ電子デバイスが、上記第２のボーカルを受信するようさらに構成され、同時に、上記マスター電子デバイスが、第３のボーカルを受信するようさらに構成され、上記マスター電子デバイスが、上記第１のスレーブ電子デバイスによって送信された上記第１のボーカルを受信し、上記第２のスレーブ電子デバイスによって送信された上記第２のボーカルを受信するようさらに構成され、上記マスター電子デバイスが、上記第１のボーカル、上記第２のボーカル、上記第３のボーカル、及び上記第４のマルチメディアデータをミキシングして再生用の第５のマルチメディアファイルを生成するようさらに構成されることをさらに含む。

【0042】

【0043】

他の態様によれば、本願の一実施形態は、コンピュータ可読記憶媒体を提供する。ここで、上記コンピュータ可読記憶媒体は、コンピュータ命令を含み、上記コンピュータ命令がコンピュータ上で実行されるとき、上記コンピュータが、前述の態様の任意の可能な実装においてマルチ端末マルチメディアデータ通信方法を実行することが可能である。

【図面の簡単な説明】

【0044】

本願の実施形態における技術的解決手段をより明らかに説明すべく、以下では実施形態を説明するために必要とされる添付図面を簡単に説明する。見たところ、以下の説明における添付図面は、本願の幾つかの実施形態を示し、当業者は、創造的努力なしにこれらの添付図面から他の図面をさらに導き出し得るようである。

【0045】

【図1】本願の一実施形態に係る電子デバイスのハードウェア構造の概略図である。

【0046】

【図2】本願の一実施形態に係る電子デバイスのソフトウェア構造の概略図である。

【0047】

【図3】本願の一実施形態に係るマルチ端末マルチメディアデータ通信のローカルな適用の概略構造図である。

【0048】

【図4】本願の一実施形態に係るマルチ端末マルチメディアデータ通信のリモートな適用の概略構造図である。

【0049】

【図5】本願の一実施形態に係るマルチ端末マルチメディアデータ通信システムのマスターのソフトウェア及びハードウェアシステムアーキテクチャを示す。

【0050】

【図6】本願の一実施形態に係るマルチ端末マルチメディアデータ通信システムのスレーブのソフトウェア及びハードウェアシステムアーキテクチャを示す。

【0051】

【図7A】本願の一実施形態に係るマスターとスレーブとの間のデータ相互作用のフローチャートである。

【図7B】本願の一実施形態に係るマスターとスレーブとの間のデータ相互作用のフローチャートである。

【0052】

【図8A】本願の一実施形態に係るマスターとスレーブとの間のデータ相互作用の他のフローチャートである。

【図8B】本願の一実施形態に係るマスターとスレーブとの間のデータ相互作用の他のフローチャートである。

【0053】

【図9】本願の一実施形態に係るマスターとスレーブとの間のデータ相互作用の他のフローチャートである。

【0054】

【図10A】本願の一実施形態に係るマスターとスレーブとの間のデータ相互作用の他のフローチャートである。

【図10B】本願の一実施形態に係るマスターとスレーブとの間のデータ相互作用の他のフローチャートである。

【0055】

【図11】本願の一実施形態に係るマルチデバイスカラオケのローカルな適用の概略図である。

【0056】

【図12A】本願の一実施形態に係るディスプレイインタフェースの概略図である。

【0057】

【図12B】本願の一実施形態に係るの他のディスプレイインタフェースの概略図である。

【0058】

【図13】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【0059】

【図14】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【0060】

【図15】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【0061】

【図16】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【0062】

【図17(a)】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【図17(b)】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【図17(c)】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【0063】

【図18(a)】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【図18(b)】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【図18(c)】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【0064】

【図19(a)】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【図19(b)】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【0065】

【図20(a)】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【図20(b)】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【図20(c)】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【0066】

【図21】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【0067】

【図22(a)】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【図22(b)】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【0068】

【図23(a)】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【図23(b)】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【図23(c)】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【0069】

【図24】本願の一実施形態に係るマルチデバイスカラオケのリモートな適用の概略図である。

【0070】

【図25】本願の一実施形態に係る一群のディスプレイインタフェースの概略図である。

【0071】

【図26】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【0072】

【図27】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【0073】

【図28A】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【図28B】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【0074】

【図29A】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【図29B】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【0075】

【図30(a)】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【図30(b)】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【図30(c)】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【0076】

【図31(a)】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【図31(b)】本願の一実施形態に係る他の一群のディスプレイインタフェースの概略図である。

【0077】

【図32】本願の一実施形態に係るマルチ端末マルチメディアデータ通信システムの概略図である。

【発明を実施するための形態】

【0078】

本発明の実施形態の目的、技術的解決手段、及び利点をより明確にすべく、以下では、本発明の実施形態における添付図面を参照して、本発明の実施形態における技術的解決手段を明確に且つ十分に説明する。見たところ、説明される実施形態は、全ての実施形態というよりはむしろ、単に本発明の幾つかの実施形態に過ぎないようである。創造的努力なしに本願の実施形態に基づいて当業者によって取得される全ての他の実施形態は、本願の保護範囲に含まれるものとする。

【0079】

図１は、電子デバイス１００の概略構造図である。

【0080】

電子デバイス１００は、プロセッサ１１０、外部メモリインタフェース１２０、内部メモリ１２１、ユニバーサルシリアルバス（ｕｎｉｖｅｒｓａｌｓｅｒｉａｌｂｕｓ，ＵＳＢ）インタフェース１３０、充電管理モジュール１４０、電力管理ユニット１４１、バッテリ１４２、アンテナ１、アンテナ２、移動体通信モジュール１５０、無線通信モジュール１６０、オーディオモジュール１７０、スピーカ１７０Ａ、受話器１７０Ｂ、マイクロフォン１７０Ｃ、ヘッドセットジャック１７０Ｄ、センサモジュール１８０、キー１９０、モータ１９１、インジケータ１９２、カメラ１９３、ディスプレイ画面１９４、加入者識別モジュール（ｓｕｂｓｃｒｉｂｅｒｉｄｅｎｔｉｔｙｍｏｄｕｌｅ，ＳＩＭ）カードインタフェース１９５、及び同様のものを含み得る。センサモジュール１８０は、圧力センサ１８０Ａ、ジャイロセンサ１８０Ｂ、気圧センサ１８０Ｃ、磁気センサ１８０Ｄ、加速度センサ１８０Ｅ、距離センサ１８０Ｆ、光学式近接センサ１８０Ｇ、指紋センサ１８０Ｈ、温度センサ１８０Ｊ、タッチセンサ１８０Ｋ、環境光センサ１８０Ｌ、骨伝導センサ１８０Ｍ、及び同様のものを含み得る。

【0081】

本発明の本実施形態における例示的な構造が電子デバイス１００に対する特定の制限を構成しないことが理解され得る。本願の幾つかの他の実施形態において、電子デバイス１００は、図に示されるものより多くの又は少ないコンポーネントを含んでもよく、幾つかのコンポーネントが組み合わせられてもよく、幾つかのコンポーネントが分割されてもよく、コンポーネントが異なる方式で配置される。図におけるコンポーネントが、ハードウェア、ソフトウェア、又はソフトウェア及びハードウェアの組み合わせによって実装され得る。

【0082】

プロセッサ１１０は、１又は複数の処理ユニットを含み得る。例えば、プロセッサ１１０は、アプリケーションプロセッサ（ａｐｐｌｉｃａｔｉｏｎｐｒｏｃｅｓｓｏｒ，ＡＰ）、モデムプロセッサ、グラフィックスプロセッシングユニット（ｇｒａｐｈｉｃｓｐｒｏｃｅｓｓｉｎｇｕｎｉｔ，ＧＰＵ）、画像信号プロセッサ（ｉｍａｇｅｓｉｇｎａｌｐｒｏｃｅｓｓｏｒ，ＩＳＰ）、コントローラ、ビデオコーデック、デジタル信号プロセッサ（ｄｉｇｉｔａｌｓｉｇｎａｌｐｒｏｃｅｓｓｏｒ，ＤＳＰ）、ベースバンドプロセッサ、及び／又は、ニューラルネットワークプロセッシングユニット（ｎｅｕｒａｌ－ｎｅｔｗｏｒｋｐｒｏｃｅｓｓｉｎｇｕｎｉｔ，ＮＰＵ）を含み得る。異なる処理ユニットは、独立したコンポーネントであってもよく、１又は複数プロセッサに統合されてもよい。

【0083】

命令をフェッチ及び実行する制御を完了すべく、コントローラは、命令動作コード及びシーケンス信号に従って動作制御信号を生成し得る。

【0084】

メモリは、プロセッサ１１０内にさらに構成されて命令及びデータを格納し得る。幾つかの実施形態において、プロセッサ１１０内のメモリは、キャッシュメモリである。メモリは、プロセッサ１１０によって直近に用いられる又は周期的に用いられる命令又はデータを格納し得る。プロセッサ１１０が命令又はデータを再び用いる必要がある場合、プロセッサは、メモリから命令又はデータを直接呼び出して、繰り返されるアクセスを回避してプロセッサ１１０の待機時間を減らし得、これにより、システムの効率性を改善する。

【0085】

幾つかの実施形態において、プロセッサ１１０は、１又は複数のインタフェースを含み得る。インタフェースは、集積回路間（ｉｎｔｅｒ－ｉｎｔｅｇｒａｔｅｄｃｉｒｃｕｉｔ，Ｉ２Ｃ）インタフェース、集積回路間サウンド（ｉｎｔｅｒ－ｉｎｔｅｇｒａｔｅｄｃｉｒｃｕｉｔｓｏｕｎｄ，Ｉ２Ｓ）インタフェース、パルスコード変調（ｐｕｌｓｅｃｏｄｅｍｏｄｕｌａｔｉｏｎ，ＰＣＭ）インタフェース、汎用非同期受信機／送信機（ｕｎｉｖｅｒｓａｌａｓｙｎｃｈｒｏｎｏｕｓｒｅｃｅｉｖｅｒ／ｔｒａｎｓｍｉｔｔｅｒ，ＵＡＲＴ）インタフェース、モバイルインダストリプロセッサインタフェース（ｍｏｂｉｌｅｉｎｄｕｓｔｒｙｐｒｏｃｅｓｓｏｒｉｎｔｅｒｆａｃｅ，ＭＩＰＩ）、汎用入力／出力（ｇｅｎｅｒａｌ－ｐｕｒｐｏｓｅｉｎｐｕｔ／ｏｕｔｐｕｔ，ＧＰＩＯ）インタフェース、加入者識別モジュール（ｓｕｂｓｃｒｉｂｅｒｉｄｅｎｔｉｔｙｍｏｄｕｌｅ，ＳＩＭ）インタフェース、及び／又はユニバーサルシリアルバス（ｕｎｉｖｅｒｓａｌｓｅｒｉａｌｂｕｓ，ＵＳＢ）インタフェース、並びに同様のものを含み得る。

【0086】

Ｉ２Ｃインタフェースは、双方向の同期シリアルバスであり、シリアルデータライン（ｓｅｒｉａｌｄａｔａｌｉｎｅ，ＳＤＡ）及びシリアルクロックライン（ｓｅｒｉａｌｃｌｏｃｋｌｉｎｅ，ＳＣＬ）を含む。幾つかの実施形態において、プロセッサ１１０は、複数の組のＩ２Ｃバスを含み得る。プロセッサ１１０は、異なるＩ２Ｃバスインタフェースを用いることによって、タッチセンサ１８０Ｋ、充電器、フラッシュライト、カメラ１９３、及び同様のものに連結され得る。例えば、プロセッサ１１０は、Ｉ２Ｃインタフェースを用いることによってタッチセンサ１８０Ｋに連結され得、その結果、プロセッサ１１０は、Ｉ２Ｃバスインタフェースを用いることによって、タッチセンサ１８０Ｋと通信し、電子デバイス１００のタッチ機能を実装する。

【0087】

Ｉ２Ｓインタフェースは、オーディオ通信のために用いられ得る。幾つかの実施形態において、プロセッサ１１０は、複数の組のＩ２Ｓバスを含み得る。プロセッサ１１０は、Ｉ２Ｓバスを用いることによってオーディオモジュール１７０に連結し、プロセッサ１１０とオーディオモジュール１７０との間の通信を実装し得る。幾つかの実施形態において、オーディオモジュール１７０は、Ｉ２Ｓインタフェースを用いることによってオーディオ信号を無線通信モジュール１６０に転送し、Ｂｌｕｅｔｏｏｔｈ（登録商標）ヘッドセットを用いることによって電話に応答する機能を実装し得る。

【0088】

ＰＣＭインタフェースはまた、オーディオ通信、並びに、アナログ信号のサンプリング、量子化、及び符号化のために用いられ得る。幾つかの実施形態において、オーディオモジュール１７０は、ＰＣＭバスインタフェースを用いることによって、無線通信モジュール１６０に連結され得る。幾つかの実施形態において、オーディオモジュール１７０は、代替的には、ＰＣＭインタフェースを用いることによってオーディオ信号を無線通信モジュール１６０に転送し、Ｂｌｕｅｔｏｏｔｈ（登録商標）ヘッドセットを用いることによって電話に応答する機能を実装し得る。Ｉ２Ｓインタフェース及びＰＣＭインタフェースの両方は、オーディオ通信のために用いられ得る。

【0089】

ＵＡＲＴインタフェースは、ユニバーサルシリアルデータバスであり、非同期通信のために用いられる。バスは、双方向の通信バスであり得る。バスは、シリアル通信とパラレル通信との間で送信されるべきデータを変換する。幾つかの実施形態において、ＵＡＲＴインタフェースは、通常、プロセッサ１１０を無線通信モジュール１６０に接続するよう構成される。例えば、プロセッサ１１０は、ＵＡＲＴインタフェースを用いることによって無線通信モジュール１６０におけるＢｌｕｅｔｏｏｔｈ（登録商標）モジュールと通信し、Ｂｌｕｅｔｏｏｔｈ（登録商標）機能を実装する。幾つかの実施形態において、オーディオモジュール１７０は、ＵＡＲＴインタフェースを用いることによってオーディオ信号を無線通信モジュール１６０に転送し、Ｂｌｕｅｔｏｏｔｈ（登録商標）ヘッドセットを用いることによって音楽を再生する機能を実装し得る。

【0090】

ＭＩＰＩインタフェースは、プロセッサ１１０をディスプレイ画面１９４及びカメラ１９３等の周辺デバイスに接続するよう構成され得る。ＭＩＰＩインタフェースは、カメラシリアルインタフェース（ｃａｍｅｒａｓｅｒｉａｌｉｎｔｅｒｆａｃｅ，ＣＳＩ）、ディスプレイシリアルインタフェース（ｄｉｓｐｌａｙｓｅｒｉａｌｉｎｔｅｒｆａｃｅ，ＤＳＩ）及び同様のものを含む。幾つかの実施形態において、プロセッサ１１０は、ＣＳＩインタフェースを用いることによってカメラ１９３と通信し、電子デバイス１００の撮影機能を実装する。プロセッサ１１０は、ＤＳＩインタフェースを用いることによってディスプレイ画面１９４と通信し、電子デバイス１００のディスプレイ機能を実装する。

【0091】

ＧＰＩＯインタフェースは、ソフトウェアを用いることによって構成され得る。ＧＰＩＯインタフェースは、制御信号を送信するよう構成されてもよく、データ信号を送信するよう構成されてもよい。幾つかの実施形態において、ＧＰＩＯインタフェースは、プロセッサ１１０を、カメラ１９３、ディスプレイ画面１９４、無線通信モジュール１６０、オーディオモジュール１７０、センサモジュール１８０、及び同様のものに接続するよう構成され得る。ＧＰＩＯインタフェースは、代替的には、Ｉ２Ｃインタフェース、Ｉ２Ｓインタフェース、ＵＡＲＴインタフェース、ＭＩＰＩインタフェース、及び同様のものとして構成され得る。

【0092】

ＵＳＢインタフェース１３０は、ＵＳＢ規格仕様に準拠するインタフェースであり、具体的には、ｍｉｎｉＵＳＢインタフェース、ｍｉｃｒｏＵＳＢインタフェース、ＵＳＢＴｙｐｅＣインタフェース、又は同様のものであり得る。ＵＳＢインタフェース１３０は、充電器に接続して電子デバイス１００を充電するよう構成されてもよく、電子デバイス１００と周辺デバイスとの間でデータ送信するために用いられてもよく、ヘッドセットに接続してヘッドセットを用いることによってオーディオを再生するよう構成されてもよい。インタフェースは、代替的には、ＡＲデバイス等の他の電子デバイスに接続するよう構成され得る。

【0093】

本発明の本実施形態で示されるモジュール間のインタフェース接続関係は、単に説明のための一例に過ぎず、電子デバイス１００の構造に対して限定を構成しないことが理解され得る。本願の幾つかの他の実施形態において、電子デバイス１００は、代替的には、前述の実施形態のものとは異なるインタフェース接続方式を用いてもよく、複数のインタフェース接続方式の組み合わせを用いてもよい。

【0094】

充電管理モジュール１４０は、充電器からの充電入力を受信するよう構成される。充電器は、無線充電器であってもよく、有線充電器であってもよい。有線充電の幾つかの実施形態において、充電管理モジュール１４０は、ＵＳＢインタフェース１３０を用いることによって有線充電器の充電入力を受信し得る。無線充電の幾つかの実施形態において、充電管理モジュール１４０は、電子デバイス１００の無線充電コイルを用いることによって無線充電入力を受信し得る。充電管理モジュール１４０は、バッテリ１４２を充電しながら電力管理ユニット１４１を用いることによって電力を電子デバイスに供給し得る。

【0095】

電力管理モジュール１４１は、バッテリ１４２、充電管理モジュール１４０、及びプロセッサ１１０に接続するよう構成される。電力管理モジュール１４１は、バッテリ１４２及び／又は充電管理モジュール１４０の入力を受信し、プロセッサ１１０、内部メモリ１２１、ディスプレイ画面１９４、カメラ１９３、無線通信モジュール１６０、及び同様のものに電力を供給する。電力管理モジュール１４１は、バッテリ容量、バッテリサイクルカウント、及びバッテリの健康状態（漏電及びインピーダンス）等のパラメータを監視するようさらに構成され得る。幾つかの他の実施形態において、電力管理モジュール１４１は、代替的には、プロセッサ１１０に配置され得る。幾つかの他の実施形態において、電力管理ユニット１４１及び充電管理モジュール１４０は、代替的には、同一のデバイス内に構成され得る。

【0096】

電子デバイス１００の無線通信機能は、アンテナ１、アンテナ２、移動体通信モジュール１５０、無線通信モジュール１６０、モデムプロセッサ、ベースバンドプロセッサ、及び同様のものを用いることによって実装され得る。

【0097】

アンテナ１及びアンテナ２は、電磁波信号を送信及び受信するよう構成される。電子デバイス１００のそれぞれのアンテナは、１又は複数の通信周波数帯域をカバーするよう構成され得る。異なるアンテナはまた、アンテナの利用を改善すべく、多重化され得る。例えば、アンテナ１は、無線ローカルエリアネットワークのダイバーシティアンテナとして多重化され得る。幾つかの他の実施形態において、アンテナは、チューニングスイッチとの組み合わせで用いられ得る。

【0098】

移動体通信モジュール１５０は、電子デバイス１００に適用される２Ｇ／３Ｇ／４Ｇ／５Ｇ等の無線通信の解決手段を提供し得る。移動体通信モジュール１５０は、少なくとも１つのフィルタ、スイッチ、電力増幅器、低雑音増幅器（ｌｏｗｎｏｉｓｅａｍｐｌｉｆｉｅｒ，ＬＮＡ）、及び同様のものを含み得る。移動体通信モジュール１５０は、アンテナ１によって電磁波を受信し得、受信した電磁波に対するフィルタリング及び増幅等の処理を実行し得、復調のために、処理した電磁波をモデムプロセッサに送信し得る。移動体通信モジュール１５０は、モデムプロセッサによって変調された信号をさらに増幅し得、アンテナ１によって放射するための電磁波に信号を変換し得る。幾つかの実施形態において、移動体通信モジュール１５０の少なくとも幾つかの機能モジュールは、プロセッサ１１０に配置され得る。幾つかの実施形態において、移動体通信モジュール１５０の少なくとも幾つかの機能モジュールは、プロセッサ１１０の少なくとも幾つかのモジュールとして同一のデバイス内に構成され得る。

【0099】

モデムプロセッサは、変調器及び復調器を含み得る。変調器は、送信されるべき低周波数ベースバンド信号を中高周波数信号に変調するよう構成される。復調器は、受信した電磁波信号を低周波数ベースバンド信号に復調するよう構成される。その後、復調器は、処理するために、復調した低周波数ベースバンド信号をベースバンドプロセッサに送信する。低周波数ベースバンド信号は、ベースバンドプロセッサによって処理され、その後、アプリケーションプロセッサに送信される。アプリケーションプロセッサは、（ラウドスピーカ１７０Ａ、受話器１７０Ｂ、及び同様のものに限定されない）オーディオデバイスを介して音信号を出力する、又はディスプレイ画面１９４を介して画像若しくはビデオを表示する。幾つかの実施形態において、モデムプロセッサは、独立したデバイスであり得る。幾つかの他の実施形態において、モデムプロセッサは、プロセッサ１１０から独立し得、モデムプロセッサ、及び、移動体通信モジュール１５０又は他の機能モジュールは、同一のコンポーネントに配置され得る。

【0100】

無線通信モジュール１６０は、無線ローカルエリアネットワーク（ｗｉｒｅｌｅｓｓｌｏｃａｌａｒｅａｎｅｔｗｏｒｋ，ＷＬＡＮ）（ワイヤレスフィディリティ（ｗｉｒｅｌｅｓｓｆｉｄｅｌｉｔｙ，ｗｉ－ｆｉ（登録商標））ネットワーク等）、Ｂｌｕｅｔｏｏｔｈ（登録商標）（Ｂｌｕｅｔｏｏｔｈ（登録商標），ＢＴ）、全球測位衛星システム（ｇｌｏｂａｌｎａｖｉｇａｔｉｏｎｓａｔｅｌｌｉｔｅｓｙｓｔｅｍ，ＧＮＳＳ）、周波数変調（ｆｒｅｑｕｅｎｃｙｍｏｄｕｌａｔｉｏｎ，ＦＭ）、近距離無線通信（ｎｅａｒｆｉｅｌｄｃｏｍｍｕｎｉｃａｔｉｏｎ，ＮＦＣ）技術、赤外線（ｉｎｆｒａｒｅｄ，ＩＲ）技術、及び同様のものを含む、電子デバイス１００に適用される無線通信解決手段に対する解決手段を提供し得る。無線通信モジュール１６０は、少なくとも１つの通信処理モジュールを統合する１又は複数のデバイスであり得る。無線通信モジュール１６０は、アンテナ２を用いることによって電磁波を受信し、電磁波信号に対して周波数変調及びフィルタリング処理を実行し、処理した信号をプロセッサ１１０に送信する。無線通信モジュール１６０は、さらに、プロセッサ１１０から送信されるべき信号を受信し得、送信されるべき信号に対して周波数変調及び増幅を実行し得、アンテナ２を用いることによって放射するための電磁波に信号を変換し得る。

【0101】

幾つかの実施形態において、電子デバイス１００では、アンテナ１が移動体通信モジュール１５０に連結され、アンテナ２が無線通信モジュール１６０に連結され、その結果、電子デバイス１００は、無線通信技術を用いることによってネットワーク及び他のデバイスと通信し得る。無線通信技術は、グローバルシステムフォーモバイルコミュニケーションズ（ｇｌｏｂａｌｓｙｓｔｅｍｆｏｒｍｏｂｉｌｅｃｏｍｍｕｎｉｃａｔｉｏｎｓ，ＧＳＭ（登録商標））、汎用パケット無線サービス（ｇｅｎｅｒａｌｐａｃｋｅｔｒａｄｉｏｓｅｒｖｉｃｅ，ＧＰＲＳ）、符号分割多元接続（ｃｏｄｅｄｉｖｉｓｉｏｎｍｕｌｔｉｐｌｅａｃｃｅｓｓ，ＣＤＭＡ）、広帯域符号分割多元接続（ｗｉｄｅｂａｎｄｃｏｄｅｄｉｖｉｓｉｏｎｍｕｌｔｉｐｌｅａｃｃｅｓｓ，ＷＣＤＭＡ（登録商標））、時分割符号分割多元接続（ｔｉｍｅ－ｄｉｖｉｓｉｏｎｃｏｄｅｄｉｖｉｓｉｏｎｍｕｌｔｉｐｌｅａｃｃｅｓｓ，ＴＤ－ＳＣＤＭＡ）、ロングタームエボリューション（ｌｏｎｇｔｅｒｍｅｖｏｌｕｔｉｏｎ，ＬＴＥ）、ＢＴ、ＧＮＳＳ、ＷＬＡＮ、ＮＦＣ、ＦＭ、ＩＲ技術、及び／又は同様のものを含み得る。ＧＮＳＳは、グローバルポジショニングシステム（ｇｌｏｂａｌｐｏｓｉｔｉｏｎｉｎｇｓｙｓｔｅｍ，ＧＰＳ）、全球測位衛星システム（ｇｌｏｂａｌｎａｖｉｇａｔｉｏｎｓａｔｅｌｌｉｔｅｓｙｓｔｅｍ，ＧＬＯＮＡＳＳ）、北斗衛星導航系統（ｂｅｉｄｏｕｎａｖｉｇａｔｉｏｎｓａｔｅｌｌｉｔｅｓｙｓｔｅｍ，ＢＤＳ）、準天頂衛星システム（ｑｕａｓｉ－ｚｅｎｉｔｈｓａｔｅｌｌｉｔｅｓｙｓｔｅｍ，ＱＺＳＳ）、及び／又は、静止衛星型衛星航法補強システム（ｓａｔｅｌｌｉｔｅｂａｓｅｄａｕｇｍｅｎｔａｔｉｏｎｓｙｓｔｅｍｓ，ＳＢＡＳ）を含み得る。

【0102】

電子デバイス１００は、ＧＰＵ、ディスプレイ画面１９４、アプリケーションプロセッサ、及び同様のものを用いることによってディスプレイ機能を実装する。ＧＰＵは、画像処理用のマイクロプロセッサであり、ディスプレイ画面１９４及びアプリケーションプロセッサに接続される。ＧＰＵは、数学的及び幾何学的な計算を実行し、画像をレンダリングするよう構成される。プロセッサ１１０は、１又は複数のＧＰＵを含み得、プログラム命令を実行して表示情報を生成又は変更し得る。

【0103】

ディスプレイ画面１９４は、画像、ビデオ、及び同様のものを表示するよう構成される。ディスプレイ画面１９４は、ディスプレイパネルを含む。ディスプレイパネルは、液晶ディスプレイ（ｌｉｑｕｉｄｃｒｙｓｔａｌｄｉｓｐｌａｙ，ＬＣＤ）、有機発光ダイオード（ｏｒｇａｎｉｃｌｉｇｈｔ－ｅｍｉｔｔｉｎｇｄｉｏｄｅ，ＯＬＥＤ）、アクティブマトリクス有機発光ダイオード（ａｃｔｉｖｅ－ｍａｔｒｉｘｏｒｇａｎｉｃｌｉｇｈｔｅｍｉｔｔｉｎｇｄｉｏｄｅ，ＡＭＯＬＥＤ）、フレキシブル発光ダイオード（ｆｌｅｘｌｉｇｈｔ－ｅｍｉｔｔｉｎｇｄｉｏｄｅ，ＦＬＥＤ）、ｍｉｎｉ－ＬＥＤ、ｍｉｃｒｏ－ＬＥＤ、ｍｉｃｒｏ－ＯＬＥＤ、量子ドット発光ダイオード（ｑｕａｎｔｕｍｄｏｔｌｉｇｈｔｅｍｉｔｔｉｎｇｄｉｏｄｅｓ，ＱＬＥＤ）、及び同様のものであり得る。幾つかの実施形態において、電子デバイス１００は、１又はＮ個のディスプレイ画面１９４を含み得る。Ｎは１より大きい正の整数である。

【0104】

電子デバイス１００は、ＩＳＰ、カメラ１９３、ビデオコーデック、ＧＰＵ、ディスプレイ画面１９４、アプリケーションプロセッサ、及び同様のものを用いることによって撮影機能を実装し得る。

【0105】

ＩＳＰは、カメラ１９３によってフィードバックされたデータを処理するよう構成される。例えばは、撮影中、シャッタが可能になる。光がレンズを介してカメラの感光素子に転送され、光信号が電気信号に変換される。カメラの感光素子は、処理のために電気信号をＩＳＰに転送し、したがって、電気信号が肉眼で確認できる画像に変換される。ＩＳＰはまた、ノイズポイント、明るさ、及びスキントーンアルゴリズムを最適化し得る。ＩＳＰはまた、撮影シーンの露光量及び色温度等のパラメータを最適化し得る。幾つかの実施形態において、ＩＳＰは、カメラ１９３に配置され得る。

【0106】

カメラ１９３は、静止画像又はビデオをキャプチャするよう構成される。オブジェクトの光学像がレンズによって生成され、感光素子によって投影される。感光性の要素は、電荷結合素子（ｃｈａｒｇｅｃｏｕｐｌｅｄｄｅｖｉｃｅ，ＣＣＤ）又は相補型金属酸化物半導体（ｃｏｍｐｌｅｍｅｎｔａｒｙｍｅｔａｌ－ｏｘｉｄｅ－ｓｅｍｉｃｏｎｄｕｃｔｏｒ，ＣＭＯＳ）フォトトランジスタであり得る。感光素子は、光信号を電気信号に変換し、その後、電気信号をデジタル画像信号に変換すべく、電気信号をＩＳＰに送信する。ＩＳＰは、処理のためにデジタル画像信号をＤＳＰに出力する。ＤＳＰは、デジタル画像信号をＲＧＢフォーマット及びＹＵＶフォーマットで標準画像信号に変換する。幾つかの実施形態において、電子デバイス１００は、１又はＮ個のカメラ１９３を含み得、Ｎは１より大きい正の整数である。

【0107】

デジタル信号プロセッサは、デジタル信号を処理するよう構成され、デジタル画像信号に加えて、他のデジタル信号をさらに処理し得る。例えば、電子デバイス１００が周波数選択を実行するとき、デジタル信号プロセッサは、周波数エネルギーに対してフーリエ変換及び同様のものを実行するよう構成される。

【0108】

ビデオコーデックは、デジタルビデオを圧縮又は解凍するよう構成される。電子デバイス１００は、１又は複数のビデオコーデックをサポートし得る。このように、電子デバイス１００は、複数の符号化フォーマット、例えば、ムービングピクチャエクスパーツグループ（ｍｏｖｉｎｇｐｉｃｔｕｒｅｅｘｐｅｒｔｓｇｒｏｕｐ，ＭＰＥＧ）１、ＭＰＥＧ２、ＭＰＥＧ３、及びＭＰＥＧ４、でビデオを再生又は記録し得る。

【0109】

ＮＰＵは、生物学上のニューラルネットワークの構造、例えば、人間の脳内のニューロン間の送信モード、を参照することによって入力情報を迅速に処理し、さらに、自己学習を継続的に実行し得るニューラルネットワーク（ｎｅｕｒａｌ－ｎｅｔｗｏｒｋ，ＮＮ）コンピューティングプロセッサである。ＮＰＵは、電子デバイス１００用のインテリジェント認識、例えば、画像認識、顔認識、音声認識、及びテキスト理解等のアプリケーションを実装するために用いられ得る。

【0110】

外部メモリインタフェース１２０は、ｍｉｃｒｏＳＤカード等の外部記憶カードに接続し、電子デバイス１００の記憶能力を拡張するよう構成され得る。外部記憶カード内の音楽又はビデオ等のファイルを格納する等のデータ記憶機能を実装するために、外部記憶カードは、外部メモリインタフェース１２０を用いることによってプロセッサ１１０と通信する。

【0111】

内部メモリ１２１は、コンピュータ実行可能プログラムコードを格納するよう構成され得、実行可能プログラムコードは、命令を含む。内部メモリ１２１は、プログラム記憶領域及びデータ記憶領域を含み得る。プログラム記憶領域は、オペレーティングシステム、少なくとも１つの機能（例えば、音声再生機能又は画像再生機能）によって必要とされるアプリケーション、及び同様のものを格納し得る。データ記憶領域は、データ（例えば、オーディオデータ及びアドレス帳）並びに電子デバイス１００が用いられるときに作成される同様のものを格納し得る。さらに、内部メモリ１２１は、高速ランダムアクセスメモリを含んでもよく、少なくとも１つの磁気ディスクメモリ、フラッシュメモリ、又はユニバーサルフラッシュストレージ（ｕｎｉｖｅｒｓａｌｆｌａｓｈ（登録商標）ｓｔｏｒａｇｅ，ＵＦＳ）等の不揮発性メモリを含んでもよい。プロセッサ１１０は、内部メモリ１２１に格納されている命令、及び／又は、プロセッサに配置されているメモリに格納されている命令を実行し、電子デバイス１００の様々な機能アプリケーション及びデータ処理を実行する。

【0112】

電子デバイス１００は、オーディオモジュール１７０、ラウドスピーカ１７０Ａ、受話器１７０Ｂ、マイクロフォン１７０Ｃ、ヘッドセットジャック１７０Ｄアプリケーションプロセッサ、及び同様のものを用いることによって、音楽再生又は記録等のオーディオ機能を実装し得る。

【0113】

オーディオモジュール１７０は、デジタルオーディオ情報をアナログオーディオ信号出力に変換するよう構成され、アナログオーディオ入力をデジタルオーディオ信号に変換するようさらに構成される。オーディオモジュール１７０は、オーディオ信号を符号化及び復号するようさらに構成され得る。幾つかの実施形態において、オーディオモジュール１７０は、プロセッサ１１０に配置されてもよく、オーディオモジュール１７０の幾つかの機能モジュールがプロセッサ１１０に配置される。

【0114】

「ホーン（ｈｏｒｎ）」とも称されるスピーカ１７０Ａは、オーディオ電気信号を音信号に変換するよう構成される。音楽が聴かれ得、又は、ハンズフリーの電話が電子デバイス１００内のスピーカ１７０Ａを用いることによって応答され得る。

【0115】

「受信器（ｒｅｃｅｉｖｅｒ）」とも称される受話器１７０Ｂは、オーディオ電気信号を音信号に変換するよう構成される。電子デバイス１００が電話に応答するため又は音声情報を受信するために用いられるとき、受話器１７０Ｂが、音声情報を聞くために人間の耳の近くに置かれ得る。

【0116】

「マイク」又は「マイクロフォン」とも称されるマイクロフォン１７０Ｃは、音信号を電気信号に変換するよう構成される。電話をかける又は音声情報を送信するとき、ユーザは、口がマイクロフォン１７０Ｃに近づいている状態で話し、音信号をマイクロフォン１７０Ｃに入力し得る。少なくとも１つのマイクロフォン１７０Ｃは、電子デバイス１００に配置され得る。幾つか他の実施形態において、２つのマイクロフォン１７０Ｃが電子デバイス１００に配置されて、音信号を収集し得、ノイズリダクション機能を実装し得る。幾つか他の実施形態において、３つ、４つ、又はそれより多くのマイクロフォン１７０Ｃが、代替的には、電子デバイス１００に配置されて、音信号を収集し得、ノイズリダクションを実装し得、音源を認識し得、指向性記録機能を実装し得、及び同様のものを実装し得る。

【0117】

ヘッドセットジャック１７０Ｄは、有線ヘッドセットに接続するよう構成される。ヘッドセットジャック１７０Ｄは、ＵＳＢインタフェース１３０であってもよく、３．５ｍｍオープンモバイル端末プラットフォーム（ｏｐｅｎｍｏｂｉｌｅｔｅｒｍｉｎａｌｐｌａｔｆｏｒｍ，ＯＭＴＰ）規格のインタフェースであってもよく、米国セルラ通信工業会（ｃｅｌｌｕｌａｒｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎｓｉｎｄｕｓｔｒｙａｓｓｏｃｉａｔｉｏｎｏｆｔｈｅＵＳＡ，ＣＴＩＡ）規格のインタフェースであってもよい。

【0118】

圧力センサ１８０Ａは、圧力信号を感知するよう構成され、圧力信号を電気信号に変換し得る。幾つかの実施形態において、圧力センサ１８０Ａは、ディスプレイ画面１９４に配置され得る。複数のタイプの圧力センサ１８０Ａ、例えば、抵抗性圧力センサ、誘導性圧力センサ、及び容量性圧力センサ、が存在する。

【0119】

容量性圧力センサは、導体材料を有する少なくとも２つの平行板を含み得る。力が圧力センサ１８０Ａに与えられるとき、電極間の静電容量が変化する。電子デバイス１００は、静電容量の変化に基づいて圧力の強さを決定する。タッチ操作がディスプレイ画面１９４に実行されるとき、電子デバイス１００は、圧力センサ１８０Ａを用いることによってタッチ操作の強さを検出する。電子デバイス１００は、圧力センサ１８０Ａの検出信号に基づいて、タッチの位置をさらに計算し得る。幾つかの実施形態において、同一のタッチ位置で実行されたが異なるタッチ操作の強さを有するタッチ操作は、異なる操作命令に対応し得る。例えば、タッチ操作の強さが第１の圧力閾値より小さいタッチ操作がＳＭＳメッセージアプリケーションアイコンに実行されたとき、ＳＭＳメッセージをチェックする命令が実行される。タッチ操作の強さが第１の圧力閾値より大きい又はこれに等しいタッチ操作がＳＭＳメッセージアプリケーションアイコンに実行されるとき、新しいＳＭＳメッセージを作成する命令が実行される。

【0120】

ジャイロスコープセンサ１８０Ｂは、電子デバイス１００の動作姿勢を決定するよう構成され得る。幾つかの実施形態において、３軸（すなわち、ｘ軸、ｙ軸、及びｚ軸）の周囲の電子デバイス１００の角速度が、ジャイロスコープセンサ１８０Ｂによって決定され得る。ジャイロスコープセンサ１８０Ｂは、写真撮影の際の画像安定化のために用いられ得る。例えば、シャッタが押されたとき、ジャイロセンサ１８０Ｂは、電子デバイス１００がジッターする角度を検出し、角度に基づいて、レンズモジュールが補う必要がある距離を計算し、レンズが反対の動作によって電子デバイス１００のジッターをキャンセルすることを可能にし、これにより、画像安定化を実装する。ジャイロセンサ１８０Ｂはまた、ナビゲーション及び動作検知ゲームシナリオに用いられ得る。

【0121】

気圧センサ１８０Ｃは、気圧を測定するよう構成される。幾つかの実施形態において、電子デバイス１００は、位置調整及びナビゲーションを支援すべく、気圧センサ１８０Ｃによって測定された気圧値を用いることによって高度を計算する。

【0122】

磁気センサ１８０Ｄは、ホール効果センサを含む。電子デバイス１００は、磁気センサ１８０Ｄを用いることによって、フリップレザーケースの開閉を検出し得る。幾つかの実施形態において、電子デバイス１００が折り畳み式携帯電話であるとき、電子デバイス１００は、磁気センサ１８０Ｄに基づいて、フリップカバーの開閉を検出し得る。さらに、レザーケースの検出された開状態若しくは閉状態、又は、フリップカバーの検出された開状態若しくは閉状態に基づいて、フリップカバーの自動ロック解除等の機能が設定される。

【0123】

加速度センサ１８０Ｅは、それぞれ方向（概して、３軸）における電子デバイス１００の加速度値を検出し得る。電子デバイス１００が動かないとき、重力の大きさ及び方向が検出され得る。加速度センサは、電子デバイスの姿勢を認識するようさらに構成され得、横長モードと縦長モードとの間のスイッチ及び歩数計等の用途に適用される。

【0124】

距離センサ１８０Ｆは、距離を測定するよう構成される。電子デバイス１００は、赤外線又はレーザによって距離を測定し得る。幾つかの実施形態において、撮影シナリオでは、電子デバイス１００は、距離センサ１８０Ｆを用いることによって距離を測定し、高速なピント合わせを実装し得る。

【0125】

光学式近接センサ１８０Ｇは、例えば、発光ダイオード（ＬＥＤ）及びフォトダイオード等の光検知器を含み得る。発光ダイオードは、赤外線発光ダイオードであり得る。電子デバイス１００は、発光ダイオードを用いることによって赤外線光を放射し得る。電子デバイス１００は、フォトダイオードを用いることによって近くのオブジェクトからの赤外反射光を検出する。十分な反射光を検出するとき、電子デバイス１００は、電子デバイスの近くにオブジェクトが存在することを決定し得る。不十分な反射光を検出するとき、電子デバイス１００は、電子デバイス１００の近くにオブジェクトが存在しないことを決定し得る。電子デバイス１００は、光学式近接センサ１８０Ｇを用いることによって、ユーザが通話のために耳の近くに電子デバイス１００を保持することを検出し得、その結果、電力の節約を実現するための自動的な画面オフが実装される。光学式近接センサ１８０Ｇは、代替的には、画面を自動的にロック解除又はロックするためにレザーケースモード又はポケットモードで用いられ得る。

【0126】

環境光センサ１８０Ｌは、環境光の輝度を感知するよう構成される。電子デバイス１００は、知覚した環境光の明るさに従ってディスプレイ画面１９４の輝度を適応調節し得る。環境光センサ１８０Ｌは、写真撮影中のホワイトバランスを自動的に調節するようさらに構成され得る。環境光センサ１８０Ｌは、光学式近接センサ１８０Ｇをさらに連携して、予想外のタッチを防止するために、電子デバイス１００がポケットにあるか否かを検出し得る。

【0127】

指紋センサ１８０Ｈは、指紋を収集するよう構成される。電子デバイス１００は、指紋を収集する機能を用いることによって、指紋ロック解除、アプリケーションロックアクセス、指紋撮影、指紋ベース電話応答、及び同様のものを実装し得る。

【0128】

温度センサ１８０Ｊは、温度を検出するよう構成される。幾つかの実施形態において、電子デバイス１００は、温度センサ１８０Ｊにより検出された温度を用いることによって、温度処理ポリシーを実行する。例えば、温度センサ１８０Ｊによって報告された温度が閾値を超えるとき、電子デバイス１００は、温度センサ１８０Ｊの近くのプロセッサのパフォーマンスを低下させて、電力消費を減らして熱防御を実装する。幾つか他の実施形態において、温度が他の閾値以下であるとき、電子デバイス１００は、低温が、電子デバイス１００が異常にシャットダウンする原因となることを防止すべく、バッテリ１４２を熱くする。幾つかの他の実施形態において、温度が依然として他の閾値以下であるとき、電子デバイス１００は、低温によって引き起こされる異常なシャットダウンを防止すべく、バッテリ１４２の出力電圧をブーストする。

【0129】

タッチセンサ１８０Ｋは、「タッチデバイス」とも称される。タッチセンサ１８０Ｋは、ディスプレイ画面１９４上に配置され得る。タッチセンサ１８０Ｋ及びディスプレイ画面１９４は、「タッチスクリーン」とも称されるタッチスクリーンを形成する。タッチセンサ１８０Ｋは、タッチセンサ上又はタッチセンサの近くで実行されたタッチ操作を検出するよう構成される。タッチセンサは、タッチイベントタイプを決定すべく、検出したタッチ操作をアプリケーションプロセッサに送信し得る。タッチセンサは、ディスプレイ画面１９４を用いることによって、タッチ操作に関連する視覚出力を提供し得る。幾つか他の実施形態において、タッチセンサ１８０Ｋは、代替的には、電子デバイス１００の表面上に配置され得、ディスプレイ画面１９４のものとは異なる位置に位置付けられる。

【0130】

骨伝導センサ１８０Ｍは、振動信号を取得し得る。幾つかの実施形態において、骨伝導センサ１８０Ｍは、人間の声帯部分の骨振動の振動信号を取得し得る。骨伝導センサ１８０Ｍは、代替的には、人間の脈に接触し得、血圧鼓動信号を受信し得る。幾つかの実施形態において、骨伝導センサ１８０Ｍは、代替的には、ヘッドセットに配置されて、骨伝導ヘッドセットを形成し得る。オーディオモジュール１７０は、骨伝導センサ１８０Ｍによって取得される、声帯部分の骨振動の振動信号に基づく構文解析によって音声信号を取得し、音声機能を実装し得る。アプリケーションプロセッサは、骨伝導センサ１８０Ｍによって取得された血圧脈信号に基づく心拍情報を構文解析し、心拍検出機能を実装し得る。

【0131】

キー１９０は、電源キー、音量キー及び同様のものを含む。キー１９０は、メカニカルキーであってもよく、タッチタイプキーであってもよい。電子デバイス１００は、キー入力を受信し得、ユーザ設定及び電子デバイス１００の機能制御に関連するキー信号入力を生成し得る。

【0132】

モータ１９１は、振動プロンプトを生成し得る。モータ１９１は、電話の着信に対する振動プロンプトを提供するよう構成され得、タッチ振動フィードバックを提供するようさらに構成され得る。例えば、異なるアプリケーション（例えば、写真撮影及びオーディオ再生）に対して実行されたタッチ操作は、異なる振動フィードバック効果に対応し得る。ディスプレイ画面１９４の異なる領域に対して実行されるタッチ操作について、モータ１９１はまた、異なる振動フィードバック効果に対応し得る。異なるアプリケーションシナリオ（例えば、時間プロンプト、情報受信、目覚まし時計、及びゲーム）はまた、異なる振動フィードバック効果に対応し得る。タッチ振動フィードバック効果は、さらにカスタマイズされ得る。

【0133】

インジケータ１９２は、インジケータライトであり得、充電状態及びバッテリ変化を示すよう構成され得、メッセージ、不在着信、通知、及び同様のものを示すようさらに構成され得る。

【0134】

ＳＩＭカードインタフェース１９５は、ＳＩＭカードに接続するよう構成される。電子デバイス１００と接触すべく又は電子デバイス１００から分離されるべく、ＳＩＭカードがＳＩＭカードインタフェース１９５に挿入され得る又はＳＩＭカードインタフェース１９５から引き抜かれ得る。電子デバイス１００は、１又はＮ個のＳＩＭカードインタフェースをサポートし得る。Ｎは１より大きい正の整数である。ＳＩＭカードインタフェース１９５は、ｎａｎｏＳＩＭカード、ｍｉｃｒｏＳＩＭカード、ＳＩＭカード、及び同様のものをサポートし得る。複数のカードが全て、同一のＳＩＭカードインタフェース１９５に挿入され得る。複数のカードは、同一タイプのカード又は異なるタイプのカードであり得る。ＳＩＭカードインタフェース１９５は、さらに、異なるタイプのＳＩＭカードと互換性があり得る。ＳＩＭカードインタフェース１９５はまた、外部のメモリカードと互換性があり得る。電子デバイス１００は、ＳＩＭカードを用いることによってネットワークと相互作用し、電話及びデータ通信等の機能を実装する。幾つかの実施形態において、電子デバイス１００は、ｅＳＩＭ、すなわち、埋め込み型ＳＩＭカードを用いる。ｅＳＩＭカードは、電子デバイス１００に埋め込まれ得、電子デバイス１００から分離できない。

【0135】

電子デバイス１００のソフトウェアシステムは、階層アーキテクチャ、イベント駆動型アーキテクチャ、マイクロコアアーキテクチャ、マイクロサービスアーキテクチャ、又はクラウドアーキテクチャを用い得る。本発明の本実施形態において、階層アーキテクチャを有するＡｎｄｒｏｉｄ（登録商標）システムが、電子デバイス１００のソフトウェア構造を示すための一例として用いられる。

【0136】

図２は、本発明の一実施形態に係る電子デバイス１００のソフトウェア構造のブロック図である。

【0137】

階層アーキテクチャにおいて、ソフトウェアが数層に分割され、それぞれの層が明確な役割及びタスクを有する。層は、ソフトウェアインタフェースによって互いと通信する。幾つかの実施形態において、Ａｎｄｒｏｉｄ（登録商標）システムが、上から下に、それぞれ、アプリケーション層、アプリケーションフレームワーク層、Ａｎｄｒｏｉｄ（登録商標）ランタイム（Ａｎｄｒｏｉｄ（登録商標）ｒｕｎｔｉｍｅ）及びシステムライブラリ、並びに、カーネル層である４層に分割される。

【0138】

アプリケーション層は、一連のアプリケーションパッケージを含み得る。

【0139】

図２に示すように、アプリケーションパッケージは、カメラ、写真、カレンダー、電話、地図、ナビゲーション、ＷＬＡＮ、Ｂｌｕｅｔｏｏｔｈ（登録商標）、音楽、ビデオ、及びＳＭＳメッセージ等のアプリケーションを含み得る。

【0140】

アプリケーションフレームワーク層は、アプリケーション層でのアプリケーション用のアプリケーションプログラミングインタフェース（ａｐｐｌｉｃａｔｉｏｎｐｒｏｇｒａｍｍｉｎｇｉｎｔｅｒｆａｃｅ，ＡＰＩ）及びプログラミングフレームワークを提供する。アプリケーションフレームワーク層は、幾つかの事前に定義された機能を含む。

【0141】

図２に示されるように、アプリケーションフレームワーク層は、ウィンドウマネージャ、コンテンツプロバイダ、ビューシステム、電話マネージャ、リソースマネージャ、通知マネージャ、及び同様のものを含み得る。

【0142】

ウィンドウマネージャは、ウィンドウアプリケーションを管理するよう構成される。ウィンドウマネージャは、ディスプレイ画面のサイズを取得し得、ステータスバーが存在するか否かを決定し得、画面をロックし得、画面をキャプチャし得、及び同様のことをし得る。

【0143】

コンテンツプロバイダは、データを格納及び取得するよう構成され、その結果、データがアプリケーションによってアクセスされ得る。データは、ビデオ、画像、オーディオ、発信及び応答された電話、閲覧履歴及びブックマーク、アドレス帳、並びに同様のものを含み得る。

【0144】

ビューシステムは、テキスト表示の制御又はピクチャ表示の制御等の視覚制御を含む。ビューシステムは、アプリケーションを構築するよう構成され得る。ディスプレイインタフェースは、１又は複数のビューによって形成され得る。例えば、ＳＭＳ通知アイコンを含むディスプレイインタフェースは、テキストを表示するビュー及びピクチャを表示するビューを含み得る。

【0145】

電話マネージャは、電子デバイス１００の通信機能、例えば、（通じる、ハングアップ、及び同様のものを含む）通話状態管理、を提供するよう構成される。

【0146】

リソースマネージャは、アプリケーション用の様々なリソース、例えば、ローカライズされた文字列、アイコン、ピクチャ、レイアウトファイル、及びビデオファイル、を提供する。

【0147】

通知マネージャは、アプリケーションがステータスバー上に通知情報を表示することを可能にする。通知情報は、通知タイプを示すために用いられるメッセージであり得、ユーザと相互作用することなく短期滞在後に自動的に消え得る。例えば、通知マネージャは、ダウンロード完了、メッセージプロンプト、及び同様のものを通知するよう構成される。通知マネージャは、代替的には、グラフ又はスクロールバーテキストの形態でシステムの上部ステータスバー上に現れる通知、例えば、バックグラウンドで実行するアプリケーションの通知、であってもよく、ダイアログウィンドウの形態で画面に現れる通知であってもよい。例えば、テキスト情報がステータスバー上でプロンプトされる、プロンプトトーンが作成される、電子デバイスが振動する、又はインジケータライトが点滅する。

【0148】

Ａｎｄｒｏｉｄ（登録商標）ランタイムは、カーネルライブラリ及び仮想マシンを含む。Ａｎｄｒｏｉｄ（登録商標）ランタイムは、Ａｎｄｒｏｉｄ（登録商標）システムをスケジューリング及び管理することを担当している。

【0149】

カーネルライブラリは、２つの部分を含む。１つの部分は、Ｊａｖａ（登録商標）言語が呼び出す必要があるパフォーマンス機能であり、他の部分は、Ａｎｄｒｏｉｄ（登録商標）のカーネルライブラリである。

【0150】

アプリケーション層及びアプリケーションフレームワーク層は、仮想マシン上で実行する。仮想マシンは、バイナリファイルとして、アプリケーション層及びアプリケーションフレームワーク層のＪａｖａ（登録商標）ファイルを実行する。仮想マシンは、オブジェクトライフサイクル管理、スタック管理、スレッド管理、セキュリティ及び例外管理、並びに、ガベージコレクション等の機能を実行するために用いられる。

【0151】

システムライブラリは、サーフェースマネージャ（ｓｕｒｆａｃｅｍａｎａｇｅｒ）、メディアライブラリ（ｍｅｄｉａｌｉｂｒａｒｉｅｓ）、３次元グラフィックス処理ライブラリ（例えば、ＯｐｅｎＧＬＥＳ）、及び２Ｄグラフィックスエンジン（例えば、ＳＧＬ）等の複数の機能モジュールを含み得る。

【0152】

サーフェースマネージャは、ディスプレイサブシステムを管理し、複数のアプリケーションの２Ｄ層及び３Ｄ層を集中させるよう構成される。

【0153】

メディアライブラリは、複数の一般的なオーディオ及びビデオフォーマット、静止画像ファイル、及び同様のものの再生及び記録をサポートする。メディアライブラリは、複数のオーディオ及びビデオ符号化フォーマット、例えば、ＭＰＥＧ４、Ｈ．２６４、ＭＰ３、ＡＡＣ、ＡＭＲ、ＪＰＧ、及びＰＮＧ、をサポートし得る。

【0154】

３次元グラフィックス処理ライブラリは、３次元画像描画、画像レンダリング、合成、層処理、及び同様のものを実装するために用いられる。

【0155】

２Ｄグラフィックスエンジンは、２Ｄ描画用の描画エンジンである。

【0156】

カーネル層は、ハードウェアとソフトウェアとの間の層である。カーネル層は、少なくともディスプレイドライバ、カメラドライバ、及びオーディオドライバ、及びセンサドライバを含む。

【0157】

以下では、画像キャプチャ又は撮影シナリオを参照して、電子デバイス１００のソフトウェア及びハードウェアの作業処理を示す。

【0158】

タッチセンサ１８０Ｋがタッチ操作を受信するとき、対応するハードウェア割り込みがカーネル層に送信される。カーネル層は、タッチ操作を処理して（タッチの座標タッチ操作のタイムスタンプ等の情報を含む）元の入力イベントにする。元の入力イベントがカーネル層で格納される。アプリケーションフレームワーク層は、カーネル層から元の入力イベントを取得し、入力イベントに対応する制御を認識する。タッチ操作がタッチ／クリック操作であり、クリック操作に対応する制御がカメラアプリケーションアイコンの制御である一例を用いる。カメラアプリケーションは、アプリケーションフレームワーク層のインタフェースを呼び出してカメラアプリケーションを開始し、その後、カーネル層を呼び出すことによってカメラドライバを開始し、カメラ１９３を用いることによって静止画像又はビデオをキャプチャする。

【0159】

本願の実施形態は、マルチ端末マルチメディアデータ通信方法及びシステムを提供し、その結果、複数の端末デバイス間のマルチメディアデータストリームの低レイテンシな同期マルチポイント伝送が、無線接続（例えば、Ｗｉ－Ｆｉ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、又は移動体通信システム）を用いることによって実装され得る。本願の実施形態におけるモバイル端末デバイスは、タイプで限定されず、携帯電話、ポータブルコンピュータ、ハンドヘルドコンピュータ（携帯端末（ｐｅｒｓｏｎａｌｄｉｇｉｔａｌａｓｓｉｓｔａｎｔ）、ＰＤＡ）、タブレットコンピュータ、スマートＴＶ、スマートスピーカ、ＰＣ、スマートホーム、無線端末デバイス、通信デバイス、その他の電子デバイスであり得る。本願の実施形態におけるマルチ端末マルチメディアデータ通信方法は、マルチデバイス再生、マルチデバイスカラオケ、マルチデバイスコール、及びマルチデバイスオーディオレコーディング等のアプリケーションシナリオで用いられ得る。マルチデバイス再生、マルチデバイスカラオケ、マルチデバイスコール、及びマルチデバイスオーディオレコーディング等のマルチ端末マルチメディアデータ通信方法に基づくマルチメディアアプリケーションは、ローカルな適用及びリモートな適用を含む。本願の実施形態は、デバイスのタイプ及びネットワークデバイスの数に対する特殊要求を有さず、Ｗｉ－Ｆｉ（登録商標）ネットワーク能力を有する任意のスマートデバイスによってサポートされ得る。

【0160】

例えば、図３は、マルチ端末マルチメディアデータ通信のローカルな適用の概略図である。図３に示されるように、３つのスレーブが１つのマスターに接続され、マルチメディア共有を実装する。本実施形態における３つのスレーブは、例示的な目的のみで用いられる。実際の使用中、４又はそれより多くのスレーブが１つのマスターに接続され得る。複数のスレーブは、それぞれのユーザの音声情報を取得し得る。例えば、マイクロフォンスレーブ１はユーザ１の音声情報を取得し得、マイクロフォンスレーブ２はユーザ２の音声情報を取得し得、マイクロフォンスレーブ３はユーザ３の音声情報を取得し得る。マルチメディアデータ共有を実装すべく、マスター及びスレーブは、最初にネットワーク化される必要がある。ローカルな適用のためにネットワーク化する間、２次元コードが、接続パラメータを提供するためにマスターのインタフェース上に表示されてもよく、ＮＦＣ又は他の近距離通信機能（例えば、Ｗｉ－Ｆｉ、（登録商標）又はＢｌｕｅｔｏｏｔｈ（登録商標））が、ネットワーク化を開始すべく接続パラメータを提供すするためにオンになってもよい。２次元コードは、Ｗｉ－Ｆｉ（登録商標）名と、Ｗｉ－Ｆｉ（登録商標）パスワードと、マスター電子デバイスのアドレス及びポート番号とを保持し得る。スレーブは、２次元コードをスキャンすることによって又はＮＦＣタッチ方式若しくは他の近距離通信方式で接続パラメータを取得し、ネットワークに参加して接続を確立する。

【0161】

スマートフォン、スマートＴＶ、及びスマートスピーカのいずれかが、マスターとして用いられ得る。共同カラオケアプリケーションについて、マスターは、クラウドからカラオケ伴奏及びビデオピクチャをダウンロードし、スレーブによって送信されたボーカル及び伴奏をミキシングし、再生のためにハウリングを除外する。複数人の電話アプリケーション又は複数人の会議アプリケーションについて、マスターは、クラウドからバックグラウンドミュージックをダウンロードし得、スレーブによって送信されたボーカル及びバックグラウンドミュージックをミキシングし得、再生のためにハウリングを除外し得る。

【0162】

スマートフォン、タブレット、スマートウォッチ、又はウェアラブルデバイス等のモバイル端末は、スレーブとして用いられ得る。共同カラオケアプリケーションについて、スレーブは、ユーザの歌声又はスピーチをピックアップし、Ｗｉ－Ｆｉ（登録商標）又は近距離通信方式で音声又はスピーチをマスターに送信するためのマイクロフォンとして用いられ得る。他の態様において、スレーブはまた、マスターからダウンストリームデータストリームを受信し、カラオケのピクチャ及び歌詞を表示する。可能な実装において、カラオケのピクチャ及び歌詞を表示することに加えて、スレーブは、マスターによって送信され、且つ、ボーカル及び伴奏をミキシングすることによって取得されたオーディオをさらに再生し得る。イヤホンがスレーブに接続されているとき、この機能は、デフォルトでオンになる。

【0163】

マスター及びスレーブの両方が、様々な周辺装置に接続され得る。例えば、マスター及びスレーブは、スピーカ（有線スピーカ若しくはＢｌｕｅｔｏｏｔｈ（登録商標）スピーカ）、又は、音声を増幅するよう構成される若しくはイヤホンに接続されるサウンドアプリケーションデバイスに接続される。

【0164】

例えば、図４は、マルチ端末マルチメディアデータ通信のリモートな適用の概略図である。図４に示されるように、４つのスレーブが１つのマスターに接続され、マルチメディア共有を実装する。マスター、ユーザ１、及びユーザ２が場所Ａに位置し、ユーザ３が場所Ｂに位置し、ユーザ４が場所Ｃに位置する。この場合、マスター及びスレーブは、同一又は異なる区域に位置する。マルチメディアファイル共有を実装すべく、マスター及びスレーブは、最初にネットワーク化される必要がある。ローカルスレーブは、Ｗｉ－Ｆｉ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＮＦＣを介してマスターに接続され得る。マスターは、接続パラメータを提供するために２次元コードを表示してもよく、ネットワーク化を開始すべく接続パラメータを提供するためにＮＦＣ又は近距離通信機能をオンにしてもよい。スレーブは、２次元コードをスキャンすることによって又はＮＦＣ方式若しくは他の近距離通信方式でネットワーク情報を取得してネットワークに参加する。リモートスレーブは、Ｗｉ－Ｆｉ（登録商標）又はデータ通信ネットワーク（２Ｇ／３Ｇ／４Ｇ／５Ｇ）を介してマスターに接続され得る。マスターは、２次元コードをリモートスレーブに送信してもよく、ネットワーク情報をリモートスレーブに送信してもよい。２次元コード又はネットワーク情報は、マスターのＩＰアドレス及びポート番号を保持する。リモートスレーブは、２次元コードを認識又はネットワーク情報を構文解析し、ネットワークに参加してマスターに接続する。

【0165】

スマートフォン、スマートＴＶ、及びスマートスピーカのいずれかが、マスターとして用いられ得る。マスターは、クラウドからカラオケ伴奏とビデオピクチャ又はバックグラウンドサウンドとをダウンロードし、スレーブによって送信されたボーカルと、伴奏又はバックグラウンドサウンドとをミキシングし、ローカル再生のためにハウリングを除外する。さらに、マスターは、Ｗｉ－Ｆｉ（登録商標）又は他の近距離通信方式で、オーディオミキシング後に取得されたオーディオストリーム及びビデオストリームをローカルスレーブに送信する。マスターは、Ｗｉ－Ｆｉ（登録商標）又はデータ通信ネットワークを用いることによって、オーディオミキシング後に取得されたオーディオストリーム及びビデオストリームをリモートスレーブに送信する。

【0166】

スレーブとして、モバイルデバイスが、ユーザの音声情報をピックアップし、音声情報をマスターに送信するためのマイクロフォンとして用いられ得る。他の態様において、スレーブはまた、マスターから、カラオケのピクチャ及び歌詞、又は、会議のスピーチ中の伴奏等のダウンストリームデータストリームを受信する。

【0167】

ローカルマイクロフォンスレーブは、ユーザの歌声又はスピーチをピックアップするためのマイクロフォンとして用いられ得、Ｗｉ－Ｆｉ（登録商標）方式又は近距離通信方式で音声又はスピーチをマスターに送信し得る。他の態様において、ローカルマイクロフォンスレーブはまた、マスターからダウンストリームデータストリームを受信し、カラオケのピクチャ及び歌詞を表示する。

【0168】

リモートマイクロフォンスレーブは、ユーザの音声情報をピックアップし、データ通信ネットワークを用いることによって音声情報をマスターに送信するためのマイクロフォンとして用いられ得る。他の態様において、リモートマイクロフォンスレーブは、マスターからダウンストリームデータストリームを受信し、伴奏とリモートマイクロフォンスレーブ及び他のユーザの音声情報とを含むオーディオを再生し、カラオケのピクチャ及び歌詞を表示し、又は、リモートマイクロフォンスレーブのユーザが電話若しくは会議中に他のユーザのスピーチを聞くことを可能にする。

【0169】

【0170】

十分なユーザ体験を保証すべく、マスターは、マスターとスレーブとの間のオーディオ及びビデオ再生の同期を制御する必要がある。マスターは、マスターとスレーブとの間のクロックオフセットを決定することによって、スレーブがオーディオ及びビデオを再生する再生開始時点を決定する必要がある。例えば、マスターは、マスターとスレーブ１との間の第１のクロックオフセットを決定することによって、スレーブ１がマルチメディアデータを再生する第１の再生開始時点を決定する。第１の再生開始時点は、スレーブがマルチメディアデータを再生する開始時点を表すために用いられる。マスターは、マスターとスレーブ２との間の第２のクロックオフセットを決定することによって、スレーブ２がマルチメディアデータを再生する第２の再生開始時点を決定する。第２の再生開始時点は、スレーブ２がマルチメディアデータを再生する開始時点を表すために用いられる。したがって、マスターは、マスターがマルチメディアデータを再生する開始時点、第１のクロックオフセット、及び第２のクロックオフセットを用いることによって、スレーブ１及びスレーブ２がマルチメディアデータを再生する再生開始時点を調節し、マスター、スレーブ１、及びスレーブ２がマルチメディアデータを同期的に再生することを可能にし得る。

【0171】

クロックオフセットがスレーブによって決定され得ることを留意する必要がある。この場合、マスターは、マスターがマルチメディアデータを再生する開始時点をスレーブ１及びスレーブ２に送信する。スレーブ１は、マスターとスレーブ１との間の第１のクロックオフセットを決定し、マスターがマルチメディアデータを再生する開始時点及び第１のクロックオフセットに従って、スレーブ１がマルチメディアデータを再生する開始時点を決定する。同様に、スレーブ２は、マスターとスレーブ２との間の第２のクロックオフセットを決定し、マスターがマルチメディアデータを再生する開始時点及び第２のクロックオフセットに従って、スレーブ２がマルチメディアデータを再生する開始時点を決定する。

【0172】

他の可能な場合において、マスターは、クロックオフセットを決定し、マスターの再生開始時点及びクロックオフセットをスレーブに送信し、スレーブは、再生開始時点を決定する。マスターは、マスターとスレーブ１との間の第１のクロックオフセットを決定する。マスターは、マスターとスレーブ２との間の第２のクロックオフセットを決定する。マスターは、マスターがマルチメディアデータを再生する開始時点及び第１のクロックオフセットをスレーブ１に送信する。スレーブ１は、マスターがマルチメディアデータを再生する開始時点及び第１のクロックオフセットに従って、スレーブ１がマルチメディアデータを再生する開始時点を決定する。マスターは、マスターがマルチメディアデータを再生する開始時点及び第２のクロックオフセットをスレーブ２に送信する。スレーブ２は、マスターがマルチメディアデータを再生する開始時点及び第２のクロックオフセットに従って、スレーブ２がマルチメディアデータを再生する開始時点を決定する。

【0173】

次に、本願に係るマルチ端末マルチメディアデータ通信システムのソフトウェア及びハードウェアシステム構造が、以下で説明される。マルチデバイス再生、マルチデバイスカラオケ、マルチデバイスコール、及びマルチデバイスオーディオレコーディング等のアプリケーションが、本願で提供されるマルチ端末マルチメディアデータ通信システムのソフトウェア及びハードウェアシステム構造を用いることによって実装され得る。統合されたソフトウェア及びハードウェアシステムアーキテクチャが、本願の実施形態におけるマルチ端末共同再生アプリケーションシステムを実装するために用いられる。したがって、１つの特定のデバイスが、ネットワーク化を開始するためのマスターとして用いられてもよく、ネットワークに参加するためのスレーブとして用いられてもよい。マスター又はスレーブとしてデバイスを用いるために、特定の機能モジュールをオン又はオフにすることだけが必要である。

【0174】

例えば、図５は、マルチ端末マルチメディアデータ通信システムにおけるマスターのソフトウェア及びハードウェアシステムアーキテクチャ５００の概略図である。マスターシステムアーキテクチャ５００は、マルチデバイス共同スレーブデータ受信モジュール５１０、マルチデバイス共同ダウンストリームデータ受信モジュール５２０、オーディオ復号モジュール５３０、アンチハウリングモジュール５４０、オーディオミキシングモジュール５５０、サウンド効果処理モジュール５５１、共同オーディオ出力制御モジュール５６０、マルチデバイス共同データ送信モジュール５７０、Ｂｌｕｅｔｏｏｔｈ（登録商標）プロトコルスタック５７１、ＵＳＢインタフェース５７２、オーディオ記録アルゴリズムモジュール５７３、コーデック５７４、ディスプレイインタフェース５７５、ディスプレイ５８０、共同ＡＰＰ５８１、モデムインタフェース５９０、Ｗｉ－Ｆｉ（登録商標）プロトコルスタック／チップ５９１、Ｂｌｕｅｔｏｏｔｈ（登録商標）チップ／アンテナ５９２、ＴｙｐｅＣデジタルインタフェース５９３、３．５－ｍｍイヤホンジャック／ＴｙｐｅＣアナログインタフェース５９４、イヤホン又はスピーカ５９５、及び、ＭＩＣアレイ５９６を含み得る。共同オーディオ出力制御モジュール５６０は、サンプリングレート及びビット幅変換５６０Ａ、音量調節５６０Ｂ、録音帯選択５６０Ｃ、録音帯マージ５６０Ｄ、及び同様のものを含み得る。共同ＡＰＰは、マルチデバイス再生５８１Ａ、マルチデバイスカラオケ５８１Ｂ、マルチデバイスコール５８１Ｃ、マルチデバイスオーディオレコーディング５８１Ｄ、及び同様のものを含み得る。

【0175】

本願の実施形態において示される構造が、マルチ端末マルチメディアデータ通信システムにおけるマスターのソフトウェア及びハードウェアシステムアーキテクチャ５００に対する特定の制限を構成しないことが理解され得る。本願の幾つかの他の実施形態において、マルチ端末マルチメディアデータ通信システムにおけるマスターのソフトウェア及びハードウェアシステムアーキテクチャ５００は、図に示されるものより多くの又は少ないモジュール又はコンポーネントを含み得る。図におけるコンポーネントが、ハードウェア、ソフトウェア、又はソフトウェア及びハードウェアの組み合わせによって実装され得る。

【0176】

具体的には、モジュールの機能は、以下の通りである。

【0177】

マルチデバイス共同スレーブデータ受信モジュール５１０は、超低レイテンシでスレーブによって送信されたアップストリームデータを受信するよう構成される。

【0178】

ダウンストリームデータ受信モジュール５２０は、超低レイテンシでクラウドからカラオケの伴奏及びピクチャビデオを受信し、ローカル記憶装置内のカラオケの伴奏及びピクチャビデオを読み取るよう構成される。

【0179】

オーディオ復号モジュール５３０は、オーディオデータストリームを復号するよう構成される。オーディオデータストリームが録音帯符号化フォーマットのものである場合、録音帯のＰＣＭビットストリームが出力される。オーディオデータストリームがオーディオオブジェクト符号化フォーマットのものである場合、録音帯のオーディオオブジェクト情報及びＰＣＭビットストリームが出力される。

【0180】

アンチハウリングモジュール５４０は、ハウリングを回避すべく、マスターＭＩＣ及びスレーブＭＩＣでミキシングされたエコーを除外するよう構成される。アンチハウリング参照信号が、オーディオ復号モジュールによって提供される。

【0181】

オーディオミキシングモジュール５５０は、アップストリームボーカル及び伴奏をミキシングするよう構成される。

【0182】

サウンド効果処理モジュール５５１は、レンダリング効果、例えば、残響及び３Ｄサラウンドサウンド、を作り出すよう構成される。

【0183】

オーディオミキシングモジュール５５０による処理の後に取得された録音帯のＰＣＭビットストリームが、共同オーディオ出力制御モジュール５６０に直接転送され得ることを留意する必要がある。さらに、ユーザは、オーディオミキシング後に取得された録音帯のＰＣＭビットストリームに対するサウンド効果処理５５１をさらに実行し、録音帯のレンダリングされたＰＣＭビットストリームを取得し、その後、レンダリングされたＰＣＭビットストリームを共同オーディオ出力制御モジュールに転送することを選択し得る。

【0184】

共同オーディオ出力制御モジュール５６０は、複数の入力端末を有し、マルチデバイス共同ダウンストリームデータ受信モジュール５２０、オーディオミキシングモジュール５５０、及びサウンド効果処理モジュール５５１等の複数のモジュールからの入力を受信し得る。さらに、共同オーディオ出力制御モジュールは、以下の低レイテンシサブ機能モジュールを有する。

【0185】

サンプリングレート及びビット幅変換５６０Ａは、サンプリングレート及びビット幅が出力の要件を満たすことを可能にすべく、サンプリングレートを変換するよう構成される。

【0186】

音量調節５６０Ｂは、出力の音量を制御するよう構成される。

【0187】

録音帯選択５６０Ｃは、出力のために録音帯を選択するよう構成される。

【0188】

録音帯マージ５６０Ｄは、複数の録音帯を再生用の１つの録音帯にマージして音量を上げるよう構成される。

【0189】

共同オーディオ出力制御モジュール５６０は、オーディオストリームを、マルチデバイス共同データ送信モジュール５７０、Ｂｌｕｅｔｏｏｔｈ（登録商標）プロトコルスタック５７１、ＵＳＢインタフェース５７２、オーディオ記録アルゴリズム５７３、及びコーデック５７４にさらに入力し得る。さらに、メディア画像と音声との間の同期を維持すべく、共同オーディオ出力制御モジュール５６０は、レイテンシ値をディスプレイインタフェース５７５に送信し、レイテンシの調整を容易にし、これにより、伴奏と歌詞との間の同期を実装する。

【0190】

共同ＡＰＰ５８１は、画面上に共同機能を表示し、ユーザの入力を受信するよう構成される。ユーザは、共同ＡＰＰのオペレーションインタフェースを用いることによって、マルチデバイス共同データ送信モジュール５７０及び共同オーディオ出力制御モジュール５６０を制御する。

【0191】

マルチデバイス共同データ送信モジュール５７０は、モデムインタフェース５９０及びＷｉ－Ｆｉ（登録商標）プロトコルスタック／チップ５９１に接続され、超低レイテンシでオーディオストリーム及びビデオストリームをスレーブに送信し得る。

【0192】

幾つかの他の実施形態において、マルチデバイス共同データ送信モジュールは、Ｂｌｕｅｔｏｏｔｈ（登録商標）プロトコルスタック５７１によってＢｌｕｅｔｏｏｔｈ（登録商標）チップ／アンテナ５９３に接続され、ＵＳＢインタフェース５７２及びＴｙｐｅＣ（デジタル）５９３に接続され、オーディオストリーム及びビデオストリームをスレーブに送信し得る。

【0193】

コーデック５７４は、イヤホン又はスピーカ５９５と、３．５－ｍｍイヤホンジャック／ＴｙｐｅＣ（アナログ）５９５とに接続されて、オーディオミキシング処理５５０又はサウンド効果処理５５１後にＰＣＭビットストリームを再生するよう構成される。幾つかの実施形態において、マスターは、マイクロフォンとして用いられ得る。例えば、スマートフォンがマスターとして用いられるとき、スマートフォンは、同時にマイクロフォンとして用いられ、ユーザによって歌われた音声を受信し得る。この場合、コーデック５７４は、ＭＩＣアレイに接続され、マスターＭＩＣによって受信されたユーザの入力を受信するよう構成される。

【0194】

例えば、図６は、マルチ端末マルチメディアデータ通信システムにおけるスレーブのソフトウェア及びハードウェアシステムアーキテクチャ６００の概略図である。

【0195】

マルチデバイス共同マスターデータ受信モジュールは、マスターによって送信されたメディアデータストリームを超低レイテンシで受信するよう構成される。

【0196】

スレーブＭＩＣ６１０は、コーデック６２０（又は他おインタフェースチップ）に接続される。メディアデータストリームは、共同オーディオ出力制御によってマルチデバイス共同データ送信モジュールに入り、マスターに送信される。

【0197】

理解しやすくするために、共同カラオケは、本実施形態で提供されるマルチ端末マルチメディアデータ通信システムにおけるマスターとスレーブとの間のデータ相互作用の手順を説明するための一例として用いられる。共同カラオケアプリケーションにおけるマスターは、スマートＴＶ又はスマートフォンであり得る。スレーブは、スマートフォンである。マスター及びスレーブの両方が、サウンドを増幅するために周辺スピーカに接続され得る。スレーブは、イヤホンに接続され得る。したがって、共同カラオケは、４つのモードを有し得る。４つのモードは、ＴＶ（マスター）＋複数のローカルスレーブ、ＴＶ（マスター）＋複数のローカルスレーブ及びリモートスレーブ、スマートフォン（マスター及びマイクロフォンの両方として用いられる）＋複数のローカルスレーブ、及び、スマートフォン（マスター及びマイクロフォンの両方として用いられる）＋複数のローカルスレーブ及びリモートスレーブである。

【0198】

例えば、図７Ａ及び図７Ｂは、スマートＴＶがマスターとして用いられ、複数のスマートフォンがスレーブとして用いられるときのマスターとスレーブとの間のデータ相互作用の手順を示す。

【0199】

段階７０１：スレーブが歌を選択し、Ｗｉ－Ｆｉ（登録商標）及びＢｌｕｅｔｏｏｔｈ（登録商標）等の近距離通信方式で歌情報をマスターに転送する。

【0200】

段階７０２：マルチデバイス共同ダウンストリームデータ受信モジュールは、超低レイテンシでクラウドからカラオケの伴奏及びピクチャビデオを受信し、ローカル記憶装置内のカラオケの伴奏及びピクチャビデオを読み取り、オーディオデータストリームをオーディオ復号モジュールに送信し、直接再生され得るオーディオデータストリームを共同オーディオ出力制御モジュールに送信し、ビデオデータストリームをディスプレイインタフェースに送信する。

【0201】

段階７０３：マスターは、マルチデバイス共同データ送信モジュールを用いることによって、カラオケのピクチャ及び歌詞をスレーブに送信し、スレーブ側は、歌の歌詞及びビデオ等の情報を取得する。

【0202】

段階７０４：オーディオ復号モジュールは、オーディオデータストリームを復号し、ディスプレイインタフェースは、表示するためにビデオデータストリームをディスプレイに送信する。オーディオ復号モジュールによる処理の後に取得された伴奏オーディオは、アンチハウリング参照信号として用いられ、アンチハウリングモジュールに送信され、同時に、オーディオミキシングモジュール及びサウンド効果処理モジュールに送信される。

【0203】

段階７０５：ユーザは歌を歌い、スレーブＭＩＣはユーザの音声情報を取得し、歌をマルチデバイス共同スレーブデータ受信モジュールに転送する。

【0204】

段階７０６：マルチデバイス共同スレーブデータ受信モジュールは、Ｗｉ－Ｆｉ（登録商標）又はＢｌｕｅｔｏｏｔｈ（登録商標）等の近距離通信方式でスレーブのボーカルのＭＩＣデータストリームをマスターに送信する。スレーブＭＩＣによって受信されたボーカルがＴＶ伴奏サウンドを含むので、アンチハウリングモジュールは、アンチハウリングを実行する必要がある。

【0205】

段階７０７：アンチハウリングを実行し、スレーブＭＩＣでミキシングされたエコーを除外し、ハウリングを回避する。

【0206】

段階７０８：オーディオミキシングを実行し、アンチハウリング後のクリーンなボーカルを取得し、その後、オーディオミキシングモジュールを用いることによってクリーンなボーカル及び伴奏サウンドをミキシングする。オーディオミキシング後に取得された録音帯のＰＣＭビットストリームが、共同オーディオ出力制御モジュールに送信される。

【0207】

オプションで、段階７０９：ユーザがオーディオミキシング後に取得された録音帯のＰＣＭビットストリームをレンダリングし得、残響、３Ｄサラウンドサウンド、及び同様のものを生成し得る。

【0208】

段階７１０：共同オーディオ出力制御モジュールは、オーディオミキシング後に取得された録音帯のＰＣＭビットストリーム又はサウンド効果処理後の録音帯のＰＣＭビットストリームに対して、サンプリングレート及びビット幅変換、音量調節、録音帯選択、又は録音帯マージ等の処理を実行し得、録音帯の処理されたＰＣＭビットストリームをコーデックに送信し得る。さらに、歌詞と伴奏音楽との間の同期を維持すべく、「共同オーディオ出力制御（ｃｏｌｌａｂｏｒａｔｉｖｅａｕｄｉｏｏｕｔｐｕｔｃｏｎｔｒｏｌ）」は、レイテンシ値を「ディスプレイインタフェース」に送信し、歌詞と音楽との間の相対的なレイテンシを決定し、調整を実行する。

【0209】

段階７１１：マスターのイヤホン又はスピーカは、ユーザによって歌われた音声を再生する。

【0210】

次に、例えば、図８Ａ及び図８Ｂは、スマートＴＶがマスターとして用いられ、モバイルデバイスがローカルスレーブ及びリモートスレーブとして用いられるときのマスターとスレーブとの間の相互作用の手順を示す。

【0211】

リモートスレーブがカラオケに参加するとき、図７Ａ及び図７Ｂとは異なる。

【0212】

段階８０１：マスター及びスレーブの両方は、歌を選択し得る。例えば、ローカルスレーブが歌を選択する。

【0213】

段階８０２：マスターは、Ｗｉ－Ｆｉ（登録商標）又はデータ通信ネットワーク（２Ｇ／３Ｇ／４Ｇ／５Ｇ）を用いることによってカラオケのピクチャ及び歌詞をリモートスレーブに送信し、リモートスレーブ側は、歌の歌詞及びビデオ等の情報を取得する。

【0214】

段階８０３：マルチデバイス共同スレーブデータ受信モジュールは、Ｗｉ－Ｆｉ（登録商標）又はデータ通信ネットワーク（４Ｇ／５Ｇ）用いることによってリモートスレーブのボーカルのＭＩＣデータストリームをマスターに送信しアンチハウリングを実行する。

【0215】

段階８０４：マスターのマルチデバイス共同データ送信モジュールは、処理されたＰＣＭビットストリームをリモートスレーブに送信する。

【0216】

段階８０５：リモートスレーブのイヤホン又はスピーカは、マスターによって送信された伴奏サウンドを再生し、同時に、ローカルユーザ及びリモートユーザによって歌われた音声を再生する。

【0217】

例えば、図９は、モバイルデバイスがマスター及びマイクロフォンの両方として用いられ、複数のモバイルデバイスがローカルスレーブとして用いられるときのマスターとスレーブとの間の相互作用の手順を示す。

【0218】

図７Ａ及び図７Ｂとは異なり、この場合、１つの携帯電話がマスター及びマイクロフォンの両方として用いられる。

【0219】

段階９０１：マスターＭＩＣは、ユーザの音声情報を受信する。

【0220】

段階９０２：マスターコーデックは、マスターのＭＩＣデータストリームをアンチハウリングモジュールに送信する。

【0221】

段階９０３：携帯電話のスピーカは比較的低い音声量を有するので、携帯電話がマスターとして用いられるとき、携帯電話を外部スピーカ等のスピーカデバイスに接続し、これにより、マスターの音声を増幅し、同時に、ＫＴＶ効果を作り出す。

【0222】

例えば、図１０Ａ及び図１０Ｂは、モバイルデバイスがマスター及びマイクロフォンの両方として用いられ、複数のモバイルデバイスがローカルスレーブ及びリモートスレーブとして用いられるときのマスターとスレーブとの間の相互作用の手順を示す。この手順は、図８Ａ、図８Ｂ、図９、図１０Ａ、及び図１０Ｂを組み合わせることによって取得され得る。

【0223】

次に、マルチデバイスカラオケのローカルな適用の操作ＵＩ及び操作手順が、詳細に説明される。スマートＴＶがマスターとして用いられ、複数のスマートフォンがスレーブとして用いられる一例が、説明のために用いられる。複数のスレーブが存在し得ることを留意する必要がある。２つのスレーブが、本実施形態における説明のための一例として用いられる。

【0224】

図１１は、マスタースマートＴＶ、マイクロフォンスレーブ１、及びマイクロフォンスレーブ２を含むマルチデバイスカラオケのローカルな適用システムを示す。２つのスレーブは、両方共スマートフォンである。この場合、マスター及び２つのスレーブは、同一のローカルエリアネットワークに位置する。

【0225】

図１２Ａは、ＴＶ側のグラフィカルユーザインタフェース（ｇｒａｐｈｉｃａｌｕｓｅｒｉｎｔｅｒｆａｃｅ，ＧＵＩ）を示す。ＧＵＩは、ＴＶのネットワーク設定インタフェース１２０１である。図１２Ｂは、携帯電話側のグラフィカルユーザインタフェースを示す。ＧＵＩは、携帯電話の無線ローカルエリアネットワーク設定インタフェース１２０２である。図１２Ａ及び図１２Ｂに示されるように、この場合、マスターＴＶ及び２つのローカルスレーブ携帯電話は全て、同一のローカルエリアネットワークに接続される。

【0226】

例えば、図１３は、ＴＶのＧＵＩを示す。ＧＵＩは、ＴＶデスクトップ１３０１になり得る。ＴＶがＴＶデスクトップ１３０１上のカラオケアプリケーション（ａｐｐｌｉｃａｔｉｏｎ，ＡＰＰ）のアイコン１３０２を選択するリモートコントロールを制御するユーザによる操作を検出するとき、ＴＶバージョンカラオケアプリケーションが開始され得る。図１４に示される他のＧＵＩが表示される。ＧＵＩは、推奨インタフェース１４０１と称され得る。推奨インタフェース１４０１は、歌選択インタフェースに入るための歌セレクタ制御１４０２を含み得る。ＴＶが推奨インタフェース１４０１上の歌セレクタ制御１４０２をクリックするリモートコントロールを制御するユーザによる操作を検出した後に、図１５に示されるＧＵＩが表示される。ＧＵＩは、歌セレクタインタフェース１５０１と称され得る。歌セレクタインタフェース１５０１は、携帯電話スキャンツーオーダインタフェースに入るために用いられる制御１５０２を含み得る。ＴＶが歌セレクタインタフェース１５０１上の制御１５０２をクリックするリモートコントロールを用いるユーザによる操作を検出したとき、図１６に示される他のＧＵＩが表示される。ＧＵＩは、携帯電話スキャンツーオーダインタフェース１６０１と称され得る。携帯電話スキャンツーオーダインタフェース１６０１は、歌選択２次元コード１６０２を含み得る。携帯電話側カラオケソフトウェアは、携帯電話側カラオケソフトウェアを用いることによって、携帯電話スキャンツーオーダインタフェース１６０１上の歌選択２次元コード１６０２をスキャン及び認識し、歌を注文する。さらに、携帯電話は、ユーザの音声情報を受信するためのマイクロフォンとして用いられ得る。複数のローカル携帯電話は、歌選択２次元コード１６０２をスキャンすることによって、カラオケに参加し得る。したがって、ＫＴＶ効果は、ＴＶ及び携帯電話を用いることによって作り出され得る。

【0227】

次に、スレーブ携帯電話によってカラオケに参加する操作処理が、簡単に説明される。

【0228】

例えば、図１７（ａ）は、携帯電話のＧＵＩを示す。ＧＵＩは、携帯電話上のデスクトップ１７０１である。この場合、同一カラオケソフトウェアが携帯電話側及びＴＶ側にインストールされている。携帯電話がデスクトップ１７０１上のカラオケアプリケーションのアイコン１７０２をクリックするユーザによる操作を検出した後に、カラオケアプリケーションがオンになり得る。図１７（ｂ）は、カラオケアプリケーションの開始インタフェース１７０３を示す。カラオケアプリケーションが成功裏にオンになった後に、図１７（ｃ）に示される他のＧＵＩが表示される。ＧＵＩは、ホームページインタフェース１７０４を含み得る。推奨情報が、ホームページインタフェース１７０４上に表示される。ＧＵＩは、メニューバー１７０５をさらに含み得る。メニューバー１７０５は、Ｍｙインタフェースに入るための制御１７０６を含む。携帯電話が、Ｍｙインタフェースに入る制御１７０６をクリックするユーザによる操作を検出した後に、図１８（ａ）に示される他のＧＵＩが表示される。ＧＵＩは、Ｍｙインタフェース１８０１と称され得る。ＧＵＩは、制御１８０２を含み得る。携帯電話が、制御１８０２をクリックするユーザによる操作を検出したとき、図１８（ｂ）に示される他のＧＵＩが表示される。ＧＵＩあ、２次元コードをスキャンするための制御１８０３を含み得る。次に、携帯電話が、制御１８０３をクリックするユーザによる操作を検出した場合、図１８（ｃ）に示される２次元コードをスキャンするためのインタフェース１８０４が表示され得る。図１８（ｃ）に示されるように、この場合、２次元コードをスキャンするためのインタフェース１８０４が、ＴＶ上の歌選択２次元コードと連携している。２次元コードが成功裏に認識された後に、図１９（ａ）に示されるＧＵＩ１９０１が表示される。ＧＵＩは、歌セレクタインタフェース１９０２を含む。ＧＵＩは、メニューバー１９０３をさらに含む。メニューバー１９０３は、歌を注文するための歌セレクタ制御１９０４と、ユーザが歌うためのコントローラ制御１９０５と、注文された歌を表示するための制御１９０６とを含む。この時点では、歌を注文するための歌セレクタ制御１９０４が点灯している。歌セレクタインタフェース１９０２は、切断制御１９０８を含む。ユーザは、携帯電話をＴＶから切断するために切断制御１９０８をクリックし得る。歌セレクタインタフェース１９０２は、歌を注文して歌うための制御１９０９をさらに含み得、歌を注文された歌リストに追加するための制御１９１０をさらに含み得る。歌セレクタインタフェース１９０２は、検索バー１９０７をさらに含む。ユーザは、検索バー１９０７に歌の名前及び作者を入力し、歌の検索を実行し得る。例えば、図１９（ａ）に示されるように、ユーザは、「歌１２３」の歌の名前で歌を選択する。この場合、歌の様々なバージョンが、検索バー１９０７の下に現れる。例えば、ユーザは、選択された歌を歌うために制御１９０９をクリックする。この場合、マスターＴＶは、クラウド上に又はローカルに歌をキャッシュし得る。歌が成功裏にキャッシュされた後に、マスターＴＶが図１９（ｂ）のように表示される。マスターＴＶは、ユーザによって選択された歌「歌１２３」を再生する。

【0229】

この場合、ユーザは、携帯電話でユーザが歌うためにコントローラ制御をクリックし、歌うことを実行すべくＴＶコントローラインタフェースに入り得る。例えば、図２０（ａ）に示されるように、ユーザが歌うためにコントローラ制御をユーザがクリックしたことを携帯電話が検出した後に、図２０（ｂ）に示されるＧＵＩが表示される。ＧＵＩは、歌うためのマイクロフォン制御２００１と、元のボーカルをオンするための制御２００２と、ポーズするための制御２００３と、歌をスキップするための制御２００４と、リプレイするための制御２００５と、より多くのオプションのための制御２００６とを含み得、同時に、絵文字の箇条書きのコメントを送信するための制御２００７をさらに含み得る。ユーザは、クリック操作又はスワイプ操作の方式でマイクロフォン制御２００１をオンにし得る。ユーザが歌うことを実行するＧＵＩが図２０（ｃ）に示される。携帯電話のマイクロフォンは、ユーザによって歌われた音声を受信し得、ユーザによって歌われた音声を再生するためにＴＶ側のスピーカを用い得る。

【0230】

他の実施形態において、ユーザが歌を歌うためのコントローラ制御をユーザがクリックしたことを携帯電話が検出した後に、ＴＶコントローラインタフェースに入って、図２１によって示されるＧＵＩが表示される。この場合、ＴＶ制御パネルインタフェースは、歌のビデオピクチャ及び歌詞の両方を表示し、ユーザによる利用を容易にする。ＧＵＩは、箇条書きのコメントをオン又はオフにするための制御２１０１を含む。制御２１０１がオンになるとき、ユーザが絵文字の箇条書きのコメントをクリックする場合、絵文字の箇条書きのコメントが、ＴＶ側及び携帯電話側の両方でビデオピクチャ内に現れる。制御２１０２がオフになるとき、ユーザが絵文字の箇条書きのコメントをクリックする場合、ユーザが絵文字の箇条書きのコメントをクリックする場合、絵文字の箇条書きのコメントは、ＴＶ側でのみビデオピクチャ内に現れ、携帯電話側で表示されない。同様に、ＧＵＩはまた、元のボーカルをオンにするための制御２１０２と、ポーズするための制御２１０３と、歌うためのマイクロフォン制御２１０４と、歌をスキップするための制御２１０５と、リプレイするための制御２１０６と、より多くのオプションのための制御２１０７とを含み得、同時に、絵文字の箇条書きのコメントを送信するための制御２１０８をさらに含み得る。

【0231】

例えば、図２２（ａ）に示されるように、ユーザが絵文字の箇条書きのコメントを送信するための制御をクリックしたことを携帯電話が検出した後に、マスターＴＶは、図２２（ｂ）に示されるように、絵文字の箇条書きのコメントを表示する。例えばは、絵文字の箇条書きのコメントは、スレーブＴＶの画面の上、下、左、又は右から滑り出る方式で現れてもよく、フェードイン若しくフェードアウトしてもよい。ここでは、これについて限定しない。

【0232】

例えば、図２３（ａ）に示されるように、ユーザがより多くのオプションのための制御をクリックしたことを携帯電話が検出した後、図２３（ｂ）に示されるＧＵＩが表示される。ＧＵＩは、スキャン制御２３０１と、共有のための制御２３０２と、箇条書きのコメントを編集するための制御２３０３とを含み得る。例えば、携帯電話が、共有のための制御２３０２をクリックするユーザによる操作を検出したとき、図２３（ｃ）に示される制御が表示され、カラオケオーディオが他の第三者のアプリケーションに共有され得る。

【0233】

箇条書きのコメントを編集するための制御２３０３は、絵文字の箇条書きのコメントをオン又はオフにし得、同時に、ユーザによるテキストの編集をサポートし、テキストの箇条書きのコメントを送信する。

【0234】

次に、マルチデバイスカラオケのリモートな適用の操作ＵＩ及び操作手順が、簡単に説明される。スマートＴＶがマスターとして用いられ、複数のスマートフォンがスレーブとして用いられる一例が、説明のために用いられる。複数のスレーブが存在し得ることを留意する必要がある。２つのスレーブが、本実施形態における説明のための一例として用いられる。

【0235】

図２４は、マスタースマートＴＶ、ローカルマイクロフォンスレーブ１、リモートマイクロフォンスレーブ２、及びリモートマイクロフォンスレーブ３を含むマルチデバイスカラオケのリモートな適用システムを示す。３つのスレーブは、全てスマートフォンである。この場合、マスター及びローカルスレーブ１は、同一の無線ローカルエリアネットワークに位置し、リモートスレーブ２及びリモートスレーブ３はマスターと同一の場所に位置しない。

【0236】

ローカルスレーブは、前述のローカルな適用システムにおける、２次元コードをスキャンする方法又はＮＦＣ等の他の近距離通信方式を用いることによってカラオケに参加し得る。本実施形態は、カラオケに参加するリモートスレーブの操作手順の説明に重点を置く。例えば、図２５に示されるように、この場合、スキャンツーオーダインタフェースは、歌選択２次元コードに加えて、共有制御２５０１をさらに含む。カラオケネットワーク情報は、共有制御を用いることによってリモートスレーブに送信され、リモートカラオケを実装し得る。例えば、ユーザがＴＶデスクトップ上で共有制御を選択するためにリモートコントロールを制御したことをＴＶが検出した後に、図２６に示されるＧＵＩが表示される。この場合、ユーザ１の友人リスト２６０１がＧＵＩ上に表示される。友人リスト２６０１の詳細の説明を容易にすべく、図２７に示されるように、友人リストの部分が拡大されて表示される。図２７の（ａ）から分かり得るように、友人リストは、共有をオフにするための制御２７０１と、友人を検索するための制御２７０２と、複数の友人を選択するための複数選択制御２７０３と、ユーザ１のカラオケ友人リストと、上下にブラウジングするための制御２７０４とを含む。例えば、ユーザが複数選択制御２７０３を選択するためのリモートコントロールを制御したことをＴＶが検出した後に、図２７の（ｂ）に示されるＧＵＩが表示される。この場合、選択するための制御２７０５が、友人のアバターの前に現れる。ＧＵＩは、選択を完了するための制御２７０６と、複数選択をキャンセルするための制御２７０７とをさらに含む。例えば、ユーザは、カラオケ招待をリモートユーザ２及びリモートユーザ３に送信する。

【0237】

例えば、ユーザ１がカラオケ招待を送信した後に、ユーザ２及びユーザ３は、図２８Ａに示されるように表示されるカラオケ招待メッセージを受信する。ユーザが図２８Ｂに示されるように表示されるカラオケ招待メッセージをクリックしたことを携帯電話が検出した後に、マスター上で歌を注文するためのコードをスキャンするための２次元コードが、リモートスレーブに送信される。例えば、図２９Ａ及び図２９Ｂに示されるように、ユーザ２及びユーザ３は、長押し又は他の方式によって２次元コードを認識してカラオケに参加し得る。共有によってマスターによりスレーブに送信されるカラオケ招待は、２次元コード又はリンクであり得、カラオケアプリケーションにおけるメッセージの形態で又はＳＭＳメッセージの形態でリモートユーザに送信され得ることを留意する必要がある。

【0238】

他の例において、携帯電話は、共同カラオケを開始するためにマスターとしても用いられ得る。例えば、図３０（ａ）に示されるように、携帯電話がデスクトップ上のカラオケアプリケーションのアイコンをクリックするユーザによる操作を検出した後、カラオケアプリケーションがオンになり得る。図３０（ｂ）は、カラオケアプリケーションの開始インタフェースを示す。カラオケアプリケーションが成功裏にオンになった後に、及び、ユーザが歌選択制御をクリックしたことを携帯電話が検出した後に、図３０（ｃ）に示されるＧＵＩが表示される。ＧＵＩは、複数人共同カラオケのための制御３００１を含む。ユーザが複数人カラオケための制御３００１をクリックしたことを携帯電話が検出した後に、図３１（ａ）及び図３１（ｂ）に示されるＧＵＩが表示される。携帯電話は、歌セレクタインタフェースに入る。ＧＵＩにおける歌セレクタインタフェースの下に含まれるメニューバーは、歌を注文するためのコードをスキャンするための制御３１０１を含む。ユーザが制御３１０１をクリックしたことを携帯電話が検出した後に、図３１（ｂ）に示されるＧＵＩが表示される。ＧＵＩは、歌選択２次元コード及び共有制御を含む。ローカルユーザは、２次元コードをスキャンすることによってカラオケに参加し得る。リモートユーザについて、マスターは、共有制御を用いることによって、２次元コードをリモートユーザに共有し得る。

【0239】

本願の実施形態で提供されるマルチ端末マルチメディアデータ通信方法において、複数の端末デバイス間のマルチメディアデータストリームの低レイテンシ同期マルチポイント伝送が、無線接続（例えば、Ｗｉ－Ｆｉ（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、又は移動体通信システム）を用いることによって実装され得、その結果、複数の端末が共同し、新しい体験を提供するための新しい用途を確立し得、デバイスが、好都合に、相互接続され得、マルチメディアコンテンツを共有し得、これにより、デバイスの有利な機能を十分に利用する。本願の実施形態で提供されるマルチ端末マルチメディアデータ通信方法は、マルチデバイス再生、マルチデバイスカラオケ、マルチデバイスコール、及びマルチデバイスオーディオレコーディング等のアプリケーションシナリオで用いられ得る。マルチデバイス再生、マルチデバイスカラオケ、マルチデバイスコール、及びマルチデバイスオーディオレコーディング等のマルチ端末共同再生に基づくマルチメディアアプリケーションは、ローカルな適用及びリモートな適用を含む。

【0240】

図３２は、本願の一実施形態に係るマルチ端末マルチメディアデータ通信システムの概略図である。図３２を参照すると、システムは、マスター電子デバイス１１と、第１のスレーブ電子デバイス１２と、第２のスレーブ電子デバイス１３とを含む。

【0241】

マスター電子デバイスは、第１のスレーブ電子デバイス及び第２のスレーブ電子デバイスとの接続を確立するよう構成される。

【0242】

第１のスレーブ電子デバイスは、第１の再生命令を受信するよう構成され、第１の電子デバイスは、第１の再生命令をマスター電子デバイスに送信するようさらに構成される。

【0243】

マスター電子デバイスは、第１の再生命令に応答して第１のマルチメディアデータを再生し、同時に、第１のマルチメディアデータの少なくとも一部を第１のスレーブ電子デバイス及び第２のスレーブ電子デバイスに送信し、マスター電子デバイス、第１のスレーブ電子デバイス、及び第２のスレーブ電子デバイスが第１のマルチメディアデータを同期的に再生することを可能するようさらに構成される。

【0244】

第１のスレーブ電子デバイスは、第１のボーカルを受信するようさらに構成され、同時に、第２のスレーブ電子デバイスは、第２のボーカルを受信するよう構成される。

【0245】

マスター電子デバイスは、第１のスレーブ電子デバイスによって送信された第１のボーカルを受信し、第２のスレーブ電子デバイスによって送信された第２のボーカルを受信するようさらに構成され、マスター電子デバイスは、第１のボーカル、第２のボーカル、及び第１のマルチメディアデータをミキシングして再生用の第２のマルチメディアデータを生成するようさらに構成される。

【0246】

本願は、可読記憶媒体及びコンピュータプログラムを含む記憶媒体がさらに提供される。コンピュータプログラムは、任意の前述の実施形態で提供されたマルチ端末マルチメディアデータ通信方法を実装するよう構成される。

【0247】

方法実施形態の段階の全て又は幾つかは、関連するハードウェアを命令するプログラムによって実装され得る。プログラムは、可読記憶メモリに格納され得る。プログラムが実行されるとき、実施形態における方法の段階が実行される。メモリ（記憶媒体）は、リードオンリメモリ（英語：ｒｅａｄ－ｏｎｌｙｍｅｍｏｒｙ，ＲＯＭ）と、ＲＡＭと、フラッシュメモリと、ハードディスクと、ソリッドステートディスクと、磁気テープ（ｍａｇｎｅｔｉｃｔａｐｅ）と、フロッピーディスク（ｆｌｏｐｐｙｄｉｓｋ）と、光ディスク（ｏｐｔｉｃａｌｄｉｓｃ）と、それらの任意の組み合わせとを含む。

【0248】

前述の説明は、単に本願の特定の実装に過ぎないが、本願の保護範囲を限定することを意図しない。本願で開示された技術的範囲内で当業者によって考え出された任意の変形又は置換は、本願の保護範囲に含まれるものとする。したがって、本願の保護範囲は、特許請求の範囲の保護範囲に従うものとする。
［その他の可能な項目］
［項目１］
１つのマスター電子デバイス、１つの第１のスレーブ電子デバイス、及び１つの第２のスレーブ電子デバイスを備える複数の電子デバイスに適用される、マルチ端末マルチメディアデータ通信方法であって、
上記マスター電子デバイスが、上記第１のスレーブ電子デバイス及び上記第２のスレーブ電子デバイスとの接続を別々に確立する段階と、
上記第１のスレーブ電子デバイスが、第１の再生命令を受信し、上記第１のスレーブ電子デバイスが、上記第１の再生命令を上記マスター電子デバイスに送信する段階と、
上記マスター電子デバイスが、上記第１の再生命令に応答して第１のマルチメディアデータを再生し、同時に、上記第１のマルチメディアデータの少なくとも一部を上記第１のスレーブ電子デバイス及び上記第２のスレーブ電子デバイスに送信し、上記マスター電子デバイス、上記第１のスレーブ電子デバイス、及び上記第２のスレーブ電子デバイスが上記第１のマルチメディアデータを同期的に再生することを可能にする段階と、
上記第１のスレーブ電子デバイスが、第１のボーカルを受信し、同時に、上記第２のスレーブ電子デバイスが、第２のボーカルを受信する段階と、
上記マスター電子デバイスが、上記第１のスレーブ電子デバイスによって送信された上記第１のボーカルを受信し、上記第２のスレーブ電子デバイスによって送信された上記第２のボーカルを受信し、上記マスター電子デバイスが、上記第１のボーカル、上記第２のボーカル、及び上記第１のマルチメディアデータをミキシングして再生用の第２のマルチメディアデータを生成する段階と
を備える、方法。
［項目２］
上記マスター電子デバイス、上記第１のスレーブ電子デバイス、及び上記第２のスレーブ電子デバイスが上記第１のマルチメディアデータを同期的に再生することを可能にする上記段階は、具体的には、
上記マスター電子デバイスが、上記マスター電子デバイスと上記第１のスレーブ電子デバイスとの間の第１のクロックオフセットを決定する段階、
上記マスター電子デバイスが、上記マスター電子デバイスと上記第２のスレーブ電子デバイスとの間の第２のクロックオフセットを決定する段階、
上記マスター電子デバイスが、上記第１のクロックオフセットに従って、上記第１のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する第１の再生開始時点を決定する段階であって、上記第１の再生開始時点は、上記第１のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する開始時点を表すために用いられる、段階、及び
上記マスター電子デバイスが、上記第２のクロックオフセットに従って、上記第２のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する第２の再生開始時点を決定する段階であって、上記第２の再生開始時点は、上記第２のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する開始時点を表すために用いられる、段階
である、項目１に記載の方法。
［項目３］
上記マスター電子デバイスが、上記第１のスレーブ電子デバイス及び上記第２のスレーブ電子デバイスとの接続を別々に確立する上記段階は、
上記マスター電子デバイス及び上記第１のスレーブ電子デバイスが同一の無線ローカルエリアネットワークに位置している場合、上記マスター電子デバイスが、１つのＷｉ－Ｆｉ（登録商標）接続識別子を表示し、上記第１のスレーブ電子デバイスが、上記Ｗｉ－Ｆｉ（登録商標）接続識別子を認識することによって上記マスター電子デバイスとの上記接続を確立する段階
を有する、項目１又は２に記載の方法。
［項目４］
上記マスター電子デバイスが、上記第１のスレーブ電子デバイス及び上記第２のスレーブ電子デバイスとの接続を別々に確立する上記段階は、
上記マスター電子デバイス及び上記第２のスレーブ電子デバイスが同一の無線ローカルエリアネットワークに位置していない場合、上記マスター電子デバイスが、ネットワーク情報を上記第２のスレーブ電子デバイスに送信し、上記第２のスレーブ電子デバイスが、上記ネットワーク情報を構文解析することによって上記マスター電子デバイスとの上記接続を確立する段階
を有する、項目１又は２に記載の方法。
［項目５］
上記マスター電子デバイスが、上記第１のボーカル、上記第２のボーカル、及び上記マルチメディアデータをミキシングして再生用の第２のマルチメディアデータを生成する上記段階の後に、上記方法は、
上記マスター電子デバイスが、上記第２のマルチメディアデータを上記第２のスレーブ電子デバイスに送信する段階と、
上記マスター電子デバイス及び上記第２のスレーブ電子デバイスが、上記第２のマルチメディアデータを同期的に再生する段階と
をさらに備える、項目４に記載の方法。
［項目６］
上記第１のマルチメディアデータの上記少なくとも一部は、上記第１のマルチメディアデータのオーディオ、ビデオ、又は歌詞を含む、項目１に記載の方法。
［項目７］
上記マスター電子デバイスが、ユーザによって入力された第２の再生命令を受信する段階と、
上記マスター電子デバイスが、上記第２の再生命令に応答して第３のマルチメディアデータを再生し、同時に、上記第３のマルチメディアデータの少なくとも一部を上記第１のスレーブ電子デバイス及び上記第２のスレーブ電子デバイスに送信し、上記マスター電子デバイス、上記第１のスレーブ電子デバイス、及び上記第２のスレーブ電子デバイスが上記第３のマルチメディアデータを同期的に再生することを可能にする段階と、
上記第１のスレーブ電子デバイスが、上記第１のボーカルを受信し、同時に、上記第２のスレーブ電子デバイスが、上記第２のボーカルを受信する段階と、
上記マスター電子デバイスが、上記第１のスレーブ電子デバイスによって送信された上記第１のボーカルを受信し、上記第２のスレーブ電子デバイスによって送信された上記第２のボーカルを受信し、上記マスター電子デバイスが、上記第１のボーカル、上記第２のボーカル、及び上記第３のマルチメディアデータをミキシングして再生用の第４のマルチメディアデータを生成する段階と
をさらに備える、項目１に記載の方法。
［項目８］
上記第１のスレーブ電子デバイスが、上記第１のボーカルを受信し、同時に、上記第２のスレーブ電子デバイスが、上記第２のボーカルを受信し、同時に、上記マスター電子デバイスが、第３のボーカルを受信する段階と、
上記マスター電子デバイスが、上記第１のスレーブ電子デバイスによって送信された上記第１のボーカルを受信し、上記第２のスレーブ電子デバイスによって送信された上記第２のボーカルを受信し、上記マスター電子デバイスが、上記第１のボーカル、上記第２のボーカル、上記第３のボーカル、及び上記第４のマルチメディアデータをミキシングして再生用の第５のマルチメディアファイルを生成する段階と
さらに備える、項目１又は７に記載の方法。
［項目９］
１つのマスター電子デバイス、１つの第１のスレーブ電子デバイス、及び１つの第２のスレーブ電子デバイスを備える、マルチ端末マルチメディアデータ通信システムであって、
上記マスター電子デバイスが、上記第１のスレーブ電子デバイス及び上記第２のスレーブ電子デバイスとの接続を確立するよう構成され、
上記第１のスレーブ電子デバイスが、第１の再生命令を受信するよう構成され、上記第１の電子デバイスが、上記第１の再生命令を上記マスター電子デバイスに送信するようさらに構成され、
上記マスター電子デバイスが、上記第１の再生命令に応答して第１のマルチメディアデータを再生し、同時に、上記第１のマルチメディアデータの少なくとも一部を上記第１のスレーブ電子デバイス及び上記第２のスレーブ電子デバイスに送信し、上記マスター電子デバイス、上記第１のスレーブ電子デバイス、及び上記第２のスレーブ電子デバイスが上記第１のマルチメディアデータを同期的に再生することを可能するようさらに構成され、
上記第１のスレーブ電子デバイスが、上記第１のボーカルを受信するようさらに構成され、同時に、上記第２のスレーブ電子デバイスが、上記第２のボーカルを受信するよう構成され、
上記マスター電子デバイスが、上記第１のスレーブ電子デバイスによって送信された上記第１のボーカルを受信し、上記第２のスレーブ電子デバイスによって送信された上記第２のボーカルを受信するようさらに構成され、上記マスター電子デバイスが、上記第１のボーカル、上記第２のボーカル、及び上記第１のマルチメディアデータをミキシングして再生用の第２のマルチメディアデータを生成するようさらに構成される、
システム。
［項目１０］
上記マスター電子デバイス、上記第１のスレーブ電子デバイス、及び上記第２のスレーブ電子デバイスが上記第１のマルチメディアデータを同期的に再生することを可能にすることは、具体的には、
上記マスター電子デバイスが、上記マスター電子デバイスと上記第１のスレーブ電子デバイスとの間の第１のクロックオフセットを決定するよう構成され、
上記マスター電子デバイスが、上記マスター電子デバイスと上記第２のスレーブ電子デバイスとの間の第２のクロックオフセットを決定するようさらに構成され、
上記マスター電子デバイスが、上記第１のクロックオフセットに従って、上記第１のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する第１の再生開始時点を決定するようさらに構成され、上記第１の再生開始時点は、上記第１のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する開始時点を表すために用いられ、
上記マスター電子デバイスが、上記第２のクロックオフセットに従って、上記第２のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する第２の再生開始時点を決定するようさらに構成され、上記第２の再生開始時点は、上記第２のスレーブ電子デバイスが上記第１のマルチメディアデータを再生する開始時点を表すために用いられる
ことである、項目９に記載のシステム。
［項目１１］
上記第１のスレーブ電子デバイス及び上記第２の電子デバイスとの接続を別々に確立するよう構成されている上記マスター電子デバイスは、
上記マスター電子デバイス及び上記第１のスレーブ電子デバイスが同一の無線ローカルエリアネットワークに位置している場合、上記マスター電子デバイスが、１つのＷｉ－Ｆｉ（登録商標）接続識別子を表示するよう構成され、上記第１のスレーブ電子デバイスが、上記Ｗｉ－Ｆｉ（登録商標）接続識別子を認識することによって上記マスター電子デバイスとの上記接続を確立するよう構成される
ことを含む、項目９又は１０に記載のシステム。
［項目１２］
上記第１のスレーブ電子デバイス及び上記第２の電子デバイスとの接続を別々に確立するよう構成されている上記マスター電子デバイスは、
上記マスター電子デバイス及び上記第２のスレーブ電子デバイスが同一の無線ローカルエリアネットワークに位置していない場合、上記マスター電子デバイスが、ネットワーク情報を上記第２のスレーブ電子デバイスに送信するよう構成され、上記第２のスレーブ電子デバイスが、上記ネットワーク情報を構文解析することによって上記マスター電子デバイスとの上記接続を確立するよう構成される
ことを含む、項目９又は１０に記載のシステム。
［項目１３］
上記マスター電子デバイスが、上記第１のボーカル、上記第２のボーカル、及び上記マルチメディアデータをミキシングして再生用の上記第２のマルチメディアデータを生成した後に、上記システムは、
上記マスター電子デバイスが、上記第２のマルチメディアデータを上記第２のスレーブ電子デバイスに送信するようさらに構成され、
上記マスター電子デバイス及び上記第２のスレーブ電子デバイスが、上記第２のマルチメディアデータを同期的に再生する
ことをさらに備える、項目１２に記載のシステム。
［項目１４］
上記第１のマルチメディアデータの上記少なくとも一部は、上記第１のマルチメディアデータのオーディオ、ビデオ、又は歌詞を含む、項目９に記載のシステム。
［項目１５］
上記マスター電子デバイスが、ユーザによって入力された第２の再生命令を受信するよう構成され、
上記マスター電子デバイスが、上記第２の再生命令に応答して第３のマルチメディアデータを再生し、同時に、上記第３のマルチメディアデータの少なくとも一部を上記第１のスレーブ電子デバイス及び上記第２のスレーブ電子デバイスに送信し、上記マスター電子デバイス、上記第１のスレーブ電子デバイス、及び上記第２のスレーブ電子デバイスが上記第３のマルチメディアデータを同期的に再生することを可能にするようさらに構成され、
上記第１のスレーブ電子デバイスが、上記第１のボーカルを受信するよう構成され、同時に、上記第２のスレーブ電子デバイスが、上記第２のボーカルを受信するよう構成され、
上記マスター電子デバイスが、上記第１のスレーブ電子デバイスによって送信された上記第１のボーカルを受信し、上記第２のスレーブ電子デバイスによって送信された上記第２のボーカルを受信するようさらに構成され、上記マスター電子デバイスが、上記第１のボーカル、上記第２のボーカル、及び上記第３のマルチメディアデータをミキシングして再生用の第４のマルチメディアデータを生成するようさらに構成される
ことをさらに備える、項目９に記載のシステム。
［項目１６］
上記第１のスレーブ電子デバイスが、上記第１のボーカルを受信するようさらに構成され、同時に、上記第２のスレーブ電子デバイスが、上記第２のボーカルを受信するようさらに構成され、同時に、上記マスター電子デバイスが、第３のボーカルを受信するようさらに構成され、
上記マスター電子デバイスが、上記第１のスレーブ電子デバイスによって送信された上記第１のボーカルを受信し、上記第２のスレーブ電子デバイスによって送信された上記第２のボーカルを受信するようさらに構成され、上記マスター電子デバイスが、上記第１のボーカル、上記第２のボーカル、上記第３のボーカル、及び上記第４のマルチメディアデータをミキシングして再生用の第５のマルチメディアファイルを生成するようさらに構成される
ことをさらに備える、項目９又は１５に記載のシステム。
［項目１７］
コンピュータ可読記憶媒体であって、上記コンピュータ可読記憶媒体は、コンピュータ命令を備え、上記コンピュータ命令がコンピュータ上で実行されるとき、上記コンピュータが、項目１から８のいずれか一項に記載のマルチ端末マルチメディアデータ通信方法を実行することが可能である、コンピュータ可読記憶媒体。

【図1】