特許 6456411 移動端末画像の自己適応表示方法、装置及びコンピュータ記憶媒体

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6456411

(24)【登録日】2018年12月28日

(45)【発行日】2019年1月23日

(54)【発明の名称】移動端末画像の自己適応表示方法、装置及びコンピュータ記憶媒体

(51)【国際特許分類】

   H04N 7/15 20060101AFI20190110BHJP

   H04M 1/00 20060101ALI20190110BHJP

【ＦＩ】

   H04N7/15 120

   H04M1/00 R

【請求項の数】8

【全頁数】13

(21)【出願番号】特願2016-575926(P2016-575926)

(86)(22)【出願日】2014年10月24日

(65)【公表番号】特表2017-526239(P2017-526239A)

(43)【公表日】2017年9月7日

(86)【国際出願番号】CN2014089438

(87)【国際公開番号】WO2016000359

(87)【国際公開日】20160107

【審査請求日】2017年2月14日

(31)【優先権主張番号】201410309612.9

(32)【優先日】2014年6月30日

(33)【優先権主張国】CN

(73)【特許権者】

【識別番号】509024525

【氏名又は名称】ゼットティーイー コーポレーション

【氏名又は名称原語表記】ＺＴＥ ＣＯＲＰＯＲＡＴＩＯＮ

(74)【代理人】

【識別番号】100091096

【弁理士】

【氏名又は名称】平木 祐輔

(74)【代理人】

【識別番号】100102576

【弁理士】

【氏名又は名称】渡辺 敏章

(74)【代理人】

【識別番号】100101063

【弁理士】

【氏名又は名称】松丸 秀和

(72)【発明者】

【氏名】ルオ，シャオヤン

(72)【発明者】

【氏名】フェン，ビン

(72)【発明者】

【氏名】ズー，ツンワン

(72)【発明者】

【氏名】リウ，ムー

【審査官】 冨田 高史

(56)【参考文献】

【文献】 米国特許出願公開第２０１１／０２４９０７３（ＵＳ，Ａ１）

【文献】 特開２０１４−０７２７０２（ＪＰ，Ａ）

【文献】 特開２００７−１４２７６２（ＪＰ，Ａ）

【文献】 米国特許出願公開第２００２／００９３５３１（ＵＳ，Ａ１）

【文献】 米国特許出願公開第２０１３／０２７１５６０（ＵＳ，Ａ１）

【文献】 米国特許出願公開第２００６／００９８０８５（ＵＳ，Ａ１）

【文献】 特開平１０−１６４５３９（ＪＰ，Ａ）

【文献】 特開２０１０−２３８０７０（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｈ０４Ｎ ７／１０

Ｈ０４Ｎ ７／１４ − ７／１７３

Ｈ０４Ｎ ７／２０ − ７／５６

Ｈ０４Ｍ １／００

Ｈ０４Ｍ １／２４ − １／８２

(57)【特許請求の範囲】

【請求項1】

マルチポイント制御端末が、移動端末の現在の置き状態での表示可能なサブ画面数量Ｋを確定し、Ｋ個のサブ画面を選択して移動端末に送信して表示することと、
前記移動端末の置き状態が変化する場合、前記マルチポイント制御端末が再び前記移動端末の現在の置き状態での表示可能なサブ画面数量Ｒを確定し、Ｒ個のサブ画面を選択して前記移動端末に送信して表示することと、を含み、
前記Ｒ個のサブ画面を選択して移動端末に送信することは、Ｒ個のサブ画面の表示レイアウトを調整し、Ｒ個のサブ画面のビデオ画像と調整後の表示レイアウトを移動端末に送信することを含み、
前記マルチポイント制御端末が、移動端末の現在の置き状態での表示可能なサブ画面数量Ｋを確定することは、マルチポイント制御端末が、マルチポイントビデオ会議における移動端末の現在の置き状態、移動端末のスクリーン情報、及びＮ個の会議端末のビデオ画像の解像度に基づいて、前記移動端末の前記置き状態での表示可能なサブ画面数量Ｋを確定することを含み、前記Ｎは、全ての会議端末の数量を示し、
又は、
前記マルチポイント制御端末が、移動端末の現在の置き状態での表示可能なサブ画面数量Ｋを確定することは、マルチポイント制御端末が、マルチポイントビデオ会議において移動端末が送信した現在の置き状態での表示可能なサブ画面数量Ｋを受信することを含み、
前記移動端末が送信した現在の置き状態での表示可能なサブ画面数量Ｋは、前記移動端末が、自身の現在の置き状態、自身のスクリーン情報、及び自身のビデオ画像の解像度に基づいて確定した前記置き状態での表示可能なサブ画面数量Ｋである移動端末画像の自己適応表示方法。

【請求項2】

前記Ｋ個のサブ画面を選択して移動端末に送信して表示することは、選択基準に基づいてＫ個のサブ画面を選択して移動端末に送信して表示することを含む請求項１に記載の自己適応表示方法。

【請求項3】

前記選択基準は、
音量の大きさ、ビデオ画像の解像度、帯域幅、議長端、ブロードキャストソース、重要度のうちのいずれか１つの基準、又は、
音量の大きさ、ビデオ画像の解像度、帯域幅、議長端、ブロードキャストソース、重要度のうちの少なくとも２つの基準に基づいて加重方式で組合わせて得た基準、又は、
前記マルチポイント制御端末が他の会議端末とのインタラクションの方式によりサブ画面を選択すること、を含む請求項２に記載の自己適応表示方法。

【請求項4】

前記Ｋ個のサブ画面を選択して移動端末に送信することは、
Ｋ個のサブ画面の表示レイアウトを調整し、Ｋ個のサブ画面のビデオ画像と調整後の表示レイアウトを移動端末に送信することを含む請求項３に記載の自己適応表示方法。

【請求項5】

前記Ｋ個のサブ画面の表示レイアウトを調整することは、
Ｋ個のサブ画面における一部のサブ画面の表示レイアウトを調整することを含む請求項４に記載の自己適応表示方法。

【請求項6】

サブ画面確定モジュールとサブ画面選択モジュールとを含み、
前記サブ画面確定モジュールは、移動端末の現在の置き状態での表示可能なサブ画面数量Ｋを確定するように設定され、
前記サブ画面選択モジュールは、Ｋ個のサブ画面を選択して移動端末に送信して表示するように設定され、
前記サブ画面確定モジュールは更に、移動端末の置き状態が変化する場合、再び移動端末の現在の置き状態での表示可能なサブ画面数量Ｒを確定するように設定され、
前記サブ画面選択モジュールは更に、Ｒ個のサブ画面を選択して移動端末に送信して表示するように設定され、
前記Ｒ個のサブ画面を選択して移動端末に送信することは、Ｒ個のサブ画面の表示レイアウトを調整し、Ｒ個のサブ画面のビデオ画像と調整後の表示レイアウトを移動端末に送信することを含み、
前記サブ画面確定モジュールは、マルチポイントビデオ会議における移動端末の現在の置き状態、移動端末のスクリーン情報、及びＮ個の会議端末のビデオ画像の解像度に基づいて、前記移動端末の前記置き状態での表示可能なサブ画面数量Ｋを確定するように設定され、前記Ｎは、全ての会議端末の数量を示し、
又は、
前記サブ画面確定モジュールは、マルチポイントビデオ会議において移動端末が送信した現在の置き状態での表示可能なサブ画面数量Ｋを受信するように設定され、
前記移動端末が送信した現在の置き状態での表示可能なサブ画面数量Ｋは、前記移動端末が、自身の現在の置き状態、自身のスクリーン情報、及び自身のビデオ画像の解像度に基づいて確定した前記置き状態での表示可能なサブ画面数量Ｋである移動端末画像の自己適応表示装置。

【請求項7】

前記サブ画面選択モジュールは、選択基準に基づいてＫ個のサブ画面を選択して移動端末に送信して表示するように設定される請求項６に記載の自己適応表示装置。

【請求項8】

前記マルチポイント制御端末に請求項１〜５のいずれか一項に記載の移動端末画像の自己適応表示方法を実行させるためのコンピュータプログラムを記録したコンピュータ読み取り可能な記録媒体。

【発明の詳細な説明】

【技術分野】

【0001】

本発明はビデオ会議技術に関し、特に移動端末画像の自己適応表示を実現する方法、装置及びコンピュータ記憶媒体に関する。

【背景技術】

【0002】

通信技術と移動端末技術の発展に伴って、移動端末もビデオ会議に加入して、ビデオ及び音声の通信をリアルタイムに行うことができる。しかし、移動端末がマルチポイントビデオ会議を行う場合、移動端末の柔軟性により、例えば自在に回転することができ、移動端末が回転する場合、移動端末が表示するマルチ画面も従って対応的な回転が生じ、移動端末のユーザの体験と要求を満足する。しかし、従来の技術、例えば公開番号がＣＮ１０３２２０４８５Ａであり、発明名称が『回転画面のビデオ再生の方法及びシステム』である中国特許文献により提出されたビデオ再生画面の回転の方法において、端末が送信した画面回転要求はユーザの参与を必要とし、自己適応を達成しない。公開番号がＣＮ１０１６７３５３７Ａであり、発明名称が『スクリーン画面選択の実現装置及び方法』である中国特許文献では、重力感応装置を用いて画面自動回転の課題を解決したが、上記両者の共通問題は、画面が回転する時には画面の画像全体を処理単位として回転と拡大・縮小が行われ、マルチ画面における各サブ画面のレイアウトを調整することができないことである。移動端末の体積の制限により、ディスプレイ画面のサイズと面積は限られ、特にマルチポイントビデオ通信を行い、且つ参加者が多い場合、小さいディスプレイでマルチ画面の場合の各画面の内容がはっきりと見えない。

【発明の概要】

【課題を解決するための手段】

【0003】

従来の技術課題を解決するために、本発明の実施例は、移動端末画像の自己適応表示方法、装置及びコンピュータ記憶媒体を提供することを望んだものである。

【0004】

本発明の実施例の技術的手段は、以下のように実現される。

【0005】

本発明の実施例は、移動端末画像の自己適応表示方法を提供し、該方法は、
マルチポイント制御端末が移動端末の現在の置き状態での表示可能なサブ画面数量Ｋを確定し、Ｋ個のサブ画面を選択して移動端末に送信して表示することを含む。

【0006】

本発明の実施例は、移動端末画像の自己適応表示装置を更に提供し、該装置はサブ画面確定モジュールとサブ画面選択モジュールとを含み、
前記サブ画面確定モジュールは、移動端末の現在の置き状態での表示可能なサブ画面数量Ｋを確定するように設定され、
前記サブ画面選択モジュールは、Ｋ個のサブ画面を選択して、移動端末に送信して表示するように設定される。

【0007】

本発明の実施例は、コンピュータ記憶媒体を更に提供し、コンピュータプログラムが記憶され、該コンピュータプログラムは、上記移動端末画像の自己適応表示方法を実行するように設定される。

【発明の効果】

【0008】

本発明の実施例は、移動端末画像の自己適応表示方法、装置及びコンピュータ記憶媒体を提供し、マルチポイント制御端末は、移動端末の現在の置き状態での表示可能なサブ画面数量Ｋを確定し、Ｋ個のサブ画面を選択して移動端末に送信して表示し、これにより、移動端末の置き状態の変化（例えば横置き又は縦置き）に基づいて、移動端末が表示するマルチ画面のレイアウトと内容をリアルタイムで動的に調整し、移動端末を用いてビデオ通信を行うユーザの画面に対する快適感を向上させることができる。

【図面の簡単な説明】

【0009】

【図1】図１は、本発明の実施例による移動端末画像の自己適応表示方法のフロー模式図である。

【図2】図２は、本発明の実施例１による移動端末画像の自己適応表示方法のフロー模式図である。

【図3】図３は、本発明の実施例２によるマルチ画面レイアウト調整の模式図である。

【図4】図４は、本発明の実施例３によるマルチ画面レイアウト調整の模式図である。

【図5】図５は、本発明の実施例３によるＡがＤのスクリーン回転情報を受信した場合の処理方法フローチャートである。

【図6】図６は、本発明の実施例による移動端末画像の自己適応表示装置の構造模式図である。

【発明を実施するための形態】

【0010】

本発明の実施例において、マルチポイント制御端末は、移動端末の現在の置き状態での表示可能なサブ画面数量Ｋを確定し、Ｋ個のサブ画面を選択して移動端末に送信して表示する。

【0011】

以下、図面及び具体的な実施例に基づいて、本発明について詳しく説明する。

【0012】

本発明の実施例は、移動端末画像の自己適応表示方法を実現し、図１に示すように、該方法は、下記ステップ１０１〜１０２を含む。

【0013】

ステップ１０１： マルチポイント制御端末は、移動端末の現在の置き状態での表示可能なサブ画面数量Ｋを確定する。

【0014】

具体的に、マルチポイントビデオ会議において、マルチポイント制御端末は、マルチポイントビデオ会議における移動端末の現在の置き状態、移動端末のスクリーン情報、及びＮ個の会議端末のビデオ画像の解像度に基づいて、前記移動端末の前記置き状態での表示可能なサブ画面数量Ｋを確定し、前記Ｎは全ての会議端末の数量を示す。又は、マルチポイント制御端末は、マルチポイントビデオ会議において移動端末が送信した現在の置き状態での表示可能なサブ画面数量Ｋを受信する。前記移動端末が送信した現在の置き状態での表示可能なサブ画面数量Ｋは、前記移動端末が自身の現在の置き状態、自身のスクリーン情報、及び自身のビデオ画像の解像度に基づいて確定した前記置き状態での表示可能なサブ画面数量Ｋである。ここで、前記全ての会議端末は、マルチポイント制御端末、移動端末、及び通常ビデオ端末を含み、前記マルチポイント制御端末とは、マルチポイント制御ユニット（ＭＣＵ、Multi Control Unit）が設置される端末である。

【0015】

また、マルチポイントビデオ会議において、マルチポイント制御端末は、会議端末における移動端末に識別子を付け、インタラクション情報における前記識別子に基づいて、会議端末における移動端末を確定することができる。

【0016】

該ステップにおいて、前記置き状態は、平置き及び縦置きを含み、前記スクリーン情報は、スクリーンの物理サイズ、及びアスペクト比(幅と高さとの比)を含む。

【0017】

前記置き状態、前記スクリーン情報の取得について、マルチポイント制御端末は、移動端末とのインタラクションの時のインタラクション情報に基づいて取得することができ、前記移動端末は、自体の重力感応部材により自身の置き状態を取得し、自身が記憶するデバイスパラメータからスクリーン情報を取得することができ、マルチポイント制御端末とのインタラクションの時、前記置き状態、前記スクリーン情報をインタラクション情報に含ませ、Ｎ個の会議端末のビデオ画像の解像度について、マルチポイント制御端末はＮ個の会議端末のビデオ画像に対するデコードの時に取得することができる。

【0018】

ここで、前記マルチポイント制御端末がマルチポイントビデオ会議における移動端末の現在の置き状態、移動端末のスクリーン情報、及びＮ個の会議端末の送信したビデオ画像の解像度に基づいて、前記移動端末の前記置き状態での表示可能なサブ画面数量Ｋを確定することは、下記内容を含む。

【0019】

受信した移動端末のスクリーンの物理サイズをＳ（単位：インチ、in）とし、スクリーンのアスペクト比(幅と高さとの比)をＷｒ：Ｈｒとし、置き状態をＣとし、参照の画像の解像度Ｒｗ＊Ｒｈ及びパラメータｔを設定する。

【0020】

まず、移動端末のスクリーンの幅（Ｗ）と高さ（Ｈ）を求め、即ち、
Ｗ/Ｈ＝Ｗｒ/Ｈｒ、
Ｗ^２＋Ｈ^２＝(Ｓ＊２.５４)^２
である。

【0021】

上記連立方程式の解は、求められたスクリーンの幅と高さ（単位：cm）である。

【0022】

そして、移動端末の表示可能なサブ画面数Ｋを求める。

【0023】

スクリーンの置き状態Ｃが平置きである場合、Ｎ１＝floor(Ｗ/(Ｒｗ＊ｔ))、Ｎ２＝floor(Ｈ/(Ｒｈ＊ｔ))である。

【0024】

スクリーンの置き状態Ｃが縦置きである場合、Ｎ１＝floor(Ｈ/(Ｒｗ＊ｔ))、Ｎ２＝floor(Ｗ/(Ｒｈ＊ｔ))である。

【0025】

その中、floorは指定のエクスプレッション以下の最大整数を返す関数であり、Ｎ１、Ｎ２の最小値は１である。

【0026】

Ｋ＝Ｎ１＊Ｎ２

【0027】

上記参照の画像解像度Ｒｗ＊Ｒｈの設定は、Ｎ−１個の会議端末の送信したビデオ画像の解像度とマルチポイント制御端末のビデオ画像の解像度とに基づいて動的に設定してもよく、１つの固定値に設定してもよい。

【0028】

ステップ１０２： マルチポイント制御端末は、Ｋ個のサブ画面を選択して、移動端末に送信して表示する。

【0029】

具体的に、マルチポイント制御端末は、選択基準に基づいてＫ個のサブ画面を選択して、移動端末に送信して表示し、前記選択基準は、音量の大きさ、ビデオ画像の解像度、帯域幅、議長端(議長端末)、ブロードキャストソース、重要度等のうちのいずれか１つの基準、又は、音量の大きさ、ビデオ画像の解像度、帯域幅、議長端、ブロードキャストソース、重要度等のうちの少なくとも２つの基準に基づいて加重方式で組合わせて得た基準、又は、前記マルチポイント制御端末が他の会議端末とのインタラクションの方式によりサブ画面を選択すること、を含む。

【0030】

例えば、マルチポイント制御端末は、Ｎ個の会議端末のビデオ画像の音量の大きさに基づいて、Ｋ個のサブ画面を選択して移動端末に送信して表示することができ、例えば、Ｎ個の会議端末のビデオ画像を音量の大きさの順にソートし、音量が大きい又は音量が小さいＫ個のビデオ画像をサブ画面として選択して、移動端末に送信して表示する。

【0031】

又は、マルチポイント制御端末は、Ｎ個の会議端末のビデオ画像の解像度に基づいて、Ｋ個のサブ画面を選択して表示することができ、例えば、Ｎ個の会議端末の送信したビデオ画像を解像度の高さの順にソートし、解像度が高い又は解像度が低いＫ個のビデオ画像をサブ画面として選択して、移動端末に送信して表示する。

【0032】

又は、マルチポイント制御端末は、Ｎ個の会議端末のビデオ画像の帯域幅に基づいてＫ個のサブ画面を選択して表示することができ、例えば、Ｎ個の会議端末のビデオ画像を帯域幅の広さの順にソートし、帯域幅が広い又は帯域幅が狭いＫ個のビデオ画像をサブ画面として選択して、移動端末に送信して表示する。

【0033】

又は、マルチポイント制御端末は、Ｎ個の会議端末における議長端に基づいて、Ｋ個のサブ画面を選択して表示することができ、例えば、Ｎ個の会議端末のビデオ画像における議長端の送信したビデオ画像をマークし、前記議長端の送信したビデオ画像を含むＫ個のビデオ画像をサブ画面として選択して、移動端末に送信して表示する。

【0034】

又は、マルチポイント制御端末は、Ｎ個の会議端末におけるブロードキャストソースに基づいて、Ｋ個のサブ画面を選択して表示することができ、例えば、Ｎ個の会議端末におけるブロードキャストソースをマークし、前記ブロードキャストソースの送信したビデオ画像を含むＫ個のビデオ画像をサブ画面として選択して、移動端末に送信して表示する。

【0035】

又は、マルチポイント制御端末は、Ｎ個の会議端末のビデオ画像の重要度に基づいて、Ｋ個のサブ画面を選択して表示することができ、例えば、Ｎ個の会議端末のビデオ画像の重要度をマークし、重要度が高いＫ個のビデオ画像をサブ画面として選択して、移動端末に送信して表示する。

【0036】

又は、マルチポイント制御端末は、Ｎ個の会議端末のビデオ画像の音量の大きさと解像度とに基づいて、Ｋ個のサブ画面を選択して表示することができ、例えば、Ｎ個の会議端末のビデオ画像を音量の大きさの順にソートし、各会議端末の順位を記録し、それからＮ個の会議端末のビデオ画像を解像度によりソートし、各会議端末の順位を記録し、最後にＮ個の会議端末の音量の大きさの順にソートした順位と解像度によりソートした順位とを加重し、加重値が高い又は加重値が低いＫ個のビデオ画像をサブ画面として選択して、移動端末に送信して表示する。

【0037】

又は、マルチポイント制御端末は、Ｎ個の会議端末の送信したビデオ画像の帯域幅、Ｎ個の会議端末における議長端に基づいて、Ｋ個のサブ画面を選択して表示することができ、例えば、Ｎ個の会議端末のビデオ画像を帯域幅の広さの順にソートし、前記議長端の送信したビデオ画像を１つのサブ画面として選択して表示し、且つ帯域幅が広い又は帯域幅が狭いＫ−１個のビデオ画像をサブ画面として選択して、移動端末に送信して表示する。

【0038】

類似的に、マルチポイント制御端末は、音量の大きさ、ビデオ画像の解像度、帯域幅、議長端、ブロードキャストソース、重要度等のうちの少なくとも２つの基準に基づいて加重方式で組合わせ、Ｎ個の会議端末のビデオ画像におけるＫ個のビデオ画像をサブ画面として選択して、移動端末に送信して表示することができる。

【0039】

また、マルチポイント制御端末は、他の会議端末に表示する必要があるかどうかの要求メッセージを送信することができ、表示する必要がある会議端末の送信したビデオ画像において、Ｋ個のビデオ画像をサブ画面として選択して、移動端末に送信して表示する。

【0040】

該ステップにおいて、Ｋ個のサブ画面を選択して移動端末に送信することは、Ｋ個のサブ画面の表示レイアウトを調整し、Ｋ個のサブ画面のビデオ画像と調整後の表示レイアウトを移動端末に送信することを含む。具体的に、異なる数量のサブ画面に対するレイアウトテンプレートを予め記憶し、選択したＫ個のサブ画面に基づいて、使用するレイアウトテンプレートを確定し、使用するレイアウトテンプレートにおける各サブ画面のサイズに基づいて、Ｋ個のビデオ画像の表示サイズを調整し、前記Ｋ個のビデオ画像と使用するレイアウトテンプレートとを移動端末に送信する。前記レイアウトテンプレートは、縦列レイアウトテンプレート、水平レイアウトテンプレート、グリッドレイアウトテンプレート、不規則形サブ画面レイアウトテンプレート等を含む。

【0041】

前記Ｋ個のサブ画面の表示レイアウトを調整することは更に、Ｋ個のサブ画面における一部のサブ画面の表示レイアウトを調整することを含む。具体的に、Ｋ個のサブ画面において、現在の置き状態に対する前の一つの置き状態でのＬ個のサブ画面の表示位置を変化しないまま、Ｍ個のサブ画面を移動端末の現在の置き状態に適応する空き表示領域に調整し、例えば、現在が平置きである場合、Ｍ個のサブ画面を水平の空き表示領域に調整する。前記Ｍ個のサブ画面とＬ個のサブ画面との和が、Ｋ個のサブ画面である。

【0042】

移動端末の置き状態が変化する場合、上記方法は更に、マルチポイント制御端末が再び移動端末の現在の置き状態での表示可能なサブ画面数量Ｒを確定し、Ｒ個のサブ画面を選択して移動端末に送信して表示することを含む。

【0043】

本発明をより良く理解するために、以下、具体的な実施例を参照しながら、本発明について詳しく説明する。

【0044】

実施例１
以下、５つの会議端末（Ａ、Ｂ、Ｃ、Ｄ及びＥ）がビデオ会議を行うことを例とし、その中、Ａがマルチポイント制御端末であり、Ｅが移動端末であり、Ｂ、Ｃ、Ｄが通常ビデオ端末であるとすると、本実施例による移動端末画像の自己適応表示方法は、図２に示すように、下記ステップＳ１０〜Ｓ１１を含む。

【0045】

ステップＳ１０： Ａは、Ｅの現在の置き状態が平置きであること、Ｅのスクリーンの物理サイズ及び幅と高さとの比、及びＡ、Ｂ、Ｃ、Ｄ、Ｅのビデオ画像の解像度に基づいて、この時のＥの表示可能なサブ画面数量Ｋ＝２を確定する。

【0046】

ステップＳ１１： Ａは、Ｋ＝２個のサブ画面を選択して、Ｅに送信して表示する。

【0047】

ここで、Ｋ＜Ｎ(Ｎ＝5)であるため、選択基準に基づいてサブ画面を選択する必要がある。設定したサブ画面の選択基準を、ビデオ画像の解像度に基づいてサブ画面を選択することとし、５つの移動端末のビデオ解像度の関係をＲＡ_Ｂ＞ＲＡ_Ｄ＞ＲＡ_Ａ＞ＲＡ_Ｃ＞ＲＡ_Ｅとすると、選択基準に基づいて、解像度が高い２つのサブ画面、即ちＢとＤの画面を選択して、Ｅの表示サブ画面とする。

【0048】

実施例２
以下、３つの会議端末（Ａ、Ｂ及びＣ）がビデオ会議を行うことを例とし、その中、Ａがマルチポイント制御端末であり、Ｃが移動端末であり、Ｂが通常ビデオ端末であるとすると、本実施例による移動端末画像の自己適応表示方法は、下記内容を含む。

【0049】

Ａは、Ｃの現在の置き状態が平置きであること、Ｃのスクリーンの物理サイズ及び幅と高さとの比、及びＡ、Ｂ、Ｃのビデオ画像の解像度に基づいて、この時のＣの表示可能なサブ画面数量Ｋ＝３を確定し、即ち、この時の参会端末の全ての会議端末を表示することができる。

【0050】

選択基準に基づいて、表示するＫ個のサブ画面を選択し、この時、Ｋ＝Ｎ＝３であり、そうすると、Ａ、Ｂ、Ｃの３つの画面をＣの表示サブ画面として選択し、選択したＫ個のサブ画面をＣに送信して表示する。

【0051】

仮に、この時のＣのマルチ画面レイアウトを、図３における左の図に示すように、Ａ、Ｂ、Ｃの３つの端末のレイアウトが左から右に配列されるものとするが、図３はマルチ画面のレイアウト調整ポリシーを説明するためのものであり、他のレイアウト調整ポリシーを使用する場合を制限するものではない。ビデオ会議の過程において、Ｃが回転し、最初の平置きから縦置きに回転する場合、Ａは、Ｃの置き状態の変化情報を受信して、縦状態でのＣの表示可能なサブ画面数量Ｒを再び計算し、この時に計算したＲをＲ＝３とすると、Ａ、Ｂ、Ｃの３つの画面をＣの表示サブ画面として選択し、この時、サブ画面のレイアウトを調整する必要があり、Ｂのサブ画面の位置を変化しないまま、ＡとＣのサブ画面を縦方向の空き表示領域に調整することができ、調整後のマルチ画面のレイアウトは、図３における右の図に示される。該実施例において、各サブ画面がスクリーン全体の１/３を占めることとする。図３における中間の模式図は、従来技術で得られたマルチ画面の表示効果であり、該技術の最終の画像画面が占めるスクリーンの面積の比率(割合)は小さく、ディスプレイ全体を十分に利用していない。

【0052】

実施例３
以下、４つの会議端末（Ａ、Ｂ、Ｃ及びＤ）がビデオ会議を行うことを例とし、その中、Ａがマルチポイント制御端末であり、Ｄが移動端末であり、Ｂ、Ｃが通常ビデオ端末であるとし、Ｄのスクリーンサイズを３.５inとし、スクリーンのアスペクト比(幅と高さとの比)を３：２とし、回転する前の置き位置を平置きとし、この時に計算して得たＤの表示可能な画面数量を１とし、且つ選択基準に基づいてＡの画面を選択して表示するものとすると、表示の模式図は図４における左の図に示され、参会過程においてＤが回転し、置き状態が平置きから縦置きに変化し、ＡがＤのスクリーン回転情報を受信した場合の処理は、図５に示すように、以下のステップＳ２０〜Ｓ２３を含む。

【0053】

ステップＳ２０： Ａは、Ｄのスクリーン回転情報を受信する。

【0054】

ステップＳ２１： Ａは、Ｄの縦状態での表示可能なサブ画面数量Ｒ＝２を確定し、該Ｒの計算については、Ｄのスクリーンサイズ、アスペクト比(幅と高さとの比)、及びＡ、Ｂ、Ｃ、Ｄの４つの会議端末のビデオ画像の解像度等の情報に基づいて計算する必要がある。

【0055】

ステップＳ２２： Ａは、設定した選択基準に基づいて、表示するＲ＝２個のサブ画面を選択する。

【0056】

ここで、仮に、選択基準を、参会者の音声量の大きい順に従って選択するようにし、この時に各端末の音声量の大きさの関係がＶＡ＞ＶＢ＞ＶＣ＞ＶＤである場合、前記選択基準に基づいて、最終にＡ端末とＢ端末の画面をＤの表示サブ画面として選択する。

【0057】

ステップＳ２３： Ａは、マルチ画面のレイアウト調整を行う。

【0058】

ここで、図４における右の図に示すように、Ａは、表示レイアウトを、Ａの画面とＢの画面とが縦に配列されるように調整することができ、Ｄのサブ画面のレイアウトを再び生成し、Ａは、Ａの画面、Ｂの画面及び再び生成したサブ画面のレイアウトをＤに送信して表示する。

【0059】

実施例４
以下、５つの会議端末（Ａ、Ｂ、Ｃ、Ｄ及びＥ）がビデオ会議を行うことを例とし、その中、Ａがマルチポイント制御端末であり、Ｅが移動端末であり、Ｂ、Ｃ、Ｄが通常ビデオ端末であるとすると、本実施例による移動端末画像の自己適応表示方法は、下記内容を含む。

【0060】

Ｅは、自身の現在の置き状態が平置きであること、自身のスクリーンの物理サイズ及びアスペクト比(幅と高さとの比)、並びに自身のビデオ画像の解像度に基づいて、この時のＥの表示可能なサブ画面数量Ｋ＝２を確定し、表示可能なサブ画面数量Ｋ＝２をＡとのインタラクション情報に含ませ、前記インタラクション情報は、会議ビデオ接続確認、又は会議ビデオ接続要求等であってもよい。

【0061】

Ａは、Ｅの表示可能なサブ画面数量Ｋ＝２を受信し、Ｋ＝２個のサブ画面を選択して、Ｅに送信して表示する。

【0062】

ここで、Ｋ＜Ｎ（Ｎ＝５）であるため、選択基準に基づいてサブ画面を選択する必要がある。設定したサブ画面の選択基準を、ビデオ画像の解像度に基づいてサブ画面を選択することとし、５つの移動端末のビデオ解像度の関係をＲＡ_Ｂ＞ＲＡ_Ｄ＞ＲＡ_Ａ＞ＲＡ_Ｃ＞ＲＡ_Ｅとすると、選択基準に基づいて、解像度が高い２つのサブ画面、即ちＢとＤの画面を選択して、Ｅの表示サブ画面とする。

【0063】

上記移動端末画像の自己適応表示方法に基づいて、本発明の実施例は、移動端末画像の自己適応表示装置を更に提供し、該装置は、マルチポイント制御端末に設置され、図６に示すように、該装置はサブ画面確定モジュール６１、サブ画面選択モジュール６２を含む。
前記サブ画面確定モジュール６１は、通信インタフェースとプロセッサとの組合せにより実現されることができ、移動端末の現在の置き状態での表示可能なサブ画面数量Ｋを確定するように設定される。

【0064】

マルチポイントビデオ会議において、前記サブ画面確定モジュール６１は、マルチポイントビデオ会議における移動端末の現在の置き状態、移動端末のスクリーン情報、及びＮ個の会議端末のビデオ画像の解像度に基づいて、前記移動端末の前記置き状態での表示可能なサブ画面数量Ｋを確定し、前記Ｎは、全ての会議端末の数量を示す。ここで、前記全ての会議端末は、マルチポイント制御端末、移動端末、及び通常ビデオ端末を含む。

【0065】

前記置き状態、前記スクリーン情報の取得について、前記サブ画面確定モジュール６１は、自身が位置するマルチポイント制御端末と移動端末とのインタラクションの時のインタラクション情報に基づいて取得することができ、且つ、前記移動端末は、自体の重力感応部材により自身の置き状態を取得し、自身が記憶するデバイスパラメータからスクリーン情報を取得することができ、マルチポイント制御端末とのインタラクションの時、前記置き状態、前記スクリーン情報をインタラクション情報に含ませる。Ｎ個の会議端末のビデオ画像の解像度について、前記サブ画面確定モジュール６１は、Ｎ個の会議端末のビデオ画像に対するデコードの時に取得することができる。

【0066】

前記サブ画面確定モジュール６１は、マルチポイントビデオ会議において移動端末が送信した、現在の置き状態での表示可能なサブ画面数量Ｋを受信することもでき、前記移動端末が送信した、現在の置き状態での表示可能なサブ画面数量Ｋは、前記移動端末が自身の現在の置き状態、自身のスクリーン情報、及び自身のビデオ画像の解像度に基づいて確定した、前記置き状態での表示可能なサブ画面数量Ｋである。

【0067】

前記サブ画面選択モジュール６２は、通信インタフェースとプロセッサとの組合せにより実現されることができ、Ｋ個のサブ画面を選択して、移動端末に送信して表示するように設定される。

【0068】

具体的に、前記サブ画面選択モジュール６２は、選択基準に基づいて、Ｋ個のサブ画面を選択して移動端末に送信して表示し、前記選択基準は、音量の大きさ、ビデオ画像の解像度、帯域幅、議長端(議長端末)、ブロードキャストソース、重要度等のうちのいずれか１つの基準、又は、音量の大きさ、ビデオ画像の解像度、帯域幅、議長端、ブロードキャストソース、重要度等のうちの少なくとも２つの基準に基づいて加重方式で組合わせて得た基準、又は、前記マルチポイント制御端末が前記Ｎ−１個の会議端末とのインタラクションの方式によりサブ画面を選択すること、を含む。

【0069】

前記サブ画面確定モジュール６１は更に、移動端末の置き状態が変化する場合、再び移動端末の現在の置き状態での表示可能なサブ画面数量Ｒを確定するように設定される。

【0070】

前記サブ画面選択モジュール６２は更に、Ｒ個のサブ画面を選択して移動端末に送信して表示するように設定される。

【0071】

本発明の実施例に記載の移動端末画像の自己適応表示方法は、ソフトウェア機能モジュールの形式で実現され、且つ独立の製品として販売され又は使用される場合、コンピュータ読み取り可能な記憶媒体に記憶されることもできる。このような理解に基づいて、当業者は、本発明の実施例が、方法、システム、又はコンピュータプログラム製品として提供されることができることを理解すべきである。従って、本発明は、完全なハードウェアの実施例、完全なソフトウェアの実施例、又はソフトウェアとハードウェアとの組合せの実施例の形態を採用できる。そして、本発明は、コンピュータ使用可能なプログラムコードが含まれる１つ又は複数のコンピュータ使用可能な記憶媒体において実施されたコンピュータプログラム製品の形態を採用でき、前記記憶媒体は、Ｕディスク、移動ハードディスク、読み出し専用メモリ（ＲＯＭ、Read-Only Memory）、ディスク記憶装置、ＣＤ-ＲＯＭ、光記憶装置等を含むが、これらに限定されない。

【0072】

対応的に、本発明の実施例は、コンピュータ記憶媒体を更に提供し、コンピュータプログラムが記憶され、該コンピュータプログラムは、本発明の実施例による移動端末画像の自己適応表示方法を実行するように設定される。

【0073】

上記は本発明の好ましい実施例であるだけに過ぎず、本発明の保護範囲を制限するためのものではなく、本発明の趣旨と原則にある限り、行った任意の修正、同等な置き換え、改善等は、いずれも本発明の保護範囲に含まれるべきである。

【産業上の利用可能性】

【0074】

各実施例に記載の技術的手段を組合わせて、本発明は、移動端末の置き状態の変化（例えば平置き又は縦置き）に基づいて、移動端末が表示するマルチ画面のレイアウトと内容をリアルタイムで動的に調整し、移動端末を用いてビデオ通信を行うユーザの画面に対する快適感を向上させることができる。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】