特開 2024-105218 フォロワモードのビデオ動作

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024105218

(43)【公開日】2024-08-06

(54)【発明の名称】フォロワモードのビデオ動作

(51)【国際特許分類】

   G09G 5/00 20060101AFI20240730BHJP

   H04N 5/66 20060101ALI20240730BHJP

【ＦＩ】

G09G5/00 555D

G09G5/00 510V

G09G5/00 550B

H04N5/66 D

【審査請求】有

【請求項の数】20

【出願形態】ＯＬ

【外国語出願】

(21)【出願番号】P 2024037367

(22)【出願日】2024-03-11

(62)【分割の表示】P 2023516620の分割

【原出願日】2021-09-13

(31)【優先権主張番号】63/078,300

(32)【優先日】2020-09-14

(33)【優先権主張国・地域又は機関】US

(31)【優先権主張番号】17/148,512

(32)【優先日】2021-01-13

(33)【優先権主張国・地域又は機関】US

(71)【出願人】

【識別番号】503260918

【氏名又は名称】アップル インコーポレイテッド

【氏名又は名称原語表記】Ａｐｐｌｅ Ｉｎｃ．

【住所又は居所原語表記】Ｏｎｅ Ａｐｐｌｅ Ｐａｒｋ Ｗａｙ，Ｃｕｐｅｒｔｉｎｏ， Ｃａｌｉｆｏｒｎｉａ ９５０１４， Ｕ．Ｓ．Ａ．

(74)【代理人】

【識別番号】110003281

【氏名又は名称】弁理士法人大塚国際特許事務所

(72)【発明者】

【氏名】メナチェム， アッサフ

(72)【発明者】

【氏名】ホランド， ピーター エフ．

(72)【発明者】

【氏名】チェン， ユン‐チン

(57)【要約】      （修正有）

【課題】異なるデバイス間でクロック信号を同期させるための改善されたシステムおよび方法を提供する。
【解決手段】プロセッサによって、画像データ５０のフレームが垂直アクティブ部分５８とアイドル部分６０とを含むことができるように、画像データ５０のフレームを受信することを含み得る。垂直アクティブ部分５８は、第１の電子デバイスの第１のディスプレイによって１つ以上の画像を提示するためのデータを含み得る。また、第２の電子デバイスが第１のディスプレイとは別個であるように、画像データのフレームのアイドル部分６０の間に第２の電子デバイスから信号を受信することを含み得る。次いで、第２の電子デバイスから受信されている信号に応答して、画像データのフレームの処理を開始することを含み得る。
【選択図】図７

【特許請求の範囲】

【請求項1】

プロセッサによって、画像データのフレームを受信することと、ここで前記画像データのフレームはアクティブ部分およびアイドル部分を有し、前記アクティブ部分は第１の電子デバイスの第１のディスプレイによって１つ以上の画像を提示するためのデータを有し、
前記画像データのフレームの前記アイドル部分の間に、前記プロセッサによって第２の電子デバイスから信号を受信することと、ここで前記第２の電子デバイスは前記第１のディスプレイとは別個であり、
前記第２の電子デバイスから前記信号が受信されたことに応答して、前記プロセッサによって前記画像データのフレームを処理することと、
を有する、方法。

【請求項2】

時間が経過したか否かを判定することと、ここで前記時間の経過中には前記第２の電子デバイスから前記信号が受信されておらず、
前記時間が経過したことに応答して、前記画像データのフレームの処理を開始することと、
を有する、請求項１に記載の方法。

【請求項3】

前記時間が設定可能である、請求項２に記載の方法。

【請求項4】

前記時間が経過したことに応答して、ライン番号をメモリにログ記録することを有し、前記ライン番号は前記画像データのフレームのラインに対応する、請求項２に記載の方法。

【請求項5】

前記時間が経過した後に前記第２の電子デバイスから前記信号を受信することと、
前記時間が経過した後に前記第２の電子デバイスから前記信号が受信されたことに応答して、ライン番号をメモリにログ記録することと、を有し、前記ライン番号は、前記画像データのフレームのラインに対応する、請求項２に記載の方法。

【請求項6】

前記信号が前記第２の電子デバイスから受信されていないことに応答して、ライン番号をメモリにログ記録することを有し、前記ライン番号は前記画像データのフレームのラインに対応する、請求項１に記載の方法。

【請求項7】

前記信号がパルスを有する、請求項１から６のいずれか１項に記載の方法。

【請求項8】

前記画像データのフレームの前記アイドル部分が、前記画像データの後続のフレームの垂直フロントポーチ（ＶＦＰ）部分の直前にある、請求項１から６のいずれか１項に記載の方法。

【請求項9】

前記信号がトグルを有する、請求項１から６のいずれか１項に記載の方法。

【請求項10】

ディスプレイと、
画像処理回路と、を有する電子デバイスであって、
前記画像処理回路は、
画像データのフレームを受信し、ここで前記画像データのフレームはアクティブ部分およびアイドル部分を有し、前記アクティブ部分は第１の電子デバイスの第１のディスプレイによって１つ以上の画像を提示するためのデータを有し、
前記画像データのフレームの前記アイドル部分の間に、追加のディスプレイから信号を受信し、ここで前記追加のディスプレイは前記ディスプレイとは別個であり、
前記追加のディスプレイから前記信号が受信されたことに応答して、前記画像データのフレームを処理する、ように構成される、電子デバイス。

【請求項11】

前記画像処理回路は、前記ディスプレイおよび前記追加のディスプレイを用いて前記１つ以上の画像を提示するように構成される、請求項１０に記載の電子デバイス。

【請求項12】

前記ディスプレイは第１のクロックに関連付けられ、前記追加のディスプレイは第２のクロックに関連付けられ、前記信号は、前記ディスプレイおよび前記追加のディスプレイによって提示されている前記１つ以上の画像を同期させるように構成される、請求項１１に記載の電子デバイス。

【請求項13】

前記信号は、前記第１のクロックが前記第２のクロックに対してドリフトした場合に、前記ディスプレイおよび前記追加のディスプレイによって提示されている前記１つ以上の画像を同期させるように構成される、請求項１２に記載の電子デバイス。

【請求項14】

前記画像処理回路は、前記信号が前記追加のディスプレイから受信された後に、前記画像データのフレームの処理を開始するように構成される、請求項１３に記載の電子デバイス。

【請求項15】

１つ以上の動作を実行するように構成された画像処理回路であって、前記１つ以上の動作が、
画像データのフレームを受信することと、ここで前記画像データのフレームはアクティブ部分とアイドル部分とを有し、前記アクティブ部分は第１の電子デバイスの第１のディスプレイによって１つ以上の画像を提示するためのデータを有し、前記画像データのフレームは画像データの複数のラインを有し、
前記画像データのフレームの前記アイドル部分の間に、前記プロセッサによって第２の電子デバイスから信号を受信することと、ここで前記信号は前記複数のラインの第１のラインの間に受信され、前記第２の電子デバイスは前記第１のディスプレイとは別個であり、
前記第２の電子デバイスから前記信号が受信されたことに応答して、前記画像データのフレームの処理を、前記複数のラインの前記第１のラインの直後の第２のラインで開始することと、
を有する、画像処理回路。

【請求項16】

前記１つ以上の動作は、
期間が経過したかどうかを判定することと、ここで前記期間中には前記第２の電子デバイスから前記信号が受信されておらず、
前記期間が経過したことに応答して、前記複数のラインの予め定められたラインで前記画像データのフレームの処理を開始することと、
を有する、請求項１５に記載の画像処理回路。

【請求項17】

前記１つ以上の動作は、前記複数のラインの各ラインの先頭を追跡することを有する、請求項１６に記載の画像処理回路。

【請求項18】

前記１つ以上の動作が、前記信号が前記第２の電子デバイスから受信されていないことに応答して、ライン番号をメモリにログ記録することを有し、前記ライン番号は前記画像データのフレームのラインに対応する、請求項１５に記載の画像処理回路。

【請求項19】

前記１つ以上の画像は、前記第１のディスプレイおよび、前記第２の電子デバイスの第２のディスプレイによって提示される、請求項１５に記載の画像処理回路。

【請求項20】

前記画像処理回路は、前記第２の電子デバイスの第２のディスプレイから前記信号を受信するように構成される、請求項１５に記載の画像処理回路。

【発明の詳細な説明】

【技術分野】

【0001】

(関連出願の相互参照)
本出願は、２０２０年９月１４日出願の米国特許仮出願第６３／０７８，３００号の優先権および利益を主張し、その全体があらゆる目的のために参照により本明細書に組み込まれる。

【0002】

本開示は、概して、異なるディスプレイデバイス間の信号を使用して、電子デバイスにおいて異なるビデオ動作モードを利用することに関する。

【背景技術】

【0003】

この節では、後述しおよび／または請求される本技術の様々な態様に関連し得る様々な態様を読者に紹介する。本論考は、本開示の様々な態様の、より良好な理解を容易にするための背景技術を読者に提供する際に、助けとなるものと考えられる。したがって、これらの記述は、上述の観点から読まれるべきであり、先行技術の承認として読まれるべきではないことを理解されたい。

【0004】

統合型電子ディスプレイは、対応する画像処理回路との共通クロック信号を使用して動作し得る。しかしながら、外部ディスプレイを介した表示のために画像データを準備するとき、共通クロック信号および外部ディスプレイのためのクロック信号は、互いに対してドリフトし得る。したがって、異なるデバイス間でクロック信号を同期させるための改善されたシステムおよび方法が有用であり得る。

【発明の概要】

【0005】

本明細書に開示のある実施形態の要約を以下に記載する。これらの態様が、単にこれらのある実施形態の概要を読者に提供するために提示されていること、およびこれらの態様が、本開示の範囲を限定することは意図されていないことを理解されたい。実際に、本開示は、以下に記載されていない様々な態様を包含し得る。

【0006】

本開示は、概して電子ディスプレイに関し、より詳細には、２つの電子ディスプレイを使用して画像データを表示するために２つの電子デバイス間の調整を改善することに関する。上述したように、統合型電子ディスプレイは、電子デバイスの画像処理回路（例えば、ディスプレイパイプライン）との共通クロック信号に基づいて動作し得る。画像処理回路は、電子ディスプレイのための画像データを準備することができ、電子ディスプレイは、共通クロック信号に基づいて、画像データを表示することができる。しかしながら、外部ディスプレイは、同じ共通クロック信号を使用しない場合がある。すなわち、外部ディスプレイは、別個のクロック信号を使用して、外部ディスプレイを介した画像データの提示を調整することができる。ただし、画像処理回路が、それに接続された電子ディスプレイおよび外部ディスプレイに画像データを提供するために用いられるとき、２つのクロック信号間のドリフトによって、外部ディスプレイと電子デバイスに提供される画像データが同期しなくなる可能性がある。

【0007】

上記を考慮して、いくつかの実施形態では、電子デバイスの画像処理回路は、画像処理回路が外部ディスプレイのフォロワとして動作するように、外部ディスプレイ用の画像データを準備し得る。すなわち、外部ディスプレイは、画像処理回路のタイミングを調整または制御し得る。いくつかの実施形態では、画像処理回路は、アイドル状態に対応する画像データのフレームの期間または部分を含む画像データのフレームを受信し得る。画像処理回路は、次のフレームの処理を開始するためにアイドル状態の間に外部トリガ信号を待機することができ、それによって、画像処理回路および外部ディスプレイが確実に同期を保つ。

【図面の簡単な説明】

【0008】

本開示の様々な態様は、以下の詳細な説明を読み以下の図面を参照すると、より良好に理解され得る。

【0009】

【図1】本開示の一実施形態に係る、ハードウェアアクセラレータを含む、ディスプレイを備えた電子デバイスのブロック図である。

【0010】

【図2】本開示の一実施形態に係る、図１の電子デバイスの一例である。

【0011】

【図3】本開示の一実施形態に係る、図１の電子デバイスの別の例である。

【0012】

【図4】本開示の一実施形態に係る、図１の電子デバイスの別の例である。

【0013】

【図5】本開示の一実施形態に係る、図１の電子デバイスの別の例である。

【0014】

【図6】本開示の一実施形態に係る、画像データの異なるフレームの部分を表すブロック図である。

【0015】

【図7】本開示の一実施形態に係る、外部ディスプレイによって受信された信号に基づいて、画像処理回路を使用して、画像フレームデータの処理を調整する方法のフローチャートである。

【0016】

【図8】本開示の一実施形態に係る、画像データのフレームのタイミング図である。

【発明を実施するための形態】

【0017】

本開示の１つ以上のある特定の実施形態を以下に述べる。これらの述べる実施形態は、本明細書で開示されている技術の実施例に過ぎない。さらに、これらの実施形態の簡潔な説明を提供するために、本明細書に実際の実施態様の全ての特徴が示されるとは限らない。あらゆる工学的または設計プロジェクトにおけるように、あらゆるこのような実際の実装形態の開発において、実装形態ごとに変動し得るシステム関連およびビジネス関連の制約への準拠などの開発者の具体的な目標を達成するために、実装形態に特有の多数の決定がなされなければならないことを理解されたい。さらに、開発努力は複雑で時間がかかる可能性があるが、それでも、本開示の利益を有する当業者には、設計、製作、および製造の通常業務であり得ることを理解されたい。

【0018】

本開示の様々な実施形態の要素を導入するときに、冠詞「ａ」、「ａｎ」、および「ｔｈｅ」は、１つ以上の要素があることを意味することが意図されている。「含む（including）」および「有する（having）」という用語は、包括的であることが意図されており、列挙された要素以外に追加の要素があり得ることを意味する。さらに、本開示の「一実施形態（one embodiment）」、「実施形態（an embodiment）」、「実施形態（embodiments）」、および「いくつかの実施形態（some embodiments）」の参照は、列挙した特徴を組み込む追加の実施形態の存在を除外するように解釈されることを意図したものではないことを理解されたい。

【0019】

上述のように、電子デバイスの画像処理回路は、画像処理回路が外部ディスプレイのフォロワとして動作するように、外部ディスプレイ用の画像データを準備し得る。このようにして、外部ディスプレイは、画像処理回路のタイミングを制御し得る。外部ディスプレイのフォロワとして画像処理回路を使用することに関する追加の詳細は、図１～図８を参照して以下で説明する。

【0020】

はじめに、図１は、電子デバイス１０のブロック図を示す。電子デバイス１０は、コンピュータ、携帯電話、ポータブルメディアデバイス、ウェアラブルデバイス、タブレット、テレビ、仮想現実ヘッドセット、および車両ダッシュボードなどの任意の好適な電子デバイスであり得る。したがって、図１は特定の実装の一実施例に過ぎず、電子デバイス１０内に存在し得る構成要素の種類を例示することを意図するものであることに留意されたい。

【0021】

図示の実施形態では、電子デバイス１０は、電子ディスプレイ１２と、１つ以上の入力デバイス１４と、１つ以上の入出力（Ｉ／Ｏ）ポート１６と、１つ以上のプロセッサまたはプロセッサコアを有するプロセッサ１８と、ローカルメモリ２０と、メインメモリストレージデバイス２２と、ネットワークインタフェース２４と、電源２６とを備える。図１に記載する様々な構成要素は、ハードウェア要素（例えば、回路）、ソフトウェア要素（例えば、命令を記憶する有形的非一時的コンピュータ可読媒体）、またはハードウェア要素とソフトウェア要素の両方の組み合わせを含んでもよい。図示の様々な構成要素は、組み合わされてより数の少ない構成要素になされてもよく、または分離されて追加の構成要素になされてもよいことを留意されたい。例えば、ローカルメモリ２０およびメインメモリストレージデバイス２２は、単一の構成要素に含めることができる。

【0022】

プロセッサ１８は、ローカルメモリ２０および／またはメインメモリストレージデバイス２２に記憶された命令を実行して、画像データを生成するおよび／または送信することなどの動作を実行し得る。したがって、プロセッサ１８は、１つ以上のマイクロプロセッサ、１つ以上の特定用途向けプロセッサ（application specific processor、ＡＳＩＣ）、１つ以上のフィールドプログラマブルロジックアレイ（field programmable logic array、ＦＰＧＡ）、１つ以上のグラフィック処理ユニット（graphics processing unit、ＧＰＵ）などの１つ以上のプロセッサを含み得る。さらに、前述するように、プロセッサ１８は、実行可能命令に従ってそれぞれがデータを処理する１つ以上の別個の処理論理コアを含み得る。

【0023】

ローカルメモリ２０および／またはメインメモリストレージデバイス２２は、実行可能命令、並びにプロセッサ１８のコアによって処理されるべきデータを記憶し得る。したがって、ローカルメモリ２０および／またはメインメモリ記憶デバイス２２は、１つ以上の有形的非一時的コンピュータ可読媒体を含み得る。例えば、ローカルメモリ２０および／またはメインメモリストレージデバイス２２は、ランダムアクセスメモリ（random access memory、ＲＡＭ）、読み出し専用メモリ（read only memory、ＲＯＭ）、フラッシュメモリ、ハードドライブ、光ディスクなどの書き換え可能な不揮発性メモリを含み得る。

【0024】

ネットワークインタフェース２４は、ネットワーク接続を介して他の電子デバイスとデータを通信することを容易にし得る。例えば、ネットワークインタフェース２４（例えば、無線周波数システム）は、電子デバイス１０を、Ｂｌｕｅｔｏｏｔｈ（登録商標）ネットワークなどのパーソナルエリアネットワーク（personal area network、ＰＡＮ）、８０２．１１ｘ Ｗｉ－Ｆｉ（登録商標）ネットワークなどのローカルエリアネットワーク（local area network、ＬＡＮ）、および／または４Ｇ、ＬＴＥ、または５Ｇセルラネットワークなどの広域ネットワーク（wide area network、ＷＡＮ）に通信可能に結合することを可能にし得る。ネットワークインタフェース２４は、電子デバイス１０に接続されたネットワークを介して通信するように構成された１つ以上のアンテナを含む。電源２６は、充電式リチウムポリマー（lithium polymer、Ｌｉ－ｐｏｌｙ）バッテリおよび／または交流（ＡＣ）電力変換器などの任意の好適なエネルギ源を含んでもよい。

【0025】

Ｉ／Ｏポート１６は、電子デバイス１０がポート接続を使用して入力データおよび／または出力データを受信することを可能にし得る。例えば、ポータブルストレージデバイスをＩ／Ｏポート１６（例えば、ユニバーサルシリアルバス（Universal Serial Bus、ＵＳＢ））に接続し、それによって、プロセッサ１８がポータブルストレージデバイスとデータを通信することを可能にすることができる。Ｉ／Ｏポート１６は、電子デバイス１０から音声を出力する１つ以上のスピーカを含み得る。プロセッサ１８は、プライマリプロセッサ（例えば、中央処理装置）の能力を補うように構成された１つ以上のコプロセッサまたは他のマイクロプロセッサを含み得る。

【0026】

入力デバイス１４は、ユーザ入力を受信することにより、電子デバイス１０とのユーザ対話を容易にすることができる。例えば、入力デバイス１４は、１つ以上のボタン、キーボード、マウス、トラックパッド、および／または同様なものを含んでもよい。入力デバイス１４はまた、音声をキャプチャするために使用され得る１つ以上のマイクロフォンを含み得る。入力デバイス１４は、電子ディスプレイ１２内のタッチセンシング構成要素を含み得る。そのような実施形態では、タッチセンシング構成要素は、電子ディスプレイ１２の表面にタッチする物体の存在および／または位置を検出することにより、ユーザ入力を受け取ることができる。

【0027】

電子ディスプレイ１２は、１つ以上の表示画素を有するディスプレイパネルを含み得る。電子ディスプレイ１２は、表示画素からの発光を制御して、対応する画像データに少なくとも部分的に基づいて画像フレームを表示することにより、オペレーティングシステムのグラフィカルユーザインタフェース（graphical user interface、ＧＵＩ）、アプリケーションインタフェース、静止画像、または動画コンテンツなどの、情報の視覚表現を提示し得る。いくつかの実施形態では、電子ディスプレイ１２は、液晶ディスプレイ（liquid crystal display、ＬＣＤ）を用いたディスプレイ、有機発光ダイオード（organic light-emitting diode、ＯＬＥＤ）ディスプレイなどの自己発光型ディスプレイなどであり得る。

【0028】

電子ディスプレイ１２は、提示する画像データを画像処理回路２７を介して受信することができる。画像処理回路２７またはディスプレイパイプラインは、ディスプレイ１２が画像データを提示することを可能にするために、プロセッサ１８によって提供される画像データを処理する１つ以上の回路構成要素を含み得る。したがって、画像処理回路２７は、補正（例えば、ベイヤーフィルタの適用）、ノイズ低減、画像スケーリング、ガンマ補正、画像強調、色空間変換（例えば、ＲＧＢ、ＹＵＶ、またはＹＣｂＣｒなどのフォーマット間）、クロマサブサンプリング、フレームレート変換、画像圧縮／ビデオ圧縮（例えば、ＪＰＥＧ）、およびコンピュータデータ記憶／データ送信などの様々な動作を実行するための構成要素を含み得る。

【0029】

いくつかの実施形態において、電子デバイス１０は、外部ディスプレイ２８に通信可能に結合され得る。外部ディスプレイ２８は、モニタ、タブレット画面などの追加のディスプレイデバイスに対応し得る。加えて、外部ディスプレイ２８は、電子眼鏡、ハンドヘルドデバイス、または電子デバイス１０の外付けであっても電子デバイス１０と別個でもあり得、かつ画像データを提示することができる、任意の適切なディスプレイデバイスを含み得る。ディスプレイ１２および外部ディスプレイ２８はそれぞれ、それぞれのクロック回路によって提供されるそれぞれのクロック信号を使用して動作し得る。画像データがディスプレイ１２および外部ディスプレイ２８によって経時的に提示されるにつれて、これらの２つのクロック回路から受信されるクロック信号は、互いに対してドリフトする可能性がある。その結果、ディスプレイ１２および外部ディスプレイ２８上に描画される画像データは、非同期になる可能性がある。外部ディスプレイ２８および外部ディスプレイ１２を介した画像データの提示をより良好に同期させるために、画像処理回路２７は、画像データのフレームの時間の一部の間に外部ディスプレイ１２からフォロワゴー信号を受信し得る。すなわち、画像データの各フレームは、フォロワゴー信号が外部ディスプレイ２８から受信され得るアイドル部分を含み得る。フォロワゴー信号を受信したことに応答して、画像処理回路２７は、画像データのフレームの残りの部分を処理し、結果として得られた画像データをディスプレイ１２および外部ディスプレイ２８に提供して、２つのディスプレイが画像データをより同期して提示することができるようにすることができる。実際、フォロワゴー信号は、ディスプレイ１２が外部ディスプレイ２８を制御するために使用されるクロック信号に基づいて動作することを保証し、それによって、２つのディスプレイが同期していることを保証する。

【0030】

上述したように、電子デバイス１０は、任意の好適な電子デバイスであってもよい。図示目的で、好適な電子デバイス１０の一実施例、具体的にはハンドヘルドデバイス１０Ａを図２に示す。いくつかの実施形態では、ハンドヘルドデバイス１０Ａは、ポータブル電話機、メディアプレーヤ、パーソナルデータオーガナイザ、ハンドヘルドゲームプラットフォームおよび／または同様なものとすることができる。例えば、ハンドヘルドデバイス１０Ａは、アップル社から入手可能な任意のＩＰＨＯＮＥ（登録商標）モデルなどのスマートフォンとすることができる。

【0031】

ハンドヘルドデバイス１０Ａは、エンクロージャ２９（例えば、筐体）を含む。エンクロージャ２９は、内部構成要素を物理的破損から保護するおよび／または電磁干渉から遮蔽することができる。図示した実施形態では、電子ディスプレイ１２は、アイコン３２のアレイを有するグラフィカルユーザインタフェース（ＧＵＩ）３０を表示している。例として、アイコン３２が電子ディスプレイ１２の入力デバイス１４またはタッチセンシング構成要素のいずれかによって選択されると、対応するアプリケーションプログラムが起動し得る。

【0032】

入力装置１４は、エンクロージャ２９を貫通して延びていてもよい。前述のように、入力デバイス１４は、ユーザがハンドヘルドデバイス１０Ａと相互作用することを可能にし得る。例えば、入力デバイス１４は、ユーザが、音声を記録すること、ハンドヘルドデバイス１０Ａをアクティブ若しくは非アクティブにすること、ユーザインタフェースをホーム画面にナビゲーションすること、ユーザインタフェースをユーザが構成変更可能なアプリケーション画面にナビゲーションすること、音声認識機能をアクティブにすること、音量制御を提供すること、および／または振動モードと鳴動モードとの間でトグルすることを可能にし得る。Ｉ／Ｏポート１６もまた、エンクロージャ２９を貫通して延びていてもよい。いくつかの実施形態では、Ｉ／Ｏポート１６は、例えば、外部デバイスに接続するためのオーディオジャックを含み得る。前述したように、Ｉ／Ｏポート１６は、ハンドヘルドデバイス１０Ａから音を出力する１つ以上のスピーカを含み得る。

【0033】

好適な電子デバイス１０の別の実施例は、図３に示すタブレットデバイス１０Ｂである。例示のために、タブレットデバイス１０Ｂは、アップル社から入手可能な任意のＩＰＡＤ（登録商標）モデルとすることができる。好適な電子デバイス１０の更なる実施例、具体的にはコンピュータ１０Ｃを図４に示す。例示のために、コンピュータ１０Ｃは、アップル社から入手可能な任意のＭＡＣＢＯＯＫ（登録商標）またはＩＭＡＣ（登録商標）モデルであり得る。好適な電子デバイス１０の別の実施例、具体的にはウェアラブルデバイス１０Ｄを図５に示す。例示のために、ウェアラブルデバイス１０Ｄは、アップル社から入手可能な任意のＡＰＰＬＥ ＷＡＴＣＨ（登録商標）モデルであり得る。図示のように、タブレットデバイス１０Ｂ、コンピュータ１０Ｃ、およびウェアラブルデバイス１０Ｄもそれぞれ、電子ディスプレイ１２、入力デバイス１４、およびエンクロージャ２９を含む。

【0034】

図６は、本明細書で説明される実施形態に従って使用され得る画像データのフレーム部分を示すブロック図である。図６を参照すると、画像データ５０は、フレームＮ、Ｎ＋１、およびＮ＋２を含む。画像データ５０の各フレームは、垂直同期（ＶＳＹＮＣ）部分５２と、垂直バックポーチ（ＶＢＰ）部分５４と、垂直フロントポーチ（ＶＦＰ）部分５６と、垂直アクティブ（ＶＡＣＴＩＶＥ）部分５８とを含み得る。ＶＳＹＮＣ部分５２は、ディスプレイ１２上の垂直行の画像データを同期させる同期パルスに関する情報を含み得る。ＶＦＰ部分５６およびＶＢＰ部分５４は、アクティブエリア（例えば、ＶＡＣＴＩＶＥ部分５８）の間にディスプレイ１２によって見ることができる画像データ５０の部分が指定されるように、ＶＳＹＮＣ部分５２の間にバッファリング期間を提供し得る。次いで、ＶＡＣＴＩＶＥ部分５８は、ディスプレイ１２の一部である画素の行のための画像データを提供し得る。

【0035】

画像データ５０が、ディスプレイ１２および外部ディスプレイ２８上に画像を描画するために使用されているとき、外部ディスプレイ２８は、画像データ５０のアイドル部分６０の間にフォロワゴー信号を送信し得る。図６に示すように、アイドル部分６０は、ＶＡＣＴＩＶＥ部分５８の直後に生じる。いくつかの実施形態では、画像処理回路２７は、プロセッサ１８から画像データ５０を受信して、ディスプレイ１２によって表示される画像を処理して描画することができる。画像処理回路２７が、画像データ５０のアイドル部分６０の間に外部ディスプレイ２８からフォロワゴー信号を受信する場合、画像処理回路２７は、ＶＦＰ部分５６に進んで、画像データの次のフレームの処理を開始し得る。

【0036】

このことに留意すると、特定のアプリケーションは、ビデオタイミング動作が外部コンポーネント（例えば、外部ディスプレイ２８）に従うように、画像処理回路２７の動作を調整することを含み得る。したがって、アイドル部分６０は、画像処理回路２７のビデオタイミングが外部トリガに基づいて暗黙的に調整されることができるように、画像処理回路２７と外部ディスプレイ２８との間のビデオタイミング調整を容易にするために使用され得る。フォロワゴー信号に依存して画像データの次のフレームに進むことによって、画像処理回路２７は、異なる水晶から導出されたクロックで動作する２つのエンティティ間のドリフトを回避するようにそのビデオタイミングを適合させることができる。

【0037】

アイドル部分６０の間、画像処理回路２７のラインカウンタは、フォロワゴー信号が受信されない限り、通常通りに生成される水平タイミング信号を用いて、ライン粒度で増分され得る。フォロワゴー信号がアイドル部分６０の間に受信された場合、ラインカウンタは、ＶＦＰ部分５６に遷移する前に後続のライン境界期間を待機することができ、通常通りカウントを継続する。アイドルの持続時間を制御することによって、画像処理回路２７は、最大１ライン時間の粒度でターゲットタイミングを満たすようにフレーム時間を調整することができる。

【0038】

外部装置（例えば、外部ディスプレイ２８）は、有効な時間にフォロワゴー信号を発行することが期待される。画像処理回路２７がアイドル部分６０の外でフォロワゴー信号を受信した場合、画像処理回路２７は無視され、フォロワゴー信号の欠落に対する予期せぬイベントを示すために割り込みがアサートされ得る。フレーム内の最初のそのような発生に対応するライン番号は、画像処理回路２７によってデバッグ目的のためにログに記録される。

【0039】

フォロワゴー信号が設定可能な時間（例えば、最大アイドル期間）内に画像処理回路２７によって受信されない場合、画像処理回路２７は、アイドル時間が経過したという予期せぬイベントを示すために割込みがアサートされた状態で、後続フレームのＶＦＰ部分５６に遷移し得る。対応するライン番号は、デバッグのために画像処理回路２７によってログに記録される。

【0040】

上記を念頭に置いて、ＶＦＰ部分５６、ＶＳＹＮＣ部分５２、ＶＢＰ部分５４、およびＶＡＣＴＩＶＥ部分５８の間のライン割り込みは通常通りに挙動するが、画像処理回路２７は、アイドル部分６０の間にいかなるライン割り込みをも構成しない場合があることに留意されたい。いくつかの実施形態では、画像処理回路２７は、少なくとも１ラインの間、アイドル部分６０に留まることにより、外部ディスプレイ２８がフォロワゴー信号を送信するのに十分な時間を確保する。したがって、起動時に、画像処理回路２７は、アイドル部分６０で開始し、ＶＦＰ部分５６に遷移する前にフォロワゴー信号を待機し得る。

【0041】

いくつかの実施形態では、画像データのフレーム全体は、ＶＡＣＴＩＶＥ部分５８がライン数の第１の部分を構成し、アイドル部分６０がライン数の第２の部分を構成するように、特定の数のラインを含み得る。画像データのフレーム内の各ラインは、同一の持続時間を有する。したがって、画像処理回路２７は、それぞれの新しいラインの先頭を追跡し、フォロワゴー信号を受信すると、次のラインの先頭で画像データの新しいフレームを開始し得る。しかしながら、フォロワゴー信号が受信されない場合、画像処理回路２７は、代わりに、所定のまたは特定のライン番号の先頭で画像データの新しいフレームを開始し得る。すなわち、画像処理回路２７は、フォロワゴー信号が所定のライン番号までに受信されない場合、所定のまたは特定のライン番号の先頭で画像データの新しいフレームを開始し得る。

【0042】

図７は、画像処理回路２７が２つ以上のディスプレイデバイスの画像データ５０のタイミングを調整するために行うことができる方法７０のフローチャートを示す。方法７０は特定の順序で説明されるが、方法は任意の適切な順序で実行されてもよいことを理解されたい。加えて、方法７０は画像処理回路２７によって実行されるものとして記載されているが、任意の適切な処理回路が本明細書に記載の方法７０を実行してもよいことに留意されたい。

【0043】

次に図７を参照すると、ブロック７２において、画像処理回路２７は、画像データ５０を受信し、ラインカウンタを開始し、フレームの先頭においてラインカウンタをトグルすることができる。したがって、画像処理回路２７は、アイドル期間中に待機することによって画像データ５０の処理を開始し得る。例として、図８は、上述したように、フォロワゴー信号の受信と画像データ５０の処理の開始との間の関係を示すタイミング図１００を示す。

【0044】

図８を参照すると、時間ｔ０において、画像処理回路２７はラインカウンタを開始し、フォロワゴー信号を受信するまでラインカウンタのトグルを開始することができる。図７に戻って参照すると、ブロック７２において、画像処理回路２７は、フォロワゴー信号が外部デバイス（例えば、外部ディスプレイ２８）から受信されたかどうかを判定することができる。フォロワゴー信号が受信されていない場合、画像処理回路２７はブロック７６に進み、最大アイドル期間が経過したかどうかを判定することができる。最大アイドル期間はユーザによって構成可能であり得て、画像処理回路２７のクロックと外部デバイスのクロックとの間の予想されるドリフトなどに対応するために経時的に修正され得る。最大アイドル期間が経過していない場合、画像処理回路２７はブロック７４に戻り、フォロワゴー信号を監視し続けることができる。

【0045】

最大アイドル期間が経過した後、画像処理回路２７はブロック７８に進み、最大アイドル期間の終わりにライン番号をログに記録するために割り込みを生成し得る。ライン番号は、最大アイドル期間が、外部デバイスがフォロワゴー信号などを送信することを可能にするのに十分であるかどうかを判定するために、デバッグ目的で使用され得る。次いで、画像処理回路２７は、ブロック７９において、画像データ５０のフレームのＶＦＰ部分５６を開始することによって、画像データ５０の処理を開始し得る。

【0046】

次いで、画像処理回路２７は、ブロック８２に進み、フォロワゴー信号が最大アイドル期間後に受信されたかどうかを判定し得る。最大アイドル期間が経過した後にフォロワゴー信号が受信された場合、画像処理回路２７はブロック８４に進み、割り込みを生成し、予期しないフォロワ信号のライン番号をログに記録し得る。次に、ログに記録されたライン番号が、画像データ５０などの他のフレームの間に、アイドル部分６０のより良好な同期に使用され得る。次いで、画像処理回路２７は、ブロック８６において、画像データ５０のＶＡＣＴＩＶＥ部分５８が終了したかどうかを判定し、ＶＡＣＴＩＶＥ部分５８が終了した後にブロック８８に進み得る。ブロック８８において、画像処理回路２７は、ラインカウンタをトグルし、画像データのフレームのアイドル部分６０を開始し得る。例えば、タイミング図１００を参照すると、時間ｔ２において、ＶＡＣＴＩＶＥ部分５８が終了し、アイドル部分６０が開始する。ブロック８６において、画像処理回路２７が、ＶＡＣＴＩＶＥ部分５８の終わりに達していないと判定した場合、画像処理回路２７はブロック８２に戻ることができる。

【0047】

ブロック７４に戻って簡単に参照すると、画像処理回路２７は、フォロワゴー信号を受信した後、ブロック８０に進んでもよい。ブロック８０において、画像処理回路２７は、画像データ５０のフレームのＶＦＰ部分５６を開始することによって、画像データ５０の処理を開始し得る。例えば、図８のタイミング図１００の時間ｔ１において、フォロワゴー信号１０２は、画像処理回路２７によって受信されている可能性がある。いくつかの実施形態では、フォロワゴー信号１０２はパルスであり得、パルスの終了によって、画像処理回路２７はブロック８０に進むことができる。しかしながら、他の実施形態では、画像処理回路２７は、フォロワゴー信号１０２の立ち上がりエッジで、またはフォロワゴー信号１０２の受信に関連する任意の他の適切な時点で、ブロック８０に進み得ることに留意されたい。

【0048】

ＶＦＰ部分５６の間に画像データのフレームの処理を開始した後、画像処理回路２７はブロック８６に進み、画像データ５０のＶＡＣＴＩＶＥ部分５８が終了したかどうかを判定し得る。上述したように、画像処理回路２７は、ＶＡＣＴＩＶＥ部分５８が終了したか否かに応じて、ブロック８８に進むか、ブロック８２に戻ることができる。

【0049】

上記の具体的な実施形態は、例として示されており、これらの実施形態は、様々な修正形態および代替形態が可能であり得ることを理解されたい。特許請求の範囲は、開示の特定の形態に限定されることは意図されておらず、むしろ、本開示の本旨および範疇内の全ての修正形態、均等物、および代替形態を包含することが意図されていることをさらに理解されたい。

【0050】

本明細書に提示されており特許請求されている技法は、本技術分野を実証可能に改善する実用的な性質の有形物（material object）および実際の例に参照および適用され、よって、抽象的な、無形の、または純粋に理論的なものではない。さらに、本明細書の最後に添付された特許請求の範囲のいずれかが、「～［機能］を［実行］する手段」または「～［機能］を［実行］するステップ」として示された１つ以上の要素を含む場合、そのような要素が、米国特許法第１１２条（ｆ）に従って解釈されることになることを意図している。しかし、任意の他の方法で示された要素を含む特許請求の範囲のいずれに関しても、そのような要素は、米国特許法第１１２条（ｆ）に従って解釈されることにならないことを意図している。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【手続補正書】

【提出日】2024-05-13

【手続補正1】

【補正対象書類名】特許請求の範囲

【補正対象項目名】全文

【補正方法】変更

【補正の内容】

【特許請求の範囲】

【請求項1】

プロセッサによって、画像データの第１のフレームを受信することと、ここで画像データの前記第１のフレームは複数のラインと、アクティブ部分と、アイドル部分とを有し、前記アクティブ部分は第１の電子デバイスの第１のディスプレイによって１つ以上の画像を提示するためのデータを有し、前記アイドル部分は、前記プロセッサが、画像データの第２のフレームを処理して第２の電子デバイスから信号を受信する前に待機する時間に対応し、
前記時間の経過後に、画像データの前記第１のフレームの後の、画像データの前記第２のフレームを前記プロセッサによって処理することと、ここで前記第２の電子デバイスは前記第１のディスプレイとは別個であり、
前記時間が経過し、前記第２の電子デバイスから前記時間内に前記信号が受信されていないことに応答して、前記時間を調整することと、を有する、方法。

【請求項2】

前記第２の電子デバイスから前記時間内に前記信号が受信されていない場合、前記プロセッサによって、前記複数のラインのうち、前記時間の経過に対応する１つのライン番号をデバッグのためにメモリにログ記録することをさらに有する、請求項１に記載の方法。

【請求項3】

前記時間の経過後に前記プロセッサによって前記信号を受信することと、
前記プロセッサによって、前記複数のラインのうち、前記信号の受信に対応する１つのライン番号をデバッグのためにメモリにログ記録することと、をさらに有する、請求項１に記載の方法。

【請求項4】

前記信号を受信したことに応答して割り込みを発生することをさらに有する、請求項３に記載の方法。

【請求項5】

前記時間が前記１つのライン番号に基づいて調整される、請求項３に記載の方法。

【請求項6】

前記アクティブ部分に関連付けられた追加時間の経過後、前記複数のラインの１つのライン番号を増加させることをさらに有する、請求項１に記載の方法。

【請求項7】

前記信号がパルスを有する、請求項１に記載の方法。

【請求項8】

画像データの前記第１のフレームの前記アイドル部分が、前記画像データの前記第２のフレームの垂直フロントポーチ（ＶＦＰ）部分の直前にある、請求項１に記載の方法。

【請求項9】

前記信号が、第１の電圧から第２の電圧への第１の遷移と、前記第２の電圧から前記第１の電圧への第２の遷移とを有する、請求項１に記載の方法。

【請求項10】

ディスプレイと、
画像処理回路と、を有する電子デバイスであって、
前記画像処理回路は、
画像データのフレームを受信し、ここで画像データの前記フレームは複数のラインと、アクティブ部分と、アイドル部分とを有し、前記アクティブ部分は前記ディスプレイによって１つ以上の画像を提示するためのデータを有し、前記アイドル部分は、前記画像処理回路が、画像データの第２のフレームを処理して第２の電子デバイスから信号を受信する前に待機する時間に対応し、
前記アイドル部分が終了し、前記時間内に前記信号が受信されていないことに応答して、画像データの追加のフレームの処理を開始し、ここで前記ディスプレイは第１のクロックに関連付けられ、追加のディスプレイは第２のクロックに関連付けられており、
前記アイドル部分が終了し、前記時間内に前記信号が受信されていないことに応答して、前記時間を調整する、ように構成される、電子デバイス。

【請求項11】

前記信号は、前記画像処理回路に、前記ディスプレイおよび前記追加のディスプレイによって画像データの前記追加のフレームの１つ以上の追加画像を同期して提示させるように構成される、請求項１０に記載の電子デバイス。

【請求項12】

前記画像処理回路が、前記第２の電子デバイスから前記時間内に前記信号が受信されていない場合、前記複数のラインのうち、前記時間の経過に対応する１つのライン番号をデバッグのためにメモリにログ記録するようにさらに構成される、請求項１０に記載の電子デバイス。

【請求項13】

前記画像処理回路は、前記時間を前記１つのライン番号に基づいて調整するように構成される、請求項１２に記載の電子デバイス。

【請求項14】

前記画像処理回路は、前記時間を前記アクティブ部分の間に受信した前記信号に基づいて調整するように構成される、請求項１０に記載の電子デバイス。

【請求項15】

画像処理回路であって、
画像データの第１のフレームを受信することと、ここで画像データの前記第１のフレームは複数のラインと、アクティブ部分と、アイドル部分とを有し、前記アクティブ部分は第１の電子デバイスの第１のディスプレイによって１つ以上の画像を提示するためのデータを有し、前記アイドル部分は、前記画像処理回路が、画像データの第２のフレームを処理して第２の電子デバイスから信号を受信する前に待機する時間に対応し、前記第２の電子デバイスは前記第１のディスプレイとは別個であり、
前記時間の経過後に、画像データの前記第１のフレームの後の、画像データの前記第２のフレームの処理を開始することと、
前記第２の電子デバイスから前記時間内に前記信号が受信されていないことに応答して、前記時間の長さを調整することと、を含む１つ以上の動作を実行するように構成された画像処理回路。

【請求項16】

前記１つ以上の動作が、
前記時間が経過したことを判定することと、ここで前記信号は前記時間内に前記第２の電子デバイスから受信されておらず、
前記時間が経過し、前記時間内に前記信号が受信されていないことに応答して、画像データの追加のフレームの処理を前記複数のラインの所定のラインで開始することと、
をさらに含む、請求項１５に記載の画像処理回路。

【請求項17】

前記１つ以上の動作が、前記複数のラインの各ラインの先頭を追跡することをさらに含む、請求項１５に記載の画像処理回路。

【請求項18】

前記１つ以上の動作が、前記時間内に前記信号が前記第２の電子デバイスから受信されていない場合に、前記複数のラインのうち、前記時間の経過に対応する１つのライン番号をデバッグのためにメモリにログ記録することをさらに含む、請求項１５に記載の画像処理回路。

【請求項19】

前記１つ以上の動作が、
前記時間の経過後に前記信号を受信することと、
前記複数のラインのうち、前記信号の受信に対応する１つのライン番号をデバッグのためにメモリにログ記録することと、をさらに含む、請求項１５に記載の画像処理回路。

【請求項20】

前記１つ以上の動作が、前記１つのライン番号に基づいて前記時間の前記長さを調整することをさらに含む、請求項１９に記載の画像処理回路。

【外国語明細書】