特開 2024-8850 コンテンツの正確に的を絞ったマイクロエンコーディング

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024008850

(43)【公開日】2024-01-19

(54)【発明の名称】コンテンツの正確に的を絞ったマイクロエンコーディング

(51)【国際特許分類】

   H04N 21/2343 20110101AFI20240112BHJP

   H04N 21/236 20110101ALI20240112BHJP

【ＦＩ】

H04N21/2343

H04N21/236

【審査請求】有

【請求項の数】20

【出願形態】ＯＬ

【外国語出願】

(21)【出願番号】P 2023099111

(22)【出願日】2023-06-16

(31)【優先権主張番号】17/861,063

(32)【優先日】2022-07-08

(33)【優先権主張国・地域又は機関】US

(71)【出願人】

【識別番号】504399716

【氏名又は名称】ディズニー エンタープライゼス インコーポレイテッド

(74)【代理人】

【識別番号】100147485

【弁理士】

【氏名又は名称】杉村 憲司

(74)【代理人】

【識別番号】230118913

【弁護士】

【氏名又は名称】杉村 光嗣

(74)【代理人】

【識別番号】100169823

【弁理士】

【氏名又は名称】吉澤 雄郎

(72)【発明者】

【氏名】スコット ラブロージー

(72)【発明者】

【氏名】ウィリアム ビー メイ ジュニア

【テーマコード（参考）】

5C164

【Ｆターム（参考）】

5C164PA31

5C164SA32S

5C164SB02P

5C164SB11P

(57)【要約】      （修正有）

【課題】正確に的を絞ってコンテンツを再符号化するシステム及び方法を提供する。
【解決手段】方法は、ソフトウェアコードを実行して、コンテンツ・セグメントの列を有するコンテンツ及びこの列内の位置を識別するマーカーデータを受信し、コンテンツ及びマーカーデータを用いて、上記位置を含むコンテンツ・セグメントのセグメント境界を識別し、上記位置及びセグメント境界を用いて、上記位置がセグメント境界のうちの１つから所定間隔内に位置するか否かを判定し、上記列内のサブセクションを再符号化し、新たなセグメント境界を上記位置に生成する。上記位置が所定間隔内に位置しない場合、上記サブセクションは、上記位置を含むコンテンツ・セグメントを含み、上記位置が所定間隔内に位置する場合、上記サブセクションは、上記位置を含むコンテンツ・セグメント及び上記位置を含むコンテンツ・セグメントに隣接するコンテンツ・セグメントを含む。
【選択図】図１

【特許請求の範囲】

【請求項1】

処理ハードウェア、及びソフトウェアコードを記憶するシステムメモリを有する計算プラットフォームを具えたシステムであって、
前記処理ハードウェアは、前記ソフトウェアコードを実行して、
コンテンツ・セグメントの列を含むコンテンツ、及び該コンテンツ用のマーカーデータを受信し、該マーカーデータは前記列内の位置を識別し、
前記コンテンツ及び前記マーカーデータを用いて、前記識別される位置を含む前記コンテンツ・セグメントのセグメント境界を識別し、
前記位置及び前記セグメント境界を用いて、前記位置が、前記セグメント境界のうちの１つから所定間隔内に位置するか否かを判定し、
前記判定に基づいて、前記列内のサブセクションを再符号化して、新たなセグメント境界を前記位置に生成するように構成され、
前記位置が、前記セグメント境界のうちの１つから前記所定間隔内に位置しないものと判定された際に、前記列内の前記サブセクションが、前記位置を含む前記コンテンツ・セグメントを含み、前記位置が、前記セグメント境界のうちの１つから前記所定間隔内に位置するものと判定された際に、前記列内の前記サブセクションが、前記位置を含む前記コンテンツ・セグメント、及び前記位置を含む前記コンテンツ・セグメントに隣接する前記コンテンツ・セグメントを含むシステム。

【請求項2】

前記処理ハードウェアが、前記ソフトウェアコードを実行して、
前記列内の前記再符号化されたサブセクションを、前記位置を含む前記コンテンツ・セグメントを含む前記列内の前記サブセクションの置き換えとしてパッケージ化するように更に構成されている、請求項１に記載のシステム。

【請求項3】

前記処理ハードウェアが、前記ソフトウェアコードを実行して、
前記再符号化の前に、前記コンテンツに基づいて、前記再符号化用に最適な前記列内の前記サブセクションを決定するように更に構成され、前記最適なサブセクションは、前記位置を含む前記コンテンツ・セグメントに加えて複数の前記コンテンツ・セグメントを含む、請求項１に記載のシステム。

【請求項4】

前記複数のコンテンツ・セグメントの少なくとも１つが、前記位置を含む前記コンテンツ・セグメントに先行し、あるいは前記位置を含む前記コンテンツ・セグメントに後続する、請求項３に記載のシステム。

【請求項5】

前記位置を含む前記コンテンツ・セグメントが、コンテンツ・メタデータを含み、前記処理ハードウェアが、前記ソフトウェアコードを実行して、
前記新たなセグメント境界の位置に基づいて、前記コンテンツ・メタデータを、前記新たなセグメント境界を境界とする前記コンテンツ・セグメント間で区分するように更に構成されている、請求項１に記載のシステム。

【請求項6】

前記処理ハードウェアが、前記ソフトウェアコードを実行して、前記列内の前記再符号化されたサブセクション、及び前記区分したコンテンツ・メタデータを、前記位置を含む前記コンテンツ・セグメントを含む前記列内の前記サブセクションの置き換えとしてパッケージ化するように更に構成されている、請求項５に記載のシステム。

【請求項7】

前記処理ハードウェアが、前記ソフトウェアコードを実行して、
前記再符号化に基づいて、前記コンテンツ用のプレイリストを更新するように更に構成されている、請求項１に記載のシステム。

【請求項8】

前記コンテンツが適応ビットレート（ＡＢＲ）のコンテンツを含む、請求項１に記載のシステム。

【請求項9】

前記マーカーデータによって識別される前記列内の前記位置が、インタースティシャル・コンテンツを前記コンテンツ・セグメントの列内に挿入するための挿入ポイントを含む、請求項１に記載のシステム。

【請求項10】

前記位置を含む前記コンテンツ・セグメントを含む、前記列内の前記サブセクションが、前記列内の前記再符号化されたサブセクションに含まれる前記コンテンツ・セグメントよりも少数の、少なくとも１つの前記コンテンツ・セグメントを含む、請求項１に記載のシステム。

【請求項11】

処理ハードウェア、及びソフトウェアコードを記憶するシステムメモリを有する計算プラットフォームを具えたシステムが使用する方法であって、
前記処理ハードウェアが前記ソフトウェアコードを実行することによって、コンテンツ・セグメントの列を含むコンテンツ、及び該コンテンツ用のマーカーデータを受信するステップであって、該マーカーデータは前記列内の位置を識別するステップと、
前記処理ハードウェアが前記ソフトウェアコードを実行することによって、前記コンテンツ及び前記マーカーデータを用いて、前記識別される位置を含む前記コンテンツ・セグメントのセグメント境界を識別するステップと、
前記処理ハードウェアが前記ソフトウェアコードを実行することによって、前記位置及び前記セグメント境界を用いて、前記位置が、前記セグメント境界のうちの１つから所定間隔内に位置するか否かを判定するステップと、
前記処理ハードウェアが前記ソフトウェアコードを実行することによって、前記判定に基づいて、前記列内のサブセクションを再符号化して、新たなセグメント境界を前記位置に生成するステップとを含み、
前記位置が、前記セグメント境界のうちの１つから前記所定間隔内に位置しないものと判定された際に、前記列内の前記サブセクションが、前記位置を含む前記コンテンツ・セグメントを含み、前記位置が、前記セグメント境界のうちの１つから前記所定間隔内に位置するものと判定された際に、前記列内の前記サブセクションが、前記位置を含む前記コンテンツ・セグメント、及び前記位置を含む前記コンテンツ・セグメントに隣接する前記コンテンツ・セグメントを含む方法。

【請求項12】

前記処理ハードウェアが前記ソフトウェアコードを実行することによって、前記列内の前記再符号化されたサブセクションを、前記位置を含む前記コンテンツ・セグメントを含む前記列内の前記サブセクションの置き換えとしてパッケージ化するステップを更に含む、請求項１１に記載の方法。

【請求項13】

前記再符号化の前に、前記処理ハードウェアが前記ソフトウェアコードを実行することによって、前記コンテンツに基づいて、前記再符号化用に最適な前記列内の前記サブセクションを決定するステップを更に含み、前記最適なサブセクションは、前記位置を含む前記コンテンツ・セグメントに加えて複数の前記コンテンツ・セグメントを含む、請求項１１に記載の方法。

【請求項14】

前記複数のコンテンツ・セグメントの少なくとも１つが、前記位置を含む前記コンテンツ・セグメントに先行し、あるいは前記位置を含む前記コンテンツ・セグメントに後続する、請求項１３に記載の方法。

【請求項15】

前記位置を含む前記コンテンツ・セグメントが、コンテンツ・メタデータを含み、前記方法が、
前記処理ハードウェアが前記ソフトウェアコードを実行することによって、前記新たなセグメント境界の位置に基づいて、前記コンテンツ・メタデータを、前記新たなセグメント境界を境界とする前記コンテンツ・セグメント間で区分するステップを更に含む、請求項１１に記載の方法。

【請求項16】

前記処理ハードウェアが前記ソフトウェアコードを実行することによって、前記列内の前記再符号化されたサブセクション、及び前記区分したコンテンツ・メタデータを、前記位置を含む前記コンテンツ・セグメントを含む前記列内の前記サブセクションの置き換えとしてパッケージ化する、請求項１５に記載の方法。

【請求項17】

前記処理ハードウェアが前記ソフトウェアコードを実行することによって、前記再符号化に基づいて、前記コンテンツ用のプレイリストを更新するステップを更に含む、請求項１１に記載の方法。

【請求項18】

前記コンテンツが適応ビットレート（ＡＢＲ）のコンテンツを含む、請求項１１に記載の方法。

【請求項19】

前記マーカーデータによって識別される前記列内の前記位置が、インタースティシャル・コンテンツを前記コンテンツ・セグメントの列内に挿入するための挿入ポイントを含む、請求項１１に記載の方法。

【請求項20】

前記位置を含む前記コンテンツ・セグメントを含む、前記列内の前記サブセクションが、前記列内の前記再符号化されたサブセクションに含まれる前記コンテンツ・セグメントよりも少数の、少なくとも１つの前記コンテンツ・セグメントを含む、請求項１１に記載の方法。

【発明の詳細な説明】

【技術分野】

【0001】

背景
コンテンツ媒体としてのそのほぼ普遍的な人気により、これまで以上のオーディオ－ビデオ（ＡＶ：audio-video：音響映像）コンテンツが制作されており、消費者にとって利用可能になっている。更に、ストリーミング（ストリーム配信）プラットフォームがＡＶコンテンツ用のますます重要な配信ハブになっているので、変化しやすいネットワーク状態、及びストリーミング・コンテンツを受信する多種多様な消費者の装置間のデータ処理能力の差に起因して、調整可能ビットレート（ＡＢＲ：adjustable bit-rate）のＡＶコンテンツも、ますます重要になっている。その結果、ＡＢＲコンテンツを含むＡＶコンテンツを追加することができる効率、あるいは強化されたポストプロダクション（撮影後の作業、追加制作物）が、そのコンテンツのプロデューサ（制作者）、所有者、または配信者にとってますます重要になっている。

【背景技術】

【0002】

例として、一部の使用事例では、例えば広告のようなインタースティシャル（すき間）コンテンツの追加により、ＡＶコンテンツ、ポストプロダクションを補充することが有利であるか望ましいことがある。ＡＶコンテンツが元々インタースティシャル・コンテンツ用に事前に定められた挿入ポイントなしに制作された場合、そのコンテンツにポストプロダクションを導入することは、そのコンテンツを再生中に視聴する消費者にとって不快な、あるいは混乱する体験を生じさせ得る。例えば、ＡＶコンテンツ中に深く考えずに挿入されている広告は、途中のシーン、更には途中のショット（場面）に見え、これにより消費者の視聴体験を目障り耳障りな感じでぶち壊しにすることがある。視聴者のぶち壊し感及び美的な意味での不快感を回避してインタースティシャル・コンテンツを追加する従来の方法は、コンテンツを丸ごと再符号化することであり、今度は、広告または他のインタースティシャル・コンテンツ用のセグメント境界を調整するに当たり用いる接合ポイントを考慮に入れる。しかし、こうした従来の方法は、コンテンツを再符号化するのに必要な計算時間及び品質管理（ＱＣ：quality control）審査の両方の意味で、不所望なほど、一部の例では非実用的なほど高価である。

【図面の簡単な説明】

【0003】

【図1】１つの実現による、正確に的を絞ってコンテンツをマイクロエンコーディングする例示的システムの図である。

【図2A】１つの実現による、インタースティシャル・コンテンツ用の挿入ポイントが占有することができるコンテンツ・セグメントの４つの代替領域を表す例示的な図である。

【図2B】１つの実現による、図２Ａに示す代替領域のうちの３つの各々について、正確に的を絞ってコンテンツをマイクロエンコーディングするためのそれぞれの方策を表す図である。

【図2C】１つの実現による、代案の使用事例用に、正確に的を絞ってコンテンツをマイクロエンコーディングするための方策を示す例示的な図である。

【図3】１つの実現による、正確に的を絞ってコンテンツをマイクロエンコーディングするより詳細な例を示す図である。

【図4A】１つの実現による、正確に的を絞ってコンテンツをマイクロエンコーディングする例示的方法の概略を示すフローチャートである。

【図4B】１つの実現による、図４Ａに概略を示す方法を拡張するための例示的動作を記述するフローチャートである。

【発明を実施するための形態】

【0004】

詳細な説明
以下の説明は、本発明の実現に関連する具体的情報を含む。本発明は、本明細書中に具体的に説明する方法とは異なる方法で実現することができることは、当業者の認識する所である。本願中の図面、及びこれらの図面に伴う詳細な説明は、好適な実現に指向したものに過ぎない。特に断りのない限り、図面間で同様の、または対応する要素は、同様の、または対応する参照番号で示すことがある。更に、本願中の図面及び図示は一般に原寸に比例せず、実際の相対的寸法に対応することを意図していない。

【0005】

上述したように、オーディオ－ビデオ（ＡＶ）コンテンツが元々インタースティシャル・コンテンツ用に事前に定められた挿入ポイントなしに制作された場合、そのコンテンツにポストプロダクションを導入することは、そのコンテンツを再生中に視聴する諸費者にとって不快な、あるいは混乱する体験を生じさせ得る。例えば、ＡＶコンテンツ中に深く考えずに挿入されている広告の形態のインタースティシャル・コンテンツは、途中のシーン、更には途中のショット（場面）に見え、これにより消費者の視聴体験を目障り耳障りな感じでぶち壊しにすることがある。視聴者のぶち壊し感及び美的な意味での不快感を回避してインタースティシャル・コンテンツを追加する従来の方法は、コンテンツを丸ごと再符号化することであり、今度は、広告または他のインタースティシャル・コンテンツ用のセグメント境界を調整するに当たり用いる接合ポイントを考慮に入れる。しかし、これも上述したように、こうした従来の方法は、コンテンツを再符号化するのに必要な計算時間及び品質管理（ＱＣ）審査の両方の意味で、不所望なほど、一部の場合には非実用的なほど高価である。

【0006】

本願は、正確に的を絞ってコンテンツをマイクロエンコーディングするシステム及び方法を開示する。なお、本願中に定義するように、「マイクロエンコーディング」という表現は、元のコンテンツの創作意図の美的意味での完全性に悪影響を与えずに、例えば広告のような新たなインタースティシャル・コンテンツの導入を可能にするための、以前にトランスコードされているコンテンツの１つ以上のセクション、但しコンテンツの全体よりは小さいセクションの選択的再符号化を参照する。本願中に開示する正確に的を絞ったマイクロエンコーディングの解決策は、新たなコンテンツ・セグメントの境界位置、既存のコンテンツ・セグメント境界、最小及び最大のコンテンツ・セグメント継続時間に対する制約、オーディオまたはビデオの主観的不規則性が再符号化によって生成される可能性、及び元のメタデータの保存、並びにコンテンツ・プレイリストを入れ替える変更の必要性を有利に考慮することによって、以前にはセグメント境界が存在しなかった所への新たなセグメント境界の作成を可能にする。それに加えて、本発明の解決策は、再符号化するために必要な時間、並びに検証に当たり必要なＱＣ時間を大幅に低減しつつ、上述した最新技術を進歩させる、というのは正確に的を絞った微小領域のみを再符号化するからである。更に、本発明の正確に的を絞ったマイクロエンコーディングの解決策は、自動化された、あるいは実質的に自動化されたシステム及び方法を用いて実現することができる。

【0007】

本願中に定義するように、「自動化」、「自動化された」、及び「自動化する」は、システム管理者のようなユーザの関与を必要としないシステム及びプロセスを参照する。例えば、一部の実現では、人間の編集者またはＱＣ技術者が、本明細書中に開示するシステム及び方法の性能を再検討することがあるが、こうした人間の関与は任意である。従って、一部の実現では、本願中に記載するプロセスを、開示するシステムのハードウェア処理構成要素の制御下で実行することができる。

【0008】

また、本願中に定義するように、「コンテンツ」は、ＡＶコンテンツの多様な異なる種類及びジャンル、並びにオーディオ（音声）を伴わないビデオ（映像）、またはビデオを伴わないオーディオを参照し得る。ＡＶコンテンツの具体例は、映画の形態の調整可能ビットレート（ＡＢＲ）コンテンツ、ＴＶ（television：テレビジョン）のエピソードまたはシリーズ（連続物）、ビデオゲーム、及びスポーツイベントを含む。それに加えて、あるいはその代わりに、一部の実現では、「コンテンツ」を、例えば、人物、架空のキャラクター、場所、物体、及びブランド及びロゴのような識別子のデジタル表現とすること、あるいは「コンテンツ」がこうしたデジタル表現を含むことができ、こうしたデジタル表現は、仮想現実感（ＶＲ：virtual reality）、拡張現実感（ＡＲ：augmented reality）、または複合現実感（ＭＲ：mixed reality）環境に存在する。更に、このコンテンツは、人物の身元、ユーザの履歴、資格、所有権、支払い、等のようなデータの連続性を提供しつつ、任意数のユーザが同期して持続的に体験することができる仮想世界を表すことができる。なお、本願が開示する概念は、従来型のＡＶと、対話型ビデオのような完全没入型のＶＲ／ＡＲ／ＭＲ体験との混成であるコンテンツに適用することもできる。

【0009】

図１に、１つの実現による、正確に的を絞ってコンテンツをマイクロエンコーディングする例示的システムの図を示す。システム１００は、処理ハードウェア１０４、及びコンピュータ可読の非一時的記憶媒体として実現されるシステムメモリ１０６を有する計算プラットフォーム１０２を含む。図１に示すように、一部の実現によれば、システムメモリ１０６は、マイクロエンコーディング・ソフトウェアコード１１０を記憶し、コンテンツ・データベース１０８を任意で記憶する。

【0010】

図１に更に示すように、システム１００は、トランスコードされたコンテンツ１３０（以下「コンテンツ１３０」）及びコンテンツ１３０用のマーカーデータ１２６を提供するコンテンツ源１１６、通信ネットワーク１１２、及びディスプレイ１２２を含むユーザシステム１２０を利用するユーザ１２４を含む使用環境内で実現することができる。それに加えて、図１は、コンテンツ源１１６及びユーザシステム１２０を、通信ネットワーク１１２経由でシステム１００と通信結合する通信リンク１１４を示す。また図１には、コンテンツ１３０に対応し、マイクロエンコーディング・ソフトウェアコード１１０によって提供される再符号化されたコンテンツ１５０も示す。

【0011】

なお、システム１００は、コンテンツ１３０を、コンテンツ源１１６から通信ネットワーク１１２及びネットワーク通信リンク１１４経由で受信し、一部の実現では、コンテンツ源１１６が、計算プラットフォーム１０２と統合されたコンテンツ源の形をとることができ、あるいは、破線の通信リンク１１８で示すようにシステム１００と直接通信することができる。

【0012】

なお、図１に示すシステム１００の表現に関しては、マイクロエンコーディング・ソフトウェアコード１１０及び任意のコンテンツ・データベース１０８を、概念的明確性のためにシステムメモリ１０６に記憶されるものとして表しているが、より一般的には、システムメモリ１０６は、あらゆるコンピュータ可読の非一時的記憶媒体の形をとることができる。本願中に用いる「コンピュータ可読の非一時的記憶媒体」という表現は、計算プラットフォーム１０２の処理ハードウェア１０４のような計算プラットフォームの処理ハードウェアに命令を提供する、搬送波または他の一時的信号を除いたあらゆる媒体を参照する。従って、コンピュータ可読の非一時的記憶媒体は、例えば揮発性媒体及び不揮発性媒体のような各種の媒体に相当することができる。揮発性媒体は、ダイナミック・ランダムアクセスメモリ（ダイナミックＲＡＭ：dynamic random access memory）のようなダイナミックメモリを含むことができるのに対し、不揮発性メモリは、光、磁気、または静電記憶デバイスを含むことができる。コンピュータ可読の非一時的記憶媒体に共通の形態は、例えば、光ディスク、ＲＡＭ、プログラマブル・リードオンリー（読出し専用）メモリ（ＰＲＯＭ：programmable read-only memory）、消去可能ＰＲＯＭ（ＥＰＲＯＭ：erasable PROM）、及びフラッシュメモリを含む。

【0013】

更に、図１は、マイクロエンコーディング・ソフトウェアコード１１０及び任意のコンテンツ・データベース１０８を、システムメモリ１０６内に互いに共同設置（同一場所に設置）されているように表しているが、この表現も概念的明確性の一助として提供するに過ぎない。より一般的には、システム１００は、例えばコンピュータ・サーバーのような１つ以上の計算プラットフォームを含むことができ、これらの計算プラットフォームは、共同設置することができ、あるいは、例えばクラウドベースのシステムのような相互作用可能なようにリンクされた、但し分散型のシステムを形成することができる。その結果、処理ハードウェア１０４及びシステムメモリ１０６は、システム１００内の分散プロセッサ及びメモリリソースに相当することができる。従って、マイクロエンコーディング・ソフトウェアコード１１０及び任意のコンテンツ・データベース１０８は、システム１００の分散メモリリソース内に、互いに対してリモート（遠隔的）に記憶することができることは明らかである。

【0014】

処理ハードウェア１０４は、例えば１つ以上の中央演算処理装置、１つ以上のグラフィックス・プロセシング・ユニット、１つ以上のテンソル処理装置、１つ以上のフィールド・プログラマブル・ゲートアレイ（ＦＰＧＡ：field programmable gate array）、及びアプリケーション・プログラミング・インタフェース（ＡＰＩ：application programming interface）サーバーのような複数の処理装置を含むことができる。定義のために、本願中に用いる「中央演算処理装置（ＣＰＵ：central processing unit）」、「グラフィックス・プロセシング・ユニット（ＧＰＵ：graphics processing unit）」、及び「テンソル処理装置（ＴＰＵ：tensor processing unit）」とは、それぞれが最新技術において慣用されている意味を有する。換言すれば、ＣＰＵは、計算プラットフォーム１０２の算術及び論理演算を実行するための演算装置（ＡＬＵ：arithmetic logic unit：算術論理演算器）、並びにマイクロエンコーディング・ソフトウェアコード１１０のようなプログラムをシステムメモリ１０６から読み出すための制御装置（ＣＵ：control unit）を含むのに対し、ＧＰＵは、計算が集約的なグラフィックスまたは他の処理タスクを実行することによってＣＰＵの処理オーバーヘッドを低減するように実現することができる。ＴＰＵは、特に、機械学習モデル化のような人工知能（ＡＩ：artificial intelligence）用途向けに構成された特定用途向け集積回路（ＡＳＩＣ：application specific integrated circuit）である。

【0015】

更に、本願中に定義するように、「機械学習モデル」または「ＭＬ（machine learning）モデル」という表現は、データのサンプルまたは「学習データ」から学習したパターンに基づいて将来予測を行うための数学モデルを参照することがある。種々の学習アルゴリズムを用いて、入力データと出力データとの相互関係を対応付けることができる。これらの相互関係は、新たな入力データに対して将来予測を行うために用いることができる数学モデルを形成する。こうした予測モデルは、１つ以上のロジスティック回帰モデル、ベイズモデル、またはニューラルネットワーク（ＮＮ：neural network：神経回路網）を含むことができる。更に、「ディープ・ニューラルネットワーク（深層神経回路網）」は、ディープラーニング（深層学習）との関連で、入力層と出力層との間の複数の隠れ層を利用するＮＮを参照することがあり、このことは、生データ中に明示的に定義されていない特徴に基づく学習を可能にすることができる。種々の実現では、ＮＮを分類器として学習させることができ、ＮＮを利用して画像処理または自然言語処理を実行することができる。

【0016】

一部の実現では、計算プラットフォーム１０２が、例えばインターネットのようなパケット交換ネットワーク越しにアクセス可能な１つ以上のウェブ・サーバーに相当することができる。その代わりに、計算プラットフォーム１０２は、プライベート・ワイドエリア・ネットワーク（ＷＡＮ：wide area network）、ローカルエリア・ネットワーク（ＬＡＮ：local area network）をサポートする、あるいは他の種類の配信制限ネットワークまたはプライベート・ネットワーク内に含まれる１つ以上のコンピュータ・サーバーに相当することができる。更に他の代案として、一部の実現では、システム１００を、データセンターにおけるように仮想的に実現することができる。例えば、一部の実現では、システム１００をソフトウェアで、あるいは仮想マシンとして実現することができる。

【0017】

図１では、ユーザシステム１２０をデスクトップ・コンピュータとして示しているが、この表現も一例として提供するに過ぎない。より一般的には、ユーザシステム１２０は、ユーザ・インタフェースを提供し、通信ネットワーク１１２への接続をサポートし、そして本明細書中のユーザシステム１２０に属する機能を実現するのに十分なデータ処理能力を実現するあらゆる適切なモバイル（携帯）または定置のコンピュータ装置またはシステムとすることができる。例えば、他の実現では、ユーザシステム１２０がラップトップ・コンピュータ、タブレット・コンピュータ、またはスマートホンの形態をとることができる。

【0018】

ユーザシステム１２０のディスプレイ１２２に関しては、ディスプレイ１２２は、ユーザシステム１２０と物理的に統合することができ、あるいはそれぞれのユーザシステム１２０と通信結合し、但し物理的に分離することができる。例えば、ユーザシステム１２０がスマートホン、ラップトップ・コンピュータ、またはタブレット・コンピュータとして実現される場合、ディスプレイ１２２は一般にユーザシステム１２０と統合することができる。これとは対照的に、ユーザシステム１２０がデスクトップ・コンピュータとして実現される場合、ディスプレイ１２２は、コンピュータタワーの形態のユーザシステム１２０から分離されたモニターの形をとることができる。更に、ユーザシステム１２０のディスプレイ１２２は、液晶ディスプレイ（ＬＣＤ：liquid crystal display）、発光ダイオード（ＬＥＤ：light emitting diode）ディスプレイ、有機発光ダイオード（ＯＬＥＤ：organic LED）ディスプレイ、量子ドット（ＱＤ：quantum dot）ディスプレイ、または信号から光への物理変換を実行する他のあらゆる適切な表示スクリーンとすることができる。

【0019】

図２Ａに、１つの実現による、インタースティシャル・コンテンツ用の挿入ポイントが占有することができるコンテンツ・セグメントの４つの代替領域を表す例示的な図を示す。図２Ａに示すように、コンテンツ２３０は、各々がセグメント境界２３４によって規定されるコンテンツ・セグメント２３２の列を含む。また、図２Ａには、マーカー２３８ａ、２３８ｂ、２３８ｃ、及び２３８ｄ、及び最小のコンテンツ・セグメント継続時間２３３も示し、これらのマーカーは、インタースティシャル・コンテンツの挿入用のそれぞれの所望位置を識別する。それに加えて、図２Ａは、例示的な陰影付きボックス２３６によって代表される複数の陰影付きボックスを示し、これらの陰影付きボックスの各々は単にスラグ、即ち１つ以上の遷移フレームを表し、スラグでは、最先端技術において既知であるように、ビデオ／オーディオが２、３秒間暗黒／無音に遷移する。スラグは、番組中のコマーシャル時間または他のインタースティシャル・コンテンツ用の箇所の枠をとるために用いられることが多い。スラグは、例えば、コンテンツから広告に遷移して再度コンテンツに戻る際に、快適な主観的視聴体験を可能にする。図２Ａに示すように、マーカー２３８ａ、２３８ｂ、２３８ｃ、及び２３８ｄの各々を、それぞれのスラグの中点に配置することが望ましくあり得る。なお、本願は暗黒スラグの存在を参照しているが、アドレス指定されているものは、マーカー２３８ａ、２３８ｂ、２３８ｃ、及び２３８ｄの位置である。

【0020】

コンテンツ２３０は、概ね図１中のコンテンツ１３０に相当する。従って、コンテンツ１３０は、本発明によりコンテンツ２３０に帰する特性のいずれをも共有することができ、その逆も成り立つ。換言すれば、コンテンツ２３０のように、コンテンツ１３０は、最小のコンテンツ・セグメント継続時間２３３によって特徴付けられるコンテンツ・セグメント２３２の列を含むことができる。

【0021】

なお、最小のコンテンツ・セグメント継続時間２３３に関しては、種々の理由で、最小及び最大のコンテンツ・セグメント継続時間に制限が課せられることがある。実際上の意味では、例えば、単一のフレームしか含まないコンテンツを有することは不所望である。その結果、ストリーミングサービスが最小のコンテンツ・セグメント継続時間２３３を有すること、あるいは配信されるコンテンツに最小のコンテンツ・セグメント継続時間２３３を課すことが現実であり得る。更に、一部のＡＢＲプロトコルについては、最大のコンテンツ・セグメント継続時間２３３を予め定めることができ、その値をコンテンツの記述に含めることができる。例えば、ハイパーテキスト・トランスファー（転送）プロトコル（ＨＴＴＰ：Hypertext Transfer Protocol）ライブ・ストリーミング（ＨＬＳ：HTTP Live Streaming）では、コンテンツ・プレイリスト・タグＥＸＴ－Ｘ－ＴＡＲＧＥＴＤＵＲＡＴＩＯＮが要求され、最大のコンテンツ・セグメント継続時間２３３を指定する。

【0022】

従って、既存のセグメント境界２３４に対するマーカーの位置は、図２Ａ中にケース０、ケース１、ケース２、及びケース３として識別される４つの相対位置にうちの１つにあるものとして記述することができる。ケース０では、マーカー２３８ａが既存のセグメント境界と既に完全に位置合わせされている。その結果、ケース０については、更なる処理または再符号化を必要としない、というのは、インタースティシャル・コンテンツをマーカー２３８ａの位置に挿入することを可能にするセグメント境界２３４が既に存在するからである。

【0023】

ケース１では、これとは対照的に、マーカー２３８ｂの位置が、コンテンツ・セグメントの先頭にあるセグメント境界２３４から最小のコンテンツ・セグメント継続時間２３３内にある。従って、マーカー２３８ｂの位置に単に新たなセグメント境界を作成することは、最小のコンテンツ・セグメント継続時間２３３に反する。同様に、マーカー２３８ｄの位置は、コンテンツ・セグメントの終端にあるセグメント境界２３４から最小のコンテンツ・セグメント継続時間２３３内にある。従って、マーカー２３８ｄの位置に単に新たなセグメント境界を作成することも、最小のコンテンツ・セグメント継続時間２３３に反する。

【0024】

ケース２では、ケース０、ケース１、及びケース３とは対照的に、マーカー２３８ｃの位置は、コンテンツ・セグメントの先頭または終端にあるセグメント境界２３４から最小のコンテンツ・セグメント継続時間２３３内に位置しない。その結果、マーカー２３８ｃの位置に新たなセグメント境界を作成することは、最小のコンテンツ・セグメント継続時間２３３に反しない。

【0025】

図２Ｂに、１つの実現による、図２Ａに示す代替領域のうちの３つの各々について、即ち、ケース１、ケース２、及びケース３について、正確に的を絞ってコンテンツをマイクロエンコーディングするためのそれぞれの方策を表す図を示す。なお、図２Ａ中で特徴を識別するために用いている参照番号と同一の参照番号によって図２Ｂ中で識別されるあらゆる特徴は、図２Ａ中のそれぞれの特徴に相当し、これらの相当する特徴に帰する上記の特性のいずれをも共有することができる。

【0026】

図２Ｂに示すように、コンテンツ２３０は、コンテンツ・セグメント２３２ａ、２３２ｂ、２３２ｃ、２３２ｄ、２３２ｅ、２３２ｆ、及び２３２ｇの列（以下「コンテンツ・セグメント２３２ａ～２３２ｇ」）、及び例示的なセグメント境界２３４ａ及び２３４ｂによって表されるセグメント境界を含む。また、図２Ｂには、マーカー２３８ｂ、２３８ｃ、及び２３８ｄ、並びにこれらのマーカーのそれぞれのスラグも示す。

【0027】

ケース１については、マーカー２３８ｂを含むコンテンツ・セグメント２３２ｄの先頭で再符号化を開始することはできない、というのは、コンテンツ・セグメント２３２ｄの先頭で再符号化を開始して、新たなセグメント境界をマーカー２３８ｂの所に生成したとすれば、図２Ａを参照することにより上述した最小のコンテンツ・セグメント継続時間の要件に反するからである。従って、再符号化は、先行するコンテンツ・セグメントの始端の開始時刻、即ち隣接して先行するコンテンツ・セグメント２３２ｃの開始時刻以前に開始しなければならない。ケース１については、再符号化は、マーカー２３８ｂを含むコンテンツ・セグメント２３２ｄの終端で終了することができる。

【0028】

なお、新たなセグメント境界をマーカー２３８ｂの位置に生成するために再符号化しなければならないコンテンツ２３０の最小のサブセクションは、マーカー２３８ｂの位置を含むコンテンツ・セグメント２３２ｄの終端で終了し、コンテンツ・セグメント２３２ｄに隣接して先行するコンテンツ・セグメント２３２ｃの先頭で始まるが、他の再符号化継続時間も可能である。例えば、ケース１用の再符号化は、例えばコンテンツ・セグメント２３２ｂの先頭で、あるいはコンテンツ・セグメント２３２ｂに先行するあらゆるコンテンツ・セグメントの先頭で、のようにコンテンツ・セグメント２３２ｃよりも前に開始することができる。それに加えて、あるいはその代わりに、ケース１用の再符号化は、例えばコンテンツ・セグメント２３２ｅの終端、あるいは後続するコンテンツ・セグメントの終端のような、より後のコンテンツ・セグメントの終端で終了することができる。

【0029】

ケース２については、マーカー２３８ｃを含むコンテンツ・セグメント２３２ｄの先頭で再符号化を開始することができ、コンテンツ・セグメント２３２ｄの終端で再符号化を終了することができる、というのは、マーカー２３８ｃは、コンテンツ・セグメント２３２ｄのセグメント境界２３４ａまたは２３４ｂのいずれからの最小のコンテンツ・セグメント継続時間内にも位置しないからである。なお、新たなセグメント境界をマーカー２３８ｃの位置に生成するために再符号化しなければならないコンテンツ２３０の最小のサブセクションは、マーカー２３８ｃの位置を含むコンテンツ・セグメント２３２ｄのセグメント境界で始まり終了するが、他の再符号化継続時間も可能である。例えば、ケース２用の再符号化は、例えばコンテンツ・セグメント２３２ｃの先頭で、あるいはコンテンツ・セグメント２３２ｃに先行するあらゆるコンテンツ・セグメントの先頭で、のようにコンテンツ・セグメント２３２ｄよりも前に開始することができる。それに加えて、あるいはその代わりに、ケース２用の再符号化は、例えばコンテンツ・セグメント２３２ｅの終端、あるいは後続するコンテンツ・セグメント２３２ｅの終端のような、より後のコンテンツ・セグメントの終端で終了することができる。

【0030】

ケース３については、マーカー２３８ｄを含むコンテンツ・セグメント２３２ｄの先頭で再符号化を開始することができるが、コンテンツ・セグメント２３２ｄの終端で再符号化を終了することはできない、というのは、コンテンツ・セグメント２３２ｄの終端で再符号化を終了し、新たなセグメント境界をマーカー２３８ｄの所に生成したとすれば、図２Ａを参照することにより上述した最小のコンテンツ・セグメント継続時間の要件に反するからである。従って、再符号化は、後続するコンテンツ・セグメントの終端の終了時刻、即ち隣接して後続するコンテンツ・セグメント２３２ｅの終了時刻以後に終了しなければならない。ケース３については、上述したように、マーカー２３８ｄを含むコンテンツ・セグメント２３２ｄの先頭で再符号化を開始することができる。

【0031】

マーカー２３８ｄの位置に新たなセグメント境界を生成するために再符号化しなければならないコンテンツ２３０の最小のサブセクションは、マーカー２３８ｄの位置を含むコンテンツ・セグメント２３２ｄの先頭で始まり、コンテンツ・セグメント２３２ｄに隣接して後続するコンテンツ・セグメント２３２ｅの終端で終了するが、他の再符号化継続時間も可能である。例えば、ケース３用の再符号化は、例えばコンテンツ・セグメント２３２ｃの先頭で、あるいはコンテンツ・セグメント２３２ｃに先行するあらゆるコンテンツ・セグメントの先頭で、のようにコンテンツ・セグメント２３２ｄよりも前に開始することができる。それに加えて、あるいはその代わりに、ケース３用の再符号化は、例えばコンテンツ・セグメント２３２ｆの終端、あるいは後続するコンテンツ・セグメントの終端のような、より後のコンテンツ・セグメントの終端で終了することができる。

【0032】

図２Ｃに、１つの実現による、代案の使用事例、即ちケース４用に、正確に的を絞ってコンテンツをマイクロエンコーディングするための方策を表す例示的な図を示す。なお、図２Ｂ中に出現する参照番号と同一の参照番号によって識別される図２Ｃ中のあらゆる特徴は、図２Ｂ中のそれぞれの特徴に相当し、本開示によればこれらの相当する特徴に帰する上記の特性のいずれをも共有することができる。図２Ｃに示すように、ケース４では、マーカー２３８ｅが、コンテンツ・セグメント２３２ｄのセグメント境界２３４ａ及び２３４ｂの各々の間の最小のコンテンツ・セグメント継続時間２３３内に位置する。

【0033】

上述したケース１と同様に、ケース４については、マーカー２３８ｅを含むコンテンツ・セグメント２３２ｄの先頭で再符号化を開始することができない、というのは、コンテンツ・セグメント２３２ｄの先頭で再符号化を開始して、新たなセグメント境界をマーカー２３８ｅの所に生成したとすれば、図２Ａを参照することにより上述した最小のコンテンツ・セグメント継続時間の要件に反するからである。従って、再符号化は、先行するコンテンツ・セグメントの始端の開始時刻、即ち隣接して先行するコンテンツ・セグメント２３２ｃの開始時刻以前に開始しなければならない。しかし、ケース３と同様に、ケース４については、コンテンツ・セグメント２３２ｄの終端で再符号化を終了することはできない、というのは、コンテンツ・セグメント２３２ｄの終端で再符号化を終了して、新たなセグメント境界をマーカー２３８ｅの所に生成したとすれば、この場合も図２Ａを参照することにより上述した最小のコンテンツ・セグメント継続時間の要件に反するからである。従って、再符号化は、後続するコンテンツ・セグメントの終了時刻、即ち隣接して後続するコンテンツ・セグメント２３２ｅの終了時刻以後に終了しなければならない。従って、ケース４については、コンテンツ・セグメント２３２ｃの先頭で再符号化を開始し、コンテンツ・セグメント２３２ｅの終端で再符号化を終了することができる。

【0034】

マーカー２３８ｅの位置に新たなセグメント境界を生成するために再符号化しなければならないコンテンツ２３０の最小のサブセクションは、マーカー２３８ｅの位置を含むコンテンツ・セグメント２３２ｄに隣接して先行するコンテンツ・セグメント２３２ｃの先頭で始まり、コンテンツ・セグメント２３２ｄに隣接して後続するコンテンツ・セグメント２３２ｅの終端で終了するが、他の再符号化継続時間も可能である。例えば、ケース４用の再符号化は、例えばコンテンツ・セグメント２３２ｂの先頭で、あるいはコンテンツ・セグメント２３２ｂに先行するあらゆるコンテンツ・セグメントの先頭で、のようにコンテンツ・セグメント２３２ｃよりも前に開始することができる。それに加えて、あるいはその代わりに、ケース４用の再符号化は、例えばコンテンツ・セグメント２３２ｆの終端、あるいは後続するコンテンツ・セグメントの終端のような、より後のコンテンツ・セグメントの終端で終了することができる。

【0035】

なお、ケース１、ケース２、ケース３、及びケース４の各ケース用の再符号化方策は、最小のサブセクションの開始時刻、最小のサブセクションの終了時刻、及びマーカー位置を含む三つ組のデータによって特徴付けられる、再符号化すべきコンテンツ２３０の最小のサブセクションを識別する。更に、ケース１、ケース３、及びケース４に適用される再符号化方策は、追加のコンテンツ・セグメントをコンテンツ２３０に追加せずに、１つ以上の既存のセグメント境界を新たな位置へシフトすることによって、マーカー２３８ｂ、２３８ｄ、及び２３８ｅのそれぞれの位置に新たなセグメント境界を生成するが、ケース２に適用される方策は、単一のコンテンツ・セグメント２３２ｄを２つのコンテンツ・セグメントに区分する。

【0036】

従って、本発明の新規性及び進歩性のある正確に的を絞ったマイクロエンコーディングによる再符号化を施されるコンテンツ２３０のあらゆるサブセクションは、最初は整数「Ｎ」個のコンテンツ・セグメントを含み、再符号化後には、この再符号化されたサブセクションは、Ｎ個のコンテンツ・セグメントまたはＮ＋１個のコンテンツ・セグメントを含むことができる。更に、ケース２については、再符号化に課せられる唯一の要件が、コンテンツ・セグメント２３２ｄの始端及び終端、及びマーカー２３８ｃの位置が尊重される、ということであるので、一部の実施形態では、再符号化を施され、最初はＮ個のコンテンツ・セグメントを含むコンテンツ・セグメント２３０のサブセクションを、Ｎ個のコンテンツ・セグメント、Ｎ＋１個のコンテンツ・セグメント、またはＮ＋２個以上のコンテンツ・セグメントに再符号化することができる。換言すれば、コンテンツ２３０の元のサブセクションは、再符号化された後の当該サブセクションよりも少数の、少なくとも１つのコンテンツ・セグメントを含むことができる。

【0037】

上述したコンテンツ２３０の最小の再符号化サブセクションの開始及び終了時刻は、再符号化を最適でなくする開始及び終了時刻の一方または両方を生じさせ得る、基になるコンテンツの特性を考慮しない。例えば、最小の再符号化サブセクションの始端位置、その終端、または両方にあるコンテンツは、再符号化がそこで開始されるか終了するものとすれば、コンテンツ２３０の再生時に耳や目につくオーディオ・アーティファクト（音声ノイズ）、ビデオ・アーティファクト（映像ノイズ）、またはオーディオ・アーティファクト及びビデオ・アーティファクトの両方を生じさせ得る特定の属性を有し得る。ケース１、ケース２、ケース３、及びケース４を参照することにより上述した最小の再符号化サブセクションを含むコンテンツ２３０の最適な再符号化サブシーケンス（副次的順序）を識別するためのプロセスは、こうした問題を軽減または解消するための多様な方法を含むことができる。例えば、再符号化用の最適な開始時刻及び終了時刻を決定するプロセスは、ドルビービジョン（Dolby Vision：登録商標）ショット・メタデータ、シーン変化検出、チャンク（chunk）の境目の複雑性解析、等のようなコンテンツ・メタデータのうちの１つ以上を考慮することができる。最終結果は同様であり、再符号化サブセクション用の開始時刻、再符号化サブセクション用の終了時刻、及び再符号化サブセクション内に含まれるマーカーの位置を識別する三つ組のデータである。コンテンツ２３０の再符号化用の最適なサブセクションの決定は、元のコンテンツを再符号化されたコンテンツに置き換える際のオーディオ及びビデオの影響を最小にすることを追求する。

【0038】

上述したコンテンツ２３０の最小のサブセクション、またはこの最小のサブセクションを含むコンテンツ２３０の最適なサブセクションが再符号化されるか否かにかかわらず、本願中に開示するコンテンツ・サブセクションの正確に的を絞ったマイクロエンコーディングは、次の特徴を生じさせる：１）Ｎ個のコンテンツ・セグメントを有するコンテンツ・サブセクションの再符号化がＮ個またはＮ＋１個以上のコンテンツ・セグメントを有する再符号化されたサブセクションを生じさせる、２）再符号化されたコンテンツ・サブセクションの始端にある最初のコンテンツ・セグメントのみが、元のコンテンツ・サブセクションの開始時刻に位置合わせされる、３）あるマーカーの位置に位置合わせされた新たなセグメント境界が生成される、及び４）再符号化されたコンテンツ・サブセクションの最後のコンテンツ・セグメントの（表示順序における）最終フレームは、元のコンテンツ・サブセクションの最後のコンテンツ・セグメントの最終フレームと同じである。

【0039】

図３に、１つの１つの実現による、正確に的を絞ってコンテンツをマイクロエンコーディングするより詳細な例の図を示す。なお、図３に示す例は、図２Ａ及び２Ｂ中のケース１に相当する。図３に示すように、マーカー３３８ｂの位置を含むコンテンツ３３０－１のコンテンツ・セグメント３３２ｄ－１、及びこれに先行するコンテンツ・セグメント３３２ｃ－１のみが正確に的を絞って再符号化されて、新たなセグメント境界３４０をマーカー３３８ｂの位置に有する再符号化されたコンテンツ３５０が生成される。

【0040】

マーカー３３８ｂ、コンテンツ３３０、コンテンツ・セグメント３３２ｃ－１、コンテンツ・セグメント３３２ｄ－１、及び再符号化されたコンテンツ３５０は、概ね、図１、２Ａ、及び２Ｂ中に個別に示す、それぞれマーカー２３８ｂ、コンテンツ１３０／２３０、コンテンツ・セグメント２３２ｃ、コンテンツ・セグメント２３２ｄ、及び再符号化されたコンテンツ１５０に相当する。従って、マーカー２３８ｂ、コンテンツ１２０／２３０、コンテンツ・セグメント２３２ｃ、コンテンツ・セグメント２３２ｄ、及び再符号化されたコンテンツ１５０は、本発明によりマーカー３３８ｂ、コンテンツ３３０、コンテンツ・セグメント３３２ｃ－１、コンテンツ・セグメント３３２ｄ－１、及び再符号化されたコンテンツ３５０に帰する特性のいずれをも共有することができ、その逆も成り立つ。

【0041】

コンテンツ・セグメント３３２ｃ－１及び３３２ｄ－１を含むコンテンツ３３０のサブセクションを再符号化する原理は、図２Ｂ及びケース１を参照することにより上述した通りであり、繰り返さない。しかし、図３に示す例によれば、コンテンツ・セグメント３３２ｃ－１及び３３２ｄ－１の再符号化は、元のコンテンツ・セグメント３３２ｃ－１の全体及び元のコンテンツ・セグメント３３２ｄ－１の一部分を含む再符号化されたコンテンツ・セグメント３３２ｃ－２を生じさせるのに対し、再符号化されたコンテンツ・セグメント３３２ｄ－２は、元のコンテンツ・セグメント３３２ｄ－１の全体までは含まない。

【0042】

なお、例えばドルビービジョン（登録商標）のような一部のメディア・フォーマットは、フレーム毎のコンテンツ・メタデータを含み、このフレーム毎のコンテンツ・メタデータは、基になるビデオフレームに関連し、あるいは基になるビデオフレームと統合される。こうしたメタデータは、コンテンツ１３０／２３０／３３０の先頭で始まり、このコンテンツの終端までずっと継続される線形処理の結果とすることができる。これらの使用事例では、本発明の正確に的を絞ったマイクロエンコーディングの解決策は、既存のコンテンツ・セグメントからこうしたメタデータを抽出すること、及びこのメタデータを再符号化されたコンテンツ・セグメント内に適切に配置することを含むことができる。図３に示す例示的な使用事例を参照すれば、コンテンツ・セグメント３３２ｄ－１に関連する、あるいはコンテンツ・セグメント３３２ｄ－１に含まれるコンテンツ・メタデータを、新たなセグメント境界３４０の位置に基づいて、新たなセグメント境界３４０を境界とする再符号化されたコンテンツ・セグメント３３２ｃ－２と３３２ｄ－２との間で区分することができる。

【0043】

システム１００の機能を、図４Ａを参照することにより更に説明する。図４Ａに、１つの実現による、正確に的を絞ってコンテンツをマイクロエンコーディングする例示的方法を提示するフローチャート４６０Ａを示す。図４Ａに概略を示す方法に関しては、本願発明の特徴の説明を曖昧にしないために、特定の細部及び特徴はフローチャート４６０Ａから除外している。

【0044】

ここで図４Ａを、図１及び２Ａと組み合わせて参照すれば、フローチャート４６０Ａは、コンテンツ・セグメント２３２の列を含むコンテンツ１３０／２３０、及びこのコンテンツ用のマーカーデータ１２６を受信することから始まり、マーカーデータ１２６は上記列内の位置を識別する（動作４６１）。なお、マーカーデータ１２６によって識別される、コンテンツ１３０／２３０に含まれるコンテンツ・セグメント２３２の列内の位置は、インタースティシャル・コンテンツをコンテンツ・セグメント２３２の列内に挿入するための挿入ポイントとすることができる。コンテンツ１３０／２３０及びマーカーデータ１２６は、動作４６１において、システム１００の処理ハードウェア１０４によって実行されるマイクロエンコーディング・ソフトウェアコード１１０によって受信することができる。例えば、図１に示すように、一部の実現では、コンテンツ１３０／２３０及びマーカーデータ１２６を、システム１００が、コンテンツ源１１６から、通信ネットワーク１１２及びネットワーク通信リンク１１４経由で、あるいは通信リンク経由１１８経由で直接、のいずれでも受信することができる。

【0045】

上述したように、コンテンツ１３０／２３０は、様々な異なる種類及びジャンルのＡＶコンテンツ、並びにオーディオを伴わないビデオ、またはビデオを伴わないオーディオのいずれをも含むことができる。ＡＶコンテンツの具体例は、映画の形態のＡＢＲコンテンツ、ＴＶのエピソードまたはシリーズ、ビデオゲーム、及びスポーツイベントを含む。それに加えて、あるいはその代わりに、一部の実現では、コンテンツ１３０／２３０を、人物、架空のキャラクター、場所、物体、及びブランド及びロゴのような識別子のデジタル表現とすること、あるいはコンテンツ１３０／２３０がこうしたデジタル表現を含むことができ、こうしたデジタル表現は、例えばＶＲ、ＡＲ、またはＭＲ環境に存在する。更に、コンテンツ１３０／２３０は、人物の身元、ユーザの履歴、資格、所有権、支払い、等のようなデータの連続性を提供しつつ、任意数のユーザが同期して持続的に体験することができる仮想世界を表すことができる。その代わりに、あるいはそれに加えて、コンテンツ１３０／２３０は、従来型のＡＶと、対話型ビデオのような完全没入型のＶＲ／ＡＲ／ＭＲ体験との混成とすることができ、あるいはこうした混成を含むことができる。

【0046】

フローチャート４６０Ａは、コンテンツ１３０／２３０及びマーカーデータ１２６を用いて、マーカーデータ１２６によって識別される位置を含むコンテンツ・セグメントのセグメント境界を識別するステップを更に含むことができる（動作４６２）。マーカーデータ１２６によって識別される位置を含むコンテンツ・セグメントのセグメント境界の識別は、動作４６２において、計算プラットフォーム１０２の処理ハードウェア１０４がマイクロエンコーディング・ソフトウェアコード１１０を実行することによって、最先端技術において既知であるあらゆる適切な技術を用いて実行することができる。

【0047】

フローチャート４６０Ａは、マーカーデータ１２６によって識別される位置、及び動作４６２において識別したセグメント境界を用いて、マーカーデータ１２６によって識別される位置が、これらのセグメント境界のうちの１つから所定間隔内に位置するか否かを判定するステップを更に含む（動作４６３）。例として、図２Ａ及び２Ｂに示すように、一部の実現では、こうした所定間隔は、図２Ａ中の最小のコンテンツ・セグメント継続時間２３３とすることができ、動作４６３は、マーカーデータ１２６によって識別される位置が、図２Ｂ及び２Ｃ中のコンテンツ・セグメント２３２ｄに対して、図２Ａ、２Ｂ、及び２Ｃに例示するケース１、ケース２、ケース３、またはケース４のいずれに相当するかを判定することに相当することができる。

【0048】

図２Ｂ及び２Ｃを参照することにより説明したように、コンテンツ２３０を再符号化して新たなセグメント境界を正セするための最小のサブセクションは、動作４６３において実行した判定に基づいて識別することができる。しかし、そして更に上述したように、一部の実現では、コンテンツ２３０の最適なサブセクションを再符号化することが有利であるか望ましいことがあり、この最適なサブセクションは、最小のサブセクションよりも長く、かつ最小のサブセクションを含む。

【0049】

従って、一部の実現では、フローチャート４６０Ａが、コンテンツ１３０／２３０に基づいて、再符号化用に最適な、上記列内のサブセクションを決定するステップを更に含むことができ、最適なサブセクションは、上記位置を含むコンテンツ・セグメント２３２ｄに加えて複数のコンテンツ・セグメントを含む（動作４６４）。なお、動作４６４は任意であり、一部の実現では、フローチャート４６０Ａによって概略を示す方法から除外することができる。しかし、フローチャート４６０Ａによって概略を示す方法に動作４６４が含まれる実現では、図２Ｂを参照することにより上述したように、動作４６４は、計算プラットフォーム１０２の処理ハードウェア１０４によって実行されるマイクロエンコーディング・ソフトウェアコード１１０によって実行することができる。なお、図２Ｂを参照することにより上述したように、種々の使用事例では、コンテンツ・セグメント２３２ｄに加えて最適なサブセクションに含まれる複数のコンテンツ・セグメントのうちの１つ以上が、コンテンツ・セグメント２３２ｄに先行することができ、または２３２ｄに後続することができ、あるいは、これらのコンテンツ・セグメントのうちの１つ以上がコンテンツ・セグメント２３２ｄに先行することができ、かつ、これらのコンテンツ・セグメントのうちの１つ以上がコンテンツ・セグメント２３２ｄに後続することができる。

【0050】

図３を、図１、２Ａ、２Ｂ、２Ｃ、及び４Ａと組み合わせて参照すれば、フローチャート４６０Ａは、上記列内のサブセクションを再符号化して、新たなセグメント境界３４０を、マーカーデータ１２６によって識別される位置に生成するステップを更に含む。動作４６３において、この位置が、コンテンツ・セグメント２３２ｄのセグメント境界のうちの１つから上記所定間隔内に位置しないものと判定されると、再符号化されるサブセクションは、マーカーデータ１２６によって識別される位置を含むコンテンツ・セグメント２３２ｄを少なくとも含み、かつ高々コンテンツ・セグメント２３２ｄしか含むことができない（動作４６５－１）。しかし、マーカーデータ１２６によって識別される位置が、コンテンツ・セグメント２３２ｄのセグメント境界のうちの１つから上記所定間隔内に位置するものと判定されると、再符号化されるサブセクションは、この位置を含むコンテンツ・セグメント、及びこの位置を含むコンテンツ・セグメント２３２ｄに隣接するコンテンツ・セグメント、即ち、コンテンツ・セグメント２３２ｄに先行するコンテンツ・セグメント２３２ｃまたはコンテンツ・セグメント２３２ｄに後続するコンテンツ・セグメント２３２ｅのいずれかを少なくとも含み、かつ高々コンテンツ・セグメント２３２ｄ、及びコンテンツ・セグメント２３２ｃまたは２３２ｅの一方しか含むことができない（動作４６５－２）。上述したように、一部の実現では、動作４６４及び４６５をフローチャート４６０Ａから除外することができる。これらの実現では、動作４６３に動作４６６を直接後続させることができる。

【0051】

コンテンツ・セグメント２３２ｄを含むコンテンツ２３０のサブセクションの再符号化を、動作４６５－１により実行するか動作４６５－２により実行するかにかかわらず、この再符号化は、計算プラットフォーム１０２の処理ハードウェア１０４によって実行されるマイクロエンコーディング・ソフトウェアコードによって実行することができる。なお、一部の使用事例では、コンテンツ１３０／２３０が、予めトランスコードされ、セグメント化され、潜在的に暗号化され、ＡＢＲメディア・プレイリストが生成されていることがあり、結果的なコンテンツ１３０／２３０が元の所に記憶されているに過ぎない。換言すれば、コンテンツ１３０／２３０の元のトランスコードされたバージョンは存在しないことがあり、あるいは入手不可能であることがある。これらの使用事例では、動作４６５－１または動作４６５－２が、元のものを取得するステップと、元のもののサブセクションを再符号化するステップとを含むことができる。しかし、コンテンツ１３０／２３０の元のトランスコードされたバージョンが入手可能である使用事例では、動作４６５－１または動作４６５－２が、再符号化されるコンテンツ２３０のサブセクションをまず復号化し、次にこのサブセクションを再符号化するステップを含むことができる。

【0052】

一部の実現では、フローチャート４６０Ａによって概略を示した方法が、動作４６５－１または動作４６５－２で終了するが、他の実現では、この方法を拡張して追加的動作を含めることができる。ここで図４Ｂを参照すれば、図４Ｂは、１つの実現による、図４Ａに概略を示す方法を拡張するための例示的動作を記述するフローチャート４６０Ｂを示す。なお、図４Ｂに記述する動作に関しては、本願発明の特徴の説明を曖昧にしないために、特定の細部及び特徴はフローチャート４６０Ｂから除外している。

【0053】

一部の使用事例では、図３を参照し更に図１を参照して上述したように、マーカーデータ１２６によって識別される位置を含むコンテンツ・セグメント３３２ｄ－１が、コンテンツ・セグメント３３２ｄ－１に関連する、あるいはコンテンツ・セグメント３３２ｄ－１に含まれるコンテンツ・メタデータに更に対応することができる。これらの使用事例では、フローチャート４６０Ａ及び４６０Ｂによって概略を示す方法が、このコンテンツ・メタデータを、新たなセグメント境界３４０に基づいて、新たなセグメント境界３４０を境界とする再符号化されたコンテンツ・セグメント３３２ｃ－２と３３２ｄ－２との間で区分するステップを更に含むことができる（動作４６６）。なお、動作４６６は任意であり、一部の実現では、フローチャート４６０Ｂによって拡張される方法から除外することができる。しかし、フローチャート４６０Ｂによって拡張される方法に動作４６６が含まれる実現では、図３を参照することにより上述したように、動作４６６を、計算プラットフォーム１０２の処理ハードウェア１０４によって実行されるマイクロエンコーディング・ソフトウェアコード１１０によって実行することができる。

【0054】

フローチャート４６０Ｂは、動作４６５－１または４６５－２において再符号化した上記列内のサブセクション、あるいは動作４６５－１または４６５－２において再符号化した上記列内のサブセクション及び動作４６６において区分したコンテンツ・メタデータを、マーカーデータ１２６によって識別される位置を含むコンテンツ・セグメント２３２ｄを含む上記列内のサブセクションの置き換えとしてパッケージ化するステップを更に含むことができる（動作４６７）。例として、動作４６５－１または４６５－２において再符号化した上記列内のサブセクション、あるいは動作４６５－１または４６５－２において再符号化した上記列内のサブセクション及び動作４６６において区分したコンテンツ・メタデータを、パッケージ化して、あるいはパッケージ化し暗号化して、例えばコモン・メタデータ・アプリケーション・フォーマット（ＣＭＡＦ：Common Metadata Application Format）のような、あらゆる所望のパッケージ化フォーマットにすることができる。しかし、動作４６７は任意であり、一部の実現では、フローチャート４６０Ｂによって拡張される方法から除外することができる。フローチャート４６０Ｂによって拡張される方法に動作４６７が含まれる実現では、動作４６７を、計算プラットフォーム１０２の処理ハードウェア１０４によって実行されるマイクロエンコーディング・ソフトウェアコード１１０によって実行することができる。

【0055】

フローチャート４６０Ｂは、動作４６５－１または４６５－２において実行した再符号化に基づいて、コンテンツ１３０／２３０用のプレイリストを更新するステップを更に含むことができる（動作４６８）。多数のＡＢＲプロトコル仕様は、離散したセグメントファイル用の例えばユニフォーム・リソース・ロケータ（ＵＲＬ：Uniform Resource Locator：統一資源位置指定子）のようなユニフォーム・リソース・アイデンティファイア（ＵＲＩ：Uniform Resource Identifier：統一資源識別子）を使用するプレイリストの形式を用いる。これらの使用事例では、コンテンツ１３０／２３０用の既存のプレイリストが動作４６５－１または４６５－２に基づくことができる。その代わりに、動作４６５－１または４６５－２において再符号化したサブセクションは、所定のＡＢＲプロトコル仕様により表現する必要があり得る。例えば、ＨＬＳでは、符号化パラメータまたは符号化順序が元のものと異なる場合、#EXT-X-DISCONTINUITYタグを用いる。なお、動作４６８は任意であり、一部の実現では、フローチャート４６０Ｂによって拡張される方法から除外することができる。しかし、フローチャート４６０Ｂによって拡張される方法に動作４６８が含まれる実現では、動作４６８を、計算プラットフォーム１０２の処理ハードウェア１０４によって実行されるマイクロエンコーディング・ソフトウェアコード１１０によって実行することができる。

【0056】

なお、フローチャート４６０Ａ及び４６０Ｂによって記述される動作に関しては、動作４６１、４６２、及び４６３（以下「動作４６１～４６３」）、動作４６１～４６３及び４６５－１、動作４６１～４６３及び４６５－２、動作４６１～４６３、４６４及び４６５－１、動作４６１～４６３、４６４及び４６５－２、または上述した動作の順序のいずれも、動作４６６、４６７、及び４６８のうちの１つ以上と組み合わせて、人間の関与を除くことができる自動化されたプロセスとして実行することができる。

【0057】

従って、本願は、正確に的を絞ってコンテンツをマイクロエンコーディングするためのシステム及び方法を開示する。本願中に開示する正確に的を絞ったマイクロエンコーディングの解決策は、新たなコンテンツ・セグメント境界位置、既存のコンテンツ・セグメント境界、最小及び最大のコンテンツ・セグメント継続時間に対する制約、再符号化によって生成される主観的なオーディオ及びビデオの不規則性、及び元のメタデータの保存、並びにコンテンツ・プレイリストを入れ替える変更の必要性を有利に考慮することによって、以前にセグメント境界が存在しなかった所への新たなセグメント境界の生成を可能にする。更に、本発明の解決策は、再符号化するために必要な時間、並びに検証において必要なＱＣ時間を大幅に低減しつつ、上述した最先端技術を前進させる、というのは正確に的を絞った微小領域のみを再符号化するからである。

【0058】

以上の説明より、本願中に記載した概念の範囲から逸脱することなしに、これらの概念を実現するために種々の技術を用いることができることは明らかである。更に、特定の実現を参照しながらこれらの概念を説明してきたがこれらの概念の範囲から逸脱することなしに、形態及び細部に変更を加えることができることは、通常の当業者の認識する所である。このため、説明した実現は、あらゆる点で、限定的ではなく例示的なものとして考えるべきである。本願は、本明細書中に記載した特定の実現に限定されず、本発明の範囲から逸脱することなしに、多数の再構成、修正、及び代替が可能であることも明らかである。

【図1】

【図2A】

【図2B】

【図2C】

【図3】

【図4A】

【図4B】

【外国語明細書】