特許 6288923 符号化方法、タイムコード信号発生装置、動画記録再生装置及び動画編集装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6288923

(24)【登録日】2018年2月16日

(45)【発行日】2018年3月7日

(54)【発明の名称】符号化方法、タイムコード信号発生装置、動画記録再生装置及び動画編集装置

(51)【国際特許分類】

   H04N 5/92 20060101AFI20180226BHJP

   H04N 5/91 20060101ALI20180226BHJP

【ＦＩ】

   H04N5/92 H

   H04N5/91 N

【請求項の数】6

【全頁数】12

(21)【出願番号】特願2013-35197(P2013-35197)

(22)【出願日】2013年2月25日

(65)【公開番号】特開2014-165682(P2014-165682A)

(43)【公開日】2014年9月8日

【審査請求日】2016年1月4日

【権利譲渡・実施許諾】特許権者において、実施許諾の用意がある。

(73)【特許権者】

【識別番号】000004352

【氏名又は名称】日本放送協会

(74)【代理人】

【識別番号】100106002

【弁理士】

【氏名又は名称】正林 真之

(74)【代理人】

【識別番号】100120891

【弁理士】

【氏名又は名称】林 一好

(72)【発明者】

【氏名】小出 大一

【審査官】 後藤 嘉宏

(56)【参考文献】

【文献】 特開２００１−１９７４５５（ＪＰ，Ａ）

【文献】 特開２０１２−０６０５０９（ＪＰ，Ａ）

【文献】 特開２００４−３０３３８６（ＪＰ，Ａ）

【文献】 国際公開第２０１４／０３８５２２（ＷＯ，Ａ１）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｈ０４Ｎ ５／０４− ５／１２

Ｈ０４Ｎ ５／７６

Ｈ０４Ｎ ５／８０− ５／９０７

Ｈ０４Ｎ ５／９１− ５／９５６

Ｈ０４Ｎ ２１／００−２１／８５８

(57)【特許請求の範囲】

【請求項1】

映像データを処理するコンピュータが所定のフレーム周波数を持つ映像フォーマットの時間同期をとるために、当該映像フォーマットのフレーム毎に割り当てられたタイムコードを符号化する符号化方法であって、
１２０ｆｐｓの映像フォーマットの場合に、０から２９までのフレーム番号それぞれに対して、６０ｆｐｓの場合の２つのサブフレーム識別子を含む４つのサブフレーム識別子を順に付与し、
当該４つのサブフレーム識別子を、互いに異なる表示用キャラクタを対応付けた２ビットの符号で表現し、かつ、上位ビットを６０ｆｐｓの場合の１ビットと共通にする符号化方法。

【請求項2】

前記４つのサブフレーム識別子を表現する符号を、順に、００、０１、１１、１０とする請求項１に記載の符号化方法。

【請求項3】

映像データを処理するコンピュータが所定のフレーム周波数を持つ映像フォーマットの時間同期をとるために、当該映像フォーマットのフレーム毎に割り当てられたタイムコードを符号化する符号化方法であって、
３０×２^ｎ［ｆｐｓ］（ｎは２以上の整数）の映像フォーマットの場合に、０から２９までのフレーム番号それぞれに対して、２^ｎ個のサブフレーム識別子を付与し、
当該サブフレーム識別子を、互いに異なる表示用キャラクタを対応付けたｎビットの符号で表現し、かつ、上位ビットを３０×２^ｎ−１［ｆｐｓ］の場合のｎ−１ビットと共通にする符号化方法。

【請求項4】

映像データを処理するコンピュータが所定のフレーム周波数を持つ映像フォーマットの時間同期をとるために、当該映像フォーマットのフレーム毎に割り当てられたタイムコードを符号化する符号化方法であって、
３０×ｍ［ｆｐｓ］（ｍは２以上の整数）の映像フォーマットの場合に、０から２９までのフレーム番号それぞれに対して、ｍ個のサブフレーム識別子を付与し、
当該サブフレーム識別子を、互いに異なる表示用キャラクタを対応付けた、
３０×ｍ［ｆｐｓ］≦３０×２^ｎ［ｆｐｓ］（ｎは整数）
の関係が成り立つ最小のｎビットの符号で表現し、かつ、上位ビットを３０×２^ｎ−１［ｆｐｓ］の場合のｎ−１ビットと共通にする符号化方法。

【請求項5】

映像データを処理するコンピュータが所定のフレーム周波数を持つ映像フォーマットの時間同期をとるために、当該映像フォーマットのフレーム毎に割り当てられたタイムコードを符号化する符号化方法であって、
２４×ｍ［ｆｐｓ］（ｍは３以上の整数）の映像フォーマットの場合に、０から２３までのフレーム番号それぞれに対して、ｍ個のサブフレーム識別子を付与し、
当該サブフレーム識別子を、互いに異なる表示用キャラクタを対応付けた、
２４×ｍ［ｆｐｓ］≦２４×２^ｎ［ｆｐｓ］（ｎは整数）
の関係が成り立つ最小のｎビットの符号で表現し、かつ、上位ビットを２４×２^ｎ−１［ｆｐｓ］の場合のｎ−１ビットと共通にする符号化方法。

【請求項6】

請求項１から請求項５のいずれかに記載の符号化方法によって符号化されたタイムコードを順次発生させるタイムコード信号発生装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、映像フォーマットのフレームに割り当てられるタイムコードの符号化方法、タイムコード信号発生装置、動画記録再生装置及び動画編集装置に関する。

【背景技術】

【0002】

従来、放送局又は映画製作現場等における映像編集を行う業務では、映像信号のフレーム１枚毎に固有の番号を割り当てたタイムコード（Ｔｉｍｅ Ｃｏｄｅ、以下ＴＣという。）と呼ばれるインデキシング情報が利用されている。ＴＣは、ＳＭＰＴＥ（Ｓｏｃｉｅｔｙ ｏｆ Ｍｏｔｉｏｎ Ｐｉｃｔｕｒｅ ａｎｄ Ｔｅｌｅｖｉｓｉｏｎ Ｅｎｇｉｎｅｅｒｓ、米国映画テレビ技術者協会）において標準化されている（例えば、非特許文献１〜３参照）。

【0003】

また、映像フォーマットとして、複数のフレームレートが採用されている。
例えば、映画の場合、主に１秒間に２４フレーム（２４ Ｆｒａｍｅ ｐｅｒ ｓｅｃｏｎｄ、以下２４ｆｐｓ）での動画撮影及び表示を行っている。また、テレビの場合、ＮＴＳＣフォーマットでは、６０ｆｐｓ又は５９．９４ｆｐｓ、ＰＡＬ及びＳＥＣＡＭでは、５０ｆｐｓ、ＨＤＴＶ（Ｈｉｇｈ−ｄｅｆｉｎｉｔｉｏｎ ｔｅｌｅｖｉｓｉｏｎ）では、５９．９４ｆｐｓで運用されている。
特に、ＶＴＲやその他映像記録機器では、ＬＴＣ（Ｌｏｎｇｉｔｕｄｉｎａｌ Ｔｉｍｅ Ｃｏｄｅ）又はＶＩＴＣ（Ｖｅｒｔｉｃａｌ Ｉｎｔｅｒｖａｌ Ｔｉｍｅ Ｃｏｄｅ）等のＴＣが採用され、映像編集業務等に利用されている。
また、これら映像フォーマットの間でタイムコードを変換、生成する技術が提案されている（例えば、特許文献１，２参照）。

【0004】

さらに、近年、１２０、１８０、２４０Ｈｚ等の倍速表示ディスプレイや、１２０、２４０Ｈｚ駆動撮像素子が登場している。
また、映像の画素数フォーマットについても、１９２０×１０８０のＨＤＴＶから、３８４０×２１６０の、いわゆる４ｋ２ｋや、７６８０×４３２０の、いわゆる８Ｋと高精細化され、画面も大型化の傾向にある。このため、動画表示時の時間分解能の粗さが目立つようになり、時間分解能を上げるために、６０ｆｐｓを超える高いフレームレートの映像フォーマットが望まれている。

【先行技術文献】

【特許文献】

【0005】

【特許文献1】特許第４４３８８４９号公報

【特許文献2】特許第４１３０３７６号公報

【非特許文献】

【0006】

【非特許文献1】ＳＭＰＴＥ １２Ｍ

【非特許文献2】ＳＭＰＴＥ ２６２Ｍ

【非特許文献3】ＳＭＰＴＥ ３０９Ｍ

【発明の概要】

【発明が解決しようとする課題】

【0007】

ところで、６０ｆｐｓ以下の映像フォーマットの場合、業務用の映像編集、音入れ作業、映像と音声の同期運転、放送送出等において、従来のＴＣフォーマットで運用できていた。
例えば、ＮＴＳＣ又はＨＤＴＶの５２５，１０８０／６０方式においては、１秒間に３０フレーム又は２９．９７フレームの画像を表示し、インタレース方式では、１秒間に６０フレームの映像を、奇数（ｏｄｄ）番号の走査線で構成されるフレームと、偶数（ｅｖｅｎ）番号の走査線で構成されるフレームとで分けてインデキシングして表示している。このとき、ＴＣには、０ｆ ｏｄｄ／ｅｖｅｎ、１ｆ ｏｄｄ／ｅｖｅｎ、・・・、２９ｆ ｏｄｄ／ｅｖｅｎの順で、１秒当たり６０のフレーム番号が割り当てられる。

【0008】

ところが、１２０ｆｐｓ又は２４０ｆｐｓ等で撮影し表示される映像信号について、既存のＴＣを基準に同期運転したり映像編集したりする場合、ＴＣに対してフレーム数が多いために、各フレームに固有のＴＣが割り当てられない。

【0009】

本発明は、６０ｆｐｓを超えるフレームレートの映像フォーマットの場合にも、各フレームを一意に識別できるＴＣの符号化方法、ＴＣ信号発生装置、動画記録再生装置及び動画編集装置を提供することを目的とする。

【課題を解決するための手段】

【0010】

本発明に係る符号化方法は、映像データを処理するコンピュータが所定のフレーム周波数を持つ映像フォーマットの時間同期をとるために、当該映像フォーマットのフレーム毎に割り当てられたタイムコードを符号化する符号化方法であって、１２０ｆｐｓの映像フォーマットの場合に、０から２９までのフレーム番号それぞれに対して、６０ｆｐｓの場合の２つのサブフレーム識別子を含む４つのサブフレーム識別子を順に付与し、当該４つのサブフレーム識別子を、２ビットの符号で表現し、かつ、上位ビットを６０ｆｐｓの場合の１ビットと共通にする構成である。

【0011】

この構成によれば、６０ｆｐｓの映像フォーマットで用いられるタイムコードを継承して、１２０ｆｐｓの映像フォーマットに対しても、各フレームに固有のタイムコードが割り当てられて符号化される。これにより、１２０ｆｐｓの映像素材に対して、フレーム精度でのインデキシング、編集及び同期再生等が可能となる。
さらに、このタイムコードは、６０ｆｐｓの映像フォーマットのタイムコードと上位ビットが共通であることにより高い互換性がある。これにより、例えば、１２０ｆｐｓの映像を６０ｆｐｓに容易にダウンコンバートでき、また、変換後も容易にこの映像素材を取り扱うことができる。

【0012】

前記４つのサブフレーム識別子を表現する符号を、順に、００、０１、１１、１０としてもよい。

【0013】

この構成によれば、６０ｆｐｓの映像フォーマットにおけるサブフレーム識別子に対応する符号間距離が最大となり、補完された１２０ｆｐｓ用のサブフレーム識別子に対応する符号間距離も最大となる。したがって、符号化されたタイムコードがランダムノイズを含む有線又は無線で伝送された場合に、符号誤りが起こり難く、正確に伝送される。

【0014】

本発明に係る符号化方法は、映像データを処理するコンピュータが所定のフレーム周波数を持つ映像フォーマットの時間同期をとるために、当該映像フォーマットのフレーム毎に割り当てられたタイムコードを符号化する符号化方法であって、３０×２^ｎｆｐｓ（ｎは２以上の整数）の映像フォーマットの場合に、０から２９までのフレーム番号それぞれに対して、２^ｎ個のサブフレーム識別子を付与し、当該サブフレーム識別子を、ｎビットの符号で表現し、かつ、上位ビットを３０×２^ｎ−１ｆｐｓの場合のｎ−１ビットと共通にする構成である。

【0015】

この構成によれば、３０×２^ｎ−１ｆｐｓの映像フォーマットで用いられるタイムコードを継承して、３０×２^ｎｆｐｓの映像フォーマットに対しても、各フレームに固有のタイムコードが割り当てられて符号化される。これにより、６０ｆｐｓを超える映像素材に対して、フレーム精度でのインデキシング、編集及び同期再生等が可能となる。
さらに、このタイムコードの符号化方法は、自身よりも低いフレーム周波数（３０×２^ｎ−１ｆｐｓ）のタイムコードと上位ビットが共通であることにより高い互換性がある。これにより、例えば、高いフレーム周波数の映像を容易にダウンコンバートでき、また、変換後も容易にこの映像素材を取り扱うことができる。

【0016】

本発明に係るタイムコード信号発生装置は、上記の符号化方法によって符号化されたタイムコードを順次発生させる構成である。

【0017】

本発明に係る動画記録再生装置は、上記の符号化方法によって符号化されたタイムコードが割り当てられた動画データを記録又は再生する構成である。

【0018】

本発明に係る動画編集装置は、上記の符号化方法によって符号化されたタイムコードによって編集対象のフレームを一意に識別する構成である。

【発明の効果】

【0019】

本発明によれば、６０ｆｐｓを超えるフレームレートの映像フォーマットの場合にも、各フレームを一意に識別できる。

【図面の簡単な説明】

【0020】

【図1】実施形態に係るＴＣの割り当て方法を例示する図である。

【図2】実施形態に係るバイナリデータ配置を例示する図である。

【図3】実施形態に係るＴＣの配置を示す概念図である。

【図4】実施形態に係るＴＣの表示例を示す図である。

【図5】実施形態に係る動画記録再生装置の構成を示す図である。

【図6】実施形態に係る映像フォーマット間の対応付けを例示する図である。

【発明を実施するための形態】

【0021】

以下、本発明の実施形態の一例について説明する。
映像データを処理するコンピュータは、所定のフレーム周波数を持つ映像フォーマットの時間同期をとるために、この映像フォーマットのフレーム毎に固有のＴＣを割り当てる。

【0022】

例えば、３０Ｐ（３０ｆｐｓ、プログレッシブ）のような３０ｆｐｓの映像フォーマットの場合、１秒当たり０ｆ（Ｆｒａｍｅ）〜２９ｆの３０フレーム分のＴＣが割り当てられる。また、６０ｉ（インタレース）又は６０Ｐ（プログレッシブ）のような６０ｆｐｓの映像フォーマットの場合、１秒当たり０ｆ−Ｏｄｄ、０ｆ−Ｅｖｅｎ、１ｆ−Ｏｄｄ、１ｆ−Ｅｖｅｎ、・・・、２９ｆ−Ｏｄｄ、２９ｆ−Ｅｖｅｎのように、３０枚のメインフレームのそれぞれに対して２枚のサブフレーム（Ｏｄｄ／Ｅｖｅｎ）があるものとして、合計で６０フレーム分のＴＣが割り当てられる。

【0023】

６０ｆｐｓを超えるフレーム周波数を持つ映像フォーマットの場合に、６０ｆｐｓ以下のフレーム周波数（例えば、６０ｆｐｓ）を持つ映像フォーマットで用いられるＴＣの間を補完するサブフレーム識別子が付与される。これにより、６０ｆｐｓ以下のフレーム周波数を持つ映像フォーマットで用いられるＴＣとの互換性を保ち、かつ、各フレーム（サブフレーム）が一意に識別される。

【0024】

図１は、本実施形態に係るＴＣの割り当て方法を例示する図である。
この例では、１２０ｆｐｓで撮像され表示される動画の場合に、各フレームに対して同期運転や記録のためにＴＣを割り当てる方法を示している。

【0025】

１２０ｆｐｓの映像フォーマットの場合に、１秒間に相当する１２０枚のフレームは、まず、００から２９までのフレーム番号にグループ化される。そして、０から２９までのフレーム番号それぞれに対して、６０ｆｐｓの場合の２つのサブフレーム識別子（Ｏｄｄ／Ｅｖｅｎ）を含む４つのサブフレーム識別子（Ｏｄｄ／Ｑｕａｔｅｒ／Ｅｖｅｎ／Ｔｈｒｅｅ−Ｑｕａｒｔｅｒｓ）が順に付与される。これにより、１秒当たり１２０フレームの全てに固有のＴＣが割り当てられる。

【0026】

また、これら４つのサブフレーム識別子（Ｏｄｄ／Ｑｕａｔｅｒ／Ｅｖｅｎ／Ｔｈｒｅｅ−Ｑｕａｒｔｅｒｓ）は、バイナリ（デジタル）データで表現される場合、２ビットに符号化されてコンピュータ処理される。
このとき、２ビットの一方、例えば上位ビットは、６０ｆｐｓの場合の１ビットと共通である。具体的には、４つのサブフレーム識別子を表現する符号は、順に、００、０１、１１、１０とされる。これにより、１２０ｆｐｓの映像フォーマットに割り当てられたＴＣの半数が、６０ｆｐｓの場合のＯｄｄ（符号：０）及びＥｖｅｎ（符号：１）と共通化されるので、互換性が保たれる。

【0027】

ＳＤＩ伝送フォーマットで送信されるデジタルビデオストリームの補助領域（アンセラリデータ）に重畳するＴＣ、例えば、コードワード長が８０ビットで構成されるＬＴＣ、又は９０ビットで構成されるＶＩＴＣ等について、上述の符号化が適用可能である。さらに、例えば、ＭＸＦ（Ｍａｔｅｒｉａｌ Ｅｘｃｈａｎｇｅ Ｆｏｒｍａｔ）ファイルにラップされ、ＫＬＶ（Ｋｅｙ Ｌｅｎｇｔｈ Ｖａｌｕｅ）構造を持つメタデータの中に付与されたＴＣについても同様である。

【0028】

図２は、本実施形態に係るバイナリデータ配置を例示する図である。
この例は、ＳＭＰＴＥ １２Ｍ規格における１１２５／６０テレビフォーマットのＶＩＴＣを表現するためのバイナリデータ配置である。

【0029】

サブフレーム識別子は、任意のビット割り当てが可能なバイナリグループのうち、Ｏｄｄ／Ｅｖｅｎを表現するためのビット（３５ビット目の「フィールド表示マーク」）が「Ｏｄｄ：０、Ｅｖｅｎ：１」で表現される場合、続くバイナリグループビット（３６ビット目）に符号を付加して、計２ビットで表現される。
これにより、「Ｏｄｄ：００、Ｑｕａｒｔｅｒ：０１、Ｅｖｅｎ：１１、Ｔｈｒｅｅ−Ｑｕａｒｔｅｒｓ：１０」と表現される。

【0030】

これにより、１２０ｆｐｓフォーマットの動画と、３０Ｐ、６０ｉ、６０Ｐ動画との混合編集を行う際に、ビットの互換性が保たれる。
また、Ｏｄｄ及びＥｖｅｎについて、２ビット目を１ビット目に揃えることにより、両者のユークリッド距離を最大、すなわち全てのビットを反転した関係にする。これにより、例えば、これらの符号を、ランダムノイズを含む有線又は無線で伝送した場合に、符号誤りが起こり難く、正確に伝送される。

【0031】

さらに、Ｑｕａｒｔｅｒを「０１」とすることで「Ｏｄｄ：００」に隣接した表記となり、また、Ｔｈｒｅｅ−Ｑｕａｒｔｅｒｓを「１０」とすることで、「Ｅｖｅｎ：１１」に隣接した表記となる。これらＱｕａｒｔｅｒ及びＴｈｒｅｅ−Ｑｕａｒｔｅｒｓの符号のユークリッド距離が最大となることで、Ｏｄｄ及びＥｖｅｎの場合と同様に、符号誤りが起こり難くなる。

【0032】

図３は、本実施形態に係る１２０ｆｐｓの映像フォーマットにおけるＴＣの配置を示す概念図である。

【0033】

１２０ｆｐｓにおけるＴＣは、円周上で、３０ｆｐｓのフレーム情報に対して位相を９０度ずつずらした等間隔の配置として表現できる。具体的には、ｘｆ−Ｏｄｄは０度、ｘｆ−Ｑｕａｒｔｅｒは９０度、ｘｆ−Ｅｖｅｎは１８０度、ｘｆ−Ｔｈｒｅｅ−Ｑｕａｒｔｅｒｓは２７０度に配置される。

【0034】

そして、ＯｄｄとＥｖｅｎとが対向し、ＱｕａｒｔｅｒとＴｈｒｅｅ−Ｑｕａｒｔｅｒｓとが対向しているので、それぞれの組み合わせのユークリッド距離が最大となるように、サブフレームＯｄｄ／Ｑｕａｒｔｅｒ／Ｅｖｅｎ／Ｔｈｒｅｅ−Ｑｕａｒｔｅｒｓは、それぞれ、００／０１／１１／１０と符号化される。

【0035】

また、サブフレーム識別子のＯｄｄ／Ｑｕａｒｔｅｒ／Ｅｖｅｎ／Ｔｈｒｅｅ−Ｑｕａｒｔｅｒｓのそれぞれに対して、互いに異なる表示用キャラクタ、例えば、Ｏ／Ｑ／Ｅ／Ｔが対応付けられている。これにより、１２０ｆｐｓの場合、フレーム情報は、ｘｆ−Ｏ、ｘｆ−Ｑ、ｘｆ−Ｅ、ｘｆ−Ｔ（ｘは０〜２９）のように表される。
したがって、ＴＣは、時間情報と共に、例えば、「１０ｈ１０ｍ１０ｓ１５ｆ−Ｏ」、「１０ｈ１０ｍ１０ｓ１５ｆ−Ｑ」、「１０ｈ１０ｍ１０ｓ１５ｆ−Ｅ」、「１０ｈ１０ｍ１０ｓ１５ｆ−Ｔ」のように順に表記される。

【0036】

図４は、本実施形態に係る動画編集装置におけるＴＣの表示例を示す図である。
動画編集作業又は音入れ作業等の業務の際には、映像にＴＣが重畳して、又は映像の近傍にＴＣが表示される。作業者は、Ｏ、Ｑ、Ｅ、Ｔの記号によってサブフレームを容易に視認でき、効率的に作業できる。
また、フレームレートが異なる複数の映像を編集する場合にも、サブフレーム識別子の少なくとも一部（例えば、Ｏ／Ｅ）が共通しているため、時間同期がとれ、作業が効率化される。

【0037】

次に、１２０ｆｐｓ以外のフレームレートの場合について説明する。
３０×２^ｎｆｐｓ（ｎは２以上の整数）の映像フォーマットの場合、０から２９までのフレーム番号それぞれに対して、３０×２^ｎ−１ｆｐｓの場合のサブフレーム識別子を含む２^ｎ個のサブフレーム識別子を付与する。
この場合、サブフレーム識別子は、ｎビットの符号で表現される。上述の１２０ｆｐｓの場合と同様に、これらのビットは、任意のバイナリグループビット（図２）に割り当て可能である。

【0038】

また、この場合、サブフレーム識別子を示すｎビットの符号のうち、上位ビットを３０×２^ｎ−１ｆｐｓの場合のｎ−１ビットと共通にする。例えば、２４０ｆｐｓの場合、１２０ｆｐｓで使用される２ビットとの互換性を保ちつつ、３ビット目が割り当てられる。
このとき、２^ｎ個のサブフレーム識別子を順に円周上に等間隔で配置した場合に対向するサブフレーム識別子同士を、ユークリッド距離が最大となるように符号化する。

【0039】

３０×ｍｆｐｓ（ｍは３以上の整数）の映像フォーマットの場合、０から２９までのフレーム番号それぞれに対して、ｍ個のサブフレーム識別子を付与する。
この場合、サブフレーム識別子は、
３０×ｍｆｐｓ≦３０×２^ｎｆｐｓ（ｎは整数）
の関係が成り立つ最小のｎビットの符号で表現される。例えば、１８０（＝３０×６）ｆｐｓの場合、
３０×２^２≦１８０≦３０×２^３
の関係が成り立つので、３ビットで符号化される。

【0040】

２４×ｍｆｐｓ（ｍは３以上の整数）の映像フォーマットの場合、０から２３までのフレーム番号それぞれに対して、ｍ個のサブフレーム識別子を付与する。
この場合、サブフレーム識別子は、
２４×ｍｆｐｓ≦２４×２^ｎｆｐｓ（ｎは整数）
の関係が成り立つ最小のｎビットの符号で表現される。例えば、２４０（＝２４×１０）ｆｐｓの場合、
２４×２^３≦２４０≦２４×２^４
の関係が成り立つので、４ビットで符号化される。

【0041】

なお、従来のテレビ映像フォーマットにおけるＮＤＦ（Ｎｏ Ｄｒｏｐ Ｆｒａｍｅ）モードの３０ｆｐｓ、及びＤＦ（Ｄｒｏｐ Ｆｒａｍｅ）モードの２９．９７ｆｐｓと同様に、１２０ｆｐｓの映像フォーマットの場合も、ＮＤＦモード（１２０ｆｐｓ）及びＤＦモード（例えば、１１９．８８ｆｐｓ）の各モードが考えられる。この場合にも、互換性が保たれているので、３０ｆｐｓ又は６０ｆｐｓの場合と同様に、１０分毎の００、１０、２０、３０、４０、５０分を除く毎分の０ｆ及び１ｆの２フレーム分を落とす方法により、ＴＣが割り当てられる。

【0042】

図５は、本実施形態に係る動画記録再生装置１の構成を示す図である。
動画記録再生装置１は、入力部１０と、ＴＣ信号発生部２０と、記録再生部３０と、伝送部４０と、出力部５０とを備える。

【0043】

入力部１０には、撮像された映像又は収録された音声、あるいは別の再生装置から送信された映像又は音声が入力される。
このとき、同期のマスタ機器となるジェネレータから、ＴＣが入力され、ＴＣ信号発生部２０がスレーブ機器として動作してもよい。

【0044】

ＴＣ信号発生部２０は、例えば、１２０ｆｐｓのＴＣを順に生成し、記録再生部３０へ提供する。
なお、動画記録再生装置１が複数のフレームレートに対応する場合、フレームレートを示すフラグが映像と共に入力されてもよいし、切り替えスイッチ等の操作によってユーザにより指定されてもよい。

【0045】

記録再生部３０は、入力部１０を介して入力された映像又は音声のそれぞれを記録し、再生した信号を、出力部５０を介して外部機器へ出力する。
このとき、記録再生部３０は、入力された映像又は音声にＴＣが割り当てられていなければ、ＴＣ信号発生部２０から受信したＴＣを、映像フレーム及び音声データに対して順に割り当てて記録する。

【0046】

伝送部４０は、映像信号、音声信号及びＴＣ信号を、それぞれ単独で、又はＨＤ−ＳＤＩインタフェース等により多重化して伝送する。
動画再生時には、記録再生部３０は、映像信号、音声信号及びＴＣ信号を同期させながら、伝送部４０により出力部５０を介して出力する。

【0047】

また、動画編集装置においては、映像及び音声に割り当てられたＴＣに基づいて、任意のフレームからフレームまでを一意に選別し、カット等の編集が可能である。
さらに、上述のように６０ｆｐｓを超えるフレームレートの映像フォーマットに対してＴＣが割り当てられると、フレームレートが異なる複数の映像素材を混合編集することができる。

【0048】

図６は、本実施形態に係る異なるフレームレートの映像フォーマット間の対応付けを例示する図である。
この例は、１２０ｆｐｓのＴＣと６０ｆｐｓ（例えば、６０ｉ、６０Ｐ）のＴＣとの対応付けを示している。

【0049】

上述のように、１２０ｆｐｓの映像には、１秒間のうち、０フレーム（ｆ）から２９フレームに、それぞれＯｄｄ／Ｑｕａｒｔｅｒ／Ｅｖｅｎ／Ｔｈｒｅｅ−Ｑｕａｒｔｅｒｓの４つのサブフレーム識別子が付与されたＴＣが割り当てられる。また、６０ｆｐｓの映像には、１秒間のうち、０フレーム（ｆ）から２９フレームに、それぞれＯｄｄ／Ｅｖｅｎの２つのサブフレーム識別子が付与されたＴＣが割り当てられる。

【0050】

このとき、１２０ｆｐｓの映像フレームのうち、先頭のサブフレーム（Ｏｄｄ）と、１つ飛んだ３番目のサブフレーム（Ｅｖｅｎ）を選択することで、６０ｆｐｓの場合のＴＣと同様に扱うことができる。すなわち、Ｏｄｄ及びＥｖｅｎのサブフレームのみを選択することにより、１２０ｆｐｓの映像と６０ｆｐｓの映像とが対応付けられ、同一のフレーム番号及びサブフレーム識別子によりカット編集が可能となる。

【0051】

このとき、１２０ｆｐｓの映像については、１つ飛びのフレームを使用するため、６０ｆｐｓの映像と同様の時間解像度の映像データが得られる。したがって、混合編集後に、６０ｆｐｓの映像データが容易に得られる。つまり、複数のフレームレートの間でＴＣに互換性があり、編集によって時間方向の解像度が劣化しない。

【0052】

なお、３０ｆｐｓ（例えば、３０Ｐ）の場合は、Ｏｄｄのみを使用することにより、同様に６０ｆｐｓ又は１２０ｆｐｓと互換性が保たれ、編集により時間方向の解像度は劣化しない。

【0053】

以上のように、本実施形態によれば、６０ｆｐｓよりも大きい、例えば、１２０ｆｐｓの高フレームレートの映像素材に対し、映像編集等の作業を行うためのＴＣがフレーム単位で割り当てられるので、フレーム精度での編集及びインデキシングが可能となる。これにより、６０ｆｐｓを超える高フレームレートの映像素材を、容易に精度良く編集することができる。

【0054】

また、個別のフレームに固有の記号Ｏ、Ｑ、Ｅ、Ｔが与えられるので、映像の上又は近傍にガイドでＴＣを表示しても、Ｏｄｄ、Ｑｕａｒｔｅｒ、Ｅｖｅｎ、Ｔｈｒｅｅ−Ｑｕａｒｔｅｒｓのいずれのフレームなのかが一目で判別され、映像編集作業、音入れ作業等の映像制作業務が効率的になる。

【0055】

また、６０ｆｐｓを超える映像フォーマットのＴＣは、従来の６０ｆｐｓ以下の映像フォーマットのＴＣと互換性があるので、６０ｆｐｓを超える映像を６０ｆｐｓ以下にダウンコンバートした後も容易にこの映像素材を取り扱うことができる。

【0056】

以上、本発明の実施形態について説明したが、本発明は前述した実施形態に限るものではない。また、本実施形態に記載された効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、本実施形態に記載されたものに限定されるものではない。

【0057】

なお、前述のＴＣの割り当て方法は、ソフトウェアにより実現される。ソフトウェアによって実現される場合には、このソフトウェアを構成するプログラムが、コンピュータにインストールされる。また、これらのプログラムは、ＣＤ−ＲＯＭのようなリムーバブルメディアに記録されてユーザに配布されてもよいし、ネットワークを介してユーザのコンピュータにダウンロードされることにより配布されてもよい。

【符号の説明】

【0058】

１ 動画記録再生装置
１０ 入力部
２０ ＴＣ信号発生部
３０ 記録再生部
４０ 伝送部
５０ 出力部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】