特許 7522326 情報処理システムおよび情報処理方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-07-16

(45)【発行日】2024-07-24

(54)【発明の名称】情報処理システムおよび情報処理方法

(51)【国際特許分類】

   H04N 5/222 20060101AFI20240717BHJP

   H04N 23/63 20230101ALI20240717BHJP

   G09G 3/20 20060101ALI20240717BHJP

   G09G 3/32 20160101ALI20240717BHJP

【ＦＩ】

H04N5/222 400

H04N23/63

G09G3/20 612T

G09G3/20 650J

G09G3/20 680E

G09G3/32 A

【請求項の数】 19

(21)【出願番号】P 2023564879

(86)(22)【出願日】2022-11-18

(86)【国際出願番号】 JP2022042794

(87)【国際公開番号】W WO2023100680

(87)【国際公開日】2023-06-08

【審査請求日】2024-06-04

(31)【優先権主張番号】P 2021196611

(32)【優先日】2021-12-03

(33)【優先権主張国・地域又は機関】JP

【早期審査対象出願】

(73)【特許権者】

【識別番号】000002185

【氏名又は名称】ソニーグループ株式会社

(73)【特許権者】

【識別番号】316005926

【氏名又は名称】ソニーセミコンダクタソリューションズ株式会社

(74)【代理人】

【識別番号】100121131

【弁理士】

【氏名又は名称】西川 孝

(74)【代理人】

【氏名又は名称】稲本 義雄

(74)【代理人】

【識別番号】100168686

【弁理士】

【氏名又は名称】三浦 勇介

(72)【発明者】

【氏名】岡本 鋭造

(72)【発明者】

【氏名】江間 弘知

(72)【発明者】

【氏名】高宮 功治

(72)【発明者】

【氏名】山根 祥嗣

【審査官】櫃本 研太郎

(56)【参考文献】

【文献】米国特許出願公開第２０２２／０１０３７３８（ＵＳ，Ａ１）

【文献】中国特許出願公開第１１４７８３３５５（ＣＮ，Ａ）

【文献】中国特許出願公開第１１１８９９６８０（ＣＮ，Ａ）

【文献】中国特許出願公開第１０３３４７１４４（ＣＮ，Ａ）

【文献】特開２００９－０１０９０３（ＪＰ，Ａ）

【文献】特開２００６－２９５８５４（ＪＰ，Ａ）

【文献】特開２００１－２９２３３６（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ５／２２２

Ｈ０４Ｎ ２３／６３

Ｇ０９Ｇ ３／２０

Ｇ０９Ｇ ３／３２

(57)【特許請求の範囲】

【請求項1】

撮影機材同期信号に基づいて、前記撮影機材同期信号の周波数とは異なる第１のフレームレートの映像信号である入力映像信号に対して処理を行う信号処理部と、
前記入力映像信号に対する処理に基づいて、前記撮影機材同期信号の周波数とは異なるフレームレートの映像信号を出力する出力部と
を備え、
前記信号処理部は、前記撮影機材同期信号に基づいて、前記入力映像信号に対して、前記第１のフレームレートに基づいて設定された第２のフレームレートの前記映像信号であり、前記撮影機材同期信号に同期する出力映像信号を生成する処理を行う
ように構成された
情報処理システム。

【請求項2】

前記第２のフレームレートは、前記撮影機材同期信号の周波数の整数倍である
ように構成された
請求項１に記載の情報処理システム。

【請求項3】

前記第２のフレームレートは、前記第１のフレームレートとは異なるフレームレートである
ように構成された
請求項２に記載の情報処理システム。

【請求項4】

前記第２のフレームレートは、前記第１のフレームレートの整数倍である
ように構成された
請求項３に記載の情報処理システム。

【請求項5】

前記信号処理部は、前記入力映像信号を前記撮影機材同期信号に同期させ、フレームレートを整数倍にして結合することにより、前記出力映像信号を生成する
ように構成された
請求項４に記載の情報処理システム。

【請求項6】

前記信号処理部は、前記出力映像信号において、前記撮影機材同期信号の１周期に含まれる各フレームの垂直ブランキング期間を、前記撮影機材同期信号の１周期に含まれる最後のフレームの後に移動させる
ように構成された
請求項１に記載の情報処理システム。

【請求項7】

前記信号処理部により生成された前記出力映像信号に基づいて、前記第２のフレームレートの映像を表示部に表示させる表示制御部
をさらに備える
請求項１に記載の情報処理システム。

【請求項8】

前記入力映像信号を取得する入力部と、
前記信号処理部により生成された前記出力映像信号を、複数の表示ユニットから構成される表示部のそれぞれの表示ユニットに表示するための出力映像信号へ分割する分割部と
を備え、
前記出力部は、前記分割部により分割された前記出力映像信号を前記表示ユニットに出力する
ように構成された
請求項１に記載の情報処理システム。

【請求項9】

前記表示部は、第１の機器上に設けられ、
前記入力部、前記信号処理部、前記分割部、および前記出力部は、前記第１の機器とは異なる第２の機器上に設けられ、
前記第１の機器と前記第２の機器は、ケーブルで接続される
ように構成された
請求項８に記載の情報処理システム。

【請求項10】

前記表示部
をさらに備える
請求項８に記載の情報処理システム。

【請求項11】

前記表示部は、パッシブマトリクス駆動方式で発光する
ように構成された
請求項８に記載の情報処理システム。

【請求項12】

前記表示部は、行列状に配置されたLED（Light Emitting Diode）の画素から構成される
ように構成された
請求項８に記載の情報処理システム。

【請求項13】

前記撮影機材同期信号は、前記出力映像信号に基づく映像を表示する表示部を撮影する撮影部に入力される
ように構成された
請求項１に記載の情報処理システム。

【請求項14】

前記撮影部は、前記撮影機材同期信号に同期して、前記撮影機材同期信号の周波数を撮影映像のフレームレートとして前記表示部を撮影する
ように構成された
請求項１３に記載の情報処理システム。

【請求項15】

前記撮影部は、ローリングシャッタ方式で撮影を行う
ように構成された
請求項１３に記載の情報処理システム。

【請求項16】

前記撮影機材同期信号を生成する信号生成部は、前記入力映像信号を前記信号処理部に供給する映像信号供給部に、前記第１のフレームレートと同一の周波数のフレーム同期信号を入力する
ように構成された
請求項１に記載の情報処理システム。

【請求項17】

前記映像信号供給部は、前記フレーム同期信号に同期して、前記信号処理部に前記入力映像信号を供給する
ように構成された
請求項１６に記載の情報処理システム。

【請求項18】

前記撮影機材同期信号のフレームレートは23.98Hzである
ように構成された
請求項１に記載の情報処理システム。

【請求項19】

情報処理システムが、
撮影機材同期信号に基づいて、前記撮影機材同期信号の周波数とは異なる第１のフレームレートの映像信号である入力映像信号に対して処理を行う信号処理ステップと、
前記入力映像信号に対する処理に基づいて、前記撮影機材同期信号の周波数とは異なるフレームレートの映像信号を出力する出力ステップと
を含み、
前記信号処理ステップの処理では、前記撮影機材同期信号に基づいて、前記入力映像信号に対して、前記第１のフレームレートに基づいて設定された第２のフレームレートの前記映像信号であり、前記撮影機材同期信号に同期する出力映像信号を生成する処理を行う
情報処理方法。

【発明の詳細な説明】

【技術分野】

【0001】

本技術は、情報処理システムおよび情報処理方法に関し、特に、撮影機材同期信号に基づいて、撮影機材同期信号の周波数とは異なるフレームレートの映像信号に対して処理を行うことができるようにした情報処理システムおよび情報処理方法に関する。

【背景技術】

【0002】

近年、LED（Light Emitting Diode）ディスプレイなどの直視型ディスプレイの市場が拡大している。例えば、コンテンツ制作現場で風景などの背景をLEDディスプレイに表示させることで再現し、その背景と被写体をカメラで撮影（再撮）するバーチャルプロダクション（Virtual Production）が急成長している。

【0003】

このようなバーチャルプロダクションでは、黒帯発生の抑制などを目的として、LEDディスプレイに表示される映像である表示映像とカメラにより再撮される映像である再撮映像の同期をとる必要がある。この同期は、ゲンロック（Gen Lock）信号などの撮影機材同期信号を用いて行われる。なお、撮影により得られる映像信号をゲンロック信号に同期させて出力するカメラ装置については、例えば特許文献１に記載されている。

【0004】

一方、バーチャルプロダクションにおいて、再撮映像のフレームレートに対して、表示映像のフレームレートを高速化し、再撮環境における表示映像のレイテンシを軽減したいという要望がある。例えば、カメラの再撮映像のフレームレートが24fpsである場合に、60fpsや120fpsの映像をLEDディスプレイに表示させたいという要望がある。

【0005】

しかしながら、通常の装置は、撮影機材同期信号に基づいて、撮影機材同期信号の周波数と同一のフレームレートの映像信号に対して処理を行うものであり、撮影機材同期信号の周波数とは異なるフレームレートの映像信号に対して処理を行うことは困難である。従って、例えば、カメラの再撮映像のフレームレートと同一の周波数の撮影機材同期信号により再撮映像と表示映像の同期がとられる場合、撮影機材同期信号に基づいて、再撮映像のフレームレートとは異なるフレームレートの映像信号に基づく映像を表示させることは困難である。

【先行技術文献】

【特許文献】

【0006】

【文献】特開２０１１－２３４３４７号公報

【発明の概要】

【発明が解決しようとする課題】

【0007】

以上により、撮影機材同期信号に基づいて、撮影機材同期信号の周波数とは異なるフレームレートの映像信号に対して処理を行うことが要望されているが、そのような要望に十分にこたえられていない状況である。

【0008】

本技術は、このような状況に鑑みてなされたものであり、撮影機材同期信号に基づいて、撮影機材同期信号の周波数とは異なるフレームレートの映像信号に対して処理を行うことができるようにするものである。

【課題を解決するための手段】

【0009】

本技術の一側面の情報処理システムは、撮影機材同期信号に基づいて、前記撮影機材同期信号の周波数とは異なる第１のフレームレートの映像信号である入力映像信号に対して処理を行う信号処理部と、前記入力映像信号に対する処理に基づいて、前記撮影機材同期信号の周波数とは異なるフレームレートの映像信号を出力する出力部とを備え、前記信号処理部は、前記撮影機材同期信号に基づいて、前記入力映像信号に対して、前記第１のフレームレートに基づいて設定された第２のフレームレートの前記映像信号であり、前記撮影機材同期信号に同期する出力映像信号を生成する処理を行うように構成された情報処理システムである。

【0010】

本技術の一側面の情報処理方法は、情報処理システムが、撮影機材同期信号に基づいて、前記撮影機材同期信号の周波数とは異なる第１のフレームレートの映像信号である入力映像信号に対して処理を行う信号処理ステップと、前記入力映像信号に対する処理に基づいて、前記撮影機材同期信号の周波数とは異なるフレームレートの映像信号を出力する出力ステップとを含み、前記信号処理ステップの処理では、前記撮影機材同期信号に基づいて、前記入力映像信号に対して、前記第１のフレームレートに基づいて設定された第２のフレームレートの前記映像信号であり、前記撮影機材同期信号に同期する出力映像信号を生成する処理を行う情報処理方法である。

【0011】

本技術の一側面においては、撮影機材同期信号に基づいて、前記撮影機材同期信号の周波数とは異なる第１のフレームレートの映像信号である入力映像信号に対して処理が行われ、前記入力映像信号に対する処理に基づいて、前記撮影機材同期信号の周波数とは異なるフレームレートの映像信号が出力される。前記入力映像信号に対する処理では、前記撮影機材同期信号に基づいて、前記入力映像信号に対して、前記第１のフレームレートに基づいて設定された第２のフレームレートの前記映像信号であり、前記撮影機材同期信号に同期する出力映像信号を生成する処理が行われる。

【0012】

なお、情報処理システムは、独立した装置であってもよいし、他の装置に組み込まれるモジュールであってもよいし、複数の装置により構成されてもよい。

【0013】

本技術の一側面の情報処理システムは、コンピュータにプログラムを実行させることにより実現することができる。

【0014】

また、本技術の一側面の情報処理システムを実現するために、コンピュータに実行させるプログラムは、伝送媒体を介して伝送することにより、又は、記録媒体に記録して、提供することができる。

【図面の簡単な説明】

【0015】

【図1】本技術を適用した再撮システムの一実施の形態の概要を説明する図である。

【図2】ビデオカメラにより再撮された映像を示す図である。

【図3】再撮システムの構成例を示す図である。

【図4】ビデオカメラの構成例を示すブロック図である。

【図5】ＰＣのハードウエアの構成例を示すブロック図である。

【図6】ビデオウォールコントローラの構成例を示すブロック図である。

【図7】表示ユニットの詳細構成例を示すブロック図である。

【図8】LEDアレイの構成例を示す図である。

【図9】出力映像信号生成処理を説明するタイミングチャートを示す図である。

【図10】黒帯が発生する原因を説明する図である。

【図11】垂直ブランキング期間の制御の効果を説明する図である。

【図12】映像信号処理を説明するフローチャートである。

【図13】再撮システムの一例を示す図である。

【図14】図１３のビデオウォールコントローラによる処理を説明するタイミングチャートを示す図である。

【図15】再撮システムの他の一例を示す図である。

【図16】再撮システムのさらに他の一例を示す図である。

【図17】図１６のビデオウォールコントローラによる処理を説明するタイミングチャートを示す図である。

【発明を実施するための形態】

【0016】

以下、本技術を実施するための形態（以下、実施の形態という）について説明する。なお、説明は以下の順序で行う。
１．一実施の形態（再撮システム）
２．ビデオウォールコントローラがゲンロック信号に基づいてゲンロック信号の周波数とは異なるフレームレートの映像信号に対して処理を行うことができない場合について

【0017】

なお、以下の説明で参照する図面において、同一又は類似の部分には同一又は類似の符号を付している。

【0018】

＜一実施の形態＞
＜再撮システムの概要＞
図１は、本技術を適用した情報処理システムを含む再撮システムの一実施の形態の概要を説明する図である。

【0019】

図１に示すように、再撮システム１０は、例えばバーチャルプロダクションに用いられるシステムであり、ビデオカメラ１１とビデオウォール１２を含む。撮影者２１は、ビデオカメラ１１を用いて、スタジオ２２に設置されたビデオウォール１２に表示される映像２３を背景として、被写体であるバイク２４を再撮する。

【0020】

＜再撮された映像の例＞
図２は、図１のビデオカメラ１１により再撮された映像を示す図である。

【0021】

図２に示すように、ビデオカメラ１１により再撮された映像３０は、バイク２４が、あたかも映像２３が撮影された場所に存在するかのような映像となる。このように、撮影者２１は、再撮システム１０を用いて再撮を行うことにより、バイク２４が、あたかも映像２３が撮影された場所に存在するかのような映像３０をスタジオ２２で撮影することができる。

【0022】

＜再撮システムの構成例＞
図３は、再撮システム１０の構成例を示す図である。

【0023】

図３に示すように、再撮システム１０（情報処理システム）は、ビデオカメラ１１およびビデオウォール１２のほか、ビデオサーバ６１、ＰＣ（パーソナルコンピュータ）６２、ビデオウォールコントローラ６３、およびクロック生成器６４により構成される。

【0024】

ビデオカメラ１１は、ローリングシャッタ方式で撮影を行う撮影装置である。ビデオカメラ１１は、撮影者２１からの撮影開始指示により、ビデオウォール１２に表示されている映像を背景として撮影（再撮）する。この撮影は、クロック生成器６４から入力される撮影機材同期信号としてのゲンロック信号に同期して、ゲンロック信号の周波数をビデオカメラ１１の再撮映像（撮影映像）のフレームレートとして行われる。本明細書では、ゲンロック信号の周波数は、映画のフレームレートとして一般的な23.98(24)Hzであるものとするが、これに限定されない。なお、再撮システム１０では、ビデオカメラ１１と同様のビデオカメラが複数台使用されてもよい。

【0025】

ビデオウォール１２（表示部）は、ｎ個（ｎは正の整数）の表示ユニット（キャビネット）４１－１乃至４１－ｎがタイル状に配置された大型のLEDディスプレイである。図３では、ｎが６×２４個である場合について図示している。なお、以下では、表示ユニット４１－１乃至４１－ｎを個々に区別する必要がない場合、単に、表示ユニット４１と称する。

【0026】

表示ユニット４１は、各画素に対応するLED（図示せず）が行列状（２次元アレイ状）に配置された、ｍ個（ｍは正の整数）のLEDアレイ５１－１乃至５１－ｍがタイル状に配置されることにより構成される。図３では、ｍが４×３個である場合について図示している。なお、以下では、LEDアレイ５１－１乃至５１－ｍを個々に区別する必要がない場合、単に、LEDアレイ５１と称する。

【0027】

ビデオウォール１２（第１の機器）の各表示ユニット４１は、LAN（Local Area Network）ケーブルなどのケーブルで、ビデオウォールコントローラ６３（第２の機器）に接続される。ビデオウォール１２は、ビデオウォールコントローラ６３から供給されるフレーム単位の映像信号に基づいて、その映像信号に対応する映像をフレーム単位で表示する。具体的には、各表示ユニット４１に供給される映像信号は、その表示ユニット４１のビデオウォール１２上の位置に対応する映像信号である。各表示ユニット４１が、その映像信号に基づく映像を表示することにより、ビデオウォール１２全体として１フレームの映像が表示される。

【0028】

ビデオサーバ６１は、例えばサーバコンピュータなどからなり、ビデオコンテンツ等のフレーム単位の映像信号を記憶する。この映像信号のフレームレートは、ゲンロック信号の周波数とは異なる。本実施の形態では、映像信号のフレームレートは59.94(60)fpsであるものとするが、これに限定されず、119.88(120)fps等であってもよい。ビデオサーバ６１（映像信号供給部）には、クロック生成器６４から、映像信号のフレームレートと同一の周波数のフレーム同期信号が入力される。ビデオサーバ６１は、そのフレーム同期信号に同期して、記憶しているフレーム単位の映像信号をビデオウォールコントローラ６３に供給する。

【0029】

ビデオサーバ６１の代わりに、HDD(Hard Disk Drive)やＢＤ（Blu-ray Disc）（登録商標）などの記録媒体からビデオウォールコントローラ６３にフレーム単位の映像信号が提供されるようにしてもよい。この場合、フレーム同期信号は、ビデオウォールコントローラ６３に入力され、ビデオウォールコントローラ６３がフレーム同期信号に同期して、記録媒体からフレーム単位の映像信号を読み出す。

【0030】

ＰＣ６２は、一般的な汎用のコンピュータである。ＰＣ６２は、ビデオウォールコントローラ６３を制御する制御コマンドを生成し、ビデオウォールコントローラ６３に送信することにより、ビデオウォールコントローラ６３を制御する。

【0031】

ビデオウォールコントローラ６３には、クロック生成器６４からゲンロック信号が入力される。ビデオウォールコントローラ６３（情報処理システム）は、ゲンロック信号およびＰＣ６２から供給される制御コマンドに基づいて、ビデオサーバ６１から入力されるフレーム単位の映像信号である入力映像信号に対して所定の信号処理を行う。例えば、ビデオウォールコントローラ６３は、ゲンロック信号に基づいて、入力映像信号に対して、ゲンロック信号に同期する、入力映像信号のフレームレートである入力フレームレート（第１のフレームレート）に基づいて設定されたフレームレートである出力フレームレート（第２のフレームレート）の映像信号を生成する出力映像信号生成処理を行う。出力フレームレートは、ゲンロック信号の周波数とは異なり、例えば、ゲンロック信号の周波数の整数倍に設定される。ビデオウォールコントローラ６３は、所定の信号処理の結果得られる出力映像信号を、表示ユニット４１の位置に応じてｎ個に分割し、各表示ユニット４１に送信する。

【0032】

クロック生成器６４（信号生成部）は、ゲンロック信号を生成し、ビデオカメラ１１とビデオウォールコントローラ６３に入力する。また、クロック生成器６４は、ゲンロック信号と開始タイミングが同期するフレーム同期信号を生成し、ビデオサーバ６１に入力する。

【0033】

なお、ビデオウォールコントローラ６３とビデオウォール１２とは、一体とした構成であってもよく、これらが一体となったディスプレイ装置であってもよい。また、ＰＣ６２、ビデオウォールコントローラ６３、およびビデオウォール１２は、一体とした構成であってもよく、これらが一体となったディスプレイ装置であってもよい。

【0034】

＜ビデオカメラの構成例＞
図４は、ビデオカメラ１１の構成例を示すブロック図である。

【0035】

図４のビデオカメラ１１は、入力部８１、設定部８２、駆動部８３、光学系８４、撮影部８５、信号処理部８６、モニタ８７、映像出力部８８、およびメモリ８９により構成される。

【0036】

入力部８１は、撮影者２１からの入力を受け付け、その入力内容を表す入力信号を生成する。例えば、撮影者２１は、撮影部８５において光（の強度）を信号電荷（の量）に変換する際のダイナミックレンジの制約を考慮し、入力部８１を操作して適切な露光時間を入力する。この場合、入力部８１は、その露光時間を表す入力信号を生成し、設定部８２に供給する。撮影者２１が入力部８１を操作して撮影開始指示を入力した場合、入力部８１は、撮影開始を表す入力信号を生成して、駆動部８３に供給する。

【0037】

設定部８２は、入力部８１からの入力信号に基づいて、その入力信号が表す露光時間等の撮影に関する各種の情報である撮影情報を設定する。設定部８２は、撮影情報を駆動部８３に供給する。

【0038】

駆動部８３は、図３のクロック生成器６４からゲンロック信号を取得する。駆動部８３は、入力部８１からの撮影開始指示に応じて、ゲンロック信号に同期してゲンロック信号の周波数と同一のフレームレートで設定部８２からの撮影情報に基づく撮影を行うように、撮影部８５の受光面に行列状に配置された各画素部を駆動する制御信号である駆動信号を生成する。駆動部８３は、その駆動信号を撮影部８５に出力する。

【0039】

光学系８４は、１枚または複数枚のレンズを有して構成され、被写体などからの光（入射光）を撮影部８５に導き、撮影部８５の受光面に結像させる。

【0040】

撮影部８５は、CMOS(Complementary Metal Oxide Semiconductor)イメージセンサ等により構成される。撮影部８５は、駆動部８３から供給される駆動信号にしたがって各画素部を駆動し、ローリングシャッタ方式で撮影を行う。具体的には、撮影部８５は、駆動部８３から供給される駆動信号にしたがって、各画素部に蓄積された電荷に応じた電気信号を行単位で出力する。そして、撮影部８５は、光学系８４を介して各画素部に入射される光に対応する電荷の蓄積を行単位で開始する。撮影部８５は、駆動部８３から供給される駆動信号にしたがって、設定部８２により設定された露光時間だけ蓄積された電荷に応じた電気信号を行単位で読み出し、列単位で信号処理部８６に転送する。以上のようにして、撮影部８５は、設定部８２により設定された露光時間で撮影を行う。

【0041】

信号処理部８６は、撮影部８５から転送された電荷に応じた電気信号に対して各種の信号処理を施し、所定のデジタルビデオフォーマットのフレーム単位の映像信号に変換する。このフレーム単位の映像信号は、モニタ８７や映像出力部８８に供給されたり、メモリ８９に供給されて記憶（記録）されたりする。モニタ８７は、信号処理部８６から供給されるフレーム単位の映像信号に基づいて、映像をフレーム単位で表示する。映像出力部８８は、信号処理部８６から供給されるフレーム単位の映像信号をビデオカメラ１１の外部に出力する。

【0042】

＜ＰＣの構成例＞
図５は、図３のＰＣ６２のハードウエアの構成例を示すブロック図である。

【0043】

図５のＰＣ６２において、CPU（Central Processing Unit）１０１，ROM（Read Only Memory）１０２，RAM（Random Access Memory）１０３は、バス１０４により相互に接続されている。

【0044】

バス１０４には、さらに、入出力インタフェース１０５が接続されている。入出力インタフェース１０５には、入力部１０６、出力部１０７、記憶部１０８、通信部１０９、及びドライブ１１０が接続されている。

【0045】

入力部１０６は、キーボード、マウス、マイクロフォンなどよりなる。出力部１０７は、ディスプレイ、スピーカなどよりなる。記憶部１０８は、ハードディスクや不揮発性のメモリなどよりなる。通信部１０９は、ネットワークインタフェースなどよりなる。ドライブ１１０は、磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリなどのリムーバブルメディア１１１を駆動する。

【0046】

以上のように構成されるＰＣ６２では、CPU１０１が、例えば、記憶部１０８に記憶されているプログラムを、入出力インタフェース１０５及びバス１０４を介して、RAM１０３にロードして実行することにより、各種の処理を行う。例えば、CPU１０１は、制御コマンドを生成し、その制御コマンドをビデオウォールコントローラ６３に送信するように通信部１０９を制御する。

【0047】

ＰＣ６２（CPU１０１）が実行するプログラムは、例えば、パッケージメディア等としてのリムーバブルメディア１１１に記録して提供することができる。また、プログラムは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の伝送媒体を介して提供することができる。

【0048】

ＰＣ６２では、プログラムは、リムーバブルメディア１１１をドライブ１１０に装着することにより、入出力インタフェース１０５を介して、記憶部１０８にインストールすることができる。また、プログラムは、有線または無線の伝送媒体を介して、通信部１０９で受信し、記憶部１０８にインストールすることができる。その他、プログラムは、ROM１０２や記憶部１０８に、あらかじめインストールしておくことができる。

【0049】

＜ビデオウォールコントローラの構成例＞
図６は、図３のビデオウォールコントローラ６３の構成例を示すブロック図である。

【0050】

ビデオウォールコントローラ６３は、LAN端子１５１、HDMI（High Definition Multimedia Interface）（登録商標）端子１５２、ＤＰ（Display Port）端子１５３、DVI（Digital Visual Interface）端子１５４、ネットワークＩＦ（Interface）１５５、MPU（Micro Processor Unit）１５６、信号入力ＩＦ１５７、信号処理部１５８、DRAM（Dynamic Random Access Memory）１５９、分配部１６０、および信号出力ＩＦ１６１－１乃至１６１－ｎにより構成される。

【0051】

LAN端子１５１は、LANケーブルの接続端子であり、ＰＣ６２の通信部１０９に接続されるLANケーブルが接続されている。LAN端子１５１は、LANケーブルを介して制御コマンドを受信し、ネットワークＩＦ１５５を介してMPU１５６に供給する。

【0052】

MPU１５６は、ネットワークＩＦ１５５を介して供給される制御コマンドにしたがって、映像信号の調整を指示する映像調整信号を生成し、信号処理部１５８に供給する。

【0053】

HDMI端子１５２、ＤＰ端子１５３、およびDVI端子１５４は、いずれも入力映像信号の入力端子である。図６の例では、ビデオサーバ６１とHDMI端子１５２が接続されており、ビデオサーバ６１から供給される入力映像信号は、入力部としてのHDMI端子１５２に入力され、HDMI端子１５２により取得される。HDMI端子１５２に入力された入力映像信号は、信号入力ＩＦ１５７に供給される。

【0054】

なお、図６の例では、ビデオサーバ６１とHDMI端子１５２とが接続されるが、HDMI端子１５２、ＤＰ端子１５３、およびDVI端子１５４はいずれも規格が異なるのみであり、基本的には同様の機能を備えたものであるので、必要に応じて、そのいずれかが選択されて接続される。

【0055】

信号入力ＩＦ１５７は、HDMI端子１５２から供給される入力映像信号を所定のビデオフォーマットの入力映像信号に変換し、信号処理部１５８に供給する。

【0056】

信号処理部１５８は、必要に応じて、DRAM１５９とデータをやり取りしながら、MPU１５６から供給される映像調整信号に基づいて、信号入力ＩＦ１５７を介して供給される入力映像信号に対して、ビデオウォール１２全体に必要な信号処理を行う。具体的には、信号処理部１５８は、映像調整信号に基づいて、入力映像信号の色温度、コントラスト、ブライトネス等を調整する。信号処理部１５８は、クロック生成器６４から入力されるゲンロック信号に基づいて、調整後の入力映像信号に対して出力映像信号生成処理を行う。信号処理部１５８は、出力映像信号生成処理に基づいて生成された出力映像信号を分配部１６０に供給する。

【0057】

分配部１６０は、信号処理部１５８から供給される出力映像信号を、表示ユニット４１－１乃至４１－ｎにそれぞれ接続する信号出力ＩＦ１６１－１乃至１６１－ｎに分配する。具体的には、分配部１６０（分割部）は、出力映像信号を各表示ユニット４１の位置に応じてｎ個に分割し、各表示ユニット４１に表示するための出力映像信号とする。そして、分配部１６０は、各表示ユニット４１に表示するための出力映像信号を、その表示ユニット４１に接続する信号出力ＩＦ１６１－１乃至１６１－ｎのいずれかに供給する。なお、以下では、信号出力ＩＦ１６１－１乃至１６１－ｎを個々に区別する必要がない場合、単に、信号出力ＩＦ１６１と称する。

【0058】

信号出力ＩＦ１６１（出力部）は、分配部１６０から供給される出力映像信号を、自分にLANケーブルなどで接続されている表示ユニット４１に送信（出力）する。この送信の伝送媒体は、無線であってもよい。

【0059】

なお、ここでは、制御コマンドが、ＰＣ６２から自動的に送信されてくるものとするが、ビデオウォールコントローラ６３の要求に応じて送信されてくるようにしてもよい。

【0060】

＜表示ユニットの詳細構成例＞
図７は、図３の表示ユニット４１の詳細構成例を示すブロック図である。

【0061】

図７に示すように、表示ユニット４１は、ドライバ制御部１９１とLEDブロック１９２により構成される。

【0062】

ドライバ制御部１９１は、信号入力ＩＦ２１１、信号処理部２１２、DRAM２１３、信号出力ＩＦ２１４－１乃至２１４－ｍを備えている。

【0063】

信号入力ＩＦ２１１は、ビデオウォールコントローラ６３から送信されてくる出力映像信号を受信し、信号処理部２１２に供給する。

【0064】

信号処理部２１２は、必要に応じてDRAM２１３とデータのやり取りしながら、信号入力ＩＦ２１１から供給される出力映像信号に対して、自分の表示ユニット４１に個別に必要な信号処理を行う。具体的には、信号処理部２１２は、出力映像信号に対して、DRAM２１３に記憶されているカラーマトリクスLUT（Look Up Table）などを用いて、自分の表示ユニット４１に必要な色や輝度の補正を施す。信号処理部２１２は、信号処理後の出力映像信号を、自分の表示ユニット４１上の各LEDアレイ５１の位置に応じてｍ個に分割する。
信号処理部２１２は、LEDアレイ５１ごとに、分割された出力映像信号に基づいて、そのLEDアレイ５１を構成する各LEDの発光強度を設定するための表示信号をフレーム単位で生成する。

【0065】

信号処理部２１２には、LEDアレイ５１－１乃至５１－ｍそれぞれに対応する信号出力ＩＦ２１４－１乃至２１４－ｍが接続されている。なお、以下では、信号出力ＩＦ２１４－１乃至２１４－ｍを個々に区別する必要がない場合、単に、信号出力ＩＦ２１４という。信号処理部２１２は、LEDアレイ５１ごとに生成された出力フレームレートの表示信号を、そのLEDアレイ５１に対応する信号出力ＩＦ２１４に供給する。

【0066】

信号出力ＩＦ２１４は、信号処理部２１２から供給される出力フレームレートの表示信号をLEDブロック１９２に送信する。

【0067】

LEDブロック１９２は、LEDドライバ２２１－１乃至２２１－ｍおよびLEDアレイ５１－１乃至５１－ｍにより構成される。

【0068】

LEDドライバ２２１－１乃至２２１－ｍは、ドライバ制御部１９１の信号出力ＩＦ２１４－１乃至２１４－ｍとそれぞれ接続するとともに、LEDアレイ５１－１乃至５１－ｍとそれぞれ接続されている。なお、以下では、LEDドライバ２２１－１乃至２２１－ｍを個々に区別する必要がない場合、単に、LEDドライバ２２１という。

【0069】

LEDドライバ２２１（表示制御部）は、自分と接続する信号出力ＩＦ２１４から送信されてくる出力フレームレートの表示信号に基づいて、自分と接続するLEDアレイ５１を構成する各LEDの発光をPWM（Pulse Width Modulation）制御することにより、各LED２４１を駆動する。具体的には、LEDドライバ２２１は、LEDアレイ５１の各LED２４１が、そのLED２４１に対応する表示信号に基づく強度で発光するように、デジタル信号であるPWM信号を生成し、各LED２４１に供給する。その結果、LEDアレイ５１には、ビデオウォールコントローラ６３から出力された出力映像信号に対応する出力フレームレートの映像のうちの、そのLEDアレイ５１のビデオウォール１２上の位置に対応する映像が、ゲンロック信号に同期して表示される。

【0070】

＜LEDアレイの構成例＞
図８は、LEDアレイ５１の構成例を示す図である。

【0071】

図８に示すように、LEDアレイ５１は、パッシブマトリクス駆動方式で発光が制御される。

【0072】

具体的には、LEDアレイ５１は、ｐ×ｐ個（ｐは正の整数）のLED２４１、並びに、輝度制御配線（Sig line）２５１および行選択配線（Scan line）２５２により構成される。LED２４１は、Common Cathode型のLEDである。ｐ×ｐ個のLED２４１は、行方向（縦方向）にｐ個並び、列方向（横方向）にｐ個並んだ行列状に配置されている。図８の例では、LED２４１の行方向と列方向の数は同一のｐ個であるが、LED２４１の行方向と列方向の数は異なっていてもよい。

【0073】

輝度制御配線２５１は、LED２４１の各列に対して設けられ、各列のLED２４１には、同一の輝度制御配線２５１が接続される。行選択配線２５２は、LED２４１の各行に対して設けられ、各行のLED２４１には、同一の行選択配線２５２が接続される。

【0074】

LEDドライバ２２１は、所定の発光周期で上の行から順に行単位でLED２４１が発光するように、各行のLED２４１の発光タイミングを制御する。具体的には、LEDドライバ２２１は、各行のLED２４１の発光タイミングで、その行に対応する行選択配線２５２に所定の固定電位を印加する。なお、所定の固定電位としてはGND電位（０Ｖ電位）が一般的だが、この限りではない。

【0075】

LEDドライバ２２１はまた、信号出力ＩＦ２１４から供給される表示信号に基づいて、各行のLED２４１の発光タイミングで、その行の各LED２４１のPWM信号を、そのLED２４１の列に対応する輝度制御配線２５１に入力する。

【0076】

以上により、LEDアレイ５１では、各行のLED２４１の発光タイミングで、その行の各LED２４１が、そのLED２４１の表示信号に基づく輝度の光を発光する。その結果、LEDアレイ５１では、上の行から順に行単位で出力映像信号に対応する映像が表示され、この映像は、発光周期ごとにリフレッシュ（更新）される。この映像の表示（発光）フレームレートは、出力フレームレートである。

【0077】

＜出力映像信号生成処理の説明＞
図９は、図６の信号処理部１５８による出力映像信号生成処理を説明するタイミングチャートを示す図である。

【0078】

図９において、横軸は時間を表している。図９の例では、出力フレームレートは、入力フレームレートの２倍である119.88(120)fpsである。

【0079】

図９の上から１段目に示すように、ビデオサーバ６１に入力されるフレーム同期信号の周波数は、入力フレームレートと同一の59.94Hzである。図９の上から２段目に示すように、信号処理部１５８に入力される入力映像信号は、フレーム同期信号に同期するフレーム単位の信号である。このフレーム単位の信号は、フレーム単位の輝度や色を表す信号の区間の後に垂直ブランキング期間が設けられることにより構成される。

【0080】

なお、図９中、フレーム単位の輝度や色を表す信号の区間を示す矩形の中に付された数字とアルファベットは、その区間に対応するフレームが、入力映像信号のフレーム（以下、入力フレームという）のうちの、先頭から何番目の入力フレームかを表す。例えば、図９の上から２段目に示す入力映像信号の先頭の入力フレームは、Ｎ番目（Ｎは０以上の整数）の入力フレームである。また、図９中、垂直ブランキング期間を表す矩形には、斜線が付されている。これらのことは、後述する図１４および図１７においても同様である。

【0081】

図９の上から３段目に示すように、信号処理部１５８に入力されるゲンロック信号の周波数は23.98Hzである。信号処理部１５８は、ゲンロック信号が入力されると、このゲンロック信号に、図９の上から２段目に示す入力映像信号のＮ番目の入力フレームの先頭を同期させる。その結果得られる映像信号は、図９の上から４段目に示すようになる。

【0082】

次に、信号処理部１５８は、図９の上から４段目に示す映像信号に対して、その映像信号のフレームレートを整数倍（図９の例では２倍）にして結合する倍速処理を行うことにより、図９の上から５段目に示す出力映像信号を生成する。

【0083】

図９の例では、出力フレームレートが119.88fpsであるので、出力映像信号は、ゲンロック信号の１周期の間に、５(=119.88/23.98)フレーム分の出力フレームレートの映像信号を含む。例えば、図９の上から５段目に示す出力映像信号は、ゲンロック信号の先頭の周期において、出力フレームレートのＮ－１番目の入力フレームの映像信号を２回、Ｎ番目の入力フレームの映像信号を２回、およびＮ＋１番目の入力フレームの映像信号を１回含む。ゲンロック信号の２番目の周期においては、出力映像信号は、出力フレームレートのＮ＋１番目の入力フレームの映像信号を１回、Ｎ＋２番目の入力フレームの映像信号を２回、およびＮ＋３番目の入力フレームの映像信号を２回含む。以上のように、連続するＮ＋１番目の入力フレームの映像信号は、ゲンロック信号の先頭の周期と２番目の周期に跨がっている。

【0084】

次に、信号処理部１５８は、図９の上から５段目に示す出力映像信号の垂直ブランキング期間を制御し、その出力映像信号において、ゲンロック信号の１周期に含まれる各フレームの垂直ブランキング期間を、ゲンロック信号の１周期に含まれる最後のフレームの後に移動させる。これにより、図９の上から５段目に示す出力映像信号において、ゲンロック信号の先頭の周期に含まれる５フレーム分の垂直ブランキング期間が、その周期に含まれる最後のフレームであるＮ＋１番目の入力フレームの輝度や色を表す信号の区間の後にまとめて設けられる。ゲンロック信号の他の周期においても同様である。その結果得られる出力映像信号は、図９の上から６段目に示すようになる。

【0085】

以上のようにして生成された、図９の上から６段目に示す垂直ブランキング制御後の出力映像信号が、分配部１６０および信号出力ＩＦ１６１を介して表示ユニット４１に送信される。その結果、表示ユニット４１には、ゲンロック信号に同期して、出力フレームレートの映像が表示される。

【0086】

図９の例では、信号処理部１５８は、入力映像信号をゲンロック信号に同期させた後、同期後の映像信号に対して倍速処理を行ったが、入力映像信号に対して倍速処理を行った後、倍速処理後の映像信号をゲンロック信号に同期させるようにしてもよい。

【0087】

なお、図９の例では、出力フレームレートは入力フレームレートの２倍に設定されたが、これに限定されず、入力フレームレートと同一であってもよいし、異なっていてもよい。出力フレームレートは、例えば、入力フレームレートの整数倍に設定される。また、入力フレームレート自体がゲンロック信号の周波数の整数倍になっている場合、すなわち、倍速処理を行わなくとも入力映像信号をゲンロック信号に同期させることができる場合には、信号処理部１５８は、入力映像信号に対して倍速処理を行わなくてもよい。

【0088】

＜垂直ブランキング期間の制御の効果＞
図１０および図１１は、信号処理部１５８による垂直ブランキング期間の制御の効果を説明する図である。

【0089】

まず、図１０において、出力映像信号の垂直ブランキング期間が制御されない場合に再撮システムで再撮される映像において黒帯が発生する原因を説明する。

【0090】

図１０の横軸は、ビデオウォールに表示される映像の表示時刻を表し、縦軸は、その表示時刻に表示される映像に対応する撮影部の受光面の画素の行の上からの行数を表している。図１０の例では、出力フレームレートは、入力フレームレートの２倍である119.88fpsである。従って、ゲンロック信号の１周期に含まれる、ビデオウォールに表示される映像のフレーム数は５フレームである。図１０において、１フレームの撮影期間に表示される５フレーム分の映像の表示期間を矩形で表し、その矩形の斜線を付した部分は垂直ブランキング期間を表す。これらのことは、後述する図１１においても同様である。

【0091】

撮影部は、ローリングシャッタ方式で撮影を行うので、各行のLEDの光による露光は上の行から順に行われ、各行の露光開始タイミングは異なる。また、ゲンロック信号により表示と撮影の同期がとられているため、１フレームごとの露光開始時刻と５フレームごとの表示開始時刻は同期している。従って、図１０において、１フレームの露光期間は、左上の頂点が５フレーム分の映像の表示期間を表す矩形の左上の頂点と一致し、横方向の辺の長さが露光時間に対応する平行四辺形で表すことができる。

【0092】

例えば、露光期間が図１０の平行四辺形２７０で表される場合、撮影部８５の受光面の全行で露光期間内に垂直ブランキング期間が１回含まれる。

【0093】

しかしながら、露光期間が平行四辺形２７１で表される場合、撮影部の受光面のＬ行目より上の行では、露光期間内に垂直ブランキング期間が１回含まれるが、Ｌ行目より下の行では、露光期間内に垂直ブランキング期間が２回含まれる。また、露光期間が平行四辺形２７２で表される場合、撮影部の受光面のＬ行目より上の行では、露光期間内に垂直ブランキング期間が含まれないが、Ｌ行目より下の行では、露光期間内に垂直ブランキング期間が１回含まれる。

【0094】

ここで、垂直ブランキング期間では発光が行われない。従って、露光期間が平行四辺形２７１や２７２で表される場合、ビデオカメラにより再撮されたＬ行目より下の行の画素の輝度は、Ｌ行目より上の行の画素の輝度に比べて低くなる。その結果、ビデオカメラにより再撮された映像のうち、Ｌ行目より下の行の映像が黒帯（Blackbelt）となる。黒帯は、他の領域に比べて輝度が低い帯状の領域であり、黒帯の色は、様々な濃度の黒色である。以上のように、出力映像信号の出力ブランキング期間が制御されない場合、露光時間によって黒帯が発生することがある。

【0095】

これに対して、信号処理部１５８は、ゲンロック信号の１周期、即ち１フレームの撮影期間に含まれる各フレームの垂直ブランキング期間を最後のフレームの後に移動させるように、垂直ブランキング期間を制御する。従って、図１１に示すように、１フレームの撮影期間に表示される５フレーム分の映像のうち、最後のフレームの映像にのみ垂直ブランキング期間が設けられる。従って、露光時間によらず、撮影部８５の受光面の全行で露光期間内に垂直ブランキング期間が含まれない。例えば、露光期間が平行四辺形２７１や２７２で表される場合であっても、撮影部８５の受光面の全行で露光期間内に垂直ブランキング期間が含まれない。従って、黒帯の発生を防止することができる。

【0096】

ここでは、黒帯の発生について説明したが、同様に縞等のその他のアーティファクトの発生も防止することができる。

【0097】

＜ビデオウォールコントローラの処理の説明＞
図１２は、図６のビデオウォールコントローラ６３の映像信号処理を説明するフローチャートである。この映像信号処理は、例えば、図３のビデオサーバ６１から入力映像信号が送信されてきたとき、開始される。

【0098】

図１２のステップＳ５１において、ビデオウォールコントローラ６３の信号入力ＩＦ１５７は、ビデオサーバ６１から送信されてくる入力映像信号を、HDMI端子１５２を介して受信する。

【0099】

ステップＳ５２において、信号入力ＩＦ１５７は、ステップＳ５１の処理により受信された入力映像信号を所定のビデオフォーマットの入力映像信号に変換し、信号処理部１５８に供給する。

【0100】

ステップＳ５３において、MPU１５６は、ＰＣ６２の通信部１０９からLAN端子１５１およびネットワークＩＦ１５５を介して取得された制御コマンドにしたがって映像調整信号を生成し、信号処理部１５８に供給する。

【0101】

ステップＳ５４において、信号処理部１５８は、必要に応じてDRAM１５９とデータをやり取りしながら、映像調整信号に基づいて、ステップＳ５２の処理により供給された入力映像信号の色温度、コントラスト、ブライトネス等の調整を行う。

【0102】

ステップＳ５５において、信号処理部１５８は、クロック生成器６４から入力されるゲンロック信号に基づいて、ステップＳ５４の処理により得られた調整後の入力映像信号に対して出力映像信号生成処理を行う。信号処理部１５８は、出力映像信号生成処理の結果得られる出力映像信号を分配部１６０に供給する。

【0103】

ステップＳ５６において、分配部１６０は、ステップＳ５５の処理により供給された出力映像信号を、各信号出力ＩＦ１６１に分配する。

【0104】

ステップＳ５７において、各信号出力ＩＦ１６１は、ステップＳ５６の処理により供給された出力映像信号を、自分に接続されている表示ユニット４１に送信する。そして、映像信号処理は終了する。

【0105】

以上のように、再撮システム１０のビデオウォールコントローラ６３は、ゲンロック信号に基づいて、ゲンロック信号の周波数とは異なる入力フレームレートの入力映像信号に対して処理を行うことができる。例えば、ビデオウォールコントローラ６３は、ゲンロック信号に基づいて、ゲンロック信号の周波数とは異なる入力フレームレートの入力映像信号に対して、ゲンロック信号に同期する出力フレームレートの出力映像信号を生成する出力映像信号生成処理を行うことができる。

【0106】

従って、ビデオウォールコントローラ６３は、ゲンロック信号の周波数とは異なる入力フレームレートの入力映像信号に基づいて、ゲンロック信号に同期する出力フレームレートの映像をビデオウォール１２に表示させることができる。その結果、ビデオウォール１２は、例えば、ビデオカメラ１１の撮影フレームレートと同期し、かつビデオカメラ１１の撮影フレームレートに比べて高速の出力フレームレートで映像を表示することができる。これによって、再撮環境において演者が認識する、ビデオウォール１２に表示される映像のレイテンシを軽減することができる。

【0107】

なお、再撮システム１０において、ビデオカメラ１１とＰＣ６２は同軸ケーブルなどの有線を介して信号をやり取りしてもよいし、無線通信でやり取りするようにしてもよい。また、ＰＣ６２とビデオウォールコントローラ６３は、LANケーブルなどの有線を介して信号をやり取りしてもよいし、無線通信でやり取りするようにしてもよい。

【0108】

再撮システム１０は、複数のビデオウォールコントローラ６３を設け、各ビデオウォールコントローラ６３がビデオウォール１２を分割して制御するようにしてもよい。

【0109】

＜ビデオウォールコントローラがゲンロック信号に基づいてゲンロック信号の周波数とは異なるフレームレートの映像信号に対して処理を行うことができない場合について＞
＜再撮システムの一例＞
図１３は、ビデオウォールコントローラがゲンロック信号に基づいてゲンロック信号の周波数とは異なるフレームレートの映像信号に対して処理を行うことができない場合の再撮システムの一例を示す図である。

【0110】

図１３の再撮システム４００において、図３の再撮システム１０と対応する部分については同一の符号を付してある。従って、その部分の説明は適宜省略し、再撮システム１０と異なる部分に着目して説明する。

【0111】

図１３の再撮システム４００は、ビデオサーバ６１、ビデオウォールコントローラ６３、クロック生成器６４が、ビデオサーバ４０１、ビデオウォールコントローラ４０２、クロック生成器４０３に代わる点が、再撮システム１０と異なっており、その他は再撮システム１０と同様に構成されている。

【0112】

再撮システム４００では、ビデオウォールコントローラ４０２がゲンロック信号に基づいてゲンロック信号の周波数とは異なるフレームレートの映像信号に対して処理を行うことができない。従って、ゲンロック信号の周波数と同一のフレームレートの映像信号がビデオサーバ４０１からビデオウォールコントローラ４０２に供給される。

【0113】

具体的には、ビデオサーバ４０１は、クロック生成器４０３からフレーム同期信号としてゲンロック信号が入力される点、および、記憶している映像信号のフレームレートがゲンロック信号の周波数と同一である点が、ビデオサーバ６１と異なっており、その他はビデオサーバ６１と同様に構成されている。

【0114】

ビデオウォールコントローラ４０２は、信号処理部が、ゲンロック信号に基づいて、ビデオサーバ４０１から入力されたゲンロック信号の周波数と同一のフレームレートの映像信号をゲンロック信号に同期して出力する点が、ビデオウォールコントローラ６３と異なっており、その他はビデオウォールコントローラ６３と同様に構成されている。

【0115】

クロック生成器４０３は、ゲンロック信号を生成し、ビデオカメラ１１、ビデオサーバ４０１、およびビデオウォールコントローラ４０２に出力する。

【0116】

＜信号処理部の処理の説明＞
図１４は、図１３のビデオウォールコントローラ４０２の信号処理部による処理を説明するタイミングチャートを示す図である。

【0117】

図１４において、横軸は時間を表している。

【0118】

図１４の上から１段目に示すように、ビデオサーバ４０１やビデオウォールコントローラ４０２に入力されるゲンロック信号の周波数は、23.98Hzである。図１４の上から２段目に示すように、ビデオウォールコントローラ４０２の信号処理部に入力される映像信号は、ゲンロック信号に同期するフレーム単位の信号である。このフレーム単位の信号は、フレーム単位の輝度や色を表す信号の区間の後に垂直ブランキング期間が設けられることにより構成される。

【0119】

信号処理部は、図１４の上から２段目に示す映像信号が入力されると、図１４の上から１段目に示すゲンロック信号に基づいて、その映像信号をゲンロック信号に同期させて出力する。従って、出力される映像信号は、図１４の上から３段目に示すようになる。

【0120】

以上のように、ビデオウォールコントローラ４０２の信号処理部は、入力されたゲンロック信号の周波数と同一であるフレームレートの映像信号を、ゲンロック信号に同期させて出力することができる。その結果、ビデオカメラ１１は、ビデオウォール１２の表示と同期して、再撮映像のフレームレートと同一のフレームレートでビデオウォール１２に表示される映像を再撮することができる。

【0121】

しかしながら、ビデオウォール１２に表示される映像のフレームレートは撮影フレームレートと同一であるため、再撮環境においてビデオウォール１２に表示される映像のレイテンシを軽減することはできない。

【0122】

＜再撮システムの他の一例＞
図１５は、ビデオウォールコントローラがゲンロック信号に基づいてゲンロック信号の周波数とは異なるフレームレートの映像信号に対して処理を行うことができない場合の再撮システムの他の一例を示す図である。

【0123】

図１５の再撮システム５００において、図３の再撮システム１０や図１３の再撮システム４００と対応する部分については同一の符号を付してある。従って、その部分の説明は適宜省略し、再撮システム１０や再撮システム４００と異なる部分に着目して説明する。

【0124】

図１５の再撮システム５００は、フレームレートコントローラ５０１が新たに設けられる点、および、ビデオウォールコントローラ６３、クロック生成器６４が、ビデオウォールコントローラ４０２、クロック生成器５０２に代わる点が、再撮システム１０と異なっており、その他は再撮システム１０と同様に構成されている。

【0125】

再撮システム５００では、ビデオウォールコントローラ４０２がゲンロック信号に基づいてゲンロック信号の周波数とは異なるフレームレートの映像信号に対して処理を行うことができない。従って、ビデオサーバ６１から出力される入力映像信号の入力フレームレートが、フレームレートコントローラ５０１によりゲンロック信号の周波数と同一のフレームレートに変換され、ビデオウォールコントローラ４０２に入力される。

【0126】

具体的には、フレームレートコントローラ５０１には、フレーム同期信号に同期してビデオサーバ６１から出力された入力フレームレートの入力映像信号が入力される。フレームレートコントローラ５０１にはまた、クロック生成器５０２からゲンロック信号が入力される。フレームレートコントローラ５０１は、ゲンロック信号に基づいて、フレーム同期信号に同期して入力された入力映像信号のフレームレートを、ゲンロック信号の周波数と同一のフレームレートの映像信号に変換し、ゲンロック信号に同期してビデオウォールコントローラ４０２に供給する。

【0127】

クロック生成器５０２は、ゲンロック信号を生成し、ビデオカメラ１１、ビデオウォールコントローラ４０２、およびフレームレートコントローラ５０１に出力する。また、クロック生成器５０２は、ゲンロック信号と開始タイミングが同期するフレーム同期信号を生成し、ビデオサーバ６１に出力する。

【0128】

以上のような再撮システム５００では、再撮システム４００と同様に、ビデオカメラ１１は、ビデオウォール１２の表示と同期して、再撮映像のフレームレートと同一のフレームレートでビデオウォール１２に表示される映像を再撮することができる。しかしながら、ビデオウォール１２に表示される映像のフレームレートは撮影フレームレートと同一であるため、再撮環境においてビデオウォール１２に表示される映像のレイテンシを軽減することはできない。

【0129】

＜再撮システムのさらに他の一例＞
図１６は、ビデオウォールコントローラがゲンロック信号に基づいてゲンロック信号の周波数とは異なるフレームレートの映像信号に対して処理を行うことができない場合の再撮システムのさらに他の一例を示す図である。

【0130】

図１６の再撮システム６００において、図３の再撮システム１０と対応する部分については同一の符号を付してある。従って、その部分の説明は適宜省略し、再撮システム１０と異なる部分に着目して説明する。

【0131】

図１６の再撮システム６００は、ビデオウォールコントローラ６３がビデオウォールコントローラ６０１に代わる点が、再撮システム１０と異なっており、その他は再撮システム１０と同様に構成されている。

【0132】

再撮システム６００では、ビデオウォールコントローラ６０１がゲンロック信号に基づいてゲンロック信号の周波数とは異なるフレームレートの映像信号に対して処理を行うことができない。従って、ビデオウォールコントローラ６０１は、ゲンロック信号を無視して、フレーム同期信号に同期する出力フレームレートの映像信号を生成する。

【0133】

具体的には、ビデオウォールコントローラ６０１は、信号処理部が、ゲンロック信号を無視して、ビデオサーバ６１から入力された入力映像信号からフレーム同期信号に同期する出力フレームレートの映像信号を生成する点が、ビデオウォールコントローラ６３と異なっており、その他はビデオウォールコントローラ６３と同様に構成されている。

【0134】

＜信号処理部の処理の説明＞
図１７は、図１６のビデオウォールコントローラ６０１の信号処理部による処理を説明するタイミングチャートを示す図である。

【0135】

図１７において、横軸は時間を表している。図１７の例では、入力フレームレートは、ゲンロック信号の周波数とは異なる59.94fpsであり、出力フレームレートは、入力フレームレートの２倍である119.88fpsである。

【0136】

図１７の上から１段目および２段目は、図９の上から１段目および２段目と同様であるので、説明は省略する。入力映像信号の入力フレームレートは、ゲンロック信号の周波数とは異なっているので、ビデオウォールコントローラ６０１の信号処理部は、ゲンロック信号に基づいて入力映像信号に対して処理を行うことはできない。従って、信号処理部は、ゲンロック信号を無視して、フレーム同期信号に同期して入力された入力映像信号に対して倍速処理のみを行い、フレーム同期信号に同期する出力フレームレートの映像信号を出力する。従って、出力される映像信号は、図１７の上から３段目に示すようになる。

【0137】

以上のように、ビデオウォールコントローラ６０１の信号処理部は、フレーム同期信号に同期する、ゲンロック信号の周波数とは異なる出力フレームレートの映像信号を出力することができる。その結果、ビデオカメラ１１は、例えば、再撮映像のフレームレートより高速の出力フレームレートでビデオウォール１２に表示される映像を再撮することができる。しかしながら、ビデオウォール１２の表示をビデオカメラ１１による再撮と同期させることはできない。

【0138】

上述したビデオウォールコントローラ６３の一連の処理は、ハードウエアにより実行することもできるし、ソフトウエアによって実行することもできる。一連の処理をソフトウエアにより実行する場合には、そのソフトウエアを構成するプログラムが、コンピュータにインストールされる。ここで、コンピュータには、専用のハードウエアに組み込まれているコンピュータや、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどが含まれる。上述したビデオウォールコントローラ６３の一連の処理をプログラムにより実行するコンピュータのハードウエアの構成は、図５のＰＣ６２の構成と同様であるので、図示は省略する。なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。

【0139】

本明細書において、システムとは、複数の構成要素（装置、モジュール（部品）、処理等）の集合を意味し、すべての構成要素が同一筐体中にあるか否かは問わない。したがって、別個の筐体に収納され、ネットワークを介して接続されている複数の装置、１つの筐体の中に複数のモジュールが収納されている１つの装置、および複数の処理を行うプロセッシングユニットは、いずれも、システムである。

【0140】

本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である

【0141】

例えば、上述した複数の実施の形態の全てまたは一部を組み合わせた形態を採用することができる。

【0142】

例えば、本技術は、１つの機能をネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングの構成をとることができる。

【0143】

また、上述のフローチャートで説明した各ステップは、１つの装置で実行する他、複数の装置で分担して実行することができる。

【0144】

さらに、１つのステップに複数の処理が含まれる場合には、その１つのステップに含まれる複数の処理は、１つの装置で実行する他、複数の装置で分担して実行することができる。

【0145】

なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、本明細書に記載されたもの以外の効果があってもよい。

【0146】

本技術は、以下の構成を取ることができる。
（１）
撮影機材同期信号に基づいて、前記撮影機材同期信号の周波数とは異なる第１のフレームレートの映像信号である入力映像信号に対して処理を行う信号処理部と、
前記入力映像信号に対する処理に基づいて、前記撮影機材同期信号の周波数とは異なるフレームレートの映像信号を出力する出力部と
を備える情報処理システム。
（２）
前記信号処理部は、前記撮影機材同期信号に基づいて、前記入力映像信号に対して、前記第１のフレームレートに基づいて設定された第２のフレームレートの前記映像信号であり、前記撮影機材同期信号に同期する出力映像信号を生成する処理を行う
ように構成された
前記（１）に記載の情報処理システム。
（３）
前記第２のフレームレートは、前記撮影機材同期信号の周波数の整数倍である
ように構成された
前記（２）に記載の情報処理システム。
（４）
前記第２のフレームレートは、前記第１のフレームレートとは異なるフレームレートである
ように構成された
前記（３）に記載の情報処理システム。
（５）
前記第２のフレームレートは、前記第１のフレームレートの整数倍である
ように構成された
前記（４）に記載の情報処理システム。
（６）
前記信号処理部は、前記入力映像信号を前記撮影機材同期信号に同期させ、フレームレートを整数倍にして結合することにより、前記出力映像信号を生成する
ように構成された
前記（５）に記載の情報処理システム。
（７）
前記信号処理部は、前記出力映像信号において、前記撮影機材同期信号の１周期に含まれる各フレームの垂直ブランキング期間を、前記撮影機材同期信号の１周期に含まれる最後のフレームの後に移動させる
ように構成された
前記（２）乃至（６）のいずれかに記載の情報処理システム。
（８）
前記信号処理部により生成された前記出力映像信号に基づいて、前記第２のフレームレートの映像を表示部に表示させる表示制御部
をさらに備える
前記（２）乃至（７）のいずれかに記載の情報処理システム。
（９）
前記入力映像信号を取得する入力部と、
前記信号処理部により生成された前記出力映像信号を、複数の表示ユニットから構成される表示部のそれぞれの表示ユニットに表示するための出力映像信号へ分割する分割部と を備え、
前記出力部は、前記分割部により分割された前記出力映像信号を前記表示ユニットに出力する
ように構成された
前記（２）乃至（７）のいずれかに記載の情報処理システム。
（１０）
前記表示部は、第１の機器上に設けられ、
前記入力部、前記信号処理部、前記分割部、および前記出力部は、前記第１の機器とは異なる第２の機器上に設けられ、
前記第１の機器と前記第２の機器は、ケーブルで接続される
ように構成された
前記（９）に記載の情報処理システム。
（１１）
前記表示部
をさらに備える
前記（８）乃至（１０）のいずれかに記載の情報処理システム。
（１２）
前記表示部は、パッシブマトリクス駆動方式で発光する
ように構成された
前記（８）乃至（１１）のいずれかに記載の情報処理システム。
（１３）
前記表示部は、行列状に配置されたLED（Light Emitting Diode）の画素から構成される
ように構成された
前記（８）乃至（１１）のいずれかに記載の情報処理システム。
（１４）
前記撮影機材同期信号は、前記出力映像信号に基づく映像を表示する表示部を撮影する撮影部に入力される
ように構成された
前記（２）乃至（７）のいずれかに記載の情報処理システム。
（１５）
前記撮影部は、前記撮影機材同期信号に同期して、前記撮影機材同期信号の周波数を撮影映像のフレームレートとして前記表示部を撮影する
ように構成された
前記（１４）に記載の情報処理システム。
（１６）
前記撮影部は、ローリングシャッタ方式で撮影を行う
ように構成された
前記（１４）または（１５）に記載の情報処理システム。
（１７）
前記撮影機材同期信号を生成する信号生成部は、前記入力映像信号を前記信号処理部に供給する映像信号供給部に、前記第１のフレームレートと同一の周波数のフレーム同期信号を入力する
ように構成された
前記（１）乃至（１６）のいずれかに記載の情報処理システム。
（１８）
前記映像信号供給部は、前記フレーム同期信号に同期して、前記信号処理部に前記入力映像信号を供給する
ように構成された
前記（１７）に記載の情報処理システム。
（１９）
前記撮影機材同期信号のフレームレートは23.98Hzである
ように構成された
前記（１）乃至（１８）のいずれかに記載の情報処理システム。
（２０）
情報処理システムが、
撮影機材同期信号に基づいて、前記撮影機材同期信号の周波数とは異なる第１のフレームレートの映像信号である入力映像信号に対して処理を行う信号処理ステップと、
前記入力映像信号に対する処理に基づいて、前記撮影機材同期信号の周波数とは異なるフレームレートの映像信号を出力する出力ステップと
を含む情報処理方法。

【符号の説明】

【0147】

１０ 再撮システム， １１ ビデオカメラ， １２ ビデオウォール， ４１－１乃至４１－ｎ 表示ユニット， ６１ ビデオサーバ， ６３ ビデオウォールコントローラ， ６４ クロック生成器， １５２ HDMI端子， １５３ ＤＰ端子， １５４ DVI端子， １５８ 信号処理部， １６０ 分配部， １６１－１乃至１６１－ｎ 信号出力ＩＦ， ２２１－１乃至２２１－ｍ LEDドライバ， ２４１ LED

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】