特許 6576974 モニタ用画像合成システムおよびモニタ用画像合成方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6576974

(24)【登録日】2019年8月30日

(45)【発行日】2019年9月18日

(54)【発明の名称】モニタ用画像合成システムおよびモニタ用画像合成方法

(51)【国際特許分類】

   H04N 5/262 20060101AFI20190909BHJP

   G09G 5/00 20060101ALI20190909BHJP

   G09G 5/377 20060101ALI20190909BHJP

   G09G 5/14 20060101ALI20190909BHJP

   H04N 5/268 20060101ALI20190909BHJP

   H04N 5/278 20060101ALI20190909BHJP

【ＦＩ】

   H04N5/262 040

   G09G5/00 510C

   G09G5/00 530M

   G09G5/36 520L

   G09G5/36 520M

   G09G5/14 A

   H04N5/268

   H04N5/278

【請求項の数】8

【全頁数】28

(21)【出願番号】特願2017-93081(P2017-93081)

(22)【出願日】2017年5月9日

(65)【公開番号】特開2018-191172(P2018-191172A)

(43)【公開日】2018年11月29日

【審査請求日】2018年9月5日

(73)【特許権者】

【識別番号】000227205

【氏名又は名称】ＮＥＣプラットフォームズ株式会社

(74)【代理人】

【識別番号】100103894

【弁理士】

【氏名又は名称】家入 健

(72)【発明者】

【氏名】小笠原 正志

【審査官】 西谷 憲人

(56)【参考文献】

【文献】 特開２０１２−０４９８４８（ＪＰ，Ａ）

【文献】 特開２００１−２６８４３８（ＪＰ，Ａ）

【文献】 特開２００２−１１７４１２（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｈ０４Ｎ ５／２６２

Ｇ０９Ｇ ５／００

Ｇ０９Ｇ ５／１４

Ｇ０９Ｇ ５／３７７

Ｈ０４Ｎ ５／２６８

Ｈ０４Ｎ ５／２７８

(57)【特許請求の範囲】

【請求項1】

映像フレームおよび音声レベルバーの画像からなる素材を同時に複数個モニタ用として監視するために、あらかじめ定めた素材数ずつに分割し、分割した前記素材数分の各前記素材の映像フレームおよび音声レベルバーの画像を合成して合成画像を生成する画像合成装置と該画像合成装置により生成された前記合成画像をモニタ画面に表示するモニタ装置とのそれぞれを複数個有するとともに、各前記画像合成装置の動作を制御するための制御用パラメータを生成する制御端末を備えた構成からなるモニタ用画像合成システムにおいて、
前記制御端末は、
各前記画像合成装置それぞれにおいて画像合成する際の各前記素材の映像フレームおよび音声レベルバーの画像に関するレイアウトデータを生成して、前記制御用パラメータとして、該当する各前記画像合成装置に対して出力する手段
を有し、
一方、各前記画像合成装置は、
前記制御端末から入力されてくる前記制御用パラメータに基づいて、各前記素材に関する合成画像を生成するとともに、生成した前記合成画像のうち他の前記画像合成装置への出力用として有効な画像領域に存在する合成画像を他の前記画像合成装置に対して出力する手段と、
前記制御端末から入力されてくる前記制御用パラメータに基づいて、当該画像合成装置において生成した前記合成画像と、他の前記画像合成装置から入力される合成画像とのうちモニタ表示用として有効な画像領域に存在する合成画像を、モニタ表示用合成画像として、対応する前記モニタ装置に対して出力する手段と
を有することを特徴とするモニタ用画像合成システム。

【請求項2】

前記制御端末は、
前記制御用パラメータとして出力する前記レイアウトデータとして、
各前記画像合成装置それぞれにおいて画像合成する際の各前記素材の映像フレームに関する画像サイズと配置位置とを指定する映像フレーム制御の情報と、
各前記画像合成装置それぞれにおいて画像合成する際の各前記素材の音声レベルバーの画像に関するレベルバー数と画像サイズと配置位置とを指定する音声レベルバー制御の情報と、
各前記画像合成装置それぞれにおいて生成した前記合成画像のうち他の前記画像合成装置への出力用として有効な画像領域に存在する合成画像を、他の前記画像合成装置それぞれに対して出力する合成画像として指定する制御情報と、
各前記画像合成装置それぞれにおいて生成した前記合成画像と他の前記画像合成装置から入力した前記合成画像とのうちモニタ表示用として有効な画像領域に存在する合成画像を、対応する前記モニタ装置のモニタ画面に表示するための前記モニタ表示用合成画像として指定する制御情報と
を生成する手段
を有することを特徴とする請求項１に記載のモニタ用画像合成システム。

【請求項3】

前記制御端末は、
各前記画像合成装置それぞれにおいて前記モニタ表示用合成画像を構成する各合成画像の領域に重畳させる文字画像を指定するテキスト制御の情報をさらに生成して、前記制御用パラメータに含めて、該当する各前記画像合成装置に対して出力する手段
をさらに有し、
一方、各前記画像合成装置は、
前記制御端末から入力されてくる前記制御用パラメータに含まれる前記テキスト制御の情報に基づいて、前記モニタ表示用合成画像を構成する各合成画像の領域に、前記文字画像を重畳させた合成画像を新たなモニタ表示用合成画像として生成して、対応する前記モニタ装置に対して出力する手段
をさらに有することを特徴とする請求項１または２に記載のモニタ用画像合成システム。

【請求項4】

前記制御端末は、
各前記画像合成装置それぞれにおいて前記モニタ表示用合成画像を構成する各合成画像が配置されていない領域に挿入する背景色を指定する背景制御の情報をさらに生成して、前記制御用パラメータに含めて、該当する各前記画像合成装置に対して出力する手段
をさらに有し、
一方、各前記画像合成装置は、
前記制御端末から入力されてくる前記制御用パラメータに含まれる前記背景制御の情報に基づいて、前記モニタ表示用合成画像を構成する各合成画像が配置されていない領域に、前記背景色を挿入した合成画像を新たなモニタ表示用合成画像として生成して、対応する前記モニタ装置に対して出力する手段
をさらに有することを特徴とする請求項１ないし３のいずれかに記載のモニタ用画像合成システム。

【請求項5】

映像フレームおよび音声レベルバーの画像からなる素材を同時に複数個モニタ用として監視するために、あらかじめ定めた適当な素材数ずつに分割し、分割した前記素材数分の各前記素材の映像フレームおよび音声レベルバーの画像を合成して合成画像を生成する画像合成装置と該画像合成装置により生成された前記合成画像をモニタ画面に表示するモニタ装置とのそれぞれを複数個有するとともに、各前記画像合成装置の動作を制御するための制御用パラメータを生成する制御端末を有するモニタ用画像合成システムにおいて、モニタ用の合成画像を生成するモニタ用画像合成方法であって、
前記制御端末は、
各前記画像合成装置それぞれにおいて画像合成する際の各前記素材の映像フレームおよび音声レベルバーの画像に関するレイアウトデータを生成して、前記制御用パラメータとして、該当する各前記画像合成装置に対して出力するステップ
を有し、
一方、各前記画像合成装置は、
前記制御端末から入力されてくる前記制御用パラメータに基づいて、各前記素材に関する合成画像を生成するとともに、生成した前記合成画像のうち他の前記画像合成装置への出力用として有効な画像領域に存在する合成画像を他の前記画像合成装置に対して出力するステップと、
前記制御端末から入力されてくる前記制御用パラメータに基づいて、当該画像合成装置において生成した前記合成画像と、他の前記画像合成装置から入力される合成画像とのうちモニタ表示用として有効な画像領域に存在する合成画像を、モニタ表示用合成画像として、対応する前記モニタ装置に対して出力するステップと
を有していることを特徴とするモニタ用画像合成方法。

【請求項6】

前記制御端末は、
前記制御用パラメータとして出力する前記レイアウトデータとして、
各前記画像合成装置それぞれにおいて画像合成する際の各前記素材の映像フレームに関する画像サイズと配置位置とを指定する映像フレーム制御の情報と、
各前記画像合成装置それぞれにおいて画像合成する際の各前記素材の音声レベルバーの画像に関するレベルバー数と画像サイズと配置位置とを指定する音声レベルバー制御の情報と、
各前記画像合成装置それぞれにおいて生成した前記合成画像のうち他の前記画像合成装置への出力用として有効な画像領域に存在する合成画像を、他の前記画像合成装置それぞれに対して出力する合成画像として指定する制御情報と、
各前記画像合成装置それぞれにおいて生成した前記合成画像と他の前記画像合成装置から入力した前記合成画像とのうちモニタ表示用として有効な画像領域に存在する合成画像を、対応する前記モニタ装置のモニタ画面に表示するための前記モニタ表示用合成画像として指定する制御情報と
を生成するステップ
を有していることを特徴とする請求項５に記載のモニタ用画像合成方法。

【請求項7】

前記制御端末は、
各前記画像合成装置それぞれにおいて前記モニタ表示用合成画像を構成する各合成画像の領域に重畳させる文字画像を指定するテキスト制御の情報をさらに生成して、前記制御用パラメータに含めて、該当する各前記画像合成装置に対して出力するステップ
をさらに有し、
一方、各前記画像合成装置は、
前記制御端末から入力されてくる前記制御用パラメータに含まれる前記テキスト制御の情報に基づいて、前記モニタ表示用合成画像を構成する各合成画像の領域に、前記文字画像を重畳させた合成画像を新たなモニタ表示用合成画像として生成して、対応する前記モニタ装置に対して出力するステップ
をさらに有していることを特徴とする請求項５または６に記載のモニタ用画像合成方法。

【請求項8】

前記制御端末は、
各前記画像合成装置それぞれにおいて前記モニタ表示用合成画像を構成する各合成画像が配置されていない領域に挿入する背景色を指定する背景制御の情報をさらに生成して、前記制御用パラメータに含めて、該当する各前記画像合成装置に対して出力するステップ
をさらに有し、
一方、各前記画像合成装置は、
前記制御端末から入力されてくる前記制御用パラメータに含まれる前記背景制御の情報に基づいて、前記モニタ表示用合成画像を構成する各合成画像が配置されていない領域に、前記背景色を挿入した合成画像を新たなモニタ表示用合成画像として生成して、対応する前記モニタ装置に対して出力するステップ
をさらに有していることを特徴とする請求項５ないし７のいずれかに記載のモニタ用画像合成方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、モニタ用画像合成システムおよびモニタ用画像合成方法に関し、特に、放送局の素材や運用データを画像合成して監視するために用いられるモニタ・システム用途のモニタ用画像合成システムおよびモニタ用画像合成方法に関する。

【背景技術】

【0002】

近年、放送局における素材や運用データを監視するためのモニタ・システムにおいては、特許文献１の特開２０１５−０９６９２０号公報「画像処理装置および画像処理システムの制御方法」にも記載されているように、モニタ用の複数の素材に関する映像、音声レベルバーの画像を１つのモニタ画面上に纏めてマルチディスプレイさせる仕組みが用いられている。すなわち、モニタ用の多数の素材を適当な素材数ずつに分割して、複数の画像合成装置ごとに割り当て、各画像合成装置それぞれにおいて、分割した複数の素材に関する映像、音声レベルバーの画像それぞれを、縮小画像に変換し、複数のそれぞれの配置領域にレイアウトするような形に合成し、合成した合成画像をそれぞれの画像合成装置に対応した複数のモニタ装置に出力して複数の素材を並行して監視するという仕組みを有するモニタ用画像合成システムが採用されている。

【0003】

ここで、該モニタ・システムとしては、監視者が監視し易いレイアウト（複数の映像、音声レベルバー、文字などの画像の配置）でモニタ装置に表示することができることが求められ、かつ、該レイアウトは、接続変更をすることなく、自由に変更することができることが必要要件となっている。すなわち、放送局等においては、複数の素材をモニタ・システム用として並行して監視することを可能にするために、前述のようなモニタ用画像合成システムが採用されているが、現状のモニタ用画像合成システムにおいては、複数の素材の中から任意の素材を適当な素材数ずつ選択して任意のレイアウトで画像合成してモニタ表示させることを実現するために、一般的に、図９に示すように、モニタ用スイッチャと複数の画像合成装置と複数のモニタ装置とを設置するように構成されている。

【0004】

図９は、放送局において例えば６４個の素材を１６個ずつ画像合成して４個のモニタ画面にモニタ表示させる際の現状の技術におけるモニタ表示系統イメージを示すイメージ図であり、現状の技術におけるモニタ用画像合成システムのシステム構成の一例を示している。図９に示すモニタ用画像合成システムは、４台の第１の画像合成装置１１Ａ、第２の画像合成装置１２Ａ、…、第４の画像合成装置１４Ａ、４台の第１のモニタ装置２１、第２のモニタ装置２２、…、第４のモニタ装置２４、制御端末３０Ａ、および、モニタ用スイッチャ４０から構成されている。

【0005】

モニタ用スイッチャ４０は、制御端末３０Ａからの切替制御指示を切替制御部４１にて受け取ることにより、入力端子ＩＮ１、ＩＮ２、…、ＩＮ６４のそれぞれに入力されてくる６４個の素材Ｓ１、素材Ｓ２、…、素材Ｓ６４を、出力端子ＯＵＴ１、ＯＵＴ２、…、ＯＵＴ６４のそれぞれに、独立に割り振ることができる。ここで、素材Ｓ１、素材Ｓ２、…、素材Ｓ６４は、放送局において使用される６４個の素材であり、いずれの素材も音声を重畳した映像信号からなっている。

【0006】

また、図９に示す接続構成においては、モニタ用スイッチャ４０の出力端子ＯＵＴ１、ＯＵＴ２、…、ＯＵＴ６４は、１６個ずつの単位で、４台の画像合成装置つまり第１の画像合成装置１１Ａ、第２の画像合成装置１２Ａ、…、第４の画像合成装置１４Ａそれぞれに接続される。すなわち、出力端子ＯＵＴ１、出力端子ＯＵＴ２、…、出力端子ＯＵＴ１６は、第１の画像合成装置１１Ａの入力端子ＶＩＮ１、ＶＩＮ２、…、ＶＩＮ１６それぞれに接続される。モニタ用スイッチャ４０の出力端子ＯＵＴ１７、出力端子ＯＵＴ１８、…、出力端子ＯＵＴ３２は、第２の画像合成装置１２Ａの入力端子ＶＩＮ１、ＶＩＮ２、…、ＶＩＮ１６それぞれに接続される。モニタ用スイッチャ４０の出力端子ＯＵＴ３３、出力端子ＯＵＴ３４、…、出力端子ＯＵＴ４８は、第３の画像合成装置１３Ａの入力端子ＶＩＮ１、ＶＩＮ２、…、ＶＩＮ１６それぞれに接続される。モニタ用スイッチャ４０の出力端子ＯＵＴ４９、出力端子ＯＵＴ５０、…、出力端子ＯＵＴ６４は、第４の画像合成装置１４Ａの入力端子ＶＩＮ１、ＶＩＮ２、…、ＶＩＮ１６それぞれに接続される。

【0007】

４台の画像合成装置つまり第１の画像合成装置１１Ａ、第２の画像合成装置１２Ａ、…、第４の画像合成装置１４Ａは、いずれも同一の装置構成からなっており、それぞれ、制御端末３０Ａからのレイアウト制御に基づいて、１６個の入力端子ＶＩＮ１、ＶＩＮ２、…、ＶＩＮ１６それぞれに入力されてくる１６個の素材に関する映像、音声レベルバーの画像、テキスト（文字）の画像を指定された任意のレイアウトでかつ任意の大きさで画像合成して出力端子ＶＯＵＴから出力する。４台の第１の画像合成装置１１Ａ、第２の画像合成装置１２Ａ、…、第４の画像合成装置１４Ａそれぞれの出力端子ＶＯＵＴは、それぞれ、対応する４台の第１のモニタ装置２１、第２のモニタ装置２２、…、第４のモニタ装置２４に接続される。

【0008】

４台の第１のモニタ装置２１、第２のモニタ装置２２、…、第４のモニタ装置２４は、いずれも同一の装置構成からなっており、それぞれ、４台の第１の画像合成装置１１Ａ、第２の画像合成装置１２Ａ、…、第４の画像合成装置１４Ａそれぞれの出力端子ＶＯＵＴから出力されてくる画像合成された画像（映像フレーム、音声レベルバー、テキスト等に関する画像）をモニタ用として画面表示する。

【先行技術文献】

【特許文献】

【0009】

【特許文献1】特開２０１５−０９６９２０号公報

【発明の概要】

【発明が解決しようとする課題】

【0010】

近年、放送局において扱う素材は年々増加している状況にあり、現状の技術におけるモニタ用画像合成システムにおいては、取り扱う素材数に応じて、画像合成装置の増設、モニタ用スイッチャの拡張が行われている。

【0011】

しかしながら、モニタ用画像合成システムにおいてかくのごとき増設・拡張を実施する場合、図９に示したモニタ用スイッチャ４０をさらに規模の大きなモニタ用スイッチャに交換しようとする際に、モニタ用スイッチャ４０そのものの入出力端子数が多く、かつ、外形も大きいために、大規模な改修工事が必要となるという課題がある。

【0012】

（本発明の目的）
本発明は、かくのごとき課題に鑑みてなされたものであり、複数の画像合成装置を連結動作させることにより、モニタ用スイッチャを用いることなく、素材数の増加に伴う拡張を容易に実施することができるモニタ用画像合成システムおよびモニタ用画像合成方法を提供することを、その目的としている。

【課題を解決するための手段】

【0013】

前述の課題を解決するため、本発明によるモニタ用画像合成システムおよびモニタ用画像合成方法は、主に、次のような特徴的な構成を採用している。

【0014】

（１）本発明によるモニタ用画像合成システムは、
映像フレームおよび音声レベルバーの画像からなる素材を同時に複数個モニタ用として監視するために、あらかじめ定めた素材数ずつに分割し、分割した前記素材数分の各前記素材の映像フレームおよび音声レベルバーの画像を合成して合成画像を生成する画像合成装置と該画像合成装置により生成された前記合成画像をモニタ画面に表示するモニタ装置とのそれぞれを複数個有するとともに、各前記画像合成装置の動作を制御するための制御用パラメータを生成する制御端末を備えた構成からなるモニタ用画像合成システムにおいて、
前記制御端末は、
各前記画像合成装置それぞれにおいて画像合成する際の各前記素材の映像フレームおよび音声レベルバーの画像に関するレイアウトデータを生成して、前記制御用パラメータとして、該当する各前記画像合成装置に対して出力する手段
を有し、
一方、各前記画像合成装置は、
前記制御端末から入力されてくる前記制御用パラメータに基づいて、各前記素材に関する合成画像を生成するとともに、生成した前記合成画像のうち他の前記画像合成装置への出力用として有効な画像領域に存在する合成画像を他の前記画像合成装置に対して出力する手段と、
前記制御端末から入力されてくる前記制御用パラメータに基づいて、当該画像合成装置において生成した前記合成画像と、他の前記画像合成装置から入力される合成画像とのうちモニタ表示用として有効な画像領域に存在する合成画像を、モニタ表示用合成画像として、対応する前記モニタ装置に対して出力する手段と
を有することを特徴とする。

【0015】

（２）本発明によるモニタ用画像合成方法は、
映像フレームおよび音声レベルバーの画像からなる素材を同時に複数個モニタ用として監視するために、あらかじめ定めた適当な素材数ずつに分割し、分割した前記素材数分の各前記素材の映像フレームおよび音声レベルバーの画像を合成して合成画像を生成する画像合成装置と該画像合成装置により生成された前記合成画像をモニタ画面に表示するモニタ装置とのそれぞれを複数個有するとともに、各前記画像合成装置の動作を制御するための制御用パラメータを生成する制御端末を有するモニタ用画像合成システムにおいて、モニタ用の合成画像を生成するモニタ用画像合成方法であって、
前記制御端末は、
各前記画像合成装置それぞれにおいて画像合成する際の各前記素材の映像フレームおよび音声レベルバーの画像に関するレイアウトデータを生成して、前記制御用パラメータとして、該当する各前記画像合成装置に対して出力するステップ
を有し、
一方、各前記画像合成装置は、
前記制御端末から入力されてくる前記制御用パラメータに基づいて、各前記素材に関する合成画像を生成するとともに、生成した前記合成画像のうち他の前記画像合成装置への出力用として有効な画像領域に存在する合成画像を他の前記画像合成装置に対して出力するステップと、
前記制御端末から入力されてくる前記制御用パラメータに基づいて、当該画像合成装置において生成した前記合成画像と、他の前記画像合成装置から入力される合成画像とのうちモニタ表示用として有効な画像領域に存在する合成画像を、モニタ表示用合成画像として、対応する前記モニタ装置に対して出力するステップと
を有していることを特徴とする。

【発明の効果】

【0016】

本発明のモニタ用画像合成システムおよびモニタ用画像合成方法によれば、以下のような効果を奏することができる。

【0017】

すなわち、本発明の採用により、モニタ用画像合成システムとして設置した複数台の画像合成装置を互いに連結動作させ、対象とする全ての素材を、各画像合成装置間で共有することができるので、本発明に関連する現状の技術で用いられるモニタ用スイッチャは不要になる。而して、本発明によれば、対象とする素材数の増加に伴って、現状の技術において必須となっていた大規模な改修工事を行うことが不要になり、素材数の変動に対して融通性に富むシステムを構築することができる。

【図面の簡単な説明】

【0018】

【図1A】本発明によるモニタ用画像合成システムを構成する画像合成装置の一ブロック構成例を示すブロック構成図の左半分部分図である。

【図1B】本発明によるモニタ用画像合成システムを構成する画像合成装置の一ブロック構成例を示すブロック構成図の右半分部分図である。

【図2】本発明によるモニタ用画像合成システムのシステム構成の一例を示すシステム構成図である。

【図3】図２に示すモニタ用画像合成システムを構成する４台のモニタ装置のうち第１のモニタ装置に画面表示したレイアウト画面の一例を示す模式図である。

【図4】図２に示すモニタ用画像合成システムの第２の画像合成装置において生成する合成画像の一例を示す模式図である。

【図5】図２に示すモニタ用画像合成システムの第３の画像合成装置において生成する合成画像の一例を示す模式図である。

【図6】図２に示すモニタ用画像合成システムの第４の画像合成装置において生成する合成画像の一例を示す模式図である。

【図7】図２に示すモニタ用画像合成システムの第１の画像合成装置において、当該装置内で生成した合成画像と他の３台の画像合成装置それぞれから入力される合成画像とを合成した合成画像の一例を示す模式図である。

【図8】図２に示すモニタ用画像合成システムの第１の画像合成装置において、図７に示した映像フレームおよび音声レベルバーの画像の合成画像上に文字画像を重畳させた合成画像の一例を示す模式図である。

【図9】放送局において例えば６４個の素材を１６個ずつ画像合成して４個のモニタ画面にモニタ表示させる際の現状の技術におけるモニタ表示系統イメージを示すイメージ図である。

【発明を実施するための形態】

【0019】

以下、本発明によるモニタ用画像合成システムおよびモニタ用画像合成方法の好適な実施形態について添付図を参照して説明する。なお、以下の各図面に付した図面参照符号は、理解を助けるための一例として各要素に便宜上付記したものであり、本発明を図示の態様に限定することを意図するものではないことは言うまでもない。

【0020】

（本発明の特徴）
本発明の実施形態の説明に先立って、本発明の特徴についてその概要をまず説明する。本発明は、モニタ用画像合成システムとして設置した複数台の画像合成装置を互いに連結動作させることにより、対象とする全ての素材を、各画像合成装置間で共有することができる仕組みを備えていることを、主要な特徴としている。而して、図９を参照して説明した本発明に関連する現状の技術ではモニタ用スイッチャが必須であったが、本発明ではモニタ用スイッチャは不要になる。その上、対象とする素材数の増加に伴って、図９を参照して説明した本発明に関連する現状の技術では大規模な改修工事が必須であったが、本発明では大規模な改修工事を行うことなく、素材数の増加に対応することが可能になり、素材数の増加に対する拡張性に富むシステムを構築することができる。

【0021】

（本発明の実施形態）
次に、本発明によるモニタ用画像合成システムの実施形態について説明する。ここで、本実施形態におけるモニタ用画像合成システムは、現状の技術におけるモニタ用画像合成システムのシステム構成として図９に示した場合と同様、放送局等において並行して同時に監視する必要がある全ての素材（映像、音声レベルバーの画像）の個数として例えば６４個の素材Ｓ１、Ｓ２、…、Ｓ６４が存在し、６４個の素材のうち最大１６個ずつの素材に関する画像を合成して４個のモニタ画面それぞれにモニタ表示させる場合について一例として説明する。しかし、以下に実施形態として詳細に説明する内容からも明らかなように、本発明は、かかる数値のみに限定するものではなく、監視対象となる全ての素材数は任意の個数であり、かつ、監視対象の全ての素材のうち、任意の個数の素材ずつを選択して分割し、分割したそれぞれの素材に関する映像、音声レベルバーの画像を画像合成して、任意の個数のモニタ画面にそれぞれモニタ表示させるようにすることが可能であることは言うまでもない。

【0022】

なお、本実施形態におけるモニタ用画像合成システムは、画像合成装置同士を連結動作させることにより、図９に示したモニタ用スイッチャ４０を削除したものであり、図２を参照して後述するように、４台の第１の画像合成装置１１、第２の画像合成装置１２、…、第４の画像合成装置１４、４台の第１のモニタ装置２１、第２のモニタ装置２２、…、第４のモニタ装置２４、および、制御端末３０から構成される。

【0023】

ここで、４台の第１のモニタ装置２１、第２のモニタ装置２２、…、第４のモニタ装置２４については、現状の技術として図９に説明したものと全く同じもので構わなく、同一の符号を付して、ここでの重複する説明は割愛する。また、本実施形態においては、前述したように、図９に示したモニタ用スイッチャ４０を削除した構成になるので、図９の制御端末３０Ａとは異なり、制御端末３０は、モニタ用スイッチャ４０の制御を行う切替制御データの生成、出力は不要であり、４台の第１の画像合成装置１１、第２の画像合成装置１２、…、第４の画像合成装置１４の動作を制御するためのレイアウトデータを生成、出力する機能を備えている。また、４台の第１の画像合成装置１１、第２の画像合成装置１２、…、第４の画像合成装置１４は、いずれも、同じブロック構成からなっており、図１にそのブロック構成の一例を示す。この図１は、紙面サイズの制限から、図１Ａと図１Ｂとに分割して図示してある。図１Ａの右側に○で囲んで表記したＡ，Ｂ，Ｃ，Ｄ，ＥおよびＦは、図１Ｂの左側に○で囲んで表記したＡ，Ｂ，Ｃ，Ｄ，ＥおよびＦにそれぞれ繋がっている。すなわち、図１Ａと図１ＢとをＡ，Ｂ，Ｃ，Ｄ，ＥおよびＦの点で連接した図が図１である。そこで、以下に図１と記述して示す図は、図１Ａと図１ＢとをＡ，Ｂ，Ｃ，Ｄ，ＥおよびＦの点で互いに連接した１つの図を意味している。

【0024】

（本発明による画像合成装置のブロック構成例）
図１は、本発明によるモニタ用画像合成システムを構成する画像合成装置の一ブロック構成例を示すブロック構成図であり、前述したように、６４個の素材Ｓ１、素材Ｓ２、…、素材Ｓ６４のうち、素材Ｓ１、素材Ｓ２、…、素材Ｓ１６の最大１６個の素材を画像合成する第１の画像合成装置１１を例にして示している。上述のところから明らかなとおり、第１の画像合成装置１１は、図１Ａと図１ＢとをＡ，Ｂ，Ｃ，Ｄ，ＥおよびＦの点で互いに連接して表される装置である。

【0025】

ここで、図１に示す第１の画像合成装置１１は、他の画像合成装置（すなわち第２の画像合成装置１２、第３の画像合成装置１３、第４の画像合成装置１４）からの合成画像を取り込んで、当該第１の画像合成装置１１において生成した合成画像と合成する機能と、逆に、当該第１の画像合成装置１１において生成した合成画像を他の画像合成装置に対して出力する機能とを備えており、他の画像合成装置との連結動作（４台の画像合成装置間の連結動作）を可能とする構成となっている。而して、第１の画像合成装置１１、第２の画像合成装置１２、第３の画像合成装置１３、第４の画像合成装置１４の４台の画像合成装置間で、全ての素材を共有することを可能にし、現状の技術として図９に示したようなモニタ用スイッチャ４０を不要にすることを可能にしている。

【0026】

すなわち、図１に示す第１の画像合成装置１１は、パラメータ受信部１１０、第１のＩＮ用画像生成処理部１１０１、第２のＩＮ用画像生成処理部１１０２、…、第１６のＩＮ用画像生成処理部１１１６、第１のＣＡＳ用画像合成処理部１１１、第２のＣＡＳ用画像合成処理部１１２、第３のＣＡＳ用画像合成処理部１１３、ＯＵＴ用画像合成処理部１１５、を少なくとも含んで構成される。なお、第２の画像合成装置１２〜第４の画像合成装置１４においても同様の構成からなっている。

【0027】

パラメータ受信部１１０は、レイアウト画像からレイアウトデータを生成する制御端末３０（後述の図２に示す）からのレイアウトデータを制御用パラメータとして受信する回路部である。そして、パラメータ受信部１１０は、受信した制御用パラメータを、関連する回路部に対して出力する。ここで、制御端末３０から受信するレイアウトデータ（すなわち制御用パラメータ）としては、入力端子ＶＩＮ１〜入力端子ＶＩＮ１６それぞれから入力される素材Ｓ１〜素材Ｓ１６に関する処理（映像フレーム、音声レベルバーの画像に関する処理）を制御するための映像フレーム制御Ｖ１〜映像フレーム制御Ｖ１６、音声レベルバー制御Ａ１〜音声レベルバー制御Ａ１６を少なくとも含んでいる。言い換えると、映像フレーム制御（映像フレーム制御Ｖ１〜映像フレーム制御Ｖ１６）は、各画像合成装置それぞれにおいて画像合成する際の各素材の映像フレームに関する画像サイズと配置位置とを指定する映像フレーム制御用の情報であり、音声レベルバー制御（音声レベルバー制御Ａ１〜音声レベルバー制御Ａ１６）は、各画像合成装置それぞれにおいて画像合成する際の各素材の音声レベルバーの画像に関するレベルバー数と画像サイズと配置位置とを指定する音声レベルバー制御用の情報である。

【0028】

さらに、制御端末３０から受信するレイアウトデータとして、第１のモニタ装置２１および他の画像合成装置（第１の画像合成装置の場合は、第２の画像合成装置１２〜第４の画像合成装置１４）それぞれへ出力する素材Ｓ１〜素材Ｓ１６それぞれに関する映像フレームと音声レベルバーの画像との合成画像の配置の有無を制御するＯＮ制御Ｍ１〜ＯＮ制御Ｍ４も含まれている。言い換えると、ＯＮ制御Ｍ１〜ＯＮ制御Ｍ３は、それぞれ、各画像合成装置それぞれにおいて生成した合成画像のうち他の画像合成装置への出力用として有効な画像領域に存在する合成画像を、他の画像合成装置（第１の画像合成装置１１の場合は、第２の画像合成装置１２〜第４の画像合成装置１４）それぞれに対して出力する合成画像として指定する制御情報である。また、ＯＮ制御Ｍ４は、各画像合成装置それぞれにおいて生成した合成画像と他の画像合成装置（第１の画像合成装置の場合は、第２の画像合成装置１２〜第４の画像合成装置１４）から入力した合成画像とのうちモニタ表示用として有効な画像領域に存在する合成画像を、対応するモニタ装置（第１の画像合成装置１１の場合は、第１のモニタ装置２１）のモニタ画面に表示するためのモニタ表示用合成画像として指定する制御情報である。

【0029】

さらに、制御端末３０から受信するレイアウトデータ（すなわち制御用パラメータ）として、第１のモニタ装置２１へ出力する合成画像上に重畳させる文字画像を制御するテキスト制御や、合成画像が存在していない領域に設定する背景色を制御する背景制御等のパラメータも含まれている。

【0030】

次に、第１のＩＮ用画像生成処理部１１０１、第２のＩＮ用画像生成処理部１１０２、…、第１６のＩＮ用画像生成処理部１１１６それぞれは、映像フレーム生成部１１０１１、映像フレームリミッタ１１０１２、音声レベルバー生成部１１０１３、音声レベルバーリミッタ１１０１４を少なくとも含んで構成される。そして、第１のＩＮ用画像生成処理部１１０１、第２のＩＮ用画像生成処理部１１０２、…、第１６のＩＮ用画像生成処理部１１１６それぞれは、パラメータ受信部１１０からの映像フレーム制御Ｖ１〜映像フレーム制御Ｖ１６、音声レベルバー制御Ａ１〜音声レベルバー制御Ａ１６を基にして、入力端子ＶＩＮ１〜入力端子ＶＩＮ１６それぞれに入力される素材Ｓ１〜素材Ｓ１６に関する映像フレームＶＦ１〜映像フレームＶＦ１６、および、音声レベルバーＡＬ１〜音声レベルバーＡＬ１６の画像を生成するものである。

【0031】

つまり、入力端子ＶＩＮ１〜入力端子ＶＩＮ１６それぞれに映像信号として入力される素材Ｓ１〜素材Ｓ１６は、映像フレーム生成部１１０１１において、パラメータ受信部１１０からの制御用パラメータとして指定された映像フレーム制御Ｖ１〜映像フレーム制御Ｖ１６の画像サイズや配置位置に基づいて、入力映像すなわち素材Ｓ１〜素材Ｓ１６それぞれに関する画像縮小率や配置位置を決定して、それぞれ、決定した画像縮小率に応じて縮小させた縮小画像に変換されて、決定した配置位置それぞれに配置された状態の映像フレームとして生成される。さらに、映像フレームリミッタ１１０１２において、映像フレーム生成部１１０１１にて生成された縮小画像（映像フレーム）それぞれの上限値を０ｘ３ＦＢ、下限値を０ｘ００５のデータ範囲にリミットし、該縮小画像が配置されていない領域を０ｘ００４のデータに設定した映像フレームＶＦ１〜映像フレームＶＦ１６として出力される。

【0032】

また、入力端子ＶＩＮ１〜入力端子ＶＩＮ１６それぞれに音声信号として入力される素材Ｓ１〜素材Ｓ１６は、音声レベルバー生成部１１０１３において音声レベルが検出された後、パラメータ受信部１１０からの制御用パラメータとして指定された音声レベルバー制御Ａ１〜音声レベルバー制御Ａ１６のレベルバー数や画像サイズ、配置位置に基づいて、検出した音声レベルに相当する座標に変換される。しかる後、該画像サイズに応じた大きさに変換されて、該配置位置が示す位置に配置された音声レベルバー画像として生成される。さらに、音声レベルバーリミッタ１１０１４において、映像フレームと同様のリミット処理が実施されて、音声レベルバーＡＬ１〜音声レベルバーＡＬ１６の画像として出力される。

【0033】

第１のＣＡＳ用画像合成処理部１１１、第２のＣＡＳ用画像合成処理部１１２、第３のＣＡＳ用画像合成処理部１１３それぞれは、他の３台の画像合成装置それぞれ（すなわち第２の画像合成装置１２、第３の画像合成装置１３、第４の画像合成装置のそれぞれ）に対して出力する合成画像を生成するものである。そして、第１のＣＡＳ用画像合成処理部１１１、第２のＣＡＳ用画像合成処理部１１２、第３のＣＡＳ用画像合成処理部１１３それぞれは、パラメータ受信部１１０からのＯＮ制御Ｍ１〜ＯＮ制御Ｍ３を基にして、第１のＩＮ用画像生成処理部１１０１〜第１６のＩＮ用画像生成処理部１１１６それぞれからの映像フレームＶＦ１〜映像フレームＶＦ１６と音声レベルバーＡＬ１〜音声レベルバーＡＬ１６の画像とのうち、他の３台の画像合成装置それぞれに対して出力する画像を選択して合成するものである。なお、第１のＣＡＳ用画像合成処理部１１１、第２のＣＡＳ用画像合成処理部１１２、第３のＣＡＳ用画像合成処理部１１３それぞれは、ＩＮ１〜ＩＮ１６用キー生成部１１１１、画像合成部１１１２を少なくとも含んで構成される。

【0034】

つまり、第１のＣＡＳ用画像合成処理部１１１、第２のＣＡＳ用画像合成処理部１１２、第３のＣＡＳ用画像合成処理部１１３それぞれのＩＮ１〜１６用キー生成部１１１１においては、第１のＩＮ用画像生成処理部１１０１〜第１６のＩＮ用画像生成処理部１１１６それぞれからの映像フレームＶＦ１〜映像フレームＶＦ１６と音声レベルバーＡＬ１〜音声レベルバーＡＬ１６の画像との合成領域を検出するものであって、０ｘ００４以外のデータが存在する領域が該合成領域となる。

【0035】

そして、第１のＣＡＳ用画像合成処理部１１１、第２のＣＡＳ用画像合成処理部１１２、第３のＣＡＳ用画像合成処理部１１３それぞれのＩＮ１〜１６用キー生成部１１１１に制御用パラメータとして入力されるパラメータ受信部１１０からのＯＮ制御Ｍ１〜ＯＮ制御Ｍ３は、第１のＩＮ用画像生成処理部１１０１〜第１６のＩＮ用画像生成処理部１１１６それぞれからの映像フレームＶＦ１〜映像フレームＶＦ１６と音声レベルバーＡＬ１〜音声レベルバーＡＬ１６の画像との合成領域を有効にするものである。つまり、ＩＮ１〜１６用キー生成部１１１１において検出した映像フレームＶＦ１〜映像フレームＶＦ１６と音声レベルバーＡＬ１〜音声レベルバーＡＬ１６の画像との合成領域のうち、ＯＮ制御Ｍ１〜ＯＮ制御Ｍ３により有効となっている映像フレーム、音声レベルバーの画像の合成領域を抽出して、合成キーとして生成して出力する。

【0036】

また、画像合成部１１１２においては、ＩＮ１〜１６用キー生成部１１１１から出力された合成キーを基にして、第１のＩＮ用画像生成処理部１１０１〜第１６のＩＮ用画像生成処理部１１１６それぞれからの映像フレームＶＦ１〜映像フレームＶＦ１６と音声レベルバーＡＬ１〜音声レベルバーＡＬ１６の画像とのうち、合成キーとして有効になっている合成領域の映像フレームと音声レベルバーの画像とに関する画像合成を行い、合成画像を生成する。なお、画像合成後の映像信号は、合成キーとして有効になっている合成領域以外の領域については０ｘ００４のデータとなる。

【0037】

第１のＣＡＳ用画像合成処理部１１１、第２のＣＡＳ用画像合成処理部１１２、第３のＣＡＳ用画像合成処理部１１３それぞれにおいて、生成した画像合成後の映像信号は、他の３台の画像合成装置（すなわち、第１の画像合成装置１１の場合には、第２の画像合成装置１２、第３の画像合成装置１３、第４の画像合成装置１４）それぞれへの合成画像として出力される。

【0038】

ＯＵＴ用画像合成処理部１１５は、パラメータ受信部１１０からのＯＮ制御Ｍ４を基にして、第１のＩＮ用画像生成処理部１１０１〜第１６のＩＮ用画像生成処理部１１１６それぞれからの映像フレームＶＦ１〜映像フレームＶＦ１６と音声レベルバーＡＬ１〜音声レベルバーＡＬ１６の画像とのそれぞれを合成した合成画像のうち、モニタ用として表示する合成画像を抽出する。そして、抽出した該合成画像と、他の３台の画像合成装置（すなわち、第１の画像合成装置１１の場合には、第２の画像合成装置１２、第３の画像合成装置１３、第４の画像合成装置１４）それぞれから入力されてくる合成画像と、をさらに合成する。しかる後、パラメータ受信部１１０からのテキスト制御を基にして、合成画像に重畳させる文字画像の合成を行い、さらに、パラメータ受信部１１０からの背景制御を基にして、背景合成を行う。このため、ＯＵＴ用画像合成処理部１１５は、第１のＣＡＳ用キー生成部１１５１、第２のＣＡＳ用キー生成部１１５２、第３のＣＡＳ用キー生成部１１５３、ＩＮ１〜１６用キー生成部１１５４、ＯＲ部１１５５、画像合成部１１５６、テキスト合成部１１５７、背景合成部１１５８を少なくとも含んで構成される。

【0039】

つまり、第１のＣＡＳ用キー生成部１１５１、第２のＣＡＳ用キー生成部１１５２、第３のＣＡＳ用キー生成部１１５３それぞれにおいては、他の３台の画像合成装置（すなわち、第１の画像合成装置１１の場合には、第２の画像合成装置１２、第３の画像合成装置１３、第４の画像合成装置１４）それぞれから入力されてくる合成画像に関する画像領域を検出して、合成キーとして生成して出力するものである。他の３台の画像合成装置それぞれから入力される映像信号は、当該第１の画像合成装置の第１のＣＡＳ用画像合成処理部１１１、第２のＣＡＳ用画像合成処理部１１２、第３のＣＡＳ用画像合成処理部１１３それぞれにおける場合と同様の処理を他の３台の画像合成装置それぞれにおいて行っているので、０ｘ００４以外のデータが存在している領域が合成画像領域となる。したがって、０ｘ００４以外のデータが存在する領域を検出して、合成キーを生成する。

【0040】

また、ＩＮ１〜１６用キー生成部１１５４においては、当該第１の画像合成装置における第１のＩＮ用画像生成処理部１１０１〜第１６のＩＮ用画像生成処理部１１１６それぞれからの映像フレームＶＦ１〜映像フレームＶＦ１６と音声レベルバーＡＬ１〜音声レベルバーＡＬ１６の画像との合成画像が存在する合成画像領域を検出するものであって、０ｘ００４以外のデータが存在している領域が合成画像領域となる。さらに、パラメータ受信部１１０からＩＮ１〜１６用キー生成部１１５４に制御用パラメータとして入力されるＯＮ制御Ｍ４は、第１のＩＮ用画像生成処理部１１０１〜第１６のＩＮ用画像生成処理部１１１６それぞれからの映像フレームＶＦ１〜映像フレームＶＦ１６と音声レベルバーＡＬ１〜音声レベルバーＡＬ１６の画像との合成画像の合成画像領域を有効にするものである。したがって、ＩＮ１〜１６用キー生成部１１５４においては、検出した映像フレーム、音声レベルバーの画像の合成画像領域（すなわち０ｘ００４以外のデータが存在している領域）に関して、さらに、ＯＮ制御Ｍ４によって有効となっている合成画像領域を抽出して、合成キーとして生成する。

【0041】

次いで、ＯＲ部１１５５においては、第１のＣＡＳ用キー生成部１１５１、第２のＣＡＳ用キー生成部１１５２、第３のＣＡＳ用キー生成部１１５３それぞれとＩＮ１〜１６用キー生成部１１５４とにおいて生成された合成キーをＯＲすることによって、４台全ての画像合成装置（第１の画像合成装置１１〜第４の画像合成装置１４）における合成画像領域を示すＯＵＴ用合成キーを生成する。

【0042】

画像合成部１１５６においては、ＯＲ部１１５５において生成したＯＵＴ用合成キーを基にして、第１のＩＮ用画像生成処理部１１０１〜第１６のＩＮ用画像生成処理部１１１６それぞれからの映像フレームＶＦ１〜映像フレームＶＦ１６と音声レベルバーＡＬ１〜音声レベルバーＡＬ１６の画像のうちＯＵＴ用合成キーにより有効になっている映像フレームと音声レベルバーの画像と、他の３台の画像合成装置（すなわち、第１の画像合成装置１１の場合には、第２の画像合成装置１２、第３の画像合成装置１３、第４の画像合成装置１４）それぞれから入力されてくる合成画像のうちＯＵＴ用合成キーにより有効になっている領域の合成画像と、の画像合成を行う。なお、画像合成後の映像信号は、合成画像領域以外の領域は０ｘ００４のデータとなる。

【0043】

さらに、テキスト合成部１１５７においては、パラメータ受信部１１０から制御用パラメータとして入力されるテキスト制御が指定する文字列や当該文字列の文字サイズ、配置位置を基にして、文字画像を生成して、画像合成部１１５６からの映像信号に重畳させる形で合成する。なお、文字画像のデータは、上限値を０ｘ３ＦＢ、下限値を０ｘ００５のデータにリミットしている。そして、合成画像領域および文字画像領域以外の領域については、０ｘ００４のデータとなっている。

【0044】

さらに、背景合成部１１５８においては、パラメータ受信部１１０から制御用パラメータとして入力される背景制御の着色情報を基にして、背景画像を生成して、テキスト合成部１１５７からの映像信号のうち、合成画像領域および文字画像領域以外の０ｘ００４のデータが設定されている領域に、生成した背景画像を配置するように合成する。

【0045】

第１の画像合成装置１１のＯＵＴ用画像合成処理部１１５において生成した映像信号は、モニタ表示を行うためのモニタ表示用合成画像ＭＶ１−ＯＵＴとして、出力端子ＶＯＵＴから第１のモニタ装置２１に対して出力され、該モニタ表示用合成画像ＭＶ１−ＯＵＴを受信した第１のモニタ装置２１においては、モニタ表示用の合成画像としてモニタ画面に表示する。

【0046】

以上のように、本実施形態によるモニタ用画像合成システムを構成する第１の画像合成装置１１は、他の３台の画像合成装置（すなわち、第２の画像合成装置１２、第３の画像合成装置１３、第４の画像合成装置１４）に対して合成画像映像を出力する手段と、他の３台の画像合成装置からの合成画像映像を入力する手段とを備えることにより、複数の画像合成装置を連結して動作させることができるので、モニタ用の対象となる全ての素材Ｓ１〜素材６４を、４台の画像合成装置（すなわち、第１の画像合成装置１１〜第４の画像合成装置１４）間で共有することができる。したがって、４台の画像合成装置（すなわち、第１の画像合成装置１１〜第４の画像合成装置１４）それぞれは、モニタ用の対象となる全ての素材Ｓ１〜素材６４に関して、任意の組み合わせで合成画像を生成して、それぞれに接続されているモニタ装置（すなわち、図２に後述する第１のモニタ装置２１〜第４のモニタ装置２４）に並行して画面表示することができる。

【0047】

また、各画像合成装置は、他の３台の画像合成装置（例えば、第１の画像合成装置１１の場合、第２の画像合成装置１２、第３の画像合成装置１３、第４の画像合成装置１４）との間の画像の入出力に関しては、素材Ｓ１〜素材Ｓ６４の映像フレームや音声レベルバーの画像ではなく、有効な合成画像領域に存在する映像フレームと音声レベルバーの画像とが合成された合成画像を用いている（すなわち他の３台の画像合成装置との間で入出力される画像はち他の３台の画像合成装置との間の入出力が有効とされた画像合成領域に存在する合成画像である）ので、装置間を接続する配線数も大幅に削減することができる。なお、以上の説明においては、モニタ用画像合成システムを４台の画像合成装置により構成する場合について説明したが、４台の画像合成装置に限るものではなく、任意の台数であって構わないことは言うまでもない。

【0048】

（本発明によるモニタ用画像合成システムのシステム構成例）
次に、本発明によるモニタ用画像合成システムのシステム構成の一例について、図２を用いて詳細に説明する。図２は、本発明によるモニタ用画像合成システムのシステム構成の一例を示すシステム構成図であり、４台の画像合成装置と４台のモニタ装置と制御端末とを含んで構成されている場合について示している。

【0049】

ここで、図２に示す４台の画像合成装置すなわち第１の画像合成装置１１、第２の画像合成装置１２、第３の画像合成装置１３、第４の画像合成装置１４は、いずれも、図１に示した第１の画像合成装置１１と同一のブロック構成からなっており、４台の画像合成装置を連結して動作させるために互いの間を相互に接続している。また、図２に示す制御端末３０は、現状の技術として図９に示した制御端末３０Ａの場合とは異なり、合成画像のレイアウトに関するデータの他に、図９に示したモニタ用スイッチャ４０の切替制御を行うデータを生成する代わりに、４台の画像合成装置の連結動作を行うためのデータを生成して、制御用パラメータとして、４台の画像合成装置に対して出力する。また、４台のモニタ装置すなわち第１のモニタ装置２１、第２のモニタ装置２２、第３のモニタ装置２３、第４のモニタ装置２４は、図９に示したものと同一のものであって構わない。なお、画像合成装置およびモニタ装置の台数については４台に限るものではなく、任意の複数台から構成するようにしても構わない。

【0050】

４台の画像合成装置すなわち第１の画像合成装置１１、第２の画像合成装置１２、第３の画像合成装置１３、第４の画像合成装置１４それぞれは、入力部として、素材Ｓ１〜素材Ｓ１６、素材Ｓ１７〜素材Ｓ３２、素材Ｓ３３〜素材Ｓ４８、素材Ｓ４９〜素材Ｓ６４それぞれを入力するための入力端子ＶＩＮ１〜入力端子ＶＩＮ１６と、他の３台の画像合成装置（例えば、第１の画像合成装置１１の場合、第２の画像合成装置１２、第３の画像合成装置１３、第４の画像合成装置１４の３台の画像合成装置）それぞれからの合成画像を入力するためのＣＡＳ用入力端子ＣＡＳ−ＩＮ１、ＣＡＳ用入力端子ＣＡＳ−ＩＮ２、ＣＡＳ用入力端子ＣＡＳ−ＩＮ３と、制御端末３０からの制御用パラメータを入力するためのＣＯＮＴ用入力端子ＣＯＮＴ−ＩＮと、が備えられている。

【0051】

また、４台の画像合成装置すなわち第１の画像合成装置１１、第２の画像合成装置１２、第３の画像合成装置１３、第４の画像合成装置１４それぞれは、出力部として、対応する４台のモニタ装置すなわち第１のモニタ装置２１、第２のモニタ装置２２、第３のモニタ装置２３、第４のモニタ装置２４それぞれと接続して、モニタ表示用合成画像を出力するための出力端子ＶＯＵＴと、他の３台の画像合成装置（例えば、第１の画像合成装置１１の場合、第２の画像合成装置１２、第３の画像合成装置１３、第４の画像合成装置１４の３台の画像合成装置）それぞれへ連結用の合成画像を出力するためのＣＡＳ用出力端子ＣＡＳ−ＯＵＴ１〜ＣＡＳ用出力端子ＣＡＳ−ＯＵＴ３と、が備えられている。

【0052】

つまり、第１の画像合成装置１１は、ＣＡＳ用出力端子ＣＡＳ−ＯＵＴ１を、第２の画像合成装置１２のＣＡＳ用入力端子ＣＡＳ−ＩＮ１に接続して、第２の画像合成装置１２向けの合成画像ＭＶ１−ＣＡＳ２を転送する。また、ＣＡＳ用出力端子ＣＡＳ−ＯＵＴ２を、第３の画像合成装置１３のＣＡＳ用入力端子ＣＡＳ−ＩＮ１に接続して、第３の画像合成装置１３向けの合成画像ＭＶ１−ＣＡＳ３を転送する。また、ＣＡＳ用出力端子ＣＡＳ−ＯＵＴ３を、第４の画像合成装置１４のＣＡＳ用入力端子ＣＡＳ−ＩＮ１に接続して、第４の画像合成装置１４向けの合成画像ＭＶ１−ＣＡＳ４を転送する。

【0053】

同様に、第２の画像合成装置１２は、ＣＡＳ用出力端子ＣＡＳ−ＯＵＴ１を、第１の画像合成装置１１のＣＡＳ用入力端子ＣＡＳ−ＩＮ１に接続して、第１の画像合成装置１１向けの合成画像ＭＶ２−ＣＡＳ１を転送する。また、ＣＡＳ用出力端子ＣＡＳ−ＯＵＴ２を、第３の画像合成装置１３のＣＡＳ用入力端子ＣＡＳ−ＩＮ２に接続して、第３の画像合成装置１３向けの合成画像ＭＶ２−ＣＡＳ３を転送する。また、ＣＡＳ用出力端子ＣＡＳ−ＯＵＴ３を、第４の画像合成装置１４のＣＡＳ用入力端子ＣＡＳ−ＩＮ２に接続して、第４の画像合成装置１４向けの合成画像ＭＶ２−ＣＡＳ４を転送する。

【0054】

同様に、第３の画像合成装置１３は、ＣＡＳ用出力端子ＣＡＳ−ＯＵＴ１を、第１の画像合成装置１１のＣＡＳ用入力端子ＣＡＳ−ＩＮ２に接続して、第１の画像合成装置１１向けの合成画像ＭＶ３−ＣＡＳ１を転送する。また、ＣＡＳ用出力端子ＣＡＳ−ＯＵＴ２を、第２の画像合成装置１２のＣＡＳ用入力端子ＣＡＳ−ＩＮ２に接続して、第２の画像合成装置１２向けの合成画像ＭＶ３−ＣＡＳ２を転送する。また、ＣＡＳ用出力端子ＣＡＳ−ＯＵＴ３を、第４の画像合成装置１４のＣＡＳ用入力端子ＣＡＳ−ＩＮ３に接続して、第４の画像合成装置１４向けの合成画像ＭＶ３−ＣＡＳ４を転送する。

【0055】

同様に、第４の画像合成装置１４は、ＣＡＳ用出力端子ＣＡＳ−ＯＵＴ１を、第１の画像合成装置１１のＣＡＳ用入力端子ＣＡＳ−ＩＮ３に接続して、第１の画像合成装置１１向けの合成画像ＭＶ４−ＣＡＳ１を転送する。また、ＣＡＳ用出力端子ＣＡＳ−ＯＵＴ２を、第２の画像合成装置１２のＣＡＳ用入力端子ＣＡＳ−ＩＮ３に接続して、第２の画像合成装置１２向けの合成画像ＭＶ４−ＣＡＳ２を転送する。また、ＣＡＳ用出力端子ＣＡＳ−ＯＵＴ３を、第３の画像合成装置１３のＣＡＳ用入力端子ＣＡＳ−ＩＮ３に接続して、第３の画像合成装置１３向けの合成画像ＭＶ４−ＣＡＳ３を転送する。

【0056】

次に、制御端末３０は、図１において説明したように、４台の画像合成装置（すなわち、第１の画像合成装置１１〜第４の画像合成装置１４の４台の画像合成装置）それぞれに対するレイアウトデータを生成して、それぞれの制御用パラメータＣＯＮＴ１〜制御用パラメータＣＯＮＴ４として、ＣＯＮＴ用出力端子ＣＯＮＴ−ＯＵＴから４台の画像合成装置それぞれのＣＯＮＴ用入力端子ＣＯＮＴ−ＩＮに対して出力するものである。

【0057】

制御端末３０において生成する該レイアウトデータは、４台の画像合成装置すなわち第１の画像合成装置１１〜第４の画像合成装置１４それぞれ向けの制御用パラメータＣＯＮＴ１〜制御用パラメータＣＯＮＴ４となる４種類のレイアウトデータからなり、４種類のレイアウトデータそれぞれは、映像フレーム制御Ｖ１〜映像フレーム制御Ｖ１６と、音声レベルバー制御Ａ１〜音声レベルバー制御Ａ１６と、ＯＮ制御Ｍ１〜ＯＮ制御Ｍ４と、テキスト制御と、時計制御と、背景制御と、を含んで構成される。

【0058】

ここで、映像フレーム制御Ｖ１〜映像フレーム制御Ｖ１６は、第１の画像合成装置１１向けの場合は、素材Ｓ１〜素材Ｓ１６からそれぞれの縮小画像すなわち映像フレームＶＦ１〜映像フレームＶＦ１６を生成するための制御データであり、また、第２の画像合成装置１２向けの場合は、素材Ｓ１７〜素材Ｓ３２からそれぞれの縮小画像すなわち映像フレームＶＦ１〜映像フレームＶＦ１６を生成するための制御データであり、また、第３の画像合成装置１３向けの場合は、素材Ｓ３３〜素材Ｓ４８からそれぞれの縮小画像すなわち映像フレームＶＦ１〜映像フレームＶＦ１６を生成するための制御データであり、また、第４の画像合成装置１４向けの場合は、素材Ｓ４９〜素材Ｓ６４からそれぞれの縮小画像すなわち映像フレームＶＦ１〜映像フレームＶＦ１６を生成するための制御データである。

【0059】

また、音声レベルバー制御Ａ１〜音声レベルバー制御Ａ１６は、第１の画像合成装置１１向けの場合は、素材Ｓ１〜素材Ｓ１６それぞれに重畳された音声信号からそれぞれの音声レベルバーＡＬ１〜音声レベルバーＡＬ１６の画像を生成するための制御データであり、また、第２の画像合成装置１２向けの場合は、素材Ｓ１７〜素材Ｓ３２それぞれに重畳された音声信号からそれぞれの音声レベルバーＡＬ１〜音声レベルバーＡＬ１６の画像を生成するための制御データであり、また、第３の画像合成装置１３向けの場合は、素材Ｓ３３〜素材Ｓ４８それぞれに重畳された音声信号からそれぞれの音声レベルバーＡＬ１〜音声レベルバーＡＬ１６の画像を生成するための制御データであり、また、第４の画像合成装置１４向けの場合は、素材Ｓ４９〜素材Ｓ６４それぞれに重畳された音声信号からそれぞれの音声レベルバーＡＬ１〜音声レベルバーＡＬ１６の画像を生成するための制御データである。

【0060】

また、ＯＮ制御Ｍ１〜ＯＮ制御Ｍ３は、それぞれ、他の３台の画像合成装置（例えば、第１の画像合成装置１１の場合は、第２の画像合成装置１２、第３の画像合成装置１３、第４の画像合成装置１４の３台の画像合成装置）に対して出力する合成画像として、指定した有効な画像領域（すなわちＯＮ制御Ｍ１〜ＯＮ制御Ｍ３に基づいて生成した合成キーにより指定した画像領域）に存在している映像フレームと音声レベルバーの画像との合成を指示するための制御データである。また、ＯＮ制御Ｍ４は、接続したモニタ装置（例えば、第１の画像合成装置１１の場合は、第１のモニタ装置２１）に対して出力するモニタ表示用合成画像として、指定した有効な画像領域（すなわちＯＮ制御Ｍ４に基づいて生成した合成キーにより指定した画像領域）に存在している映像フレームと音声レベルバーの画像との合成を指示するための制御データである。

【0061】

また、テキスト制御は、接続したモニタ装置（例えば、第１の画像合成装置１１の場合は、第１のモニタ装置２１）に対して出力するモニタ表示用合成画像に重畳する文字画像を生成するための制御データである。また、背景制御は、接続したモニタ装置（例えば、第１の画像合成装置１１の場合は、第１のモニタ装置２１）に対して出力する映像信号のうち、合成画像および文字画像が存在していない領域を着色する背景画像を生成するための制御データである。

【0062】

なお、制御端末３０は、例えば図３に例示するようなレイアウト画面から、各画像合成装置（第１の画像合成装置１１〜第４の画像合成装置１４）それぞれに対する制御用パラメータＣＯＮＴ１〜ＣＯＮＴ４に該当するレイウアトデータを生成する機能を有している。図３は、図２に示すモニタ用画像合成システムを構成する４台のモニタ装置のうち第１のモニタ装置２１に画面表示したレイアウト画面の一例を示す模式図である。図３に示すレイアウト画面においては、１６素材分の縮小画像すなわち映像フレームが、４列×４行に配置され、各映像フレームの左右両側にそれぞれの映像フレームに対応する音声レベルバーの画像が配置され、さらに、各映像フレームの上側にそれぞれの映像フレームに対応するテキスト画像（文字画像）が配置されている例を示している。また、映像フレーム、音声レベルバー画像、テキスト画像が配置されていない領域は、背景の色が着色されている。

【0063】

なお、図３のレイアウト画面においては、１６素材分の縮小画像すなわち映像フレームのうち、第１行目の４素材分の映像フレームＭＶ１−１〜映像フレームＭＶ１−４の領域には、第１の画像合成装置１１の入力端子ＶＩＮ１〜入力端子ＶＩＮ４それぞれに入力された素材Ｓ１〜素材Ｓ４に関する映像フレームが配置され、また、第２行目の４素材分の映像フレームＭＶ２−１〜映像フレームＭＶ２−４の領域には、第２の画像合成装置１２の入力端子ＶＩＮ１〜入力端子ＶＩＮ４それぞれに入力された素材Ｓ１７〜素材Ｓ２０に関する映像フレームが配置され、また、第３行目の４素材分の映像フレームＭＶ３−１〜映像フレームＭＶ３−４の領域には、第３の画像合成装置１３の入力端子ＶＩＮ１〜入力端子ＶＩＮ４それぞれに入力された素材Ｓ３３〜素材Ｓ３６に関する映像フレームが配置され、また、第４行目の４素材分の映像フレームＭＶ４−１〜映像フレームＭＶ４−４の領域には、第４の画像合成装置１４の入力端子ＶＩＮ１〜入力端子ＶＩＮ４それぞれに入力された素材Ｓ４９〜素材Ｓ５２に関する映像フレームが配置される場合を示している。

【0064】

制御端末３０は、図３に示したようなレイアウト画面に基づいて、第１の画像合成装置１１用の映像フレーム制御Ｖ１〜Ｖ１６（素材Ｓ１〜素材Ｓ１６に関する縮小率、位置を算出するための配置座標）、音声レベルバー制御Ａ１〜Ａ１６（素材Ｓ１〜素材Ｓ１６に関する音声レベルの座標を算出するための配置座標）、ＯＮ制御（素材Ｓ１〜素材Ｓ１６に関する映像フレーム、音声レベルバー画像の配置の有無情報、および、他の画像合成装置からの合成画像の配置の有無情報）、テキスト制御（素材Ｓ１〜素材Ｓ１６に関する文字画像を合成するための文字情報や配置座標）、背景制御（背景の着色情報）を、第１の画像合成装置１１向けの制御用パラメータＣＯＮＴ１として生成して、第１の画像合成装置１１に対して出力する。

【0065】

同様に、第２の画像合成装置１２〜第４の画像合成装置１４用の映像フレーム制御Ｖ１〜Ｖ１６（素材Ｓ１７〜素材Ｓ３２、素材Ｓ３３〜素材４８、素材４９〜素材６４それぞれに関する縮小率、位置を算出するための配置座標）、音声レベルバー制御Ａ１〜Ａ１６（素材Ｓ１７〜素材Ｓ３２、素材Ｓ３３〜素材４８、素材４９〜素材６４それぞれに関する音声レベルバーの座標を算出するための配置座標）、ＯＮ制御（素材Ｓ１７〜素材Ｓ３２、素材Ｓ３３〜素材４８、素材４９〜素材６４それぞれに関する映像フレーム、音声レベルバー画像の配置の有無情報、および、他の画像合成装置からの合成画像の配置の有無情報）、テキスト制御（素材Ｓ１７〜素材Ｓ３２、素材Ｓ３３〜素材４８、素材４９〜素材６４それぞれに関する文字を合成するための文字情報や配置座標）、背景制御（背景の着色情報）を、第２の画像合成装置１２〜第４の画像合成装置１４それぞれ向けの制御用パラメータＣＯＮＴ２〜制御用パラメータＣＯＮＴ４として生成して、第２の画像合成装置１２〜第４の画像合成装置１４それぞれに対して出力する。

【0066】

（モニタ用画像合成システムにおける合成画像の生成動作例の説明）
次に、図３のレイアウト画面に示したような合成画像を、図２に示したモニタ用画像合成システムにおいて生成するまでの動作例について、図４〜図８の模式図を用いて順を追って説明する。

【0067】

まず、図２に示すモニタ用画像合成システムの第２の画像合成装置１２が第１の画像合成装置１１向けの合成画像を生成する動作の一例について、図４を用いて説明する。図４は、図２に示すモニタ用画像合成システムの第２の画像合成装置１２において生成する合成画像の一例を示す模式図である。

【0068】

制御端末３０は、第２の画像合成装置１２向けの制御用パラメータＣＯＮＴ２として、素材Ｓ１７〜素材Ｓ３２のうち、素材Ｓ１７〜素材２０の４個の素材について、映像フレームと音声レベルバーの画像との合成を有効にするＯＮ制御Ｍ１を生成する。さらに、制御端末３０は、第２の画像合成装置１２向けの制御用パラメータＣＯＮＴ２として、素材Ｓ１７〜素材２０の４個の素材について、図４に示すモニタ画面の第２行目に横並びに映像フレームと音声レベルバーの画像との合成画像を配置するように、縮小率、配置位置を算出するための配置座標を示す映像フレーム制御Ｖ１〜Ｖ４と音声レベルバー制御Ａ１〜Ａ４とを生成する。しかる後、制御端末３０は、生成した制御用パラメータＣＯＮＴ２を第２の画像合成装置１２に対して出力する。

【0069】

その結果、第２の画像合成装置１２においては、制御端末３０から入力された制御用パラメータＣＯＮＴ２を基にして、少なくとも、第１のＩＮ用画像生成処理部１１０１〜第４のＩＮ用画像生成処理部１１０４それぞれにおいて、入力端子ＶＩＮ１〜入力端子ＶＩＮ４それぞれからの素材Ｓ１７〜素材Ｓ２０に関する映像フレームＶＦ１〜映像フレームＶＦ４が、図４に示すモニタ画面の第２行目に位置する４素材分の映像フレームＭＶ２−１〜映像フレームＭＶ２−４の領域に配置され、素材Ｓ１７〜素材Ｓ２０に関する音声レベルバーＡＬ１〜音声レベルバーＡＬ４の画像が、映像フレームＭＶ２−１〜映像フレームＭＶ２−４それぞれの領域の左右両側に配置される形で生成される。

【0070】

しかる後、第２の画像合成装置１２は、制御端末３０からの制御用パラメータＣＯＮＴ２を基にして、第１のＣＡＳ用画像合成処理部１１１において、第１のＩＮ用画像生成処理部１１０１〜第１６のＩＮ用画像生成処理部１１１６それぞれから出力される映像フレームＶＦ１〜ＶＦ１６、音声レベルバーＡＬ１〜ＡＬ１６の画像のうち、有効な画像領域として図４に示すモニタ画面の第２行目に位置する４素材分の映像フレームＭＶ２−１〜映像フレームＭＶ２−４の領域に存在する映像フレームＶＦ１〜映像フレームＶＦ４と音声レベルバーＡＬ１〜ＡＬ４の画像とのそれぞれに関する合成画像を生成する。なお、該合成画像が存在していない領域には０ｘ００４の背景データが挿入される。その結果、図４に示したようなレイアウトからなる合成画像が、第１の画像合成装置１１用の合成画像ＭＶ２−ＣＡＳ１として、第２の画像合成装置１２のＣＡＳ用出力端子ＣＡＳ−ＯＵＴ１から第１の画像合成装置１１のＣＡＳ用入力端子ＣＡＳ−ＩＮ１に入力される。

【0071】

次に、図２に示すモニタ用画像合成システムの第３の画像合成装置１３が第１の画像合成装置１１向けの合成画像を生成する動作の一例について、図５を用いて説明する。図５は、図２に示すモニタ用画像合成システムの第３の画像合成装置１３において生成する合成画像の一例を示す模式図である。

【0072】

制御端末３０は、第２の画像合成装置１２向けの制御用パラメータＣＯＮＴ２の場合と同様に、第３の画像合成装置１３向けの制御用パラメータＣＯＮＴ３として、素材Ｓ３３〜素材Ｓ４８のうち、素材Ｓ３３〜素材３６の４個の素材について、映像フレームと音声レベルバーの画像との合成を有効にするＯＮ制御Ｍ１を生成する。さらに、制御端末３０は、第３の画像合成装置１３向けの制御用パラメータＣＯＮＴ３として、素材Ｓ３３〜素材３６の４個の素材について、図５に示すモニタ画面の第３行目に横並びに映像フレームと音声レベルバーの画像との合成画像を配置するように、縮小率、配置位置を算出するための配置座標を示す映像フレーム制御Ｖ１〜Ｖ４と音声レベルバー制御Ａ１〜Ａ４とを生成する。しかる後、制御端末３０は、生成した制御用パラメータＣＯＮＴ３を第３の画像合成装置１３に対して出力する。

【0073】

その結果、第３の画像合成装置１３においては、第２の画像合成装置１２の場合と同様に、制御端末３０から入力された制御用パラメータＣＯＮＴ３を基にして、少なくとも、第１のＩＮ用画像生成処理部１１０１〜第４のＩＮ用画像生成処理部１１０４それぞれにおいて、入力端子ＶＩＮ１〜入力端子ＶＩＮ４それぞれからの素材Ｓ３３〜素材Ｓ３６に関する映像フレームＶＦ１〜映像フレームＶＦ４が、図５に示すモニタ画面の第３行目に位置する４素材分の映像フレームＭＶ３−１〜映像フレームＭＶ３−４の領域に配置され、素材Ｓ３３〜素材Ｓ３６に関する音声レベルバーＡＬ１〜音声レベルバーＡＬ４の画像が、映像フレームＭＶ３−１〜映像フレームＭＶ３−４それぞれの領域の左右両側に配置される形で生成される。

【0074】

しかる後、第３の画像合成装置１３は、制御端末３０からの制御用パラメータＣＯＮＴ３を基にして、第１のＣＡＳ用画像合成処理部１１１において、第１のＩＮ用画像生成処理部１１０１〜第１６のＩＮ用画像生成処理部１１１６それぞれから出力される映像フレームＶＦ１〜ＶＦ１６、音声レベルバーＡＬ１〜ＡＬ１６の画像のうち、有効な画像領域として図５に示すモニタ画面の第３行目に位置する４素材分の映像フレームＭＶ３−１〜映像フレームＭＶ３−４の領域に存在する映像フレームＶＦ１〜映像フレームＶＦ４と音声レベルバーＡＬ１〜ＡＬ４の画像とのそれぞれに関する合成画像を生成する。なお、該合成画像が存在していない領域には０ｘ００４の背景データが挿入される。その結果、図５に示したようなレイアウトからなる合成画像が、第１の画像合成装置１１用の合成画像ＭＶ３−ＣＡＳ１として、第３の画像合成装置１３のＣＡＳ用出力端子ＣＡＳ−ＯＵＴ１から第１の画像合成装置１１のＣＡＳ用入力端子ＣＡＳ−ＩＮ２に入力される。

【0075】

次に、図２に示すモニタ用画像合成システムの第４の画像合成装置１４が第１の画像合成装置１１向けの合成画像を生成する動作の一例について、図６を用いて説明する。図６は、図２に示すモニタ用画像合成システムの第４の画像合成装置１４において生成する合成画像の一例を示す模式図である。

【0076】

制御端末３０は、第２の画像合成装置１２向けの制御用パラメータＣＯＮＴ２の場合と同様に、第４の画像合成装置１４向けの制御用パラメータＣＯＮＴ４として、素材Ｓ４９〜素材Ｓ６４のうち、素材Ｓ４９〜素材５２の４個の素材について、映像フレームと音声レベルバーの画像との合成を有効にするＯＮ制御Ｍ１を生成する。さらに、制御端末３０は、第４の画像合成装置１４向けの制御用パラメータＣＯＮＴ４として、素材Ｓ４９〜素材５２の４個の素材について、図６に示すモニタ画面の第４行目に横並びに映像フレームと音声レベルバーの画像との合成画像を配置するように、縮小率、配置位置を算出するための配置座標を示す映像フレーム制御Ｖ１〜Ｖ４と音声レベルバー制御Ａ１〜Ａ４とを生成する。しかる後、制御端末３０は、生成した制御用パラメータＣＯＮＴ４を第４の画像合成装置１４に対して出力する。

【0077】

その結果、第４の画像合成装置１４においては、第２の画像合成装置１２の場合と同様に、制御端末３０から入力された制御用パラメータＣＯＮＴ４を基にして、少なくとも、第１のＩＮ用画像生成処理部１１０１〜第４のＩＮ用画像生成処理部１１０４それぞれにおいて、入力端子ＶＩＮ１〜入力端子ＶＩＮ４それぞれからの素材Ｓ４９〜素材Ｓ５２に関する映像フレームＶＦ１〜映像フレームＶＦ４が、図６に示すモニタ画面の第４行目に位置する４素材分の映像フレームＭＶ４−１〜映像フレームＭＶ４−４の領域に配置され、素材Ｓ４９〜素材Ｓ５２に関する音声レベルバーＡＬ１〜音声レベルバーＡＬ４の画像が、映像フレームＭＶ４−１〜映像フレームＭＶ４−４それぞれの領域の左右両側に配置される形で生成される。

【0078】

しかる後、第４の画像合成装置１４は、制御端末３０からの制御用パラメータＣＯＮＴ４を基にして、第１のＣＡＳ用画像合成処理部１１１において、第１のＩＮ用画像生成処理部１１０１〜第１６のＩＮ用画像生成処理部１１１６それぞれから出力される映像フレームＶＦ１〜ＶＦ１６、音声レベルバーＡＬ１〜ＡＬ１６の画像のうち、有効な画像領域として図６に示すモニタ画面の第４行目に位置する４素材分の映像フレームＭＶ４−１〜映像フレームＭＶ４−４の領域に存在する映像フレームＶＦ１〜映像フレームＶＦ４と音声レベルバーＡＬ１〜ＡＬ４の画像とのそれぞれに関する合成画像を生成する。なお、該合成画像が存在していない領域には０ｘ００４の背景データが挿入される。その結果、図６に示したようなレイアウトからなる合成画像が、第１の画像合成装置１１用の合成画像ＭＶ４−ＣＡＳ１として、第４の画像合成装置１４のＣＡＳ用出力端子ＣＡＳ−ＯＵＴ１から第１の画像合成装置１１のＣＡＳ用入力端子ＣＡＳ−ＩＮ３に入力される。

【0079】

次に、図２に示すモニタ用画像合成システムの第１の画像合成装置１１が、当該装置内において生成した合成画像と他の３台の画像合成装置（すなわち、第２の画像合成装置１２〜第４の画像合成装置１４）それぞれから入力される合成画像とを合成した合成画像を生成する動作の一例について、図７を用いて説明する。図７は、図２に示すモニタ用画像合成システムの第１の画像合成装置１１において、当該装置内で生成した合成画像と他の３台の画像合成装置それぞれから入力される合成画像とを合成した合成画像の一例を示す模式図である。すなわち、図７は、当該第１の画像合成装置１１において生成した合成画像と図４〜図６に示した他の３台の画像合成装置それぞれから入力された合成画像とを、制御端末３０からの制御用パラメータＣＯＮＴ１として指示されたレイアウトデータに基づいて合成した合成画像の例を示している。

【0080】

制御端末３０において、第２の画像合成装置１２向けの制御用パラメータＣＯＮＴ２の場合と同様に、第１の画像合成装置１１向けの制御用パラメータＣＯＮＴ１として、素材Ｓ１〜素材Ｓ１６のうち、素材Ｓ１〜素材４の４個の素材について、映像フレームと音声レベルバーの画像との合成を有効にするとともに、当該第１の画像合成装置１１にて生成した合成画像と他の３台の画像合成装置（すなわち、第２の画像合成装置１２〜第４の画像合成装置１４）それぞれから入力される合成画像との合成を有効にするＯＮ制御Ｍ４を生成する。さらに、制御端末３０は、第１の画像合成装置１１向けの制御用パラメータＣＯＮＴ１として、素材Ｓ１〜素材４の４個の素材について、図７に示すモニタ画面の第１行目に横並びに映像フレームと音声レベルバーの画像との合成画像を配置するように、縮小率、位置を算出するための配置座標を示す映像フレーム制御Ｖ１〜Ｖ４と音声レベルバー制御Ａ１〜Ａ４とを生成する。さらに、制御端末３０は、第１の画像合成装置１１向けの制御用パラメータＣＯＮＴ１として、合成画像の各画像領域に重畳して配置する文字画像を指示するテキスト制御、および、合成画像が存在していない領域に設定する背景色を指示する背景制御を生成する。しかる後、制御端末３０は、生成した制御用パラメータＣＯＮＴ１を第１の画像合成装置１１に対して出力する。

【0081】

その結果、第１の画像合成装置１１においては、第２の画像合成装置１２の場合と同様に、制御端末３０から入力された制御用パラメータＣＯＮＴ１を基にして、少なくとも、第１のＩＮ用画像生成処理部１１０１〜第４のＩＮ用画像生成処理部１１０４それぞれにおいて、入力端子ＶＩＮ１〜入力端子ＶＩＮ４それぞれからの素材Ｓ１〜素材Ｓ４に関する映像フレームＶＦ１〜映像フレームＶＦ４が、図７に示すモニタ画面の第１行目に位置する４素材分の映像フレームＭＶ１−１〜映像フレームＭＶ１−４の領域に配置され、素材Ｓ１〜素材Ｓ４に関する音声レベルバーＡＬ１〜音声レベルバーＡＬ４の画像が、映像フレームＭＶ１−１〜映像フレームＭＶ１−４それぞれの領域の左右両側に配置される形で生成される。

【0082】

しかる後、第１の画像合成装置１１は、制御端末３０からの制御用パラメータＣＯＮＴ１を基にして、ＯＵＴ用画像合成処理部１１５において、第１のＩＮ用画像生成処理部１１０１〜第１６のＩＮ用画像生成処理部１１１６それぞれから出力される映像フレームＶＦ１〜ＶＦ１６、音声レベルバーＡＬ１〜ＡＬ１６の画像のうち、有効な画像領域として図７に示すモニタ画面の第１行目に位置する４素材分の映像フレームＭＶ１−１〜映像フレームＭＶ１−４の領域に存在する映像フレームＶＦ１〜映像フレームＶＦ４と音声レベルバーＡＬ１〜ＡＬ４の画像とのそれぞれに関する合成画像を生成する。さらに、ＯＵＴ用画像合成処理部１１５においては、当該第１の画像合成装置１１において生成した合成画像に対して、有効な画像領域として図７に示すモニタ画面の第２行目〜第４行目それぞれの領域に存在する合成画像すなわち他の３台の画像合成装置（つまり第２の画像合成装置１２、第３の画像合成装置１３、第４の画像合成装置１４）それぞれから入力された図４〜図６に示す合成画像（合成画像ＭＶ２−ＣＡＳ１、合成画像ＭＶ３−ＣＡＳ１、合成画像ＭＶ４−ＣＡＳ１）とも合成される。その結果、図７に示したようなレイアウトからなる合成画像が、モニタ画面の第１行目〜第４行目の領域それぞれに、４台の画像合成装置（第１の画像合成装置１１〜第４の画像合成装置１４）それぞれにおいて生成された合成画像をさらに合成した合成画像として生成される。なお、図７に示すように、合成画像が存在していない領域には０ｘ００４の背景データが挿入される。

【0083】

つまり、図７に示す合成画像は、４台の画像合成装置（すなわち第１の画像合成装置１１〜第４の画像合成装置１４）の連結動作によって、素材Ｓ１〜素材Ｓ４、素材Ｓ１７〜素材Ｓ２０、素材Ｓ３３〜素材Ｓ３６、素材Ｓ４９〜素材Ｓ５２を基にして第１の画像合成装置１１〜第４の画像合成装置１４それぞれにおいて生成した映像フレームと音声レベルバーの画像との合成画像それぞれを最終的に第１の画像合成装置１１上において合成したものであって、該合成画像が存在していない領域は０ｘ００４の背景データとなっている。なお、生成する合成画像に関しては、モニタ対象となる６４個の素材Ｓ１〜素材Ｓ６４のうち、いずれの素材を組み合わせた合成画像であっても、制御端末３０にて生成する制御用パラメータＣＯＮＴ１〜ＣＯＮＴ４において任意に選択して設定することにより、生成することが可能である。

【0084】

次に、図８は、図２に示すモニタ用画像合成システムの第１の画像合成装置１１において、図７に示した映像フレームおよび音声レベルバーの画像の合成画像上に文字画像を重畳させた合成画像の一例を示す模式図である。制御端末３０は、第１の画像合成装置１１向けの制御用パラメータＣＯＮＴ１として、前述したように、さらに、合成画像それぞれの画像領域の上側に文字画像を配置するテキスト制御も生成して、第１の画像合成装置１１に対して出力している。

【0085】

その結果、第１の画像合成装置１１においては、制御端末３０からの制御用パラメータＣＯＮＴ１に含まれているテキスト制御を基にして、ＯＵＴ用画像合成処理部１１５において、図８に示すように、図７に示したモニタ画面の第１行目〜第４行目のそれぞれに４素材分ずつ位置する合計１６個の素材に関する映像フレーム、音声レベルバーの合成画像の領域それぞれの上側に、前記テキスト制御によって指示された文字画像ＴＢＴ−１〜文字画像ＴＢＴ−１６が重畳して挿入される。なお、映像フレームの画像、音声レベルバーの画像、文字画像が配置されていない領域には０ｘ００４の背景データが挿入されている。

【0086】

また、制御端末３０は、第１の画像合成装置１１向けの制御用パラメータＣＯＮＴ１として、前述したように、さらに、合成画像が配置されていない領域すなわち０ｘ００４の背景データが挿入されている領域に、指定した背景色を設定するという背景制御も生成して、第１の画像合成装置１１に対して出力している。したがって、図８に示した合成画像のレイアウトにおいて、背景データ０ｘ００４が挿入されている合成画像未配置の領域に対して、制御用パラメータＣＯＮＴ１の背景制御を基にして生成された背景色を合成する。その結果、図３に示したレイアウト画面と同じレイアウトからなる合成画像が生成されることになる。生成された該合成画像は、第１の画像合成装置１１用のモニタ表示用合成画像ＭＶ１−ＯＵＴとして、出力端子ＶＯＵＴから第１のモニタ装置２１に対して出力され、モニタ画面に表示される。

【0087】

以上のように、本実施形態においては、制御端末３０から４台の画像合成装置（第１の画像合成装置１１〜第４の画像合成装置１４）それぞれに入力されるレイアウトデータに関する制御用パラメータＣＯＮＴ１〜制御用パラメータＣＯＮＴ４に基づいて、第１の画像合成装置１１は、他の３台の画像合成装置（すなわち第２の画像合成装置１２、第３の画像合成装置１３、第４の画像合成装置１４）と連結動作を行うことにより、対象とする素材のいずれについても自由に取り込んで、任意の素材の組み合わせに関する合成画像を生成して、第１のモニタ装置２１に表示することができる。すなわち、本実施形態によるモニタ用画像合成システムは、４台の画像合成装置間の連結動作を行う仕組みを備えているので、本発明に関連する現状の技術として図９に示した画像合成システムの場合とは異なり、大きなモニタ用スイッチャ４０を備えることが不要になり、対象とする素材数の変動に対して、大規模な改修工事を行うことなく、より柔軟に対応することが可能になる。

【0088】

なお、図４〜図８に示した合成画像の生成動作は、制御端末３０からの制御用パラメータＣＯＮＴ１〜制御用パラメータＣＯＮＴ４に基づいて、第１の画像合成装置１１において、当該第１の画像合成装置１１自身が生成した合成画像のみならず、他の３台の画像合成装置（すなわち第２の画像合成装置１２、第３の画像合成装置１３、第４の画像合成装置１４）それぞれが生成した合成画像も含む形で、合成画像を生成する例を示した。しかし、かくのごとき動作は、第１の画像合成装置１１に限るものではなく、他の３台の画像合成装置（すなわち第２の画像合成装置１２、第３の画像合成装置１３、第４の画像合成装置１４）それぞれにおいても、全く同様の合成画像の生成動作を実施することができることは言うまでもない。また、対象とする素材の総個数が６４個であり、かつ、第１の画像合成装置１１〜第４の画像合成装置１４の４台の画像合成装置それぞれが１６個ずつの素材を入力する場合について説明したが、かくのごとき素材数（対象とする素材の総個数、各画像合成装置が入力する素材数）は一例を示すものであって、いずれも、任意の数を用いても構わないことも言うまでもない。

【0089】

（本実施形態の効果の説明）
以上に詳細に説明したように、本実施形態によるモニタ用画像合成システムにおいては、次のような効果が得られる。

【0090】

レイアウト画像を基にして任意のレイアウトデータを生成して出力することが可能な制御端末３０からの制御用パラメータＣＯＮＴ１〜制御用パラメータＣＯＮＴ４に基づいて、第１の画像合成装置１１〜第４の画像合成装置１４の４台の画像合成装置を連結して動作させることができる。而して、例えば、６４個の素材Ｓ１〜素材Ｓ６４のうち、任意に選択した素材Ｓ１〜素材Ｓ４、素材Ｓ１７〜素材Ｓ２０、素材Ｓ３３〜素材Ｓ３６、素材Ｓ４９〜素材Ｓ５２の組み合わせからなる複数個の素材を基にして、それぞれの映像フレーム、音声レベルバーの画像に関する合成画像を生成して、第１のモニタ装置２１に画面表示することができる。また、他のモニタ装置（すなわち、第２のモニタ装置２２、第３のモニタ装置２３、第４のモニタ装置２４）においても、同様に、制御端末３０からの制御用パラメータＣＯＮＴ１〜制御用パラメータＣＯＮＴ４に基づいて、第１の画像合成装置１１〜第４の画像合成装置１４の４台の画像合成装置を連結して動作させることにより、任意の組み合わせの素材を基にして、それぞれの映像フレーム、音声レベルバーの画像に関する合成画像を生成して、モニタ画面に表示することができる。

【0091】

また、第１の画像合成装置１１〜第４の画像合成装置１４それぞれにおいては、制御端末３０からの制御用パラメータＣＯＮＴ１〜制御用パラメータＣＯＮＴ４に基づいて、それぞれの任意の組み合わせの素材を基にして生成した映像フレーム、音声レベルバーの画像に関する合成画像上に、さらに、任意の文字画像を重畳させて画面表示することも可能であり、かつ、合成画像が存在していない領域に対して任意の背景色を設定することも可能である。

【0092】

なお、前述したように、本発明によるモニタ用画像合成システムにおいては、互いに連結動作させる画像合成装置の台数として、本実施形態の一例として示したような、第１の画像合成装置１１〜第４の画像合成装置１４の４台の画像合成装置を連結して動作させる場合に限るものではない。すなわち、各画像合成装置の間を連結するための連結用回路部（すなわち、第ｉのＣＡＳ用画像合成処理部１１ｉおよび第ｉのＣＡＳ用キー生成部１１５ｉ：ｉは自然数）と、連結用端子（連結用出力端子ＣＡＳ−ＯＵＴｉおよび連結用入力端子ＣＡＳ−ＩＮｉ）と、を備え、かつ、制御端末３０において制御用パラメータを該連結用回路部の構成に応じて編集する機能を備えることにしている。したがって、対象とする素材数に応じて任意の台数の画像合成装置を、互いの連結動作が可能な状態にして設置することができる。

【0093】

例えば、素材数が６４個を超えて増加した場合には、増加した素材数に応じて、４台を超える台数の画像合成装置を設置し、前記連結用回路部を増設するとともに、制御端末３０からの制御用パラメータを、素材数、画像合成装置の台数に応じて変更して生成することにより、各画像合成装置間を互いに連結動作させることが容易に可能であり、対象とする素材数の増加に対する拡張性を有する仕組みを実現することができる。

【0094】

また、第１の画像合成装置１１〜第４の画像合成装置１４の４台の画像合成装置それぞれに入力する素材数についても、同様であり、１６個に限るものではなく、各画像合成装置それぞれが、任意の素材数を入力するように構成することが可能であることも改めて説明するまでもない。

【0095】

以上のように、本実施形態におけるモニタ用画像合成システムにおいては、複数台の画像合成装置を互いに連結動作させることにより、対象とする全ての素材を、該画像合成装置間で共有することができるので、本発明に関連する現状の技術として図９に示したようなモニタ用スイッチャ３０は不要になる。その結果、対象とする素材数の変動に伴う大規模な改修工事を行うことも不要になり、素材数の変動に対しても容易に対応することが可能な融通性に富むシステムを構築することができる。

【0096】

さらには、本実施形態におけるモニタ用画像合成システムにおいては、複数台の画像合成装置それぞれにおいて扱っている各素材に関する映像フレームと音声レベルバーの画像そのものではなく、各素材に関する映像フレームと音声レベルバーの画像とを合成した合成画像を、複数台の画像合成装置間に受け渡すことによって、対象とする素材を共有するという仕組みを採用しているので、本発明に関連する現状の技術として図９に示したモニタ用画像合成システムに比して、各装置間に跨る配線数を大幅に削減することも可能になる。

【0097】

以上、本発明の好適な実施形態の構成を説明した。しかし、かかる実施形態は、本発明の単なる例示に過ぎず、何ら本発明を限定するものではないことに留意されたい。本発明の要旨を逸脱することなく、特定用途に応じて種々の変形変更が可能であることが、当業者には容易に理解できよう。

【符号の説明】

【0098】

１１ 第１の画像合成装置
１１Ａ 第１の画像合成装置
１２ 第２の画像合成装置
１２Ａ 第２の画像合成装置
１３ 第３の画像合成装置
１３Ａ 第３の画像合成装置
１４ 第４の画像合成装置
１４Ａ 第４の画像合成装置
２１ 第１のモニタ装置
２２ 第２のモニタ装置
２３ 第３のモニタ装置
２４ 第４のモニタ装置
３０ 制御端末
３０Ａ 制御端末
４０ モニタ用スイッチャ
４１ 切替制御部
１１０ パラメータ受信部
１１１ 第１のＣＡＳ用画像合成処理部
１１２ 第２のＣＡＳ用画像合成処理部
１１３ 第３のＣＡＳ用画像合成処理部
１１５ ＯＵＴ用画像合成処理部
１１０１ 第１のＩＮ用画像生成処理部
１１０２ 第２のＩＮ用画像生成処理部
１１０４ 第４のＩＮ用画像生成処理部
１１１１ ＩＮ１〜１６用キー生成部
１１１２ 画像合成部
１１１６ 第１６のＩＮ用画像生成処理部
１１５１ 第１のＣＡＳ用キー生成部
１１５２ 第２のＣＡＳ用キー生成部
１１５３ 第３のＣＡＳ用キー生成部
１１５４ ＩＮ１〜１６用キー生成部
１１５５ ＯＲ部
１１５６ 画像合成部
１１５７ テキスト合成部
１１５８ 背景合成部
１１０１１ 映像フレーム生成部
１１０１２ 映像フレームリミッタ
１１０１３ 音声レベルバー生成部
１１０１４ 音声レベルバーリミッタ
Ａ１ 音声レベルバー制御
Ａ１６ 音声レベルバー制御
ＡＬ１ 音声レベルバー
ＡＬ１６ 音声レベルバー
ＣＡＳ−ＩＮ１ ＣＡＳ用入力端子
ＣＡＳ−ＩＮ２ ＣＡＳ用入力端子
ＣＡＳ−ＩＮ３ ＣＡＳ用入力端子
ＣＡＳ−ＯＵＴ１ ＣＡＳ用出力端子
ＣＡＳ−ＯＵＴ２ ＣＡＳ用出力端子
ＣＡＳ−ＯＵＴ３ ＣＡＳ用出力端子
ＣＯＮＴ１ 制御用パラメータ
ＣＯＮＴ２ 制御用パラメータ
ＣＯＮＴ３ 制御用パラメータ
ＣＯＮＴ４ 制御用パラメータ
ＣＯＮＴ−ＩＮ ＣＯＮＴ用入力端子
ＣＯＮＴ−ＯＵＴ ＣＯＮＴ用出力端子
ＩＮ１ 入力端子
ＩＮ２ 入力端子
ＩＮ１６ 入力端子
ＩＮ６４ 入力端子
Ｍ１ ＯＮ制御
Ｍ４ ＯＮ制御
ＭＶ１−１ 映像フレーム
ＭＶ１−２ 映像フレーム
ＭＶ１−３ 映像フレーム
ＭＶ１−４ 映像フレーム
ＭＶ１−ＣＡＳ２ 合成画像
ＭＶ１−ＣＡＳ３ 合成画像
ＭＶ１−ＣＡＳ４ 合成画像
ＭＶ１−ＯＵＴ 合成画像（モニタ表示用）
ＭＶ２−１ 映像フレーム
ＭＶ２−２ 映像フレーム
ＭＶ２−３ 映像フレーム
ＭＶ２−４ 映像フレーム
ＭＶ２−ＣＡＳ１ 合成画像
ＭＶ２−ＣＡＳ３ 合成画像
ＭＶ２−ＣＡＳ４ 合成画像
ＭＶ２−ＯＵＴ 合成画像（モニタ表示用）
ＭＶ３−１ 映像フレーム
ＭＶ３−２ 映像フレーム
ＭＶ３−３ 映像フレーム
ＭＶ３−４ 映像フレーム
ＭＶ３−ＣＡＳ１ 合成画像
ＭＶ３−ＣＡＳ２ 合成画像
ＭＶ３−ＣＡＳ４ 合成画像
ＭＶ３−ＯＵＴ 合成画像（モニタ表示用）
ＭＶ４−１ 映像フレーム
ＭＶ４−２ 映像フレーム
ＭＶ４−３ 映像フレーム
ＭＶ４−４ 映像フレーム
ＭＶ４−ＣＡＳ１ 合成画像
ＭＶ４−ＣＡＳ２ 合成画像
ＭＶ４−ＣＡＳ３ 合成画像
ＭＶ４−ＯＵＴ 合成画像（モニタ表示用）
ＯＵＴ１ 出力端子
ＯＵＴ２ 出力端子
ＯＵＴ６４ 出力端子
Ｓ１ 素材
Ｓ２ 素材
Ｓ１６ 素材
Ｓ６４ 素材
ＴＢＴ−１ 文字画像
ＴＢＴ−１６ 文字画像
Ｖ１ 映像フレーム制御
Ｖ１６ 映像フレーム制御
ＶＦ１ 映像フレーム
ＶＦ１６ 映像フレーム
ＶＩＮ１ 入力端子
ＶＩＮ２ 入力端子
ＶＩＮ４ 入力端子
ＶＩＮ１６ 入力端子
ＶＯＵＴ 出力端子

【図1A】

【図1B】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】