知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2024-03-07
(45)【発行日】2024-03-15
(54)【発明の名称】送信装置、受信装置及び伝送システム
(51)【国際特許分類】
H04N 23/60 20230101AFI20240308BHJP
H04N 23/76 20230101ALI20240308BHJP
【ＦＩ】
H04N23/60 300
H04N23/76
【請求項の数】
20
(21)【出願番号】P 2022511720
(86)(22)【出願日】2021-03-09
(86)【国際出願番号】 JP2021009096
(87)【国際公開番号】W WO2021199944
(87)【国際公開日】2021-10-07
【審査請求日】2024-01-29
(31)【優先権主張番号】P 2020064353
(32)【優先日】2020-03-31
(33)【優先権主張国・地域又は機関】JP
(73)【特許権者】
【識別番号】316005926
【氏名又は名称】ソニーセミコンダクタソリューションズ株式会社
(74)【代理人】
【識別番号】100103850
【弁理士】
【氏名又は名称】田中 秀▲てつ▼
(74)【代理人】
【識別番号】100114177
【弁理士】
【氏名又は名称】小林 龍
(74)【代理人】
【識別番号】100066980
【弁理士】
【氏名又は名称】森 哲也
(72)【発明者】
【氏名】佐藤 弘和
【審査官】▲徳▼田 賢二
(56)【参考文献】
【文献】国際公開第２０１８／２２５４４９（ＷＯ，Ａ１）
【文献】特開平８－３２１９８９（ＪＰ，Ａ）
【文献】特開２００３－１４３６１１（ＪＰ，Ａ）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｈ０４Ｎ ２３／６０
Ｈ０４Ｎ ２３／７６
(57)【特許請求の範囲】
【請求項1】
撮像画像におけるＲＯＩ（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）の座標情報に基づいて、前記ＲＯＩの画像データのシェーディング補正処理を実行する処理部と前記シェーディング補正処理が行われた前記ＲＯＩの画像データをペイロードデータで送出するとともに、ＲＯＩ情報をエンベデッドデータで送出する送信部と、
を備える送信装置。
【請求項2】
前記処理部は、前記ＲＯＩの前記座標情報として少なくとも前記ＲＯＩの左上端部の座標を用いる請求項１に記載の送信装置。
【請求項3】
前記処理部は、前記ＲＯＩの左上端部の座標に基づいて前記撮像画像内における前記ＲＯＩの画像データの各画素の座標を生成し、生成した各画素の座標に基づいて前記ＲＯＩの画像データの各画素について輝度の増幅を行う
請求項２に記載の送信装置。
【請求項4】
前記ＲＯＩの左上端部の座標を起点として前記撮像画像内における前記ＲＯＩのＸ座標を計測する第一カウンタと、前記ＲＯＩの左上端部の座標を起点として前記撮像画像内における前記ＲＯＩのＹ座標を計測する第二カウンタと、を備え
前記処理部は、
前記第一カウンタおよび前記第二カウンタを用いて前記ＲＯＩの画像データの各画素の座標を生成する
請求項３に記載の送信装置。
【請求項5】
前記第一カウンタおよび前記第二カウンタは、カウンタ値が不連続な値に更新可能であり、前記処理部は、前記第一カウンタおよび前記第二カウンタを用いて前記撮像画像に含まれる複数の前記ＲＯＩの画像データの各画素の座標を生成する
請求項４に記載の送信装置。
【請求項6】
前記シェーディング補正処理に用いられる補正値が保持された補正値テーブルを備え、前記処理部は、前記座標情報に基づいて前記補正値テーブルから取得した前記補正値を用いて前記ＲＯＩの画像データの輝度を増幅する
請求項１に記載の送信装置。
【請求項7】
前記処理部は、前記ＲＯＩの画像データの各画素の座標に対応する前記補正値を前記補正値テーブルから取得して、前記ＲＯＩの画像データの各画素について感度の調整を行う請求項６に記載の送信装置。
【請求項8】
撮像画像におけるＲＯＩ（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）の座標情報に基づいて、前記ＲＯＩの画像データのシェーディング補正処理を実行する処理部、及び前記シェーディング補正処理が行われた前記ＲＯＩの画像データをペイロードデータで送出するとともに、ＲＯＩ情報をエンベデッドデータで送出する送信部を有する送信装置と、前記ＲＯＩに含まれる画像の画像データをペイロードデータに含むとともに、ＲＯＩ情報をエンベデッドデータに含む伝送信号を受信する受信部を有する受信装置と、
を備える伝送システム。
【請求項9】
前記送信装置は、前記処理部において前記ＲＯＩの左上端部の座標に基づいて前記撮像画像内における前記ＲＯＩの画像データの各画素の座標を前記座標情報として生成し、生成した前記ＲＯＩの画像データの各画素について輝度の増幅を行う請求項８に記載の伝送システム。
【請求項10】
前記送信装置は、前記シェーディング補正処理に用いられる補正値が保持された補正値テーブルを有し、前記座標情報に基づいて前記補正値テーブルから取得した前記補正値を用いて前記ＲＯＩの画像データの輝度を増幅する請求項８に記載の伝送システム。
【請求項11】
所定の撮像画像から切り出されたＲＯＩ（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）の画像データをペイロードデータに含むとともに、前記ＲＯＩに対応するＲＯＩ情報をエンベデッドデータに含む伝送信号を受信する受信部と、前記ＲＯＩ情報から抽出した前記ＲＯＩの座標情報に基づいて、前記ＲＯＩの画像データのシェーディング補正処理を実行する処理部と、
を備える受信装置。
【請求項12】
前記処理部は、前記ＲＯＩの前記座標情報として少なくとも前記ＲＯＩの左上端部の座標を前記ＲＯＩ情報から抽出する請求項１１に記載の受信装置。
【請求項13】
前記処理部は、前記ＲＯＩの左上端部の座標に基づいて前記撮像画像内における前記ＲＯＩの画像データの各画素の座標を生成し、生成した各画素の座標に基づいて前記ＲＯＩの画像データの各画素について輝度の増幅を行う請求項１２に記載の受信装置。
【請求項14】
前記ＲＯＩの左上端部の座標を起点として前記撮像画像内における前記ＲＯＩのＸ座標を計測する第一カウンタと、前記ＲＯＩの左上端部の座標を起点として前記撮像画像内における前記ＲＯＩのＹ座標を計測する第二カウンタと、を備え
前記処理部は、
前記第一カウンタおよび前記第二カウンタを用いて前記ＲＯＩの画像データの各画素の座標を生成する
請求項１３に記載の受信装置。
【請求項15】
前記第一カウンタおよび前記第二カウンタは、カウンタ値が不連続な値に更新可能であり、前記処理部は、前記第一カウンタおよび前記第二カウンタを用いて前記撮像画像に含まれる複数の前記ＲＯＩの画像データの各画素の座標を生成する
請求項１４に記載の受信装置。
【請求項16】
前記シェーディング補正処理に用いられる補正値が保持された補正値テーブルを備え、前記処理部は、前記座標情報に基づいて前記補正値テーブルから取得した前記補正値を用いて前記ＲＯＩの画像データの輝度を増幅する
請求項１１に記載の受信装置。
【請求項17】
前記処理部は、前記ＲＯＩの画像データの各画素の座標に対応する前記補正値を前記補正値テーブルから取得して、前記ＲＯＩの画像データの各画素について感度の調整を行う請求項１６に記載の受信装置。
【請求項18】
ＲＯＩ（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）の画像データをペイロードデータで送出するとともに、ＲＯＩ情報をエンベデッドデータで送出する送信装置と、所定の撮像画像から切り出されたＲＯＩ（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）の画像データをペイロードデータに含むとともに、前記ＲＯＩに対応するＲＯＩ情報をエンベデッドデータに含む伝送信号を受信する受信部、及び前記ＲＯＩ情報から抽出した前記ＲＯＩの座標情報に基づいて、前記ＲＯＩの画像データのシェーディング補正処理を実行する処理部を有する受信装置と、
を備える伝送システム。
【請求項19】
前記受信装置は、前記処理部において、前記ＲＯＩの前記座標情報として少なくとも前記ＲＯＩの左上端部の座標を前記ＲＯＩ情報から抽出し、抽出した前記左上端部の座標に基づいて前記撮像画像内における前記ＲＯＩの画像データの各画素の座標を前記座標情報として生成し、生成した前記ＲＯＩの画像データの各画素について輝度の増幅を行う請求項１８に記載の伝送システム。
【請求項20】
前記受信装置は、前記シェーディング補正処理に用いられる補正値が保持された補正値テーブルを備え、前記処理部において、前記座標情報に基づいて前記補正値テーブルから取得した前記補正値を用いて前記ＲＯＩの画像データの輝度を増幅する
請求項１８に記載の伝送システム。
【発明の詳細な説明】
【技術分野】
【0001】
本開示は、送信装置、受信装置及び伝送システムに関する。
【背景技術】
【0002】
近年、データ量の大きなデータを大量に送信する用途が増えてきている。伝送システムに大きな負荷がかかりやすく、最悪の場合には、伝送システムがダウンし、データ伝送が行えなくなるおそれがある。
【0003】
伝送システムのダウンを避けるために、例えば、撮影した画像を全て送信するのではなく、撮影対象の物体を特定し、特定した物体を切り出した一部の画像だけを送信することが行われていることが知られている（例えば特許文献１～４）。
【先行技術文献】
【特許文献】
【0004】
【文献】特開２０１６－２０１７５６号公報
【文献】特開２０１４－３９２１９号公報
【文献】特開２０１３－１６４８３４号公報
【文献】特開２０１２－２０９８３１号公報
【発明の概要】
【発明が解決しようとする課題】
【0005】
撮像画像から切り出した一部の注目領域（ＲＯＩ（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓt））を伝送する場合のシェーディング補正処理について、何ら検討されていない。
本開示の目的は、撮像画像から切り出した一部の注目領域（ＲＯＩ）のシェーディング補正処理を実現することにある。
本開示の目的は、撮像画像から切り出した一部の注目領域（ＲＯＩ）のシェーディング補正処理を実現することにある。
【課題を解決するための手段】
【0006】
本開示の一態様による送信装置は、撮像画像におけるＲＯＩ（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）の座標情報に基づいて、前記ＲＯＩの画像データのシェーディング補正処理を実行する処理部と前記シェーディング補正処理が行われた前記ＲＯＩの画像データをペイロードデータで送出するとともに、ＲＯＩ情報をエンベデッドデータで送出する送信部と、を備える。
【0007】
本開示の一態様による受信装置は、所定の撮像画像から切り出されたＲＯＩ（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）の画像データをペイロードデータに含むとともに、前記ＲＯＩに対応するＲＯＩ情報をエンベデッドデータに含む伝送信号を受信する受信部と、前記ＲＯＩ情報から抽出した前記ＲＯＩの座標情報に基づいて、前記ＲＯＩの画像データのシェーディング補正処理を実行する処理部と、を備える。
【0008】
本開示の一態様による伝送システムは、撮像画像におけるＲＯＩ（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）の座標情報に基づいて、前記ＲＯＩの画像データのシェーディング補正処理を実行する処理部、及び前記シェーディング補正処理が行われた前記ＲＯＩの画像データをペイロードデータで送出するとともに、ＲＯＩ情報をエンベデッドデータで送出する送信部を有する送信装置と、前記ＲＯＩに含まれる画像の画像データをペイロードデータに含むとともに、ＲＯＩ情報をエンベデッドデータに含む伝送信号を受信する受信部を有する受信装置と、を備える。
【0009】
また、本開示の他の一態様による伝送システムは、ＲＯＩ（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）の画像データをペイロードデータで送出するとともに、ＲＯＩ情報をエンベデッドデータで送出する送信装置と、所定の撮像画像から切り出されたＲＯＩ（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）の画像データをペイロードデータに含むとともに、前記ＲＯＩに対応するＲＯＩ情報をエンベデッドデータに含む伝送信号を受信する受信部、及び前記ＲＯＩ情報から抽出した前記ＲＯＩの座標情報に基づいて、前記ＲＯＩの画像データのシェーディング補正処理を実行する処理部を有する受信装置と、を備える。
【図面の簡単な説明】
【0010】
【図1】映像伝送システムの概略構成例を表す図である。
【図3】撮像画像に２つのＲＯＩが含まれているときの、伝送データの生成手順の一例を表す図である。
【図4】パケットヘッダの構成例を表す図である。
【図5】伝送データの構成例を表す図である。
【図6】伝送データの構成例を表す図である。
【図7】ロングパケットのペイロードデータの構成例を表す図である。
【図9】伝送データに２つの画像が含まれているときの、撮像画像に含まれる２つのＲＯＩ画像の生成手順の一例を表す図である。
【図10】撮像画像において特定された物体が配置された領域を模式的に示す図である。
【図11】特定された物体に対して設定されたＲＯＩ領域の一例を示す図である。
【図12】ＲＯＩ画像の位置情報がロングパケットのペイロードデータに含められている伝送データの構成例を示す図である。
【図13】シェーディング補正の対象となる撮像画像に含まれる注目領域の一例を模して気に示す図である。
【図14】シェーディング補正処理に用いられる補正値テーブルの一例を示す図である。
【図15】本開示におけるシェーディング補正処理を模式的に示す図である。
【図16】第１実施形態による映像送信装置、映像受信装置及び映像伝送システムの概略構成を示すブロック図である。
【図17】本開示におけるシェーディング補正処理に用いる注目領域の座標情報の生成を行う座標情報生成処理の流れの一例を示すフローチャートである。
【図18】第１実施形態による映像送信装置、映像受信装置及び映像伝送システムにおけるシェーディング補正処理の流れの一例を示すフローチャートである。
【図19】第２実施形態による映像送信装置、映像受信装置及び映像伝送システムの概略構成を示すブロック図である。
【図20】第２実施形態による映像送信装置、映像受信装置及び映像伝送システムにおけるシェーディング補正処理の流れの一例を示すフローチャートである。
【発明を実施するための形態】
【0011】
以下、本開示を実施するための形態について、図面を参照して詳細に説明する。以下の説明は本開示の一具体例であって、本開示は以下の態様に限定されるものではない。
【0012】
以下、本開示による技術を実施するための形態（以下、「実施形態」と称する）について、以下の順序により説明する。
１．本開示の前提技術１（撮像画像から切り出した一部（形状が矩形状）の注目領域（ＲＯＩ）を伝送する技術）
２．本開示の前提技術２（撮像画像から切り出した一部（形状が非矩形状）の注目領域（ＲＯＩ）を伝送する技術）
３．本開示の実施形態におけるシェーディング補正処理の原理
４．本開示の第１実施形態による映像送信装置、映像受信装置及び映像伝送システム
５．本開示の第２実施形態による映像送信装置、映像受信装置及び映像伝送システム
１．本開示の前提技術１（撮像画像から切り出した一部（形状が矩形状）の注目領域（ＲＯＩ）を伝送する技術）
２．本開示の前提技術２（撮像画像から切り出した一部（形状が非矩形状）の注目領域（ＲＯＩ）を伝送する技術）
３．本開示の実施形態におけるシェーディング補正処理の原理
４．本開示の第１実施形態による映像送信装置、映像受信装置及び映像伝送システム
５．本開示の第２実施形態による映像送信装置、映像受信装置及び映像伝送システム
【0013】
１．本開示の前提技術１：
[構成]
近年、スマートフォンなどの携帯デバイスやカメラデバイスなどでは、扱う画像データの大容量化が進み、デバイス内又は異なるデバイス間でのデータ伝送に高速化、かつ低消費電力化が求められている。このような要求に応えるため、携帯デバイスやカメラデバイス向けの接続インタフェースとして、ＭＩＰＩアライアンスが策定したＣ－ＰＨＹ規格やＤ－ＰＨＹ規格といった高速インタフェース規格の標準化が進められている。Ｃ－ＰＨＹ規格やＤ－ＰＨＹ規格は、通信プロトコルの物理層（ｐｈｙｓｉｃａｌ ｌａｙｅｒ：ＰＨＹ）のインタフェース規格である。また、Ｃ－ＰＨＹ規格やＤ－ＰＨＹ規格の上位プロトコル・レイヤとして、携帯デバイスのディスプレイ向けのＤＳＩや、カメラデバイス向けのＣＳＩが存在する。
[構成]
近年、スマートフォンなどの携帯デバイスやカメラデバイスなどでは、扱う画像データの大容量化が進み、デバイス内又は異なるデバイス間でのデータ伝送に高速化、かつ低消費電力化が求められている。このような要求に応えるため、携帯デバイスやカメラデバイス向けの接続インタフェースとして、ＭＩＰＩアライアンスが策定したＣ－ＰＨＹ規格やＤ－ＰＨＹ規格といった高速インタフェース規格の標準化が進められている。Ｃ－ＰＨＹ規格やＤ－ＰＨＹ規格は、通信プロトコルの物理層（ｐｈｙｓｉｃａｌ ｌａｙｅｒ：ＰＨＹ）のインタフェース規格である。また、Ｃ－ＰＨＹ規格やＤ－ＰＨＹ規格の上位プロトコル・レイヤとして、携帯デバイスのディスプレイ向けのＤＳＩや、カメラデバイス向けのＣＳＩが存在する。
【0014】
本開示の前提技術に係る映像伝送システム１は、種々の規格で信号を送受信できるシステムであり、例えばＭＩＰＩＣＳＩ－２規格、ＭＩＰＩＣＳＩ－３規格、又は、ＭＩＰＩＤＳＩ規格で信号を送受信することができる。図１は、本開示の前提技術に係る映像伝送システム１の概要を表したものである。映像伝送システム１は、データ信号、クロック信号及び制御信号の伝送に適用されるものであり、映像送信装置１００及び映像受信装置２００を備えている。映像伝送システム１は、映像送信装置１００と映像受信装置２００とに跨がって、例えば画像データ等のデータ信号を伝送するデータレーンＤＬと、クロック信号を伝送するクロックレーンＣＬと、制御信号を伝送するカメラ制御インタフェースＣＣＩとを備えている。図１には、１つのデータレーンＤＬが設けられている例が示されているが、複数のデータレーンＤＬが設けられていてもよい。カメラ制御インタフェースＣＣＩは、Ｉ２Ｃ（Ｉｎｔｅｒ－Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）規格と互換性を有する双方向制御インタフェースである。
【0015】
映像送信装置１００は、ＭＩＰＩＣＳＩ－２規格、ＭＩＰＩＣＳＩ－３規格、又は、ＭＩＰＩＤＳＩ規格で信号を送出する装置である。ＣＳＩトランスミッタ１００Ａと、ＣＣＩスレーブ１００Ｂとを有している。映像受信装置２００は、ＣＳＩレシーバ２００Ａと、ＣＣＩマスター２００Ｂとを有している。クロックレーンＣＬにおいて、ＣＳＩトランスミッタ１００ＡとＣＳＩレシーバ２００Ａとの間は、クロック信号線で接続されている。データレーンＤＬにおいて、ＣＳＩトランスミッタ１００ＡとＣＳＩレシーバ２００Ａとの間は、クロック信号線で接続されている。カメラ制御インタフェースＣＣＩにおいて、ＣＣＩスレーブ１００ＢとＣＣＩマスター２００Ｂとの間は、制御信号線で接続されている。
【0016】
ＣＳＩトランスミッタ１００Ａは、例えば、クロック信号として差動のクロック信号を生成し、クロック信号線に出力する差動信号送信回路である。ＣＳＩトランスミッタ１００Ａは、差動に限られず、シングルエンドや３相の信号も送信できるように構成可能である。ＣＳＩトランスミッタ１００Ａは、さらに、データ信号として差動のデータ信号を生成し、データ信号線に出力する差動信号送信回路でもある。ＣＳＩレシーバ２００Ａは、クロック信号として差動のクロック信号を、クロック信号線を介して受信し、受信した差動のクロック信号に対して所定の処理を行う差動信号受信回路である。ＣＳＩレシーバ２００Ａは、さらに、データ信号として差動のデータ信号を、データ信号線を介して受信し、受信した差動のデータ信号に対して所定の処理を行う差動信号受信回路でもある。
【0017】
（映像送信装置１００）
図２は、映像送信装置１００の構成の一例を表したものである。映像送信装置１００は、ＣＳＩトランスミッタ１００Ａの一具体例に相当する。映像送信装置１００は、例えば、撮像部１１０、画像処理部１２０，１３０及び送信部１４０を備えている。映像送信装置１００は、撮像部１１０で得られた撮像画像１１１に対して所定の処理を行うことにより生成した伝送データ１４７Ａを、データレーンＤＬを介して映像受信装置２００に送信する。図３は、伝送データ１４７Ａの生成手順の一例したものである。
図２は、映像送信装置１００の構成の一例を表したものである。映像送信装置１００は、ＣＳＩトランスミッタ１００Ａの一具体例に相当する。映像送信装置１００は、例えば、撮像部１１０、画像処理部１２０，１３０及び送信部１４０を備えている。映像送信装置１００は、撮像部１１０で得られた撮像画像１１１に対して所定の処理を行うことにより生成した伝送データ１４７Ａを、データレーンＤＬを介して映像受信装置２００に送信する。図３は、伝送データ１４７Ａの生成手順の一例したものである。
【0018】
撮像部１１０は、例えば、光学レンズなどを通して得られた光学的な画像信号を画像データに変換する。撮像部１１０は、例えば、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）イメージセンサやＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサを含んで構成されている。撮像部１１０は、アナログ－デジタル変換回路を有しており、アナログの画像データをデジタルの画像データに変換する。変換した後のデータ形式は、各画素の色を輝度成分Ｙ及び色差成分Ｃｂ，Ｃｒで表現するＹＣｂＣｒ形式であってもよいし、ＲＧＢ形式などであってもよい。撮像部１１０は、撮像により得られた撮像画像１１１（デジタルの画像データ）を画像処理部１２０に出力する。
【0019】
画像処理部１２０は、撮像部１１０から入力された撮像画像１１１に対して所定の処理を行う回路である。前提技術１では、画像処理部１２０は、ＲＯＩの切り出しを指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から入力された場合に、撮像部１１０から入力された撮像画像１１１に対して所定の処理を行う場合について説明する。しかしながら、前提技術１では、映像送信装置１００、すなわち送信側がＲＯＩの切り出しの座標指示する場合も適用できある。この場合、送信側は例えば、受信側から送出されるＲＯＩで取得すべき「人物」や「物体」等の情報を受信して切り出しの座標を判断および指示するように構成される。これにより、画像処理部１２０は、種々のデータ（１２０Ａ，１２０Ｂ，１２０Ｃ）を生成し、送信部１４０に出力する。画像処理部１３０は、撮像部１１０から入力された撮像画像１１１に対して所定の処理を行う回路である。画像処理部１３０は、通常画像の出力を指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から入力された場合に、撮像部１１０から入力された撮像画像１１１に対して所定の処理を行う。これにより、画像処理部１３０は、画像データ１３０Ａを生成し、送信部１４０に出力する。
【0020】
画像処理部１３０は、例えば、エンコード部１３１を有している。エンコード部１３１は、撮像画像１１１をエンコードして圧縮像データ１３０Ａを生成する。画像処理部１３０は、例えば、圧縮像データ１３０Ａの形式として、ＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）規格に準拠した圧縮形式等により撮像画像１１１を圧縮する。
【0021】
画像処理部１２０は、例えば、ＲＯＩ切り出し部１２１、ＲＯＩ解析部１２２、重なり検出部１２３、優先度設定部１２４、エンコード部１２５及び画像処理制御部１２６を有している。
【0022】
ＲＯＩ切り出し部１２１は、撮像部１１０から入力された撮像画像１１１に含まれる撮影対象の１又は複数の物体を特定し、特定した物体ごとに注目領域ＲＯＩを設定する。注目領域ＲＯＩは、例えば、特定した物体を含む方形状の領域である。ＲＯＩ切り出し部１２１は、撮像画像１１１から、各注目領域ＲＯＩの画像（例えば図３中のＲＯＩ画像１１２）を切り出す。ＲＯＩ切り出し部１２１は、さらに、設定した注目領域ＲＯＩごとに、識別子として領域番号を付与する。ＲＯＩ切り出し部１２１は、例えば、撮像画像１１１において、２つの注目領域ＲＯＩを設定した場合には、一方の注目領域ＲＯＩ（例えば図３中の注目領域ＲＯＩ１）に対して、領域番号１を付与し、他方の注目領域ＲＯＩ（例えば図３中の注目領域ＲＯＩ２）に対して、領域番号２を付与する。ＲＯＩ切り出し部１２１は、例えば、付与した識別子（領域番号）を記憶部に格納する。ＲＯＩ切り出し部１２１は、例えば、撮像画像１１１から切り出した各ＲＯＩ画像１１２を記憶部に格納する。ＲＯＩ切り出し部１２１は、さらに、例えば、各注目領域ＲＯＩに付与した識別子（領域番号）を、ＲＯＩ画像１１２と関連づけて、記憶部に格納する。
【0023】
ＲＯＩ解析部１２２は、注目領域ＲＯＩごとに、撮像画像１１１における注目領域ＲＯＩの位置情報１１３を導出する。位置情報１１３は、例えば、注目領域ＲＯＩの左上端座標（Ｘａ，Ｙａ）と、注目領域ＲＯＩのＸ軸方向の長さと、注目領域ＲＯＩのＹ軸方向の長さとによって構成されている。注目領域ＲＯＩのＸ軸方向の長さは、例えば、注目領域ＲＯＩのＸ軸方向の物理領域長さＸＬａである。注目領域ＲＯＩのＹ軸方向の長さは、例えば、注目領域ＲＯＩのＹ軸方向の物理領域長さＹＬａである。物理領域長さとは、注目領域ＲＯＩの物理的な長さ（データ長）を指している。位置情報１１３において、注目領域ＲＯＩの左上端とは異なる位置の座標が含まれていてもよい。ＲＯＩ解析部１２２は、例えば、導出した位置情報１１３を記憶部に格納する。ＲＯＩ解析部１２２は、例えば、注目領域ＲＯＩに対して付与された識別子（領域番号）と関連づけて、記憶部に格納する。
【0024】
ＲＯＩ解析部１２２は、注目領域ＲＯＩごとに、位置情報１１３として、さらに、例えば、注目領域ＲＯＩのＸ軸方向の出力領域長さＸＬｃや、注目領域ＲＯＩのＹ軸方向の出力領域長さＹＬｃを導出してもよい。出力領域長さとは、例えば、注目領域ＲＯＩに対して間引き処理や画素加算などによる解像度変更がなされた後の注目領域ＲＯＩの物理的な長さ（データ長）である。ＲＯＩ解析部１２２は、例えば、注目領域ＲＯＩごとに、位置情報１１３の他に、例えば、センシングインフォメーション、露光情報、ゲイン情報、ＡＤ（Analog-Digital）語長、画像フォーマットなどを導出し、記憶部に格納してもよい。
【0025】
センシングインフォメーションとは、注目領域ＲＯＩに含まれる物体についての演算内容や、ＲＯＩ画像１１２に対する後段信号処理のための補足情報などを指している。露光情報とは、注目領域ＲＯＩの露光時間を指している。ゲイン情報とは、注目領域ＲＯＩのゲイン情報を指している。ＡＤ語長とは、注目領域ＲＯＩ内でＡＤ変換された１画素あたりのデータの語長を指している。画像フォーマットとは、注目領域ＲＯＩの画像のフォーマットを指している。ＲＯＩ解析部１２２は、例えば、撮像画像１１１に含まれる注目領域ＲＯＩの数（ＲＯＩ数）を導出し、記憶部に格納してもよい。
【0026】
重なり検出部１２３は、撮像画像１１１において、撮影対象の複数の物体が特定されたときには、撮像画像１１１における複数の注目領域ＲＯＩの位置情報１１３に基づいて、２以上の注目領域ＲＯＩ同士が重なり合う重なり領域（ＲＯＯ（Ｒｅｇｉｏｎ Ｏｆ Ｏｖｅｒｌａｐ））を検出する。つまり、重なり検出部１２３は、重なり領域ＲＯＯごとに、撮像画像１１１における重なり領域ＲＯＯの位置情報１１４を導出する。重なり検出部１２３は、例えば、導出した位置情報１１４を記憶部に格納する。重なり検出部１２３は、例えば、導出した位置情報１１４を重なり領域ＲＯＯと対応付けて、記憶部に格納する。重なり領域ＲＯＯは、例えば、互いに重なり合う２以上の注目領域ＲＯＩにおいて最も小さな注目領域ＲＯＩと同じ大きさか、それよりも小さな方形状の領域である。位置情報１１４は、例えば、重なり領域ＲＯＯの左上端座標（Ｘｂ，Ｙｂ）と、重なり領域ＲＯＯのＸ軸方向の長さと、重なり領域ＲＯＯのＹ軸方向の長さとによって構成されている。重なり領域ＲＯＯのＸ軸方向の長さは、例えば、物理領域長さＸＬｂである。重なり領域ＲＯＯのＹ軸方向の長さは、例えば、物理領域長さＹＬｂである。位置情報１１４において、注目領域ＲＯＩの左上端とは異なる位置の座標が含まれていてもよい。
【0027】
優先度設定部１２４は、撮像画像１１１において、注目領域ＲＯＩごとに優先度１１５を付与する。優先度設定部１２４は、例えば、付与した優先度１１５を記憶部に格納する。優先度設定部１２４は、例えば、付与した優先度１１５を注目領域ＲＯＩと対応付けて、記憶部に格納する。優先度設定部１２４は、注目領域ＲＯＩごとに付与されている領域番号とは別に、優先度１１５を注目領域ＲＯＩごとに付与してもよいし、注目領域ＲＯＩごとに付与されている領域番号を、優先度１１５の代わりとしてもよい。優先度設定部１２４は、例えば、優先度１１５を注目領域ＲＯＩと関連付けて、記憶部に格納してもよいし、注目領域ＲＯＩごとに付与されている領域番号を注目領域ＲＯＩと関連付けて、記憶部に格納してもよい。
【0028】
優先度１１５は、各注目領域ＲＯＩの識別子であり、撮像画像１１１における複数の注目領域ＲＯＩのいずれに対して重なり領域ＲＯＯの割愛が行われたかを判別することの可能な判別情報である。優先度設定部１２４は、例えば、それぞれが重なり領域ＲＯＯを含む２つの注目領域ＲＯＩにおいて、一方の注目領域ＲＯＩに対して優先度１１５として１を付与し、他方の注目領域ＲＯＩに対して優先度１１５として２を付与する。この場合には、後述の伝送画像１１６の作成に際して、優先度１１５の数値が大きい方の注目領域ＲＯＩに対して、重なり領域ＲＯＯの割愛が行われる。なお、優先度設定部１２４は、注目領域ＲＯＩごとに付与されている領域番号と同じ番号を、注目領域ＲＯＩに対して優先度１１５として付与してもよい。優先度設定部１２４は、例えば、各注目領域ＲＯＩに付与した優先度１１５を、ＲＯＩ画像１１２と関連づけて、記憶部に格納する。
【0029】
エンコード部１２５は、各伝送画像１１６を、エンコードして圧縮像データ１２０Ａを生成する。エンコード部１２５は、例えば、圧縮像データ１２０Ａの形式として、ＪＰＥＧ規格に準拠した圧縮形式等により各伝送画像１１６を圧縮する。エンコード部１２５は、上記の圧縮処理を行う前に、各伝送画像１１６を生成する。エンコード部１２５は、撮像画像１１１から得られた複数のＲＯＩ画像１１２において重なり領域ＲＯＯの画像１１８が重複して含まれないように、撮像画像１１１から得られた複数のＲＯＩ画像１１２から画像１１８を割愛したものである複数の伝送画像１１６を生成する。
【0030】
エンコード部１２５は、例えば、注目領域ＲＯＩごとに付与されている優先度１１５に基づいて、複数のＲＯＩ画像１１２のいずれに対して画像１１８の割愛を行うかを決定する。なお、エンコード部１２５は、例えば、注目領域ＲＯＩごとに付与されている領域番号を優先度１１５として用いることにより、複数のＲＯＩ画像１１２のいずれに対して画像１１８の割愛を行うかを決定してもよい。エンコード部１２５は、上記のようにして特定されたＲＯＩ画像１１２において画像１１８を割愛したものを、伝送画像１１６（例えば図３の伝送画像１１６ａ２）とする。エンコード部１２５は、重なり領域ＲＯＯを含まないＲＯＩ画像１１２や、上記の決定により画像１１８が割愛されないこととなったＲＯＩ画像１１２については、ＲＯＩ画像１１２そのものを伝送画像１１６（例えば図３の伝送画像１１６ａ１）とする。
【0031】
画像処理制御部１２６は、ＲＯＩ情報１２０Ｂ及びフレーム情報１２０Ｃを生成し、送信部１４０に送信する。ＲＯＩ情報１２０Ｂは、例えば、各位置情報１１３を含んでいる。ＲＯＩ情報１２０Ｂは、さらに、例えば、各注目領域ＲＯＩのデータタイプ、撮像画像１１１に含まれる注目領域ＲＯＩの数、各注目領域ＲＯＩの領域番号（又は優先度１１５）、各注目領域ＲＯＩのデータ長、及び各注目領域ＲＯＩの画像フォーマットのうち少なくとも１つを含んでいる。フレーム情報１２０Ｃは、例えば、フレームごとに付与されるバーチャルチャネルの番号、各注目領域ＲＯＩのデータタイプ、ラインごとのペイロード（Ｐａｙｌｏａｄ）長などを含んでいる。データタイプには、例えば、ＹＵＶデータ、ＲＧＢデータ又はＲＡＷデータなどが含まれている。データタイプには、さらに、例えば、ＲＯＩ形式のデータ又は通常形式のデータなどが含まれている。ペイロード長は、例えば、ロングパケット（ＬｏｎｇＰａｃｋｅｔ）のペイロードに含まれるピクセル数であり、例えば、注目領域ＲＯＩごとのピクセル数である。ここで、ペイロードとは、映像送信装置１００及び映像受信装置２００の間で伝送される主要なデータ（アプリケーションデータ）を指している。ロングパケットとは、パケットヘッダＰＨとパケットフッタＰＦとの間に配置されるパケットを指している。
【0032】
送信部１４０は、画像処理部１２０，１３０から入力された種々のデータ（１２０Ａ，１２０Ｂ，１２０Ｃ，１３０Ａ）に基づいて伝送データ１４７Ａを生成し、送出する回路である。送信部１４０は、撮像画像１１１における各注目領域ＲＯＩについてのＲＯＩ情報１２０Ｂをエンベデッドデータ（ＥｍｂｅｄｄｅｄＤａｔａ）で送出する。送信部１４０は、さらに、ＲＯＩの切り出しを指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から入力された場合に、各注目領域ＲＯＩの画像データ（圧縮像データ１２０Ａ）をロングパケットのペイロードデータ（ＰａｙｌｏａｄＤａｔａ）で送出する。このとき、送信部１４０は、各注目領域ＲＯＩの画像データ（圧縮像データ１２０Ａ）を互いに共通のバーチャルチャネルで送出する。また、送信部１４０は、各注目領域ＲＯＩの画像データ（圧縮像データ１２０Ａ）を画像データフレームによって送出するとともに、各注目領域ＲＯＩについてのＲＯＩ情報１２０Ｂを画像データフレームのヘッダで送出する。送信部１４０は、また、通常画像の出力を指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から入力された場合に、通常の画像データ（圧縮像データ１３０Ａ）をロングパケットのペイロードデータで送出する。
【0033】
送信部１４０は、例えば、ＬＩＮＫ制御部１４１、ＥＣＣ生成部１４２、ＰＨ生成部１４３、ＥＢＤバッファ１４４、ＲＯＩデータバッファ１４５、通常画像データバッファ１４６及び合成部１４７を有している。ＬＩＮＫ制御部１４１、ＥＣＣ生成部１４２、ＰＨ生成部１４３、ＥＢＤバッファ１４４及びＲＯＩデータバッファ１４５は、ＲＯＩの切り出しを指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から入力された場合に、合成部１４７への出力を行う。通常画像データバッファ１４６は、通常画像の出力を指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から入力された場合に、合成部１４７への出力を行う。
【0034】
なお、ＲＯＩデータバッファ１４５が、通常画像データバッファ１４６を兼ねていてもよい。この場合、送信部１４０は、ＲＯＩデータバッファ１４５及びＲＯＩデータバッファ１４５のそれぞれの出力端と、合成部１４７の入力端との間に、ＲＯＩデータバッファ１４５及びＲＯＩデータバッファ１４５のいずれかの出力を選択するセレクタを有していてもよい。
【0035】
ＬＩＮＫ制御部１４１は、例えば、フレーム情報１２０ＣをラインごとにＥＣＣ生成部１４２及びＰＨ生成部１４３に出力する。ＥＣＣ生成部１４２は、例えば、フレーム情報１２０Ｃにおける１ラインのデータ（例えば、バーチャルチャネルの番号、各注目領域ＲＯＩのデータタイプ、ラインごとのペイロード長など）に基づいて、そのラインの誤り訂正符号を生成する。ＥＣＣ生成部１４２は、例えば、生成した誤り訂正符号をＰＨ生成部１４３に出力する。ＰＨ生成部１４３は、例えば、フレーム情報１２０Ｃと、ＥＣＣ生成部１４２で生成された誤り訂正符号とを用いて、１ラインごとにパケットヘッダＰＨを生成する。このとき、パケットヘッダＰＨは、例えば、図４に示したように、ロングパケットのペイロードデータのパケットヘッダである。このパケットヘッダＰＨには、例えば、ＤＩ、ＷＣ及びＥＣＣが含まれている。ＷＣは、映像受信装置２００に対してパケットの終わりをワード数で示すための領域である。ＷＣには、例えば、ペイロード長が含まれており、例えば、注目領域ＲＯＩごとのピクセル数が含まれている。ＥＣＣは、ビットエラーを修正するための値を格納する領域である。ＥＣＣには、誤り訂正符号が含まれている。ＤＩは、データ識別子を格納する領域である。ＤＩには、ＶＣ（バーチャルチャネル）の番号及びＤａｔａＴｙｐｅ（各注目領域ＲＯＩのデータタイプ）が含まれている。ＶＣ（バーチャルチャネル）は、パケットのフロー制御のために導入された概念であり、同一のリンクを共用する複数の独立したデータストリームをサポートするためのメカニズムである。ＰＨ生成部１４３は、生成したパケットヘッダＰＨを合成部１４７に出力する。
【0036】
ＥＢＤバッファ１４４は、ＲＯＩ情報１２０Ｂを一次的に格納し、所定のタイミングでＲＯＩ情報１２０Ｂをエンベデッドデータとして合成部１４７に出力する。エンベデッドデータとは、画像データフレーム（後述の図５参照）のヘッダ又はフッタに埋め込むことの可能な追加情報を指している。エンベデッドデータには、例えば、ＲＯＩ情報１２０Ｂが含まれている。
【0037】
ＲＯＩデータバッファ１４５は、圧縮像データ１２０Ａを一次的に格納し、所定のタイミングで圧縮像データ１２０Ａをロングパケットのペイロードデータとして合成部１４７に出力する。ＲＯＩデータバッファ１４５は、ＲＯＩの切り出しを指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から入力された場合に、圧縮像データ１２０Ａをロングパケットのペイロードデータとして合成部１４７に出力する。通常画像データバッファ１４６は、圧縮像データ１３０Ａを一次的に格納し、所定のタイミングで圧縮像データ１３０Ａをロングパケットのペイロードデータとして合成部１４７に出力する。通常画像データバッファ１４６は、通常画像の出力を指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から入力された場合に、圧縮像データ１３０Ａをロングパケットのペイロードデータとして合成部１４７に出力する。
【0038】
合成部１４７は、通常画像の出力を指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から入力された場合に、入力されたデータ（圧縮像データ１３０Ａ）に基づいて、伝送データ１４７Ａを生成する。合成部１４７は、生成した伝送データ１４７Ａを、データレーンＤＬを介して映像受信装置２００に出力する。一方、合成部１４７は、ＲＯＩの切り出しを指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から入力された場合に、入力された各種データ（パケットヘッダＰＨ、ＲＯＩ情報１２０Ｂ、及び圧縮像データ１２０Ａ）に基づいて、伝送データ１４７Ａを生成する。合成部１４７は、生成した伝送データ１４７Ａを、データレーンＤＬを介して映像受信装置２００に出力する。つまり、合成部１４７は、ＤａｔａＴｙｐｅ（各注目領域ＲＯＩのデータタイプ）をロングパケットのペイロードデータのパケットヘッダＰＨに含めて送出する。また、合成部１４７は、各注目領域ＲＯＩの画像データ（圧縮像データ１２０Ａ）を互いに共通のバーチャルチャネルで送出する。
【0039】
伝送データ１４７Ａは、例えば、図５に示したような画像データフレームによって構成されている。画像データフレームは、通常、ヘッダ領域、パケット領域、及びフッタ領域を有している。図５では、便宜的に、フッタ領域の記載が省略されている。伝送データ１４７Ａのフレームヘッダ領域Ｒ１には、エンベデッドデータが含まれている。このとき、エンベデッドデータには、ＲＯＩ情報１２０Ｂが含まれている。図５において、伝送データ１４７Ａのパケット領域Ｒ２には、１ラインごとに、ロングパケットのペイロードデータが含まれており、さらに、ロングパケットのペイロードデータを挟み込む位置にパケットヘッダＰＨ及びパケットフッタＰＦが含まれている。さらに、パケットヘッダＰＨとパケットフッタＰＦを挟み込む位置にローパワーモードＬＰが含まれている。
【0040】
このとき、パケットヘッダＰＨには、例えば、ＤＩ、ＷＣ及びＥＣＣが含まれている。ＷＣには、例えば、ペイロード長が含まれており、例えば、注目領域ＲＯＩごとのピクセル数が含まれている。ＥＣＣには、誤り訂正符号が含まれている。ＤＩには、ＶＣ（バーチャルチャネルの番号）及びＤａｔａＴｙｐｅ（各注目領域ＲＯＩのデータタイプ）が含まれている。本実施の形態では、各ラインのＶＣには、互いに共通のバーチャルチャネルの番号が付与されている。また、図５において、伝送データ１４７Ａのパケット領域Ｒ２には、圧縮像データ１４７Ｂが含まれている。圧縮像データ１４７Ｂは、１つの圧縮像データ１２０Ａ、又は複数の圧縮像データ１２０Ａによって構成されている。ここで、図５において、パケットヘッダＰＨ寄りのパケット群には、例えば、図３中の伝送画像１１６ａ１の圧縮像データ１２０Ａ（１２０Ａ１）が含まれており、パケットヘッダＰＨから離れたパケット群には、例えば、図３中の伝送画像１１６ａ２の圧縮像データ１２０Ａ（１２０Ａ２）が含まれている。これら２つの圧縮像データ１２０Ａ１，１２０Ａ２によって圧縮像データ１４７Ｂが構成されている。各ラインのロングパケットのペイロードデータには、圧縮像データ１４７Ｂにおける１ライン分のピクセルデータが含まれている。
【0041】
図６は、伝送データ１４７Ａの構成例を表したものである。伝送データ１４７Ａは、例えば、フレームヘッダ領域Ｒ１及びパケット領域Ｒ２を含んでいる。なお、図６には、フレームヘッダ領域Ｒ１の中身が詳細に例示されている。また、図６では、ローパワーモードＬＰが省略されている。
【0042】
フレームヘッダ領域Ｒ１には、例えば、伝送データ１４７Ａの識別子としてのフレーム番号Ｆ１が含まれている。フレームヘッダ領域Ｒ１は、パケット領域Ｒ２に含まれる圧縮像データ１４７Ｂについての情報を含んでいる。フレームヘッダ領域Ｒ１は、例えば、圧縮像データ１４７Ｂに含まれる圧縮像データ１２０Ａの数（ＲＯＩ数）と、圧縮像データ１４７Ｂに含まれる各圧縮像データ１２０Ａに対応するＲＯＩ画像１１２についての情報（ＲＯＩ情報１２０Ｂ）とを含んでいる。
【0043】
合成部１４７は、例えば、伝送データ１４７Ａのパケット領域Ｒ２において、圧縮像データ１４７Ｂを、圧縮像データ１２０Ａの画素行ごとに分けて配置する。したがって、伝送データ１４７Ａのパケット領域Ｒ２には、重なり領域ＲＯＯの画像１１８に対応する圧縮像データが重複して含まれていない。また、合成部１４７は、例えば、伝送データ１４７Ａのパケット領域Ｒ２において、撮像画像１１１のうち各伝送画像１１６と対応しない画素行を割愛している。したがって、伝送データ１４７Ａのパケット領域Ｒ２には、撮像画像１１１のうち各伝送画像１１６に対応しない画素行は含まれていない。なお、図６のパケット領域Ｒ２において、破線で囲んだ箇所が、重なり領域ＲＯＯの画像１１８の圧縮像データに相当する。
【0044】
パケットヘッダＰＨ寄りのパケット群（例えば図６中の１（ｎ））と、パケットヘッダＰＨから離れたパケット群（例えば図６中の２（１））との境界は、パケットヘッダＰＨ寄りのパケット群（例えば図６中の１（ｎ））の圧縮像データに対応するＲＯＩ画像１１２の物理領域長さＸＬａ１によって特定される。パケットヘッダＰＨ寄りのパケット群（例えば図６中の１（ｎ））に含まれる重なり領域ＲＯＯの画像１１８に対応する圧縮像データにおいて、パケットの開始位置は、パケットヘッダＰＨから離れたパケット群（例えば図６中の２（１））に対応するＲＯＩ画像１１２の物理領域長さＸＬａ２によって特定される。
【0045】
合成部１４７は、例えば、伝送データ１４７Ａのパケット領域Ｒ２において、１ラインごとに、ロングパケットのペイロードデータを生成する際に、ロングパケットのペイロードデータに、例えば、圧縮像データ１４７Ｂにおける１ライン分のピクセルデータの他に、例えば、図７に示したように、ＲＯＩ情報１２０Ｂを含めてもよい。つまり、合成部１４７は、ＲＯＩ情報１２０Ｂをロングパケットのペイロードデータに含めて送出してもよい。このとき、ＲＯＩ情報１２０Ｂは、例えば、図７（Ａ）～図７（Ｋ）に示したように、撮像画像１１１に含まれる注目領域ＲＯＩの数（ＲＯＩ数）、各注目領域ＲＯＩの領域番号（又は優先度１１５）、各注目領域ＲＯＩのデータ長、及び各注目領域ＲＯＩの画像フォーマットのうち少なくとも１つを含んでいる。ＲＯＩ情報１２０Ｂは、ロングパケットのペイロードデータにおいて、パケットヘッダＰＨ側の端部（つまり、ロングパケットのペイロードデータの先頭）に配置されることが好ましい。
【0046】
（映像受信装置２００）
次に、映像受信装置２００について説明する。図８は、映像受信装置２００の構成の一例を表したものである。図９は、映像受信装置２００におけるＲＯＩ画像２２３Ａの生成手順の一例を表したものである。映像受信装置２００は、映像送信装置１００と共通の規格（例えば、ＭＩＰＩＣＳＩ－２規格、ＭＩＰＩＣＳＩ－３規格、又は、ＭＩＰＩＤＳＩ規格）で信号を受信する装置である。映像受信装置２００は、例えば、受信部２１０及び情報処理部２２０を有している。受信部２１０は、映像送信装置１００から出力された伝送データ１４７Ａを、データレーンＤＬを介して受信し、受信した伝送データ１４７Ａに対して所定の処理を行うことにより、種々のデータ（２１４Ａ，２１５Ａ，２１５Ｂ）を生成し、情報処理部２２０に出力する回路である。情報処理部２２０は、受信部２１０から受信した種々のデータ（２１４Ａ，２１５Ａ）に基づいて、ＲＯＩ画像２２３Ａを生成したり、受信部２１０から受信したデータ（２１５Ｂ）に基づいて、通常画像２２４Ａを生成したりする回路である。
次に、映像受信装置２００について説明する。図８は、映像受信装置２００の構成の一例を表したものである。図９は、映像受信装置２００におけるＲＯＩ画像２２３Ａの生成手順の一例を表したものである。映像受信装置２００は、映像送信装置１００と共通の規格（例えば、ＭＩＰＩＣＳＩ－２規格、ＭＩＰＩＣＳＩ－３規格、又は、ＭＩＰＩＤＳＩ規格）で信号を受信する装置である。映像受信装置２００は、例えば、受信部２１０及び情報処理部２２０を有している。受信部２１０は、映像送信装置１００から出力された伝送データ１４７Ａを、データレーンＤＬを介して受信し、受信した伝送データ１４７Ａに対して所定の処理を行うことにより、種々のデータ（２１４Ａ，２１５Ａ，２１５Ｂ）を生成し、情報処理部２２０に出力する回路である。情報処理部２２０は、受信部２１０から受信した種々のデータ（２１４Ａ，２１５Ａ）に基づいて、ＲＯＩ画像２２３Ａを生成したり、受信部２１０から受信したデータ（２１５Ｂ）に基づいて、通常画像２２４Ａを生成したりする回路である。
【0047】
受信部２１０は、例えば、ヘッダ分離部２１１、ヘッダ解釈部２１２、ペイロード分離部２１３、ＥＢＤ解釈部２１４及びＲＯＩデータ分離部２１５を有している。
【0048】
ヘッダ分離部２１１は、伝送データ１４７Ａを、データレーンＤＬを介して映像送信装置１００から受信する。つまり、ヘッダ分離部２１１は、撮像画像１１１における各注目領域ＲＯＩについてのＲＯＩ情報１２０Ｂをエンベデッドデータに含むとともに、各注目領域ＲＯＩの画像データ（圧縮像データ１２０Ａ）をロングパケットのペイロードデータに含む伝送データ１４７Ａを受信する。ヘッダ分離部２１１は、受信した伝送データ１４７Ａをフレームヘッダ領域Ｒ１とパケット領域Ｒ２とに分離する。ヘッダ解釈部２１２は、フレームヘッダ領域Ｒ１に含まれるデータ（具体的にはエンベデッドデータ）に基づいて、パケット領域Ｒ２に含まれるロングパケットのペイロードデータの位置を特定する。ペイロード分離部２１３は、ヘッダ解釈部２１２によって特定されたロングパケットのペイロードデータの位置に基づいて、パケット領域Ｒ２に含まれるロングパケットのペイロードデータを、パケット領域Ｒ２から分離する。
【0049】
ＥＢＤ解釈部２１４は、エンベデッドデータをＥＢＤデータ２１４Ａとして、情報処理部２２０に出力する。ＥＢＤ解釈部２１４は、さらに、エンベデッドデータに含まれるデータタイプから、ロングパケットのペイロードデータに含まれる画像データがＲＯＩの画像データ１１６の圧縮像データ１２０Ａであるか、又は、通常画像データの圧縮像データ１３０Ａであるか判別する。ＥＢＤ解釈部２１４は、判別結果をＲＯＩデータ分離部２１５に出力する。
【0050】
ロングパケットのペイロードデータに含まれる画像データがＲＯＩの画像データ１１６の圧縮像データ１２０Ａである場合、ＲＯＩデータ分離部２１５は、ロングパケットのペイロードデータをペイロードデータ２１５Ａとして、情報処理部２２０（具体的にはＲＯＩデコード部２２２）に出力する。ペイロードデータに含まれる画像データが通常画像データの圧縮像データ１３０Ａである場合、ＲＯＩデータ分離部２１５は、ロングパケットのペイロードデータをペイロードデータ２１５Ｂとして、情報処理部２２０（具体的には通常画像デコード部２２４）に出力する。ロングパケットのペイロードデータにＲＯＩ情報１２０Ｂが含まれている場合には、ペイロードデータ２１５Ａは、ＲＯＩ情報１２０Ｂと、圧縮像データ１４７Ｂのうち１ライン分のピクセルデータとを含んでいる。
【0051】
情報処理部２２０は、ＥＢＤデータ２１４Ａに含まれるエンベデッドデータから、ＲＯＩ情報１２０Ｂを抽出する。情報処理部２２０は、情報抽出部２２１で抽出したＲＯＩ情報１２０Ｂに基づいて、受信部２１０で受信した伝送データ１４７Ａに含まれるロングパケットのペイロードデータから、撮像画像１１１における各注目領域ＲＯＩの画像（ＲＯＩ画像１１２）を抽出する。情報処理部２２０は、例えば、情報抽出部２２１、ＲＯＩデコード部２２２、ＲＯＩ画像生成部２２３及び通常画像デコード部２２４を有している。
【0052】
通常画像デコード部２２４は、ペイロードデータ２１５Ｂをデコードし、通常画像２２４Ａを生成する。ＲＯＩデコード部２２２は、ペイロードデータ２１５Ａに含まれる圧縮像データ１４７Ｂをデコードし、画像データ２２２Ａを生成する。この画像データ２２２Ａは、１又は複数の伝送画像１１６によって構成されている。
【0053】
情報抽出部２２１は、ＥＢＤデータ２１４Ａに含まれるエンベデッドデータから、ＲＯＩ情報１２０Ｂを抽出する。情報抽出部２２１は、例えば、ＥＢＤデータ２１４Ａに含まれるエンベデッドデータから、例えば、撮像画像１１１に含まれる注目領域ＲＯＩの数、各注目領域ＲＯＩの領域番号（又は優先度１１５）、各注目領域ＲＯＩのデータ長、及び各注目領域ＲＯＩの画像フォーマットを抽出する。つまり、伝送データ１４７Ａは、当該伝送データ１４７Ａから得られる複数の伝送画像１１６のいずれに対して重なり領域ＲＯＯの画像１１８の割愛が行われたかを判別することの可能な判別情報として、各伝送画像１１６に対応する注目領域ＲＯＩの領域番号（又は優先度１１５）を含んでいる。
【0054】
ＲＯＩ画像生成部２２３は、情報抽出部２２１で得られたＲＯＩ情報１２０Ｂに基づいて、２以上の注目領域ＲＯＩ同士が重なり合う重なり領域ＲＯＯを検出する。
【0055】
情報抽出部２２１が、例えば、ＥＢＤデータ２１４Ａに含まれるエンベデッドデータから、ＲＯＩ画像１１２ａ１に対応する注目領域ＲＯＩの座標（例えば左上端座標（Ｘａ１，Ｙａ１））、長さ（例えば物理領域長さＸＬａ１，ＹＬａ１）及び領域番号１（又は優先度１１５（＝１））を抽出する。情報抽出部２２１が、さらに、例えば、ＥＢＤデータ２１４Ａに含まれるエンベデッドデータから、ＲＯＩ画像１１２ａ２に対応する注目領域ＲＯＩの座標（例えば左上端座標（Ｘａ２，Ｙａ２））、長さ（例えば物理領域長さＸＬａ２，ＹＬａ２）及び領域番号２（又は優先度１１５（＝２））を抽出する。
【0056】
このとき、ＲＯＩ画像生成部２２３は、抽出したこれらの情報（以下、「抽出情報２２１Ａ」と称する。）に基づいて、重なり領域ＲＯＯの位置情報１１４を導出する。ＲＯＩ画像生成部２２３は、上記の重なり領域ＲＯＯの位置情報１１４として、例えば、重なり領域ＲＯＯの座標（例えば左上端座標（Ｘｂ１，Ｙｂ１））及び長さ（例えば物理領域長さＸＬｂ１，ＹＬｂ１）を導出する。
【0057】
なお、ＲＯＩ画像生成部２２３は、ＥＢＤデータ２１４Ａに含まれるエンベデッドデータからＲＯＩ情報１２０Ｂを取得する代わりに、ペイロードデータ２１５ＡからＲＯＩ情報１２０Ｂを取得してもよい。この場合、ＲＯＩ画像生成部２２３は、ペイロードデータ２１５Ａに含まれるＲＯＩ情報１２０Ｂに基づいて、２以上の注目領域ＲＯＩ同士が重なり合う重なり領域ＲＯＯを検出してもよい。また、ＲＯＩ画像生成部２２３は、ペイロードデータ２１５Ａに含まれるＲＯＩ情報１２０Ｂから、抽出情報２２１Ａを抽出してもよく、そのようにして抽出した抽出情報２２１Ａに基づいて、重なり領域ＲＯＯの位置情報１１４を導出してもよい。
【0058】
ＲＯＩ画像生成部２２３は、さらに、画像データ２２２Ａと、抽出情報２２１Ａと、重なり領域ＲＯＯの位置情報１１４とに基づいて、撮像画像１１１における各注目領域ＲＯＩの画像（ＲＯＩ画像１１２ａ１，１１２ａ２）を生成する。ＲＯＩ画像生成部２２３は、生成した画像をＲＯＩ画像２２３Ａとして出力する。
【0059】
【0060】
まず、撮像部１１０は、撮像により得られた撮像画像１１１（デジタルの画像データ）を画像処理部１２０に出力する。ＲＯＩ切り出し部１２１は、撮像部１１０から入力された撮像画像１１１に含まれる２つの注目領域ＲＯＩ１，ＲＯＩ２を特定する。ＲＯＩ切り出し部１２１は、撮像画像１１１から、各注目領域ＲＯＩ１，ＲＯＩ２の画像（ＲＯＩ画像１１２ａ１，１１２ａ２）を切り出す。ＲＯＩ切り出し部１２１は、注目領域ＲＯＩ１に対して識別子として領域番号１を付与し、注目領域ＲＯＩ２に対して識別子として領域番号２を付与する。
【0061】
ＲＯＩ解析部１２２は、注目領域ＲＯＩごとに、撮像画像１１１における注目領域ＲＯＩの位置情報１１３を導出する。ＲＯＩ解析部１２２は、注目領域ＲＯＩ１に基づいて、注目領域ＲＯＩ１の左上端座標（Ｘａ１，Ｙａ１）と、注目領域ＲＯＩ１のＸ軸方向の長さ（ＸＬａ１）と、注目領域ＲＯＩ１のＹ軸方向の長さ（ＹＬａ１）とを導出する。ＲＯＩ解析部１２２は、注目領域ＲＯＩ２に基づいて、注目領域ＲＯＩ２の左上端座標（Ｘａ２，Ｙａ２）と、注目領域ＲＯＩ２のＸ軸方向の長さ（ＸＬａ２）と、注目領域ＲＯＩ２のＹ軸方向の長さ（ＹＬａ２）とを導出する。
【0062】
重なり検出部１２３は、撮像画像１１１における２つの注目領域ＲＯＩ１，ＲＯＩ２の位置情報１１３に基づいて、２つの注目領域ＲＯＩ１，ＲＯＩ２同士が重なり合う重なり領域ＲＯＯを検出する。つまり、重なり検出部１２３は、撮像画像１１１における重なり領域ＲＯＯの位置情報１１４を導出する。重なり検出部１２３は、撮像画像１１１における重なり領域ＲＯＯの位置情報１１４として、重なり領域ＲＯＯの左上端座標（Ｘｂ１，Ｙｂ１）と、重なり領域ＲＯＯのＸ軸方向の長さ（ＸＬｂ１）と、重なり領域ＲＯＯのＹ軸方向の長さ（ＹＬｂ１）とを導出する。
【0063】
優先度設定部１２４は、２つの注目領域ＲＯＩ１，ＲＯＩ２において、一方の注目領域ＲＯＩ１に対して優先度１１５として１を付与し、他方の注目領域ＲＯＩ２に対して優先度１１５として２を付与する。
【0064】
エンコード部１２５は、２つの注目領域ＲＯＩ１，ＲＯＩ２において重なり領域ＲＯＯの画像１１８が重複して含まれないように、撮像画像１１１から得られた２つのＲＯＩ画像１１２ａ１，１１２ａ２から画像１１８を割愛したものである２つの伝送画像１１６ａ１，１１６ａ２を生成する。
【0065】
エンコード部１２５は、２つの注目領域ＲＯＩ１，ＲＯＩ２の領域番号（又は優先度１１５）に基づいて、２つのＲＯＩ画像１１２ａ１，１１２ａ２のいずれに対して画像１１８の割愛を行うかを決定する。エンコード部１２５は、２つの注目領域ＲＯＩ１，ＲＯＩ２において、領域番号（又は優先度１１５）の大きい方である注目領域ＲＯＩ２に対応するＲＯＩ画像１１２ａ２に対して画像１１８の割愛を行い、これにより、伝送画像１１６ａ２を生成する。エンコード部１２５は、２つの注目領域ＲＯＩ１，ＲＯＩ２において、領域番号（又は優先度１１５）の小さな方である注目領域ＲＯＩ１に対応するＲＯＩ画像１１２ａ１については、ＲＯＩ画像１１２ａ１そのものを伝送画像１１６ａ１とする。
【0066】
画像処理制御部１２６は、ＲＯＩ情報１２０Ｂ及びフレーム情報１２０Ｃを生成し、送信部１４０に送信する。送信部１４０は、画像処理部１２０，１３０から入力された種々のデータ（１２０Ａ，１２０Ｂ，１２０Ｃ，１３０Ａ）に基づいて伝送データ１４７Ａを生成する。送信部１４０は、生成した伝送データ１４７Ａを、データレーンＤＬを介して映像受信装置２００に送出する。
【0067】
受信部２１０は、映像送信装置１００から出力された伝送データ１４７Ａを、データレーンＤＬを介して受信する。受信部２１０は、受信した伝送データ１４７Ａに対して所定の処理を行うことにより、ＥＢＤデータ２１４Ａ及びペイロードデータ２１５Ａを生成し、情報処理部２２０に出力する。
【0068】
情報抽出部２２１は、ＥＢＤデータ２１４Ａに含まれるエンベデッドデータから、ＲＯＩ情報１２０Ｂを抽出する。情報抽出部２２１は、ＥＢＤデータ２１４Ａに含まれるエンベデッドデータから、ＲＯＩ画像１１２ａ１に対応する注目領域ＲＯＩの座標（例えば左上端座標（Ｘａ１，Ｙａ１））、長さ（例えば物理領域長さＸＬａ１，ＹＬａ１）及び領域番号１（又は優先度１１５（＝１））を抽出する。情報抽出部２２１は、さらに、ＲＯＩ画像１１２ａ２に対応する注目領域ＲＯＩの座標（例えば左上端座標（Ｘａ２，Ｙａ２））、長さ（例えば物理領域長さＸＬａ２，ＹＬａ２）及び領域番号２（又は優先度１１５（＝２））を抽出する。ＲＯＩデコード部２２２は、ペイロードデータ２１５Ａに含まれる圧縮像データ１４７Ｂをデコードし、画像データ２２２Ａを生成する。
【0069】
ＲＯＩ画像生成部２２３は、抽出したこれらの情報（抽出情報２２１Ａ）に基づいて、重なり領域ＲＯＯの位置情報１１４を導出する。ＲＯＩ画像生成部２２３は、上記の重なり領域ＲＯＯの位置情報１１４として、例えば、重なり領域ＲＯＯの座標（例えば左上端座標（Ｘｂ１，Ｙｂ１））及び長さ（例えば物理領域長さＸＬｂ１，ＹＬｂ１）を導出する。ＲＯＩ画像生成部２２３は、さらに、画像データ２２２Ａと、抽出情報２２１Ａと、重なり領域ＲＯＯの位置情報１１４とに基づいて、撮像画像１１１における各注目領域ＲＯＩの画像（ＲＯＩ画像１１２ａ１，１１２ａ２）を生成する。
【0070】
[効果]
次に、本実施の形態に係る映像伝送システム１の効果について説明する。
次に、本実施の形態に係る映像伝送システム１の効果について説明する。
【0071】
近年、データ量の大きなデータを大量に送信する用途が増えてきている。伝送システムに大きな負荷がかかりやすく、最悪の場合には、伝送システムがダウンし、データ伝送が行えなくなるおそれがある。
【0072】
従来では、伝送システムのダウンを避けるために、例えば、撮影した画像を全て送信するのではなく、撮影対象の物体を特定し、特定した物体を切り出した一部の画像だけを送信することが行われている。
【0073】
ところで、イメージセンサからアプリケーションプロセッサへの伝送に用いられる方式として、ＭＩＰＩＣＳＩ－２が用いられることがある。この方式を用いてＲＯＩを伝送しようとした場合、様々な制約により、ＲＯＩの伝送が容易ではないことがある。
【0074】
一方、本実施の形態では、撮像画像１１１における各注目領域ＲＯＩについてのＲＯＩ情報１２０Ｂがエンベデッドデータで送出されるとともに、各注目領域ＲＯＩの画像データがロングパケットのペイロードデータで送出される。これにより、映像送信装置１００から送出された伝送データ１４７Ａを受信した装置（映像受信装置２００）において、伝送データ１４７Ａから、各注目領域ＲＯＩの画像データ（ＲＯＩ画像１１２）を容易に抽出することができる。その結果、様々な制約の下でも、注目領域ＲＯＩの伝送を行うことができる。
【0075】
また、本実施の形態では、各注目領域ＲＯＩの画像データ（圧縮像データ１２０Ａ）が互いに共通のバーチャルチャネルで送出される。これにより、同一パケットの中で複数のＲＯＩ画像１１２を送ることができるので、複数のＲＯＩ画像１１２を送る間に、ＬＰモードに入る必要がなく、高い伝送効率を得ることができる。
【0076】
また、本実施の形態では、各注目領域ＲＯＩのデータタイプがロングパケットのペイロードデータのパケットヘッダＰＨに含めて送出される。これにより、エンベデッドデータにアクセスしなくても、ロングパケットのペイロードデータのパケットヘッダＰＨにアクセスするだけで、各注目領域ＲＯＩのデータタイプが得られる。これにより、映像受信装置２００における処理速度を速くすることができるので、高い伝送効率を得ることができる。
【0077】
また、本実施の形態において、ＲＯＩ情報１２０Ｂがロングパケットのペイロードデータに含めて送出される場合には、エンベデッドデータにアクセスしなくても、ロングパケットのペイロードデータにアクセスするだけで、ＲＯＩ情報１２０Ｂが得られる。これにより、映像受信装置２００における処理速度を速くすることができるので、高い伝送効率を得ることができる。
【0078】
また、本実施の形態では、伝送データ１４７Ａに含まれるエンベデッドデータから、各注目領域ＲＯＩについてのＲＯＩ情報１２０Ｂが抽出されるとともに、抽出されたＲＯＩ情報１２０Ｂに基づいて、伝送データ１４７Ａに含まれるロングパケットのペイロードデータから、各注目領域ＲＯＩの画像（ＲＯＩ画像１１２）が抽出される。これにより、伝送データ１４７Ａから、各注目領域ＲＯＩの画像（ＲＯＩ画像１１２）を容易に抽出することができる。その結果、様々な制約の下でも、注目領域ＲＯＩの伝送を行うことができる。
【0079】
２．本開示の前提技術２：
撮像画像から切り出した一部（形状が非矩形状）の注目領域（ＲＯＩ）を伝送する技術について、図１から図９を参照しつつ図１０から図１２を用いて説明する。すなわち、方形状（矩形状）以外の形状を有する撮影対象の物体の画像を送受信する技術について、説明する。図１０は、撮像画像１１１において特定された物体が配置された領域を模式的に示す図である。なお、図１０では、理解を容易にするため、１５行×２３列の撮像素子で構成された撮像領域で撮像された撮像画像１１１が模式的に図示されている。図１１は、特定された物体に対して設定されたＲＯＩ領域の一例を示す図である。
撮像画像から切り出した一部（形状が非矩形状）の注目領域（ＲＯＩ）を伝送する技術について、図１から図９を参照しつつ図１０から図１２を用いて説明する。すなわち、方形状（矩形状）以外の形状を有する撮影対象の物体の画像を送受信する技術について、説明する。図１０は、撮像画像１１１において特定された物体が配置された領域を模式的に示す図である。なお、図１０では、理解を容易にするため、１５行×２３列の撮像素子で構成された撮像領域で撮像された撮像画像１１１が模式的に図示されている。図１１は、特定された物体に対して設定されたＲＯＩ領域の一例を示す図である。
【0080】
前提技術２では、前提技術１と同様に、ＲＯＩの切り出しを指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から映像送信装置１００に入力された場合に、撮像部１１０から入力された撮像画像１１１に対して所定の処理を行う場合について説明する。しかしながら、前提技術２では、映像送信装置１００、すなわち送信側がＲＯＩの切り出しの座標指示する場合も適用できある。この場合、送信側は例えば、受信側から送出されるＲＯＩで取得すべき「人物」や「物体」等の情報を受信して切り出しの座標を判断および指示するように構成される。
【0081】
ＲＯＩの切り出しを指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から入力される。これにより、図１０に示すように、ＲＯＩ切り出し部１２１は、撮像画像１１１に含まれる撮影対象の４つの物体１～４を特定する。物体１は例えば、撮像画像１１１内の左上領域の一部を占める矩形状を有している。物体２は例えば、撮像画像１１１内で物体１の右側の一部の領域を占め、矩形の上側の両側角部及び下辺の一部が欠落した形状を有している。物体３は例えば、撮像画像１１１内で物体２の下方の一部の領域を占め、矩形の四隅が欠落した形状を有している。物体４は例えば、撮像画像１１１内で物体３の下方の一部の領域を占め、矩形の上側の両側角部が欠落した形状を有している。物体３及び物体４は一部が重なり合っている。
【0082】
図１１に示すように、ＲＯＩ切り出し部１２１（図２参照）は、特定した物体１～４をそれぞれ含む最小の矩形を注目領域ＲＯＩ１～ＲＯＩ４として設定する。ＲＯＩ切り出し部１２１は、物体１に対して注目領域ＲＯＩ１を設定し、ＲＯＩ画像１１２ａ１を切り出す。また、ＲＯＩ切り出し部１２１は、物体２に対して注目領域ＲＯＩ２を設定し、ＲＯＩ画像１１２ａ２を切り出す。また、ＲＯＩ切り出し部１２１は、物体３に対して注目領域ＲＯＩ３を設定し、ＲＯＩ画像１１２ａ３を切り出す。さらに、ＲＯＩ切り出し部１２１は、物体４に対して注目領域ＲＯＩ４を設定し、ＲＯＩ画像１１２ａ４を切り出す。
【0083】
ＲＯＩ切り出し部１２１は、注目領域ＲＯＩ１と、注目領域ＲＯＩ１に付与した領域番号「１」とを関連付けて記憶部に格納する。ＲＯＩ切り出し部１２１は、注目領域ＲＯＩ２と、注目領域ＲＯＩ２に付与した領域番号「２」とを関連付けて記憶部に格納する。ＲＯＩ切り出し部１２１は、注目領域ＲＯＩ３と、注目領域ＲＯＩ３に付与した領域番号「３」とを関連付けて記憶部に格納する。ＲＯＩ切り出し部１２１は、注目領域ＲＯＩ４と、注目領域ＲＯＩ４に付与した領域番号「４」とを関連付けて記憶部に格納する。
【0084】
ＲＯＩ解析部１２２（図２参照）は、注目領域ＲＯＩ１～ＲＯＩ４のそれぞれの位置情報を導出する。ＲＯＩ解析部１２２は、注目領域ＲＯＩ１の位置情報として例えば、Ｘ軸方向の物理領域長さＸＬａ１及びＹ軸方向の物理領域長さＹＬａ１を導出する。ＲＯＩ解析部１２２は、注目領域ＲＯＩ２の位置情報として例えば、Ｘ軸方向の物理領域長さＸＬａ２及びＹ軸方向の物理領域長さＹＬａ２を導出する。ＲＯＩ解析部１２２は、注目領域ＲＯＩ３の位置情報として例えば、Ｘ軸方向の物理領域長さＸＬａ３及びＹ軸方向の物理領域長さＹＬａ３を導出する。ＲＯＩ解析部１２２は、注目領域ＲＯＩ４の位置情報として例えば、Ｘ軸方向の物理領域長さＸＬａ４及びＹ軸方向の物理領域長さＹＬａ４を導出する。ＲＯＩ解析部１２２は、注目領域ＲＯＩごとに、位置情報１１３として、さらに、例えば、注目領域ＲＯＩのＸ軸方向の出力領域長さＸＬｃや、注目領域ＲＯＩのＹ軸方向の出力領域長さＹＬｃを導出してもよい。
【0085】
ＲＯＩ解析部１２２は、注目領域ＲＯＩのそれぞれのＸ軸方向及びＹ軸方向の長さを導出することによって、後段への情報として注目領域ＲＯＩ１～ＲＯＩ４のそれぞれの大きさや総データ量を導出する。これにより、後段に相当する映像受信装置２００はメモリ領域を確保できる。
【0086】
ＲＯＩ解析部１２２は、撮影対象の物体及び注目領域の形状が一致していない場合には、注目領域ＲＯＩの位置情報ではなく、ＲＯＩ画像１１２ａ１～１１２ａ４の位置情報を導出するように構成されている。ＲＯＩ解析部１２２は、ＲＯＩ画像１１２ａ１～１１２ａ４の位置情報として、各行の左端座標（ｘｎ，ｙｎ）及びＸ軸方向の物理領域長さＸＬｎを導出する。また、ＲＯＩ画像１１２ａ２の２行目のようにＲＯＩ画像が分離している場合には、ＲＯＩ解析部１２２は、分離している部分のそれぞれについて位置情報を導出する。ＲＯＩ解析部１２２は、注目領域ＲＯＩ１～ＲＯＩ４の領域番号と、ＲＯＩ画像１１２ａ１～１１２ａ４の位置情報とを対応付けて記憶部に格納する。
【0087】
また、ＲＯＩ解析部１２２は、例えば、注目領域ＲＯＩ１～ＲＯＩ４ごとに、位置情報の他に、例えば、センシングインフォメーション、露光情報、ゲイン情報、ＡＤ語長、画像フォーマットなどを導出し、領域番号と対応付けて記憶部に格納してもよい。
【0088】
重なり検出部１２３（図２参照）は、撮影対象の物体が矩形状の場合には、注目領域同士が重なり合う領域ではなく、ＲＯＩ画像同士が重なり合う領域を重なり領域として導出する。図１１に示すように、重なり検出部１２３は、ＲＯＩ画像１１２ａ３及びＲＯＩ画像１２３ａ４が重なり合う領域として重なり領域ＲＯＯを導出する。重なり検出部１２３は、導出した重なり領域ＲＯＯを注目領域ＲＯＩ３，ＲＯＩ４の位置情報のそれぞれに対応付けて記憶部に格納する。
【0089】
優先度設定部１２４（図２参照）は、優先度「１」を注目領域ＲＯＩ１に付与し、優先度１を注目領域ＲＯＩ１に対応付けて記憶部に格納する。優先度設定部１２４は、優先度「１」よりも優先度が低い優先度「２」を注目領域ＲＯＩ２に付与し、優先度２を注目領域ＲＯＩ２に対応付けて記憶部に格納する。優先度設定部１２４は、優先度「２」よりも優先度が低い優先度「３」を注目領域ＲＯＩ３に付与し、優先度３を注目領域ＲＯＩ３に対応付けて記憶部に格納する。優先度設定部１２４は、優先度「３」よりも優先度が低い優先度「４」を注目領域ＲＯＩ４に付与し、優先度４を注目領域ＲＯＩ４に対応付けて記憶部に格納する。
【0090】
エンコード部１２５（図２参照）は、ＲＯＩ画像１１２ａ１～１１２ａ４のそれぞれについて伝送画像を生成する。注目領域ＲＯＩ４は注目領域ＲＯＩ３よりも優先度が低いので、エンコード部１２５は、ＲＯＩ画像１１２ａ４から重なり領域ＲＯＯを割愛して伝送画像を生成する。
【0091】
画像処理制御部１２６（図２参照）は、ＲＯＩ情報及びフレーム情報を生成し、送信部１４０（図２参照）に送信する。ＲＯＩ情報には例えば、ＲＯＩ画像１１２ａ１～１１２ａ４のそれぞれの位置情報が含まれる。ＲＯＩ情報にはその他に、上述の撮影対象の物体が矩形状の場合と同様の情報（例えば注目領域ＲＯＩ１～ＲＯＩ４のそれぞれデータタイプ、撮像画像１１１に含まれる注目領域ＲＯＩ１～ＲＯＩ４の数、注目領域ＲＯＩ１～ＲＯＩ４の領域番号及び優先度など）が含まれる。フレーム情報には例えば、注目領域ＲＯＩ１～ＲＯＩ４のデータタイプなど、上述の撮影対象の物体が矩形状の場合と同様の情報が含まれる。
【0092】
送信部１４０（図２参照）に設けられたＬＩＮＫ制御部１４１は、画像処理制御部１２６から入力されるフレーム情報及びＲＯＩ情報をラインごとにＥＣＣ生成部１４２及びＰＨ生成部１４３（いずれも図２参照）に出力する。ＥＣＣ生成部１４２は例えば、フレーム情報における１ラインのデータ（例えば、バーチャルチャネルの番号、注目領域ＲＯＩ１～ＲＯＩ４のそれぞれのデータタイプ、ラインごとのペイロード長など）に基づいて、そのラインの誤り訂正符号を生成する。ＥＣＣ生成部１４２は例えば、生成した誤り訂正符号をＰＨ生成部１４３に出力する。ＰＨ生成部１４３は例えば、フレーム情報と、ＥＣＣ生成部１４２で生成された誤り訂正符号とを用いて、１ラインごとにパケットヘッダＰＨ（図４参照）を生成する。
【0093】
【0094】
ＲＯＩデータバッファ１４５（図２参照）は、エンコード部１２５から入力される圧縮像データを一次的に格納し、例えばＲＯＩの切り出しを指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から入力された場合に、圧縮像データ１２０Ａをロングパケットのペイロードデータとして合成部１４７に出力する。
【0095】
合成部１４７は、ＲＯＩの切り出しを指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から入力された場合に、入力された各種データ（パケットヘッダＰＨ、ＲＯＩ情報及びＲＯＩデータバッファ１４５を介してエンコード部１２５から入力された圧縮像データ）に基づいて、伝送データ１４７Ａを生成する。合成部１４７は、生成した伝送データ１４７Ａを、データレーンＤＬを介して映像受信装置２００に出力する。つまり、合成部１４７は、注目領域ＲＯＩ１～ＲＯＩ４のそれぞれのデータタイプをロングパケットのペイロードデータのパケットヘッダＰＨに含めて送出する。また、合成部１４７は、注目領域ＲＯＩ１～ＲＯＩ４のそれぞれの画像データ（圧縮像データ）を互いに共通のバーチャルチャネルで送出する。
【0096】
撮影対象の物体が矩形状でない場合、ＲＯＩ画像１１２ａ１～１１２ａ４の位置情報は、パケットヘッダＰＨ又はロングパケットのペイロードデータに含められる。ＲＯＩ画像１１２ａ１～１１２ａ４の位置情報は、ＰＨ生成部１４３によってパケットヘッダＰＨに含められる。一方、ＲＯＩ画像１１２ａ１～１１２ａ４の位置情報は、合成部１４７によってロングパケットのペイロードデータに含められる。
【0097】
図１２は、ＲＯＩ画像１１２ａ１～１１２ａ４の位置情報がロングパケットのペイロードデータに含められている伝送データ１４７Ａの構成例を示す図である。図１２に示すように、伝送データ１４７Ａは例えば、フレームヘッダ領域Ｒ１及びパケット領域Ｒ２を含んでいる。なお、図１２には、フレームヘッダ領域Ｒ１の中身が詳細に例示されている。また、図１２では、ローパワーモードＬＰが省略されている。
【0098】
フレームヘッダ領域Ｒ１には例えば、伝送データ１４７Ａの識別子としてのフレーム番号Ｆ１が含まれている。フレームヘッダ領域Ｒ１は、パケット領域Ｒ２に含まれる圧縮像データについての情報を含んでいる。フレームヘッダ領域Ｒ１は例えば、圧縮像データの数（ＲＯＩ数）と、各圧縮像データに対応するＲＯＩ画像１１２ａ１～１１２ａ４のそれぞれについての情報（ＲＯＩ情報）とを含んでいる。ＲＯＩ情報は、領域番号、物理領域長さ、矩形出力領域大きさ、優先度、露光情報、ゲイン情報、ＡＤ語長及び画像フォーマットを含んでいる。物理領域長さは、ＲＯＩ画像の最大長さであり、矩形出力領域大きさは、注目領域ＲＯＩの大きさである。
【0099】
図１２中に示す「Ｉｎｆｏ」は、ロングパケットのペイロードに格納される領域情報を示している。ＲＯＩ画像１１２ａ１～１１２ａ４の位置情報は、例えば「ｉｎｆｏ」に格納される。ＲＯＩ画像１１２ａ１～１１２ａ４の位置情報は、ロングパケットのペイロードの先頭部分に格納される。ＲＯＩ画像を構成し連続する各画素行のＸ軸方向の物理領域長さが同じであり、かつ当該各画素行に異なる領域番号のＲＯＩ画像が含まれていない場合には、当該各画素行のうちの２行目以降の画素行の画像データを含むロングパケットのペイロードには、領域情報「ｉｎｆｏ」が格納されていなくてもよい。本例では、ＲＯＩ画像１１２ａ１は、全ての画素行のうちの連続する１行目から４行目の画素行においてＸ軸方向の物理領域長さが同じであり、当該１行目から４行目の画素行には、異なる領域番号のＲＯＩ画像が含まれていない。このため、ＲＯＩ画像１１２ａ１を構成し連続する１行目から４行目の画素行のうちの２行目以降に相当する２行目から４行目の画素行の画像データを含むそれぞれのロングパケットのペイロードには、領域情報「ｉｎｆｏ」が格納されていない。また、本例では、ＲＯＩ画像１１２ａ４は、全ての画素行のうちの連続する２行目及び３行目の画素行においてＸ軸方向の物理領域長さが同じであり、当該２行目及び３行目の画素行には、異なる領域番号のＲＯＩ画像が含まれていない。このため、ＲＯＩ画像１１２ａ４を構成し連続する２行目及び３行目の画素行のうちの２行目以降に相当する３行目の画素行の画像データを含むロングパケットのペイロードには、領域情報「ｉｎｆｏ」が格納されていない。なお、Ｘ軸方向の物理領域長さが同じであり、かつ当該各画素行に異なる領域番号のＲＯＩ画像が含まれていない場合でも、各行のペイロードに領域情報「ｉｎｆｏ」が格納されていてもよい。
【0100】
合成部１４７は例えば、伝送データ１４７Ａのパケット領域Ｒ２において、ＲＯＩ画像１１２ａ１～１１２ａ４のそれぞれを圧縮して生成された圧縮像データを画素行ごとに分けて配置する。図１２中に示す「１」は、ロングパケットのペイロードに格納されたＲＯＩ画像１１２ａ１の圧縮像データを示している。図１２中に示す「２」は、ロングパケットのペイロードに格納されたＲＯＩ画像１１２ａ２の圧縮像データを示している。図１２中に示す「３」はＲＯＩ画像１１２ａ３の圧縮像データを示している。図１２中に示す「４」は、ロングパケットのペイロードに格納されたＲＯＩ画像１１２ａ４の圧縮像データを示している。なお、図１２では、理解を容易にするため、各圧縮像データが区切られて示されているが、ロングパケットのペイロードに格納されるデータに区切りはない。伝送データ１４７Ａのパケット領域Ｒ２には、重なり領域ＲＯＯの画像に対応する圧縮像データ１１２ｂが重複して含まれていない。また、合成部１４７は、例えば、伝送データ１４７Ａのパケット領域Ｒ２において、撮像画像１１１のうち各伝送画像と対応しない画素行を割愛している。したがって、伝送データ１４７Ａのパケット領域Ｒ２には、撮像画像１１１のうち各伝送画像に対応しない画素行は含まれていない。
【0101】
次に、伝送データ１４７Ａを受信した場合の映像受信装置２００の動作について説明する。
受信部２１０に設けられたヘッダ分離部２１１（いずれも図８参照）は、伝送データ１４７Ａを、データレーンＤＬを介して映像送信装置１００から受信する。つまり、ヘッダ分離部２１１は、撮像画像１１１における注目領域ＲＯＩ１～ＲＯＩ４についてのＲＯＩ情報をエンベデッドデータに含むとともに、注目領域ＲＯＩ１～ＲＯＩ４の画像データ（圧縮像データ）をロングパケットのペイロードデータに含む伝送データ１４７Ａを受信する。ヘッダ分離部２１１は、受信した伝送データ１４７Ａをフレームヘッダ領域Ｒ１とパケット領域Ｒ２とに分離する。
受信部２１０に設けられたヘッダ分離部２１１（いずれも図８参照）は、伝送データ１４７Ａを、データレーンＤＬを介して映像送信装置１００から受信する。つまり、ヘッダ分離部２１１は、撮像画像１１１における注目領域ＲＯＩ１～ＲＯＩ４についてのＲＯＩ情報をエンベデッドデータに含むとともに、注目領域ＲＯＩ１～ＲＯＩ４の画像データ（圧縮像データ）をロングパケットのペイロードデータに含む伝送データ１４７Ａを受信する。ヘッダ分離部２１１は、受信した伝送データ１４７Ａをフレームヘッダ領域Ｒ１とパケット領域Ｒ２とに分離する。
【0102】
ヘッダ解釈部２１２（図８参照）は、フレームヘッダ領域Ｒ１に含まれるデータ（具体的にはエンベデッドデータ）に基づいて、パケット領域Ｒ２に含まれるロングパケットのペイロードデータの位置を特定する。
【0103】
ペイロード分離部２１３（図８参照）は、ヘッダ解釈部２１２によって特定されたロングパケットのペイロードデータの位置に基づいて、パケット領域Ｒ２に含まれるロングパケットのペイロードデータをパケット領域Ｒ２から分離する。
【0104】
ＥＢＤ解釈部２１４は、エンベデッドデータをＥＢＤデータとして、情報処理部２２０（図８参照）に出力する。ＥＢＤ解釈部２１４は、さらに、エンベデッドデータに含まれるデータタイプから、ロングパケットのペイロードデータに含まれる画像データがＲＯＩの画像データ１１６の圧縮像データであるか、又は、通常画像データの圧縮像データであるか判別する。ＥＢＤ解釈部２１４は、判別結果をＲＯＩデータ分離部２１５（図８参照）に出力する。
【0105】
ＲＯＩデータ分離部２１５は、ロングパケットのペイロードデータに含まれる画像データがＲＯＩの画像データが入力されると、ロングパケットのペイロードデータをペイロードデータとして、情報処理部２２０（具体的にはＲＯＩデコード部２２２（図８参照））に出力する。ＲＯＩ情報が含まれているロングパケットのペイロードデータには、ＲＯＩ情報と圧縮像データのうち１ライン分のピクセルデータとが含まれている。
【0106】
情報処理部２２０に設けられた情報抽出部２２１（図８参照）は、ＥＢＤ解釈部２１４から入力されるＥＢＤデータに含まれるエンベデッドデータから、撮像画像１１１に含まれる注目領域ＲＯＩ１～ＲＯＩ４の数（本例では４つ）、注目領域ＲＯＩ１～ＲＯＩ４の領域番号１～４及び優先度１から４、注目領域ＲＯＩ１～ＲＯＩ４のそれぞれのデータ長、並びに注目領域ＲＯＩ１～ＲＯＩ４のそれぞれの画像フォーマットを抽出する。さらに、情報抽出部２２１は、当該エンベデッドデータから、ＲＯＩ画像１１２ａ１～１１２ａ４の位置情報を抽出する。
【0107】
ＲＯＩデコード部２２２は、ペイロードデータに含まれている圧縮像データ１４７Ｂをデコードし、ＲＯＩ画像１１２ａ１～１１２ａ４の位置情報を抽出するとともに、画像データ（伝送画像によって構成）を生成する。ＲＯＩデコード部２２２は、例えば６行目の画素行に対応するペイロードデータが入力された場合、当該ペイロードデータから、ＲＯＩ画像１１２ａ１の１つの位置情報と、ＲＯＩ画像１１２ａ２の２つの位置情報とを抽出し、６行目の画素行に対応するＲＯＩ画像１１２ａ１，１１２ｂ１の画像データ（伝送画像）をそれぞれ生成する。
【0108】
ＲＯＩデコード部２２２は、例えば１０行目の画素行に対応するペイロードデータが入力された場合、当該ペイロードデータから、ＲＯＩ画像１１２ａ３の１つの位置情報と、ＲＯＩ画像１１２ａ４の１つの位置情報とを抽出し、ＲＯＩ画像１１２ａ３，１１２ｂ４の画像データ（伝送画像）をそれぞれ生成する。
【0109】
ＲＯＩ画像生成部２２３（図８参照）は、情報抽出部２２１で得られたＲＯＩ情報、ＲＯＩデコード部２２２で抽出されたＲＯＩ画像１１２ａ１～１１２ａ４の位置情報及びＲＯＩデコード部２２２で生成された伝送画像に基づいて、撮像画像１１１における注目領域ＲＯＩ１～ＲＯＩ４のＲＯＩ画像１１２ａ１～１１２ａ４を生成する。ＲＯＩ画像生成部２２３は、例えば６行目の画素行に対応するペイロードデータから抽出されたＲＯＩ画像１１２ａ１の１つの位置情報及びＲＯＩ画像１１２ａ２の２つの位置情報並びにそれらの伝送画像が入力された場合、Ｘ軸方向に延在する５画素分のＲＯＩ画像１１２ａ１と、当該ＲＯＩ画像１１２ａ１とは５画素分離れた位置でＸ軸方向に延在する４画素分のＲＯＩ画像１１２ａ２と、当該ＲＯＩ画像１１２ａ２から２画素分離れた位置でＸ軸方向に延在する２画素分のＲＯＩ画像１１２ａ２とを生成する（図１０参照）。
【0110】
また、ＲＯＩ画像生成部２２３は、情報抽出部２２１で得られたＲＯＩ情報に基づいて、注目領域ＲＯＩ３及び注目領域ＲＯＩ４同士が重なり合う重なり領域ＲＯＯを検出する。ＲＯＩ画像生成部２２３は、検出した重なり領域ＲＯＯと、１０行目の画素行に対応するペイロードデータから抽出されたＲＯＩ画像１１２ａ３，１１２ａ４のそれぞれ位置情報と、伝送画像とに基づいて、Ｘ軸方向に延在する４画素分のＲＯＩ画像１１２ａ３と、当該ＲＯＩ画像１１２ａ３に１画素分が重なった状態でＸ軸方向に延在する３画素分のＲＯＩ画像１１２ａ４とを生成する（図１０参照）。
【0111】
ＲＯＩ画像生成部２２３は、生成した画像をＲＯＩ画像として後段の装置（不図示）に出力する。
【0112】
このようにして、映像送信装置１００及び映像受信装置２００は、撮影対象の物体が矩形以外の形状を有していても、ＲＯＩ画像として送受信することができる。
【0113】
３．本開示の実施形態におけるシェーディング補正処理の原理：
次に、本開示の実施形態におけるシェーディング補正処理の原理について図１３から図１５を用いて説明する。図１３は、シェーディング補正処理の対象となる撮像画像に含まれるＲＯＩ領域の一例を示す図である。図１４は、シェーディング補正処理に用いられる補正値テーブルの一例を示す図である。また、図１５は本開示におけるシェーディング補正処理を模式的に示す図である。
次に、本開示の実施形態におけるシェーディング補正処理の原理について図１３から図１５を用いて説明する。図１３は、シェーディング補正処理の対象となる撮像画像に含まれるＲＯＩ領域の一例を示す図である。図１４は、シェーディング補正処理に用いられる補正値テーブルの一例を示す図である。また、図１５は本開示におけるシェーディング補正処理を模式的に示す図である。
【0114】
図１３に示すように、撮像画像αには３つの注目領域（注目領域ＲＯＩ０～２）が含まれている。例えばレンズを用いて撮像された画像（本例では撮像画像α）には、光源の向きやレンズ収差などの影響により、画像中央部に比べて画像周辺部が暗くなる現象（輝度ムラや濃度ムラ）が生じる場合がある。この現象を解消するための方法としてシェーディング補正がある。
【0115】
シェーディング補正処理では、例えば撮像画像内の領域に応じて撮像画像の輝度を調整（増幅）することで、輝度ムラや濃度ムラなどを補正して画像の輝度を均一化することができる。このため、シェーディング補正処理では、撮像画像内の領域に応じて輝度の増幅度合を調整する。例えば、撮像画像の周辺部は相対的に輝度が低くなるため、輝度の増幅度合を大きくする。また、撮像画像の中央部は相対的に輝度が高くなるため、輝度の増幅度合を小さくするか、または増幅せずに撮像時の輝度を維持する。したがって、撮像画像全体に対するシェーディング補正処理では、撮像画像内の領域に応じたシェーディング補正値（輝度の増幅に用いる補正値）に基づいて撮像画像内の各領域の輝度を増幅する。これにより、撮像画像全体の輝度が均一化される。
【0116】
しかしながら、撮像画像内の注目領域（ＲＯＩ）については、都度切り出される範囲および大きさが不明である。このため、注目領域についてシェーディング補正を行う場合、当該注目領域が撮像画像内のいずれの領域に位置しているかによって、輝度の増幅度合い、つまりシェーディング補正値を判定する必要がある。
【0117】
例えば、注目領域が撮像画像内の周辺部に該当するか、または撮像画像内の中央部に該当するかによって、対応するシェーディング補正値が異なる。このため、撮像画像内において位置及びサイズが任意に選択される注目領域では、撮像画像（本例では、撮像画像α）全体と同様のシェーディング補正処理を行うことができない。例えば図１３に示すように、撮像画像α内に３つの注目領域（注目領域ＲＯＩ０～２）が含まれる場合、各注目領域で感度の調整度合いは異なる。また注目領域ＲＯＩ０～２のように、互いに空間を隔てて複数の注目領域が存在する場合、撮像内における不連続な領域に対してシェーディング補正を行うことになる。さらに、各注目領域内においても、撮像画像αの周辺部よりか又は中央部よりかによって、画素ごとの輝度の増幅の度合、つまり対応するシェーディング補正値が異なる場合がある。
【0118】
そこで、本実施形態による伝送システムは、映像装置または映像受信装置のいずれかにおいて、撮像画像内における注目領域の座標情報に基づいて、注目領域の画像データのシェーディング補正処理を実行するように構成されている。これにより、注目領域の画像データの輝度を撮像画像内の領域に応じた度合いで増幅して、輝度を均一化することができる。ここで、座標情報とは、撮像画像α内における注目領域の位置を表す情報（位置情報）である。本実施形態では、注目領域の座標情報として、少なくとも注目領域の左上端部の座標が用いられる。以下、シェーディング補正処理に用いる注目領域の座標情報について説明する。
【0119】
（注目領域の座標情報）
ここで、本実施形態におけるシェーディング補正処理において用いられる注目領域の座標情報について説明する。
ここで、本実施形態におけるシェーディング補正処理において用いられる注目領域の座標情報について説明する。
【0120】
図１３に示すように、撮像画像α内には、矩形状の注目領域ＲＯＩ０～２が、所定の間隔を設けて配置されている。撮像画像αの原点α＿ｏ（０，０）を撮像画像αの左上端部の画素とする。上述のとおり、注目領域が設定される場合、当該注目領域の座標情報およびサイズ情報（Ｘ軸方向の長さ及びＹ軸方向の長さ）が導出される。本例において撮像画像αに注目領域ＲＯＩ０～２を設定する場合、図１３に示すように、注目領域ＲＯＩ０の座標情報として、例えば注目領域ＲＯＩ０の左上端部を示す始点Ｐｒ０の座標（Ｒ０Ｘ，Ｒ０Ｙ）が導出される。ここで、注目領域ＲＯＩ０の始点Ｐｒ０の座標（Ｒ０Ｘ，Ｒ０Ｙ）が注目領域ＲＯＩ０の左上端部の画素となる。また、座標情報に加え、注目領域ＲＯＩ０のサイズ情報として、Ｘ軸方向の長さＲ０Ｗ及びＹ軸方向の長さＲ０Ｈが導出される。
【0121】
また同様に、注目領域ＲＯＩ１の座標情報として、例えば始点Ｐｒ１の座標（Ｒ１Ｘ，Ｒ１Ｙ）が導出される。ここで、始点Ｐｒ１の座標（Ｒ１Ｘ，Ｒ１Ｙ）が注目領域ＲＯＩ１の左上端部の画素となる。さらに、注目領域ＲＯＩ１のサイズ情報としてＸ軸方向の長さＲ１Ｗ及びＹ軸方向の長さＲ１Ｈが導出される。また同様に、注目領域ＲＯＩ２の座標情報として、例えば始点Ｐｒ２の座標（Ｒ２Ｘ，Ｒ２Ｙ）が導出される。ここで、始点Ｐｒ２の座標（Ｒ２Ｘ，Ｒ２Ｙ）が注目領域ＲＯＩ２の左上端部の画素となる。さらに注目領域ＲＯＩ２のサイズ情報としてＸ軸方向の長さＲ２Ｗ及びＹ軸方向の長さＲ２Ｈが導出される。
【0122】
注目領域ＲＯＩ０，ＲＯＩ１，ＲＯＩ２の始点Ｐｒ０，Ｐｒ１，Ｐｒ２の各座標は、撮像画像α内での注目領域ＲＯＩ０，ＲＯＩ１，ＲＯＩ２の位置を表している。このため、始点Ｐｒ０，Ｐｒ１，Ｐｒ２の各座標は、撮像画像の原点α＿ｏ（０，０）、つまり撮像画像αの左上端部の画素を基準とする座標である。本実施形態では、送信装置における注目領域の設定時に座標情報として注目領域の左上端部の座標が導出され、以降の処理に用いるために保持される。詳しくは後述するが、注目領域の左上端部の座標は、シェーディング補正処理においても用いられる。また、注目領域の設定時においては座標情報とともにサイズ情報（Ｘ軸方向の長さ及びＹ軸方向の長さ）も導出され、以降の処理（シェーディング補正処理など）に用いるために保持される。
【0123】
また、本実施形態において、シェーディング補正処理にあたっては、撮像画像内における注目領域の画像データの各画素の座標が座標情報として生成される。座標情報としての当該各画素の座標は、注目領域の左上端部の座標に基づいて生成される。つまり、シェーディング補正処理に用いる座標情報には、注目領域の左上端部の座標に加えて、注目領域の画像データの各画素の座標が含まれる。そして、生成された注目領域の画像データの各画素について、座標情報に応じたシェーディング補正値による輝度の増幅が行われる。これにより、注目領域の画像データに対するシェーディング補正処理の精度を向上させることができる。ここで、注目領域の画像データの画素ごと（画素単位）の座標の生成について説明する。
【0124】
（注目領域における画素単位の座標情報）
本実施形態では、注目領域の左上端部（始点）の画素を示す座標および注目領域のサイズ情報を用いて注目領域の画像データにおける各画素の座標を生成する。本実施形態において、注目領域のサイズ情報は画素数を示している。つまり、注目領域のＸ軸方向の長さは、当該注目領域の画像データにおけるＸ軸方向の画素数を示し、Ｙ軸方向の長さは当該注目領域の画像データにおけるＹ軸方向の画素数を示す。また、注目領域全体の画素数は、Ｘ軸方向の長さ（画素数）とＹ軸方向の長さ（画素数）との乗算（Ｘ軸方向の長さ×Ｙ軸方向の長さ）で算出される。また、Ｙ軸方向の長さは、注目領域の画像データにおける画素行数を示す。例えば、所定の注目領域において画像データのＹ軸方向の長さが１０画素であれば、当該画像データは１０行の画素行で構成される。
本実施形態では、注目領域の左上端部（始点）の画素を示す座標および注目領域のサイズ情報を用いて注目領域の画像データにおける各画素の座標を生成する。本実施形態において、注目領域のサイズ情報は画素数を示している。つまり、注目領域のＸ軸方向の長さは、当該注目領域の画像データにおけるＸ軸方向の画素数を示し、Ｙ軸方向の長さは当該注目領域の画像データにおけるＹ軸方向の画素数を示す。また、注目領域全体の画素数は、Ｘ軸方向の長さ（画素数）とＹ軸方向の長さ（画素数）との乗算（Ｘ軸方向の長さ×Ｙ軸方向の長さ）で算出される。また、Ｙ軸方向の長さは、注目領域の画像データにおける画素行数を示す。例えば、所定の注目領域において画像データのＹ軸方向の長さが１０画素であれば、当該画像データは１０行の画素行で構成される。
【0125】
本実施形態において、撮像画像内における各座標位置には１画素の画像データが配置されている。つまり、注目領域内の各座標と注目領域における画像データの各画素とは１対１で対応する。本実施形態では、注目領域の左上端部（始点）の画素を示す座標を起点として、Ｘ軸方向の長さ（画素数）に基づいてＸ座標を計測（カウント）する。これにより、撮像画像内における注目領域の画像データの各画素の相対座標（画素座標）を画素行単位で生成することができる。また、注目領域の画像データのＹ軸方向の長さ（画素数）、すなわち画素行数に基づいて画素行単位での画素座標の生成を繰り返すことにより、注目領域の画像データ全体の画素座標を生成することができる。
【0126】
例えば、注目領域ＲＯＩ０のＸ軸方向長さＲ０Ｗは、注目領域ＲＯＩ０の画像データにおけるＸ軸方向の画素数（画素行データを構成する画素数）を示す。また、注目領域ＲＯＩ０のＹ軸方向長さＲ０Ｈは、注目領域ＲＯＩ０の画像データにおけるＹ軸方向の画素数（画素用データ数）を示す。したがって、注目領域ＲＯＩ０の始点Ｐｒ０の座標（Ｒ０Ｘ，Ｒ０Ｙ）を起点として、「Ｘ軸方向長さＲ０Ｗ－１」の画素数分だけ、始点ＰＲ０のＸ座標を１加算しながら計測（カウント）する。これにより、注目領域ＲＯＩ０の画像データの先頭の画素行について、始点Ｐｒ０の座標（Ｒ０Ｘ，Ｒ０Ｙ）を含めたＸ軸方向長さＲ０Ｗが示す画素数分の座標が生成される。
【0127】
以降、注目領域ＲＯＩ０の始点Ｐｒ０の座標（Ｒ０Ｘ，Ｒ０Ｙ）をＹ軸方向に１座標（１画素）ずつ移動させながら、画素行単位でＸ軸方向長さ（画素数）に相当する画素座標を生成する。注目領域ＲＯＩ０における画素座標の生成処理は、画素行数（Ｙ軸方向の長さＲ０Ｈ）の分だけ繰り返し実行される。具体的には、画素行単位での画素座標の生成処理が「Ｙ軸方向長さ－１」の回数だけ繰り返される。これにより、最終的に注目領域ＲＯＩ０の右下端（終点）Ｅｒ０の座標（Ｒ０Ｘ＋（Ｒ０Ｗ－１），ＥＲ０Ｙ＋（Ｒ０Ｈ－１））が生成される。つまり、注目領域ＲＯＩ０内の画像データを構成する全画素行、すなわち注目領域ＲＯＩの画像データ内の全画素の座標が生成される。
【0128】
このように、注目領域ＲＯＩ０の画像データの各画素の座標は、注目領域ＲＯＩ０の始点Ｐｒ０の座標（Ｒ０Ｘ，Ｒ０Ｙ）に基づいて生成される。より具体的には、注目領域ＲＯＩ０の画像データの各画素の座標は、注目領域ＲＯＩ０の始点Ｐｒ０の座標（Ｒ０Ｘ，Ｒ０Ｙ）とサイズ情報（Ｘ軸方向の長さＲ０Ｗ、Ｙ軸方向の長さＲ０Ｈ）を用いて生成される。これにより、撮像画像α内における注目領域ＲＯＩ０の画像データの各画素の座標を生成することができる。注目領域ＲＯＩ１，ＲＯＩ２についても同様にして、画像データの全画素の座標が生成される。
【0129】
（撮像画像のブロック領域）
本実施形態では、シェーディング補正処理において、注目領域の画像データに対し、シェーディング補正値を用いて輝度の増幅が行われる。シェーディング補正値は、例えば輝度の増幅のために画像データに対して乗算される値（数値）である。本実施形態においてシェーディング補正値は、撮像画像（本例では撮像画像α）を所定数の画素数で分割した領域であるブロック領域（本例では、ブロック領域Ｂｒ）と対応付けられている。
本実施形態では、シェーディング補正処理において、注目領域の画像データに対し、シェーディング補正値を用いて輝度の増幅が行われる。シェーディング補正値は、例えば輝度の増幅のために画像データに対して乗算される値（数値）である。本実施形態においてシェーディング補正値は、撮像画像（本例では撮像画像α）を所定数の画素数で分割した領域であるブロック領域（本例では、ブロック領域Ｂｒ）と対応付けられている。
【0130】
図１３に示すように、撮像画像αにおけるブロック領域Ｂｒは、一領域あたり２５６（Ｐｉｘｅｌ）×２５６（Ｐｉｘｅｌ）＝６５５３６Ｐｉｘｅｌ（画素）で構成された画像領域である。つまり各ブロック領域は、６５５３６画素分の画像データの座標に対応している。また図１３に示すように、撮像画像αは２３０４Ｐｉｘｅｌ（Ｘ軸方向の長さ）×１５３６Ｐｉｘｅｌ（Ｙ軸方向の長さ）＝３５３８９４４Ｐｉｘｅｌ（画素）で構成される画像である。このため、撮像画像αにおけるブロック領域Ｂｒの個数は５４（＝３５３８９４４Ｐｉｘｅｌ（全画素数）／６５５３６Ｐｉｘｅｌ（１ブロック領域単位の画素数））となる。つまり、撮像画像αは５４個のブロック領域Ｂｒに分割されている。より具体的には、撮像画像αは、Ｘ軸方向９個かつＹ軸方向６個の５４個の座標領域に分割される。図１３では、理解を容易にするため、５４個のブロック領域Ｂｒのうち、右上端のブロック領域Ｂｒのみを図示している。
【0131】
撮像画像αにおいて、各ブロック領域Ｂｒには、撮像画像内の位置（座標）に応じて好適なシェーディング補正値が対応付けられている。例えば、撮像画像αの周辺部に相当するブロック領域Ｂｒには、相対的に大きい値のシェーディング補正値が対応付いている。このため、相対的に輝度が低くなる撮像画像αの周辺部の画像データの輝度を適切に増幅させることができる。また、例えば撮像画像αの中心部に相当するブロック領域Ｂｒには、相対的に小さい値のシェーディング補正値が対応付いている。このため、相対的に輝度が高くなる撮像画像αの中心部の画像データの輝度の増幅を少なくして周辺部の輝度とのバランスを調整することができる。
【0132】
本実施形態において、注目領域のシェーディング補正処理では、注目領域の画像データの各画素がいずれのブロック領域Ｂｒに属しているかが判定される。つまり、注目領域の画像データの画素座標が、いずれのブロック領域Ｂｒ内の座標に対応しているかが判定される。これにより、注目領域内の画像データの各画素が属するブロック領域Ｂｒに対応するシェーディング補正値によって、各画素の画像データに好適なシェーディング補正処理が行われる。
【0133】
（補正値テーブル）
本実施形態では、撮像画像内のブロック領域に対応するシェーディング補正値は、補正値テーブルに保持されている。ここで、図１３を参照しつつ図１４を用いてシェーディング補正テーブルについて説明する。
本実施形態では、撮像画像内のブロック領域に対応するシェーディング補正値は、補正値テーブルに保持されている。ここで、図１３を参照しつつ図１４を用いてシェーディング補正テーブルについて説明する。
【0134】
図１４は、補正値テーブルｔ１内の各記憶領域を本実施形態の撮像画像α内のブロック領域Ｂｒと対応づけて示す図である。補正値テーブルｔ１には、撮像画像α内の座標情報に対応づけて補正値が保持されている。具体的には、本実施形態における補正値テーブルＴ１は、複数のアドレス領域Ａｓで構成されている。複数のアドレス領域Ａｓのそれぞれは、撮像画像αを所定の画素数（本例では、６５５３６画素）で区切ったブロック領域Ｂｒのそれぞれと紐づいている。一のアドレス領域Ａｓには、紐付けられた一のブロック領域Ｂｒに対応するシェーディング補正値が保持されている。つまり、一のアドレス領域Ａｓには、撮像画像α内の所定数の画素座標（本例では６５５３６画素分の画像データの画素座標）を含む一のブロック領域Ｂｒに対応づけて、補正値が保持されている。
【0135】
図１４に示すように、本例において補正値テーブルｔ１は、撮像画像αの５４個の座標領域にそれぞれ対応付けられた５４個のアドレス領域Ａｓで構成されている。アドレス領域Ａｓは、シェーディング補正値を保持可能な記憶領域である。本例の補正値テーブルｔ１において５４個のアドレス領域Ａｓには、０～５３の連番のアドレスが紐付けられている。アドレス値「０」は、撮像画像αにおいて左上端部のブロック領域Ｂｒに対応するアドレス領域Ａｓを示すアドレス値であり、アドレス値「５３」は、撮像画像αにおいて→下端部のブロック領域Ｂｒに対応するアドレス領域Ａｓを示すアドレス値である。
【0136】
補正値テーブルｔ１の各記憶領域は、撮像画像αにおける一のブロック領域Ｂｒ、すなわち２５６（Ｐｉｘｅｌ）×２５６（Ｐｉｘｅｌ）＝６５５３６Ｐｉｘｅｌ（画素）分の画素座標に対応している。このため、補正値テーブルｔ１の各記憶領域には、撮像画像αの５４個のブロック領域Ｂｒ内に位置する画素座標のそれぞれと対応した一の補正値が保持される。つまり、アドレス領域Ａｓ内の一のシェーディング補正値は、ブロック領域Ｂｒ内の複数（本例では、６５５３６画素）の画素座標と対応づいており、シェーディング補正値と画素座標とは、１対多の関係となる。
【0137】
例えば、図１４に示すように補正値テーブルＴ１のアドレス値「０」～「８」の９個のアドレス領域Ａｓは、撮像画像α内の上側周辺部に位置する９個のブロック領域Ｂｒに対応する。より詳細には、アドレス値「０」の記憶領域は、撮像画像αの原点α＿ｏを含むブロック領域Ｂｒに対応している。このため、例えば撮像画像αの原点α＿ｏを含むブロック領域Ｂｒ内の各画素についての輝度の増幅には、アドレス値「０」の記憶領域に保持されたシェーディング補正値が用いられる。
【0138】
このように、本実施形態におけるシェーディング補正処理では、撮像画像内における注目領域の座標情報に基づいて補正値テーブルから取得したシェーディング補正値を用いて注目領域の画像データの輝度を増幅する。具体的には、注目領域の画像データの各画素の座標に対応するシェーディング補正値を補正値テーブルから取得して、注目領域の画像データの各画素について輝度の調整を行う。
【0139】
ここで、図１５を用いて、注目領域ＲＯＩ０～２の画像データについてのシェーディング補正処理について説明する。図１５では理解を容易にするため、撮像画像αにおける５４個のブロック領域Ｂｒと各ブロック領域Ｂｒに対応する補正値テーブルｔ１のアドレス領域Ａｓとを併せて図示している。また図１５では、ブロック領域Ｂｒおよびアドレス領域Ａｓと注目領域ＲＯＩ０～２との対応付けを図示している。
【0140】
本例では、注目領域ＲＯＩ０の画像データについてシェーディング補正処理を行う場合、撮像画像α内における注目領域ＲＯＩ０の座標情報、つまり注目領域ＲＯＩの相対座標に基づいて、注目領域ＲＯＩ０の各画素がいずれのブロック領域Ｂｒに属しているかが判定される。各画素が属するブロック領域Ｂｒが判定されると、当該ブロック領域Ｂｒに対応する補正値テーブルｔ１のアドレス値が導出される。そして、導出されたアドレス値に紐づくアドレス領域Ａｓから、ブロック領域Ｂｒに対応するシェーディング補正値が取得され、取得されたシェーディング補正値を用いて注目領域ＲＯＩ０の画像データの輝度を画素ごとに増幅する。これにより、ブロック領域Ｂｒに対応するシェーディング補正値によって、注目領域ＲＯＩ０の各画素の画像データのシェーディング補正処理が行われる。
【0141】
図１５に示すように、注目領域ＲＯＩ０の画像データは、補正値テーブルＴ１における６つのブロック領域Ｂｒに亘って配置されている。これら６つのブロック領域Ｂｒのそれぞれは、アドレス値「１」、「２」、「１０」、「１１」、「１９」「２０」のそれぞれに対応する６つのアドレス領域Ａｓのそれぞれ対応している。このため、注目領域ＲＯＩ０の画像データ関するシェーディング補正処理には、これらの６つのアドレス領域Ａｓに保持されているシェーディング補正値が用いられる。
【0142】
注目領域ＲＯＩ０の画像データのシェーディング補正処理にあたっては、注目領域ＲＯＩ０の画像データの各画素の相対座標（画素座標）が生成される。そして、生成された画素座標が属するブロック領域Ｂｒが判定され、次いで判定したブロック領域Ｂｒに対応する補正値テーブルｔ１のアドレス値が導出する。上述のように、撮像画像α内のブロック領域Ｂｒは、補正値テーブルｔ１のアドレス領域を示すアドレス値と１対１で紐づいている。したがって、注目領域ＲＯＩ０の画像データの画素座標を生成して、当該画素座標が撮像画像α内のいずれのブロック領域Ｂｒに属しているかを判定することで、注目領域ＲＯＩ０の画像データの各画素座標に応じた補正値テーブルｔ１のアドレス値を導出することができる。
【0143】
また例えば、撮像画像α内の各座標領域内の座標を補正値テーブルＴ１の各記憶領域のアドレス値に変換する変換テーブル（不図示）を用いて、注目領域ＲＯＩ０の画像データの各画素座標に対応する補正値テーブルｔ１のアドレス値を取得してもよい。
【0144】
例えば、シェーディング補正処理において生成された注目領域ＲＯＩ０の画像データ画素座標が、補正値テーブルｔ１のアドレス値「１」に対応するブロック領域Ｂｒに属する座標であったとする。この場合、注目領域ＲＯＩ０における当該画素座標の画像データの輝度は、補正値テーブルＴ１のアドレス値「１」のアドレス領域Ａｓに保持されているシェーディング補正値によって増幅される。同様にして、補正値テーブルｔ１のアドレス値「２」に対応するブロック領域Ｂｒに含まれる画素座標が生成された場合、当該アドレス値「２」に対応するアドレス領域Ａｓに保持されたシェーディング補正値によって当該画素座標の画像データの輝度が増幅される。また、生成された注目領域ＲＯＩ０の画像データの画素座標が、補正値テーブルＴ１のアドレス値「１０」「１１」「１９」「２０」に対応するブロック領域Ｂｒに含まれる場合も同様に、対応するアドレス値のアドレス領域Ａｓに保持されたシェーディング補正値によって、各画素座標の画像データの輝度が増幅される。
【0145】
撮像画像α内の注目領域ＲＯＩ１，ＲＯＩ２についても同様に、画像データの画素ごとの相対座標である画素座標が属するブロック領域Ｂｒに基づいて、補正値テーブルｔ１のアドレス値を導出し、導出されたアドレス値に紐づくアドレス領域Ａｓに保持されたシェーディング補正値によって、画素座標に対応した画素ごとの画像データの輝度が増幅される。つまり、注目領域ＲＯＩ１の画像データは、補正値テーブルｔ１のアドレス領域Ａｓのうち、６つのアドレス値「１４」「１５」「２３」「２４」「３２」「３３」に対応するブロック領域Ｂｒに跨って配置されている。このため、注目領域ＲＯＩ１の各画素の画像データは、上記６つのアドレス値のうちのいずれかに紐づいたアドレス領域Ａｓが保持するシェーディング補正値によって、輝度の増幅が行われる。各画素座標に対応するアドレス値は、画素座標が属するブロック領域Ｂｒに基づいて導出される。また同様に、注目領域ＲＯＩ２の画像データは、４つのアドレス値「３９」「４０」「４８」「４９」の６つのアドレス値のいずれかに紐づいてアドレス領域Ａｓが保持するシェーディング補正値によって輝度の増幅が行われる。
【0146】
なお、上述のように、撮像画像の周辺部は中心部に比べて輝度が低くなっている。このため、撮像画像αの上側周辺部のブロック領域Ｂｒに対応する補正値テーブルｔ１のアドレス０～８のアドレス領域Ａｓ、下側周辺部のブロック領域Ｂｒに対応するアドレス値４５～５３のアドレス領域Ａｓ、左側周辺部のブロック領域Ｂｒに対応するアドレス値９，１８，２７，３６のアドレス領域Ａｓ、および右側周辺部のブロック領域Ｂｒに対応するアドレス値１７，２６，３５，４４のアドレス領域Ａｓには、相対的に大きな値のシェーディング補正値が保持されている。したがって、周辺部の座標領域に対応する補正値を用いる場合、注目領域の画像データの輝度増幅の度合は大きくなる。これにより、例えば撮像画像αの周辺部に配置された注目領域ＲＯＩ（例えば注目領域ＲＯＩ０，ＲＯＩ２）の画像データの輝度を撮像画像αの中心部の画像データと同様の輝度まで増幅することができる。
【0147】
また、撮像画像αの中心部のブロック領域Ｂｒに対応する補正値テーブルｔ１のアドレス値２１～２３，３０～３２に紐つくアドレス領域Ａｓには、相対的に小さい値のシェーディング補正値が保持されている。したがって、中心部のブロック領域Ｂｒに対応するシェーディング補正値を用いる場合、注目領域の画像データの輝度増幅の度合は小さくなる。これにより、撮像画像αの中心部の画像データの輝度と周辺部の画像データの輝度との差の拡大を抑制して、撮像画像α内の画像データの輝度を均一化することができる。なお、中心部のブロック領域Ｂｒに対応するアドレス領域Ａｓが保持するシェーディング補正値を「０」または「０」に近い値として、実質的に輝度を増幅しないように構成してもよい。
【0148】
なお、撮像画像αの周辺部、中心部以外のブロック領域Ｂｒに対応するアドレス領域Ａｓには、例えば周辺部のブロック領域Ｂｒに対応するアドレス領域Ａｓよりも小さい値かつ中心部のブロック領域Ｂｒに対応するアドレス領域Ａｓよりも大きい値のシェーディング補正値が保持されていればよい。このように、補正値テーブルｔ１には、撮像画像αの各ブロック領域Ｂｒに応じたシェーディング補正値が保持されている。
【0149】
また、シェーディング補正値を保持する補正値テーブルｔ１の各アドレス領域Ａｓは、撮像画像αのブロック領域Ｂｒのそれぞれと１対１で対応付けられている。したがって、注目領域ＲＯＩ０～２の画像データのシェーディング補正処理において、各注目領域の画像データの各画素の座標（画素座標）が生成され、生成された画素座標が属するブロック領域Ｂｒを判定することで、ブロック領域Ｂｒに対応する補正値テーブルｔ１のアドレス値を導出することができる。このため、ブロック領域Ｂｒに応じたシェーディング補正値が取得できる。このため、注目領域ＲＯＩ０～２の画像データの画素ごとに、撮像画像α内のブロック領域Ｂｒに応じたシェーディング補正値による輝度増幅を行うことができる。このようにして、本実施形態では、シェーディング補正処理により、注目領域ＲＯＩ０～２のそれぞれの画像データの輝度を適切に調整することができる。
【0150】
４．本開示の第１実施形態：
次に、本開示の第１実施形態による送信装置、受信装置及び伝送システムについて図１３から図１５を参照しつつ、図１６から図１８を用いて説明する。まず、本実施形態による送信装置、受信装置及び伝送システムの概略構成について図１６を用いて説明する。図１６は、映像伝送システム１０の概略構成を示すブロック図である。本実施形態による映像伝送システム１０は、映像送信装置３と映像受信装置２００とを備えている。映像伝送システム１０は、例えば上記前提技術１及び２に係る映像伝送システム１と同様に、映像送信装置３及び映像受信装置２００との間でＭＩＰＩ ＣＳＩ－３規格又はＭＩＰＩ ＤＳＩ規格で信号を送受信するように構成されている。
次に、本開示の第１実施形態による送信装置、受信装置及び伝送システムについて図１３から図１５を参照しつつ、図１６から図１８を用いて説明する。まず、本実施形態による送信装置、受信装置及び伝送システムの概略構成について図１６を用いて説明する。図１６は、映像伝送システム１０の概略構成を示すブロック図である。本実施形態による映像伝送システム１０は、映像送信装置３と映像受信装置２００とを備えている。映像伝送システム１０は、例えば上記前提技術１及び２に係る映像伝送システム１と同様に、映像送信装置３及び映像受信装置２００との間でＭＩＰＩ ＣＳＩ－３規格又はＭＩＰＩ ＤＳＩ規格で信号を送受信するように構成されている。
【0151】
映像伝送システム１０に備えられた映像受信装置２００は、上記第１及び２に係る前提技術における映像受信装置２００と同一の作用・機能を奏する構成であるため同一の符号を付して説明は省略する。
【0152】
映像伝送システム１０に備えられた映像送信装置３は、上記前提技術１及び２に係る映像送信装置１００と同等の機能を発揮するように構成されている。つまり、映像送信装置３は、注目領域の切り出しを指示する制御信号が所定の外部装置（例えば映像受信装置２００）から入力された場合に、画像センサデバイス３０から入力された撮像画像に対して、映像送信装置１００と同様の処理を実行可能に構成されている。映像送信装置３は、上述のシェーディング補正処理を実行可能に構成されている点で上記前提技術１及び２に係る映像送信装置１００と異なっている。
【0153】
また、映像送信装置３は、通常画像の出力を指示する制御信号が映像受信装置２００から入力された場合に、画像センサデバイス３０から入力された撮像画像に対して、映像送信装置１００と同様の処理を実行可能に構成されている。ここで、図１６では、映像送信装置３は、シェーディング処理に関連する構成を中心に図示されている。このため、通常画像に係る処理を実行する構成については、図１６において図示を省略する。
【0154】
本実施形態による映像送信装置３は、所定のクロック信号に同期して装置内の各処理を行う。このため、当該クロック信号に基づいて処理を行うことで、各構成は互いに処理を連動（例えば、同期）させることができる。
【0155】
図１６に示すように、映像送信装置３は、対象物を撮像する画像センサデバイス３０と、撮像画像に対しての所定処理および画像データの送信処理を行う送信処理部３１とを備えている。画像センサデバイス３０は、上記前提技術１及び２に係る映像送信装置１００の撮像部１１０と同様の構成である。画像センサデバイス３０は、例えばＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）イメージセンサやＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ ＯｘｉｄｅＳｅｍｉｃｏｎｄｕｃｔｏｒ）イメージセンサを含んで構成されており、光学レンズなどを通して得られた光学的な画像信号をデジタルの画像データに変換する。画像センサデバイス３０は、撮像により得られた撮像画像（例えば、撮像画像α）を送信処理部３１（具体的には、画像処理回路３００）に出力する。
【0156】
送信処理部３１は、画像処理回路（送信装置における処理部の一例）３００および画像送信部３３０を有している。画像処理回路３００は、上記前提技術１及び２に係る映像送信装置１００の画像処理部１２０と対応する構成であって、撮像部（画像センサデバイス３０）から入力された撮像画像に対して所定の処理を行う回路である。また、画像送信部３３０は、上記前提技術１及び２に係る映像送信装置１００の送信部１４０と対応する構成であって、画像処理回路３００から入力された種々のデータ（１２０Ａ，１２０Ｂ，１２０Ｃ等）に基づいて伝送データ３４７Ａを生成し、送出する回路である。本実施形態において送信処理部３１は、ＩＣチップとして構成されている。
【0157】
画像処理回路３００には、注目領域の切り出しを指示する制御信号とともに、切り出しの対象となる注目領域の設定に係る情報として、注目領域指定情報９０Ａが外部装置（例えば映像受信装置２００）から入力される。注目領域指定情報９０Ａは、例えば撮像画像内における位置やサイズを示す情報である。注目領域指定情報９０Ａは、画像処理回路３００が有する画像処理制御部１２６、補正回路３０１（具体的には、ＲＯＩ画像座標情報生成部３１１）およびＲＯＩ切り出し部１２１に入力される。
【0158】
具体的には、注目領域指定情報９０Ａは、位置情報として撮像画像内における注目領域の相対座標の情報（座標情報）を含んでいる。座標上には、少なくとも注目領域の左上端部の座標（始点座標）が含まれる。なお、本実施形態において位置情報は、始点座標に限られず、注目領域の右下端部の座標（終点座標）を含むように構成されてもよい。本開示における位置情報は、注目領域が矩形状の場合、４つの角部のいずれかを示す座標であればよい。また、サイズ情報として、注目領域ＲＯＩのＸ軸方向サイズおよびＹ軸方向サイズを含んでいる。本例において、撮像画像α内の注目領域ＲＯＩ０～ＲＯＩ２に関する注目領域指定情報９０Ａには、注目領域ＲＯＩ０～ＲＯＩ２の３つの注目領域それぞれの位置情報及びサイズ情報が含まれている。
【0159】
画像処理回路３００は、画像処理制御部１２６、補正回路３０１、ＲＯＩ切り出し部３０３およびエンコード部３０５を有している。画像処理制御部１２６は上記前提技術１及び２における画像処理部１２０の画像処理制御部１２６と同等の構成である。本実施形態において画像処理制御部１２６は、注目領域指定情報９０Ａに基づいて、ＲＯＩ情報１２０Ｂ、フレーム情報１２０Ｃおよびを生成し、画像送信部３３０に送信する。また、画像処理制御部１２６は、入力された注目領域指定情報９０Ａをエンコード部３０５およびエンコード部３０５に出力する。
【0160】
本実施形態による映像送信装置３の画像処理回路３００における補正回路３０１は、上述のシェーディング補正処理を実行する。補正回路３０１は、撮像画像における注目領域（ＲＯＩ：Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）の座標情報に基づいて、注目領域の画像データのシェーディング補正処理を実行する。補正回路３０１は、注目領域の左上端部の座標に基づいて撮像画像内における注目領域の画像データの各画素の座標を生成し、生成した各画素の座標に基づいて注目領域の画像データの各画素について輝度の増幅を行う。これにより、注目領域の画像データについてシェーディング補正が施される。補正回路３０１は、ＲＯＩ画像座標情報生成部３１１、補正値テーブルＲＡＭ３１２および補正部３１３を有している。補正値テーブルＲＡＭ３１２には、シェーディング補正処理に用いられるシェーディング補正値が保持されている。補正回路３０１は、これらの構成によって、シェーディング補正処理に係る各処理を実行する。補正回路３０１の各構成の詳細は、後述する。
【0161】
ＲＯＩ切り出し部３０３は、上記前提技術１及び２における画像処理部１２０のＲＯＩ切り出し部１２１と同等の構成である。ＲＯＩ切り出し部３０３は、撮像部（画像センサデバイス３０）から入力された撮像画像に注目領域ＲＯＩを設定する。ＲＯＩ切り出し部３０３は、例えば注目領域指定情報９０Ａに基づいて、撮像部（画像センサデバイス３０）から入力された撮像画像（例えば、撮像画像α）から注目領域（ＲＯＩ）を切り出す。本実施形態において、ＲＯＩ切り出し部３０３は、撮像画像から切り出した注目領域の画像データを補正回路３０１（具体的には、補正部３１３）に出力する。ＲＯＩ切り出し部３０３は、例えば上述のクロック信号に同期して、注目領域の画像データを画素単位で補正回路３０１に出力する。
【0162】
エンコード部３０５は、上記前提技術１及び２における画像処理部１２０のエンコード部１２５と同等の構成である。エンコード部３０５は、補正回路３０１においてシェーディング補正処理が行われた注目領域の画像データをエンコードして、圧縮像データ１２０Ａを生成する。エンコード部３０５は生成した圧縮像データ１２０Ａを画像送信部３３０（具体的には、後述するＲＯＩデータバッファ３４５）に出力する。
【0163】
（補正回路の詳細）
ＲＯＩ画像座標情報生成部３１１は、切り出された注目領域（ＲＯＩ）の画像データの画素ごとの相対座標（画素座標）を生成する。本実施形態においてＲＯＩ画像座標情報生成部３１１は、カウンタを用いて注目領域の画像データの画素座標を生成する。本実施形態において、画像処理回路３００は、種々の計測処理に用いるカウンタ部を有している。本実施形態において補正回路３０１は、カウンタ部として、水平カウンタＸｃｔおよび垂直カウンタＹｃｔを有している。
ＲＯＩ画像座標情報生成部３１１は、切り出された注目領域（ＲＯＩ）の画像データの画素ごとの相対座標（画素座標）を生成する。本実施形態においてＲＯＩ画像座標情報生成部３１１は、カウンタを用いて注目領域の画像データの画素座標を生成する。本実施形態において、画像処理回路３００は、種々の計測処理に用いるカウンタ部を有している。本実施形態において補正回路３０１は、カウンタ部として、水平カウンタＸｃｔおよび垂直カウンタＹｃｔを有している。
【0164】
水平カウンタ（第一カウンタの一例）Ｘｃｔは、注目領域の画像データの各画素について、撮像画像内におけるＸ軸方向位置（水平位置）を計測するカウンタである。水平カウンタＸｃｔのカウンタ値は、撮像画像（例えば撮像画像α）内のＸ座標に相当する。本実施形態による映像送信装置３において、水平カウンタＸｃｔは、注目領域の左上端部の座標（左上端部の画素座標）を起点として撮像画像内における注目領域のＸ座標を計測する。
【0165】
また、垂直カウンタ（第二カウンタの一例）Ｙｃｔは、注目領域の画像データの各画素について、撮像画像内におけるＹ軸方向位置（垂直位置）を計測するカウンタである。垂直カウンタＹｃｔの値は撮像画像内のＹ座標に相当し、撮像画像内の画素行の位置を示す。本実施形態による映像送信装置３において、垂直カウンタＹｃｔは、注目領域の左上端部の座標（左上端部の画素座標）を起点として撮像画像内における注目領域のＹ座標を計測する。例えば、水平カウンタＸｃｔおよび垂直カウンタＹｃｔの値がいずれも「０」の場合、撮像画像内の原点α＿о（０，０）を示す。
【0166】
なお、水平カウンタＸｃｔおよび垂直カウンタＹｃｔは、ＲＯＩ画像座標情報生成部３１１からカウンタ値に係る制御（カウンタ値の参照、カウンタ値のリセット等）が可能に設けられていればよい。このため、水平カウンタＸｃｔおよび垂直カウンタＹｃｔの設置箇所は、補正回路３０１内に限られず、例えば画像処理回路３００内の任意の箇所に設置されていればよい。また、水平カウンタＸｃｔおよび垂直カウンタＹｃｔは、ＲＯＩ画像座標情報生成部３１１が設定した任意の値でカウンタ値をリセット可能に構成されている。
【0167】
補正回路３０１におけるＲＯＩ画像座標情報生成部３１１は、水平カウンタＸｃｔおよび垂直カウンタＹｃｔを用いて注目領域の画像データの各画素の座標を生成する。ここで、画素座標生成処理の流れ（画素座標生成処理方法）の一例について図１７を用いて説明する。図１７は、本実施形態による映像送信装置３における画素座標生成処理の流れの一例を示すフローチャートである。
【0168】
（ステップＳ１０１）
映像送信装置３に備えられた補正回路３０１においてＲＯＩ画像座標情報生成部３１１は、画像データフレームの開始か否かを判定する。本実施形態において、画素座標生成処理における画像データフレームの開始は、注目領域指定情報９０Ａが映像受信装置２００から送信されたこと示す。本例においてＲＯＩ画像座標情報生成部３１１は、注目領域（本例では、注目領域ＲＯＩ０～ＲＯＩ２）についての注目領域指定情報９０Ａが送信されている場合に画像データフレームが開始されていると判定してステップＳ１０２に処理を移す。一方、ＲＯＩ画像座標情報生成部３１１は、注目領域指定情報９０Ａが送信されていない場合に画像データフレームが開始されていないと判定して、注目領域指定情報９０Ａが送信されるまでステップＳ１０１の処理を所定間隔で繰り返す。
映像送信装置３に備えられた補正回路３０１においてＲＯＩ画像座標情報生成部３１１は、画像データフレームの開始か否かを判定する。本実施形態において、画素座標生成処理における画像データフレームの開始は、注目領域指定情報９０Ａが映像受信装置２００から送信されたこと示す。本例においてＲＯＩ画像座標情報生成部３１１は、注目領域（本例では、注目領域ＲＯＩ０～ＲＯＩ２）についての注目領域指定情報９０Ａが送信されている場合に画像データフレームが開始されていると判定してステップＳ１０２に処理を移す。一方、ＲＯＩ画像座標情報生成部３１１は、注目領域指定情報９０Ａが送信されていない場合に画像データフレームが開始されていないと判定して、注目領域指定情報９０Ａが送信されるまでステップＳ１０１の処理を所定間隔で繰り返す。
【0169】
（ステップＳ１０２）
ＲＯＩ画像座標情報生成部３１１は、注目領域の位置情報を抽出し、ステップＳ１０３に処理を移す。具体的には、ＲＯＩ画像座標情報生成部３１１は注目領域指定情報９０Ａから注目領域ＲＯＩ０～ＲＯＩ２の位置情報として、撮像画像α内における各注目領域の座標情報を抽出する。座標情報には、少なくとも注目領域（本例では、注目領域ＲＯＩ０～２）の始点座標（左上端部の画素座標）が含まれている。
ＲＯＩ画像座標情報生成部３１１は、注目領域の位置情報を抽出し、ステップＳ１０３に処理を移す。具体的には、ＲＯＩ画像座標情報生成部３１１は注目領域指定情報９０Ａから注目領域ＲＯＩ０～ＲＯＩ２の位置情報として、撮像画像α内における各注目領域の座標情報を抽出する。座標情報には、少なくとも注目領域（本例では、注目領域ＲＯＩ０～２）の始点座標（左上端部の画素座標）が含まれている。
【0170】
（ステップＳ１０３）
ＲＯＩ画像座標情報生成部３１１は、撮像画像内において最も原点寄りの注目領域の始点座標を画素座標生成処理における基準座標として設定し、ステップＳ１０４に処理を移す。具体的には、ＲＯＩ画像座標情報生成部３１１は、最も原点寄りの注目領域の始点座標に基づいて、水平カウンタＸｃｔおよび垂直カウンタＹｃｔのカウンタ値をリセットする。リセットとは、カウンタ値を任意の値に設定する処理を示す。
ＲＯＩ画像座標情報生成部３１１は、撮像画像内において最も原点寄りの注目領域の始点座標を画素座標生成処理における基準座標として設定し、ステップＳ１０４に処理を移す。具体的には、ＲＯＩ画像座標情報生成部３１１は、最も原点寄りの注目領域の始点座標に基づいて、水平カウンタＸｃｔおよび垂直カウンタＹｃｔのカウンタ値をリセットする。リセットとは、カウンタ値を任意の値に設定する処理を示す。
【0171】
ここで、基準座標の決定について説明する。ステップＳ１０３においてＲＯＩ画像座標情報生成部３１１は、注目領域指定情報９０Ａから複数の注目領域についての座標情報を抽出すると、抽出した各座標情報を始点座標（注目領域の左上端部の画素座標）のＹ座標の値の昇順に並び替えてＹ座標順データを生成する。Ｙ座標順データには、始点座標のＹ座標とＹ軸方向サイズを示す画素数とから算出される終点Ｙ座標（注目領域の右下端部の画素座標）が含まれる。終点Ｙ座標は、「始点Ｙ座標の値＋Ｙ軸方向サイズ（－１）」で算出される。生成されたＹ座標順データは、例えば一の注目領域指定情報９０Ａの入力に基づく一連のシェーディング補正処理の実行中は所定のレジスタで保持されてもよい。
【0172】
ＲＯＩ画像座標情報生成部３１１は、Ｙ座標順データにおいて、最もＹ座標の値が小さい注目領域の始点座標を、基準座標として決定する。ＲＯＩ画像座標情報生成部３１１は基準座標を決定すると、水平カウンタＸｃｔのカウンタ値を基準座標のＸ座標の値にリセットし、垂直カウンタＹｃｔのカウンタ値を基準座標のＹ座標の値にリセットする。
【0173】
本例では、撮像画像α（図１３参照）において、最も原点よりの注目領域は注目領域ＲＯＩ０である。したがって、基準座標として、注目領域ＲＯＩ０の左上端部を示す始点Ｐｒ０の座標（Ｒ０Ｘ，Ｒ０Ｙ）が決定される。このため、ステップＳ１０３において、水平カウンタＸｃｔのカウンタ値が「Ｒ０Ｘ」にリセットされ、垂直カウンタＹｃｔのカウンタ値が「Ｒ０Ｙ」にリセットされる。これにより、注目領域の画像データの画素座標が生成される。
【0174】
（ステップＳ１０４）
ＲＯＩ画像座標情報生成部３１１は、現在の水平カウンタＸｃｔのカウンタ値および垂直カウンタＹｃｔのカウンタ値から画素座標を生成し、ステップＳ１０５に処理を移す。詳しくは後述するが、ここで生成された画素座標に基づいて、上述の補正値テーブルｔ１のアドレスが導出される。これにより当該アドレス値に紐付くアドレス領域Ａｓ（図１４参照）からシェーディング補正値が取得される。
ＲＯＩ画像座標情報生成部３１１は、現在の水平カウンタＸｃｔのカウンタ値および垂直カウンタＹｃｔのカウンタ値から画素座標を生成し、ステップＳ１０５に処理を移す。詳しくは後述するが、ここで生成された画素座標に基づいて、上述の補正値テーブルｔ１のアドレスが導出される。これにより当該アドレス値に紐付くアドレス領域Ａｓ（図１４参照）からシェーディング補正値が取得される。
【0175】
（ステップＳ１０５）
ＲＯＩ画像座標情報生成部３１１は、クロック信号に同期して更新（１加算）された、水平カウンタＸｃｔのカウンタ値を取得してステップＳ１０６に処理を移す。
ＲＯＩ画像座標情報生成部３１１は、クロック信号に同期して更新（１加算）された、水平カウンタＸｃｔのカウンタ値を取得してステップＳ１０６に処理を移す。
【0176】
（ステップＳ１０６）
ＲＯＩ画像座標情報生成部３１１は、更新された水平カウンタＸｃｔのカウンタ値が注目領域のＸ座標の右端、つまり注目領域の画像データにおける一の画素行（ライン）の終端を示す値を超過しているか否かを判定する。本例において、注目領域ＲＯＩ０（図１３参照）の所定の画素行の右端を示す座標Ｍｒ０におけるＸ座標は、Ｘ座標の始点（Ｒ０Ｘ）を「Ｘ軸方向長さＲ０Ｗ－１」の画素数分だけインクリメント（１加算）した値「Ｒ０Ｘ＋（Ｒ０Ｗ－１）」となる。ＲＯＩ画像座標情報生成部３１１は、水平カウンタＸｃｔのカウンタ値が注目領域（例えば注目領域ＲＯＩ０）のＸ座標の終端の値を超過していると判定すると、ステップＳ１０７に処理を移す。一方、ＲＯＩ画像座標情報生成部３１１は、水平カウンタＸｃｔのカウンタ値が注目領域（例えば注目領域ＲＯＩ０）のＸ座標の終端の値を超過していないと判定するとステップＳ１０４に処理を戻す。なお、一のライン上において、複数の注目領域が重なって配置されている場合、ＲＯＩ画像座標情報生成部３１１は、本ステップＳ１０６において、重なって配置されている全ての注目領域の終端を示す値を超過しているか否かを判定する。
ＲＯＩ画像座標情報生成部３１１は、更新された水平カウンタＸｃｔのカウンタ値が注目領域のＸ座標の右端、つまり注目領域の画像データにおける一の画素行（ライン）の終端を示す値を超過しているか否かを判定する。本例において、注目領域ＲＯＩ０（図１３参照）の所定の画素行の右端を示す座標Ｍｒ０におけるＸ座標は、Ｘ座標の始点（Ｒ０Ｘ）を「Ｘ軸方向長さＲ０Ｗ－１」の画素数分だけインクリメント（１加算）した値「Ｒ０Ｘ＋（Ｒ０Ｗ－１）」となる。ＲＯＩ画像座標情報生成部３１１は、水平カウンタＸｃｔのカウンタ値が注目領域（例えば注目領域ＲＯＩ０）のＸ座標の終端の値を超過していると判定すると、ステップＳ１０７に処理を移す。一方、ＲＯＩ画像座標情報生成部３１１は、水平カウンタＸｃｔのカウンタ値が注目領域（例えば注目領域ＲＯＩ０）のＸ座標の終端の値を超過していないと判定するとステップＳ１０４に処理を戻す。なお、一のライン上において、複数の注目領域が重なって配置されている場合、ＲＯＩ画像座標情報生成部３１１は、本ステップＳ１０６において、重なって配置されている全ての注目領域の終端を示す値を超過しているか否かを判定する。
【0177】
（ステップＳ１０７）
ＲＯＩ画像座標情報生成部３１１は、撮像画像内における現在の垂直カウンタＹｃｔのカウンタ値が示すＹ座標と同一のライン（画素行）に、現在画素座標の対象となっている注目領域以外の、他の注目領域が存在するか否かを判定する。ＲＯＩ画像座標情報生成部３１１は、撮像画像内において、現在の垂直カウンタＹｃｔのカウンタ値が示すＹ座標と同一のライン（画素行）に、他の注目領域が存在するか否かを判定する。例えば、ＲＯＩ画像座標情報生成部３１１は、Ｙ座標順データを参照して、現在の垂直カウンタＹｃｔのカウンタ値を含む他の注目領域が存在するか否かを判定する。他の注目領域が存在するか否かを判定する同一ラインに他の注目領域が存在すると判定すると、ステップＳ１０８に処理を移す。
ＲＯＩ画像座標情報生成部３１１は、撮像画像内における現在の垂直カウンタＹｃｔのカウンタ値が示すＹ座標と同一のライン（画素行）に、現在画素座標の対象となっている注目領域以外の、他の注目領域が存在するか否かを判定する。ＲＯＩ画像座標情報生成部３１１は、撮像画像内において、現在の垂直カウンタＹｃｔのカウンタ値が示すＹ座標と同一のライン（画素行）に、他の注目領域が存在するか否かを判定する。例えば、ＲＯＩ画像座標情報生成部３１１は、Ｙ座標順データを参照して、現在の垂直カウンタＹｃｔのカウンタ値を含む他の注目領域が存在するか否かを判定する。他の注目領域が存在するか否かを判定する同一ラインに他の注目領域が存在すると判定すると、ステップＳ１０８に処理を移す。
【0178】
ここで、垂直カウンタＹｃｔのカウンタ値が示すＹ座標と同一ライン上に他の注目領域が２以上ある場合には、ＲＯＩ画像座標情報生成部３１１はＸ座標の始点の値が小さい注目領域を、次に画素座標の生成対象となる注目領域（次回対象ＲＯＩ）として決定する。一方ＲＯＩ画像座標情報生成部３１１は、垂直カウンタＹｃｔのカウンタ値が示すＹ座標と同一ライン上に次回対象ＲＯＩ領域が存在しないと判定すると、ステップＳ１０９に処理を移す。
【0179】
次回対象ＲＯＩの決定には、注目領域指定情報９０Ａから抽出した各座標情報を始点座標（注目領域の左上端部の画素座標）のＸ座標の値の昇順に並び替えたＸ座標順データを用いる。例えば、ＲＯＩ画像座標情報生成部３１１は、上記ステップＳ１０３において、Ｙ座標順データと合わせてＸ座標順データを生成すればよい。Ｘ座標順データには、始点座標のＸ座標とＸ軸方向サイズを示す画素数とから算出される終点Ｘ座標（注目領域の各画素行の右端部の画素座標）が含まれる。さらに、Ｘ座標順データにはＹ座標順データに含まれる始点座標のＹ座標および終点Ｙ座標が含まれてもよい。終点Ｘ座標は、「始点Ｘ座標の値＋Ｘ軸方向サイズ（－１）」で算出される。生成されたＸ座標順データは、例えば一の注目領域指定情報９０Ａの入力に基づく一連のシェーディング補正処理の実行中は、Ｙ座標順データと同様に所定のレジスタで保持されてもよい。ＲＯＩ画像座標情報生成部３１１は、Ｘ座標順データを参照して、同一ライン上の注目領域ＲＯＩのうち、始点Ｘ座標が小さい順に次回対象ＲＯＩを決定する。
【0180】
本例においてＲＯＩ画像座標情報生成部３１１は、例えば水平カウンタＸｃｎｔのカウンタ値が注目領域ＲＯＩ０の所定の画素行の右端を示す座標Ｍｒ０の値を超過した場合に、本ステップＳ１０７において、座標Ｍｒ０のＹ座標と同一のラインに他の注目領域が存在するか否かを判定する。図１３に示すように、座標Ｍｒ０の同一ライン上には、注目領域ＲＯＩ１が存在している。したがって、ＲＯＩ画像座標情報生成部３１１は他の注目領域（本例では、注目領域ＲＯＩ１）が存在すると判定してステップＳ１０８に処理を移す。一方、ＲＯＩ画像座標情報生成部３１１は、例えば注目領域ＲＯＩ０の先頭の画素行の終端までの画素座標の生成を終了した場合には、注目領域ＲＯＩ０の先頭の画素行の終端（右端）座標のＹ座標と同一のラインには他の注目領域が存在しないと判定してステップＳ１０９に処理を移す。
【0181】
（ステップＳ１０８）
ＲＯＩ画像座標情報生成部３１１は、他の注目領域の始点（左端部）のＸ座標で水平カウンタＸｃｔのカウンタ値をリセットしてステップＳ１０４に処理を戻す。具体的には、ＲＯＩ画像座標情報生成部３１１は、次に画素座標の生成対象となる注目領域（次回対象ＲＯＩ）の始点座標のＸ座標の値で、水平カウンタＸｃｔのカウンタ値をリセットする。これにより、次に画素座標の生成対象となる注目領域の画素行の先頭画素から画素座標の生成が開始される。例えば、次に画素座標の生成対象となる注目領域が注目領域ＲＯＩ１である場合、始点Ｐｒ０の座標（Ｒ０Ｘ，Ｒ０Ｙ）のＸ座標の値「Ｒ１Ｘ」で水平カウンタＸｃｔのカウンタ値がリセットされる。
ＲＯＩ画像座標情報生成部３１１は、他の注目領域の始点（左端部）のＸ座標で水平カウンタＸｃｔのカウンタ値をリセットしてステップＳ１０４に処理を戻す。具体的には、ＲＯＩ画像座標情報生成部３１１は、次に画素座標の生成対象となる注目領域（次回対象ＲＯＩ）の始点座標のＸ座標の値で、水平カウンタＸｃｔのカウンタ値をリセットする。これにより、次に画素座標の生成対象となる注目領域の画素行の先頭画素から画素座標の生成が開始される。例えば、次に画素座標の生成対象となる注目領域が注目領域ＲＯＩ１である場合、始点Ｐｒ０の座標（Ｒ０Ｘ，Ｒ０Ｙ）のＸ座標の値「Ｒ１Ｘ」で水平カウンタＸｃｔのカウンタ値がリセットされる。
【0182】
このように、画素座標生成処理においてＲＯＩ画像座標情報生成部３１１は、水平カウンタＸｃｔのカウンタ値を不連続な値に更新する。つまり、水平カウンタＸｃｔは、不連続な値に更新可能なカウンタである。
【0183】
（ステップＳ１０９）
ＲＯＩ画像座標情報生成部３１１は、撮像画像における次のライン（画素行）上に注目領域の画像データが存在するか否かを判定する。具体的には、ＲＯＩ画像座標情報生成部３１１は、垂直カウンタＹｃｔのカウンタ値を１加算した値に更新し、更新後の値が示す撮像画像内のＹ座標に注目領域の画像データが存在するか否かを判定する。ＲＯＩ画像座標情報生成部３１１は、Ｙ座標順データを参照して、更新後の垂直カウンタＹｃｔのカウンタ値が示すＹ座標上に注目領域の画像データが存在していると判定すると、ステップＳ１１０に処理を移す。一方、ＲＯＩ画像座標情報生成部３１１は、更新後の垂直カウンタＹｃｔのカウンタ値が示すＹ座標上に注目領域の画像データが存在していないと判定するとステップＳ１１１に処理を移す。
ＲＯＩ画像座標情報生成部３１１は、撮像画像における次のライン（画素行）上に注目領域の画像データが存在するか否かを判定する。具体的には、ＲＯＩ画像座標情報生成部３１１は、垂直カウンタＹｃｔのカウンタ値を１加算した値に更新し、更新後の値が示す撮像画像内のＹ座標に注目領域の画像データが存在するか否かを判定する。ＲＯＩ画像座標情報生成部３１１は、Ｙ座標順データを参照して、更新後の垂直カウンタＹｃｔのカウンタ値が示すＹ座標上に注目領域の画像データが存在していると判定すると、ステップＳ１１０に処理を移す。一方、ＲＯＩ画像座標情報生成部３１１は、更新後の垂直カウンタＹｃｔのカウンタ値が示すＹ座標上に注目領域の画像データが存在していないと判定するとステップＳ１１１に処理を移す。
【0184】
（ステップＳ１１０）
ＲＯＩ画像座標情報生成部３１１は、Ｘ座標順データを参照し、次のライン（画素行）上の左端の注目領域の始点Ｘ座標の値で水平カウンタＸｃｎｔのカウンタ値をリセットしてステップＳ１０４に処理を移す。具体的には、ＲＯＩ画像座標情報生成部３１１は、Ｘ座標順データを参照して、ステップＳ１０９で更新した垂直カウンタＹｃｔのカウンタ値がＹ座標上の注目領域のうち最も小さい始点Ｘ座標を取得し、当該始点Ｘ座標で水平カウンタＸｃｎｔのカウンタ値をリセットする。これにより、撮像画像内の次のラインにおいて、最も左よりの注目領域から画素座標の生成が開始される。
ＲＯＩ画像座標情報生成部３１１は、Ｘ座標順データを参照し、次のライン（画素行）上の左端の注目領域の始点Ｘ座標の値で水平カウンタＸｃｎｔのカウンタ値をリセットしてステップＳ１０４に処理を移す。具体的には、ＲＯＩ画像座標情報生成部３１１は、Ｘ座標順データを参照して、ステップＳ１０９で更新した垂直カウンタＹｃｔのカウンタ値がＹ座標上の注目領域のうち最も小さい始点Ｘ座標を取得し、当該始点Ｘ座標で水平カウンタＸｃｎｔのカウンタ値をリセットする。これにより、撮像画像内の次のラインにおいて、最も左よりの注目領域から画素座標の生成が開始される。
【0185】
（ステップＳ１１１）
ＲＯＩ画像座標情報生成部３１１は、撮像画像における次のライン（画素行）よりさらに下に注目領域（次に画素座標の生成対象となる次回対象ＲＯＩ）が存在するか否かを判定する。具体的には、ＲＯＩ画像座標情報生成部３１１は、Ｙ座標順データを参照して、ステップＳ１０９で更新した垂直カウンタＹｃｔのカウンタ値が示すＹ座標よりもさらに下に次回対象ＲＯＩが存在するか否かを判定する。ＲＯＩ画像座標情報生成部３１１は、次のラインよりさらに下に次回対象ＲＯＩが存在すると判定すると、ステップＳ１１２に処理を移す。一方、ＲＯＩ画像座標情報生成部３１１は、次のラインよりさらに下に次回対象ＲＯＩが存在しないと判定すると、撮像画像内の全ての注目領域の画像データの画素座標が生成されたとして画素座標生成処理を終了する。
ＲＯＩ画像座標情報生成部３１１は、撮像画像における次のライン（画素行）よりさらに下に注目領域（次に画素座標の生成対象となる次回対象ＲＯＩ）が存在するか否かを判定する。具体的には、ＲＯＩ画像座標情報生成部３１１は、Ｙ座標順データを参照して、ステップＳ１０９で更新した垂直カウンタＹｃｔのカウンタ値が示すＹ座標よりもさらに下に次回対象ＲＯＩが存在するか否かを判定する。ＲＯＩ画像座標情報生成部３１１は、次のラインよりさらに下に次回対象ＲＯＩが存在すると判定すると、ステップＳ１１２に処理を移す。一方、ＲＯＩ画像座標情報生成部３１１は、次のラインよりさらに下に次回対象ＲＯＩが存在しないと判定すると、撮像画像内の全ての注目領域の画像データの画素座標が生成されたとして画素座標生成処理を終了する。
【0186】
（ステップＳ１１２）
ＲＯＩ画像座標情報生成部３１１は、垂直カウンタＹｃｔのカウンタ値および水平カウンタＸｃｔのカウンタ値をリセットしてステップＳ１０４に処理を戻す。具体的には、ＲＯＩ画像座標情報生成部３１１は、Ｙ座標順データを参照して次回対象ＲＯＩの始点座標のＹ座標の値で、垂直カウンタＹｃｔのカウンタ値をリセットする。また、ＲＯＩ画像座標情報生成部３１１はＸ座標順データを参照して次回対象ＲＯＩの始点座標のＸ座標の値で水平カウンタＸｃｎｔのカウンタ値をリセットする。これにより、撮像画像内においてＹ軸方向に間隔を設けて配置された複数の注目領域の画像データについても余すことなく画素座標を生成することができる。
ＲＯＩ画像座標情報生成部３１１は、垂直カウンタＹｃｔのカウンタ値および水平カウンタＸｃｔのカウンタ値をリセットしてステップＳ１０４に処理を戻す。具体的には、ＲＯＩ画像座標情報生成部３１１は、Ｙ座標順データを参照して次回対象ＲＯＩの始点座標のＹ座標の値で、垂直カウンタＹｃｔのカウンタ値をリセットする。また、ＲＯＩ画像座標情報生成部３１１はＸ座標順データを参照して次回対象ＲＯＩの始点座標のＸ座標の値で水平カウンタＸｃｎｔのカウンタ値をリセットする。これにより、撮像画像内においてＹ軸方向に間隔を設けて配置された複数の注目領域の画像データについても余すことなく画素座標を生成することができる。
【0187】
本例において、注目領域ＲＯＩ１の終点座標（右下端部の画素の座標）まで画素座標が生成され、次に画素座標の生成対象となる注目領域が注目領域ＲＯＩ２であるとする。この場合、ＲＯＩ画像座標情報生成部３１１は、注目領域ＲＯＩ２の始点Ｐｒ２の座標（Ｒ２Ｘ，Ｒ２Ｙ）のＸ座標の値「Ｒ２Ｘ」で水平カウンタＸｃｎｔのカウンタ値をリセットし、Ｙ座標の値「Ｒ２Ｙ」で垂直カウンタＹｃｎｔをリセットする。これにより、注目領域ＲＯＩ１の次に注目領域ＲＯＩ２の始点（左上端部）の画素の画素座標から生成を開始することができる。
【0188】
画素座標生成処理のステップＳ１１２においてＲＯＩ画像座標情報生成部３１１は、垂直カウンタＹｃｎｔのカウンタ値を不連続な値に更新する。つまり、垂直カウンタＹｃｎｔは、不連続な値に更新可能なカウンタである。本実施形態において、ＲＯＩ画像座標情報生成部３１１は、水平カウンタＸｃｎｔおよび垂直カウンタＹｃｎｔを用いて撮像画像（本例では撮像画像α）に含まれる複数の注目領域（ＲＯＩ）の画像データの各画素の座標を生成することができる。
【0189】
以上、図１７を用いて画素座標生成処理について説明した。上述のように、補正回路３０１が備えるＲＯＩ画像座標情報生成部３１１は、座標情報として少なくとも注目領域の左上端部の座標（始点座標）を用いて、画素座標を生成する。より詳細には、ＲＯＩ画像座標情報生成部３１１は、注目領域の始点座標とサイズ情報とを用いてＹ座標順データおよびＸ座標順データを生成し、注目領域の画像データの画素座標を生成する。
【0190】
ＲＯＩ画像座標情報生成部３１１は、画素座標を生成する度に、生成した画素座標に基づいて補正値テーブルｔ１のアドレス値を導出する。具体的には、ＲＯＩ画像座標情報生成部３１１は、生成した画素座標が属する撮像画像内のブロック領域Ｂｒ（図１５参照）を特定する。ＲＯＩ画像座標情報生成部３１１は特定したブロック領域Ｂｒに紐づくアドレス値を導出すると、導出したアドレス値に紐づくアドレス領域に保持されたシェーディング補正を取得して、補正部３１３に出力する。
【0191】
補正回路３０１が備える補正部３１３は、ＲＯＩ画像座標情報生成部３１１が座標情報に基づいて補正値テーブルｔ１から取得したシェーディング補正値を用いて注目領域（ＲＯＩ）の画像データの輝度を増幅する。具体的には、補正回路３０１において、ＲＯＩ画像座標情報生成部３１１が注目領域の画像データの各画素の座標（画素座標）に対応するシェーディング補正値を補正値テーブルｔ１から取得し、取得したシェーディング補正値を用いて補正部３１３が当該注目領域の画像データの各画素について感度の調整を行う
【0192】
補正部３１３は、ＲＯＩ切り出し部３０３から入力される注目領域の画素単位の画像データに対して、ＲＯＩ画像座標情報生成部３１１から入力されるシェーディング補正値を乗算して輝度を増幅する。これにより、補正部３１３を有する補正回路注目領域の各画素の画像データの輝度を、撮像画像内の領域に応じたシェーディング補正値に基づいて増幅させることができる。このため、補正回路３０１を備える映像送信装置３は、シェーディング補正処理によって、注目領域の画像データの輝度を撮像画像内の領域に応じた度合いで増幅して、輝度を均一化することができる。
【0193】
補正回路３０１は、シェーディング補正処理を施した注目領域の画像データである補正済み画像データ３１３Ａを、エンコード部３０５に出力する。エンコード部３０５は上述のように、補正済み画像データ３０３Ａを画像送信部３３０に出力する。エンコード部３０５は、画素単位で入力された注目領域の画像データを画素行単位にまとめて、１ライン（１画素行）分の伝送画像を生成する。例えば、エンコード部３０５は、注目領域ＲＯＩ０の画素単位の画像データをＸ軸方向の長さＲ０Ｗに相当する画素数分にまとめて、注目領域ＲＯＩ０一の画素行の伝送画像を生成する。エンコード部３０５は、画像処理制御部１２６から入力された注目領域指定情報９０Ａに基づいて、各注目領域について画素行単位（ラインごと）に伝送画像を生成する。エンコード部３０５は、伝送画像をＪＰＥＧ規格に準拠した圧縮形式等により圧縮した圧縮像データ１２０Ａを画像送信部３３０に出力する。
【0194】
（画像送信部）
画像送信部３３０は、ＬＩＮＫ制御回路３４１、ＥＣＣ生成回路３４２、ＰＨ生成回路３４３、ＥＢＤバッファ３４４、ＲＯＩデータバッファ３４５、合成回路３４７および送信回路３５０を有している。また、画像送信部３３０は不図示の通常画像データバッファを有している。
画像送信部３３０は、ＬＩＮＫ制御回路３４１、ＥＣＣ生成回路３４２、ＰＨ生成回路３４３、ＥＢＤバッファ３４４、ＲＯＩデータバッファ３４５、合成回路３４７および送信回路３５０を有している。また、画像送信部３３０は不図示の通常画像データバッファを有している。
【0195】
ＬＩＮＫ制御回路３４１は、上記前提技術に係る映像送信装置１００のＬＩＮＫ制御部１４１と同等の構成である。ＬＩＮＫ制御回路３４１は、例えば画像処理制御部１２６から入力された、フレーム情報１２０ＣをラインごとにＥＣＣ生成回路３４２及びＰＨ生成回路３４３に出力する。ＥＣＣ生成回路３４２は、上記前提技術に係る映像送信装置１００のＥＣＣ生成部１４２と同等の構成である。ＥＣＣ生成回路３４２は、例えば、フレーム情報における１ラインのデータ（例えば、バーチャルチャネルの番号、注目領域ＲＯＩ１～ＲＯＩ２のそれぞれのデータタイプ、ラインごとのペイロード長など）に基づいて、そのラインの誤り訂正符号を生成する。ＥＣＣ生成回路３４２は例えば、生成した誤り訂正符号をＰＨ生成回路３４３に出力する。なお、ＥＣＣ生成回路３４２は誤り訂正符号を合成回路３４７に出力してもよい。
【0196】
ＰＨ生成回路３４３は、上記前提技術に係る映像送信装置１００のＰＨ生成部１４３と同等の構成である。ＰＨ生成回路３４３は、例えば、フレーム情報と、注目領域指定情報９０Ａと、ＥＣＣ生成回路３４２で生成された誤り訂正符号とを用いて、１ラインごとにパケットヘッダＰＨ（図４参照）を生成する。また、ＰＨ生成回路３４３は、画像処理制御部１２６から入力された注目領域指定情報９０ＡをＥＣＣ生成回路３４２に出力してもよい。ＰＨ生成回路３４３は、生成したパケットヘッダＰＨを合成部１４７に出力する。
【0197】
ＥＢＤバッファ３４４は、上記前提技術に係る映像送信装置１００のＥＢＤバッファ１４４と同等の構成である。ＥＢＤバッファ３４４は、画像処理制御部１２６が生成したＲＯＩ情報を一次的に格納し、所定のタイミングでＲＯＩ情報をエンベデッドデータとして合成回路３４７に出力する。
【0198】
ＲＯＩデータバッファ３４５は、上記前提技術に係る映像送信装置１００のＲＯＩデータバッファ１４５と同等の構成である。ＲＯＩデータバッファ３４５は、エンコード部３０５から入力された圧縮像データ１２０Ａを一次的に格納し、所定のタイミングで圧縮像データ１２０Ａをロングパケットのペイロードデータとして合成回路３４７に出力する。
【0199】
合成回路３４７は、上記前提技術に係る映像送信装置１００の合成部１４７と同等の構成である。合成回路３４７は、ＲＯＩの切り出しを指示する制御信号がカメラ制御インタフェースＣＣＩを介して映像受信装置２００から入力された場合に、入力された各種データ（パケットヘッダＰＨ、ＲＯＩ情報１２０Ｂ、及び圧縮像データ１２０Ａ）に基づいて、伝送データ３４７Ａを生成する。合成部１４７は、生成した伝送データ１４７Ａを、送信回路３５０に出力する。
【0200】
送信処理部（送信部の一例）３１が備える画像送信部３３０の送信回路３５０は、データレーンＤＬを介して伝送データ１４７Ａを映像受信装置２００に出力する。具体的には、送信回路３５０は、シェーディング補正処理が行われた注目領域（ＲＯＩ）の画像データをペイロードデータで送出する。これにより、エンベデッドデータとともに、シェーディング補正処理を施した注目領域の画像データがペイロードデータとして映像受信装置２００に伝送される。
【0201】
（送信装置におけるシェーディング補正処理方法）
次に、本実施形態による送信装置、受信装置及び伝送システムにおけるシェーディング補正処理方法について図１３から図１７を参照しつつ図１８を用いて説明する。図１８は、本実施形態によるシェーディング補正を実行可能な送信装置、受信装置及び伝送システムにおけるシェーディング補正処理方法の流れの一例を示すフローチャートである。
次に、本実施形態による送信装置、受信装置及び伝送システムにおけるシェーディング補正処理方法について図１３から図１７を参照しつつ図１８を用いて説明する。図１８は、本実施形態によるシェーディング補正を実行可能な送信装置、受信装置及び伝送システムにおけるシェーディング補正処理方法の流れの一例を示すフローチャートである。
【0202】
映像伝送システム１０が起動してフレーム開始トリガが入力されると、映像受信装置２００に備えられた情報処理部２２０（図中のＣａｍＣＰＵ）は、ステップＳ２１に処理を移す。
【0203】
（ステップＳ２１）
映像伝送システム１０が起動してフレーム開始トリガが入力されると、映像受信装置２００に備えられた情報処理部２２０（図中のＣａｍＣＰＵ）は、映像送信装置３の画像センサデバイス３０の撮像画像から画像（注目領域）を切り出す切り出し位置を決定して、切り出し位置決定処理を終了する。具体的には、ＣａｍＣＰＵは、切り出し位置を決定すると、切り出しを指示する制御信号および注目領域指定情報９０Ａを送出する。注目領域指定情報９０Ａには、注目領域の位置情報（座標情報）およびサイズ情報（Ｘ軸方向サイズおよびＹ軸方向サイズ）が含まれる。制御信号および注目領域指定情報９０Ａは、ＭＩＰＩを用いたハードウェア（ＨＷ）による通信によって、映像受信装置２００から映像送信装置３に送信される。
映像伝送システム１０が起動してフレーム開始トリガが入力されると、映像受信装置２００に備えられた情報処理部２２０（図中のＣａｍＣＰＵ）は、映像送信装置３の画像センサデバイス３０の撮像画像から画像（注目領域）を切り出す切り出し位置を決定して、切り出し位置決定処理を終了する。具体的には、ＣａｍＣＰＵは、切り出し位置を決定すると、切り出しを指示する制御信号および注目領域指定情報９０Ａを送出する。注目領域指定情報９０Ａには、注目領域の位置情報（座標情報）およびサイズ情報（Ｘ軸方向サイズおよびＹ軸方向サイズ）が含まれる。制御信号および注目領域指定情報９０Ａは、ＭＩＰＩを用いたハードウェア（ＨＷ）による通信によって、映像受信装置２００から映像送信装置３に送信される。
【0204】
（ステップＳ３１）
映像送信装置３の送信処理部３１が備える画像処理回路３００（図中のセンサＣＰＵ）は、切り出し位置指定トリガを検出すると、画像センサデバイス３０の撮像画像における切り出し位置とサイズを取得し、ステップＳ３２に処理を移す。具体的には、画像処理回路３００は、画像処理制御部１２６、補正回路３０１におけるＲＯＩ画像座標情報生成部３１１およびＲＯＩ切り出し部１２１において、注目領域指定情報９０Ａから位置情報（注目領域の座標情報）およびサイズ情報（Ｘ軸方向サイズおよびＹ軸方向サイズ）を取得する。
映像送信装置３の送信処理部３１が備える画像処理回路３００（図中のセンサＣＰＵ）は、切り出し位置指定トリガを検出すると、画像センサデバイス３０の撮像画像における切り出し位置とサイズを取得し、ステップＳ３２に処理を移す。具体的には、画像処理回路３００は、画像処理制御部１２６、補正回路３０１におけるＲＯＩ画像座標情報生成部３１１およびＲＯＩ切り出し部１２１において、注目領域指定情報９０Ａから位置情報（注目領域の座標情報）およびサイズ情報（Ｘ軸方向サイズおよびＹ軸方向サイズ）を取得する。
【0205】
（ステップＳ３２）
画像処理回路３００は、ＲＯＩ切り出し部１２１において、注目領域指定情報９０Ａに基づいて、撮像画像内における注目領域を切り出す切り出し位置を決定し、ステップＳ３３に処理を移す。ＲＯＩ切り出し部１２１は、切り出し位置を決定すると、撮像画像から注目領域の画像データを切り出し、画素単位で補正回路３０１における補正部３１３に出力する。
画像処理回路３００は、ＲＯＩ切り出し部１２１において、注目領域指定情報９０Ａに基づいて、撮像画像内における注目領域を切り出す切り出し位置を決定し、ステップＳ３３に処理を移す。ＲＯＩ切り出し部１２１は、切り出し位置を決定すると、撮像画像から注目領域の画像データを切り出し、画素単位で補正回路３０１における補正部３１３に出力する。
【0206】
（ステップＳ３３）
画像処理回路３００は、補正回路３０１のＲＯＩ画像座標情報生成部３１１において、注目領域の画像データの画素座標を生成して、ステップＳ３４に処理を移す。具体的には、ＲＯＩ画像座標情報生成部３１１は、図１７に示す画素座標生成処理を実行する。ＲＯＩ画像座標情報生成部３１１は、生成した画素座標に基づいて、注目領域の各画素の画像データが属する撮像画像内のブロック領域Ｂｒ（図１５参照）を特定する。ＲＯＩ画像座標情報生成部３１１は、ブロック領域Ｂｒを特定すると、ブロック領域Ｂｒに対応する補正値テーブルｔ１のアドレス値を導出する。ＲＯＩ画像座標情報生成部３１１は、当該アドレス値に紐付く補正値テーブルｔ１のアドレス領域Ａｓからシェーディング補正値を取得して、補正回路３０１の補正部３１３に出力する。
画像処理回路３００は、補正回路３０１のＲＯＩ画像座標情報生成部３１１において、注目領域の画像データの画素座標を生成して、ステップＳ３４に処理を移す。具体的には、ＲＯＩ画像座標情報生成部３１１は、図１７に示す画素座標生成処理を実行する。ＲＯＩ画像座標情報生成部３１１は、生成した画素座標に基づいて、注目領域の各画素の画像データが属する撮像画像内のブロック領域Ｂｒ（図１５参照）を特定する。ＲＯＩ画像座標情報生成部３１１は、ブロック領域Ｂｒを特定すると、ブロック領域Ｂｒに対応する補正値テーブルｔ１のアドレス値を導出する。ＲＯＩ画像座標情報生成部３１１は、当該アドレス値に紐付く補正値テーブルｔ１のアドレス領域Ａｓからシェーディング補正値を取得して、補正回路３０１の補正部３１３に出力する。
【0207】
（ステップＳ３４）
画像処理回路３００は、補正回路３０１の補正部３１３において注目領域の画像データに対してシェーディング補正を行い、ステップＳ３５に処理を移す。具体的には、補正部３１３は、ＲＯＩ画像座標情報生成部３１１から入力されたシェーディング補正値を用いてＲＯＩ切り出し部１２１から入力された注目領域の画素単位の画像データの輝度を増幅する。補正部３１３は、シェーディング補正処理を施した注目領域の画像データである補正済み画像データ３１３Ａを画素単位でエンコード部３０５に出力する。
画像処理回路３００は、補正回路３０１の補正部３１３において注目領域の画像データに対してシェーディング補正を行い、ステップＳ３５に処理を移す。具体的には、補正部３１３は、ＲＯＩ画像座標情報生成部３１１から入力されたシェーディング補正値を用いてＲＯＩ切り出し部１２１から入力された注目領域の画素単位の画像データの輝度を増幅する。補正部３１３は、シェーディング補正処理を施した注目領域の画像データである補正済み画像データ３１３Ａを画素単位でエンコード部３０５に出力する。
【0208】
（ステップＳ３５）
画像処理回路３００は、補正回路３０１の補正部３１３において撮像画像内の全ての注目領域の画像データについてシェーディング補正が完了しているか否かを判定する。具体的には、画像処理回路３００は、ＲＯＩ画像座標情報生成部３１１において、全ての注目領域の画素座標の生成が終了しているか否かによって、全ての注目領域についてのシェーディング補正が完了しているか否かを判定する。画像処理回路３００は、撮像画像内の全ての注目領域の画像データの画素座標が生成されている場合（上記ステップＳ１１１のＮＯ）に、撮像画像内の全ての注目領域の画像データについてシェーディング補正が完了していると判定してステップＳ３６に処理を移す。一方、画像処理回路３００は、撮像画像内の全ての注目領域の画像データの画素座標が生成されていない場合（上記ステップＳ１１１のＹＥＳ）に、撮像画像内の全ての注目領域の画像データについてシェーディング補正が完了していないと判定して、ステップＳ３３に処理を戻す。
画像処理回路３００は、補正回路３０１の補正部３１３において撮像画像内の全ての注目領域の画像データについてシェーディング補正が完了しているか否かを判定する。具体的には、画像処理回路３００は、ＲＯＩ画像座標情報生成部３１１において、全ての注目領域の画素座標の生成が終了しているか否かによって、全ての注目領域についてのシェーディング補正が完了しているか否かを判定する。画像処理回路３００は、撮像画像内の全ての注目領域の画像データの画素座標が生成されている場合（上記ステップＳ１１１のＮＯ）に、撮像画像内の全ての注目領域の画像データについてシェーディング補正が完了していると判定してステップＳ３６に処理を移す。一方、画像処理回路３００は、撮像画像内の全ての注目領域の画像データの画素座標が生成されていない場合（上記ステップＳ１１１のＹＥＳ）に、撮像画像内の全ての注目領域の画像データについてシェーディング補正が完了していないと判定して、ステップＳ３３に処理を戻す。
【0209】
（ステップＳ３６）
画像処理回路３００は、画像処理制御部１２６において注目領域の位置情報（座標情報）およびサイズ情報（Ｘ軸方向サイズおよびＹ軸方向サイズ）を設定したＲＯＩ情報を生成して画像送信部３３０（具体的には、ＥＢＤバッファ３４４）に出力する。また、画像処理回路３００は、エンコード部３０５において、補正済み画像データ３１３Ａを圧縮した圧縮像データ１２０Ａを画像送信部３３０（具体的には、ＲＯＩデータバッファ３４５）に出力する。これにより、画像送信部３３０の合成回路３４７は、伝送データ３４７ＡとしてＲＯＩ情報を含むエンベデッドデータおよびシェーディング補正処理を施した注目領域の画像データを含むペイロードデータを生成する。生成された伝送データ３４７Ａは、送信回路３５０を介して、ＭＩＰＩを用いたハードウェア（ＨＷ）による通信によって、映像受信装置２００に伝送される。
画像処理回路３００は、画像処理制御部１２６において注目領域の位置情報（座標情報）およびサイズ情報（Ｘ軸方向サイズおよびＹ軸方向サイズ）を設定したＲＯＩ情報を生成して画像送信部３３０（具体的には、ＥＢＤバッファ３４４）に出力する。また、画像処理回路３００は、エンコード部３０５において、補正済み画像データ３１３Ａを圧縮した圧縮像データ１２０Ａを画像送信部３３０（具体的には、ＲＯＩデータバッファ３４５）に出力する。これにより、画像送信部３３０の合成回路３４７は、伝送データ３４７ＡとしてＲＯＩ情報を含むエンベデッドデータおよびシェーディング補正処理を施した注目領域の画像データを含むペイロードデータを生成する。生成された伝送データ３４７Ａは、送信回路３５０を介して、ＭＩＰＩを用いたハードウェア（ＨＷ）による通信によって、映像受信装置２００に伝送される。
【0210】
上述のようにして、本実施形態による映像送信装置３においシェーディング補正処理が実行されると、シェーディング補正を施された注目領域の画像データが映像受信装置２００に伝送される。これにより、映像受信装置２００は、シェーディング補正を施された注目領域の画像データに対する種々の処理を実行することができる。
【0211】
以上、本実施形態において映像送信装置３においてシェーディング補正処理を実行する映像伝送システム１０について説明した。本実施形態において伝送システム１０が備える映像送信装置３は、撮像画像における注目領域（ＲＯＩ：Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）の座標情報に基づいて、注目領域の画像データのシェーディング補正処理を実行する画像処理回路３００とシェーディング補正処理が行われた注目領域の画像データをペイロードデータで送出する画像送信部３３０と、を備える。これにより、伝送システム１０における映像送信装置３は、注目領域の画像データに対してシェーディング補正処理を実行することができる。
【0212】
本実施形態による映像送信装置３の画像処理回路３００はシェーディング補正処理を実行可能なハードウェアとして構成されている。また本実施形態による映像送信装置３の画像送信部３３０は、注目領域ＲＯＩの画像データを送出可能なハードウェアとして構成されている。これにより、映像送信装置３は、注目領域の画像データのシェーディング補正処理および送信処理を高速化し、伝送システム１０における単位時間あたりの画像データフレームの処理数を向上させる、すなわち高フレームレートでの処理を実現することができる。
【0213】
５．本開示の第２実施形態：
次に、本開示の第２実施形態による送信装置、受信装置及び伝送システムについて図１３から図１５を参照しつつ図１９および図２０を用いて説明する。まず、本実施形態による送信装置、受信装置及び伝送システムの概略構成について図１９を用いて説明する。図１６は、映像伝送システム２０の概略構成を示すブロック図である。本実施形態による映像伝送システム２０は、映像送信装置１００と映像受信装置４とを備えている。映像伝送システム２０は、例えば上記前提技術１及び２に係る映像伝送システム１と同様に、映像送信装置１００及び映像受信装置４との間でＭＩＰＩ ＣＳＩ－３規格又はＭＩＰＩ ＤＳＩ規格で信号を送受信するように構成されている。
次に、本開示の第２実施形態による送信装置、受信装置及び伝送システムについて図１３から図１５を参照しつつ図１９および図２０を用いて説明する。まず、本実施形態による送信装置、受信装置及び伝送システムの概略構成について図１９を用いて説明する。図１６は、映像伝送システム２０の概略構成を示すブロック図である。本実施形態による映像伝送システム２０は、映像送信装置１００と映像受信装置４とを備えている。映像伝送システム２０は、例えば上記前提技術１及び２に係る映像伝送システム１と同様に、映像送信装置１００及び映像受信装置４との間でＭＩＰＩ ＣＳＩ－３規格又はＭＩＰＩ ＤＳＩ規格で信号を送受信するように構成されている。
【0214】
映像伝送システム２０に備えられた映像送信装置１００は、上記第１及び２に係る前提技術における映像送信装置１００と同一の作用・機能を奏する構成であるため同一の符号を付して説明は省略する。
【0215】
映像伝送システム２０に備えられた映像受信装置４は、上記前提技術１及び２に係る映像受信装置２００と同等の機能を発揮するように構成されている。つまり、映像受信装置４は、映像送信装置１００から伝送された伝送データに対して、上記前提技術１及び２に係る映像受信装置２００と同様の処理を実行可能に構成されている。さらに、映像受信装置４は、映像送信装置１００から伝送されたＲＯＩ情報を用いてシェーディング補正処理を実行できるように構成されている。そこで、図１９では、映像受信装置４は、シェーディング補正処理に関連する構成を中心に図示されている。
【0216】
本実施形態による映像受信装置４は、受信部２１０及び信号処理部（受信装置における処理部の一例）４０を有している。映像受信装置４における受信部２１０は、所定の撮像画像から切り出された注目領域（ＲＯＩ：Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）の画像データをペイロードデータに含むとともに、所定数の注目領域に対応するＲＯＩ情報をエンベデッドデータに含む伝送信号（本例では伝送データ１４７Ａ）を受信する。前提技術１及び２における映像送信装置１００と同様に、本実施形態による伝送システム２０を構成する映像送信装置１００（図１８参照）は、撮像画像１１１における各注目領域（ＲＯＩ）の画像データをロングパケットのペイロードデータで送出するとともに、当該注目領域についてのＲＯＩ情報１２０Ｂをエンベデッドデータで送出する。これにより、映像送信装置１００から送出された伝送データ１４７Ａを受信した装置（本例では、映像受信装置４）において、伝送データ１４７Ａから、各注目領域ＲＯＩの画像データ（ＲＯＩ画像１１２）を容易に抽出することができる。
【0217】
受信部２１０は、受信した伝送データ１４７Ａに対して所定の処理を行うことにより、種々のデータ（２１４Ａ，２１５Ａ，２１５Ｂ）を生成し、信号処理部４０出力する回路である。本実施形態において受信部２１０は、映像送信装置１００との間の画像データフレームの通信が開始されたことを示すパケット（ＳＯＦ）を受信すると、ＳＯＦの受信を示す所定の信号を信号処理部４０に出力する。
【0218】
上記前提技術１及び２における映像受信装置２００と同様に、映像受信装置４においても、受信部２１０は、例えば、ヘッダ分離部２１１、ヘッダ解釈部２１２、ペイロード分離部２１３、ＥＢＤ解釈部２１４及びＲＯＩデータ分離部２１５を有している。このうち、ヘッダ分離部２１１、ヘッダ解釈部２１２は、映像受信装置２００と同様の構成であるため説明は省略する。
【0219】
ＥＢＤ解釈部２１４は、ペイロード分離部２１３から入力されたエンベデッドデータ２１３Ａに含まれるデータタイプから、伝送データ１４７Ａのペイロードデータに含まれる画像データがＲＯＩの画像データ（前提技術１及び２における注目領域の画像データ１１６の圧縮像データ１２０Ａ）であるか、又は、通常画像のデータ（圧縮像データ１３０Ａ）であるかを判別する。またＥＢＤ解釈部２１４は、データタイプの判別結果をＲＯＩデータ分離部２１５に出力する。また、ＥＢＤ解釈部２１４は、ＲＯＩ情報を含む（注目領域の画像データがペイロードデータに含まれることを示す）エンベデッドデータをＥＢＤデータ２１４Ａとして、信号処理部４０（具体的には、情報抽出部４０１)に出力する。
【0220】
ＲＯＩデータ分離部２１５は、ＥＢＤ解釈部２１４によるデータタイプの判別結果に基づいて、伝送データ１４７Ａのペイロードデータに含まれる画像データが注目領域の画像データ（画像データ１１６の圧縮像データ１２０Ａ）であると判定すると、ペイロードデータの各ラインをペイロードデータ２１５Ａとして、１ラインごと信号処理部４０（具体的にはＲＯＩデコード部４０２）に出力する。ペイロードデータ２１５Ａは、圧縮像データ１４７Ｂのうち１ライン分のピクセルデータであるＲＯＩ画素行データを含んでいる。ここで、ＲＯＩ画素行データとは、撮像画像（例えば撮像画像α）におけるＹ軸座標単位（画素行単位）の注目領域の画像データを示す。
【0221】
本実施形態では、例えば映像送信装置１００から送出された伝送データ１４７Ａに係る画像データフレームを構成するトランザクション単位でペイロードデータの各ラインが映像受信装置４に伝送される。受信部２１０のヘッダ解釈部２１２においてロングパケットのペイロードデータの各ラインのヘッダが検出されると、ペイロード分離部２１３においてペイロードデータの各ラインがパケット領域Ｒ２から分離され、ＲＯＩデータ分離部２１５において各ラインのペイロードヘッダＰＨ、ＲＯＩ画素行データおよびペイロードフッタＰＦを含むペイロードデータ２１５Ａが生成される。
【0222】
一方、ペイロードデータに含まれる画像データが通常画像データの圧縮像データ１３０Ａである場合、ＲＯＩデータ分離部２１５は、当該ペイロードデータをペイロードデータ２１５Ｂとして、第一情報処理部２３０ａ（具体的には通常画像デコード部２３６）に出力する。また、ＲＯＩデータ分離部２１５は、ＥＢＤ解釈部２１４から入力されたデータタイプの判別結果（画像データが通常画像データであることを示す判別結果）を、信号処理部４０（具体的には通常画像座標情報生成部４０４）に出力する。
【0223】
信号処理部４０は、上記前提技術１及び２における映像受信装置２００の情報処理部２２０と同等の機能を発揮するように構成されている。つまり、信号処理部４０は、受信部２１０から受信した種々のデータ（２１４Ａ，２１５Ａ）に基づいて、ＲＯＩ画像２２３Ａを生成したり、受信部２１０から受信したデータ（２１５Ｂ）に基づいて、通常画像２２４Ａを生成したりする回路である。
【0224】
信号処理部４０は、エンベデッドデータから抽出した注目領域（ＲＯＩ）に対応するＲＯＩ情報から抽出した注目領域の座標情報に基づいて、注目領域の画像データのシェーディング補正処理を実行する回路である。また、信号処理部４０は、通常画像のデータ（ペイロードデータ２１５Ｂ）についてもシェーディング補正処理を行う。
【0225】
信号処理部４０は、注目領域の画像データのシェーディング補正処理に係る構成として、情報抽出部４０１、ＲＯＩデコード部４０２、ＲＯＩ画像生成部４０３および補正処理部４１０を有している。まず、注目領域の画像データのシェーディング補正処理を行うこれらの構成について説明する。
【0226】
信号処理部４０が備える情報抽出部４０１は、ＥＢＤデータ２１４Ａに含まれるエンベデッドデータから、ＲＯＩ情報１２０Ｂを抽出する。ＲＯＩ情報１２０Ｂには、位置情報として撮像画像内における注目領域の相対座標の情報（座標情報）が含まれている。また、ＲＯＩ情報１２０Ｂには、サイズ情報として、注目領域ＲＯＩのＸ軸方向サイズおよびＹ軸方向サイズが含まれている。
【0227】
具体的には、情報抽出部４０１は、ＲＯＩ情報１２０Ｂの位置情報から注目領域の座標情報として少なくとも注目領域ＲＯＩの左上端部の座標を抽出する。本例において、撮像画像α内の注目領域ＲＯＩ０～ＲＯＩ２に関するＲＯＩ情報１２０Ｂには、注目領域ＲＯＩ０～ＲＯＩ２の３つの注目領域それぞれの位置情報（座標情報）及びサイズ情報が含まれている。このため、情報抽出部４０１は、座標情報として撮像画像αにおける３つの注目領域ＲＯＩ０～２それぞれの始点座標を抽出し、サイズ情報として注目領域ＲＯＩ０～２それぞれのＸ軸方向長さおよびＹ軸方向長さを抽出する。
【0228】
なお、ＲＯＩ情報１２０Ｂの位置情報は、注目領域ＲＯＩの左上端部の座標（始点座標）に限られず、注目領域の右下端部の座標（終点座標）を含むように構成されてもよい。本開示における位置情報は、注目領域が矩形状の場合、４つの角部のいずれかを示す座標であればよい。
【0229】
情報抽出部４０１は、抽出したＲＯＩ情報（座標情報及びサイズ情報）から、上記第１実施形態におけるＹ座標順データおよびＸ座標順データを生成して、補正処理部４１０（具体的には、ＲＯＩ画像座標情報生成部４１１）およびＲＯＩ画像生成部４０３に出力する。情報抽出部４０１は、ＲＯＩ情報１２０Ｂから複数の注目領域についての座標情報を抽出すると、抽出した各注目領域の座標情報を始点座標（注目領域の左上端部の画素座標）のＹ座標の値の昇順に並び替えてＹ座標順データを生成する。Ｙ座標順データには、始点座標のＹ座標とＹ軸方向サイズを示す画素数とから算出される終点Ｙ座標（注目領域の右下端部の画素座標）が含まれる。
【0230】
また、Ｘ座標順データには、始点座標のＸ座標とＸ軸方向サイズを示す画素数とから算出される終点Ｘ座標（注目領域の各画素行の右端部の画素座標）が含まれる。さらに、Ｘ座標順データにはＹ座標順データに含まれる始点座標のＹ座標および終点Ｙ座標が含まれてもよい。
【0231】
ＲＯＩデコード部４０２は、ＲＯＩデータ分離部２１５から入力されたペイロードデータ２１５Ａ内のＲＯＩ画素行データ（圧縮像データ１４７Ｂ）をデコードしてＲＯＩデコード画像データ２３２Ａを生成する。ＲＯＩデコード部４０２は、生成したＲＯＩデコード画像データ２３２ＡをＲＯＩ画像生成部４０３に出力する。
【0232】
ＲＯＩ画像生成部４０３は、Ｙ座標順データおよびＸ座標順データに基づいてペイロードデータ単位で注目領域の画像データを補正処理部４１０（具体的には、画像データ選択部４１４）に出力する。具体的には、ＲＯＩ画像生成部４０３は、Ｙ座標順データおよびＸ座標順データに基づいてペイロードデータ２１５Ａ内のＲＯＩ画素行データを注目領域ごとに分割して補正処理部４１０に出力する。
【0233】
（補正処理部）
本実施形態による映像受信装置４の信号処理部４０における補正処理部４１０は、上述の原理によるシェーディング補正処理を実行する。補正処理部４１０は、ＲＯＩ情報から抽出した注目領域の座標情報に基づいて、注目領域の画像データのシェーディング補正処理を実行する。補正処理部４１０は、注目領域の左上端部の座標（始点座標）に基づいて撮像画像内における注目領域の画像データの各画素の座標を生成し、生成した各画素の座標に基づいて注目領域の画像データの各画素について輝度の増幅を行う。これにより、注目領域の画像データについてシェーディング補正が施される。補正処理部４１０は、ＲＯＩ画像座標情報生成部４１１、座標情報選択部４１２、補正値テーブルＲＡＭ４１３、画像データ選択部４１４および補正部４１５を有している。補正値テーブルＲＡＭ４１３には、シェーディング補正処理に用いられるシェーディング補正値が保持されている。補正処理部４１０は、これらの構成によって、シェーディング補正処理に係る各処理を実行する。
本実施形態による映像受信装置４の信号処理部４０における補正処理部４１０は、上述の原理によるシェーディング補正処理を実行する。補正処理部４１０は、ＲＯＩ情報から抽出した注目領域の座標情報に基づいて、注目領域の画像データのシェーディング補正処理を実行する。補正処理部４１０は、注目領域の左上端部の座標（始点座標）に基づいて撮像画像内における注目領域の画像データの各画素の座標を生成し、生成した各画素の座標に基づいて注目領域の画像データの各画素について輝度の増幅を行う。これにより、注目領域の画像データについてシェーディング補正が施される。補正処理部４１０は、ＲＯＩ画像座標情報生成部４１１、座標情報選択部４１２、補正値テーブルＲＡＭ４１３、画像データ選択部４１４および補正部４１５を有している。補正値テーブルＲＡＭ４１３には、シェーディング補正処理に用いられるシェーディング補正値が保持されている。補正処理部４１０は、これらの構成によって、シェーディング補正処理に係る各処理を実行する。
【0234】
本実施形態による映像受信装置４の補正処理部４１０におけるＲＯＩ画像座標情報生成部４１１は、上記第１実施形態による映像送信装置３の補正回路３０１が有するＲＯＩ画像座標情報生成部３１１と同等の構成である。つまり、ＲＯＩ画像座標情報生成部４１１は、切り出された注目領域（ＲＯＩ）の画像データの画素ごとの相対座標（画素座標）を生成する。
【0235】
本実施形態においてＲＯＩ画像座標情報生成部４１１は、上記第１実施形態におけるＲＯＩ画像座標情報生成部３１１と同様に、カウンタを用いて注目領域の画像データの画素座標を生成する。本実施形態において、補正処理部４１０は、種々の計測処理に用いるカウンタ部を有している。本実施形態において補正処理部４１０は、カウンタ部として、水平カウンタＸｃｔおよび垂直カウンタＹｃｔを有している。
【0236】
水平カウンタＸｃｔは、注目領域の左上端部の座標（左上端部の画素座標）を起点として撮像画像内における注目領域のＸ座標を計測する。また、垂直カウンタＹｃｔは、注目領域の左上端部の座標（左上端部の画素座標）を起点として撮像画像内における注目領域のＹ座標を計測する。なお、本実施形態による映像受信装置４の補正処理部４１０における水平カウンタＸｃｔおよび垂直カウンタＹｃｔは、上記第１実施形態による映像送信装置３の補正回路３０１における水平カウンタＸｃｔおよび垂直カウンタＹｃｔと同等の構成であるため、同一の符号を付して、詳細な説明は省略する。ＲＯＩ画像座標情報生成部４１１は、水平カウンタＸｃｔおよび垂直カウンタＹｃｔを用いて注目領域の画像データの各画素の座標を生成する。ここで、ＲＯＩ画像座標情報生成部４１１が実行する画素座標生成処理は、上記第１実施形態における補正回路３０１のＲＯＩ画像座標情報生成部３１１が実行する画素座標生成処理（図１７参照）と同等の処理である。このため、詳細な説明は省略する。ＲＯＩ画像座標情報生成部４１１は、画素座標生成処理において、注目領域指定情報９０Ａに代えて、情報抽出部４０１から入力されたＸ座標順データおよびＹ座標順データを用いて、画素座標生成処理を実行する。
【0237】
つまり、ＲＯＩ画像座標情報生成部４１１は、座標情報として少なくとも注目領域の左上端部の座標（始点座標）を用いて、画素座標を生成する。より詳細には、ＲＯＩ画像座標情報生成部４１１は、注目領域の始点座標とサイズ情報とを用いて情報抽出部４０１が生成したＹ座標順データおよびＸ座標順データに基づいて、注目領域の画像データの画素座標を生成する。
【0238】
ＲＯＩ画像座標情報生成部４１１は、画素座標を生成する度に、生成した画素座標を座標情報選択部４１２に出力する。座標情報選択部４１２は、画素座標が入力されると、入力された画素座標が属する撮像画像内のブロック領域Ｂｒ（図１５参照）を特定する。座標情報選択部４１２は、特定したブロック領域Ｂｒに紐づく補正値テーブルｔ１のアドレス値を導出すると、補正値テーブルｔ１から導出したアドレス値に紐づくアドレス領域に保持されたシェーディング補正を取得して、補正部４１３に出力する。
【0239】
信号処理部４０の補正処理部４１０が備える補正部４１５は、座標情報選択部４１２が座標情報に基づいて補正値テーブルｔ１から取得したシェーディング補正値を用いて注目領域（ＲＯＩ）の画像データの輝度を増幅する。具体的には、補正処理部４１０において、ＲＯＩ画像座標情報生成部４１１が注目領域の画像データの各画素の座標（画素座標）を生成し、画素座標に対応するシェーディング補正値を座標情報選択部４１２が補正値テーブルｔ１から取得し、取得したシェーディング補正値を用いて補正部４１５が当該注目領域の画像データの各画素について感度の調整を行う。
【0240】
補正部４１５は、画像データ選択部４１４から入力される注目領域の画素単位の画像データに対して、座標情報選択部４１２から入力されるシェーディング補正値を乗算して輝度を増幅する。画像データ選択部４１４は、ＲＯＩ画像生成部４０３から入力された注目領域ごとの画像データを画素単位に分割して、補正部４１５に出力する。本実施形態による映像受信装置４は、所定のクロック信号に同期して装置内の各処理を行う。このため、当該クロック信号に基づいて処理を行うことで、各構成は互いに処理を連動（例えば、同期）させることができる。画像データ選択部４１４は、例えば上述のクロック信号に同期して、注目領域の画像データを画素単位で補正部４１５に出力する。また、座標情報選択部４１２は、例えば上述のクロック信号に同期して、シェーディング補正値を補正部４１５に出力する。
【0241】
このように、信号処理部４０の補正処理部４１０において補正部４１５は、画像データ選択部４１４から入力される注目領域の画素単位の画像データの輝度を増幅する。これにより、補正部４１５は注目領域の各画素の画像データの輝度を、撮像画像内の領域に応じたシェーディング補正値に基づいて増幅させることができる。このため、補正部４１５を備える映像受信装置４は、シェーディング補正処理によって、注目領域の画像データの輝度を撮像画像内の領域に応じた度合いで増幅して、輝度を均一化することができる。
【0242】
次に、信号処理部４０における通常画像のシェーディング補正処理に係る構成について説明する。信号処理部４０は、通常画像に係る処理を行う構成として、通常画像座標情報生成部４０４、通常画像デコード部４０５および通常画像生成部４０６を有している。
【0243】
通常画像デコード部４０５は、ＲＯＩデータ分離部２１５から入力されたペイロードデータ２１５Ｂをデコードし、通常画像４０５Ａを生成する。通常画像デコード部４０５は、通常画像４０５Ａを通常画像生成部４０６に出力する。また、通常画像座標情報生成部４０４は、ペイロードデータに含まれる画像データが通常画像データであること（通常画像デコード部４０５に通常画像のデータを含むペイロードデータ２１５Ｂ出力されたこと）を示す判別結果がＲＯＩデータ分離部２１５から入力されたことに基づいて、通常画像のデータについての画素単位の座標（画素座標）を生成して座標情報選択部４１２に出力する。通常画像座標情報生成部４０４は、例えば撮像画像α（図１３参照）の原点α＿ｏ（０，０）から順に撮像画像αの右下端部（終点）の画素の座標までの各画素座標を生成して、クロック信号と同期したタイミングで座標情報選択部４１２に出力する。
【0244】
座標情報選択部４１２は、通常画像座標情報生成部４０４から画素座標が入力されると、ＲＯＩ画像座標情報生成部４１１から画素座標が入力された場合と同様に、入力された画素座標が属する撮像画像内のブロック領域Ｂｒ（図１５参照）を特定し、特定したブロック領域Ｂｒに紐づくアドレス値を導出する。さらに、座標情報選択部４１２は導出したアドレス値に紐づくアドレス領域に保持されたシェーディング補正を取得して、補正部４１３に出力する。これにより、映像受信装置４では、通常画像のデータについても補正値テーブルｔ１に保持されたシェーディング補正に基づいて、シェーディング補正を行い、通常画像のデータの輝度を撮像画像内の領域に応じた度合いで増幅して、輝度を均一化することができる。
【0245】
なお、上記第１実施形態による映像送信装置３においても、映像受信装置４と同様に、通常画像のデータについて補正値テーブルｔ１に保持されたシェーディング補正に基づいて、シェーディング補正を行ってもよい。この場合、画像処理回路３００において通常画像座標情報生成部４０４および座標情報選択部４１２と同等の構成を設ければよい。
【0246】
補正部４１５は、シェーディング補正処理を施した画像データ（注目領域の画像データまたは通常画像の画像データ）を補正済み画像データ４１５Ａとして出力する。
【0247】
（受信装置におけるシェーディング補正処理方法）
次に、本実施形態による送信装置、受信装置及び伝送システムにおけるシェーディング補正処理方法について図１３から図１９を参照しつつ図２０を用いて説明する。図２０は、本実施形態によるシェーディング補正を実行可能な受信装置、送信装置及び伝送システムにおけるシェーディング補正処理方法の流れの一例を示すフローチャートである。
次に、本実施形態による送信装置、受信装置及び伝送システムにおけるシェーディング補正処理方法について図１３から図１９を参照しつつ図２０を用いて説明する。図２０は、本実施形態によるシェーディング補正を実行可能な受信装置、送信装置及び伝送システムにおけるシェーディング補正処理方法の流れの一例を示すフローチャートである。
【0248】
映像伝送システム２０が起動してフレーム開始トリガが入力されると、映像受信装置４に備えられた信号処理部４０（図中のＣａｍＣＰＵ）は、ステップＳ４０に処理を移す。
【0249】
（ステップＳ４０）
映像伝送システム１０が起動してフレーム開始トリガが入力されると、映像受信装置２００に備えられた信号処理部４０（図中のＣａｍＣＰＵ）は、映像送信装置１００の撮像部１１０（図２参照）の撮像画像から画像（注目領域）を切り出す切り出し位置を決定して、切り出し位置決定処理を終了する。具体的には、ＣａｍＣＰＵは、切り出し位置を決定すると、切り出しを指示する制御信号を送出する。制御信号は、ＭＩＰＩを用いたハードウェア（ＨＷ）による通信によって、映像受信装置４から映像送信装置１００に送信される。
映像伝送システム１０が起動してフレーム開始トリガが入力されると、映像受信装置２００に備えられた信号処理部４０（図中のＣａｍＣＰＵ）は、映像送信装置１００の撮像部１１０（図２参照）の撮像画像から画像（注目領域）を切り出す切り出し位置を決定して、切り出し位置決定処理を終了する。具体的には、ＣａｍＣＰＵは、切り出し位置を決定すると、切り出しを指示する制御信号を送出する。制御信号は、ＭＩＰＩを用いたハードウェア（ＨＷ）による通信によって、映像受信装置４から映像送信装置１００に送信される。
【0250】
（ステップＳ１１）
映像送信装置１００が備える画像処理部１２０（図中のセンサＣＰＵ）は、切り出し位置指定トリガを検出すると、撮像部１１０の撮像画像における切り出し位置とサイズを取得し、ステップＳ１２に処理を移す。具体的には、ＲＯＩ切り出し部１２１は、制御信号から位置情報（注目領域の座標情報）およびサイズ情報（Ｘ軸方向サイズおよびＹ軸方向サイズ）を取得する。
映像送信装置１００が備える画像処理部１２０（図中のセンサＣＰＵ）は、切り出し位置指定トリガを検出すると、撮像部１１０の撮像画像における切り出し位置とサイズを取得し、ステップＳ１２に処理を移す。具体的には、ＲＯＩ切り出し部１２１は、制御信号から位置情報（注目領域の座標情報）およびサイズ情報（Ｘ軸方向サイズおよびＹ軸方向サイズ）を取得する。
【0251】
（ステップＳ１２）
画像処理部１２０は、ＲＯＩ切り出し部１２１において、制御信号に基づいて、撮像画像内における注目領域を切り出す切り出し位置を決定し、ステップＳ１３に処理を移す。ＲＯＩ切り出し部１２１は、切り出し位置を決定すると、撮像画像から注目領域の画像データを切り出し、エンコード部１２５に出力する。
画像処理部１２０は、ＲＯＩ切り出し部１２１において、制御信号に基づいて、撮像画像内における注目領域を切り出す切り出し位置を決定し、ステップＳ１３に処理を移す。ＲＯＩ切り出し部１２１は、切り出し位置を決定すると、撮像画像から注目領域の画像データを切り出し、エンコード部１２５に出力する。
【0252】
（ステップＳ１３）
画像処理部１２０は、画像処理制御部１２６において注目領域の位置情報（座標情報）およびサイズ情報（Ｘ軸方向サイズおよびＹ軸方向サイズ）を設定したＲＯＩ情報を生成して送信部１４０（具体的には、ＥＢＤバッファ１４４）に出力する。また、画像処理部１２０は、エンコード部１２５において、注目領域の画像データを圧縮した圧縮像データ１２０Ａを送信部１４０（具体的には、ＲＯＩデータバッファ１４５）に出力する。これにより、送信部１４０の合成部１４７は、伝送データ１４７ＡとしてＲＯＩ情報を含むエンベデッドデータおよび注目領域の画像データを含むペイロードデータを生成する。生成された伝送データ１４７Ａは、ＭＩＰＩを用いたハードウェア（ＨＷ）による通信によって、映像受信装置２００に伝送される。
画像処理部１２０は、画像処理制御部１２６において注目領域の位置情報（座標情報）およびサイズ情報（Ｘ軸方向サイズおよびＹ軸方向サイズ）を設定したＲＯＩ情報を生成して送信部１４０（具体的には、ＥＢＤバッファ１４４）に出力する。また、画像処理部１２０は、エンコード部１２５において、注目領域の画像データを圧縮した圧縮像データ１２０Ａを送信部１４０（具体的には、ＲＯＩデータバッファ１４５）に出力する。これにより、送信部１４０の合成部１４７は、伝送データ１４７ＡとしてＲＯＩ情報を含むエンベデッドデータおよび注目領域の画像データを含むペイロードデータを生成する。生成された伝送データ１４７Ａは、ＭＩＰＩを用いたハードウェア（ＨＷ）による通信によって、映像受信装置２００に伝送される。
【0253】
映像受信装置４は信号処理部４０において、ＥＢＤ解釈部２１４から情報抽出部４０１にエンベデッドデータが入力処理されたタイミングをトリガとして、ステップＳ６１の処理を開始する。
【0254】
（ステップＳ４１）
映像受信装置４は、信号処理部４０の４０１において、ＥＢＤデータ２１４Ａに含まれるエンベデッドデータから、ＲＯＩ情報１２０Ｂを抽出し、さらにＲＯＩ情報１２０Ｂから注目領域の位置情報（座標情報）およびサイズ情報（Ｘ軸方向サイズおよびＹ軸方向サイズ）を抽出してステップＳ４２に処理を移す。情報抽出部４０１は、抽出したＲＯＩ情報（座標情報及びサイズ情報）からＹ座標順データおよびＸ座標順データを生成して補正処理部４１０に出力する。
映像受信装置４は、信号処理部４０の４０１において、ＥＢＤデータ２１４Ａに含まれるエンベデッドデータから、ＲＯＩ情報１２０Ｂを抽出し、さらにＲＯＩ情報１２０Ｂから注目領域の位置情報（座標情報）およびサイズ情報（Ｘ軸方向サイズおよびＹ軸方向サイズ）を抽出してステップＳ４２に処理を移す。情報抽出部４０１は、抽出したＲＯＩ情報（座標情報及びサイズ情報）からＹ座標順データおよびＸ座標順データを生成して補正処理部４１０に出力する。
【0255】
（ステップＳ４２）
映像受信装置４は、補正処理部４１０のＲＯＩ画像座標情報生成部４１１において、注目領域の画像データの画素座標を生成して、ステップＳ４３に処理を移す座標情報選択部４１２は、ＲＯＩ画像座標情報生成部４１１が生成した画素座標に基づいて、注目領域の各画素の画像データが属する撮像画像内のブロック領域Ｂｒ（図１５参照）を特定する。座標情報選択部４１２は、ブロック領域Ｂｒを特定すると、ブロック領域Ｂｒに対応する補正値テーブルｔ１のアドレス値を導出する。座標情報選択部４１２は、当該アドレス値に紐付く補正値テーブルｔ１のアドレス領域Ａｓからシェーディング補正値を取得して、補正部４１５に出力する。
映像受信装置４は、補正処理部４１０のＲＯＩ画像座標情報生成部４１１において、注目領域の画像データの画素座標を生成して、ステップＳ４３に処理を移す座標情報選択部４１２は、ＲＯＩ画像座標情報生成部４１１が生成した画素座標に基づいて、注目領域の各画素の画像データが属する撮像画像内のブロック領域Ｂｒ（図１５参照）を特定する。座標情報選択部４１２は、ブロック領域Ｂｒを特定すると、ブロック領域Ｂｒに対応する補正値テーブルｔ１のアドレス値を導出する。座標情報選択部４１２は、当該アドレス値に紐付く補正値テーブルｔ１のアドレス領域Ａｓからシェーディング補正値を取得して、補正部４１５に出力する。
【0256】
（ステップＳ４３）
映像受信装置４は、補正処理部４１０の補正部４１５において、注目領域の画像データに対してシェーディング補正を行い、ステップＳ４４に処理を移す。具体的には、補正部４１５は、座標情報選択部４１２から入力されたシェーディング補正値を用いて画像データ選択部４１４から入力された注目領域の画素単位の画像データの輝度を増幅する。
映像受信装置４は、補正処理部４１０の補正部４１５において、注目領域の画像データに対してシェーディング補正を行い、ステップＳ４４に処理を移す。具体的には、補正部４１５は、座標情報選択部４１２から入力されたシェーディング補正値を用いて画像データ選択部４１４から入力された注目領域の画素単位の画像データの輝度を増幅する。
【0257】
（ステップＳ４４）
映像受信装置４は、補正処理部４１０において、補正部４１５が撮像画像内の全ての注目領域の画像データについてシェーディング補正を完了しているか否かを判定する。具体的には、補正処理部４１０は、ＲＯＩ画像座標情報生成部４１１において、全ての注目領域の画素座標の生成が終了しているか否かによって、全ての注目領域についてのシェーディング補正が完了しているか否かを判定する。補正処理部４１０は、撮像画像内の全ての注目領域の画像データの画素座標が生成されている場合（上記ステップＳ１１１のＮＯ）に、撮像画像内の全ての注目領域の画像データについてシェーディング補正が完了していると判定してシェーディング補正処理を終了する。一方、補正処理部４１０は、撮像画像内の全ての注目領域の画像データの画素座標が生成されていない場合（上記ステップＳ１１１のＹＥＳ）に、撮像画像内の全ての注目領域の画像データについてシェーディング補正が完了していないと判定して、ステップＳ４２に処理を戻す。
映像受信装置４は、補正処理部４１０において、補正部４１５が撮像画像内の全ての注目領域の画像データについてシェーディング補正を完了しているか否かを判定する。具体的には、補正処理部４１０は、ＲＯＩ画像座標情報生成部４１１において、全ての注目領域の画素座標の生成が終了しているか否かによって、全ての注目領域についてのシェーディング補正が完了しているか否かを判定する。補正処理部４１０は、撮像画像内の全ての注目領域の画像データの画素座標が生成されている場合（上記ステップＳ１１１のＮＯ）に、撮像画像内の全ての注目領域の画像データについてシェーディング補正が完了していると判定してシェーディング補正処理を終了する。一方、補正処理部４１０は、撮像画像内の全ての注目領域の画像データの画素座標が生成されていない場合（上記ステップＳ１１１のＹＥＳ）に、撮像画像内の全ての注目領域の画像データについてシェーディング補正が完了していないと判定して、ステップＳ４２に処理を戻す。
【0258】
上述のようにして、本実施形態による映像受信装置４においシェーディング補正処理が実行されると、シェーディング補正を施された注目領域の画像データ（補正済み画像データ４１５Ａ）が補正部４１５から出力される。これにより、映像受信装置４は、後段の処理（例えば、所定の表示装置（不図示）への注目領域の画像データの表示等）においてシェーディング補正を施された注目領域の画像データを用いることができる。
【0259】
以上、本実施形態において映像受信装置４においてシェーディング補正処理を実行する伝送システム２０について説明した。本実施形態において伝送システム２０が備える映像受信装置４は、所定の撮像画像から切り出された注目領域（ＲＯＩ：Ｒｅｇｉｏｎ Ｏｆ
Ｉｎｔｅｒｅｓｔ）の画像データをペイロードデータに含むとともに、注目領域に対応するＲＯＩ情報をエンベデッドデータに含む伝送信号を受信する受信部２１０と、ＲＯＩ情報から抽出した注目領域の座標情報に基づいて、注目領域の画像データのシェーディング補正処理を実行する信号処理部４０と、を備える。これにより、伝送システム２０における映像受信装置４は、注目領域の画像データに対してシェーディング補正処理を実行することができる。
Ｉｎｔｅｒｅｓｔ）の画像データをペイロードデータに含むとともに、注目領域に対応するＲＯＩ情報をエンベデッドデータに含む伝送信号を受信する受信部２１０と、ＲＯＩ情報から抽出した注目領域の座標情報に基づいて、注目領域の画像データのシェーディング補正処理を実行する信号処理部４０と、を備える。これにより、伝送システム２０における映像受信装置４は、注目領域の画像データに対してシェーディング補正処理を実行することができる。
【0260】
本実施形態による映像受信装置４の信号処理部４０はシェーディング補正処理を実行可能なハードウェアとして構成されている。また本実施形態による映像受信装置４の受信部２１０は、エンベデッドデータおよびペイロードデータを含む伝送データ１４７Ａを受信可能なハードウェアとして構成されている。これにより、映像受信装置４は、注目領域の画像データのシェーディング補正処理および送信処理を高速化し、伝送システム２０における単位時間あたりの画像データフレームの処理数を向上させる、すなわち高フレームレートでの処理を実現することができる。
【0261】
以上、前提技術、実施形態及びその変形例を挙げて本開示を説明したが、本開示は上記実施形態等に限定されるものではなく、種々変形が可能である。なお、本明細書中に記載された効果は、あくまで例示である。本開示の効果は、本明細書中に記載された効果に限定されるものではない。本開示が、本明細書中に記載された効果以外の効果を持っていてもよい。
【0262】
また、例えば、本開示は以下のような構成を取ることができる。
（１）
撮像画像におけるＲＯＩ（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）の座標情報に基づいて、前記ＲＯＩの画像データのシェーディング補正処理を実行する処理部と
前記シェーディング補正処理が行われた前記ＲＯＩの画像データをペイロードデータで送出するとともに、ＲＯＩ情報をエンベデッドデータで送出する送信部と、
を備える送信装置。
（２）
前記処理部は、前記ＲＯＩの前記座標情報として少なくとも前記ＲＯＩの左上端部の座標を用いる
上記（１）に記載の送信装置。
（３）
前記処理部は、
前記ＲＯＩの左上端部の座標に基づいて前記撮像画像内における前記ＲＯＩの画像データの各画素の座標を生成し、生成した各画素の座標に基づいて前記ＲＯＩの画像データの各画素について輝度の増幅を行う
上記（２）に記載の送信装置。
（４）
前記ＲＯＩの左上端部の座標を起点として前記撮像画像内における前記ＲＯＩのＸ座標を計測する第一カウンタと、
前記ＲＯＩの左上端部の座標を起点として前記撮像画像内における前記ＲＯＩのＹ座標を計測する第二カウンタと、を備え
前記処理部は、
前記第一カウンタおよび前記第二カウンタを用いて前記ＲＯＩの画像データの各画素の座標を生成する
上記（３）に記載の送信装置。
（５）
前記第一カウンタおよび前記第二カウンタは、カウンタ値が不連続な値に更新可能であり、
前記処理部は、前記第一カウンタおよび前記第二カウンタを用いて前記撮像画像に含まれる複数の前記ＲＯＩの画像データの各画素の座標を生成する
上記（４）に記載の送信装置。
（６）
前記シェーディング補正処理に用いられる補正値が保持された補正値テーブルを備え、
前記処理部は、前記座標情報に基づいて前記補正値テーブルから取得した前記補正値を用いて前記ＲＯＩの画像データの輝度を増幅する。
上記（１）から（５）のいずれか１項に記載の送信装置。
（７）
前記処理部は、前記ＲＯＩの画像データの各画素の座標に対応する前記補正値を前記補正値テーブルから取得して、前記ＲＯＩの画像データの各画素について感度の調整を行う
上記（６）に記載の送信装置。
（８）
撮像画像におけるＲＯＩ（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）の座標情報に基づいて、前記ＲＯＩの画像データのシェーディング補正処理を実行する処理部、及び前記シェーディング補正処理が行われた前記ＲＯＩの画像データをペイロードデータで送出するとともに、ＲＯＩ情報をエンベデッドデータで送出する送信部を有する送信装置と、
前記ＲＯＩに含まれる画像の画像データをペイロードデータに含むとともに、ＲＯＩ情報をエンベデッドデータに含む伝送信号を受信する受信部を有する受信装置と、
を備える伝送システム。
（９）
前記送信装置は、前記処理部において前記ＲＯＩの左上端部の座標に基づいて前記撮像画像内における前記ＲＯＩの画像データの各画素の座標を前記座標情報として生成し、生成した前記ＲＯＩの画像データの各画素について輝度の増幅を行う
上記（８）に記載の伝送システム。
（１０）
前記送信装置は、前記シェーディング補正処理に用いられる補正値が保持された補正値テーブルを有し、前記座標情報に基づいて前記補正値テーブルから取得した前記補正値を用いて前記ＲＯＩの画像データの輝度を増幅する
上記（８）または（９）に記載の伝送システム。
（１１）
所定の撮像画像から切り出されたＲＯＩ（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）の画像データをペイロードデータに含むとともに、前記ＲＯＩに対応するＲＯＩ情報をエンベデッドデータに含む伝送信号を受信する受信部と、
前記ＲＯＩ情報から抽出した前記ＲＯＩの座標情報に基づいて、前記ＲＯＩの画像データのシェーディング補正処理を実行する処理部と、
を備える受信装置。
（１２）
前記処理部は、前記ＲＯＩの前記座標情報として少なくとも前記ＲＯＩの左上端部の座標を前記ＲＯＩ情報から抽出する
上記（１１）に記載の受信装置。
（１３）
前記処理部は、前記ＲＯＩの左上端部の座標に基づいて前記撮像画像内における前記ＲＯＩの画像データの各画素の座標を生成し、生成した各画素の座標に基づいて前記ＲＯＩの画像データの各画素について輝度の増幅を行う
上記（１２）に記載の受信装置。
（１４）
前記ＲＯＩの左上端部の座標を起点として前記撮像画像内における前記ＲＯＩのＸ座標を計測する第一カウンタと、
前記ＲＯＩの左上端部の座標を起点として前記撮像画像内における前記ＲＯＩのＹ座標を計測する第二カウンタと、を備え
前記処理部は、
前記第一カウンタおよび前記第二カウンタを用いて前記ＲＯＩの画像データの各画素の座標を生成する
上記（１３）に記載の受信装置。
（１５）
前記第一カウンタおよび前記第二カウンタは、カウンタ値が不連続な値に更新可能であり、
前記処理部は、前記第一カウンタおよび前記第二カウンタを用いて前記撮像画像に含まれる複数の前記ＲＯＩの画像データの各画素の座標を生成する
上記（１４）に記載の受信装置。
（１６）
前記シェーディング補正処理に用いられる補正値が保持された補正値テーブルを備え、
前記処理部は、前記座標情報に基づいて前記補正値テーブルから取得した前記補正値を用いて前記ＲＯＩの画像データの輝度を増幅する。
上記（１１）から（１５）のいずれか１項に記載の受信装置。
（１７）
前記処理部は、前記ＲＯＩの画像データの各画素の座標に対応する前記補正値を前記補正値テーブルから取得して、前記ＲＯＩの画像データの各画素について感度の調整を行う
上記（１６）に記載の受信装置。
（１８）
ＲＯＩ（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）の画像データをペイロードデータで送出するとともに、ＲＯＩ情報をエンベデッドデータで送出する送信装置と、
所定の撮像画像から切り出されたＲＯＩ（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）の画像データをペイロードデータに含むとともに、前記ＲＯＩに対応するＲＯＩ情報をエンベデッドデータに含む伝送信号を受信する受信部、及び前記ＲＯＩ情報から抽出した前記ＲＯＩの座標情報に基づいて、前記ＲＯＩの画像データのシェーディング補正処理を実行する処理部を有する受信装置と、
を備える伝送システム。
（１９）
前記受信装置は、前記処理部において、前記ＲＯＩの前記座標情報として少なくとも前記ＲＯＩの左上端部の座標を前記ＲＯＩ情報から抽出し、抽出した前記左上端部の座標に基づいて前記撮像画像内における前記ＲＯＩの画像データの各画素の座標を前記座標情報として生成し、生成した前記ＲＯＩの画像データの各画素について輝度の増幅を行う
上記（１８）に記載の伝送システム。
（２０）
前記受信装置は、
前記シェーディング補正処理に用いられる補正値が保持された補正値テーブルを備え、前記処理部において、前記座標情報に基づいて前記補正値テーブルから取得した前記補正値を用いて前記ＲＯＩの画像データの輝度を増幅する
上記（１８）または（１９）に記載の伝送システム。
（１）
撮像画像におけるＲＯＩ（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）の座標情報に基づいて、前記ＲＯＩの画像データのシェーディング補正処理を実行する処理部と
前記シェーディング補正処理が行われた前記ＲＯＩの画像データをペイロードデータで送出するとともに、ＲＯＩ情報をエンベデッドデータで送出する送信部と、
を備える送信装置。
（２）
前記処理部は、前記ＲＯＩの前記座標情報として少なくとも前記ＲＯＩの左上端部の座標を用いる
上記（１）に記載の送信装置。
（３）
前記処理部は、
前記ＲＯＩの左上端部の座標に基づいて前記撮像画像内における前記ＲＯＩの画像データの各画素の座標を生成し、生成した各画素の座標に基づいて前記ＲＯＩの画像データの各画素について輝度の増幅を行う
上記（２）に記載の送信装置。
（４）
前記ＲＯＩの左上端部の座標を起点として前記撮像画像内における前記ＲＯＩのＸ座標を計測する第一カウンタと、
前記ＲＯＩの左上端部の座標を起点として前記撮像画像内における前記ＲＯＩのＹ座標を計測する第二カウンタと、を備え
前記処理部は、
前記第一カウンタおよび前記第二カウンタを用いて前記ＲＯＩの画像データの各画素の座標を生成する
上記（３）に記載の送信装置。
（５）
前記第一カウンタおよび前記第二カウンタは、カウンタ値が不連続な値に更新可能であり、
前記処理部は、前記第一カウンタおよび前記第二カウンタを用いて前記撮像画像に含まれる複数の前記ＲＯＩの画像データの各画素の座標を生成する
上記（４）に記載の送信装置。
（６）
前記シェーディング補正処理に用いられる補正値が保持された補正値テーブルを備え、
前記処理部は、前記座標情報に基づいて前記補正値テーブルから取得した前記補正値を用いて前記ＲＯＩの画像データの輝度を増幅する。
上記（１）から（５）のいずれか１項に記載の送信装置。
（７）
前記処理部は、前記ＲＯＩの画像データの各画素の座標に対応する前記補正値を前記補正値テーブルから取得して、前記ＲＯＩの画像データの各画素について感度の調整を行う
上記（６）に記載の送信装置。
（８）
撮像画像におけるＲＯＩ（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）の座標情報に基づいて、前記ＲＯＩの画像データのシェーディング補正処理を実行する処理部、及び前記シェーディング補正処理が行われた前記ＲＯＩの画像データをペイロードデータで送出するとともに、ＲＯＩ情報をエンベデッドデータで送出する送信部を有する送信装置と、
前記ＲＯＩに含まれる画像の画像データをペイロードデータに含むとともに、ＲＯＩ情報をエンベデッドデータに含む伝送信号を受信する受信部を有する受信装置と、
を備える伝送システム。
（９）
前記送信装置は、前記処理部において前記ＲＯＩの左上端部の座標に基づいて前記撮像画像内における前記ＲＯＩの画像データの各画素の座標を前記座標情報として生成し、生成した前記ＲＯＩの画像データの各画素について輝度の増幅を行う
上記（８）に記載の伝送システム。
（１０）
前記送信装置は、前記シェーディング補正処理に用いられる補正値が保持された補正値テーブルを有し、前記座標情報に基づいて前記補正値テーブルから取得した前記補正値を用いて前記ＲＯＩの画像データの輝度を増幅する
上記（８）または（９）に記載の伝送システム。
（１１）
所定の撮像画像から切り出されたＲＯＩ（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）の画像データをペイロードデータに含むとともに、前記ＲＯＩに対応するＲＯＩ情報をエンベデッドデータに含む伝送信号を受信する受信部と、
前記ＲＯＩ情報から抽出した前記ＲＯＩの座標情報に基づいて、前記ＲＯＩの画像データのシェーディング補正処理を実行する処理部と、
を備える受信装置。
（１２）
前記処理部は、前記ＲＯＩの前記座標情報として少なくとも前記ＲＯＩの左上端部の座標を前記ＲＯＩ情報から抽出する
上記（１１）に記載の受信装置。
（１３）
前記処理部は、前記ＲＯＩの左上端部の座標に基づいて前記撮像画像内における前記ＲＯＩの画像データの各画素の座標を生成し、生成した各画素の座標に基づいて前記ＲＯＩの画像データの各画素について輝度の増幅を行う
上記（１２）に記載の受信装置。
（１４）
前記ＲＯＩの左上端部の座標を起点として前記撮像画像内における前記ＲＯＩのＸ座標を計測する第一カウンタと、
前記ＲＯＩの左上端部の座標を起点として前記撮像画像内における前記ＲＯＩのＹ座標を計測する第二カウンタと、を備え
前記処理部は、
前記第一カウンタおよび前記第二カウンタを用いて前記ＲＯＩの画像データの各画素の座標を生成する
上記（１３）に記載の受信装置。
（１５）
前記第一カウンタおよび前記第二カウンタは、カウンタ値が不連続な値に更新可能であり、
前記処理部は、前記第一カウンタおよび前記第二カウンタを用いて前記撮像画像に含まれる複数の前記ＲＯＩの画像データの各画素の座標を生成する
上記（１４）に記載の受信装置。
（１６）
前記シェーディング補正処理に用いられる補正値が保持された補正値テーブルを備え、
前記処理部は、前記座標情報に基づいて前記補正値テーブルから取得した前記補正値を用いて前記ＲＯＩの画像データの輝度を増幅する。
上記（１１）から（１５）のいずれか１項に記載の受信装置。
（１７）
前記処理部は、前記ＲＯＩの画像データの各画素の座標に対応する前記補正値を前記補正値テーブルから取得して、前記ＲＯＩの画像データの各画素について感度の調整を行う
上記（１６）に記載の受信装置。
（１８）
ＲＯＩ（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）の画像データをペイロードデータで送出するとともに、ＲＯＩ情報をエンベデッドデータで送出する送信装置と、
所定の撮像画像から切り出されたＲＯＩ（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）の画像データをペイロードデータに含むとともに、前記ＲＯＩに対応するＲＯＩ情報をエンベデッドデータに含む伝送信号を受信する受信部、及び前記ＲＯＩ情報から抽出した前記ＲＯＩの座標情報に基づいて、前記ＲＯＩの画像データのシェーディング補正処理を実行する処理部を有する受信装置と、
を備える伝送システム。
（１９）
前記受信装置は、前記処理部において、前記ＲＯＩの前記座標情報として少なくとも前記ＲＯＩの左上端部の座標を前記ＲＯＩ情報から抽出し、抽出した前記左上端部の座標に基づいて前記撮像画像内における前記ＲＯＩの画像データの各画素の座標を前記座標情報として生成し、生成した前記ＲＯＩの画像データの各画素について輝度の増幅を行う
上記（１８）に記載の伝送システム。
（２０）
前記受信装置は、
前記シェーディング補正処理に用いられる補正値が保持された補正値テーブルを備え、前記処理部において、前記座標情報に基づいて前記補正値テーブルから取得した前記補正値を用いて前記ＲＯＩの画像データの輝度を増幅する
上記（１８）または（１９）に記載の伝送システム。
【符号の説明】
【0263】
１，１０，２０ 映像伝送システム
３，１００ 映像送信装置
４，２００ 映像受信装置
１１０ 撮像部
４２ 画像加工部
１００Ａ ＣＳＩトランスミッタ
１００Ｂ ＣＣＩスレーブ
１１１ 撮像画像
１１２，１１２ａ１，１１２ａ２，１１２ａ３，１１２ａ４，１１２ｂ１，１１２ｂ４，１２３ａ４，２２３Ａ ＲＯＩ画像
１１２ｂ 圧縮像データ
１１３，１１４ 位置情報
１１５ 優先度
１１６，１１６ａ１，１１６ａ２ 伝送画像
１１８ 画像
１２０，１３０ 画像処理部
１２０Ａ，１２０Ａ１，１２０Ａ２，１３０Ａ，１４７Ｂ 圧縮像データ
１２０Ｂ ＲＯＩ情報
１２０Ｃ フレーム情報
１２１ ＲＯＩ切り出し部
１２２ ＲＯＩ解析部
１２３ 検出部
１２４ 優先度設定部
１２５，１３１ エンコード部
１２６ 画像処理制御部
１４０ 送信部
１４１ ＬＩＮＫ制御部
１４２ ＥＣＣ生成部
１４３ ＰＨ生成部
１４５ ＲＯＩデータバッファ
１４４ ＥＢＤバッファ
１４６ 通常画像データバッファ
１４７ 合成部
１４７Ａ 伝送データ
２００Ａ ＣＳＩレシーバ
２００Ｂ ＣＣＩマスター
２１０ 受信部２１１ ヘッダ分離部
２１２ ヘッダ解釈部
２１３ ペイロード分離部
２１４ ＥＢＤ解釈部
２１４Ａ ＥＢＤデータ
２１５ ＲＯＩデータ分離部
２１５Ａ，２１５Ｂ ペイロードデータ
２２０ 情報処理部
２２１ 情報抽出部
２２１Ａ 抽出情報
２２２ ＲＯＩデコード部
２２２Ａ 画像データ
２２３ ＲＯＩ画像生成部
２２４ 通常画像デコード部
２２４Ａ 通常画像
Ｃｂ 色差成分
ＣＣＩ カメラ制御インタフェース
ＣＬ クロックレーン
３，１００ 映像送信装置
４，２００ 映像受信装置
１１０ 撮像部
４２ 画像加工部
１００Ａ ＣＳＩトランスミッタ
１００Ｂ ＣＣＩスレーブ
１１１ 撮像画像
１１２，１１２ａ１，１１２ａ２，１１２ａ３，１１２ａ４，１１２ｂ１，１１２ｂ４，１２３ａ４，２２３Ａ ＲＯＩ画像
１１２ｂ 圧縮像データ
１１３，１１４ 位置情報
１１５ 優先度
１１６，１１６ａ１，１１６ａ２ 伝送画像
１１８ 画像
１２０，１３０ 画像処理部
１２０Ａ，１２０Ａ１，１２０Ａ２，１３０Ａ，１４７Ｂ 圧縮像データ
１２０Ｂ ＲＯＩ情報
１２０Ｃ フレーム情報
１２１ ＲＯＩ切り出し部
１２２ ＲＯＩ解析部
１２３ 検出部
１２４ 優先度設定部
１２５，１３１ エンコード部
１２６ 画像処理制御部
１４０ 送信部
１４１ ＬＩＮＫ制御部
１４２ ＥＣＣ生成部
１４３ ＰＨ生成部
１４５ ＲＯＩデータバッファ
１４４ ＥＢＤバッファ
１４６ 通常画像データバッファ
１４７ 合成部
１４７Ａ 伝送データ
２００Ａ ＣＳＩレシーバ
２００Ｂ ＣＣＩマスター
２１０ 受信部２１１ ヘッダ分離部
２１２ ヘッダ解釈部
２１３ ペイロード分離部
２１４ ＥＢＤ解釈部
２１４Ａ ＥＢＤデータ
２１５ ＲＯＩデータ分離部
２１５Ａ，２１５Ｂ ペイロードデータ
２２０ 情報処理部
２２１ 情報抽出部
２２１Ａ 抽出情報
２２２ ＲＯＩデコード部
２２２Ａ 画像データ
２２３ ＲＯＩ画像生成部
２２４ 通常画像デコード部
２２４Ａ 通常画像
Ｃｂ 色差成分
ＣＣＩ カメラ制御インタフェース
ＣＬ クロックレーン
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
【図20】