特許 7344188 画像処理装置、及び画像処理システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-09-05

(45)【発行日】2023-09-13

(54)【発明の名称】画像処理装置、及び画像処理システム

(51)【国際特許分類】

   H04N 23/60 20230101AFI20230906BHJP

【ＦＩ】

H04N23/60 500

【請求項の数】 9

(21)【出願番号】P 2020157770

(22)【出願日】2020-09-18

(65)【公開番号】P2022051343

(43)【公開日】2022-03-31

【審査請求日】2022-07-01

(73)【特許権者】

【識別番号】000003078

【氏名又は名称】株式会社東芝

(73)【特許権者】

【識別番号】317011920

【氏名又は名称】東芝デバイス＆ストレージ株式会社

(74)【代理人】

【識別番号】100091487

【弁理士】

【氏名又は名称】中村 行孝

(74)【代理人】

【識別番号】100105153

【弁理士】

【氏名又は名称】朝倉 悟

(74)【代理人】

【識別番号】100107582

【弁理士】

【氏名又は名称】関根 毅

(74)【代理人】

【識別番号】100118843

【弁理士】

【氏名又は名称】赤岡 明

(74)【代理人】

【識別番号】100125151

【弁理士】

【氏名又は名称】新畠 弘之

(72)【発明者】

【氏名】森谷 章

【審査官】吉川 康男

(56)【参考文献】

【文献】特開２００７－１２９５７３（ＪＰ，Ａ）

【文献】国際公開第２０２０／１７０７２９（ＷＯ，Ａ１）

【文献】特開平０８－１６３３０２（ＪＰ，Ａ）

【文献】米国特許第０７７８７０２６（ＵＳ，Ｂ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ２３／６０

(57)【特許請求の範囲】

【請求項1】

水平周期に関連付けられた第１ライン信号を順に取得し、処理する画像処理装置であって、
前記第１ライン信号の中の画像データであるラインデータを前記水平周期よりも短い第2期間毎に順に記憶し、画像処理装置の処理能力に基づくタイミング制御信号に応じて、前記ラインデータを含み且つ対応する前記第2期間よりも短い時間範囲の第２ライン信号を出力する画像入力バッファを有する画像入力制御部と、
前記第２ライン信号中の前記ラインデータを順に記憶する複数の画像バッファと、前記複数の画像バッファに記憶される前記ラインデータに対し、それぞれ異なるパラメータの処理を順に施すことが可能な第１画像処理回路と、を有する第１画像処理部と、
を備える、画像処理装置。

【請求項2】

前記画像入力制御部は、繰り返し回数が設定されるカウンタを更に有し、
前記画像入力バッファから、１つのラインデータに対応する同じアドレス範囲のデータが前記繰り返し回数に基づき、繰り返し読みだされ、前記複数の画像バッファのそれぞれに供給される、請求項１に記載の画像処理装置。

【請求項3】

前記画像入力制御部は、少なくとも前記繰り返し回数に基づき、繰り返し読みだされる前記ラインデータ毎に固有の識別番号を付与するＩＤ生成回路を更に有する、請求項２に記載の画像処理装置。

【請求項4】

前記画像入力バッファから読みだされた前記ラインデータのそれぞれには異なる処理パラメータが関連付けらており、
前記第１画像処理回路は、前記関連付けられた異なる処理パラメータを用いて、前記ラインデータのそれぞれを処理する、請求項１に記載の画像処理装置。

【請求項5】

前記第１ライン信号のそれぞれは、異なる画像データに基づき生成され、
前記画像入力バッファには、異なる画像データから生成された複数のラインデータが任意の順に記憶され、
前記画像入力制御部は、前記任意の順に記憶されたラインデータごとのアドレス範囲を、前記画像データの固有番号である画像ＩＤに対応させて記憶するラインデータ画像ＩＤ記憶部を更に、有し、
前記画像入力バッファは、前記ラインデータ画像ＩＤ記憶部に記憶されるラインデータごとのアドレス範囲から順に、前記ラインデータを読みだし、前記複数の画像バッファのそれぞれに記憶させる、請求項２に記載の画像処理装置。

【請求項6】

前記画像入力制御部は、前記ラインデータに対応する水平同期信号、及び前記ラインデータを含む前記第２ライン信号を生成し、前記第１画像処理部に供給する、請求項１に記載の画像処理装置。

【請求項7】

前記第１画像処理部は、前記水平同期信号に関連付けられた処理パラメータに応じて処理を変更する、請求項６に記載の画像処理装置。

【請求項8】

前記第１画像処理部は、前記複数の画像バッファに対応させ、前記ラインデータの前記画像データ内の垂直位置を示す情報を記憶する複数の内部情報記憶部を更に有する、請求項１に記載の画像処理装置。

【請求項9】

前記カウンタは、繰り返し読み出した回数に応じてインクリメントされる内部カウンタを有し、前記画像ＩＤごとに与えられる繰り返し回数に到達した場合に初期値に戻し、
前記画像入力バッファは、前記繰り返し回数に到達した場合に、次のアドレス範囲のラインデータを読み出す、請求項５に記載の画像処理装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明の実施形態は、画像処理装置、及び画像処理システムに関する。

【背景技術】

【0002】

複数のデジタルカメラから水平周期に応じてラインデータを読み込み、画像処理する画像処理装置が知られている。

【0003】

ところが、ラインデータを処理する画像処理装置の処理速度が水平周期よりも高速である場合には、画像処理装置の処理速度が水平周期に応じて低下してしまう恐れがある。

【先行技術文献】

【特許文献】

【0004】

【文献】特開２０１７－４６１８６号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

本発明が解決しようとする課題は、より高速な処理が可能な画像処理装置、及び画像処理システムを提供することである。

【課題を解決するための手段】

【0006】

本実施形態に係る画像処理装置は、水平周期に関連付けられた第１ライン信号を順に取得し、処理する画像処理装置であって、画像入力制御部と、第１画像処理部と、を備える。画像入力制御部は、第１ライン信号の中の画像データであるラインデータを順に記憶し、画像処理装置の処理能力に基づくタイミング制御信号に応じて、ラインデータを含み且つ対応する水平周期よりも短い時間範囲の第２ライン信号を出力する画像入力バッファを有する。第１画像処理部は第２ライン信号中のラインデータを順に記憶する複数の画像バッファと、複数の画像バッファに記憶されるラインデータに対し、それぞれ異なるパラメータの処理を順に施すことが可能な第１画像処理回路と、を有する。

【図面の簡単な説明】

【0007】

【図1】一実施形態に係る画像処理システムの構成を示すブロック図である図。

【図2】画像処理装置の構成を示すブロック図。

【図3】画像入力制御部の構成例を示すブロック図。

【図4】リピート回数が３の場合の画像入力制御部の処理例を説明する模式図。

【図5】異なる画像ＩＤの第１ライン信号が順に入力された場合の画像入力制御部の処理例を説明する模式図。

【図6】一方の第１ライン信号のリピート回数が２の場合の画像入力制御部の処理例を説明する模式図。

【図7】画像入力制御装置の構成を示すブロック図。

【発明を実施するための形態】

【0008】

以下、本発明の実施形態に係る画像処理装置、及び画像処理システムについて、図面を参照しながら詳細に説明する。なお、以下に示す実施形態は、本発明の実施形態の一例であって、本発明はこれらの実施形態に限定して解釈されるものではない。また、本実施形態で参照する図面において、同一部分又は同様な機能を有する部分には同一の符号又は類似の符号を付し、その繰り返しの説明は省略する場合がある。また、図面の寸法比率は説明の都合上実際の比率とは異なる場合や、構成の一部が図面から省略される場合がある。
（一実施形態）

【0009】

図１は、一実施形態に係る画像処理システム１の構成を示すブロック図である。図１に示すように、本実施形態に係る画像処理システム１は、ライン・バイ・ラインによる画像処理が可能なシステムであり、複数の撮像装置１０ａ～１０ｎと、画像処理装置２０と、入力装置３０と、表示装置４０とを、備える。

【0010】

撮像装置１０ａ～１０ｎのそれぞれは、入射光に応じた信号をＡ／Ｄ変換した画像データ出力する。この画像データは、例えば１画素が赤色（Ｒ）、緑色（Ｇ）、青色（Ｂ）の各色のデータにより構成される。

【0011】

また、撮像装置１０ａ～１０ｎのそれぞれは、例えばカメラインタフェースを有しており、複数の制御信号Ｖｓｙｎｃ、Ｈｓｙｎｃ、Ｄａｔａ Ｅｎａｂｌｅ１、Ｄａｔａ Ｅｎａｂｌｅ２、Ｄａｔａ ＩＤ及び、画像データＲＡＷ Ｄａｔａを生成する。なお、本実施形態では、図面中の垂直同期信号をＶｓｙｎｃで示し、水平同期信号をＨｓｙｎｃで示し、垂直有効信号をＤａｔａ Ｅｎａｂｌｅ１で示し、水平有効信号をＤａｔａ Ｅｎａｂｌｅ２で示し、画像データであるラインデータをＲＡＷ Ｄａｔａで示す。

【0012】

制御信号Ｖｓ（Ｖｓｙｎｃ）は垂直同期信号であり、垂直方向のデータ転送開始、即ち１フレーム分の画像データの転送開始を示す。制御信号Ｈｓ（Ｈｓｙｎｃ）は水平同期信号であり、水平方向のデータ転送開始、即ち１ライン分（又は１ブロック分）の画像データの転送開始を示す。制御信号ＤＥ１（Ｄａｔａ Ｅｎａｂｌｅ１）は垂直有効信号である。垂直方向において転送するデータ、つまり１フレーム分の画像データが有効であることを示す。制御信号ＤＥ２（Ｄａｔａ Ｅｎａｂｌｅ２）は水平有効信号であり、水平方向において転送するデータ、即ち１ライン分（１ブロック分）のラインデータＲＤ（ＲＡＷ Ｄａｔａ）が有効であることを示す。画像ＩＤ（Ｄａｔａ ＩＤ）は、画像データに割振られる固有番号である。ラインデータＲＤは、第１ライン信号に含まれる１ライン分（１ブロック分）の画像データである。このため、同一の画像データから生成されたラインデータＲＤには、共通の画像ＩＤが割振られる。なお、第１ライン信号の先頭部に垂直同期信号Ｖｓ、水平同期信号Ｈｓ、垂直有効信号ＤＥ１、水平有効信号ＤＥ２、及び画像ＩＤを含むように第１ライン信号を生成してもよい。

【0013】

また、撮像装置１０ａ～１０ｎの撮像素子の画素数は異なっていてもよい。このため、ラインデータＲＤのサイズは、撮像装置１０ａ～１０ｎのそれぞれで異なる場合がある。

【0014】

画像処理装置２０は、例えば、画像処理回路ＩＳＰ（Ｉｍａｇｅ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）である。画像処理装置２０は、撮像装置１０ａ～１０ｎから供給されるラインデータＲＤを並列処理可能である。すなわち、この画像処理装置２０は、時間あたりの出力スループットが画像入力のＭ倍（Ｍは例えば２以上であるが、これに限定されない）以上に構成される。また、画像処理装置２０は、例えばカメラインタフェースを有しており、垂直同期信号Ｖｓ、水平同期信号Ｈｓ、垂直有効信号ＤＥ１、水平有効信号ＤＥ２、画像ＩＤ、及びＲＧＢ画像データ又はＹＵＶ画像データなどを生成可能である。なお、本実施形態において、出力スループットが画像入力のＭ倍とは、一つのラインデータＲＤを含む水平周期のＭ倍の処理速度で一つのラインデータＲＤを処理できることを意味する。換言すると、出力スループットが画像入力のＭ倍とは、例えば撮像装置１０ａ～１０ｎが一つのラインデータＲＤの読みだしに、時間Ｒｅａｄｔかかる場合に、画像処理装置２０は、一つのラインデータＲＤの入力から出力までの処理時間を時間Ｒｅａｄｔ／Ｍとすることが可能であることを意味する。また、水平周期は、同一画像データにおける水平同期信号の開始タイミングから次の水平同期信号の開始タイミングまでの期間を意味する。

【0015】

入力装置３０は、例えば操作者の操作により、撮像装置１０ａ～１０ｎから供給される画像データの画像ＩＤごとの処理パラメータＰｒ（Ｐａｒａｍｅｔｅｒ）、及びリピート回数Ｒｎを設定する。リピート回数Ｒｎが２以上である場合には、リピート回数Ｒｎに対応した処理パラメータＰｒが設定される。
表示装置４０は、例えばモニタであり、画像処理装置２０から供給されるデータに基づく画像を表示可能である。

【0016】

図２は、画像処理装置２０の構成を示すブロック図である。この画像処理装置２０は、入力インターフェース２００と、画像入力制御部２０１と、複数の画像処理部２０２～２０４と、出力インターフェース２０５と、画像統計情報取得部２０６と、制御部２０７とを備える。画像処理装置２０は、例えば入力された第２ライン信号が有するラインデータを画素ごとにパイプライン処理を行う。

【0017】

入力インターフェース２００は、撮像装置１０ａ～１０ｎに対するデータの受信側である。すなわち、入力インターフェース２００は、垂直同期信号Ｖｓ、水平同期信号Ｈｓに同期して受信動作を行い、垂直有効信号ＤＥ１、水平有効信号ＤＥ２がアクティブである期間のラインデータＲＤを受信する。

【0018】

画像入力制御部２０１は、第１ライン信号の水平周期を変更することが可能である。また、画像入力制御部２０１は、新たな水平同期信号Ｈｓを生成し、後述する内部画像ＩＤｎ、及び、処理パラメータＰｒを関連付けることも可能である。なお、画像入力制御部２０１の詳細は、後述する。

【0019】

第１画像処理部２０２は、例えばＲＡＷ処理部であり、例えばホワイトバランス処理等を行う。第１画像処理部２０２は、Ｎ個の第１画像バッファ２０２ａと、Ｎ個の第１内部状態保持部２０２ｂと、第１画像処理回路２０２ｃとを、有する。なお、Ｎは、例えば上述のＭ以下で最大の整数である。

【0020】

Ｎ個の第１画像バッファ２０２ａは、例えば、ラインバッファである。Ｎ個の第１画像バッファ２０２ａは、それぞれ、異なる内部画像ＩＤｎのライン信号を保持可能である。内部画像ＩＤｎは、後述するように画像入力制御部２０１内で例えばＩＤに対応させて新たに発行する固有番号である。

【0021】

Ｎ個の第１内部状態保持部２０２ｂは、Ｎ個の第１画像バッファ２０２ａに対応している。例えばＮ個の第１内部状態保持部２０２ｂは、画像ＩＤをインデックスとして垂直方向に何行目のラインデータＲＤに対応するかを示す情報を保持する。

【0022】

第１画像処理回路２０２ｃは、Ｎ個の第１画像バッファ２０２ａに保持されるラインデータＲＤを順に処理する。この際に、第１画像処理回路２０２ｃは、新たな水平同期信号Ｈｓに関連付けられた処理パラメータＰｒを用いて、処理を行ってもよい。或いは、後述する制御部２０７に記憶される処理パラメータＰｒを用いて、処理を行ってもよい。そして、Ｎ個の第１画像バッファ２０２ａに保持されるラインデータＲＤは、順に処理され、対応するＮ個の第２画像バッファ２０３ａに供給される。この際に、Ｎ個の第１内部状態保持部２０２ｂは、第１画像処理部２０２の処理に応じて、更新される。

【0023】

第１画像処理回路２０２ｃにおけるホワイトバランス処理では、ラインデータＲＤを構成する各画素のＲＧＢデータを、例えばｘｙ色空間等の所定の色空間にプロットし、その色空間上で光源色の可能性が高い黒体輻射軌跡付近にプロットされたデータのＲ、Ｇ、Ｂを積分する。そして、その積分値からＲ成分及びＢ成分のホワイトバランス係数Ｇ／Ｒ及びＧ／Ｂを求める。以上の処理により生成されたホワイトバランス係数を用いてホワイトバランス処理を実施する。また、第１画像処理回路２０２ｃでは、キズ処理、ノイズリダクション処理、色モザイク画像を補間する処理などを行うことによって、全ての画素においてＲ、Ｇ、Ｂの色情報が揃ったカラー画像を生成する。

【0024】

第２画像処理部２０３は、例えばＲＧＢ生成処理部であり、例えばマトリクス変換処理等を行う。第２画像処理部２０３は、Ｎ個の第２画像バッファ２０３ａと、Ｎ個の第２内部状態保持部２０３ｂと、第２画像処理回路２０３ｃとを、有する。

【0025】

Ｎ個の第２画像バッファ２０３ａは、例えば、ラインバッファである。Ｎ個の第２画像バッファ２０３ａは、それぞれ、異なる内部画像ＩＤｎのライン信号を保持可能である。Ｎ個の第２内部状態保持部２０３ｂは、Ｎ個の第２画像バッファ２０３ａに対応している。例えばＮ個の第２内部状態保持部２０３ｂは、画像ＩＤをインデックスとして垂直方向に何行目のラインデータＲＤに対応するかを示す情報を保持する。

【0026】

第２画像処理回路２０３ｃは、Ｎ個の第２画像バッファ２０３ａに保持されるラインデータＲＤを順に処理する。この際に、第２画像処理回路２０３ｃは、新たな水平同期信号Ｈｓに関連付けられた処理パラメータＰｒｅを用いて、処理を行ってもよい。或いは、後述する制御部２０７に記憶される処理パラメータＰｒを用いて、処理を行ってもよい。そして、Ｎ個の第２画像バッファ２０３ａに保持されるラインデータＲＤは、順に処理され、対応するＮ個の第３画像バッファ２０４ａに供給される。この際に、Ｎ個の第２内部状態保持部２０３ｂは、第２画像処理部２０３の処理に応じて、更新される。

【0027】

第２画像処理回路２０３ｃにおけるＲＧＢ生成処理では、例えばマトリクス変換処理、およびガンマ変換処理等を行う。これにより、基本的なカラー画像が生成される。

【0028】

第３画像処理部２０４は、例えば画質調整処理部であり、画質調整処理を行う。また、第３画像処理部２０４は、３原色（ＲＧＢ）のラインデータＲＤを、輝度情報（Ｙ）と色情報（Ｃｂ、Ｃｒ）とからなる画像データに変換してもよい。或いは、３原色（ＲＧＢ）のラインデータＲＤを、ＹＵＶ形式の画像データに変換してもよい。

【0029】

第３画像処理部２０４は、Ｎ個の第３画像バッファ２０４ａと、Ｎ個の第３内部状態保持部２０４ｂと、第３画像処理回路２０４ｃとを、有する。

【0030】

Ｎ個の第３画像バッファ２０４ａは、例えば、ラインバッファである。Ｎ個の第３画像バッファ２０４ａは、それぞれ、異なる内部画像ＩＤｎのラインデータを保持可能である。Ｎ個の第３内部状態保持部２０４ｂは、Ｎ個の第３画像バッファ２０４ａに対応している。例えばＮ個の第３内部状態保持部２０４ｂは、画像ＩＤをインデックスとして垂直方向に何行目のラインデータＲＤに対応するかを示す情報を保持する。

【0031】

第３画像処理回路２０４ｃは、Ｎ個の第３画像バッファ２０４ａに保持されるラインデータＲＤを順に処理する。この際に、第３画像処理回路２０４ｃは、新たな水平同期信号Ｈｓに関連付けられた処理パラメータＰｒを用いて、処理を行ってもよい。或いは、後述する制御部２０７に記憶される処理パラメータＰｒを用いて、処理を行ってもよい。そして、Ｎ個の第３画像バッファ２０４ａに保持されるラインデータＲＤは、順に処理され、出力インターフェース２０５に供給される。この際に、Ｎ個の第２内部状態保持部２０３ｂは、第２画像処理部２０３の処理に応じて、更新される。

【0032】

第３画像処理回路２０４ｃにおける画質調整処理では、例えばコントラスト調整処理、ガンマ補正処理等を行う。これにより、基本的なカラー画像が生成される。

【0033】

出力インターフェース２０５は、カメラインタフェースを有しており、第３画像処理回路２０４ｃから供給されるデータに対し、垂直同期信号Ｖｓ、水平同期信号Ｈｓ、垂直有効信号ＤＥ１、水平有効信号ＤＥ２、画像ＩＤ及び、処理済み画像データＲＧＢ Ｄａｔａ又は処理済み画像データＹＵＶ Ｄａｔａを生成する。

【0034】

画像統計情報取得部２０６は、出力インターフェース２０５に出力されるデータの、画像ＩＤ、内部画像ＩＤｎ、及び、処理パラメータＰｒを含む処理内容（Ｉｍａｇｅ、Ｉｎｆｏ）を出力する。

【0035】

制御部２０７は、画像処理装置２０全体を制御する。制御部２０７は、レジスタ２０７ａ、及びタイミング発生器２０７ｂを有する。レジスタ２０７ａは、入力装置３０を介して入力された画像ＩＤごとのリピート回数Ｒｎ、及びリピート回数Ｒｎそれぞれに対応する処理パラメータＰｒを記録する。

【0036】

タイミング発生器２０７ｂは、基準クロックを有し、画像処理装置２０全体のタイミング制御用の信号を生成する。制御部２０７は、基準クロックにしたがい画像処理装置２０全体のタイミング制御を行う。

【0037】

図３は、画像入力制御部２０１の構成例を示すブロック図である。図３に示すように、画像入力制御部２０１は、画像入力バッファ２０１ａと、画像ＩＤ記憶部２０１ｂと、リピートカウンタ２０１ｃと、ＩＤ生成回路２０１ｄとを、有する。

【0038】

画像入力バッファ２０１ａには、水平有効信号ＤＥ２がアクティブである期間のラインデータＲＤが受信順に記憶される。このため、画像入力バッファ２０１ａに記憶されるラインデータＲＤの画像ＩＤは任意の順となる。

【0039】

画像入力バッファ２０１ａは、画像バッファリードポインタＰ８、及び画像バッファライトポインタＰ９を有する。画像入力バッファ２０１ａは、制御部２０７のタイミング制御に従い、画像バッファリードポインタＰ８が示すアドレスから、画像バッファライトポインタＰ９が示すアドレス範囲のラインデータＲＤを読みだす。

【0040】

画像ＩＤ記憶部２０１ｂは、例えばＦＩＦＯ（Ｆｉｒｓｔ－ｉｎ Ｆｉｒｓｔ－Ｏｕｔ）バッファである。画像ＩＤ記憶部２０１ｂは、バッファ２０１０ｂ、ライトポインタＰ１０、及びリードポインタＰ１１を有する。ライトポインタＰ１０は、バッファ２０１０ｂ内の書き込み位置を保持する。リードポインタＰ１１は、バッファ２０１０ｂ内の読み込み位置を保持する。

【0041】

より具体的には、ライトポインタＰ１０が示すバッファ２０１０ｂ内の書き込み位置に、画像入力バッファ２０１ａに記憶されたラインデータＲＤの読みだし先頭アドレスｋと、ラインデータＲＤのデータ量Ｗに基づいた読みだし終端アドレスｋ＋Ｗと、画像ＩＤが記憶される。

【0042】

リードポインタＰ１１が示すバッファ２０１０ｂ内の読み込み位置に格納されるラインデータＲＤの読みだし先頭アドレスｋと、ラインデータＲＤのデータ量Ｗに基づいた読みだし終端アドレスｋ＋Ｗと、画像ＩＤが、制御部２０７のタイミング制御に従い読み出され、画像入力バッファ２０１ａに供給される。なお、画像入力バッファ２０１ａから出力されるラインデータＲＤの読みだし間隔に応じて、画像処理装置２０の処理負荷は変動する。例えば、ラインデータＲＤの読みだし間隔が短くなるに従い、画像処理装置２０の処理負荷は増加する。このため、画像処理装置２０の処理能力に基づく、制御部２０７のタイミング制御信号に従い読み出される、ラインデータＲＤの間隔により、画像処理装置２０の処理負荷は調整可能である。

【0043】

これにより、画像入力バッファ２０１ａの画像バッファリードポインタＰ８は、読みだし先頭アドレスｋを示し、画像バッファライトポインタＰ９は、読みだし終端アドレスｋ＋Ｗ＋１を示す。そして、上述のように、画像バッファリードポインタＰ８が示すアドレスから、画像バッファライトポインタＰ９が示すアドレスが示すアドレス範囲のラインデータＲＤが読み出される。この際に画像バッファリードポインタＰ８が示す位置は、先頭アドレスｋから終端アドレスｋ＋Ｗ＋１に移動し、画像バッファリードポインタＰ８が示す位置のデータが順に読み出される。

【0044】

リピートカウンタ２０１ｃは、レジスタ２０７ａに記録される画像ＩＤごとのリピート回数Ｒｎを設定する。そして、画像入力バッファ２０１ａは、リピート回数Ｒｎが２以上である場合に、画像バッファリードポインタＰ８が示すアドレスから、画像バッファライトポインタＰ９が示すアドレスが示すアドレス範囲のラインデータＲＤをリピート回数Ｒｎに応じた繰り返し回数で読みだす。例えば、リピート回数Ｒｎが３である場合、画像バッファリードポインタＰ８が示すアドレスから、画像バッファライトポインタＰ９が示すアドレスが示すアドレス範囲のラインデータＲＤを３回読み出す。

【0045】

リピートカウンタ２０１ｃは、読みだし回数に応じて内部カウンタの値をインクリメントする。例えば、リピートカウンタ２０１ｃは、初期状態で内部カウンタの値を０とし、繰り返し回数１回目のデータを読みだした時にカウンタの値を１に変更し、繰り返し回数２回目のデータを読みだした時にカウンタの値を２に変更し、繰り返し回数３回目のデータを読みだした時にカウンタの値を３に変更する。リピートカウンタ２０１ｃは、内部カウンタの値とリピート回数Ｒｎとが一致したときに、内部カウンタの値を初期値である０に戻す。

【0046】

ＩＤ生成回路２０１ｄは、一意の固有番号である内部画像ＩＤｎを生成する。ＩＤ生成回路２０１ｄは、例えばラインデータＲＤの画像ＩＤとリピートカウンタ２０１ｃの数値に基づき、内部画像ＩＤｎを生成する。ＩＤ生成回路２０１ｄは、例えば、入力される各画像のＩＤと繰り返し回数である内部カウンタＮｕｍとを組み合わせることにより、一意の内部画像ＩＤｎを生成する。なお、本実施形態に係る内部画像ＩＤｎが、ラインデータ毎に付与される固有の識別番号に対応する。

【0047】

画像入力制御部２０１は、水平同期信号Ｈｓ、内部画像ＩＤｎ、及び内部画像ＩＤｎに対する処理パラメータＰｒを第２ライン信号の先頭部に付与する。或いは、制御部２０７が、レジスタ２０７ａに記録される処理パラメータＰｒを用いて制御する場合には、第２ライン信号を、水平同期信号Ｈｓ、内部画像ＩＤｎ、及び内部画像ＩＤｎに対する処理パラメータＰｒを含めずに構成してもよい。

【0048】

まず、図４に基づき、リピート回数が３の場合の画像入力制御部２０１の処理例を説明する。ここでは、画像処理装置２０の時間あたりの出力スループットが画像入力の３倍の例を説明する。また、画像入力制御部２０１は、水平同期信号Ｈｓ、内部画像ＩＤｎ、及び内部画像ＩＤｎに対する処理パラメータＰｒを第２ライン信号の先頭部に付与する場合について説明する。

【0049】

図４は、リピート回数が３の場合の画像入力制御部２０１の処理例を説明する模式図である。

【0050】

図４の（ａ）図は、入力インターフェース２００に入力される画像ＩＤ１０の第１ライン信号を模式的に示している図である。横軸は時間を示す。水平同期信号Ｈｓ１０に基づく水平周期Ｈ１０内にラインデータＩｍａｇ０ＬｉｎｅＮ０が含まれている。

【0051】

パイプライン処理を行う画像処理装置２０では、一般に第１ライン信号の水平同期信号Ｈｓ間の長さである水平周期に応じて第１ライン信号が読み込まれ、画像処理される。このため、水平周期が長くなるにしたがい、画像処理の処理時間が長くなる。これらから分かるように、図４の（ａ）図に示ように、水平周期に含まれるラインデータＩｍａｇ０ＬｉｎｅＮ０が、水平周期Ｈ１０の一部である場合には、画像処理装置２０の処理時間に損失が生じてしまう。例えば、従来の読み込み方式では、ラインデータＩｍａｇ０ＬｉｎｅＮ０は、水平同期信号Ｈｓ１０の時間に応じて入力される。このため、ラインデータＩｍａｇ０ＬｉｎｅＮ０を３回処理するためには、水平同期信号Ｈｓ１０の３倍の時間がかかってしまう。上側の水平周期Ｈ１０が画像処理装置２０に入力される際の水平周期を示しており、下側の水平周期Ｈ１０が、画像入力バッファ２０１ａから出力される際の信号に対応する。

【0052】

図４の（ｂ）図は、画像入力バッファ２０１ａから出力される第２ライン信号を模式的に示している図である。例えば水平周期Ｈ１０を３分の１とした水平周期Ｈ２０、Ｈ２１、Ｈ２２内に、ラインデータＩｍａｇ０ＬｉｎｅＮ０が含まれている。図４の（a）図における下側の水平周期Ｈ１０が、図４の（ｂ）における水平周期Ｈ２０、Ｈ２１、Ｈ２２を合わせた長さに対応する。すなわち、図４の（ｂ）図は、時間幅を図４の（a）図より拡大して記載している。このように、画像入力バッファ２０１ａから出力される第２ライン信号は、上側の水平周期Ｈ１０より遅れをもって出力される。また、例えば水平周期Ｈ２０が３分の１となるので、画像処理装置２０のラインデータＩｍａｇ０ＬｉｎｅＮ０に対する処理時間がおよそ３分の１となる。

【0053】

図４の（ｃ）図は、出力インターフェース２０５から出力されるライン信号を模式的に示している図である。ラインデータＰｉｍａｇ０ＬｉｎｅＮ０は、内部画像ＩＤｎ２０の処理後のラインデータＰｉｍａｇ０ＬｉｎｅＮ０を示している。

【0054】

図４の（ａ）図に示すように、水平同期信号Ｈｓ１０に基づいて、ラインデータＩｍａｇ０ＬｉｎｅＮ０が入力インターフェース２００に受信される。このときの水平有効信号ＤＥ２はアクティブであり、リピート回数Ｒｎ＝３が画像ＩＤ１０に対応させて制御部２０７のレジスタ２０７ａに記録される。

【0055】

画像入力バッファ２０１ａは、水平有効信号ＤＥ２がアクティブであるので、ラインデータＩｍａｇ０ＬｉｎｅＮ０を記憶する。この際に画像ＩＤ記憶部２０１ｂは、画像ＩＤ１０、画像入力バッファ２０１ａに書き込まれたラインデータＩｍａｇ０ＬｉｎｅＮ０の読みだし先頭アドレスｋ、終端アドレスｋ＋Ｗ、及び画像ＩＤをライトポインタＰ１０が示す書き込み位置に記憶する。また、リピートカウンタ２０１ｃの内部カウンタＮｕｍは初期値の０であり、リピート回数Ｒｎ＝３がリピートカウンタ２０１ｃに、制御部２０７を介して設定される。

【0056】

このとき、ＩＤ生成回路２０１ｄは、画像ＩＤ＝１０とリピートカウンタ２０１ｃの数値０に基づき、内部画像ＩＤｎを例えば２０として生成する。

【0057】

画像入力バッファ２０１ａは、画像バッファリードポインタＰ８が示すアドレスから、画像バッファライトポインタＰ９が示すアドレスが示すアドレス範囲のラインデータＲＤを読みだす。この際に、画像入力制御部２０１は、アクティブであることを示す水平有効信号ＤＥ２を第１画像処理２０２部に出力する。

【0058】

画像入力制御部２０１は、水平同期信号Ｈｓ２０、内部画像ＩＤｎ、及び内部画像ＩＤｎに対する処理パラメータＰｒを先頭部に付与し、ラインデータＲＤを含む第２ライン信号を生成する。処理パラメータＰｒは、制御部２０７のレジスタ２０７ａから供給される。また、記録された第１画像バッファ２０２ａに対応する第１内部状態保持部２０２ｂにラインＮ０であることを示す情報を記録する。

【0059】

さらにまた、ＩＤ生成回路２０１ｄは、内部画像ＩＤｎである１０を、第１画像バッファ２０２ａに記録された１番目のラインデータＩｍａｇ０ＬｉｎｅＮ０に関連づける。そして、リピートカウンタ２０１ｃは、内部カウンタＮｕｍをインクリメントし０から１に変更する。

【0060】

リピートカウンタ２０１ｃは、内部カウンタＮｕｍ＝１とリピート回数Ｒｎ＝３が一致していないので、画像入力バッファ２０１ａは、前回と同じアドレス範囲のラインデータＲＤを読みだす。この際に、画像バッファリードポインタＰ８が示す位置は、Ｉｍａｇ０ＬｉｎｅＮ０の読みだし先頭アドレスｋに戻される。また、アクティブであることを示す水平有効信号ＤＥ２を第１画像処理部２０２に出力する。更にまた、記録された第１画像バッファ２０２ａに対応する第１内部状態保持部２０２ｂにラインＮ０であることを示す情報を記録する。

【0061】

このとき、ＩＤ生成回路２０１ｄは、ＩＤ＝１０とリピートカウンタ２０１ｃの数値１に基づき、内部画像ＩＤｎを例えば２１として生成する。

【0062】

さらにまた、ＩＤ生成回路２０１ｄは、内部画像ＩＤｎである２１を、第１画像バッファ２０２ａに記録された２番目のラインデータＩｍａｇ０ＬｉｎｅＮ０に関連づける。そして、リピートカウンタ２０１ｃは、内部カウンタＮｕｍをインクリメントし１から２に変更する。

【0063】

リピートカウンタ２０１ｃは、内部カウンタＮｕｍ＝２とリピート回数Ｒｎ＝３が一致していないので、画像入力バッファ２０１ａは、再び同じアドレス範囲のラインデータＲＤを読み出す。この際に、アクティブであることを示す水平有効信号ＤＥ２を第１画像処理２０２部に出力する。また、記録された第１画像バッファ２０２ａに対応する第１内部状態保持部２０２ｂにラインＮ０であることを示す情報を記録する。

【0064】

このとき、ＩＤ生成回路２０１ｄは、画像ＩＤ＝１０とリピートカウンタ２０１ｃの数値２に基づき、内部画像ＩＤｎを例えば２２として生成する。

【0065】

さらにまた、ＩＤ生成回路２０１は、内部画像ＩＤｎである２２を、第１画像バッファ２０２ａに記録された３番目のインデータＩｍａｇ０ＬｉｎｅＮ０に関連づける。そして、リピートカウンタ２０１ｃは、内部カウンタＮｕｍをインクリメントし２から３に変更する。

【0066】

次にリピートカウンタ２０１ｃは、内部カウンタＮｕｍ＝３とリピート回数Ｒｎ＝３が一致しているので、内部カウンタＮｕｍを０に戻す。このとき、画像入力バッファ２０１ａは、内部カウンタＮｕｍ＝３とリピート回数Ｒｎ＝３が一致したので繰り返し読みだしを停止する。そして、画像バッファリードポインタＰ８が示す位置は、次のラインデータＲＤの読みだし先頭アドレスｋｎに移動される。

【0067】

このように、３つの第１画像バッファ２０２ａには、それぞれ、ラインデータＩｍａｇ０ＬｉｎｅＮ０が記憶され、上述のように異なる処理パラメータＰｒを用いて画像処理部２０２～２０４によりラインデータＩｍａｇ０ＬｉｎｅＮ０が順に処理される。

【0068】

そして、処理が終了すると、図４の（ｃ）図に示ように、出力インターフェース２０５は、内部画像ＩＤｎ２０～２２のそれぞれの処理後のラインデータＰｉｍａｇ０ＬｉｎｅＮ０を元の水平周期Ｈ１０の信号として出力する。このように、処理後のラインデータＰｉｍａｇ０ＬｉｎｅＮ０の水平周期Ｈ１０は、元の長さに戻すことが可能である。或いは、出力インターフェース２０５は、水平周期Ｈ２０、Ｈ２１、Ｈ２２のように水平周期を変更して出力してもよい。

【0069】

このように、画像入力制御部２０１は、例えば第１水平周期Ｈ１０の余りの時間とブランキング時間を使って、ラインデータＩｍａｇ０ＬｉｎｅＮ０を繰り返し読み出す。これにより、画像処理装置２０は、ラインデータＩｍａｇ０ＬｉｎｅＮ０の３回分の処理時間を短縮し、スループットを例えば３倍とすることが可能となる。すなわち、水平周期Ｈ１０のラインデータＩｍａｇ０ＬｉｎｅＮ０を除く期間を短縮することにより、画像処理装置２０のラインデータＩｍａｇ０ＬｉｎｅＮ０に対する処理時間がより短縮される。換言すると、ラインデータＩｍａｇ０ＬｉｎｅＮ０を含む第１ライン信号の水平周期を変更し、繰り返し処理をすることにより、画像処理装置２０の処理速度に応じて処理時間を短縮可能となる。

【0070】

また、画像入力バッファ２０１ａは、１つのラインデータに対応する同じアドレス範囲を繰り返し回数Ｒｎに基づき、繰り返し読み出す。そして、画像入力バッファ２０１ａは、同じアドレス範囲のラインデータを第１画像処理部２０２の複数の第１画像バッファ２０２ｂそれぞれ記憶させ、第１画像処理部２０２は、複数のラインバッファそれぞれに記憶されるラインデータに対する順に異なる処理を施す。これにより、１つのラインデータに異なる画像処理を施す場合に、ラインデータを複数回読み込むことなく、異なる画像処理を施すことが可能となり、処理速度をより高速にできる。

【0071】

次に、図５に基づき、異なる画像ＩＤの第１ライン信号が順に入力された画像処理装置２０に入力された場合の画像入力制御部２０１の処理例を説明する。ここでは、画像処理装置２０の時間あたりの出力スループットが画像入力の３倍の例を説明する。

【0072】

図５は、異なる画像ＩＤの第１ライン信号が順に入力された場合の画像入力制御部２０１の処理例を説明する模式図である。

【0073】

図５の（ａ）図は、入力インターフェース２００に入力される画像ＩＤ１０の第１ライン信号を模式的に示している図である。横軸は時間を示す。第１ライン信号内にラインデータＩｍａｇ０ＬｉｎｅＮ０が含まれている。

【0074】

図５の（ｂ）図は、入力インターフェース２００に入力される画像ＩＤ２１の第１ライン信号を模式的に示している図である。横軸は時間を示す。第１ライン信号内にラインデータＩｍａｇ１ＬｉｎｅＮ１が含まれている。

【0075】

図５の（ｃ）図は、入力インターフェース２００に入力される画像ＩＤ３２の第１ライン信号を模式的に示している図である。横軸は時間を示す。第１ライン信号内にラインデータＩｍａｇ２ＬｉｎｅＮ２が含まれている。

【0076】

図５の（ｄ）図は、画像入力バッファ２０１ａから出力される第２ライン信号を模式的に示している図である。例えば、水平周期Ｈ１０、Ｈ１１、Ｈ１２のそれぞれを３分の１とした水平周期Ｈ２０、Ｈ４２、Ｈ６４内に、ラインデータＩｍａｇ０ＬｉｎｅＮ０、Ｉｍａｇ１ＬｉｎｅＮ１、Ｉｍａｇ２ＬｉｎｅＮ２がそれぞれ含まれている。水平周期Ｈ１０、Ｈ１１、Ｈ１２を合わせた長さが、図５の（ａ）図の下側の水平周期Ｈ１０に対応する。

【0077】

図５の（ａ）、（ｂ）、（ｃ）図に示すように、水平同期信号Ｈｓ１０、Ｈｓ２１、Ｈｓ３２に基づいて、ラインデータＩｍａｇ０ＬｉｎｅＮ０、Ｉｍａｇ１ＬｉｎｅＮ１、Ｉｍａｇ２ＬｉｎｅＮ２を含む第１ライン信号が入力インターフェース２００に順に受信される。このときの水平有効信号ＤＥ２はアクティブであり、リピート回数Ｒｎ＝１及び処理パラメータＰｒが画像ＩＤ１０、ＩＤ２１、ＩＤ３２に対応させてレジスタ２０７ａに記録される。

【0078】

上述のように、カメラ入力にかかる時間に対応する水平周期Ｈ１０よりも、ラインデータＩｍａｇ０ＬｉｎｅＮ０に対する画像処理装置２０の出力にかかる処理時間はＮ分の１程度である。ここでは、例えば３分の１程度である。このため、従来のように、水平周期Ｈｓ１０、Ｈｓ１１、Ｈｓ１２のそれぞれに応じて、順にラインデータＩｍａｇ０ＬｉｎｅＮ０、Ｉｍａｇ１ＬｉｎｅＮ１、Ｉｍａｇ２ＬｉｎｅＮ２を処理していたならば、Ｉｍａｇ０ＬｉｎｅＮ０、Ｉｍａｇ１ＬｉｎｅＮ１、Ｉｍａｇ２ＬｉｎｅＮ２を処理するためには、水平周期Ｈｓ１０＋Ｈｓ１１＋Ｈｓ１２の時間がかかってしまう。

【0079】

画像入力バッファ２０１ａは、水平有効信号ＤＥ２がそれぞれアクティブであるので、ラインデータＩｍａｇ０ＬｉｎｅＮ１、Ｉｍａｇ１ＬｉｎｅＮ１、Ｉｍａｇ２ＬｉｎｅＮ２を順に記憶する。この際に画像ＩＤ記憶部２０１ｂは、画像ＩＤ１０、バッファ２０１０ａに書き込まれたラインデータＩｍａｇ０ＬｉｎｅＮ０の読みだし先頭アドレスｋ、及び、読みだし終端アドレスｋ＋ｗ＋１をライトポインタＰ１０が指示する位置に記憶する。

【0080】

同様に、画像ＩＤ記憶部２０１ｂは、画像ＩＤ１１、ラインデータＩｍａｇ１ＬｉｎｅＮ１の読みだし先頭アドレスｋ１、及び、読みだし終端アドレスｋ＋ｗ＋１をライトポインタＰ１０が指示する位置に記憶する。同様に、画像ＩＤ記憶部２０１ｂは、画像ＩＤ１２、ラインデータＩｍａｇ２ＬｉｎｅＮ２の読みだし先頭アドレスｋ２、及び、読みだし終端アドレスｋ２＋Ｗ２をライトポインタＰ１０が指示する位置に記憶する。この場合、画像入力バッファ２０１ａは、水平周期Ｈｓ１０、Ｈｓ１１、Ｈｓ１２などの第１ライン信号を瞬時に受信するので、画像入力バッファ２０１ａが、ラインデータＩｍａｇ０ＬｉｎｅＮ０、Ｉｍａｇ１ＬｉｎｅＮ１、Ｉｍａｇ２ＬｉｎｅＮ２などを記憶する時間は、水平周期Ｈｓ１０、Ｈｓ１１、Ｈｓ１２それぞれよりもより短い時間である。

【0081】

画像入力バッファ２０１ａは、画像バッファリードポインタＰ８が示すアドレスから、画像バッファライトポインタＰ９が示すアドレスが示すアドレス範囲のラインデータＲＤを読みだす。これにより、ラインデータＩｍａｇ０ＬｉｎｅＮ０が読み出される。この際に、画像入力制御部２０１は、水平同期信号Ｈｓ２０、内部画像ＩＤｎ＝２０、及び内部画像ＩＤｎ＝２０に対する処理パラメータＰｒを先頭部に付与し、Ｉｍａｇ０ＬｉｎｅＮ０を含む第２ライン信号を生成する。

【0082】

また、アクティブであることを示す水平有効信号ＤＥ２を第１画像処理２０２部に出力する。さらにまた、記録された第１画像バッファ２０２ａに対応する第１内部状態保持部２０２ｂにラインＮ０であることを示す情報を記録する。このとき、ＩＤ生成回路２０１ｄは、画像ＩＤ＝１０とリピートカウンタ２０１ｃの数値０に基づき、内部画像ＩＤｎを例えば２０として生成する。そして、リピートカウンタ２０１ｃは、内部カウンタＮｕｍをインクリメントし０から１に変更する。次にリピートカウンタ２０１ｃは、内部カウンタＮｕｍ＝１とリピート回数Ｒｎ＝１が一致しているので、内部カウンタＮｕｍ＝０に戻す。

【0083】

次に、画像入力バッファ２０１ａは、画像バッファリードポインタＰ８が示すアドレスから、画像バッファライトポインタＰ９が示すアドレスが示すアドレス範囲のラインデータＲＤを読みだす。これにより、ラインデータＩｍａｇ１ＬｉｎｅＮ１が読み出される。この際に、画像入力制御部２０１は、水平同期信号Ｈｓ２０、内部画像ＩＤｎ＝４２、及び内部画像ＩＤｎ＝４２に対する処理パラメータＰｒを先頭部に付与し、ラインデータＩｍａｇ１ＬｉｎｅＮ１を含む第２ライン信号を生成する。なお、内部画像ＩＤｎ＝４２につては、後述する。この際に、画像入力制御部２０１は、水平同期信号Ｈｓ４２、内部画像ＩＤｎ＝４２、及び内部画像ＩＤｎ＝４２に対する処理パラメータＰｒを第２ライン信号の先頭部に付与し、ラインデータＩｍａｇ１ＬｉｎｅＮ１を含む第２ライン信号を生成する。

【0084】

また、画像入力制御部２０１は、アクティブであることを示す水平有効信号ＤＥ２を第１画像処理２０２部に出力する。また、画像入力制御部２０１は、記録された第１画像バッファ２０２ａに対応する第１内部状態保持部２０２ｂにラインＮ１であることを示す情報を記録する。このとき、ＩＤ生成回路２０１ｄは、ＩＤ＝２１とリピートカウンタ２０１ｃの数値０に基づき、内部画像ＩＤｎを例えば４２として生成する。そして、リピートカウンタ２０１ｃは、内部カウンタＮｕｍをインクリメントし０から１に変更する。次にリピートカウンタ２０１ｃは、内部カウンタＮｕｍ＝１とリピート回数Ｒｎ＝１が一致しているので、内部カウンタＮｕｍ＝０に戻す。

【0085】

次に、画像入力バッファ２０１ａは、画像バッファリードポインタＰ８が示すアドレスから、画像バッファライトポインタＰ９が示すアドレスが示すアドレス範囲のラインデータＲＤを読みだす。これにより、ラインデータＩｍａｇ２ＬｉｎｅＮ２が読み出される。この際に、画像入力制御部２０１は、水平同期信号Ｈｓ６４、内部画像ＩＤｎ＝６４、及び内部画像ＩＤｎ＝６４に対応するする処理パラメータＰｒを先頭部に付与し、ラインデータＩｍａｇ２ＬｉｎｅＮ２を含む第２ライン信号を生成する。なお、内部画像ＩＤｎ＝６４については、後述する。また、画像入力制御部２０１は、アクティブであることを示す水平有効信号ＤＥ２を第１画像処理２０２部に出力する。また、画像入力制御部２０１は、記録された第１画像バッファ２０２ａに対応する第１内部状態保持部２０２ｂにラインＮ２であることを示す情報を記録する。このとき、ＩＤ生成回路２０１ｄは、ＩＤ＝３２とリピートカウンタ２０１ｃの数値０に基づき、内部画像ＩＤｎを例えば６４として生成する。そして、リピートカウンタ２０１ｃは、内部カウンタＮｕｍをインクリメントし０から１に変更する。次にリピートカウンタ２０１ｃは、内部カウンタＮｕｍ＝１とリピート回数Ｒｎ＝１が一致しているので、内部カウンタＮｕｍ＝０に戻す。

【0086】

このように、３つの第１画像バッファ２０２ａには、それぞれ、ラインデータＩｍａｇ０ＬｉｎｅＮ０、Ｉｍａｇ１ＬｉｎｅＮ１、Ｉｍａｇ２ＬｉｎｅＮ２を含信号が記憶され、上述のように異なる処理パラメータＰｒを用いて画像処理部２０２～２０４によりラインデータＩｍａｇ０ＬｉｎｅＮ０、Ｉｍａｇ１ＬｉｎｅＮ１、Ｉｍａｇ２ＬｉｎｅＮ２が順に処理される。

【0087】

そして、処理が終了すると、出力インターフェース２０５は、ＩＤｎ２０、４２、６４のそれぞれの処理後のラインデータを元の水平周期の信号として出力する。或いは、出力インターフェース２０５は、水平周期Ｈ２０、Ｈ４２、Ｈ６４のように水平周期を変更して出力してもよい。

【0088】

このように、画像入力制御部２０１は、例えば第１水平周期Ｈ１０の余りの時間とブランキング時間を使ってラインデータＩｍａｇ０ＬｉｎｅＮ０、Ｉｍａｇ１ＬｉｎｅＮ１、Ｉｍａｇ２ＬｉｎｅＮ２を所定の時間間隔で読み出す。これにより、画像処理装置２０は、ラインデータＩｍａｇ０ＬｉｎｅＮ０、Ｉｍａｇ１ＬｉｎｅＮ１、Ｉｍａｇ２ＬｉｎｅＮ２の処理時間を短縮し、スループットを例えば３倍とすることが可能となる。すなわち、水平周期Ｈ１０、Ｈ１１，Ｈ１２のラインデータＩｍａｇ０ＬｉｎｅＮ０、Ｉｍａｇ１ＬｉｎｅＮ１、Ｉｍａｇ２ＬｉｎｅＮ２を除く期間を短縮することにより、画像処理装置２０のラインデータＩＩｍａｇ０ＬｉｎｅＮ０、Ｉｍａｇ１ＬｉｎｅＮ１、Ｉｍａｇ２ＬｉｎｅＮ２に対する処理時間がより短縮される。換言すると、ラインデータＩｍａｇ０ＬｉｎｅＮ０、ラインデータＩｍａｇ１ＬｉｎｅＮ１、ラインデータＩｍａｇ２ＬｉｎｅＮ２を含む第１ライン信号の水平周期を変更し、処理することにより、画像処理装置２０の処理速度に応じて処理時間を短縮可能となる。

【0089】

次に、図６に基づき、異なる画像ＩＤの第１ライン信号が順に入力され、一方の第１ライン信号のリピート回数が２の場合の画像入力制御部２０１の処理例を説明する。

【0090】

図６は、異なる画像ＩＤの第１ライン信号が順に入力され、一方の第１ライン信号のリピート回数が２の場合の画像入力制御部２０１の処理例を説明する模式図である。

【0091】

図６の（ａ）図は、入力インターフェース２００に入力される画像ＩＤ１０の第１ライン信号を模式的に示している図である。横軸は時間を示す。第１ライン信号内にラインデータＩｍａｇ０ＬｉｎｅＮ０が含まれている。

【0092】

図６の（ｂ）図は、入力インターフェース２００に入力される画像ＩＤ２１の第１ライン信号を模式的に示している図である。横軸は時間を示す。第１ライン信号内にラインデータＩｍａｇ１ＬｉｎｅＮ１が含まれている。

【0093】

図６の（ｃ）図は、画像入力バッファ２０１ａから出力される第２ライン信号を模式的に示している図である。例えば、水平周期Ｈ１０、Ｈ１１のそれぞれを、３分の１とした水平周期Ｈ２０、Ｈ２１、Ｈ４２内に、ラインデータＩｍａｇ０ＬｉｎｅＮ０、Ｉｍａｇ１ＬｉｎｅＮ１がそれぞれ含まれている。水平周期Ｈ２０、Ｈ２１、Ｈ４２を合わせた長さが、図６の（ａ）図の下側の水平周期Ｈ１０に対応する。

【0094】

図６の（ｃ）図に示すように、画像入力制御部２０１は、図４と同様の処理により、リピート回数Ｒｎを２としてラインデータＩｍａｇ０ＬｉｎｅＮ０が含まれる第１ライン信号を処理する。また、画像入力制御部２０１は、図５と同様の処理により、リピート回数Ｒｎを１としてラインデータＩｍａｇ１ＬｉｎｅＮ１が含まれる第１ライン信号について処理する。

【0095】

このような処理により、３つの第１画像バッファ２０２ａには、それぞれ、ラインデータＩｍａｇ０ＬｉｎｅＮ０、Ｉｍａｇ０ＬｉｎｅＮ０、Ｉｍａｇ１ＬｉｎｅＮ１を含む信号が記憶され、上述のように異なる処理パラメータＰｒを用いて画像処理部２０２～２０４によりラインデータＩｍａｇ０ＬｉｎｅＮ０、Ｉｍａｇ０ＬｉｎｅＮ０、Ｉｍａｇ１ＬｉｎｅＮ１が順に処理される。

【0096】

そして、処理が終了すると、入力インターフェース２０５は、ＩＤｎ２０、２１、４２のそれぞれの処理後のラインデータを元の水平周期の信号として出力する。或いは、入力インターフェース２０５は、水平周期Ｈ２０、Ｈ２１、Ｈ４２のように水平周期を変更して出力してもよい。

【0097】

このように、ラインデータＩｍａｇ０ＬｉｎｅＮ０、ラインデータＩｍａｇ１ＬｉｎｅＮ１を含む第１ライン信号の水平周期を変更し、処理することにより、画像処理装置２０の処理速度に応じて処理時間を短縮可能となる。

【0098】

以上説明したように、本実施形態によれば、画像入力バッファ２０１ａは、第１ライン信号の中の画像データであるラインデータを順に記憶し、画像処理装置２０の処理能力に基づくタイミング制御信号に応じて、ラインデータを含み且つ対応する水平周期よりも短い時間範囲の第２ライン信号を出力する。そして、第１画像処理部２０２は、複数のラインバッファそれぞれに記憶される第２ライン信号に含まれるラインデータに対して異なる処理を順に施す。これにより、第１画像処理部２０２は、水平周期よりも短い時間でラインデータを読み込むことが可能となり、ラインデータの処理速度をより高速にできる。

【0099】

（変形例１）
変形例１は、入力インターフェース２００と、画像入力制御部２０１と、制御部２０７とを画像処理装置２０から分離し、画像入力制御装置２０ａと構成した点で一実施形態に係る画像処理システム１と相違する。以下では、一実施形態に係る画像処理システム１と相違する点を説明する。

【0100】

図７は、画像入力制御装置２０ａの構成を示すブロック図である。図７に示すように、画像入力制御装置２０ａは、入力インターフェース２００と、画像入力制御部２０１と、制御部２０７とを備える。これにより、画像入力制御装置２０ａは、上述の図４、図５、図６で説明しように、入力された第１ライン信号の水平周期の長さを変更した第１ライン信号を出力できる。また、第１ライン信号間の間隔も変更可能である。これにより、ネットワーク上の第２ライン信号の水平周期の長さ等を変更して、例えば他の画像処理装置２０に供給できる。

【0101】

以上、いくつかの実施形態を説明したが、これらの実施形態は、例としてのみ提示したものであり、発明の範囲を限定することを意図したものではない。本明細書で説明した新規な装置、方法及びプログラムは、その他の様々な形態で実施することができる。また、本明細書で説明した装置、方法及びプログラムの形態に対し、発明の要旨を逸脱しない範囲内で、種々の省略、置換、変更を行うことができる。

【0102】

なお、本技術は以下のような構成を取ることができる。
「請求項１０」 前記ラインデータ画像ＩＤ記憶部は、リードポインタを有し、前記リードポインタが指示する位置に、読み出し開始位置を示す前記画像入力バッファのアドレスを記憶しており、
前記画像入力バッファは、画像バッファリードポインタを有し、前記画像バッファリードポインタが示す位置のデータを読み出し、
前記画像バッファリードポインタは、前記読み出し開始位置を示す前記画像入力バッファのアドレスからデータ読みだしを開始し、前記画像バッファリードポインタは、前記繰り返し回数が満たされない場合には、読み出し完了後に前記読み出し開始位置を示す前記画像入力バッファのアドレスに戻される、請求項９に記載の画像処理装置。
「請求項１１」 前記ラインデータ画像ＩＤ記憶部は、前記ラインデータの識別番号であるＩＤを記憶しており、
前記画像入力バッファは、画像バッファリードポインタを有し、
前記画像バッファリードポインタは、前記ＩＤに基づき、前記読み出し開始位置を示す前記画像入力バッファのアドレスからデータ読みだしを開始する、請求項９に記載の画像処理装置。

【符号の説明】

【0103】

１：画像処理システム、１０ａ～１０ｎ：撮像装置、２０：画像処理装置、２０１：画像入力制御部、２０１ｂ：画像ＩＤ記憶部、２０１ｃ：リピートカウンタ、２０１ｄ：ＩＤ生成回路、２０２：第１画像処理部、２０２ａ：第１画像バッファ、２０２ｂ：第１内部状態保持部、２０３：第２画像処理部、２０３ａ：第２画像バッファ、２０３ｂ：第２内部状態保持部。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】