特許 5775570 マルチスペクトル感光素子及びそのサンプリング方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】5775570

(24)【登録日】2015年7月10日

(45)【発行日】2015年9月9日

(54)【発明の名称】マルチスペクトル感光素子及びそのサンプリング方法

(51)【国際特許分類】

   H04N 5/374 20110101AFI20150820BHJP

   H04N 5/345 20110101ALI20150820BHJP

   H04N 5/347 20110101ALI20150820BHJP

   H01L 27/146 20060101ALI20150820BHJP

【ＦＩ】

   H04N5/335 740

   H04N5/335 450

   H04N5/335 470

   H01L27/14 A

【請求項の数】10

【全頁数】28

(21)【出願番号】特願2013-512715(P2013-512715)

(86)(22)【出願日】2010年6月1日

(65)【公表番号】特表2013-529035(P2013-529035A)

(43)【公表日】2013年7月11日

(86)【国際出願番号】CN2010073443

(87)【国際公開番号】WO2011150554

(87)【国際公開日】20111208

【審査請求日】2012年12月11日

【前置審査】

(73)【特許権者】

【識別番号】512164975

【氏名又は名称】博立▲碼▼杰通▲訊▼（深▲せん▼）有限公司

【氏名又は名称原語表記】ＢＯＬＹ ＭＥＤＩＡ ＣＯＭＭＵＮＩＣＡＴＩＯＮＳ（ＳＨＥＮＺＨＥＮ）ＣＯ．，ＬＴＤ．

(74)【代理人】

【識別番号】110000659

【氏名又は名称】特許業務法人広江アソシエイツ特許事務所

(72)【発明者】

【氏名】胡 笑平

【審査官】 鈴木 肇

(56)【参考文献】

【文献】 特開２００６−１７４３２５（ＪＰ，Ａ）

【文献】 特開２００９−１５９１８６（ＪＰ，Ａ）

【文献】 特開２０１０−０２８７８１（ＪＰ，Ａ）

【文献】 特開２００４−２１５２４９（ＪＰ，Ａ）

【文献】 特開２００１−２３１００３（ＪＰ，Ａ）

【文献】 特表２００８−５４６３１３（ＪＰ，Ａ）

【文献】 特開２００９−０２１８０９（ＪＰ，Ａ）

【文献】 特開２０１０−０９８５４８（ＪＰ，Ａ）

【文献】 特開２００７−１９４４８８（ＪＰ，Ａ）

【文献】 米国特許出願公開第２００９／００６６７８２（ＵＳ，Ａ１）

【文献】 米国特許出願公開第２０１０／００５１７８４（ＵＳ，Ａ１）

【文献】 特開２０１０−１９３４３７（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｈ０４Ｎ ５／３０ − ５／３７８

Ｈ０４Ｎ ９／０４ − ９／１１

Ｈ０１Ｌ ２１／３３９

Ｈ０１Ｌ ２７／１４ −２７／１４８

Ｈ０１Ｌ ２９／７６２

(57)【特許請求の範囲】

【請求項1】

行と列とで配列されている画素アレイと、
前記画素アレイにおける隣接する同行異列、異行同列、又は異行異列のいずれかの画素をそれぞれ合併してサンプリングを行い、第一の合併画素のサンプリングデータを取得するための、少なくとも同行異列の異なる色彩画素を合併することを含む第一の合併ユニットと、
前記第一の合併ユニットが取得した前記第一の合併画素のサンプリングデータに対して合併とサンプリングとを行い、第二の合併画素のサンプリングデータを取得するための第二の合併ユニットと、を含み、
前記第一の合併ユニット又は前記第二の合併ユニットの画素合併方式は、同一な又は異なる色彩画素間の電荷累積方式又は二つの異なる色彩画素間の信号平均方式であり、前記異なる色彩画素間の画素合併方式が色彩空間変換の方式に従い、
前記電荷累積方式が読み込みコンデンサで遂行され、
前記画素アレイは少なくとも１つの基本画素を含む複数のマクロ画素から構成されており、
前記マクロ画素は、４つのマトリックス配列の画素と両行中間に位置する２つの非透光の読み込みコンデンサから組成されており、上一行の画素と下一行の画素が１つの読み込みコンデンサを共用し、２つの読み込みコンデンサの間に電荷転送を実現でき、且つ少なくとも１つの読み込みコンデンサに読み込み回路が接続される組成方式を含んでいることを特徴とし、行アドレスと列アドレスの両方を有するマルチスペクトル感光素子。

【請求項2】

前記第二の合併ユニットが取得した前記第二の合併画素のサンプリングデータに対して合併とサンプリングとを行い、第三の合併画素のサンプリングデータを取得するための第三の合併ユニットを更に含むことを特徴とする請求項１に記載のマルチスペクトル感光素子。

【請求項3】

前記第一の合併ユニット又は前記第二の合併ユニットの色彩に基づく合併とサンプリングの方式が同色合併方式、異色合併方式、複合合併方式、又は余った色彩を選択的に放棄する合併方式のいずれか一種以上の方式を含んでおり、且つ前記第一の合併ユニットと前記第二の合併ユニットが用いた合併とサンプリングの方式が異なる場合に、少なくとも一方の合併ユニットに於いて同色合併方式が採用されないことを特徴とする請求項１又は２に記載のマルチスペクトル感光素子。

【請求項4】

前記第一の合併ユニット又は第二の合併ユニットの位置に基づく合併とサンプリングの方式は、バスに直接出力する信号自動平均方式と、行飛ばし又は列飛ばし方式とから選択される少なくとも一種の方式を含むことを特徴とする請求項１から３のいずれかに記載のマルチスペクトル感光素子。

【請求項5】

前記第三の合併とサンプリングのユニットの合併とサンプリングの方式は、色彩空間変換方式又はバックエンドデジタル画像拡大縮小方式の少なくとも一種を含み、
前記色彩空間変換は、ＲＧＢからＣｙＹｅＭｇＸ空間への変換と、ＲＧＢからＹＵＶ空間への変換と、ＣｙＹｅＭｇＸからＹＵＶ空間への変換から選択されるいずれかの１種の変換を含んでおり、前記Ｘとは、Ｒ、Ｇ、Ｂのいずれか１種であることを特徴とする請求項２に記載のマルチスペクトル感光素子。

【請求項6】

前記基本画素が受動画素又は能動画素であることを特徴とする請求項１から５のいずれかに記載のマルチスペクトル感光素子。

【請求項7】

前記マクロ画素における前記基本画素が、マトリックス状又はハニカム状に配列されていることを特徴とする請求項６に記載のマルチスペクトル感光素子。

【請求項8】

前記マクロ画素の組成方式は、読み込みコンデンサを持たない３Ｔ能動画素組成方式と、一つの読み込みコンデンサを備えた４Ｔ能動画素組成方式と、から選択される少なくとも１種の方式を含むことを特徴とする請求項６に記載のマルチスペクトル感光素子。

【請求項9】

前記１つの読み込みコンデンサを備えた４Ｔ能動画素が、４点共有方式、６点共有方式、又は８点共有方式のいずれかを用いることを特徴とする請求項８に記載のマルチスペクトル感光素子。

【請求項10】

前記マクロ画素は２点によって共有、３点によって共有、又は４点によって共有される読み込みコンデンサを備えている、３Ｔ能動画素又は４Ｔ能動画素を有する少なくとも一つの基本画素から組成されており、前記基本画素は、４点橋絡共有方式、６点橋絡共有方式、又は８点橋絡共有方式を用いることを特徴とする請求項６に記載のマルチスペクトル感光素子。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は感光チップの感光画素の読み込みに関し、特に、大型アレイ感光チップの感光画素のサブサンプリングデータ（下位のサンプリングデータ）の読み込みに関する。具体的には、本発明はマルチスペクトル感光素子（多重分光感光素子）及びそのサンプリング方法に関することである。

【背景技術】

【0002】

本発明は、本発明者による、発明の名称「マルチスペクトル感光素子及びその製造方法」（ＰＣＴ／ＣＮ２００７／０７１２６２）と、発明の名称「マルチスペクトル感光素子及びその製造方法」（中国出願番号：２００８１０２１７２７０．２）に引き続く出願であり、更に具体的な、且つ最適な半導体回路及びチップレベルの実現を提供することを旨とする。

【0003】

従来の感光素子では、カラー可視光を検出するか、又は赤外光を検出するかであるが、両者を同時に検出するものがほとんどない。またその他の発明又は出願がある。例えば、インジウム・カドミウムの半導体技術を用い、可視と赤外光の検出を同時に実現する（「Ｓｉｌｉｃｏｎ ｉｎｆｒａｒｅｄ ｆｏｃａｌ ｐｌａｎｅ ａｒｒａｙｓ、 Ｍ． Ｋｉｍａｔａ、 ｉｎ Ｈａｎｄｂｏｏｋ ｏｆ Ｉｎｆｒａｒｅｄ Ｄｅｔｅｃｔｉｏｎ Ｔｅｃｈｎｏｌｏｇｉｅｓ、 ｅｄｉｔｅｄ ｂｙ Ｍ． Ｈｅｎｉｎｉ ａｎｄ Ｍ． Ｒａｚｅｇｈｉ、 ｐｐ． ３５２−３９２、 Ｅｌｓｅｖｉｅｒ Ｓｃｉｅｎｃｅ Ｌｔｄ．、 ２００２）。しかしながら、それらはカラー（色彩）を得られない。従来のカラー感光（可視光線の感光）と赤外感光とを同時に取得する方法は、一つのカラー感光素子と一つの赤外感光素子を、物理的に重ね合わせる（例えば「Ｂａｃｋｓｉｄｅ−ｈｙｂｒｉｄ Ｐｈｏｔｏｄｅｔｅｃｔｏｒ ｆｏｒ ｔｒａｎｓ−ｃｈｉｐ ｄｅｔｅｃｔｉｏｎ ｏｆ ＮＩＲ ｌｉｇｈｔ」、 ｂｙ Ｔ． Ｔｏｋｕｄａ ｅｔ ａｌ．、 ｉｎ ＩＥＥＥ Ｗｏｒｋｓｈｏｐ ｏｎ Ｃｈａｒｇｅ−ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅｓ ＆ Ａｄｖａｎｃｅｄ Ｉｍａｇｅ Ｓｅｎｓｏｒｓ、 Ｅｌｍａｕ、 Ｇｅｒｍａｎｙ、 Ｍａｙ ２００３、 及び「Ａ ＣＭＯＳ ｉｍａｇｅ ｓｅｎｓｏｒ ｗｉｔｈ ｅｙｅ−ｓａｆｅ ｄｅｔｅｃｔｉｏｎ ｆｕｎｃｔｉｏｎ ｕｓｉｎｇ ｂａｃｋｓｉｄｅ ｃａｒｒｉｅｒ ｉｎｊｅｃｔｉｏｎ」、 Ｔ． Ｔｏｋｕｄａ ｅｔ ａｌ．、 Ｊ． Ｉｎｓｔ Ｉｍａｇｅ Ｉｎｆｏｒｍａｔｉｏｎ ＆ Ｔｅｌｅｖｉｓｉｏｎ Ｅｎｇ．、 ６０（３）：３６６−３７２、 Ｍａｒｃｈ ２００６）。

【0004】

本発明者による「マルチスペクトル感光素子及びその製造方法」（ＰＣＴ／ＣＮ２００７／０７１２６２、特許文献１）と「マルチスペクトル感光素子及びその製造方法」（中国出願番号：２００８１０２１７２７０．２特許文献２）は、カラー可視光線像と赤外画像とを同時に取得できる新たなマルチスペクトル感光素子の製造方法が提案されている。このような新たな感光素子は、感光素子ダイナミックレンジを極めて大きく広げて、これで自動車、防犯用品、警備用品等の分野の高性能要求を満たした。その上、それを例えば携帯電話用のカメラのような寸法の小さいカラー感光素子に用いると、画像品質を大幅に向上させることができる。更に、それらが従来のＣＭＯＳ、ＣＣＤ、又は他の半導体感光素子製造技術を用いて製造されてもよく、且つ、各種の技術にも非常に多い且つ効果的な製造方法及び構造設計がある。本発明は主に少数の幾つかの種類の、ＣＭＯＳ／ＣＣＤ半導体技術を用いる製造方法を提案する。

【0005】

しかしながら、この新たな二重層（双層）又は多重層（多層）の感光素子は、一つの新たな問題をもたらす。即ち、データ量が従来の単層の感光素子の二倍、もしくは、更に多い。二重層感光素子は半分の画素のみによって単層感光素子と同一な解像度を取得できる。しかしながら、大型アレイの感光素子のデータを高速に処理することは、依然として改善する必要がある１つの問題である。

【0006】

近年、優れた方法が提案されている。例えば、大型アレイ画像に対して高性能のサブサンプリングを行い、読み込み回路共有、行ビニング（Ｒｏｗ Ｂｉｎｎｉｎｇ）及び列ビニング（Ｃｏｌｕｍｎ Ｂｉｎｎｉｎｇ）のサンプリング技術（例えば米国特許第６，８０１，２５８Ｂ１号， 米国特許第６，６９３，６７０Ｂ１号，米国特許第７，０９１，４６６Ｂ２号，米国特許第７，３１９，２１８Ｂ２号等）が挙げられる。言及に値する特許は、米国特許第６，６９３，６７０号， 米国特許第７，０９１，４６６号及び米国特許第７，３１９，２１８号である。これら特許は、効果が良く且つ便利な手段を提供し、Ｎ行Ｎ列又はＭ行Ｎ列の併用を実現した。

【0007】

しかしながら、これらサブサンプリング技術が最適ではない。例えば、行ビニングと列ビニングを用いるサブサンプリング技術はＮ個の点を１つの点に合併（組み合わせ）することにより、画像信号対雑音比の改善が最高でもＮ^１／２ （米国特許第７，０９１，４６６号， 米国特許第７，３１９，２１８号を参照）である。これは行ビニングと列ビニングがただ信号を平均化するからであり、ランダムノイズの分散のみをＮ^１／２（ルートＮ）倍低減し、有用な信号自身の強度が増強されず、ただ幾つかの点の平均値で取り替える。通常、画像信号には緩変低周波数の固定ノイズもあり、この部分のノイズも減少しない。

【0008】

また、従来のサブサンプリング技術はただ単独にＢａｙｅｒパターン（Ｂａｙｅｒ図案、Ｂａｙｅｒ配列）又はＣＹＭＧ四色パターン（ＣＹＭＧカラーパターン）配列の感光チップのサブサンプリングの需要を考えており、後の計算の簡単化を考えない。例えば、１つのＢａｙｅｒパターンのカラー画像は、米国Ｍｉｃｒｏｎ Ｔｅｃｈｎｏｌｏｇｉｅｓ Ｉｎｃ．の行ビニングと列ビニングのサンプリング技術（米国特許第７，０９１，４６６号，米国特許第７，３１９，２１８号）を通した後、依然として１つのＢａｙｅｒパターンであり、複雑な処理によってプレビューと記憶段階で好ましいＹＵＶ画像を取得できる。信号対雑音比を改善できる他のサブサンプリング回路が、複雑な積分回路と比較器を用いる必要があり、これで補助回路の増加と周波数の増加となる。

【0009】

また現状のサブサンプリング技術には大きな制限がある。つまり、行ビニングと列ビニングは、同一な、且つ空間で隣接（中間は他の画素で隔てられる）しない色彩画素間のみに行われる。Ｂａｙｅｒパターン又はＣＹＭＧ四色パターンにとって、同一な色彩画素で、空間で隣接しておらず、行ビニングと列ビニングとを行った後の画像は、既に原画像（原始画像）の空間上の均一分布の特徴を破壊している。このため、バックエンド処理（最終段階の処理、後端処理）がこのような場合に適応しないと、直線エッジには、鋸歯効果が生じやすくなる。

【0010】

本発明が注目する二重層又は多重層感光素子にとっては、従来技術が窮屈でありふれたものになる。これは二重層又は多重層感光素子が非常に優れたしかし全体に新しい色彩のパターン（色彩図案）配列を提供するためであり、信号読み込みにもサブサンプリングにも、二重層又は多重層感光素子の特徴に対する、改善を行わなければならない。

【先行技術文献】

【特許文献】

【0011】

【特許文献1】国際出願第ＰＣＴ／ＣＮ２００７／０７１２６２号

【特許文献2】中国特許出願第２００８１０２１７２７０．２号

【特許文献3】米国特許第６，８０１，２５８Ｂ１号

【特許文献4】米国特許第６，６９３，６７０Ｂ１号

【特許文献5】米国特許第７，０９１，４６６Ｂ２号

【特許文献6】米国特許第７，３１９，２１８Ｂ２号

【非特許文献】

【0012】

【非特許文献1】「Ｓｉｌｉｃｏｎ ｉｎｆｒａｒｅｄ ｆｏｃａｌ ｐｌａｎｅ ａｒｒａｙｓ」 Ｍ． Ｋｉｍａｔａ、 Ｈａｎｄｂｏｏｋ ｏｆ Ｉｎｆｒａｒｅｄ Ｄｅｔｅｃｔｉｏｎ Ｔｅｃｈｎｏｌｏｇｉｅｓ、 編集者 Ｍ． Ｈｅｎｉｎｉ ａｎｄ Ｍ． Ｒａｚｅｇｈｉ、 ｐｐ． ３５２−３９２、 Ｅｌｓｅｖｉｅｒ Ｓｃｉｅｎｃｅ Ｌｔｄ．、 ２００２年

【非特許文献2】「Ｂａｃｋｓｉｄｅ−ｈｙｂｒｉｄ Ｐｈｏｔｏｄｅｔｅｃｔｏｒ ｆｏｒ ｔｒａｎｓ−ｃｈｉｐ ｄｅｔｅｃｔｉｏｎ ｏｆ ＮＩＲ ｌｉｇｈｔ」、 ｂｙ Ｔ． Ｔｏｋｕｄａら、 ＩＥＥＥ Ｗｏｒｋｓｈｏｐ ｏｎ Ｃｈａｒｇｅ−ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅｓ ＆ Ａｄｖａｎｃｅｄ Ｉｍａｇｅ Ｓｅｎｓｏｒｓ、 Ｅｌｍａｕ、 Ｇｅｒｍａｎｙ、 ２００３年５月

【非特許文献3】「Ａ ＣＭＯＳ ｉｍａｇｅ ｓｅｎｓｏｒ ｗｉｔｈ ｅｙｅ−ｓａｆｅ ｄｅｔｅｃｔｉｏｎ ｆｕｎｃｔｉｏｎ ｕｓｉｎｇ ｂａｃｋｓｉｄｅ ｃａｒｒｉｅｒ ｉｎｊｅｃｔｉｏｎ」、 Ｔ． Ｔｏｋｕｄａら、 Ｊ． Ｉｎｓｔ Ｉｍａｇｅ Ｉｎｆｏｒｍａｔｉｏｎ ＆ Ｔｅｌｅｖｉｓｉｏｎ Ｅｎｇ．、 ６０（３）：３６６−３７２、 Ｍａｒｃｈ ２００６

【発明の概要】

【発明が解決しようとする課題】

【0013】

本発明の目的は更に優れたサブサンプリング原理及び先進的なサブサンプリング回路を提出し、且つサブサンプリングとその後の画像処理を合わせて最適化することにある。本発明はマルチスペクトル感光素子及びそのサンプリング方法を提供し、これで二重層又は多重層マルチスペクトル感光チップのデータ量が相対的に大きいという微弱な不具合を克服する。ここで、サンプリング方法は主にサブサンプリングを含むが、全画像サンプリングもカバーしている。本発明は二重層又は多重層マルチスペクトル感光素子に限定されず、単層の感光素子にとって、同様に適用される。

【0014】

本発明を便利に説明し、且つそれと従来技術との区別を解釈するために、二重層感光素子、両面（双面）感光素子、及び双方向（双向）感光素子の定義を提供する。ここで、二重層感光素子とは、感光画素が物理的に両層（例えば本発明者の発明出願「マルチスペクトル感光素子及びその製造方法（ＰＣＴ／ＣＮ２００７／０７１２６２）」に記載）の両層感光素子と区別され、層ごとに特定のスペクトルを感応する感光画素が含まれる。両面感光素子とは、感光素子が２つの感光表面を有し、両方の面とも少なくとも１つの方向から感光できる。双方向感光素子とは、感光素子能が２つの（通常、互に１８０度となる）方向から感光でき、即ち、感光素子の正面と背面から感光できる。

【0015】

１つの感光素子は二重層、両面（双面）及び双方向の３つの特徴のうち１つ以上の特徴を同時に有してもよい。

【課題を解決するための手段】

【0016】

上述の技術的課題を解決するために、本発明が以下のような技術的解決策を用いる。

【0017】

本発明は、マルチスペクトル感光素子であって、行と列とで配列されている画素アレイと、
前記画素アレイにおける隣接する同行異列、異行同列、又は異行異列の画素間を両々合併してサンプリングを行い、第一の合併画素のサンプリングデータを取得するための第一の合併ユニットと、
第一の合併ユニットが取得した第一の合併画素のサンプリングデータに対して合併とサンプリングとを行い、第二の合併画素のサンプリングデータを取得するための第二の合併ユニットと、を含むマルチスペクトル感光素子、を特徴とする。

【0018】

前記マルチスペクトル感光素子は、さらに第二の合併ユニットが取得した第二の合併画素のサンプリングデータに対して合併とサンプリングとを行い、第三の合併画素のサンプリングデータを取得するための第三の合併ユニットを更に含む。

【0019】

前記マルチスペクトル感光素子によれば、前記第一の合併ユニット又は第二の合併ユニットの画素合併方式は、同一な又は異なる色彩画素間の電荷累積方式（電荷重畳方式、ｃｈａｒｇｅ ｓｕｐｅｒｐｏｓｉｔｉｏｎ 方式）又は２つの異なる色彩画素間の信号平均方式であり、その内、異なる色彩画素間の画素合併方式（電荷累積方式又は信号平均方式を含む）が色彩空間の変換の方式に従って、これで色彩の再構築の要求を満たす。

【0020】

前記マルチスペクトル感光素子によれば、前記電荷累積方式が読み込みコンデンサ（ＦＤ、読み取りキャパシタ）で遂行（完成）される。

【0021】

前記マルチスペクトル感光素子によれば、前記第一の合併ユニット又は第二の合併ユニットで機能する、色彩に基づく合併とサンプリングの方式は、同色合併方式、異色合併方式、複合合併方式、又は余った色彩を選択的に放棄する合併方式を含む。且つ第一の合併ユニットと第二の合併ユニットの合併とサンプリングの方式は、同時に同色合併方式が機能することはない。即ち二つの合併ユニットにおいて、少なくとも一つの合併ユニットが同色合併方式を用いない。

【0022】

前記マルチスペクトル感光素子によれば、前記第一の合併ユニット又は第二の合併ユニットの位置に基づく合併とサンプリングの方式は、バスに直接出力する信号自動平均方式、行飛ばし（行スキップ）又は列飛ばし（列スキップ）方式、及び逐次サンプリング方式の少なくとも一種を含む。これらの位置に基づく合併とサンプリングの方式は単独に使用されてもよく、組み合わされて使用されてもよい。

【0023】

前記マルチスペクトル感光素子によれば、前記第三の合併ユニットの合併とサンプリングの方式は、色彩空間変換方式及びバックエンドデジタル画像拡大縮小方式（後端デジタル画像拡大縮小方式）の少なくとも１種を含む。

【0024】

前記マルチスペクトル感光素子によれば、前記色彩空間変換は、ＲＧＢからＣｙＹｅＭｇＸ空間への変換、ＲＧＢからＹＵＶ空間への変換、又はＣｙＹｅＭｇＸからＹＵＶ空間への変換を含み、その内、ＸがＲ（赤）、Ｇ（緑）、Ｂ（青）のいずれか１種である。

【0025】

前記マルチスペクトル感光素子によれば、前記画素アレイは少なくとも１つの基本画素を含む複数のマクロ画素から構成され、その内、基本画素が受動画素（パッシブ素子）又は能動画素（アクティブ素子）であってよい。

【0026】

前記マルチスペクトル感光素子によれば、前記マクロ画素における基本画素がマトリックス状（格子状）又はハニカム状（蜂の巣状）で配列される。

【0027】

前記マルチスペクトル感光素子によれば、前記マクロ画素の組成方式は、読み込みコンデンサ（ＦＤ）を持たない３Ｔ能動画素組成方式と、１個の読み込みコンデンサ（ＦＤ）を備えた４Ｔ能動画素組成方式の少なくとも１種を含んでよい。

【0028】

前記マルチスペクトル感光素子によれば、各マクロ画素の、１つの読み込みコンデンサ（ＦＤ）を備えた４Ｔ能動画素は、４点、６点、又は８点によって共有される読み取り回路を採用する。

【0029】

前記マルチスペクトル感光素子によれば、前記マクロ画素は、４つのマトリックス配列された画素と、二つの行の中間に位置する二つの非透光（不透明）な読み込みコンデンサ（ＦＤ）から構成され、上一行の画素と下一行の画素とが１つの読み込みコンデンサ（ＦＤ）を共有し、２つの読み込みコンデンサ（ＦＤ）の間で電荷の移動を実現することができ、且つ少なくとも１つの読み込みコンデンサに読み込み回路が接続される組成方式を含むことができる。

【0030】

前記マクロ画素は、２点によって共有、３点によって共有、又は４点によって共有される読み込みコンデンサ（ＦＤ）付きの３Ｔ又は４Ｔ能動画素を有する少なくとも一つの基本画素から組成されてもよい。また、基本画素は、４点橋絡共有方式（橋式共有方式）、６点橋絡共有方式、又は８点橋絡共有方式を適用される読み込み回路を採用してもよい。

【0031】

前記マルチスペクトル感光素子によれば、各マクロ画素が２点、３点、又は４点によって共有される読み込みコンデンサ（ＦＤ）付きの３Ｔ能動画素または４Ｔ能動画素を有する基本画素から組成され、基本画素は、４点橋絡共有方式、６点橋絡共有方式、又は８点橋絡共有方式を適用される読み込み回路を採用してもよい。

【0032】

前記マルチスペクトル感光素子によれば、前記マルチスペクトル感光素子の全画像サンプリング方式は、プログレッシブ走査を行って且つプログレッシブ読み込みを行う方式、若しくはプログレッシブ走査を行って且つインターレース（又はインターライン）読み込みを行う方式のいずれかを含むことができる。

【0033】

本発明は、マルチスペクトル感光素子のサンプリング方法を更に開示する。この方法は、以下のステップを含む。すなわち、前記画素アレイにおける隣接する同行異列、異行同列、又は異行異列の画素の間をそれぞれ合併（結合）してサンプリングを行い、第一の合併画素のサンプリングデータを取得するための第一の合併プロセスと、第一の合併プロセスが取得した第一の合併画素のサンプリングデータに対して合併とサンプリングとを行い、第二の合併画素のサンプリングデータを取得するための第二の合併プロセスと、を含む。

【0034】

前記サンプリング方法は、さらに、第二の合併プロセスが取得した第二の合併画素のサンプリングデータに対して合併とサンプリングとを行い、第三の合併画素のサンプリングデータを取得するための第三の合併プロセスを含む。

【0035】

前記サンプリング方法によれば、前記第一の合併プロセス又は第二の合併プロセスの画素の合併とサンプリングの方式は、同一な又は異なる色彩の画素間の電荷累積方式（ｃｈａｒｇｅ ｓｕｐｅｒｐｏｓｉｔｉｏｎ）又は異なる色彩の画素間の信号平均方式であり、その内、異なる色の画素の合併方式（電荷累積方式又は信号平均方式を含む）は色彩空間変換の方式に従って組み合わされて、これにより色彩再構築の要求を満たす。

【0036】

前記サンプリング方法によれば、前記第一の合併プロセス又は第二の合併プロセスで機能する色彩に基づく合併とサンプリングの方式は、同色合併方式、異色合併方式、複合合併方式、又は余った色彩を選択的に放棄する方式を含む。且つ第一の合併プロセスと第二の合併プロセスの少なくとも一方の合併プロセスは、同色合併方式を用いない。

【0037】

前記サンプリング方法によれは、前記第一の合併プロセス又は第二の合併とサンプリングのプロセスで機能する、位置に基づく合併とサンプリングの方式は、バスに直接出力する信号自動平均方式、行飛ばし（行スキップ）又は列飛ばし（列スキップ）方式、及び逐次サンプリング方式の少なくとも一種を含む。

【0038】

前記サンプリング方法によれば、前記第三の合併とサンプリングのプロセスが行う合併とサンプリングの方式は、色彩空間変換（ｃｏｌｏｒ ｓｐａｃｅ ｃｏｎｖｅｒｓｉｏｎ）方式とバックエンドデジタル画像拡大縮小（ｂａｃｋｅｎｄ ｄｉｇｉｔａｌ ｉｍａｇｅ ｓｃａｌｉｎｇ）方式の少なくとも一つを含む。

【0039】

前記サンプリング方法によれば、前記色彩空間の変換は、ＲＧＢからＣｙＹｅＭｇＸ空間への変換、ＲＧＢからＹＵＶ空間への変換、又はＣｙＹｅＭｇＸからＹＵＶ空間への変換を含み、その内、ＸがＲ（赤）、Ｇ（緑）、Ｂ（青）のいずれか一種である。

【0040】

前記サンプリング方法によれば、その全画像のサンプリングの方式は、プログレッシブ走査を行い且つプログレッシブ読み込み方式を行う方式、又はプログレッシブ走査を行い且つインターレース（又はインターライン）読み込みを行う方式のいずれかを含む。

【発明の効果】

【0041】

本発明の有益な技術的効果は以下の通りである。

【0042】

本発明は、サブサンプリングを少なくとも２つのプロセスに分ける。即ち前述の第一の合併とサンプリングのプロセスと第二の合併とサンプリングのプロセスである。第一の合併とサンプリングのプロセスと第二の合併とサンプリングのプロセスは、通常、画素の行の（合併）サンプリングと列の（合併）サンプリングの間に行われる。主にアナログ信号に対して行われ、電荷累積部分を除き、通常、第一の合併とサンプリングのプロセスのみで行われるほかに、その順序及び内容を一般に交換してもよい。また、第三の合併とサンプリングのプロセスを含んでよく、第三の合併とサンプリングのプロセスはアナログ・デジタル変換の後に行われ、主にデジタル信号に対して行われる。

【0043】

第一の合併とサンプリングのプロセスでは、画素アレイにおいて２つのすぐ隣に隣接する画素が結合される（合併を行う）。一方、隣接する画素の合併が完成したとき、本文では、合併後の画素を第一の合併画素（第一の結合画素）として参照する。第一の合併画素は、ただ本発明を便宜的に説明するためのものであり、この概念を用いて第一の合併プロセスを行った後の画素を示すもので、物理的には、画素アレイに１つの「第一の合併画素」が存在することを示さない。２つの隣接する画素の合併とサンプリング後のデータを「第一の合併画素のサンプリングデータ」と称する。ここで、隣接とは、２つの画素の間が水平、垂直、又は対角方向から見て近接しており、中間に他の画素がないことを言う。隣接する場合には、同行異列、異行同列、又は異行異列を含む。一般的に、このような合併では、信号が少なくとも２つの画素の信号平均となるが、ノイズがＮ^１／２（ルートＮ，Ｎの正の平方根）低減し、このため、合併後、少なくとも信号対雑音比をＮ^１／２倍（ルートＮ倍）上げることができる。またこのような合併は、同一な又は異なる色彩の画素の間で行われてもよい。他方、２つの合併する画素の色彩が異なってもよい。即ち色の累積（追加）又は色の平均化が行われる。色彩の三原色原理として知られているとおり、二種類の原色の累積がもう一つの原色の補色であり、つまり、二つの異なる原色の画素が合併すると、もう一つの原色の補色を生じる。色彩空間の変換は、原色空間から補色空間への移動だけが要求される。異なる補色によって色彩の再構築が完成される。即ち、本発明によれば、異なる色彩の画素の合併を実現することができて、信号対雑音比を向上させ、それとともにカラーの再構築を行うことができる。サブサンプリングのプロセス全体もこれによって最適化され、大データ量の画素アレイの高速需求に更に適応される。色彩空間変換のための一つの基本的な要求は、変換後の色彩の組み合わせが（挿入値等の手段を介する）要求されたＲＧＢ（又はＹＵＶ、又はＣＹＭＫ）色彩を再構築できることである。

【0044】

通常、画素アレイは複数の画素を含んでおり、且つ第一の合併とサンプリングではただ２つの画素を合併するため、合併で形成された第一の合併画素は複数存在する。異なる第一の合併画素にとって、それが用いた色彩合併方式は、同一であってもよく、異なってもよい。第一の合併全体が同一の色彩を持つ画素の間で行われる場合に、それを同色合併方式と称する。第一の合併全体が異なる色彩の画素間で行われる場合に、それを異色合併方式と称する。第一の合併の一部が同一な色彩の画素間で行われ、一部が異なる色彩間で行われる場合に、それを複合合併方式と称する。画素アレイにおける余った色彩を放棄（放棄は選択的なものであり、例えば、これによってカラー再構築に影響してはいけない）する場合に、このような色彩合併方式を、余剰カラーの選択的放棄方式と称する。

【0045】

第二の合併プロセスは複数の第一の合併画素に対する操作である。同様に、色彩が同一な第一の合併画素を合併してもよく、色彩が異なる第一の合併画素を合併してもよい（この場合に、三原色の全部累積となってカラーを再構築できない可能性がある）。

【0046】

上述の同色合併、異色合併、複合合併等の方式は、合併とサンプリングとを色彩に基づいて分類したものである。これに加えて、合併とサンプリングの位置の選択した角度から、第一の合併プロセスと第二の合併プロセスの合併とサンプリング方式は、同じバスに直接出力する信号自動平均方式、行飛ばし（行スキップ）又は列飛ばし（列スキップ）方式、逐次サンプリング方式（一対一サンプリング方式）、及びこれら方式の二種又は三種の組み合わせを含む。第一の合併とサンプリングのプロセスのみで行われる電荷累積部分を除き、第一の合併プロセスと第二の合併プロセスは、順序が異なる以外、その方式は同一であって、交換可能である。

【0047】

バスに直接出力する信号自動平均方式とは、合併する必要がある信号（色彩が同一又は異なる）を、データ収集バスに同時に出力し、（電圧）信号の自動的な平衡によって、合併する必要がある信号の平均値を取得する。行飛ばし又は列飛ばし方式とは行又は列を飛ばすことによって、データ量を低減する方式によって（合併と）サンプリングとを実現する。逐次サンプリング方式とは、実際にいずれかの合併も行わずに、これによって元の画素又は第一の合併画素を読み込む。この３つの方式が同時に使用されてもよく、例えば、行飛ばし又は列飛ばし方式がバスに直接出力する信号自動平均方式又は逐次サンプリング方式と同時に使用されてもよい。

【0048】

第三の合併とサンプリングのプロセスのサブサンプリング方式は、色彩空間変換方式、バックエンドデジタル画像拡大縮小方式、及びこの２つの方式の連続の使用を含む。第一と第二の合併プロセスは主にアナログ信号で行われるが、第三のサブサンプリングプロセスが主にデジタル信号で行われる。即ちアナログ・デジタル変換の後に行われる。異なる空間位置にある３つ又は４つの色彩画素を、同一な点の値としてまた１つの色彩空間に転換する。これにより、水平方向及び（又は）垂直方向においてデータの減少を実現でき、これでサブサンプリングの効果が達成される。デジタル画像拡大縮小方式は、最も直感的に理解できる、一般に利用可能なサブサンプリング方式である。

【0049】

本発明はサンプリングを合併する時に最初に電荷累積を実現する。従来の合併とサンプリングは、ほとんど電圧又は電流信号を平均することによって行われており、このような方式がＮ点を合併する場合に、信号対雑音比を、最大でＮ^１／２（ルートＮ）倍増加させる。これは、現在の合併とサンプリングがいずれもＮ個の同一な色彩の画素を１本の出力線を共用する方式によって、合併とサンプリングとを行い、この出力線において、各画素の電圧又は電流信号について、必ず（自動的に）平均を求めているためである。このため、その信号対雑音比の向上がただノイズ合併後にＮ^１／２（ルートＮ）低減し、これで信号対雑音比を最大Ｎ^１／２（ルートＮ）倍上げていた。しかし、本発明の電荷累積方式によれば、例えば読み込みコンデンサを介して電荷を記憶し、電荷の累積を実現し、これで信号が重ね合わされて信号対雑音比が少なくともＮ倍上がり、信号平均の方法に比べて、少なくともＮ^１／２（ルートＮ）倍高くなる。つまり、Ｎ個の信号を電荷累積法で合併することで、理論上、最高ではＮ２つの信号を平均する効果又はよりよい効果を達成できる（例えば以下の記載するよう）。これが信号対雑音比を向上させた効果的な手段である。

【0050】

もう一つの顕著な効果は、隣接する（隣り合う）画素の累積が更に、画素の間の相互干渉（ｃｒｏｓｓ−ｔａｌｋｉｎｇ）効果が低減されるということでもたらされる。これは本来相互干渉する色彩が、現在では合理的に（合法的に）一体となることである。つまり、本来ノイズに属する一部信号が、現在有効な信号部分となり、このため、Ｎ個の信号の電荷累積が信号対雑音比の改善となり、理論上の上限に接近でき、即ちＮ×Ｎ^１／２倍となる。これは、Ｎ３個の信号を平均する効果に相当する。

【0051】

電荷累積は合併とサンプリングとにおいて効果的な手段であり、しかし、それが合併する画素が空間上相隣する必要がある。従来の、サブサンプリングが行われない原因は、従来のサブサンプリングが単に同一な色彩の画素の間で行われるが、合併される画素の間に他の画素を隔てていると、電荷累積を実現できない。多重層感光素子は、色彩のパターンが非常に豊かであるため、電荷累積の実現がより簡単である。本発明の色彩空間変換の方法によれば、単層感光素子上に電荷累積を簡単に実現できる。

【0052】

本発明が全画像サンプリング（即ち１つの画像に対して最高解像度比率でサンプリングを行う）を行う場合に、プログレッシブ走査を行って且つインターレース（又はインターライン）読み込みを行う方式を用いることで、クロック速度を上げず、かつフレームバッファを用いずに、単一の写真を取る場合に大型アレイ画像の全画像読み込みフレームレートを倍にする。ＡＤ転換器と行バッファを増加すると、全画像読み込みフレームレートを更に上げることができる。この方法は機械シャッターを省くことに対して重要な価値がある。

【0053】

本発明のプログレッシブ走査を行って且つインターレース（又はインターライン）読み込みを行う方式は、伝統的なテレビシステムにおける交互配置された走査方式（ｉｎｔｅｒｌｅａｖｅｄ ｓｃａｎｎｉｎｇ）とは異なる。伝統的な交互配置された走査方式は、インターレース走査であり、インターレース方式で読み込む。このため、奇数フィールド及び偶数フィールドの間の時間（感光時間、読み込み時間に拘わらず）では１つのフィールド分が異なり、即ちハーフフレーム分が異なる。しかし、本発明のプログレッシブ走査でインターレース（又はインターライン）読み込みを行う方式においては、画素の感光（検出）の時間系列の順序は、プログレッシブ走査でプログレッシブ読み込みを行う方式と完全に同一であり、ただ行の読み込み順序が変化している。

【0054】

本発明は実施例によって新たな、威力がより強く、適応面がより広い感光素子及びそのサブサンプリング方法を説明する。これらの最適な実現方法は、単に例として本発明及び本発明者の以前の関連発明の特長及び実現方法を説明するが、これら発明の保護範囲を制限するものではない。

【0055】

本分野の技術者にとって、本発明の上述及びそのほかの目的及び特長が、以下の最適な、複数の図面をつける実現例の細部を読んだ後、明らかになる。

【図面の簡単な説明】

【0056】

【図1】図１は、ＣＭＯＳ受動画素のための読み込み（サンプリング）回路である。

【図2】図２は、ＣＭＯＳ ３Ｔ能動画素のための読み込み（サンプリング）回路である。

【図3】図３は、ＣＭＯＳ ４Ｔ能動画素のための読み込み（サンプリング）回路である。

【図4a】図４ａは、ＣＭＯＳ能動画素の読み込み（サンプリング）回路と行アドレス選択回路のそれぞれとの関係である。

【図4b】図４ｂは、ＣＭＯＳ受動画素の読み込み（サンプリング）回路と行アドレス選択回路のそれぞれとの関係である。

【図5】図５はＣＭＯＳ画素の読み込み（サンプリング）回路と行アドレス選択回路及び列アドレス選択回路との構造模式図である。

【図6】図６は１つの典型的な列バッファをつける実用ＣＭＯＳ画素の読み込み（サンプリング）回路模式図である。

【図7a】図７はＣＣＤ画素の読み込み方式とＣＭＯＳ画素の読み込み方式との比較のための図である。図７ａにおいては、垂直方向のＣＣＤ画素の間がおいて１つずつ走査されることが示される。

【図7b】図７ｂは、ＣＣＤ画素の読み込み方式と比較するためのＣＭＯＳ画素の読み込み方式を示す図である。

【図8】図８は、米国特許第７，０９１，４６６号の基本原理を説明する模式図である。合併する必要がある同一な画素のスイッチを同時に開放（オープン、オン）にすることによって、関連信号をサンプリングバスまでに同時に出力して自己が平衡となり、これで合併画素の平均値を得る。

【図9】図９は、米国特許第７，３１９，２１８号の基本原理を説明する模式図である。合併する必要がある同一な画素を異なる時に高速サンプリングして、関連信号を完全に記録してからサンプリングバスまでに同時に出力した後、自己が平衡となり、これで合併画素の平均値を得る。その基本思想は米国特許７、０９１、４６６号と同一であり、ただ異なる回路を用いて実現される。

【図10a】図１０ａは従来の画素同色合併技術の基本思想を示す。即ち、隣り合うマクロ画素の、色彩同一な画素を（信号平均の方式により）合併する。図１０ａは列合併の模式図である。

【図10b】図１０ｂは従来の画素同色合併技術の基本思想を示す。即ち、隣り合うマクロ画素の、色彩同一な画素を（信号平均の方式により）合併する。図１０ｂは行列同時合併の模式図である。

【図11】図１１は、現在使用されている４点共有の４Ｔ能動感光画素の読み込み回路を示し、各画素が平均に１．７５個のゲートを用いる。

【図12】図１２は、１つの６点による共有の４Ｔ能動感光画素の読み込み回路を示し、各画素が平均に１．５個のゲートを用いる。この６点共有能動感光画素の読み込み回路が、ハニカム状配列を用いる両面二重層感光素子に適応され（中国出願番号２００８１０２１７２７０．２「マルチスペクトル感光素子及びその製造方法」を参照）、１つのマクロ画素におけるすべての３つの複合画素の上下二重層感光ダイオードが同一の読み込みコンデンサ（ＦＤ）と３Ｔ読み込み回路を共有するようにさせる。

【図13】図１３は、１つの８点による共有の４Ｔ能動感光画素の読み込み回路を示し、各画素が平均に１．３７５個のゲートを用いる。この８点による共有能動感光画素の読み込み回路が、４点のマクロ画素を基礎とするマトリックス配列の両面二重層感光素子に適応され、１つのマクロ画素におけるすべての４つの複合画素の上下二重層感光ダイオードが同一の読み込みコンデンサ（ＦＤ）と３Ｔ読み込み回路を共有するようにさせる。

【図14】図１４は、本発明の異色と複合合併技術の基本思想を示す。即ち、まず、同一マクロ画素内の２つの異なる又は同一な色彩の画素（信号平均又は累積の方式により）を合併し、そして合併後相隣且つ色彩同一な画素間の合併をする。図１４（ａ）はＢａｙｅｒパターン感光素子の両列合併の模式図であり、図１４（ｂ）はＢａｙｅｒパターン感光素子の両列と両行同時合併の模式図である。ここで、単独にＧとＢ、又はＧとＲとを合併する場合には、異色合併となるが、ＧとＢの合併、ＧとＲの合併、ＢとＲの合併、及びＧとＧの合併をあわせて行う場合には、複合合併となる。ある合併が同色の間（ＧとＧ）にあり、他の合併が異色の間にあるからである。ＢａｙｅｒパターンのＲＧＢ原色画像が、複合合併された後、ＣｙＹｅＭｇＧ補色画像に転換される。この図では、ＧとＢの合併、ＧとＲの合併、ＢとＲの合併、及びＧとＧの合併が第一の合併プロセスとなる。第二の合併プロセスは、合併後に異なる位置においてＣｙ、Ｙｅ、Ｍｇ、及びＧ値を取得し、同色合併の方式によりバスに同時出力され、又は行飛ばし又は列飛ばしの方式により、ある画素を飛ばして、逐次に読み出す。

【図15】図１５は、本発明の複合合併技術が更に一般的なＭ行とＮ列の合併に用いられる場合（図では５×３となり、即ち５行と３列の合併）を示す。行と列とを、飛ばす（スキップ）方法又は交差させる（クロス）方法（行飛ばし又はインターラインと列飛ばし及び跨列）を組み合わせて、図１５に類似するが異なる種々の場合が得られる。３行３列の合併は、２行２列の合併方式に、行飛ばし及び列飛ばしを加えて完成することができる。第３行と第４行が交差合併する場合に、一対の、同じ中点位置に位置する（Ｍｇ、Ｇ）信号を生じる。均一性を維持するために、後の列の合併をより容易にするために、人為的にＭｇ又はＧを正面の位置（前の位置）にする様考慮する。行と列の対称性によって、この図から、３×５、２×３、３×２、２×４、４×２、５×２、２×５、２×６、６×２、３×４、４×３、３×６、６×３、４×４、４×５、５×４、４×６、６×４、５×６、６×５、６×６、７×６、６×７、７×７、８×８等の様々な合併に容易に拡張できる。より有用なのは２×２、２×４、４×２、４×４、３×６、６×３、６×６、４×８、８×４、及び８×８の、画像の縦横比を容易に維持できる合併因子である。同様に、この図では、ＧとＢの合併、ＧとＲの合併、ＢとＲの合併、及びＧとＧの合併が、第一の合併プロセスとなる。第二の合併プロセスは、合併後、異なる位置においてＣｙ、Ｙｅ、Ｍｇ、及びＧの値を取得し、同色合併の方式によりバスに同時出力し、そして中間において用いない画素（例えば図における第５行と第１０行）を飛ばす（スキップする、省く）。感光素子が第三の合併とサンプリングのプロセスを含む場合に、飛ばした色彩は、後の第三の合併とサンプリングのプロセスに参加しない。

【図16】図１６は、色空間マトリックスの変換（色彩空間のマトリックス変換）によって引き起こされる、追加的な２×２画像のダウンサイジング（縮小）を示す。ＣｙＹｅＭｇＧの画像が原画像であり、本発明の複合合併方法によりＢａｙｅｒ ＲＧＢ画像から取得しても、それをＹＵＶ画像に転換した場合に、追加的な２×２縮小を取得できる。縮小方法は、１つのＣｙＹｅＭｇＧマクロ画素を、共通点の４つの画素として見なされる１つの（Ｙ、Ｕ、Ｖ）画素に転換し、そして（水平方向に）相隣する２つの点のＵ値とＶ値とを平均し、プレビューとＪＰＥＧ／ＭＰＥＧ圧縮のＹＵＶ４２２画像を取得する。

【図17】図１７は、本発明の優れた読み込み回路を示す。この読み込み回路では、奇数行と偶数行の感光画素が、１つの非透光の読み込みコンデンサＦＤ（例えば図におけるＦＤ１とＦＤ２）を共用する。スイッチＴＧ１が選択されてＧｒ感光ダイオードにおけるコンデンサをＦＤ１に転換する。同様に、スイッチＴＧ２、ＴＧ３、ＴＧ４がそれぞれＲ、Ｂ、Ｇｂ等コンデンサ値をＦＤ２、ＦＤ１、又はＦＤ２に読み込む。またスイッチＴＧ５が、読み込みコンデンサＦＤ１における値を、累積の方式により、ＦＤ２（又はＦＤ２からＦＤ１に転送する）に転送する。このようなレイアウトの感光画素には、図１８に示すような４点橋絡共有読み込み回路を用いてもよい。この回路では、読み込みコンデンサＦＤ非透光の要求は、図２１に示すプログレッシブ走査、インターレース又はインターライン読み込みを実現することの必要なものである。

【図18】図１８は、本発明の４点マクロ画素マトリックス配列に用いる４点橋絡共有読み込み回路を示す。このような読み込み回路には、各画素が平均に２つのトランジスタ（オーディオン）を用いる。この回路は、ゲート数が最少の共有読み込み回路ではないが、他の面では多くの特長を有する。第一の特長は、サブサンプリングする場合に、ＴＧ１／ＴＧ３又はＴＧ２／ＴＧ４を同時に開放（オープン、オン）することによって、奇数行の画素値Ｇｒと偶数行の画素値Ｂとが累積の方式でＦＤ１内で累積し、信号累積、ノイズ低減の二重効果を達成する。これに類似して、ＦＤが２つの信号を融合した後、そして読み込みの方式を用いて、信号対雑音比を最大で２×２^１／２倍を上げることができ、その内、２倍が信号の増強から、２^１／２倍がノイズの減弱からである。比較すると、従来の２つの信号を平均する方法は、ノイズを減ずる方式によって、信号対雑音比を最大で２^１／２倍のみを上げることができる。同様に、時間系列を制御してＴＧ１／ＴＧ４／ＴＧ５又はＴＧ２／ＴＧ３／ＴＧ５を同時にオープンにすれば、対角線における画素を信号累積の方式で読み出すことができる。第２の特長は、図２１に示すように、全画像サンプリングする場合に、下一行の画素値をＦＤに保存する方法により、インターレース又はインターライン読み込みを実現できる。

【図19】図１９は、本発明のハニカム配列の３点マクロ画素を有する二重層感光素子に用いる六点共有読み込み回路を示す。このような読み込み回路では、最上層（頂層）の３つの画素が１つの読み込みコンデンサＦＤ１を共用し、最下層（底層）の３つの画素が１つの読み込みコンデンサＦＤ２を共用し、最上層３点と最下層３点とが１つの拡大と読み込み回路を共用する。このような最上層と最下層の共用の読み込み回路の方法は、設計を簡単化し、サブサンプリングする場合に制御ロジックを簡単化することができる。図１２と異なる点は、最上層と最下層の読み込みコンデンサが共有されない点で、これは両面感光素子の製造に便利である。

【図20】図２０は、本発明の４点マクロ画素マトリックス配列の二重層感光素子を用いる８点共有読み込み回路を示す。このような読み込み回路では、最上層の４つの画素が１つの読み込みコンデンサＦＤ１を共用し、最下層の４つの画素が１つの読み込みコンデンサＦＤ２を共用し、最上層の４点と最下層の４点とが１つの拡大と読み込み回路を共用する。図１３と異なる点は、最上層と最下層の読み込みコンデンサが共有されない点で、これは両面感光素子の製造に便利である。明らかに、両面二重層感光素子にとって、最上層と最下層の４つのマクロ画素点がそれぞれ図１８に示すように二重ＦＤ橋絡共有読み込み回路を用いてもよく、これで最上層と最下層との読み込み回路を相対的に独立させる。且つ各自がインターレース又はインターライン読み込みの方式を用いてもよく、全画像の写真を取るシャッター速度を増加する。

【図21a】図２１ａは、図１７に示すサンプリング読み込み回路を示し、全画像サンプリングする場合のインターレース読み込み（図２１（ａ））又はインターライン読み込み（図２１（ｂ））方式に用いる模式図である。図２１（ａ）のインターレース読み込みでは、第１行（ＧｒＲｇＧｒＲ…）を読む場合に、第２行（ＢＧＢＧ…）の画素値が、第１行に相応する位置の値の読み込みの後に、既に空のＦＤ区間にすぐに移動する。つまり、第１行の第Ｎ列画素が読み込まれる場合に、第２行の第Ｎ−１（又はＮ−２等）個目の画素が垂直対応のＦＤ区域に移動している。第１行を読んだ後、ＦＤに保存した第２行の値をすぐに読まず、続いて第３行の画素値を読む。同様に、第３行の画素値を読む場合に、第４行の画素値もＦＤの区画（区域、領域）に同時に転送される。つまり、すべての偶数行の画素値が、奇数行の画素値がすべて読むまでに、ＦＤバッファ領域に逐一移動する。最後に、順序により一行一行にＦＤバッファ領域において偶数行の画素値を読む。図２１ａはインターレース読み込み方式を示しており、これは従来のテレビシステムにおけるフィールド走査方式とは異なる。異なる点は、バッファ（ＦＤ）区域に保存した後第二のハーフフレーム画像の感光時間が、第一のハーフフレームとほとんど同一である点である。このため、シャッター速度は行毎の読み込みの二倍となり、このためテレビシステムのフィールド走査方式によって引き起こされる奇数フィールドと偶数フィールド時間の１フィールド遅れ（ハーフフレーム遅れ）という状況を避ける。このような場合は、連続のビテオ録画よりも１枚の撮影（ショット）により適している。インターレース読み込み方式を用いて写真を取る場合に、電子シャッター速度を瞬間で二倍にすることは非常に価値のある方法である。例えば、仮に画素の読み込みクロックが９６ＭＨｚであり、感光チップが８Ｍ画素あると、全画像を取る場合に電子シャッター速度が（９６／８）＝ １２ｆｐｓ、又は１／１２秒である。しかし、図１９に示すようなインターレース読み込み方式又はインターライン読み込み方式を用いると、興味がある一つのフレームを、瞬間に２４ｆｐｓ、又は１／２４秒に上げて、速度が一倍速くなる。シャッター速度は１／２４秒に達し、つまり、携帯電話のカメラモジュールの機械シャッターを省いてもよくなる。１／１２秒の速度では機械シャッターが必要であり、そうしないと、手振れによる画像不良が発生する。

【図21b】図２１ｂは、図１７に示すサンプリング読み込み回路を示し、全画像サンプリングする場合のインターレース読み込み（図２１（ａ））又はインターライン読み込み（図２１（ｂ））方式に用いる模式図である。図２１（ｂ）のインターライン読み込みでは、第１行（ＧｒＲｇＧｒＲ …）を読んだ場合に、第２行（ＢＧＢＧ…）の値が、第１行相応位置の値読み込みの後、既に空のＦＤ区間にすぐに移動する。つまり、第１行の第Ｎ列の画素値が読み込まれる場合に、第２行の第Ｎ−１（又はＮ−２等）個目の画素値が垂直対応のＦＤ区域に移動している。第１行を読んだ後、第３行の画素値をすぐに読まない場合には、続いて第４行の画素値を読み、それとともに第３行の画素値をＦＤ区域に転送する。つまり、行の読み込み順序が１、４、５、８、・・・２、３、６、７という順序に従う。図２１（ｂ）のメリットは、前のハーフフレームの画像が、依然としてＢａｙｅｒパターン配列であるため、写真を取った瞬間の小さな図のプレビューを取得できる。図２１ｂはインターライン読み込み方式を示しており、これは従来のテレビシステムにおけるフィールド走査方式とは異なる。異なる点は、バッファ（ＦＤ）区域に保存した後第二のハーフフレーム画像の感光時間が、第一のハーフフレームとほとんど同一である点である。このため、シャッター速度は行毎の読み込みの二倍となり、このためテレビシステムのフィールド走査方式によって引き起こされる奇数フィールドと偶数フィールド時間の１フィールド遅れ（ハーフフレーム遅れ）という状況を避ける。このような場合は、連続のビテオ録画よりも１枚の撮影（ショット）により適している。インターライン読み込み方式を用いて写真を取る場合に、電子シャッター速度を瞬間で二倍にすることは非常に価値のある方法である。例えば、仮に画素の読み込みクロックが９６ＭＨｚであり、感光チップが８Ｍ画素あると、全画像を取る場合に電子シャッター速度が（９６／８）＝ １２ｆｐｓ、又は１／１２秒である。しかし、図１９に示すようなインターレース読み込み方式又はインターライン読み込み方式を用いると、興味がある一つのフレームを、瞬間に２４ｆｐｓ、又は１／２４秒に上げて、速度が一倍速くなる。シャッター速度は１／２４秒に達し、つまり、携帯電話のカメラモジュールの機械シャッターを省いてもよくなる。１／１２秒の速度では機械シャッターが必要であり、そうしないと、手振れによる画像不良が発生する。

【図22】図２２は、１つの二重層感光素子がサブサンプリングする場合の、簡略化された処理の場合を示す。即ち、第一の合併プロセスは、まず上下両層の余った色彩画素から、合併又は放棄の方法により、色彩再構築に必要な色彩分量を保留し、例えば、Ｃｙ、Ｍｇ（ＢとＲが合併して取得する）、Ｇ、及びＹｅが保留される。第三の合併プロセスは、図１６に示す色彩空間転換の手段を用いて、隣り合うＣｙＹｅＭｇＧ４つの画素を、１つのＹＵＶ色彩に転換し、そして隣り合うＵＶ成分を水平方向の２つのサブサンプリングをし、ＹＵＹＶ４２２画像を取得する。このプロセスが１つの２×２のサブサンプリングを完成する。画像がまだ大きすぎると、色彩空間ＣｙＹｅＭｇＧからＹＵＶまでの転換前に、第二の合併プロセスでまずＣｙＹｅＭｇＧ同一な色彩の平均をしてもよく、図における全サンプリング方式を用いない。このような二重層感光素子が全画像サンプリングする場合に、ある画素を放棄してもよく、全部読みだした後、バックエンドプロセッサーからどのように処理するかを決定してもよい。全部読みだした場合に、データ量は二倍増加する。そうすると、図１８と図２０に示すインターレース方式又はインターライン方式を用いれば、写真を取る瞬間のフレームレートを２倍上げるが、これは従来の単層感光素子速度に相当する。図２２によって、二重層又は多重層感光素子がサブサンプリングする場合の複雑性と色彩豊かなことを示す。二重層又は多重層感光素子がマクロ画素の色彩で何千種類以上の可能性を持つため、サブサンプリングも相応に更に多い可能性がある。ここで、幾つかの方法を挙げて本発明の核心を説明する。

【図23】図２３は、更に他の二重層感光素子がサブサンプリングをする場合の簡単化された処理の情況を示す。即ち、第一の合併プロセスで、画素の累積（又は平均化）により、まずＣｙＹｅＭｇＢのマクロ画素を取得する。そして、第三の合併プロセスがこの４点から、色彩変換の関係によってＹＵＶ色彩を取得し、これで２×２のサブサンプリングを実現する。色彩転換の前、第二の合併プロセスでまずＣｙＹｅＭｇＢのマクロ画素を同一の色彩の（信号平均の方式により）合併を行い、全サンプリング方式を用いずに、更に高倍数のサブサンプリングを取得してもよい。図において、ＣｙＹｅＭｇＢのマクロ画素をＢＲＧＢの類似したＢａｙｅｒパターンのマクロ画素で取り替えてもよい。ここで、ＣｙＹｅＭｇＢで説明し、ＣｙＹｅＭｇＢ、ＣｙＹｅＭｇＧ、ＣｙＹｅＭｇＲを用いてもＹＵＶ又は再構築したＲＧＢを取得できる。つまり、ＣｙＹｅＭｇＧはただＣｙＹｅＭｇＸの１つの特殊な例であり、ここで、ＸがＲ、Ｇ、又はＢであってもよい。

【図24】図２４は、更にもう一種の二重層感光素子がサブサンプリングをする場合の簡略化された処理の情況を示す。即ち、第一の合併プロセスが、隣り合う画素を水平方向（信号平均又は累積の方式により）に沿って合併する。そして第二の合併プロセスが、合併後の画素を（信号平均又は累積、又は放棄の方式により）垂直方向を沿って合併する。適切な時間系列の制御により、水平方向と垂直方向の合併が同時に完成できる。このようなサブサンプリング方式には、従来のサブサンプリング方式より色彩が豊かになる上、よりよい信号対雑音比を提供する。

【図25】図２５は、本発明の画素読み込みとサブサンプリングの回路を実現する感光素子の原理的なシステムの模式的なブロック図を示す。図２５は、本発明の各種機能モジュール感光素子における実現方法を説明する。この原理的なシステムは、画素アレイ、行アドレス復号制御器、列アドレス復号制御器、サンプリング制御回路、拡大とアナログ・デジタル変換モジュール、色彩変換とサブサンプリング及び画像処理モジュール、出力制御モジュール、メインチップ制御モジュール（図２５におけるＣＣモジュール）、及び他の利用可能なモジュールを含む。画素読み込みとサブサンプリングの機能は、主に行アドレス復号制御器と列アドレス復号制御器により相応の制御信号（行選択信号Ｒｏｗ［ｉ］、行制御ベクトル信号ＲＳ［ｉ］、列選択信号Ｃｏｌ［ｊ］、列制御ベクトル信号Ｔ［ｊ］、ここで、ｉとｊがそれぞれ対応する行の符号と列の符号である）を生じて完成する。システムの他のモジュールとの協調は、主にメインチップ制御モジュールにより完成する。第三の合併とサンプリングのプロセスは、もしそれが存在する場合には、アレイと、色彩変換と、サブサンプリング及び画像処理のモジュールで完成する。

【図26】図２６は、図２５における各制御信号（行選、行制御ベクトル、列選、列制御ベクトル）と対応する感光画素における制御信号の関係を、１つの具体的な実施例（図１７に示す感光画素）によって説明する図である。図２６は図１７におけるＧｒ画素とＢ画素の信号の共有情況（ＴＧ５は省略）を示す。行選択信号Ｒｏｗ［ｉ］とＣｏｌ［ｊ］が既に明確に示されている。この回路図では、リセット信号ＲＳ１と転送ゲート制御信号ＲＳ２（ＴＧ１又はＴＧ３）は行制御信号に属する。ＲＳ２が各行を使用しているときに、ＲＳ１は両行を共有する （例えば、ＴＧ１がＲＳ［ｉ］に属するが、ＴＧ３がＲＳ［ｉ＋１］に属する）。図１７におけるＴＧ５（図２６では省略する）は、列制御信号Ｔ［ｊ］に属する。つまり、できるだけ画素に対して行操作（同一行の画素が完全に同一である）と列操作（同一列の画素が完全に同一である）のみを行い、各画素の異なる操作を行なわず、これにより複雑さの程度を低減する。

【発明を実施するための形態】

【0057】

以下の具体的な実施形態において、図２５と図２６を参照しながら、本発明のサンプリングとサブサンプリングの方法の実現内容を説明する。

【0058】

本発明の具体的な実施形態のマルチスペクトル感光素子は、異なる読み込みとサブサンプリングの回路が図２５に示すような回路で実現できる。マルチスペクトル感光素子は、複数のマクロ画素を含む画素アレイ、行アドレス復号制御器、列アドレス復号制御器、サンプリング制御回路、拡大とアナログ・デジタル変換モジュール、色彩変換とサブサンプリング及び画像処理モジュール、出力制御モジュール、メインチップ制御モジュール（図２５におけるＣＣモジュール）、及び他の可能なモジュールを含む。

【0059】

需要に応じて、マトリックス状又はハニカム状で、４つ又は３つの画素に基づいたマクロ画素が配列されている。これらの画素は、受動画素（パッシブ素子）であってもよく、また能動画素（アクティブ素子）でもよい。また読み込みコンデンサＦＤ（読み込みキャパシタ）を備えていてもよく、逆に読み込みコンデンサＦＤを備えていなくとも良い。

【0060】

上述した様に、既にサブサンプリングプロセスを、第一の合併とサンプリングのプロセス、第二の合併とサンプリングのプロセス、及び選択可能な第三の合併とサンプリングのプロセスと分けた。これらプロセスに対応して、それぞれ第一の合併ユニット、第二の合併ユニット及び第三の合併ユニットを用いて上述した合併とサンプリングのプロセスを実現する。これらユニットはただその実現機能の面から、デバイスに対してモジュール化されており、物理的なデバイスの角度から、これら機能ユニットが１つの物理的なモジュールでその機能を実現してもよく、又は複数の物理的なモジュールを組み合わせてその機能を実現してもよい、又はこれらの複数の機能ユニットを、１つの物理的モジュールに集成してもよい。本文における第一の合併ユニット、第二の合併ユニット及び第三の合併ユニットの説明は、ただその機能上の説明を行ったものであり、その物理的な実現方式を具体的に制限するものではない。

【0061】

具体的には、図１２に示した様に、行アドレス復号制御器と列アドレス復号制御器によって必要なサブサンプリング機能を実現する。行アドレス復号制御器は二種類の信号を出力する。即ち行選択信号Ｒｏｗ［ｉ］ （各行につき一本の線で示す）と行制御ベクトル信号ＲＳ［ｉ］ （各行につき一本以上の線）、ここで、ｉは行の符号を意味する。同様に、列アドレス復号制御器は２種類の信号を出力する。即ち列選択信号Ｃｏｌ［ｊ］ （毎列一本線）と列制御ベクトル信号Ｔ［ｊ］ （毎列一本又は複数本線）、ここで、ｊは列の符号を意味する。

【0062】

行選択信号Ｒｏｗ［ｉ］は行の選択のために使用され、列選択信号Ｃｏｌ［ｊ］は列の選択のために使用される。これらは相対的な標準信号の２つのグループのである。行制御ベクトル信号ＲＳ［ｉ］は、従来のＣＭＯＳ行制御信号の拡張（各行につき一本の線が各行につき複数本の線までに拡張する）であるが、列制御ベクトル信号Ｔ［ｊ］には、いくつかのＣＭＯＳ感光素子がなく、ある場合でも、一列には１つのみである。図２６は図１７の感光画素を例とし、Ｒｏｗ［ｉ］、ＲＳ［ｉ］、Ｃｏｌ［ｊ］、及びＴ［ｊ］の１つの具体的な実現を提供する。ここで、Ｒｏｗ［ｉ］が二つの行によって共有されるが、ＲＳは２つの行制御信号ＲＳ１［ｉ］（リセット信号、同様に二つの行による共有）とＲＳ２［２］（電荷転送制御信号）を含む。

【0063】

本発明では、同時に幾つかの行が選択すること、同時に幾つかの列が選択されること、更に同時に幾つかの行と幾つかの列が同時に選択されること、のうちのいずれの場合も可能である。従来のいくつかの技術では（例えば米国特許第６，８０１，２５８号、米国特許第６，６９３，６７０号、米国特許第７，０９１，４６６号、米国特許第７，３１９，２１８号等）、同様に幾つかの行若しくは幾つかの列が同時に選択される可能性があるが、合併とサンプリングの方式が異なるため、行選択信号と列選択信号の時間系列と波型とが完全に異なる。例えば、図１４（ａ）における合併とサンプリングとをする場合、第１行第１列と第２行第２列が同時に選択されるが、このような情況が従来のサブサンプリング方法では発生することがない。

【0064】

ＲＳ［ｉ］とＴ［ｊ］は、感光画素のリセット、ゼロクリア、感光時間制御、電荷転送（電荷転移）、画素合併、及び画素読み込みを制御する。行列の対称性によって、ＲＳ［ｉ］とＴ［ｊ］とは複数の種類の具体的な実現方法がある。図１７に示すようなＴＧ１−ＴＧ５、Ｖｂ１−Ｖｂ４等の信号、更に図１８に示すようなＲＳ、Ｓ、とＳＦ信号は、ＲＳ［ｉ］とＴ［ｊ］が含むものである。本発明はこれら信号の具体的な実現方法によって制限されない。

【0065】

更に具体的には、いずれかのＭ×Ｎ因子（Ｍ≧２、Ｎ≧２）のサブサンプリングをする場合に、まず始めに、両方の行（両行）、両方の列（両列）、又は両方の行及び両方の列について合併とサンプリングとを行う第一の合併とサンプリングのプロセスを行い、そしてその後第一の合併とサンプリングのプロセスに基づいたＭ行×Ｎ列のサブサンプリングを完成する。

【0066】

第一の合併とサンプリングの後のサブサンプリング（主にＭ×Ｎ因子のサブサンプリング）即ち第二の合併とサンプリングのプロセスは、以下の各種方式で単独に又は組み合わせて実行してもよい。即ち、バスに直接出力する信号自動平均方式、行飛ばし又は列飛ばし方式、逐次サンプリング方式を、単独に又は組み合わせて実行してもよい。しかし、第三の合併とサンプリングのプロセスがある場合には、以下の２種の方式を単独に又は合わせて実行してもよい。即ち、色彩空間変換方式とバックエンドデジタル画像拡大縮小方式である。

【0067】

１つの画素アレイには、多くの感光画素が含まれ、特に二重層又は多重層感光素子にとって、色彩の種類及び幾何分布情況が非常に多い。第一の合併とサンプリングのプロセスは複数の（多数の）第一の合併画素に対応する。このため、第一の合併とサンプリングのプロセスの間、これら合併された第一の合併画素について、画素の色彩の合併の面から言えば、色彩の選択方法は様々である。同色合併方式、異色合併方式、複合合併方式（一部画素色彩が同一、一部が異なる）、余った色彩を選択的に放棄する方式を用いてもよい。

【0068】

色彩空間の変換はＲＧＢからＣｙＹｅＭｇＧ空間への変換、ＣｙＹｅＭｇＧからＹＵＶ空間への変換、及びＲＧＢからＹＵＶ空間への変換を含む。

【0069】

ＲＧＢからＣｙＹｅＭｇＧ空間への変換は、アナログ信号空間で完成してもよく、デジタル空間で完成してもよい。このため、それが第一の合併プロセス、第二の合併プロセス、又は第三の合併とサンプリングのプロセスにおけるいずれかのプロセスで完成してもよい。しかし、ＣｙＹｅＭｇＧからＹＵＶ空間への変換及びＲＧＢからＹＵＶ空間への変換は、デジタル信号空間のみで完成する。つまり第三の合併とサンプリングのプロセスで完成する。

【0070】

更に具体的には、画素アレイの一部分は、複数のマトリックスで配列された３つ又は４つの基本画素の１グループのマクロ画素から構成される。ここで、マクロ画素における基本画素は受動画素から組成されてもよく、ＦＤを備えていない３Ｔ能動画素から組成されてもよく、１つのＦＤを備えている４Ｔ能動画素から組成されてもよい。

【0071】

マクロ画素の基本画素に、ＦＤを備えている４Ｔ能動画素を用いた場合、その読み込み回路が４点共有方式（図１１）、６点共有方式（図１２）、及び８点共有方式（図１３）の何れかを採用することができる。

【0072】

更に好ましくは、各マクロ画素を、２つの非透光のＦＤを備える４Ｔ能動画素から組成することができる。この時、その読み込み回路が４点橋絡共有方式（図１８）を用いてもよい。相応に、このような感光素子が第１回の両方の行（両行）、両方の列（両列）、又は両方の行及び両方の列について合併とサンプリング、及びサブサンプリングの色彩合併を行う場合に、電荷累積の方式を用いる。このようなマクロ画素が後のプログレッシブ走査、インターレース読み込み又はインターライン読み込みの全画像サンプリング方式に可能性を提供する。

【0073】

二重層又は多重層感光素子にとって、第一の合併とサンプリングのプロセスの色彩選択が更に色彩を豊富にする。各マクロ画素が２つのＦＤを備えた４Ｔ能動画素から組成される場合、その読み込み回路は、４点橋絡共有方式（図１８）、６点橋絡共有方式（図１９）、又は８点橋絡共有方式（図２０）を用いてもよい。これに対応して、このような感光素子が第１回の両方の行（両行）、両方の列（両列）、又は両方の行及び両方の列について合併とサンプリングのサブサンプリングの色彩合併を行う場合には、電荷累積の方式を用いる。

【0074】

Ｎ個の信号が電荷累積の方式を用いて合併する場合に、信号対雑音比の改善の上限はＮ×Ｎ^１／２倍（ＮとルートＮの積算値の倍数）であるが、Ｎ個の信号が信号平均の方式を用いて合併する場合には、信号対雑音比の改善の上限がＮ^１／２倍である。そして、このような４点共用方式の２つのＦＤ（又は両行画素共用一行ＦＤ）の感光素子が全画像サンプリングをする場合に、正常なプログレッシブ走査、プログレッシブ読み込みの外に、更にプログレッシブ走査、インターレース読み込み（又はインターライン読み込み）の方式を用いてもよい。

【0075】

例えば、全画像サンプリングをする場合に、行アドレス復号制御器と列アドレス復号制御器が、所望される画像領域の要求により、まず順次にＲｏｗ［ｉ］とＲＳ［ｉ］の値をデバイスにより高又は低と設定し。そして順次に列出力Ｃｏｌ［ｊ］とＴ［ｊ］の値を高又は低と設定する。これにより、要求された画素値（電荷／電圧）を、（読み書き回路（read/write circuit）を介して）読み込み順序に従って出力バス上に出力するようにさせる。

【0076】

サブサンプリングをする場合に、それぞれがサポートするＭ×Ｎサンプリング因子（行がＭ倍縮小、列がＮ倍縮小）に対して、行アドレス復号制御器と列アドレス復号制御器は、Ｍ×Ｎサンプリング因子及び画像区域要求により、各出力行に対応して、同時に合併する必要がある行に対応するすべてのＲｏｗ［ｉ］とＲＳ［ｉ］値を高又は低と設定する。そして同時に各出力列に対応し、合併する必要がある列のすべてのＣｏｌ［ｊ］とＴ［ｊ］の値を高又は低と設定し、すべての合併する必要がある画素値（電荷／電圧）を、読み込み順序（読み書き回路を介して）により出力バスに同時に出力するようにさせる。それとともに、必要な場合に、行アドレス復号制御器と列アドレス復号制御器が更にＭ×Ｎサンプリング因子と画像区域の要求により、必要な行飛ばしと列飛ばしの操作を行う。

【0077】

異なるＭ×Ｎサンプリング因子のために、出力バスで、異なる時間において、異なる色彩を取得する可能性がある。従って、他のシステム機能モジュール、例えば増幅とアナログ／デジタル変換モジュール、色彩変換とサブサンプリングと画像処理モジュール、更に出力制御モジュールはいずれも相応の協調動作が必要となる。このシステムの全体制御（主制御）は、メインチップ制御モジュール（図２５におけるＣＣモジュール）によって実現されても良い。増幅とアナログ／デジタル変換モジュールと画素アレイ以外の他のモジュールは、主にデジタル処理回路であるため、デバイス周辺でより簡単に実現でき、これで感光素子の配線を簡単にする。

【0078】

以下、図２６の読み込み回路と、図２５に示すような感光素子の他のモジュールと併せて、更に具体的な信号制御フローを示す。ここで、図２６の読み込み回路は図１７に示す感光画素によって使用される。

【0079】

まず、リセット（クリア）と感光制御を行う。ひとつの簡単なリセット制御の方法は、Ｖｂ１とＶｂ２とを全部ゼロに調整することである。ここで、Ｖｂ１とＶｂ２は、行制御ベクトルの１つの信号である。また別なる方法は、まずＦＤ１とＦＤ２をリセット（図２６におけるＲＳ１ゼロ調整）し、それとともにＴＧ１とＴＧ２をオープン（オン）にし（図２６におけるＲＳ２が高と設定）、感光画素においてＧｒとＲの電荷を消去することである。この後、ＲＳ１を高と設定し、ＲＳ２をゼロ調整する。この後、光の照射で、ＧｒとＲの感光ダイオードが電荷を重ね合わせ始める。

【0080】

Ｇｒにおける電荷を読み込む必要がある場合に、３種のやり方がある。第一の方法は、直接ＴＧ１／ＲＳ２とＲｏｗ［ｉ］が直接オープンにされて、Ｇｒにおける電荷がＦＤ１に転送され、そしてこの中（電荷を介して電圧までの転換）からＧｒにおける電荷値を読み出す。第二の方法は、第一の種類の最後のステップに続いてＧｒにおける電荷値が読みだされた後、ＦＤ１がリセットされ、ＦＤ１からリセット状態下の電荷（電圧）が読み出され、これで読みだされたＧｒの電荷値に対して関連サンプリングを行うものである。第３の方法は、Ｇｒにおける電荷値が読み込まれる前、まずＦＤ１がリセットされてサンプリングされる方法である。この第三の方法は、Ｇｒの値と干渉するため、第２の方法程には好ましくない。この時、列アドレス復号制御器がＧｒに対応する列選択信号Ｃｏｌ［ｊ］をオープンにしなければならず、これでＧｒの測定値（二回である可能性があり、一回がリセット状態下の測定である）を増幅とアナログ・デジタル変換モジュールに出力する。

【0081】

Ｒｏｗ［ｉ］、Ｃｏｌ［ｊ］、及びＲＳ２［ｉ］の値によって、メインチップ制御モジュールＣＣが読み込んでいる画素の色彩を算出でき、そしてその色に対して対応する処理を行う。異なる色彩が異なる増幅回路に入る可能性があり、そして異なるアナログ・デジタル変換処理を行なってデジタル信号を取得する。

【0082】

感光画素のデジタル信号をバッファに保存して、色彩変換とサブサンプリング及び図象処理モジュールを介して、更に処理を行う。全画像サンプリングをする場合は、サブサンプリングは行われない。大型アレイ画像感光素子では、通常、いずれかの色彩変換は行われない。このため、このモード下で、メインチップ制御モジュールＣＣが対応する制御を行い、感光画素のデジタル信号は、色彩変換とサブサンプリングモジュールの代わりに、画像処理モジュールに直接に入る。感光素子に含まれる画像処理の後、出力モジュールにより感光素子の外部インターフェースに出力される。

【0083】

全画像サンプリングをする場合に、プログレッシブ走査、インターレース又はインターライン読み込み方式を実施することに留意する。この場合に、奇数行と偶数行のリセットクリアと感光時間制御が同時に行われる。インターレース読み込みの場合、偶数行（第１行）の画素が全部読み込まれた後、行アドレス復号制御器がすぐに下一行を読むことはなく、まず後の奇数行（第２行）を偶数行と共用されているＦＤに転送し、そして第３行の読み込みを始める。インターライン読み込みの場合に、第１行の符号が０から始まると、前のハーフフレーム（半分のフレーム）の行読み込み順序が０、３、４、７、８、１１、１２、１５・・・であるが、後のハーフフレーム（半分のフレーム）の読み込み順序は１、２、５、６、９、１０、１３、１４・・・である。更に複雑な順序があってもよい。例えば、では最初のハーフフレームを読む場合に読み込まなかった行を読み、既に１回使用したＦＤに一時的に保存され、次のハーフフレームを読む場合に読み出すことができる。

【0084】

プログレッシブ走査、インターレース又はインターライン方式が伝統的なテレビにけるフィールド走査方式に異なる点は、本発明のプログレッシブ走査でインターレース又はインターライン読み込みの方式の中では、画素の感光（検出）の時間系列が完全に１行ずつで行われるという点である。

【0085】

サブサンプリングをする場合、情況が複雑になる。しかしながら、いくつかのサブサンプリング因子Ｍ×Ｎは、一つの特定の感光素子によって支持（サポート）されることができる。従って、メインチップ制御モジュールＣＣ、行アドレス復号制御器、及び列アドレス復号制御器は、支持されているＭ×Ｎサブサンプリング因子のみを考えてもよい。例えば、１つの５百万画素の感光素子は、２×２、２×１、４×４、８×８の４種類の場合のみを考える。

【0086】

第二の合併とサンプリングのプロセスは、通常、電荷累積に関与せず、このため、以下のような３種類の方式を用いる。即ち、バスに直接出力する信号の自動平均方式、行飛ばし又は列飛ばし方式、逐次サンプリング方式である。この３つの方式は従来から知られており、簡単であり、本分野の通常の知識を有する技術者に知られているため、詳細な記載はここでは不要である。第三の合併とサンプリングのプロセスはデジタル画像空間で完成され、相対的な標準のデジタル画像の拡大と縮小の技術を用いる。本発明の使用方法を更に容易に了解するために、以下、第一の合併とサンプリングのプロセスのみの信号制御フローを詳しく説明する。

【0087】

図１７に示すようなマクロ画素にとって、第一の合併プロセスでは、二種類の合併方式をとることが可能である。第１の方式がＧｒとＢとを合併し、且つＲとＧｂとを合併する方式であり、第２の方式がＧｒとＧｂとを合併し、且つＲとＢとを合併する方式である。

【0088】

時間系列による第一の合併方式は、以下の通りである。

【0089】

１．ｔ０時刻：行アドレス復号制御器が、図２６に示すようなＦＤ１に対応するＲＳ１をゼロにセット（リセット）する。

【0090】

２．ｔ１時刻：ＴＧ１とＴＧ３（ＲＳ２［ｉ］とＲＳ２［ｉ＋１］）かオープンとなり（オンにされ、開放され）、ＧｒとＢの感光ダイオード（ＰＤ）の電荷がそれぞれ同時にＦＤ１に転送（転移）される。この時、ＲＳ１が高レベルに設定されてもよい。

【0091】

３．ｔ２時刻：（Ｇｒが第ｉ行第ｊ列と仮定すれば）行Ｒｏｗ［ｉ］と列Ｃｏｌ［ｊ］とがオープンとなり、ＦＤ１における電荷（電圧値）を出力バス上に出力される。

【0092】

４．ｔ３時刻：ＦＤ１におけるゼロ値が読み込まれて、関連するサンプリングのために用いられる。

【0093】

第ｉと第ｉ＋１行のすべての画素は、前の２つのステップ（即ち、ｔ０時間とｔ１時間）で同時に機能してもよく、また合併後の画素は第３と第４ステップで順次に読み込まれてよい（即ち、ｔ２時間とｔ３時間）。このため、相互に関連するサンプリングをしない場合には、平均１つのクロックパルスが１つの画素を読み込み、相互に関連するサンプリングをする場合には平均２つのクロックパルスが１つの画素を読み込むことができる。これが画素位置の優先順序により行われる。このような合併方式は、以下の色彩の優先順序で行われてもよい。

【0094】

第二の合併方式では、時間系列の情況が複雑になる。第二の合併方式には、２種類の処理方式がある。第１の処理方式は、色彩の順序に基づいて行われる。まず、行全体のＧｒとＧｂについて合併とサンプリングとが行われ、そしてＢとＲとの合併とサンプリングが行われる。又は逆の順序で行われてもよい。これはより簡単な方式であり、制御信号の時間系列は以下のとおりとなる。

【0095】

５．ｔ０時刻：行アドレス復号制御器によって、図１７と図２６に示すようなＦＤ１とＦＤ２に対応するＲＳ１がゼロ調整（リセット）される。

【0096】

６．ｔ１時刻：ＴＧ１とＴＧ４（ＲＳ２［ｉ］とＲＳ２［ｉ＋１］）がオープン（オン、ｏｐｅｎ）され、それとともにＧｒとＧｂの感光ダイオード（ＰＤ）の電荷がそれぞれＦＤ１とＦＤ２に転送される。この時、ＲＳ１を高レベルに設定していてもよい。

【0097】

７．ｔ２時刻：ＴＧ５がオープンされ、ＦＤ２における電荷がＦＤ１に転送される。

【0098】

８．ｔ３時刻：（Ｇｒが第ｉ行第ｊ列と仮定すれば）行選Ｒｏｗ［ｉ］と列選Ｃｏｌ［ｊ］がオープンされる。ＦＤ１における電荷（電圧値）が出力バス上に出力される。

【0099】

９．ｔ４時刻：ＦＤ１におけるゼロ値が読み込まれ、関連サンプリングとして用いられる。

【0100】

上記の最初の３ステップの操作（ｔ０，ｔ１，ｔ２）は、第ｉ行と第ｉ＋１行のすべてのＧｒとＧｂ画素に対して同時に行われてもよく、合併画素は、第４ステップと第５ステップで順次に読み込まれる。このため、関連サンプリングをしなければ、平均１つのクロックパルスが１つの画素を読み込み、関連サンプリングをすれば、平均２つのクロックパルスが１つの画素を読み込むことができる。このような読み込み方式は画素の位置による自然な順序を壊し、最終段階の処理（バックエンド処理）での校正が必要となる。一致性を保持するために、最初の合併方式は、色彩の優先順序に基づく方式で行われてもよい。

【0101】

第二の処理方式は、位置の優先順序に基づいて行われる。まず第１のＧｒとＧｂとについて、合併とサンプリングとが行われ、そして第一のＢとＲについて合併とサンプリングとが行われることを繰り返す。このような方式の制御信号の時間順序が上の第一の処理方式に類似するが、画素の間にはシリアル（順次）処理のみができ、行ビニング処理ができない。つまり、第一の合併画素を処理するｔ０−ｔ５時刻で、第２の合併画素を処理できない。これがより高いシステムクロックを要求する。サブサンプリングを行った後、画素の数量が大幅に低減し、このため、システムクロック周波数が高すぎることにならない。

【0102】

本発明における最適な回路のために、サブサンプリングをする間、関連サンプリングはその限定された効果故に省略される。これにより、上の時間系列はより簡単になる。

【0103】

選定した画素サンプリング順序のために、メインチップ制御モジュールＣＣが、増幅とアナログ・デジタル変換モジュール、色彩変換和サブサンプリング及び画像処理モジュール、更に出力制御モジュールを制御し、これにより異なる色彩に対して対応する異なる処理を行う。更に詳しい説明は本発明の範疇を超えている。

【0104】

従来のサブサンプリング方式は主に同一な色彩の画素間で行われ、且つ主に画素平均及び行飛ばし又は列飛ばしの方式を用いる。これら方法は、色彩豊かな二重層又は多重層感光素子にとって、局限と無力になる。本発明が提出したサブサンプリング方法は、色彩空間変換の方式によって、同一な色彩間で行われてもよく、異なる色彩間で行われてもよく、混合で行われてもよい（即ち一部が同一な色彩間で行われ、一部が異なる色彩間で行われる）。また、本発明が提出した電荷累積の信号合併方式は、ｎ個の信号を合併し、ｎ３個に近づく信号累積の効果を達成できる。このため、本発明のサブサンプリング方法は従来のサブサンプリング方法に比べて、よりよい画像品質があり、特に、本発明を二重層又は多重層感光素子に用いる場合に、数え切れない、簡単な且つ優れたサブサンプリング方式を生じる。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10(a)】

【図10(b)】

【図11】

【図12】

【図13】

【図14(a)】

【図14(b)】

【図15】

【図16】

【図17】

【図18】

【図19】

【図20】

【図21】

【図22】

【図23】

【図24】

【図25】

【図26】