(19)【発行国】日本国特許庁(JP)
(12)【公報種別】特許公報(B2)
(11)【特許番号】
(24)【登録日】2022-11-22
(45)【発行日】2022-12-01
(54)【発明の名称】撮像装置および撮像方法
(51)【国際特許分類】
H04N 5/355 20110101AFI20221124BHJP
【ＦＩ】
H04N5/355 810
【請求項の数】
10
(21)【出願番号】P 2019550911
(86)(22)【出願日】2018-10-02
(86)【国際出願番号】 JP2018036877
(87)【国際公開番号】W WO2019082614
(87)【国際公開日】2019-05-02
【審査請求日】2021-08-20
(31)【優先権主張番号】P 2017208118
(32)【優先日】2017-10-27
(33)【優先権主張国・地域又は機関】JP
(73)【特許権者】
【識別番号】316005926
【氏名又は名称】ソニーセミコンダクタソリューションズ株式会社
(74)【代理人】
【識別番号】110001357
【氏名又は名称】弁理士法人つばさ国際特許事務所
(72)【発明者】
【氏名】中村 良助
(72)【発明者】
【氏名】坂野 頼人
(72)【発明者】
【氏名】鈴木 敦史
【審査官】松永 隆志
(56)【参考文献】
【文献】特開２０１７－８４８９２（ＪＰ，Ａ）
【文献】国際公開第２０１７／０１０２６０（ＷＯ，Ａ１）
【文献】特開２００５－３３２８８０（ＪＰ，Ａ）
(58)【調査した分野】(Int.Cl.，ＤＢ名)
Ｈ０４Ｎ ５／２２５－５／３７８
(57)【特許請求の範囲】
【請求項1】
第１の受光素子および第２の受光素子と、第１の電荷蓄積部および第２の電荷蓄積部と、
オン状態になることにより前記第１の受光素子と前記第１の電荷蓄積部とを接続する第１のスイッチと、
オン状態になることにより所定ノードと前記第１の電荷蓄積部とを接続する第２のスイッチと、
オン状態になることにより前記所定ノードに所定の電圧を印加する第３のスイッチと、
オン状態になることにより前記第２の受光素子と前記第２の電荷蓄積部とを接続する第４のスイッチと、
オン状態になることにより前記第２の電荷蓄積部と前記所定ノードとを接続する第５のスイッチと、
前記第１の電荷蓄積部における電圧に応じた画素電圧を出力する出力部と、
各スイッチを駆動する駆動部と、
前記画素電圧に基づいて第１の値、第２の値、第３の値、第４の値を求め、これらの値に基づいて画素値を生成する処理部と
を備え、
前記駆動部は、
第１の期間において、前記第２のスイッチおよび前記第３のスイッチをオン状態にするとともに、前記第１のスイッチ、前記第４のスイッチ、および前記第５のスイッチをオフ状態にし、
前記第１の期間の後の第２の期間において、前記第３のスイッチをオフ状態にするとともに前記第５のスイッチをオン状態にし、
前記第２の期間の後の第３の期間において、前記第４のスイッチをオン状態にし、
前記第３の期間の後の第４の期間において、前記第４のスイッチをオフ状態にし、
前記処理部は、前記第２の期間における前記画素電圧と、前記第４の期間における前記画素電圧とに基づいて前記第３の値を求める
を備えた撮像装置。
【請求項2】
前記処理部は、前記第２の期間における前記画素電圧に基づいてＡＤ変換を行うことにより第１のデジタル値を生成するとともに、前記第４の期間における前記画素電圧に基づいてＡＤ変換を行うことにより第２のデジタル値を生成し、前記第１のデジタル値および前記第２のデジタル値に基づいて前記第３の値を求める請求項１に記載の撮像装置。
【請求項3】
前記駆動部は、前記第４の期間の後の第５の期間において、前記第３のスイッチおよび前記第５のスイッチをオン状態にし、
前記第５の期間の後の第６の期間において、前記第３のスイッチおよび前記第５のスイッチをオフ状態にし、
前記第６の期間の後の第７の期間において、前記第３のスイッチをオフ状態にするとともに前記第５のスイッチをオン状態にし、
前記処理部は、前記第２の期間における前記画素電圧と、前記第７の期間における前記画素電圧とに基づいて前記第４の値を求める
請求項１に記載の撮像装置。
【請求項4】
前記駆動部は、前記第４の期間の後の第５の期間において、前記第３のスイッチおよび前記第５のスイッチをオン状態にし、
前記第５の期間の後の第６の期間において、前記第３のスイッチおよび前記第５のスイッチをオフ状態にし、
前記第６の期間の後の第７の期間において、前記第３のスイッチをオフ状態にするとともに前記第５のスイッチをオン状態にし、
前記第２の期間は、第１のサブ期間と、前記第１のサブ期間の後の第２のサブ期間とを含み、
前記処理部は、
前記第２の期間の前記第２のサブ期間における前記画素電圧と、前記第４の期間における前記画素電圧とに基づいて前記第３の値を求め、
前記第２の期間の前記第１のサブ期間における前記画素電圧と、前記第７の期間における前記画素電圧とに基づいて前記第４の値を求める
請求項１に記載の撮像装置。
【請求項5】
前記駆動部は、第８の期間において、前記第２のスイッチおよび前記第３のスイッチをオン状態にするとともに、前記第１のスイッチ、前記第４のスイッチ、および前記第５のスイッチをオフ状態にし、
前記第８の期間の後の第９の期間において、前記第２のスイッチをオン状態にするとともに前記第３のスイッチをオフ状態にし、
前記第９の期間の後の第１０の期間において、前記第２のスイッチをオフ状態にし、
前記第１０の期間の後の第１１の期間において、前記第１のスイッチをオン状態にし、
前記第１１の期間の後の第１２の期間において、前記第１のスイッチをオフ状態にし、
前記第１２の期間の後であり前記第１の期間の前の第１３の期間において、前記第２のスイッチをオン状態にし、
前記処理部は、
前記第１０の期間における前記画素電圧と、前記第１２の期間における前記画素電圧とに基づいて前記第１の値を求め、
前記第９の期間における前記画素電圧と、前記第１３の期間における前記画素電圧とに基づいて前記第２の値を求める
請求項１に記載の撮像装置。
【請求項6】
前記処理部は、輝度が第１の輝度値より低い場合には、前記第１の値に基づいて前記画素値を生成し、
前記輝度が前記第１の輝度値よりも高く第２の輝度値よりも低い場合には、前記第１の値および前記第２の値に基づいて前記画素値を生成し、
前記輝度が前記第２の輝度値よりも高く第３の輝度値よりも低い場合には、前記第１の値、前記第２の値、および前記第３の値に基づいて前記画素値を生成し、
前記輝度が前記第３の輝度値よりも高い場合には、前記第１の値、前記第２の値、前記第３の値、および前記第４の値に基づいて前記画素値を生成する
請求項１に記載の撮像装置。
【請求項7】
前記第１の受光素子の受光領域は、前記第２の受光素子の受光領域よりも広い請求項１に記載の撮像装置。
【請求項8】
前記第１の電荷蓄積部は、拡散層を有する請求項１に記載の撮像装置。
【請求項9】
前記処理部は、電圧レベルが変化する参照信号を生成する参照信号生成部と、
前記画素電圧と前記参照信号とを比較することにより比較信号を生成する比較部と、
前記比較信号に基づいてカウント動作を行うことによりデジタル値を生成するカウンタと
を有する
請求項１に記載の撮像装置。
【請求項10】
第１の受光素子および第２の受光素子と、第１の電荷蓄積部および第２の電荷蓄積部と、オン状態になることにより前記第１の受光素子と前記第１の電荷蓄積部とを接続する第１のスイッチと、オン状態になることにより所定ノードと前記第１の電荷蓄積部とを接続する第２のスイッチと、オン状態になることにより前記所定ノードに所定の電圧を印加する第３のスイッチと、オン状態になることにより前記第２の受光素子と前記第２の電荷蓄積部とを接続する第４のスイッチと、オン状態になることにより前記第２の電荷蓄積部と前記所定ノードとを接続する第５のスイッチと、前記第１の電荷蓄積部における電圧に応じた画素電圧を出力する出力部とを備えた撮像画素の各スイッチを駆動し、前記画素電圧に基づいて第１の値、第２の値、第３の値、第４の値を求め、これらの値に基づいて画素値を生成し、
第１の期間において、前記第２のスイッチおよび前記第３のスイッチをオン状態にするとともに、前記第１のスイッチ、前記第４のスイッチ、および前記第５のスイッチをオフ状態にし、
前記第１の期間の後の第２の期間において、前記第３のスイッチをオフ状態にするとともに前記第５のスイッチをオン状態にし、
前記第２の期間の後の第３の期間において、前記第４のスイッチをオン状態にし、
前記第３の期間の後の第４の期間において、前記第４のスイッチをオフ状態にし、
前記第２の期間における前記画素電圧と、前記第４の期間における前記画素電圧とに基づいて前記第３の値を求める
撮像方法。
【発明の詳細な説明】
【技術分野】
【0001】
本開示は、撮像動作を行う撮像装置、およびそのような撮像装置における用いられる撮像方法に関する。
【背景技術】
【0002】
撮像装置では、ダイナミックレンジが広いことが望まれている。例えば、特許文献１には、フォトダイオードと、フォトダイオードから溢れる光電荷を蓄積する蓄積容量素子とを有し、ダイナミックレンジの拡大を図る撮像装置が開示されている。
【先行技術文献】
【特許文献】
【0003】
【文献】特開２００５－３２８４９３号公報
【発明の概要】
【0004】
撮像装置では、撮像画像の画質が高いことが望まれており、さらなる画質の向上が期待されている。
【0005】
撮像画像の画質を高めることができる撮像装置、および撮像方法を提供することが望ましい。
【0006】
本開示の一実施の形態における撮像装置は、第１の受光素子および第２の受光素子と、
第１の電荷蓄積部および第２の電荷蓄積部と、第１のスイッチと、第２のスイッチと、第３のスイッチと、第４のスイッチと、第５のスイッチと、出力部と、駆動部と、処理部とを備えている。第１のスイッチは、オン状態になることにより第１の受光素子と第１の電荷蓄積部とを接続するものである。第２のスイッチは、オン状態になることにより所定ノードと第１の電荷蓄積部とを接続するものである。第３のスイッチは、オン状態になることにより所定ノードに所定の電圧を印加するものである。第４のスイッチは、オン状態になることにより第２の受光素子と第２の電荷蓄積部とを接続するものである。第５のスイッチは、オン状態になることにより第２の電荷蓄積部と所定ノードとを接続するものである。駆動部は、各スイッチを駆動するものである。処理部は、画素電圧に基づいて第１の値、第２の値、第３の値、第４の値を求め、これらの値に基づいて画素値を生成するものである。上記駆動部は、第１の期間において、第２のスイッチおよび第３のスイッチをオン状態にするとともに、第１のスイッチ、第４のスイッチ、および第５のスイッチをオフ状態にし、第１の期間の後の第２の期間において、第３のスイッチをオフ状態にするとともに第５のスイッチをオン状態にし、第２の期間の後の第３の期間において、第４のスイッチをオン状態にし、第３の期間の後の第４の期間において、第４のスイッチをオフ状態にする。処理部は、第２の期間における画素電圧と、第４の期間における画素電圧とに基づいて第３の値を求める。
第１の電荷蓄積部および第２の電荷蓄積部と、第１のスイッチと、第２のスイッチと、第３のスイッチと、第４のスイッチと、第５のスイッチと、出力部と、駆動部と、処理部とを備えている。第１のスイッチは、オン状態になることにより第１の受光素子と第１の電荷蓄積部とを接続するものである。第２のスイッチは、オン状態になることにより所定ノードと第１の電荷蓄積部とを接続するものである。第３のスイッチは、オン状態になることにより所定ノードに所定の電圧を印加するものである。第４のスイッチは、オン状態になることにより第２の受光素子と第２の電荷蓄積部とを接続するものである。第５のスイッチは、オン状態になることにより第２の電荷蓄積部と所定ノードとを接続するものである。駆動部は、各スイッチを駆動するものである。処理部は、画素電圧に基づいて第１の値、第２の値、第３の値、第４の値を求め、これらの値に基づいて画素値を生成するものである。上記駆動部は、第１の期間において、第２のスイッチおよび第３のスイッチをオン状態にするとともに、第１のスイッチ、第４のスイッチ、および第５のスイッチをオフ状態にし、第１の期間の後の第２の期間において、第３のスイッチをオフ状態にするとともに第５のスイッチをオン状態にし、第２の期間の後の第３の期間において、第４のスイッチをオン状態にし、第３の期間の後の第４の期間において、第４のスイッチをオフ状態にする。処理部は、第２の期間における画素電圧と、第４の期間における画素電圧とに基づいて第３の値を求める。
【0007】
本開示の一実施の形態における撮像方法は、第１の受光素子および第２の受光素子と、第１の電荷蓄積部および第２の電荷蓄積部と、オン状態になることにより第１の受光素子と第１の電荷蓄積部とを接続する第１のスイッチと、オン状態になることにより所定ノードと第１の電荷蓄積部とを接続する第２のスイッチと、オン状態になることにより所定ノードに所定の電圧を印加する第３のスイッチと、オン状態になることにより第２の受光素子と第２の電荷蓄積部とを接続する第４のスイッチと、オン状態になることにより第２の電荷蓄積部と所定ノードとを接続する第５のスイッチと、第１の電荷蓄積部における電圧に応じた画素電圧を出力する出力部とを備えた撮像画素の各スイッチを駆動し、画素電圧に基づいて第１の値、第２の値、第３の値、第４の値を求め、これらの値に基づいて画素値を生成し、第１の期間において、第２のスイッチおよび第３のスイッチをオン状態にするとともに、第１のスイッチ、第４のスイッチ、および第５のスイッチをオフ状態にし、第１の期間の後の第２の期間において、第３のスイッチをオフ状態にするとともに第５のスイッチをオン状態にし、第２の期間の後の第３の期間において、第４のスイッチをオン状態にし、第３の期間の後の第４の期間において、第４のスイッチをオフ状態にし、第２の期間における画素電圧と、第４の期間における画素電圧とに基づいて第３の値を求める。
【0008】
本開示の一実施の形態における撮像装置、および撮像方法では、第１の期間において、第２のスイッチおよび第３のスイッチがオン状態にされるとともに、第１のスイッチ、第４のスイッチ、および第５のスイッチがオフ状態にされ、第１の期間の後の第２の期間において、第３のスイッチがオフ状態にされるとともに第５のスイッチがオン状態にされ、第２の期間の後の第３の期間において、第４のスイッチがオン状態にされ、第３の期間の後の第４の期間において、第４のスイッチがオフ状態にされる。そして、第２の期間における画素電圧と、第４の期間における画素電圧とに基づいて第３の値が求められる。そして、第１の値、第２の値、第３の値、第４の値に基づいて、画素値が生成される。
【0009】
本開示の一実施の形態における撮像装置、および撮像方法によれば、第１の期間において、第２のスイッチおよび第３のスイッチをオン状態にするとともに、第１のスイッチ、第４のスイッチ、および第５のスイッチをオフ状態にし、第１の期間の後の第２の期間において、第３のスイッチをオフ状態にするとともに第５のスイッチをオン状態にし、第２の期間の後の第３の期間において、第４のスイッチをオン状態にし、第３の期間の後の第４の期間において、第４のスイッチをオフ状態にし、第２の期間における画素電圧と、第４の期間における画素電圧とに基づいて第３の値を求めるようにしたので、撮像画像の画質を高めることができる。なお、ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載されたいずれの効果があってもよい。
【図面の簡単な説明】
【0010】
【図1】本開示の一実施の形態に係る撮像装置の一構成例を表す構成図である。
【図8】比較例に係る撮像装置の一動作例を表すタイミング波形図である。
【図9A】比較例に係る撮像装置の一動作例を表す他のタイミング波形図である。
【図9B】比較例に係る撮像装置の一動作例を表す他のタイミング波形図である。
【図10】比較例に係る撮像装置の一動作例を表す説明図である。
【図11】比較例に係る撮像装置の一特性例を表す特性図である。
【図12】変形例に係る撮像装置の一動作例を表すタイミング波形図である。
【図13】変形例に係る撮像装置の一動作例を表す説明図である。
【発明を実施するための形態】
【0011】
以下、本開示の実施の形態について、図面を参照して詳細に説明する。
【0012】
＜実施の形態＞
［構成例］
図１は、一実施の形態に係る撮像装置（撮像装置１）の一構成例を表すものである。撮像装置１は、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）集積回路の製造プロセスを利用して製造される、いわゆるＣＭＯＳイメージセンサである。なお、本開示の実施の形態に係る撮像方法は、本実施の形態により具現化されるので、併せて説明する。 撮像装置１は、画素アレイ１１と、走査部１２と、読出部２０と、信号処理部１４と、制御部１５とを備えている。
［構成例］
図１は、一実施の形態に係る撮像装置（撮像装置１）の一構成例を表すものである。撮像装置１は、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）集積回路の製造プロセスを利用して製造される、いわゆるＣＭＯＳイメージセンサである。なお、本開示の実施の形態に係る撮像方法は、本実施の形態により具現化されるので、併せて説明する。 撮像装置１は、画素アレイ１１と、走査部１２と、読出部２０と、信号処理部１４と、制御部１５とを備えている。
【0013】
画素アレイ１１は、複数の撮像画素１０がマトリックス状に配置されたものである。画素アレイ１１は、複数の制御線ＴＧＬＬと、複数の制御線ＦＤＧＬと、複数の制御線ＲＳＴＬと、複数の制御線ＦＣＧＬと、複数の制御線ＴＧＳＬと、複数の制御線ＳＥＬＬと、複数の信号線ＳＧＬとを有している。制御線ＴＧＬＬは、水平方向（図１における横方向）に延伸するものであり、制御線ＴＧＬＬには、走査部１２により信号ＳＴＧＬが印加される。制御線ＦＤＧＬは、水平方向に延伸するものであり、制御線ＦＤＧＬには、走査部１２により信号ＳＦＤＧが印加される。制御線ＲＳＴＬは、水平方向に延伸するものであり、制御線ＲＳＴＬには、走査部１２により信号ＳＲＳＴが印加される。制御線ＦＣＧＬは、水平方向に延伸するものであり、制御線ＦＣＧＬには、走査部１２により信号ＳＦＣＧが印加される。制御線ＴＧＳＬは、水平方向に延伸するものであり、制御線ＴＧＳＬには、走査部１２により信号ＳＴＧＳが印加される。制御線ＳＥＬＬは、水平方向に延伸するものであり、制御線ＳＥＬＬには、走査部１２により信号ＳＳＥＬが印加される。信号線ＳＧＬは、垂直方向（図１における縦方向）に延伸するものであり、読出部４０に接続されている。
【0014】
撮像画素１０は、フォトダイオードＰＤ１と、トランジスタＴＧＬと、フォトダイオードＰＤ２と、トランジスタＴＧＳと、容量素子ＦＣと、トランジスタＦＣＧ，ＲＳＴ，ＦＤＧと、フローティングディフュージョンＦＤと、トランジスタＡＭＰ，ＳＥＬとを有している。トランジスタＴＧＬ，ＴＧＳ，ＦＣＧ，ＲＳＴ，ＦＤＧ，ＡＭＰ，ＳＥＬは、この例ではＮ型のＭＯＳトランジスタである。
【0015】
フォトダイオードＰＤ１は、受光量に応じた量の電荷を生成して内部に蓄積する光電変換素子である。フォトダイオードＰＤ１が光を受光可能な受光領域は、フォトダイオードＰＤ２が光を受光可能な受光領域よりも広いものである。フォトダイオードＰＤ１のアノードは接地され、カソードはトランジスタＴＧＬのソースに接続されている。
【0016】
トランジスタＴＧＬのゲートは制御線ＴＧＬＬに接続され、ソースはフォトダイオードＰＤ１のカソードに接続され、ドレインはフローティングディフュージョンＦＤに接続されている。
【0017】
フォトダイオードＰＤ２は、受光量に応じた量の電荷を生成して内部に蓄積する光電変換素子である。フォトダイオードＰＤ２が光を受光可能な受光領域は、フォトダイオードＰＤ１が光を受光可能な受光領域よりも狭いものである。フォトダイオードＰＤ２のアノードは接地され、カソードはトランジスタＴＧＳのソースに接続されている。
【0018】
トランジスタＴＧＳのゲートは制御線ＴＧＳＬに接続され、ソースはフォトダイオードＰＤ２のカソードに接続され、ドレインは容量素子ＦＣの一端、およびトランジスタＦＣＧのソースに接続されている。
【0019】
容量素子ＦＣの一端はトランジスタＴＧＳのドレインおよびトランジスタＦＣＧのソースに接続され、他端には電源電圧ＶＤＤが供給されている。
【0020】
トランジスタＦＣＧのゲートは制御線ＦＣＧＬに接続され、ソースは容量素子ＦＣの一端およびトランジスタＴＧＳのドレインに接続され、ドレインはトランジスタＲＳＴのソースおよびトランジスタＦＤＧのドレインに接続されている。
【0021】
トランジスタＲＳＴのゲートは制御線ＲＳＴＬに接続され、ドレインには電源電圧ＶＤＤが供給され、ソースは、トランジスタＦＣＧ，ＦＤＧのドレインに接続されている。
【0022】
トランジスタＦＤＧのゲートは制御線ＦＤＧＬに接続され、ドレインはトランジスタＲＳＴのソースおよびトランジスタＦＣＧのドレインに接続され、ソースはフローティングディフュージョンに接続されている。
【0023】
フローティングディフュージョンＦＤは、フォトダイオードＰＤ１，ＰＤ２から供給された電荷を蓄積するものであり、例えば、半導体基板の表面に形成された拡散層を用いて構成される。図１では、フローティングディフュージョンＦＤを、容量素子のシンボルを用いて示している。
【0024】
トランジスタＡＭＰのゲートはフローティングディフュージョンＦＤに接続され、ドレインには電源電圧ＶＤＤが供給され、ソースはトランジスタＳＥＬのドレインに接続されている。
【0025】
トランジスタＳＥＬのゲートは制御線ＳＥＬＬに接続され、ドレインはトランジスタＡＭＰのソースに接続され、ソースは信号線ＳＧＬに接続されている。
【0026】
この構成により、撮像画素１０では、制御線ＳＥＬＬに印加された信号ＳＳＥＬに基づいてトランジスタＳＥＬがオン状態になることにより、撮像画素１０が信号線ＳＧＬと電気的に接続される。これにより、トランジスタＡＭＰは、読出部２０の電流源２３（後述）に接続され、いわゆるソースフォロワとして動作する。そして、撮像画素１０は、フローティングディフュージョンＦＤにおける電圧に応じた画素電圧ＶＰを、信号ＳＩＧとして、信号線ＳＧＬに出力する。具体的には、撮像画素１０は、後述するように、いわゆる水平期間Ｈ内の７つの期間（変換期間Ｐ１～Ｐ７）において、７つの画素電圧ＶＰ（ＶＰ１～ＶＰ７）を順次出力するようになっている。
【0027】
走査部１２は、制御部１５からの指示に基づいて、複数の撮像画素１０を、１行分の撮像画素１０を単位として、順次駆動するものであり、例えばシフトレジスタを用いて構成される。なお、これに限定されるものではなく、これに代えて、例えば、アドレスデコーダを用いてもよい。走査部１２は、複数の制御線ＴＧＬＬに対して信号ＳＴＧＬを印加し、複数の制御線ＦＤＧＬに対して信号ＳＦＤＧを印加し、複数の制御線ＲＳＴＬに対して信号ＳＲＳＴを印加し、複数の制御線ＦＣＧＬに対して信号ＳＦＣＧを印加し、複数の制御線ＴＧＳＬに対して信号ＳＴＧＳを印加し、複数の制御線ＳＥＬＬに対して信号ＳＳＥＬを印加することにより、１行分の撮像画素１０を駆動するようになっている。
【0028】
読出部２０は、画素アレイ１１から信号線ＳＧＬを介して供給された信号ＳＩＧに基づいてＡＤ（Analog to Digital）変換を行うことにより、デジタル値（カウント値ＣＮＴ）を生成するものである。
【0029】
【0030】
読出部２０は、読出制御部２８と、参照信号生成部２９と、複数のＡＤ（Analog to Digital）変換部ＡＤＣとを有している。
【0031】
読出制御部２８は、制御部１５からの指示に基づいて、読出部４０における読出動作を制御するものである。具体的には、読出制御部２８は、参照信号生成部２９に制御信号を供給することにより、参照信号生成部２９に参照信号ＲＥＦ（後述）を生成させる。また、読出制御部２８は、複数のＡＤ変換部ＡＤＣに、クロック信号ＣＬＫおよび制御信号ＣＣを供給することにより、複数のＡＤ変換部ＡＤＣにおけるＡＤ変換動作を制御するようになっている。
【0032】
参照信号生成部２９は、読出制御部２８からの指示に基づいて参照信号ＲＥＦを生成するものである。参照信号ＲＥＦは、後述するように、７つの期間（変換期間Ｐ１～Ｐ７）において、時間の経過に応じて電圧レベルが徐々に低下する、いわゆるランプ波形を有するものである。
【0033】
ＡＤ変換部ＡＤＣは、画素アレイ１１から信号線ＳＧＬを介して供給された信号ＳＩＧに基づいてＡＤ変換を行うことにより、画素電圧ＶＰをデジタル値（カウント値ＣＮＴ）に変換するものである。複数のＡＤ変換部ＡＤＣは、画素アレイ１１の複数の信号線ＳＧＬに対応して設けられている。
【0034】
ＡＤ変換部ＡＤＣは、容量素子２１，２２と、電流源２３と、コンパレータ２４と、カウンタ２５とを有している。容量素子２１の一端には参照信号ＲＥＦが供給され、他端はコンパレータ２４の正入力端子に接続されている。容量素子２２の一端は信号線ＳＧＬに接続され、他端はコンパレータ２４の負入力端子に接続されている。電流源２３は、信号線ＳＧＬから接地に所定の電流値の電流を流すものである。コンパレータ２４の正入力端子には、容量素子２１を介して参照信号ＲＥＦが供給され、負入力端子には、容量素子２２を介して信号ＳＩＧが供給される。そして、コンパレータ２４は、正入力端子における入力電圧と負入力端子における入力電圧とを比較して、その比較結果を信号ＣＭＰとして出力するようになっている。カウンタ２５は、信号ＣＭＰ、クロック信号ＣＬＫ、および制御信号ＣＣに基づいて、カウント動作を行うものである。具体的には、カウンタ２５は、読出制御部２８がクロック信号ＣＬＫの生成を開始することにより、このクロック信号ＣＬＫにおけるクロックパルスのカウント動作を開始し、カウント値ＣＮＴをインクリメントする。そして、カウンタ２５は、コンパレータ２４から供給された信号ＣＭＰに基づいて、このカウント動作を終了する。また、カウンタ２５は、制御信号ＣＣに基づいて、カウント値ＣＮＴをリセットする。
【0035】
この構成により、読出部２０では、ＡＤ変換部ＡＤＣが、信号ＳＩＧに基づいてＡＤ変換を行い、カウント値ＣＮＴを出力する。具体的には、ＡＤ変換部ＡＤＣは、７つの変換期間Ｐ１～Ｐ７において、信号ＳＩＧに含まれる７つの画素電圧ＶＰ１～ＶＰ７に基づいてそれぞれＡＤ変換を行い、７つのカウント値ＣＮＴ（カウント値ＣＮＴ１～ＣＮＴ７）をそれぞれ出力するようになっている。
【0036】
信号処理部１４は、読出部２０から供給されたカウント値ＣＮＴに基づいて、所定の信号処理を行い、この信号処理の結果を画像信号ＤＡＴＡとして出力するものである。具体的には、信号処理部１４は、読出部２０から供給された７つのカウント値ＣＮＴ１～ＣＮＴ７に基づいて、４枚の画像ＰＩＣ（画像ＰＩＣ１，ＰＩＣ２，ＰＩＣ３，ＰＩＣ４）を生成する。そして、信号処理部１４は、この４枚の画像ＰＩＣを合成することにより、１枚の撮像画像ＰＩＣＡを生成する。そして、信号処理部１４は、この撮像画像ＰＩＣＡを、画像信号ＤＡＴＡとして出力する。これにより、撮像装置１では、後述するように、ダイナミックレンジを拡大することができるようになっている。
【0037】
制御部１５は、走査部１２、読出部２０、および信号処理部１４に制御信号を供給し、これらの回路の動作を制御することにより、撮像装置１の動作を制御するものである。
【0038】
ここで、フォトダイオードＰＤ１は、本開示における「第１の受光素子」の一具体例に対応する。フォトダイオードＰＤ２は、本開示における「第２の受光素子」の一具体例に対応する。フローティングディフュージョンＦＤは、本開示における「第１の電荷蓄積部」の一具体例に対応する。容量素子ＦＣは、本開示における「第２の電荷蓄積部」の一具体例に対応する。トランジスタＴＧＬは、本開示における「第１のスイッチ」の一具体例に対応する。トランジスタＦＤＧは、本開示における「第２のスイッチ」の一具体例に対応する。トランジスタＲＳＴは、本開示における「第３のスイッチ」の一具体例に対応する。トランジスタＴＧＳは、本開示における「第４のスイッチ」の一具体例に対応する。トランジスタＦＣＧは、本開示における「第５のスイッチ」の一具体例に対応する。トランジスタＡＭＰ，ＳＥＬは、本開示における「出力部」の一具体例に対応する。走査部１２は、本開示における「駆動部」の一具体例に対応する。読出部２０および信号処理部１４は、本開示における「処理部」の一具体例に対応する。
【0039】
［動作および作用］
続いて、本実施の形態の撮像装置１の動作および作用について説明する。
続いて、本実施の形態の撮像装置１の動作および作用について説明する。
【0040】
（全体動作概要）
まず、図１，２を参照して、撮像装置１の全体動作概要を説明する。走査部１２は、複数の撮像画素１０を、１行分の撮像画素１０を単位として、順次駆動する。撮像画素１０は、水平期間Ｈにおける７つの変換期間Ｐ１～Ｐ７において、７つの画素電圧ＶＰ１～ＶＰ７を順次出力する。読出部２０のＡＤ変換部ＡＤＣは、これらの７つの画素電圧ＶＰ１～ＶＰ７に基づいてそれぞれＡＤ変換を行い、７つのカウント値ＣＮＴ１～ＣＮＴ７をそれぞれ出力する。信号処理部１４は、読出部２０から供給された７つのカウント値ＣＮＴ１～ＣＮＴ７に基づいて、４枚の画像ＰＩＣ（画像ＰＩＣ１，ＰＩＣ２，ＰＩＣ３，ＰＩＣ４）を生成する。そして、信号処理部１４は、この４枚の画像ＰＩＣを合成することにより、１枚の撮像画像ＰＩＣＡを生成する。
まず、図１，２を参照して、撮像装置１の全体動作概要を説明する。走査部１２は、複数の撮像画素１０を、１行分の撮像画素１０を単位として、順次駆動する。撮像画素１０は、水平期間Ｈにおける７つの変換期間Ｐ１～Ｐ７において、７つの画素電圧ＶＰ１～ＶＰ７を順次出力する。読出部２０のＡＤ変換部ＡＤＣは、これらの７つの画素電圧ＶＰ１～ＶＰ７に基づいてそれぞれＡＤ変換を行い、７つのカウント値ＣＮＴ１～ＣＮＴ７をそれぞれ出力する。信号処理部１４は、読出部２０から供給された７つのカウント値ＣＮＴ１～ＣＮＴ７に基づいて、４枚の画像ＰＩＣ（画像ＰＩＣ１，ＰＩＣ２，ＰＩＣ３，ＰＩＣ４）を生成する。そして、信号処理部１４は、この４枚の画像ＰＩＣを合成することにより、１枚の撮像画像ＰＩＣＡを生成する。
【0041】
（詳細動作）
撮像装置１において、複数の撮像画素１０は、画素電圧ＶＰを信号ＳＩＧとして出力する。そして、読出部２０のＡＤ変換部ＡＤＣは、この信号ＳＩＧに基づいてデジタル値（カウント値ＣＮＴ）を生成する。以下に、着目したある撮像画素１０Ａに係る動作について詳細に説明する。
撮像装置１において、複数の撮像画素１０は、画素電圧ＶＰを信号ＳＩＧとして出力する。そして、読出部２０のＡＤ変換部ＡＤＣは、この信号ＳＩＧに基づいてデジタル値（カウント値ＣＮＴ）を生成する。以下に、着目したある撮像画素１０Ａに係る動作について詳細に説明する。
【0042】
図３，４Ａ，４Ｂは、撮像装置１の一動作例を表すものであり、（Ａ）は水平同期信号ＨＳＹＮＣの波形を示し、（Ｂ）は撮像画素１０Ａに供給される信号ＳＳＥＬの波形を示し、（Ｃ）は撮像画素１０Ａに供給される信号ＳＦＤＧの波形を示し、（Ｄ）は撮像画素１０Ａに供給される信号ＳＴＧＬの波形を示し、（Ｅ）は撮像画素１０Ａに供給される信号ＳＲＳＴの波形を示し、（Ｆ）は撮像画素１０Ａに供給される信号ＳＦＣＧの波形を示し、（Ｇ）は撮像画素１０Ａに供給される信号ＳＴＧＳの波形を示し、（Ｈ）は参照信号ＲＥＦの波形を示し、（Ｉ）は撮像画素１０Ａから出力される信号ＳＩＧの波形を示し、（Ｊ）は撮像画素１０Ａに接続されたＡＤ変換部ＡＤＣにおけるカウンタ２５の動作を示す。図４Ａは、図３に示した動作のうちの前半の動作を示し、図４Ｂは、図３に示した動作のうちの後半の動作を示す。図３（Ｈ），（Ｉ）、図４Ａ（Ｈ），（Ｉ）、および図４Ｂ（Ｈ），（Ｉ）では、各信号の波形を同じ電圧軸で示している。また、図３（Ｊ）、図４Ａ（Ｊ）、図４Ｂ（Ｊ）において、斜線は、カウンタ２５がカウント動作を行っていることを示している。
【0043】
図５Ａ～５Ｃは、撮像画素１０Ａの状態を表すものである。この図５Ａ～５Ｃでは、トランジスタＴＧＬ，ＲＳＴ，ＦＤＧ，ＴＧＳ，ＦＣＧ，ＳＥＬを、そのトランジスタの動作状態に応じたスイッチを用いて示している。
【0044】
撮像装置１では、ある水平期間Ｈにおいて、まず、走査部１２は、信号ＳＳＥＬを用いて、画素アレイ１１における複数の撮像画素１０のうちの、着目した撮像画素１０Ａを含む１行分の撮像画素１０を選択し、撮像画素１０Ａを、その撮像画素１０Ａに対応する信号線ＳＧＬに電気的に接続させる。そして、走査部１２は、信号ＳＦＤＧ，ＳＴＧＬ，ＳＲＳＴ，ＳＦＣＧ，ＳＴＧＳを用いて、撮像画素１０Ａの動作を制御し、撮像画素１０Ａは、７つの変換期間Ｐ１～Ｐ７において、７つの画素電圧ＶＰ１～ＶＰ７を順次出力する。そして、読出部２０のＡＤ変換部ＡＤＣは、これらの７つの画素電圧ＶＰ１～ＶＰ７に基づいてそれぞれＡＤ変換を行い、７つのカウント値ＣＮＴ１～ＣＮＴ７を出力する。以下にこの動作について詳細に説明する。
【0045】
まず、タイミングｔ１において、水平期間Ｈが開始すると、走査部１２は、タイミングｔ２において、信号ＳＳＥＬの電圧を低レベルから高レベルに変化させる（図４Ａ（Ｂ））。これにより、撮像画素１０Ａでは、トランジスタＳＥＬがオン状態になり、撮像画素１０Ａが信号線ＳＧＬと電気的に接続される。
【0046】
（タイミングｔ１１～ｔ１６の動作）
次に、タイミングｔ１１において、走査部１２は、信号ＳＦＤＧの電圧を低レベルから高レベルに変化させるとともに、信号ＳＲＳＴの電圧を低レベルから高レベルに変化させる（図４Ａ（Ｃ），（Ｅ））。これにより、撮像画素１０Ａでは、トランジスタＦＤＧ，ＲＳＴがともにオン状態になり、フローティングディフュージョンＦＤの電圧が電源電圧ＶＤＤに設定され、フローティングディフュージョンＦＤがリセットされる。また、このタイミングｔ１１において、参照信号生成部２９は、参照信号ＲＥＦの電圧を電圧Ｖ１に変化させる（図４Ａ（Ｈ））。
次に、タイミングｔ１１において、走査部１２は、信号ＳＦＤＧの電圧を低レベルから高レベルに変化させるとともに、信号ＳＲＳＴの電圧を低レベルから高レベルに変化させる（図４Ａ（Ｃ），（Ｅ））。これにより、撮像画素１０Ａでは、トランジスタＦＤＧ，ＲＳＴがともにオン状態になり、フローティングディフュージョンＦＤの電圧が電源電圧ＶＤＤに設定され、フローティングディフュージョンＦＤがリセットされる。また、このタイミングｔ１１において、参照信号生成部２９は、参照信号ＲＥＦの電圧を電圧Ｖ１に変化させる（図４Ａ（Ｈ））。
【0047】
次に、タイミングｔ１２において、走査部１２は、信号ＳＦＤＧの電圧を高レベルから低レベルに変化させるとともに、信号ＳＲＳＴの電圧を高レベルから低レベルに変化させる（図４Ａ（Ｃ），（Ｅ））。これにより、撮像画素１０Ａでは、トランジスタＦＤＧ，ＲＳＴがともにオフ状態になる。
【0048】
次に、タイミングｔ１３において、走査部１２は、信号ＳＦＤＧの電圧を低レベルから高レベルに変化させる（図４Ａ（Ｃ））。これにより、トランジスタＦＤＧがオン状態になる。
【0049】
これにより、撮像画素１０Ａでは、図５Ａに示したように、トランジスタＦＤＧ，ＳＥＬはオン状態になり、その他のトランジスタは全てオフ状態になる。トランジスタＦＤＧがオン状態であるので、フローティングディフュージョンＦＤおよびトランジスタＦＤＧが合成容量を構成する。この合成容量は、撮像画素１０Ａにおいて電荷を電圧へ変換する変換容量として機能する。撮像画素１０Ａでは、このように、トランジスタＦＤＧがオン状態であるので、撮像画素１０Ａにおける変換容量の容量値が大きいため、電荷から電圧への変換効率が低い。この変換容量は、タイミングｔ１１～ｔ１２においてフローティングディフュージョンＦＤがリセットされたときの電荷を保持している。撮像画素１０Ａは、フローティングディフュージョンＦＤにおける電圧に応じた画素電圧ＶＰ（画素電圧ＶＰ１）を出力する。
【0050】
次に、タイミングｔ１４～ｔ１６の期間（変換期間Ｐ１）において、ＡＤ変換部ＡＤＣは、この画素電圧ＶＰ１に基づいてＡＤ変換を行う。具体的には、タイミングｔ１４において、読出制御部２８は、クロック信号ＣＬＫの生成を開始し、これと同時に、参照信号生成部２９は、参照信号ＲＥＦの電圧を、電圧Ｖ１から所定の変化度合いで低下させ始める（図４Ａ（Ｈ））。これに応じて、ＡＤ変換部ＡＤＣのカウンタ２５は、カウント動作を開始する（図４Ａ（Ｊ））。
【0051】
そして、タイミングｔ１５において、参照信号ＲＥＦの電圧が信号ＳＩＧの電圧（画素電圧ＶＰ１）を下回る（図４Ａ（Ｈ），（Ｉ））。これに応じて、ＡＤ変換部ＡＤＣのコンパレータ２４は、信号ＣＭＰの電圧を変化させ、その結果、カウンタ２５は、カウント動作を停止する（図４Ａ（Ｊ））。このときのカウンタ２５のカウント値ＣＮＴは、カウント値ＣＮＴ１である。読出部２０は、これ以降において、このカウント値ＣＮＴ１を信号処理部１４に供給し、その後にカウンタ２５のカウント値ＣＮＴをリセットする。
【0052】
そして、タイミングｔ１６において、読出制御部２８は、変換期間Ｐ１の終了に伴い、クロック信号ＣＬＫの生成を停止し、参照信号生成部２９は、参照信号ＲＥＦの電圧の変化を停止させる（図４Ａ（Ｈ））。
【0053】
（タイミングｔ２１～ｔ２４の動作）
次に、タイミングｔ２１において、走査部１２は、信号ＳＦＤＧの電圧を高レベルから低レベルに変化させる（図４Ａ（Ｃ））。これにより、撮像画素１０Ａでは、トランジスタＦＤＧがオフ状態になる。また、このタイミングｔ２１において、参照信号生成部２９は、参照信号ＲＥＦの電圧を電圧Ｖ１に変化させる（図４Ａ（Ｈ））。
次に、タイミングｔ２１において、走査部１２は、信号ＳＦＤＧの電圧を高レベルから低レベルに変化させる（図４Ａ（Ｃ））。これにより、撮像画素１０Ａでは、トランジスタＦＤＧがオフ状態になる。また、このタイミングｔ２１において、参照信号生成部２９は、参照信号ＲＥＦの電圧を電圧Ｖ１に変化させる（図４Ａ（Ｈ））。
【0054】
これにより、撮像画素１０Ａでは、図５Ｂに示したように、トランジスタＳＥＬはオン状態になり、その他のトランジスタは全てオフ状態になる。撮像画素１０Ａでは、このように、トランジスタＦＤＧがオフ状態であるので、撮像画素１０Ａにおける変換容量の容量値が小さいため、電荷から電圧への変換効率が高い。この変換容量は、タイミングｔ１１～ｔ１２においてフローティングディフュージョンＦＤがリセットされたときの電荷を保持している。撮像画素１０Ａは、フローティングディフュージョンＦＤにおける電圧に応じた画素電圧ＶＰ（画素電圧ＶＰ２）を出力する。
【0055】
次に、タイミングｔ２２～ｔ２４の期間（変換期間Ｐ２）において、ＡＤ変換部ＡＤＣは、この画素電圧ＶＰ２に基づいてＡＤ変換を行う。この動作は、変換期間Ｐ１における動作と同様である。ＡＤ変換部ＡＤＣは、画素電圧ＶＰ２に基づいてＡＤ変換を行い、カウント値ＣＮＴ２を得る（図４Ａ（Ｊ））。読出部２０は、これ以降において、このカウント値ＣＮＴ２を信号処理部１４に供給し、その後にカウンタ２５のカウント値ＣＮＴをリセットする。
【0056】
（タイミングｔ３１～ｔ３５の動作）
次に、タイミングｔ３１において、走査部１２は、信号ＳＴＧＬの電圧を低レベルから高レベルに変化させる（図４Ａ（Ｄ））。これにより、撮像画素１０Ａでは、トランジスタＴＧＬがオン状態になる。これにより、フォトダイオードＰＤ１で発生した電荷がフローティングディフュージョンＦＤに転送される。また、このタイミングｔ３１において、参照信号生成部２９は、参照信号ＲＥＦの電圧を電圧Ｖ１に変化させる（図４Ａ（Ｈ））。
次に、タイミングｔ３１において、走査部１２は、信号ＳＴＧＬの電圧を低レベルから高レベルに変化させる（図４Ａ（Ｄ））。これにより、撮像画素１０Ａでは、トランジスタＴＧＬがオン状態になる。これにより、フォトダイオードＰＤ１で発生した電荷がフローティングディフュージョンＦＤに転送される。また、このタイミングｔ３１において、参照信号生成部２９は、参照信号ＲＥＦの電圧を電圧Ｖ１に変化させる（図４Ａ（Ｈ））。
【0057】
次に、タイミングｔ３２において、走査部１２は、信号ＳＴＧＬの電圧を高レベルから低レベルに変化させる（図４Ａ（Ｄ））。これにより、撮像画素１０Ａでは、トランジスタＴＧＬがオフ状態になる。
【0058】
これにより、撮像画素１０Ａでは、図５Ｂに示したように、トランジスタＦＤＧがオフ状態であるので、撮像画素１０Ａにおける変換容量の容量値が小さいので、電荷から電圧への変換効率が高い。この変換容量は、タイミングｔ３１～ｔ３２においてフォトダイオードＰＤ１から転送された電荷を保持している。撮像画素１０Ａは、フローティングディフュージョンＦＤにおける電圧に応じた画素電圧ＶＰ（画素電圧ＶＰ３）を出力する。
【0059】
次に、タイミングｔ３３～ｔ３５の期間（変換期間Ｐ３）において、ＡＤ変換部ＡＤＣは、この画素電圧ＶＰ３に基づいてＡＤ変換を行う。この動作は、変換期間Ｐ１における動作と同様である。ＡＤ変換部ＡＤＣは、画素電圧ＶＰ３に基づいてＡＤ変換を行い、カウント値ＣＮＴ３を得る（図４Ａ（Ｊ））。このカウント値ＣＮＴ３は、同じく変換効率が高い時（変換期間Ｐ２）に得られたカウント値ＣＮＴ２に対応するものである。読出部２０は、これ以降において、このカウント値ＣＮＴ３を信号処理部１４に供給し、その後にカウンタ２５のカウント値ＣＮＴをリセットする。
【0060】
（タイミングｔ４１～ｔ４４の動作）
次に、タイミングｔ４１において、走査部１２は、信号ＳＦＤＧの電圧を低レベルから高レベルに変化させる（図４Ａ（Ｃ））。これにより、撮像画素１０Ａでは、トランジスタＦＤＧがオン状態になる。また、このタイミングｔ４１において、参照信号生成部２９は、参照信号ＲＥＦの電圧を電圧Ｖ１に変化させる（図４Ａ（Ｈ））。
次に、タイミングｔ４１において、走査部１２は、信号ＳＦＤＧの電圧を低レベルから高レベルに変化させる（図４Ａ（Ｃ））。これにより、撮像画素１０Ａでは、トランジスタＦＤＧがオン状態になる。また、このタイミングｔ４１において、参照信号生成部２９は、参照信号ＲＥＦの電圧を電圧Ｖ１に変化させる（図４Ａ（Ｈ））。
【0061】
これにより、撮像画素１０Ａでは、図５Ａに示したように、トランジスタＦＤＧがオン状態であるので、フローティングディフュージョンＦＤおよびトランジスタＦＤＧが合成容量（変換容量）を構成する。よって、撮像画素１０Ａにおける変換容量の容量値が大きいので、電荷から電圧への変換効率が低い。この変換容量は、タイミングｔ３１～ｔ３２においてフォトダイオードＰＤ１から転送された電荷を保持している。撮像画素１０Ａは、フローティングディフュージョンＦＤにおける電圧に応じた画素電圧ＶＰ（画素電圧ＶＰ４）を出力する。
【0062】
次に、タイミングｔ４２～ｔ４４の期間（変換期間Ｐ４）において、ＡＤ変換部ＡＤＣは、この画素電圧ＶＰ４に基づいてＡＤ変換を行う。この動作は、変換期間Ｐ１における動作と同様である。ＡＤ変換部ＡＤＣは、画素電圧ＶＰ４に基づいてＡＤ変換を行い、カウント値ＣＮＴ４を得る（図４Ａ（Ｊ））。このカウント値ＣＮＴ４は、同じく変換効率が低い時（変換期間Ｐ１）に得られたカウント値ＣＮＴ１に対応するものである。読出部２０は、これ以降において、このカウント値ＣＮＴ４を信号処理部１４に供給し、その後にカウンタ２５のカウント値ＣＮＴをリセットする。
【0063】
（タイミングｔ５１～ｔ５６の動作）
次に、タイミングｔ５１において、走査部１２は、信号ＳＲＳＴの電圧を低レベルから高レベルに変化させる（図４Ｂ（Ｅ））。これにより、撮像画素１０Ａでは、トランジスタＲＳＴがオン状態になる。トランジスタＦＤＧはオン状態であるので、これにより、フローティングディフュージョンＦＤの電圧が電源電圧ＶＤＤに設定され、フローティングディフュージョンＦＤがリセットされる。また、このタイミングｔ５１において、参照信号生成部２９は、参照信号ＲＥＦの電圧を電圧Ｖ１に変化させる（図４Ｂ（Ｈ））。
次に、タイミングｔ５１において、走査部１２は、信号ＳＲＳＴの電圧を低レベルから高レベルに変化させる（図４Ｂ（Ｅ））。これにより、撮像画素１０Ａでは、トランジスタＲＳＴがオン状態になる。トランジスタＦＤＧはオン状態であるので、これにより、フローティングディフュージョンＦＤの電圧が電源電圧ＶＤＤに設定され、フローティングディフュージョンＦＤがリセットされる。また、このタイミングｔ５１において、参照信号生成部２９は、参照信号ＲＥＦの電圧を電圧Ｖ１に変化させる（図４Ｂ（Ｈ））。
【0064】
次に、タイミングｔ５２において、走査部１２は、信号ＳＲＳＴの電圧を高レベルから低レベルに変化させる（図４Ｂ（Ｅ））。これにより、撮像画素１０Ａでは、トランジスタＲＳＴがオフ状態になる。
【0065】
次に、タイミングｔ５３において、走査部１２は、信号ＳＦＣＧの電圧を低レベルから高レベルに変化させる（図４Ｂ（Ｆ））。これにより、撮像画素１０Ａでは、トランジスタＦＣＧがオン状態になる。
【0066】
これにより、撮像画素１０Ａでは、図５Ｃに示したように、トランジスタＦＤＧ，ＦＣＧ，ＳＥＬはオン状態になり、その他のトランジスタは全てオフ状態になる。トランジスタＦＤＧ，ＦＣＧがともにオン状態であるので、フローティングディフュージョンＦＤ、トランジスタＦＤＧ，ＦＣＧ、および容量素子ＦＣが合成容量（変換容量）を構成する。この変換容量は、タイミングｔ５３より前にフォトダイオードＰＤ２で発生し、トランジスタＴＧＳを介して容量素子ＦＣに蓄積されていた電荷を保持している。撮像画素１０Ａは、フローティングディフュージョンＦＤにおける電圧に応じた画素電圧ＶＰ（画素電圧ＶＰ５）を出力する。
【0067】
次に、タイミングｔ５４～ｔ５６の期間（変換期間Ｐ５）において、ＡＤ変換部ＡＤＣは、この画素電圧ＶＰ５に基づいてＡＤ変換を行う。この動作は、変換期間Ｐ１における動作と同様である。ＡＤ変換部ＡＤＣは、画素電圧ＶＰ５に基づいてＡＤ変換を行い、カウント値ＣＮＴ５を得る（図４Ｂ（Ｊ））。読出部２０は、これ以降において、このカウント値ＣＮＴ５を信号処理部１４に供給し、その後にカウンタ２５のカウント値ＣＮＴをリセットする。
【0068】
（タイミングｔ６１～ｔ６５の動作）
次に、タイミングｔ６１において、走査部１２は、信号ＳＴＧＳの電圧を低レベルから高レベルに変化させる（図４Ｂ（Ｇ））。これにより、撮像画素１０Ａでは、トランジスタＴＧＳがオン状態になる。また、このタイミングｔ６１において、参照信号生成部２９は、参照信号ＲＥＦの電圧を電圧Ｖ１に変化させる（図４Ｂ（Ｈ））。
次に、タイミングｔ６１において、走査部１２は、信号ＳＴＧＳの電圧を低レベルから高レベルに変化させる（図４Ｂ（Ｇ））。これにより、撮像画素１０Ａでは、トランジスタＴＧＳがオン状態になる。また、このタイミングｔ６１において、参照信号生成部２９は、参照信号ＲＥＦの電圧を電圧Ｖ１に変化させる（図４Ｂ（Ｈ））。
【0069】
次に、タイミングｔ６２において、走査部１２は、信号ＳＴＧＳの電圧を高レベルから低レベルに変化させる（図４Ｂ（Ｇ））。これにより、撮像画素１０Ａでは、トランジスタＴＧＳがオフ状態になる。
【0070】
これにより、撮像画素１０Ａでは、図５Ｃに示したように、トランジスタＦＤＧ，ＦＣＧがともにオン状態であるので、フローティングディフュージョンＦＤ、トランジスタＦＤＧ，ＦＣＧ、および容量素子ＦＣが合成容量（変換容量）を構成する。この変換容量は、タイミングｔ５３より前にフォトダイオードＰＤ２で発生し、トランジスタＴＧＳを介して容量素子ＦＣに蓄積されていた電荷に加え、タイミングｔ６１～ｔ６２においてフォトダイオードＰＤ２から転送された電荷を保持している。撮像画素１０Ａは、フローティングディフュージョンＦＤにおける電圧に応じた画素電圧ＶＰ（画素電圧ＶＰ６）を出力する。
【0071】
次に、タイミングｔ６３～ｔ６５の期間（変換期間Ｐ６）において、ＡＤ変換部ＡＤＣは、この画素電圧ＶＰ６に基づいてＡＤ変換を行う。この動作は、変換期間Ｐ１における動作と同様である。ＡＤ変換部ＡＤＣは、画素電圧ＶＰ６に基づいてＡＤ変換を行い、カウント値ＣＮＴ６を得る（図４Ｂ（Ｊ））。このカウント値ＣＮＴ６は、フローティングディフュージョンＦＤ、トランジスタＦＤＧ，ＦＣＧ、および容量素子ＦＣが合成容量を構成するときに得られたカウント値ＣＮＴ５に対応するものである。読出部２０は、これ以降において、このカウント値ＣＮＴ６を信号処理部１４に供給し、その後にカウンタ２５のカウント値ＣＮＴをリセットする。
【0072】
（タイミングｔ７１～ｔ７７の動作）
次に、タイミングｔ７１において、走査部１２は、信号ＳＲＳＴの電圧を低レベルから高レベルに変化させる（図４Ｂ（Ｅ））。これにより、撮像画素１０Ａでは、トランジスタＲＳＴがオン状態になる。トランジスタＦＤＧ，ＦＣＧはオン状態であるので、フローティングディフュージョンＦＤの電圧および容量素子ＦＣの電圧が電源電圧ＶＤＤに設定され、フローティングディフュージョンＦＤおよび容量素子ＦＣがリセットされる。また、このタイミングｔ７１において、参照信号生成部２９は、参照信号ＲＥＦの電圧を電圧Ｖ１に変化させる（図４Ｂ（Ｈ））。
次に、タイミングｔ７１において、走査部１２は、信号ＳＲＳＴの電圧を低レベルから高レベルに変化させる（図４Ｂ（Ｅ））。これにより、撮像画素１０Ａでは、トランジスタＲＳＴがオン状態になる。トランジスタＦＤＧ，ＦＣＧはオン状態であるので、フローティングディフュージョンＦＤの電圧および容量素子ＦＣの電圧が電源電圧ＶＤＤに設定され、フローティングディフュージョンＦＤおよび容量素子ＦＣがリセットされる。また、このタイミングｔ７１において、参照信号生成部２９は、参照信号ＲＥＦの電圧を電圧Ｖ１に変化させる（図４Ｂ（Ｈ））。
【0073】
次に、タイミングｔ７２において、走査部１２は、信号ＳＦＣＧの電圧を高レベルから低レベルに変化させる（図４Ｂ（Ｆ））。これにより、撮像画素１０Ａでは、トランジスタＦＣＧがオフ状態になる。
【0074】
次に、タイミングｔ７３において、走査部１２は、信号ＳＲＳＴの電圧を高レベルから低レベルに変化させる（図４Ｂ（Ｅ））。これにより、撮像画素１０Ａでは、トランジスタＲＳＴがオフ状態になる。
【0075】
次に、タイミングｔ７４において、走査部１２は、信号ＳＦＣＧの電圧を低レベルから高レベルに変化させる（図４Ｂ（Ｆ））。これにより、撮像画素１０Ａでは、トランジスタＦＣＧがオン状態になる。
【0076】
これにより、撮像画素１０Ａでは、図５Ｃに示したように、トランジスタＦＤＧ，ＦＣＧがともにオン状態であるので、フローティングディフュージョンＦＤ、トランジスタＦＤＧ，ＦＣＧ、および容量素子ＦＣが合成容量（変換容量）を構成する。この変換容量は、タイミングｔ７１～ｔ７２においてフローティングディフュージョンＦＤおよび容量素子ＦＣがリセットされたときの電荷を保持している。撮像画素１０Ａは、フローティングディフュージョンＦＤにおける電圧に応じた画素電圧ＶＰ（画素電圧ＶＰ７）を出力する。
【0077】
次に、タイミングｔ７５～ｔ７７の期間（変換期間Ｐ７）において、ＡＤ変換部ＡＤＣは、この画素電圧ＶＰ７に基づいてＡＤ変換を行う。この動作は、変換期間Ｐ１における動作と同様である。ＡＤ変換部ＡＤＣは、画素電圧ＶＰ７に基づいてＡＤ変換を行い、カウント値ＣＮＴ７を得る（図４Ｂ（Ｊ））。このカウント値ＣＮＴ７は、フローティングディフュージョンＦＤ、トランジスタＦＤＧ，ＦＣＧ、および容量素子ＦＣが合成容量を構成するときに得られたカウント値ＣＮＴ５に対応するものである。読出部２０は、これ以降において、このカウント値ＣＮＴ７を信号処理部１４に供給し、その後にカウンタ２５のカウント値ＣＮＴをリセットする。
【0078】
次に、タイミングｔ７において、走査部１２は、信号ＳＦＤＧの電圧を高レベルから低レベルに変化させるとともに、信号ＳＦＣＧの電圧を高レベルから低レベルに変化させる（図４Ｂ（Ｃ），（Ｆ））。これにより、撮像画素１０Ａでは、トランジスタＦＤＧ，ＦＣＧがオフ状態になる。また、このタイミングｔ７において、参照信号生成部２９は、参照信号ＲＥＦの電圧を電圧Ｖ２に変化させる（図４Ｂ（Ｈ））。
【0079】
そして、タイミングｔ８において、走査部１２は、信号ＳＳＥＬの電圧を高レベルから低レベルに変化させる（図４Ｂ（Ｂ））。これにより、撮像画素１０Ａでは、トランジスタＳＥＬがオフ状態になり、撮像画素１０Ａが信号線ＳＧＬから電気的に切り離される。
【0080】
次に、信号処理部１４の動作について説明する。信号処理部１４は、読出部２０から供給されたカウント値ＣＮＴに基づいて、４枚の画像ＰＩＣ（画像ＰＩＣ１，ＰＩＣ２，ＰＩＣ３，ＰＩＣ４）を生成する。そして、信号処理部１４は、この４枚の画像ＰＩＣを合成することにより、１枚の撮像画像ＰＩＣＡを生成する。
【0081】
【0082】
読出部２０は、図３，４Ａ，４Ｂを用いて説明したように、タイミングｔ１１～ｔ２１の期間における動作に基づいてカウント値ＣＮＴ１を生成し、タイミングｔ２１～ｔ３１の期間における動作に基づいてカウント値ＣＮＴ２を生成し、タイミングｔ３１～ｔ４１の期間における動作に基づいてカウント値ＣＮＴ３を生成し、タイミングｔ４１～ｔ５１の期間における動作に基づいてカウント値ＣＮＴ４を生成し、タイミングｔ５１～ｔ６１の期間における動作に基づいてカウント値ＣＮＴ５を生成し、タイミングｔ６１～ｔ７１の期間における動作に基づいてカウント値ＣＮＴ６を生成し、タイミングｔ７１～ｔ７の期間における動作に基づいてカウント値ＣＮＴ７を生成する。
【0083】
信号処理部１４は、カウント値ＣＮＴ２およびカウント値ＣＮＴ３に基づいて、画素値ＶＡＬ１を生成する。具体的には、信号処理部１４は、カウント値ＣＮＴ３からカウント値ＣＮＴ２を減算（ＣＮＴ３－ＣＮＴ２）することにより、画素値ＶＡＬ１を算出する。すなわち、撮像装置１は、いわゆる相関２重サンプリング（ＣＤＳ；Correlated double sampling）の原理を利用し、Ｐ相（Pre-Charge相）データに対応するカウント値ＣＮＴ２、およびＤ相（Data相）データに対応するカウント値ＣＮＴ３を用いて、画素値ＶＡＬ１を算出する。
【0084】
同様に、信号処理部１４は、カウント値ＣＮＴ１およびカウント値ＣＮＴ４に基づいて、画素値ＶＡＬ２を生成する。具体的には、信号処理部１４は、カウント値ＣＮＴ４からカウント値ＣＮＴ１を減算（ＣＮＴ４－ＣＮＴ１）することにより、画素値ＶＡＬ２を算出する。すなわち、撮像装置１は、相関２重サンプリングの原理を利用し、Ｐ相データに対応するカウント値ＣＮＴ１、およびＤ相データに対応するカウント値ＣＮＴ４を用いて、画素値ＶＡＬ２を算出する。
【0085】
同様に、信号処理部１４は、カウント値ＣＮＴ５およびカウント値ＣＮＴ６に基づいて、画素値ＶＡＬ３を生成する。具体的には、信号処理部１４は、カウント値ＣＮＴ６からカウント値ＣＮＴ５を減算（ＣＮＴ６－ＣＮＴ５）することにより、画素値ＶＡＬ３を算出する。すなわち、撮像装置１は、相関２重サンプリングの原理を利用し、Ｐ相データに対応するカウント値ＣＮＴ５、およびＤ相データに対応するカウント値ＣＮＴ６を用いて、画素値ＶＡＬ３を算出する。
【0086】
そして、信号処理部１４は、カウント値ＣＮＴ５およびカウント値ＣＮＴ７に基づいて、画素値ＶＡＬ４を生成する。具体的には、信号処理部１４は、カウント値ＣＮＴ５からカウント値ＣＮＴ７を減算（ＣＮＴ５－ＣＮＴ７）することにより、画素値ＶＡＬ４を算出する。すなわち、撮像装置１は、いわゆる２重データサンプリング（ＤＤＳ；Double Data Sampling）の原理を利用し、フローティングディフュージョンＦＤおよび容量素子ＦＣをリセットした後のカウント値ＣＮＴ７、およびフローティングディフュージョンＦＤをリセットした後のカウント値ＣＮＴ５を用いて、画素値ＶＡＬ４を算出する。
【0087】
ここで、画素値ＶＡＬ１は、本開示における「第１の値」の一具体例に対応する。画素値ＶＡＬ２は、本開示における「第２の値」の一具体例に対応する。画素値ＶＡＬ３は、本開示における「第３の値」の一具体例に対応する。画素値ＶＡＬ４は、本開示における「第４の値」の一具体例に対応する。
【0088】
そして、信号処理部１４は、画素アレイ１１における全ての撮像画素１０における画素値ＶＡＬ１に基づいて画像ＰＩＣ１を生成し、画素アレイ１１における全ての撮像画素１０における画素値ＶＡＬ２に基づいて画像ＰＩＣ２を生成し、画素アレイ１１における全ての撮像画素１０における画素値ＶＡＬ３に基づいて画像ＰＩＣ３を生成し、画素アレイ１１における全ての撮像画素１０における画素値ＶＡＬ４に基づいて画像ＰＩＣ４を生成する。そして、信号処理部１４は、これらの画像ＰＩＣ１～ＰＩＣ４を合成することにより、撮像画像ＰＩＣＡを生成する。
【0089】
【0090】
信号処理部１４は、４枚の画像ＰＩＣ１～ＰＩＣ４を合成する際、輝度が高くなるにつれて、画像ＰＩＣ１～ＰＩＣ４のうちの使用する画像ＰＩＣの枚数を増やしていく。具体的には、信号処理部１４は、着目した画素における輝度が輝度値Ｌ１より低い場合には、画像ＰＩＣ１における、その着目した画素での画素値ＶＡＬ１に基づいて、撮像画像ＰＩＣＡにおける、その着目した画素での画素値を生成する。また、信号処理部１４は、着目した画素における輝度が輝度値Ｌ１より高く輝度値Ｌ２より低い場合には、２枚の画像ＰＩＣ１，ＰＩＣ２における、その着目した画素での画素値ＶＡＬ１，ＶＡＬ２に基づいて、撮像画像ＰＩＣＡにおける、その着目した画素での画素値を生成する。また、信号処理部１４は、着目した画素における輝度が輝度値Ｌ２より高く輝度値Ｌ３より低い場合には、３枚の画像ＰＩＣ１～ＰＩＣ３における、その着目した画素での画素値ＶＡＬ１～ＶＡＬ３に基づいて、撮像画像ＰＩＣＡにおける、その着目した画素での画素値を生成する。また、信号処理部１４は、輝度が輝度値Ｌ３より高い場合には、４枚の画像ＰＩＣ１～ＰＩＣ４における、その着目した画素での画素値ＶＡＬ１～ＶＡＬ４に基づいて、撮像画像ＰＩＣＡにおける、その着目した画素での画素値を生成する。
【0091】
図７に示したように、Ｓ／Ｎ比は、輝度が輝度値Ｌ２を超えると低下し（部分Ｗ１）、輝度が輝度値Ｌ３を超えるとさらに低下する（部分Ｗ３）。すなわち、部分Ｗ１では、合成に使用する画像に画像ＰＩＣ３を加えることにより、Ｓ／Ｎ比が低下し、部分Ｗ２では、合成に使用する画像に画像ＰＩＣ４を加えることにより、Ｓ／Ｎ比が低下する。
【0092】
上述したように、撮像装置１では、相関２重サンプリングにより、画像ＰＩＣ３を構成する画素値ＶＡＬ３を求めるようにした。これにより、撮像装置１では、画像ＰＩＣ３に含まれるノイズを低減することができるので、以下に、比較例と対比して説明するように、図７に示した輝度値Ｌ２におけるＳ／Ｎ比の低下を改善することができる。
【0093】
（比較例）
次に、比較例に係る撮像装置１Ｒと対比して、本実施の形態に係る撮像装置１の効果を説明する。撮像装置１Ｒは、走査部１２Ｒと、読出部２０Ｒと、信号処理部１４Ｒと、制御部１５Ｒとを備えている。この撮像装置１Ｒでは、撮像画素１０は、水平期間Ｈにおける６つの変換期間Ｐ１～Ｐ６において、６つの画素電圧ＶＰ１～ＶＰ４，ＶＰ１６，ＶＰ７を順次出力する。読出部２０ＲのＡＤ変換部ＡＤＣは、これらの６つの画素電圧ＶＰ１～ＶＰ４，ＶＰ１６，ＶＰ７に基づいてそれぞれＡＤ変換を行い、６つのカウント値ＣＮＴ１～ＣＮＴ４，ＣＮＴ１６，ＣＮＴ７をそれぞれ出力する。信号処理部１４Ｒは、読出部２０Ｒから供給されたカウント値ＣＮＴ１～ＣＮＴ４，ＣＮＴ１６，ＣＮＴ７に基づいて、３枚の画像ＰＩＣ（画像ＰＩＣ１，ＰＩＣ２，ＰＩＣ１３）を生成する。そして、信号処理部１４Ｒは、この３枚の画像ＰＩＣを合成することにより、１枚の撮像画像ＰＩＣＲを生成する。
次に、比較例に係る撮像装置１Ｒと対比して、本実施の形態に係る撮像装置１の効果を説明する。撮像装置１Ｒは、走査部１２Ｒと、読出部２０Ｒと、信号処理部１４Ｒと、制御部１５Ｒとを備えている。この撮像装置１Ｒでは、撮像画素１０は、水平期間Ｈにおける６つの変換期間Ｐ１～Ｐ６において、６つの画素電圧ＶＰ１～ＶＰ４，ＶＰ１６，ＶＰ７を順次出力する。読出部２０ＲのＡＤ変換部ＡＤＣは、これらの６つの画素電圧ＶＰ１～ＶＰ４，ＶＰ１６，ＶＰ７に基づいてそれぞれＡＤ変換を行い、６つのカウント値ＣＮＴ１～ＣＮＴ４，ＣＮＴ１６，ＣＮＴ７をそれぞれ出力する。信号処理部１４Ｒは、読出部２０Ｒから供給されたカウント値ＣＮＴ１～ＣＮＴ４，ＣＮＴ１６，ＣＮＴ７に基づいて、３枚の画像ＰＩＣ（画像ＰＩＣ１，ＰＩＣ２，ＰＩＣ１３）を生成する。そして、信号処理部１４Ｒは、この３枚の画像ＰＩＣを合成することにより、１枚の撮像画像ＰＩＣＲを生成する。
【0094】
図８，９Ａ，９Ｂは、撮像装置１Ｒにおける、着目したある撮像画素１０Ａに係る動作の一例を表すものである。図９Ａは、図８に示した動作のうちの前半の動作を示し、図９Ｂは、図８に示した動作のうちの後半の動作を示す。タイミングｔ５１以前の動作、およびタイミングｔ７１以降の動作は、本実施の形態に係る撮像装置１の動作（図３，４Ａ，４Ｂ）と同様である。以下に、タイミングｔ５１～ｔ７１における動作について説明する。
【0095】
タイミングｔ５１において、走査部１２Ｒは、信号ＳＲＳＴの電圧を低レベルから高レベルに変化させる（図９Ｂ（Ｅ））。これにより、撮像画素１０Ａでは、トランジスタＲＳＴがオン状態になる。トランジスタＦＤＧはオン状態であるので、これにより、フローティングディフュージョンＦＤの電圧が電源電圧ＶＤＤに設定され、フローティングディフュージョンＦＤがリセットされる。また、このタイミングｔ５１において、参照信号生成部２９は、参照信号ＲＥＦの電圧を電圧Ｖ１に変化させる（図９Ｂ（Ｈ））。
【0096】
次に、タイミングｔ５２において、走査部１２Ｒは、信号ＳＲＳＴの電圧を高レベルから低レベルに変化させる（図９Ｂ（Ｅ））。これにより、撮像画素１０Ａでは、トランジスタＲＳＴがオフ状態になる。
【0097】
次に、タイミングｔ５３において、走査部１２Ｒは、信号ＳＦＣＧの電圧を低レベルから高レベルに変化させる（図９Ｂ（Ｆ））。これにより、撮像画素１０Ａでは、トランジスタＦＣＧがオン状態になる。
【0098】
次に、タイミングｔ５８において、走査部１２Ｒは、信号ＳＴＧＳの電圧を低レベルから高レベルに変化させる（図９Ｂ（Ｇ））。これにより、撮像画素１０Ａでは、トランジスタＴＧＳがオン状態になる。
【0099】
次に、タイミングｔ５９において、走査部１２Ｒは、信号ＳＴＧＳの電圧を高レベルから低レベルに変化させる（図８Ｂ（Ｇ））。これにより、撮像画素１０Ａでは、トランジスタＴＧＳがオフ状態になる。
【0100】
これにより、撮像画素１０Ａでは、図５Ｃに示したように、トランジスタＦＤＧ，ＦＣＧがともにオン状態であるので、フローティングディフュージョンＦＤ、トランジスタＦＤＧ，ＦＣＧ、および容量素子ＦＣが合成容量（変換容量）を構成する。この変換容量は、タイミングｔ５３より前にフォトダイオードＰＤ２で発生し、トランジスタＴＧＳを介して容量素子ＦＣに蓄積されていた電荷に加え、タイミングｔ５８～ｔ５９においてフォトダイオードＰＤ２から転送された電荷を保持している。撮像画素１０Ａは、フローティングディフュージョンＦＤにおける電圧に応じた画素電圧ＶＰ（画素電圧ＶＰ１６）を出力する。
【0101】
次に、タイミングｔ６３～ｔ６５の期間（変換期間Ｐ１６）において、ＡＤ変換部ＡＤＣは、この画素電圧ＶＰ１６に基づいてＡＤ変換を行う。この動作は、変換期間Ｐ１における動作と同様である。ＡＤ変換部ＡＤＣは、画素電圧ＶＰ１６に基づいてＡＤ変換を行い、カウント値ＣＮＴ１６を得る（図９Ｂ（Ｊ））。読出部２０Ｒは、これ以降において、このカウント値ＣＮＴ１６を信号処理部１４Ｒに供給し、その後にカウンタ２５のカウント値ＣＮＴをリセットする。
【0102】
【0103】
読出部２０Ｒは、図８，９Ａ，９Ｂを用いて説明したように、タイミングｔ５１～ｔ７１の期間における動作に基づいてカウント値ＣＮＴ１６を生成し、タイミングｔ７１～ｔ７の期間における動作に基づいてカウント値ＣＮＴ７を生成する。
【0104】
信号処理部１４Ｒは、カウント値ＣＮＴ１６およびカウント値ＣＮＴ７に基づいて、画素値ＶＡＬ１３を生成する。具体的には、信号処理部１４Ｒは、２重データサンプリング（ＤＤＳ）の原理を利用し、カウント値ＣＮＴ１６からカウント値ＣＮＴ７を減算（ＣＮＴ１６－ＣＮＴ７）することにより、画素値ＶＡＬ１３を算出する。
【0105】
そして、信号処理部１４Ｒは、画素アレイ１１における全ての撮像画素１０における画素値ＶＡＬ１に基づいて画像ＰＩＣ１を生成し、画素アレイ１１における全ての撮像画素１０における画素値ＶＡＬ２に基づいて画像ＰＩＣ２を生成し、画素アレイ１１における全ての撮像画素１０における画素値ＶＡＬ１３に基づいて画像ＰＩＣ１３を生成する。そして、信号処理部１４Ｒは、これらの画像ＰＩＣ１，ＰＩＣ２，ＰＩＣ１３を合成することにより、撮像画像ＰＩＣＲを生成する。
【0106】
図１１は、撮像装置１Ｒにより合成された撮像画像ＰＩＣＲにおける信号対雑音比（Ｓ／Ｎ比）の一例を表すものである。
【0107】
信号処理部１４Ｒは、本実施の形態に係る信号処理部１４と同様に、３枚の画像ＰＩＣを合成する際、輝度が高くなるにつれて、画像ＰＩＣ１，ＰＩＣ２，ＰＩＣ１３のうちの使用する画像ＰＩＣの枚数を増やしていく。具体的には、信号処理部１４Ｒは、着目した画素における輝度が輝度値Ｌ１１より低い場合には、画像ＰＩＣ１における、その着目した画素での画素値ＶＡＬ１に基づいて、撮像画像ＰＩＣＲにおける、その着目した画素での画素値を生成する。また、信号処理部１４Ｒは、着目した画素における輝度が輝度値Ｌ１１より高く輝度値Ｌ１２より低い場合には、２枚の画像ＰＩＣ１，ＰＩＣ２における、その着目した画素での画素値ＶＡＬ１，ＶＡＬ２に基づいて、撮像画像ＰＩＣＲにおける、その着目した画素での画素値を生成する。また、信号処理部１４Ｒは、着目した画素における輝度が輝度値Ｌ１２より高い場合には、３枚の画像ＰＩＣ１，ＰＩＣ２，ＰＩＣ１３における、その着目した画素での画素値ＶＡＬ１，ＶＡＬ２，ＶＡＬ１３に基づいて、撮像画像ＰＩＣＲにおける、その着目した画素での画素値を生成する。
【0108】
図１１に示したように、Ｓ／Ｎ比は、輝度が輝度値Ｌ１２を超えると低下する（部分Ｗ３）。すなわち、部分Ｗ３では、合成に使用する画像に画像ＰＩＣ１３を加えることにより、Ｓ／Ｎ比が低下する。すなわち、この画像ＰＩＣ１３は、２重データサンプリング（ＤＤＳ）により生成したものであるので、相関２重サンプリングのように、ノイズを十分に除去することができない。その結果、撮像装置１Ｒでは、この部分Ｗ３において、Ｓ／Ｎ比が大幅に低下してしまう。
【0109】
一方、本実施の形態に係る撮像装置１では、相関２重サンプリングにより、画像ＰＩＣ３を生成した。すなわち、信号処理部１４は、図６において、タイミングｔ５１～ｔ６１の期間における動作に基づいて生成したカウント値ＣＮＴ５をＰ相データとして用いるとともに、続くタイミングｔ６１～ｔ７１の期間における動作に基づいて生成したカウント値ＣＮＴ６をＤ相データとして用いることにより、画像ＰＩＣ３を生成するようにした。これにより、撮像装置１では、例えばフォトダイオードＰＤ２における暗電流やリセットノイズの成分を除去することができるので、図７に示したように、合成に使用する画像に画像ＰＩＣ３を加えたときのＳ／Ｎ比の低下を改善することができる。その結果、撮像装置１では、撮像画像ＰＩＣＡの画質を高めることができる。
【0110】
［効果］
以上のように本実施の形態では、相関２重サンプリングにより、３つめの画像ＰＩＣ３を生成し、この画像ＰＩＣ３を用いて撮像画像を生成するようにしたので、画質を高めることができる。
以上のように本実施の形態では、相関２重サンプリングにより、３つめの画像ＰＩＣ３を生成し、この画像ＰＩＣ３を用いて撮像画像を生成するようにしたので、画質を高めることができる。
【0111】
［変形例１］
上記実施の形態では、図３に示したように、７つの変換期間Ｐ１～Ｐ７を設けたが、これに限定されるものではない。例えば、図１２，１３に示す撮像装置１Ｂのように、８つの変換期間Ｐ１～Ｐ８を設けてもよい。この撮像装置１Ｂは、上記実施の形態に係る撮像装置１（図３）におけるタイミングｔ５１～ｔ６１の期間と、タイミングｔ６１～ｔ７１の期間の間に、変換期間Ｐ１５を含む期間を追加したものである。
上記実施の形態では、図３に示したように、７つの変換期間Ｐ１～Ｐ７を設けたが、これに限定されるものではない。例えば、図１２，１３に示す撮像装置１Ｂのように、８つの変換期間Ｐ１～Ｐ８を設けてもよい。この撮像装置１Ｂは、上記実施の形態に係る撮像装置１（図３）におけるタイミングｔ５１～ｔ６１の期間と、タイミングｔ６１～ｔ７１の期間の間に、変換期間Ｐ１５を含む期間を追加したものである。
【0112】
撮像装置１Ｂでは、ＡＤＣ変換部ＡＤＣは、変換期間Ｐ５において、撮像画素１０Ａから出力された画素電圧ＶＰ（ＶＰ５）に基づいてカウント値ＣＮＴ（カウント値ＣＮＴ５）を生成する。そして、撮像装置１Ｂでは、その後に、信号ＳＳＥＬ，ＳＦＤＧ，ＳＴＧＬ，ＳＲＳＴ，ＳＦＣＧ，ＳＴＧＳを維持したまま、ＡＤＣ変換部ＡＤＣが、変換期間Ｐ１５において、撮像画素１０Ａから出力された画素電圧ＶＰに基づいてカウント値ＣＮＴ（カウント値ＣＮＴ１５）を生成する。
【0113】
そして、信号処理部１４は、カウント値ＣＮＴ１５およびカウント値ＣＮＴ６に基づいて、画素値ＶＡＬ３を生成する。具体的には、信号処理部１４は、カウント値ＣＮＴ６からカウント値ＣＮＴ１５を減算（ＣＮＴ６－ＣＮＴ１５）することにより、画素値ＶＡＬ３を算出する。すなわち、撮像装置１Ｂは、相関２重サンプリングの原理を利用し、Ｐ相データに対応するカウント値ＣＮＴ１５、およびＤ相データに対応するカウント値ＣＮＴ６を用いて、画素値ＶＡＬ３を算出する。また、信号処理部１４は、上記実施の形態の場合と同様に、カウント値ＣＮＴ５およびカウント値ＣＮＴ７に基づいて、画素値ＶＡＬ４を生成する。
【0114】
そして、信号処理部１４は、画素アレイ１１における全ての撮像画素１０における画素値ＶＡＬ１に基づいて画像ＰＩＣ１を生成し、画素アレイ１１における全ての撮像画素１０における画素値ＶＡＬ２に基づいて画像ＰＩＣ２を生成し、画素アレイ１１における全ての撮像画素１０における画素値ＶＡＬ３に基づいて画像ＰＩＣ３を生成し、画素アレイ１１における全ての撮像画素１０における画素値ＶＡＬ４に基づいて画像ＰＩＣ４を生成する。そして、信号処理部１４は、これらの画像ＰＩＣ１～ＰＩＣ４を合成することにより、撮像画像ＰＩＣＡを生成する。
【0115】
以上、実施の形態および変形例を挙げて本技術を説明したが、本技術はこれらの実施の形態等には限定されず、種々の変形が可能である。
【0116】
例えば、上記の各実施の形態等における信号ＳＳＥＬ，ＳＦＤＧ，ＳＴＧＬ，ＳＲＳＴ，ＳＦＣＧ，ＳＴＧＳの波形および遷移タイミングは、一例であり、適宜変更してもよい。
【0117】
なお、本明細書に記載された効果はあくまで例示であって限定されるものでは無く、また他の効果があってもよい。
【0118】
なお、本技術は以下のような構成とすることができる。
【0119】
（１）第１の受光素子および第２の受光素子と、
第１の電荷蓄積部および第２の電荷蓄積部と、
オン状態になることにより前記第１の受光素子と前記第１の電荷蓄積部とを接続する第１のスイッチと、
オン状態になることにより所定ノードと前記第１の電荷蓄積部とを接続する第２のスイッチと、
オン状態になることにより前記所定ノードに所定の電圧を印加する第３のスイッチと、
オン状態になることにより前記第２の受光素子と前記第２の電荷蓄積部とを接続する第４のスイッチと、
オン状態になることにより前記第２の電荷蓄積部と前記所定ノードとを接続する第５のスイッチと、
前記第１の電荷蓄積部における電圧に応じた画素電圧を出力する出力部と、
各スイッチを駆動する駆動部と、
前記画素電圧に基づいて第１の値、第２の値、第３の値、第４の値を求め、これらの値に基づいて画素値を生成する処理部と
を備え、
前記駆動部は、
第１の期間において、前記第２のスイッチおよび前記第３のスイッチをオン状態にするとともに、前記第１のスイッチ、前記第４のスイッチ、および前記第５のスイッチをオフ状態にし、
前記第１の期間の後の第２の期間において、前記第３のスイッチをオフ状態にするとともに前記第５のスイッチをオン状態にし、
前記第２の期間の後の第３の期間において、前記第４のスイッチをオン状態にし、
前記第３の期間の後の第４の期間において、前記第４のスイッチをオフ状態にし、
前記処理部は、前記第２の期間における前記画素電圧と、前記第４の期間における前記画素電圧とに基づいて前記第３の値を求める
を備えた撮像装置。
（２）前記処理部は、前記第２の期間における前記画素電圧に基づいてＡＤ変換を行うことにより第１のデジタル値を生成するとともに、前記第４の期間における前記画素電圧に基づいてＡＤ変換を行うことにより第２のデジタル値を生成し、前記第１のデジタル値および前記第２のデジタル値に基づいて前記第３の値を求める
前記（１）に記載の撮像装置。
（３）前記駆動部は、
前記第４の期間の後の第５の期間において、前記第３のスイッチおよび前記第５のスイッチをオン状態にし、
前記第５の期間の後の第６の期間において、前記第３のスイッチおよび前記第５のスイッチをオフ状態にし、
前記第６の期間の後の第７の期間において、前記第３のスイッチをオフ状態にするとともに前記第５のスイッチをオン状態にし、
前記処理部は、前記第２の期間における前記画素電圧と、前記第７の期間における前記画素電圧とに基づいて前記第４の値を求める
前記（１）または（２）に記載の撮像装置。
（４）前記駆動部は、
前記第４の期間の後の第５の期間において、前記第３のスイッチおよび前記第５のスイッチをオン状態にし、
前記第５の期間の後の第６の期間において、前記第３のスイッチおよび前記第５のスイッチをオフ状態にし、
前記第６の期間の後の第７の期間において、前記第３のスイッチをオフ状態にするとともに前記第５のスイッチをオン状態にし、
前記第２の期間は、第１のサブ期間と、前記第１のサブ期間の後の第２のサブ期間とを含み、
前記処理部は、
前記第２の期間の前記第２のサブ期間における前記画素電圧と、前記第４の期間における前記画素電圧とに基づいて前記第３の値を求め、
前記第２の期間の前記第１のサブ期間における前記画素電圧と、前記第７の期間における前記画素電圧とに基づいて前記第４の値を求める
前記（１）または（２）に記載の撮像装置。
（５）前記駆動部は、
第８の期間において、前記第２のスイッチおよび前記第３のスイッチをオン状態にするとともに、前記第１のスイッチ、前記第４のスイッチ、および前記第５のスイッチをオフ状態にし、
前記第８の期間の後の第９の期間において、前記第２のスイッチをオン状態にするとともに前記第３のスイッチをオフ状態にし、
前記第９の期間の後の第１０の期間において、前記第２のスイッチをオフ状態にし、
前記第１０の期間の後の第１１の期間において、前記第１のスイッチをオン状態にし、
前記第１１の期間の後の第１２の期間において、前記第１のスイッチをオフ状態にし、
前記第１２の期間の後であり前記第１の期間の前の第１３の期間において、前記第２のスイッチをオン状態にし、
前記処理部は、
前記第１０の期間における前記画素電圧と、前記第１２の期間における前記画素電圧とに基づいて前記第１の値を求め、
前記第９の期間における前記画素電圧と、前記第１３の期間における前記画素電圧とに基づいて前記第２の値を求める
前記（１）から（４）のいずれかに記載の撮像装置。
（６）前記処理部は、
輝度が第１の輝度値より低い場合には、前記第１の値に基づいて前記画素値を生成し、
前記輝度が前記第１の輝度値よりも高く第２の輝度値よりも低い場合には、前記第１の値および前記第２の値に基づいて前記画素値を生成し、
前記輝度が前記第２の輝度値よりも高く第３の輝度値よりも低い場合には、前記第１の値、前記第２の値、および前記第３の値に基づいて前記画素値を生成し、
前記輝度が前記第３の輝度値よりも高い場合には、前記第１の値、前記第２の値、前記第３の値、および前記第４の値に基づいて前記画素値を生成する
前記（１）から（５）のいずれかに記載の撮像装置。
（７）前記第１の受光素子の受光領域は、前記第２の受光素子の受光領域よりも広い
前記（１）から（６）のいずれかに記載の撮像装置。
（８）前記第１の電荷蓄積部は、拡散層を有する
前記（１）から（７）のいずれかに記載の撮像装置。
（９）前記処理部は、
電圧レベルが変化する参照信号を生成する参照信号生成部と、
前記画素電圧と前記参照信号とを比較することにより比較信号を生成する比較部と、
前記比較信号に基づいてカウント動作を行うことによりデジタル値を生成するカウンタと
を有する
前記（１）から（８）のいずれかに記載の撮像装置。
（１０）第１の受光素子および第２の受光素子と、第１の電荷蓄積部および第２の電荷蓄積部と、オン状態になることにより前記第１の受光素子と前記第１の電荷蓄積部とを接続する第１のスイッチと、オン状態になることにより所定ノードと前記第１の電荷蓄積部とを接続する第２のスイッチと、オン状態になることにより前記所定ノードに所定の電圧を印加する第３のスイッチと、オン状態になることにより前記第２の受光素子と前記第２の電荷蓄積部とを接続する第４のスイッチと、オン状態になることにより前記第２の電荷蓄積部と前記所定ノードとを接続する第５のスイッチと、前記第１の電荷蓄積部における電圧に応じた画素電圧を出力する出力部とを備えた撮像画素の各スイッチを駆動し、
前記画素電圧に基づいて第１の値、第２の値、第３の値、第４の値を求め、これらの値に基づいて画素値を生成し、
第１の期間において、前記第２のスイッチおよび前記第３のスイッチをオン状態にするとともに、前記第１のスイッチ、前記第４のスイッチ、および前記第５のスイッチをオフ状態にし、
前記第１の期間の後の第２の期間において、前記第３のスイッチをオフ状態にするとともに前記第５のスイッチをオン状態にし、
前記第２の期間の後の第３の期間において、前記第４のスイッチをオン状態にし、
前記第３の期間の後の第４の期間において、前記第４のスイッチをオフ状態にし、
前記第２の期間における前記画素電圧と、前記第４の期間における前記画素電圧とに基づいて前記第３の値を求める
撮像方法。
第１の電荷蓄積部および第２の電荷蓄積部と、
オン状態になることにより前記第１の受光素子と前記第１の電荷蓄積部とを接続する第１のスイッチと、
オン状態になることにより所定ノードと前記第１の電荷蓄積部とを接続する第２のスイッチと、
オン状態になることにより前記所定ノードに所定の電圧を印加する第３のスイッチと、
オン状態になることにより前記第２の受光素子と前記第２の電荷蓄積部とを接続する第４のスイッチと、
オン状態になることにより前記第２の電荷蓄積部と前記所定ノードとを接続する第５のスイッチと、
前記第１の電荷蓄積部における電圧に応じた画素電圧を出力する出力部と、
各スイッチを駆動する駆動部と、
前記画素電圧に基づいて第１の値、第２の値、第３の値、第４の値を求め、これらの値に基づいて画素値を生成する処理部と
を備え、
前記駆動部は、
第１の期間において、前記第２のスイッチおよび前記第３のスイッチをオン状態にするとともに、前記第１のスイッチ、前記第４のスイッチ、および前記第５のスイッチをオフ状態にし、
前記第１の期間の後の第２の期間において、前記第３のスイッチをオフ状態にするとともに前記第５のスイッチをオン状態にし、
前記第２の期間の後の第３の期間において、前記第４のスイッチをオン状態にし、
前記第３の期間の後の第４の期間において、前記第４のスイッチをオフ状態にし、
前記処理部は、前記第２の期間における前記画素電圧と、前記第４の期間における前記画素電圧とに基づいて前記第３の値を求める
を備えた撮像装置。
（２）前記処理部は、前記第２の期間における前記画素電圧に基づいてＡＤ変換を行うことにより第１のデジタル値を生成するとともに、前記第４の期間における前記画素電圧に基づいてＡＤ変換を行うことにより第２のデジタル値を生成し、前記第１のデジタル値および前記第２のデジタル値に基づいて前記第３の値を求める
前記（１）に記載の撮像装置。
（３）前記駆動部は、
前記第４の期間の後の第５の期間において、前記第３のスイッチおよび前記第５のスイッチをオン状態にし、
前記第５の期間の後の第６の期間において、前記第３のスイッチおよび前記第５のスイッチをオフ状態にし、
前記第６の期間の後の第７の期間において、前記第３のスイッチをオフ状態にするとともに前記第５のスイッチをオン状態にし、
前記処理部は、前記第２の期間における前記画素電圧と、前記第７の期間における前記画素電圧とに基づいて前記第４の値を求める
前記（１）または（２）に記載の撮像装置。
（４）前記駆動部は、
前記第４の期間の後の第５の期間において、前記第３のスイッチおよび前記第５のスイッチをオン状態にし、
前記第５の期間の後の第６の期間において、前記第３のスイッチおよび前記第５のスイッチをオフ状態にし、
前記第６の期間の後の第７の期間において、前記第３のスイッチをオフ状態にするとともに前記第５のスイッチをオン状態にし、
前記第２の期間は、第１のサブ期間と、前記第１のサブ期間の後の第２のサブ期間とを含み、
前記処理部は、
前記第２の期間の前記第２のサブ期間における前記画素電圧と、前記第４の期間における前記画素電圧とに基づいて前記第３の値を求め、
前記第２の期間の前記第１のサブ期間における前記画素電圧と、前記第７の期間における前記画素電圧とに基づいて前記第４の値を求める
前記（１）または（２）に記載の撮像装置。
（５）前記駆動部は、
第８の期間において、前記第２のスイッチおよび前記第３のスイッチをオン状態にするとともに、前記第１のスイッチ、前記第４のスイッチ、および前記第５のスイッチをオフ状態にし、
前記第８の期間の後の第９の期間において、前記第２のスイッチをオン状態にするとともに前記第３のスイッチをオフ状態にし、
前記第９の期間の後の第１０の期間において、前記第２のスイッチをオフ状態にし、
前記第１０の期間の後の第１１の期間において、前記第１のスイッチをオン状態にし、
前記第１１の期間の後の第１２の期間において、前記第１のスイッチをオフ状態にし、
前記第１２の期間の後であり前記第１の期間の前の第１３の期間において、前記第２のスイッチをオン状態にし、
前記処理部は、
前記第１０の期間における前記画素電圧と、前記第１２の期間における前記画素電圧とに基づいて前記第１の値を求め、
前記第９の期間における前記画素電圧と、前記第１３の期間における前記画素電圧とに基づいて前記第２の値を求める
前記（１）から（４）のいずれかに記載の撮像装置。
（６）前記処理部は、
輝度が第１の輝度値より低い場合には、前記第１の値に基づいて前記画素値を生成し、
前記輝度が前記第１の輝度値よりも高く第２の輝度値よりも低い場合には、前記第１の値および前記第２の値に基づいて前記画素値を生成し、
前記輝度が前記第２の輝度値よりも高く第３の輝度値よりも低い場合には、前記第１の値、前記第２の値、および前記第３の値に基づいて前記画素値を生成し、
前記輝度が前記第３の輝度値よりも高い場合には、前記第１の値、前記第２の値、前記第３の値、および前記第４の値に基づいて前記画素値を生成する
前記（１）から（５）のいずれかに記載の撮像装置。
（７）前記第１の受光素子の受光領域は、前記第２の受光素子の受光領域よりも広い
前記（１）から（６）のいずれかに記載の撮像装置。
（８）前記第１の電荷蓄積部は、拡散層を有する
前記（１）から（７）のいずれかに記載の撮像装置。
（９）前記処理部は、
電圧レベルが変化する参照信号を生成する参照信号生成部と、
前記画素電圧と前記参照信号とを比較することにより比較信号を生成する比較部と、
前記比較信号に基づいてカウント動作を行うことによりデジタル値を生成するカウンタと
を有する
前記（１）から（８）のいずれかに記載の撮像装置。
（１０）第１の受光素子および第２の受光素子と、第１の電荷蓄積部および第２の電荷蓄積部と、オン状態になることにより前記第１の受光素子と前記第１の電荷蓄積部とを接続する第１のスイッチと、オン状態になることにより所定ノードと前記第１の電荷蓄積部とを接続する第２のスイッチと、オン状態になることにより前記所定ノードに所定の電圧を印加する第３のスイッチと、オン状態になることにより前記第２の受光素子と前記第２の電荷蓄積部とを接続する第４のスイッチと、オン状態になることにより前記第２の電荷蓄積部と前記所定ノードとを接続する第５のスイッチと、前記第１の電荷蓄積部における電圧に応じた画素電圧を出力する出力部とを備えた撮像画素の各スイッチを駆動し、
前記画素電圧に基づいて第１の値、第２の値、第３の値、第４の値を求め、これらの値に基づいて画素値を生成し、
第１の期間において、前記第２のスイッチおよび前記第３のスイッチをオン状態にするとともに、前記第１のスイッチ、前記第４のスイッチ、および前記第５のスイッチをオフ状態にし、
前記第１の期間の後の第２の期間において、前記第３のスイッチをオフ状態にするとともに前記第５のスイッチをオン状態にし、
前記第２の期間の後の第３の期間において、前記第４のスイッチをオン状態にし、
前記第３の期間の後の第４の期間において、前記第４のスイッチをオフ状態にし、
前記第２の期間における前記画素電圧と、前記第４の期間における前記画素電圧とに基づいて前記第３の値を求める
撮像方法。
【0120】
本出願は、日本国特許庁において２０１７年１０月２７日に出願された日本特許出願番号２０１７－２０８１１８号を基礎として優先権を主張するものであり、この出願のすべての内容を参照によって本出願に援用する。
【0121】
当業者であれば、設計上の要件や他の要因に応じて、種々の修正、コンビネーション、サブコンビネーション、および変更を想到し得るが、それらは添付の請求の範囲やその均等物の範囲に含まれるものであることが理解される。
【図1】
【図2】
【図3】
【図4A】
【図4B】
【図5A】
【図5B】
【図5C】
【図6】
【図7】
【図8】
【図9A】
【図9B】
【図10】
【図11】
【図12】
【図13】