ホーム > 特許ランキング > 日本電信電話株式会社
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024119939
(43)【公開日】2024-09-03
(54)【発明の名称】分光素子アレイ、撮像素子および撮像装置
(51)【国際特許分類】
H04N 25/10 20230101AFI20240827BHJP
H04N 25/13 20230101ALI20240827BHJP
G02B 5/20 20060101ALI20240827BHJP
【ＦＩ】
H04N25/10
H04N25/13
G02B5/20 101
【審査請求】有
【請求項の数】10
【出願形態】ＯＬ
(21)【出願番号】P 2024095132
(22)【出願日】2024-06-12
(62)【分割の表示】P 2021551022の分割
【原出願日】2019-10-09
(71)【出願人】
【識別番号】000004226
【氏名又は名称】日本電信電話株式会社
(74)【代理人】
【識別番号】110001243
【氏名又は名称】弁理士法人谷・阿部特許事務所
(72)【発明者】
【氏名】宮田 将司
(72)【発明者】
【氏名】中島 光雅
(72)【発明者】
【氏名】橋本 俊和
(57)【要約】 （修正有）
【課題】高感度で、信号処理による色再構成を用いることなく、均一な空間解像度をもつ画像を生成し得る撮像素子および撮像装置を提供する。
【解決手段】本開示の撮像素子は、基板上に光電変換素子を含む複数の画素がアレイ状に配列された２次元画素アレイと、２次元画素アレイの上に形成された透明層と、透明層の内部または上に、複数の分光素子がアレイ状に配列された２次元分光素子アレイと、を備える。分光素子の各々は、透明層の屈折率よりも高い屈折率を有する材料から形成された複数の微細構造体を含む。複数の微細構造体は、微細構造体パターンを有する。分光素子の各々は、入射した光を、波長領域に応じて、それぞれ異なる伝搬方向を有する第１、第２、第３、および第４の偏向光に分離する。分光素子の各々の直下にある互いに隣接する第１、第２、第３、および第４の画素は、第１、第２、第３、および第４の偏向光をそれぞれ検出する。
【選択図】図５
【解決手段】本開示の撮像素子は、基板上に光電変換素子を含む複数の画素がアレイ状に配列された２次元画素アレイと、２次元画素アレイの上に形成された透明層と、透明層の内部または上に、複数の分光素子がアレイ状に配列された２次元分光素子アレイと、を備える。分光素子の各々は、透明層の屈折率よりも高い屈折率を有する材料から形成された複数の微細構造体を含む。複数の微細構造体は、微細構造体パターンを有する。分光素子の各々は、入射した光を、波長領域に応じて、それぞれ異なる伝搬方向を有する第１、第２、第３、および第４の偏向光に分離する。分光素子の各々の直下にある互いに隣接する第１、第２、第３、および第４の画素は、第１、第２、第３、および第４の偏向光をそれぞれ検出する。
【選択図】図５
【特許請求の範囲】
【請求項1】
基板上に光電変換素子を含む複数の画素がアレイ状に配列された２次元画素アレイと、
前記２次元画素アレイの上に形成された透明層と、
前記透明層の内部または上に、複数の分光素子がアレイ状に配列された２次元分光素子アレイと、
を備えた撮像素子であって、
前記分光素子の各々が、前記透明層の屈折率よりも高い屈折率を有する材料から形成された複数の微細構造体を含み、前記複数の微細構造体が、微細構造体パターンを有し、前記２次元分光素子アレイにおける２次元の配列方向おいて隣接する分光素子は、並進対称性を有さず、前記分光素子の各々が、入射した光を２次元の方向に分光し、前記複数の画素が、前記２次元の方向に分光された光を検出する、撮像素子。
前記２次元画素アレイの上に形成された透明層と、
前記透明層の内部または上に、複数の分光素子がアレイ状に配列された２次元分光素子アレイと、
を備えた撮像素子であって、
前記分光素子の各々が、前記透明層の屈折率よりも高い屈折率を有する材料から形成された複数の微細構造体を含み、前記複数の微細構造体が、微細構造体パターンを有し、前記２次元分光素子アレイにおける２次元の配列方向おいて隣接する分光素子は、並進対称性を有さず、前記分光素子の各々が、入射した光を２次元の方向に分光し、前記複数の画素が、前記２次元の方向に分光された光を検出する、撮像素子。
【請求項2】
前記分光素子の各々が、前記入射した光を、波長領域に応じて、それぞれ異なる伝搬方向を有する第１の偏向光、第２の偏向光、第３の偏向光、および第４の偏向光に分離し、
前記分光素子の各々の直下にある互いに隣接する第１の画素、第２の画素、第３の画素、および第４の画素が、前記第１の偏向光、前記第２の偏向光、前記第３の偏向光、および前記第４の偏向光をそれぞれ検出する、請求項１に記載の撮像素子。
前記分光素子の各々の直下にある互いに隣接する第１の画素、第２の画素、第３の画素、および第４の画素が、前記第１の偏向光、前記第２の偏向光、前記第３の偏向光、および前記第４の偏向光をそれぞれ検出する、請求項１に記載の撮像素子。
【請求項3】
前記分光素子の各々の中心が、前記分光素子の各々の直下にある互いに隣接する前記第１の画素、前記第２の画素、前記第３の画素、および前記第４の画素が形成する四角形の中心の直上にそれぞれ位置しており、
互いに隣接する前記第１の画素、前記第２の画素、前記第３の画素、および前記第４の画素の波長領域は、前記第１の画素、前記第２の画素、前記第３の画素、および前記第４の画素の各々が検出する前記第１の偏向光、前記第２の偏向光、前記第３の偏向光、および前記第４の偏向光の波長領域に対応し、
前記第１の偏向光、前記第２の偏向光、前記第３の偏向光、および前記第４の偏向光のうちの少なくとも３つの偏向光の波長領域が互いに異なっている、請求項２に記載の撮像素子。
互いに隣接する前記第１の画素、前記第２の画素、前記第３の画素、および前記第４の画素の波長領域は、前記第１の画素、前記第２の画素、前記第３の画素、および前記第４の画素の各々が検出する前記第１の偏向光、前記第２の偏向光、前記第３の偏向光、および前記第４の偏向光の波長領域に対応し、
前記第１の偏向光、前記第２の偏向光、前記第３の偏向光、および前記第４の偏向光のうちの少なくとも３つの偏向光の波長領域が互いに異なっている、請求項２に記載の撮像素子。
【請求項4】
前記分光素子の各々における前記複数の微細構造体が、光が透過する方向の厚みが一定である、請求項２または３に記載の撮像素子。
【請求項5】
前記分光素子の各々における前記複数の微細構造体が、光が透過する方向の厚みが位置に応じて異なる、請求項２または３に記載の撮像素子。
【請求項6】
前記入射した光が白色光の場合、
前記第１の画素に入射する光は、波長５００ｎｍ以下の青色波長域で光強度のピークを有し、
前記第２の画素および前記第３の画素に入射する光は、波長５００ｎｍ～６００ｎｍの緑色波長域で光強度のピークを有し、
前記第４の画素に入射する光は、波長６００ｎｍ以上の赤色波長域で光強度のピークを有する、請求項２乃至５のいずれか一項に記載の撮像素子。
前記第１の画素に入射する光は、波長５００ｎｍ以下の青色波長域で光強度のピークを有し、
前記第２の画素および前記第３の画素に入射する光は、波長５００ｎｍ～６００ｎｍの緑色波長域で光強度のピークを有し、
前記第４の画素に入射する光は、波長６００ｎｍ以上の赤色波長域で光強度のピークを有する、請求項２乃至５のいずれか一項に記載の撮像素子。
【請求項7】
前記入射した光が白色光の場合、
前記第１の画素に入射する光は、波長５００ｎｍ以下の青色波長域で光強度のピークを有し、
前記第２の画素に入射する光は、波長５００ｎｍ～６００ｎｍの緑色波長域で光強度のピークを有し、
前記第３の画素に入射する光は、波長６００ｎｍ～８００ｎｍの赤色波長域で光強度のピークを有し、
前記第４の画素に入射する光は、波長８００ｎｍ以上の近赤外波長域で光強度のピークを有する、請求項２乃至５のいずれか一項に記載の撮像素子。
前記第１の画素に入射する光は、波長５００ｎｍ以下の青色波長域で光強度のピークを有し、
前記第２の画素に入射する光は、波長５００ｎｍ～６００ｎｍの緑色波長域で光強度のピークを有し、
前記第３の画素に入射する光は、波長６００ｎｍ～８００ｎｍの赤色波長域で光強度のピークを有し、
前記第４の画素に入射する光は、波長８００ｎｍ以上の近赤外波長域で光強度のピークを有する、請求項２乃至５のいずれか一項に記載の撮像素子。
【請求項8】
前記２次元画素アレイと前記２次元分光素子アレイの間に、さらにフィルタアレイを備え、
前記フィルタアレイは、
波長５００ｎｍ以下の青色波長域で透過率のピークを有する第１のフィルタ、
波長５００ｎｍ～６００ｎｍの緑色波長域で透過率のピークを有する第２のフィルタ、
波長６００ｎｍ～８００ｎｍの赤色波長域で透過率のピークを有する第３のフィルタ、および
波長８００ｎｍ以上の近赤外波長域で透過率のピークを有する第４のフィルタ、
のうちの少なくとも１つを含む、請求項６または７に記載の撮像素子。
前記フィルタアレイは、
波長５００ｎｍ以下の青色波長域で透過率のピークを有する第１のフィルタ、
波長５００ｎｍ～６００ｎｍの緑色波長域で透過率のピークを有する第２のフィルタ、
波長６００ｎｍ～８００ｎｍの赤色波長域で透過率のピークを有する第３のフィルタ、および
波長８００ｎｍ以上の近赤外波長域で透過率のピークを有する第４のフィルタ、
のうちの少なくとも１つを含む、請求項６または７に記載の撮像素子。
【請求項9】
請求項１乃至８のいずれか一項に記載の撮像素子と、
前記撮像素子の撮像面に光学像を形成するための撮像光学系と
前記撮像素子が出力する電気信号を処理する信号処理部と、
を備えた撮像装置。
前記撮像素子の撮像面に光学像を形成するための撮像光学系と
前記撮像素子が出力する電気信号を処理する信号処理部と、
を備えた撮像装置。
【請求項10】
透明層の内部または上に、複数の分光素子がアレイ状に配列された２次元分光素子アレイであって、
前記分光素子の各々が、前記透明層の屈折率よりも高い屈折率を有する材料から形成された複数の微細構造体を含み、前記複数の微細構造体が、微細構造体パターンを有し、前記２次元分光素子アレイにおける２次元の配列方向おいて隣接する分光素子は、並進対称性を有さず、前記分光素子の各々が、入射した光を２次元の方向に分光する、分光素子アレイ。
前記分光素子の各々が、前記透明層の屈折率よりも高い屈折率を有する材料から形成された複数の微細構造体を含み、前記複数の微細構造体が、微細構造体パターンを有し、前記２次元分光素子アレイにおける２次元の配列方向おいて隣接する分光素子は、並進対称性を有さず、前記分光素子の各々が、入射した光を２次元の方向に分光する、分光素子アレイ。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、分光素子アレイ、撮像素子および撮像素子を備える撮像装置に関する。
【背景技術】
【0002】
一般に、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）センサやＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）センサといった光電変換素子を備える撮像素子において、撮像対象の色情報を取得するには、光電変換素子を含む各画素上で入射光の色分離を行う必要がある。
【0003】
図１に、一般のカラー撮像素子の断面図を示す。従来のカラー撮像素子１００では、電気配線１１２上に光電変換素子１０２が配置され、有機材料または無機材料からなる減色型の色フィルタ１０４が光電変換素子１０２を含む各画素に対向して配置される。色フィルタ１０４の上にはマイクロレンズ１０３が配置される。マイクロレンズ１０３から光が入射すると、色フィルタ１０４を用いて、所望の波長帯の光のみを透過させ、不要な波長帯の光を吸収または反射させることで、画素ごとに赤（Ｒ）、緑（Ｇ）、青（Ｂ）に対応する３つの光電変換素子１０２から各信号を取得することで、カラーの２次元画像を生成することができる。
【0004】
しかし、上記のような一般的なカラー撮像素子１００では、ＲＧＢが１：１：１の割合の入射光の場合、色フィルタ１０４を透過後の総光量が必然的に１／３程度になってしまうという課題がある。失われた残りの光は、色フィルタ１０４による吸収または反射による損失であり、画像の構成に利用することができない。したがって、入射光の光利用効率は最大でも３０％程度となり、撮像素子の感度は大きく制限されている。画素の微細化（画像の高解像度化）が進んでいる近年では、１画素の受ける光量が必然的に低下しており、上記の撮像素子の感度の制限を低減することが望まれている。
【0005】
撮像素子の感度の制限を低減するためアプローチとして、色フィルタ１０４の代わりに、入射光を波長帯に応じて分岐することが可能なプリズムやダイクロイックミラーといった分光素子を用いて、カラー撮像素子を構成することが提案されている。このようなアプローチは、原理的に入射光の損失を大きく低減することができるため、色フィルタ１０４を使用した場合に比べて、光利用効率を大幅に向上させることができる。しかしながら、画素の微細化が進んでいる近年では、プリズムやダイクロイックミラーといった分光素子をその機能と特性を保ったまま光電変換素子上への集積することは困難である。
【0006】
そこで近年では、光電変換素子上への集積が比較的容易な微細構造からなる分光素子を用いて、カラー撮像素子を構成することが提案されている。非特許文献１では、入射光を２波長領域に分離することが可能な２種類の微細構造を用いることで、色分離における光損失を原理的になくし、光利用効率を向上させる方法が提案されている。
【0007】
図２（ａ）に、非特許文献１において提案されているカラー撮像素子２００の上面図を示し、図２（ｂ）に、そのＩＩｂ－ＩＩｂ断面図を示し、図２（ｃ）に、そのＩＩｃ－ＩＩｃ断面図を示す。図示されているように、カラー撮像素子２００は、色フィルタ１０４に代えて画素（光電変換素子１０２）に対応して配置された微細な梁構造２０６－１、２０６－２によって、入射光は波長領域に応じて、直進する光と左右に偏向する光に分離する。これは、微細な梁構造内とその周囲において、入射光が感じる位相遅延効果が、一方の波長領域では大きく異なり、もう一方の波長領域ではほぼ等しくなるためである。したがって、２次元画素アレイ上に、構造厚さが異なる２種類の微細な梁構造２０６－１，２０６－２を行ごとに交互に配置することで、互いに隣接する４つの光電変換素子１０２はそれぞれ異なる波長成分を持った光を受けることが可能になる。その結果、各光電変換素子１０２から出力される光電変換信号に対して行列演算を用いた信号処理を行い、色情報を再生することで、色画像を生成することができる。
【0008】
また、非特許文献２では、入射光を３波長領域に分離することが可能な厚さが一定のバイナリー微細構造を、画素（光電変換素子１０２）上に配置することで、光利用効率を向上させる方法が提案されている。
【0009】
図３（ａ）に、非特許文献２において提案されている微小分光素子３０６を有するカラー撮像素子３００の上面図を示し、図３（ｂ）に、そのＩＩＩｂ－ＩＩＩｂ断面図を示す。非特許文献２のカラー撮像素子３００を用いることで、非特許文献１のカラー撮像素子２００を用いた場合と同様に、信号処理を用いた色情報再構成により色画像を生成することができる。さらに非特許文献２のカラー撮像素子３００における光利用効率は、非特許文献１のカラー撮像素子２００の光利用効率を上回る。また、非特許文献２のカラー撮像素子２００は、非特許文献１のカラー撮像素子２００で問題であった偏光依存性がなく、また、バイナリー構造であるため作製が容易といった利点がある。
【先行技術文献】
【非特許文献】
【0010】
【非特許文献1】Seiji Nishiwaki, Tatsuya Nakamura, Masao Hiramoto, Toshiya Fujii and Masa-aki Suzuki, "Efficient colour splitters for high-pixel-density image sensors," Nature Photonics, Vol. 7, March 2013, pp.240-246
【非特許文献2】Masashi Miyata, Mitsumasa Nakajima, Toshikazu Hashimoto, "High-Sensitivity Color Imaging Using Pixel-Scale Color Splitters Based on Dielectric Metasurfaces," ACS Photonics, March 2019, pp1442-1450
【非特許文献3】David Sell, Jianji Yang, Sage Doshay, Jonathan A. Fan, "Periodic Dielectric Metasurfaces with High‐Efficiency, Multiwavelength Functionalities," Advanced Optical Materials, Vol.5, 2017, 1700645
【発明の概要】
【0011】
非特許文献１および２には、色画像生成の方法として、信号処理を用いた色再構成方法が提案されている。しかしながら、非特許文献１および２で開示された技術には、実用上の課題が存在する。これらの色画像生成の方法は、この信号処理に起因する色のエラー（ノイズ）が生じてしまうことが懸念され、画像の信号対ノイズ比（ＳＮ比）が劣化する恐れがある。したがって、分光素子によって、光利用効率、すなわちセンサでの受光量が増加したとしても、信号処理による新たなノイズの付加により、撮像画像のＳＮ比が改善しない恐れがあり、実質的な感度が向上しない恐れがある。さらに、信号の処理時間が新たに必要になるため、撮像の時間分解能の低下が危惧される。なお、非特許文献２で開示されているように、通常真円であるマイクロレンズの形状を楕円にする、または通常正方形である画素の形状を長方形にするなどして、信号処理を用いずに信号強度から直接色情報を取得する形態を考えることができるが、レンズや画素の形状の変更は既存の作製プロセスや後段処理、画素配置などと適合しない懸念がある他、画像の空間解像度の均一性を乱す恐れがあるため、実現性に乏しい。さらに、非特許文献１および２に開示されている分光素子はともに、入射光を画素アレイ上の１軸方向のみに沿って色分離する素子である。したがって、色分離軸とそれに垂直な軸において、画素間の光クロストークの影響が大きく異なってしまう。これにより、生成される色画像では、互いに垂直な２軸において実質的な空間解像度が異なることが懸念される。
【0012】
本開示は、上記の問題点に鑑みてなされたもので、その目的は、高感度で、信号処理による色再構成を用いることなく、均一な空間解像度をもつ画像を生成することが可能な撮像素子および撮像装置を提供することにある。
【0013】
上記の課題を解決するために、本発明の一実施形態に係る撮像素子は、基板上に光電変換素子を含む複数の画素がアレイ状に配列された２次元画素アレイと、２次元画素アレイの上に形成された透明層と、透明層の内部または上に、複数の分光素子がアレイ状に配列された２次元分光素子アレイと、を備え、分光素子の各々が、透明層の屈折率よりも高い屈折率を有する材料から形成された複数の微細構造体を含み、複数の微細構造体が、微細構造体パターンを有し、分光素子の各々が、入射した光を２次元の方向に分光し、複数の画素が、２次元の方向に分光した光をそれぞれ検出する。一実施形態では、上記の撮像素子において、分光素子の各々が、入射した光を、波長領域に応じて、それぞれ異なる伝搬方向を有する第１の偏向光、第２の偏向光、第３の偏向光、および第４の偏向光に分離し、分光素子の各々の直下にある互いに隣接する第１の画素、第２の画素、第３の画素、および第４の画素が、第１の偏向光、第２の偏向光、第３の偏向光、および第４の偏向光をそれぞれ検出する。
【0014】
本発明の一実施形態によれば、平面２軸方向に沿って入射光を複数の波長領域に分離させることが可能な微小分光素子を用いることにより、高感度で、信号処理による色再構成を用いることなく、均一な空間解像度をもつ画像を生成することが可能な撮像素子および撮像装置を実現することができる。また、本発明の一実施形態に係る撮像素子は、広く用いられている画素配置であるベイヤー配置（Ｂａｙｅｒ ａｒｒａｎｇｅｍｅｎｔ）と整合性があるため、一般的なカラー撮像素子の構成およびその後段の電子回路を大きく変更することなく、色フィルタを微小分光素子に置き換えることで、高感度化を達成できる。
【図面の簡単な説明】
【0015】
【図1】一般のカラー撮像素子の断面図である
【図2】（ａ）は、非特許文献１において提案されているカラー撮像素子の上面図であり、（ｂ）は、そのＩＩｂ－ＩＩｂ断面図であり、および（ｃ）は、そのＩＩｃ－ＩＩｃ断面図である
【図4】本発明の一実施形態に係る撮像装置１０の概略構成を示した側面図である。
【図5】（ａ）は、画素アレイおよび分光素子アレイを含む撮像素子５００の上面から見た構成の一部を模式的に示す図であり、（ｂ）は、そのＶｂ－Ｖｂ断面を模式的に示す図であり、（ｃ）は、そのＶｃ－Ｖｃ断面を模式的に示す図である。
【図6】（ａ）は、画素アレイおよび分光素子アレイを含む撮像素子６００の上面から見た構成の一部を模式的に示す図であり、（ｂ）は、そのＶＩｂ－ＶＩｂ断面を模式的に示す図であり、（ｃ）は、そのＶＩｃ－ＶＩｃ断面を模式的に示す図である。
【図7】（ａ）は、第１の波長領域（Ｒ）に対応する波長の位相遅延分布を示す図であり、（ｂ）は、第２の波長領域（Ｇ）に対応する波長の位相遅延分布を示す図であり、（ｃ）は、第３の波長領域（Ｂ）に対応する波長の位相遅延分布を示す図ある。
【図8】（ａ）は、本実施形態に係る微小分光素子１０１を構成する微細構造体の一例の上面図であり、（ｂ）は微細構造体の一例の側面図である。
【図9】（ａ）は、画素アレイおよび分光素子アレイを含む撮像素子９００の上面から見た構成の一部を模式的に示す図であり、（ｂ）は、そのＩＸｂ－ＩＸｂ断面を模式的に示す図であり、（ｃ）は、そのＩＸｃ－ＩＸｃ断面を模式的に示す図である。
【図10】（ａ）は、画素アレイおよび分光素子アレイを含む撮像素子９００の上面から見た構成の一部を模式的に示す図であり、（ｂ）は、そのＸｂ－Ｘｂ断面を模式的に示す図であり、（ｃ）は、そのＸｃ－Ｘｃ断面を模式的に示す図である。
【図11】（ａ）は、第１の波長領域（Ｒ）に対応する波長の位相遅延分布を示す図であり、（ｂ）は、第２の波長領域（Ｇ）に対応する波長の位相遅延分布を示す図であり、（ｃ）は、第３の波長領域（Ｂ）に対応する波長の位相遅延分布を示す図であり、（ｄ）は、第４の波長領域（ＩＲ）に対応する波長の位相遅延分布を示す図である。
【発明を実施するための形態】
【0016】
以下、図面を用いて本発明の実施の形態について詳細に説明する。ただし、以下の実施形態は一例に過ぎず、本発明はこれらの実施形態に限定されないことは言うまでもない。
【0017】
図４は、本発明の一実施形態に係る撮像装置１０の概略構成を示した側面図である。撮像装置１０は、レンズ光学系１１、撮像素子１２、および撮像素子１２から出力される光電変換信号を処理して画像信号を生成する信号処理部１３を備える。
【0018】
自然光や照明光等の光が物体１に照射され物体１により透過／反射／散乱した光は、または、物体１から発する光は、レンズ光学系１１によりＣＣＤやＣＭＯＳ等の光電変換素子を含む撮像素子１２上に光学像を形成する。一般に、レンズ光学系は、様々な光学収差を補正するため、光軸に沿って並んだ複数のレンズからなるレンズ群により構成されるが、図４では図面を簡略化して単一のレンズとして示している。信号処理部１３は、撮像素子１２から出力される光電変換信号を処理して画像信号を生成し、生成した画像信号を外部に送出する画像信号出力を備える。なお、本発明の撮像装置１０は、赤外光カットの光学フィルタ、電子シャッタ、ビューファインダ、電源（電池）、フラッシュライトなどの公知の構成要素を備え得るが、それらの説明は本発明の実施形態の理解に特に必要でないため省略する。また、以上の構成はあくまでも一例であり、本発明の一実施形態において、レンズ光学系１１、撮像素子１２、信号処理部１３を除く構成要素には、公知の要素を適切に組み合わせて用いることができる。
【0019】
本発明の実施形態の詳細を説明する前に、本発明の実施形態における撮像素子１２の概略を説明する。本発明の実施形態の撮像素子１２は、微小分光素子１０１と、光電変換素子１０２を含む画素とを備える。光電変換素子１０２を含む画素は、２次元状に複数配列されて画素アレイを構成している。また、微小分光素子１０１は、２次元状に複数配列されて、分光素子アレイを構成している。互いに隣接する４つの画素は、その一部が１つの分光素子の対応する位置に設けられている。分光素子の対応する位置とは、たとえば分光素子の占める領域から素子面垂直方向に画素アレイへ下ろした投影面に画素アレイの互いに隣接する４つの画素の一部が重なっている状態を含む。
【0020】
図５（ａ）に、撮像素子１２の一例として、画素アレイおよび分光素子アレイを含む撮像素子５００の上面から見た構成の一部を示し、図５（ｂ）に、そのＶｂ－Ｖｂ断面における撮像素子５００の構成の一部を示し、図５（ｃ）に、そのＶｃ－Ｖｃ断面における撮像素子５００の構成の一部を示す。分光素子アレイは画素アレイと対向している。分光素子アレイは、レンズ光学系１１からの光が入射する側に配置されている。分光素子アレイと画素アレイとの間、および分光素子アレイのレンズ光学系１１側には、透明層１１１が設けられている。画素アレイの分光素子アレイの反対側には、電気配線１１２（不図示）が設けられている。
【0021】
分光素子アレイを構成する各微小分光素子１０１は、厚み（ｚ軸方向の長さ）一定である微細構造パターンを有している。より具体的には、各微小分光素子１０１は、厚みが一定であるが、上面および下面の形状が配列の位置に応じて異なる微細構造パターンを有している。なお、微小分光素子１０１の厚みは、位置に応じて厚みが異なる微細構造体でもよい。また、微細構造パターンに制限はなく、様々な配列形態をとり得る。なお、本発明の実施形態の撮像素子１２は、マイクロレンズや遮光壁などの公知の構成要素を備え得るが、それらの説明は本発明の概略の理解に特に必要でないため、図５（ａ）～５（ｃ）では省略している。
【0022】
本実施形態の説明は、撮像素子１２に入射する光を、波長領域毎に第１の波長領域、第２の波長領域、第３の波長領域、および第４の波長領域に分類する。なお、第１から第４の波長領域の組み合わせは、一般に赤（Ｒ：波長６００ｎｍ以上の赤色波長域で光強度のピークを有する）、緑（Ｇ：波長５００ｎｍ～６００ｎｍの緑色波長域で光強度のピークを有する）、青（Ｂ：波長５００ｎｍ以下の青色波長域で光強度のピークを有する）の３原色と近赤外光（ＩＲ：波長８００ｎｍ以上の近赤外波長域で光強度のピークを有する）の組み合わせであるが、これに限定されない。例えば、波長領域の組み合わせは、赤（Ｒ）、緑（Ｇ）、青（Ｂ）の３原色と紫外光（ＵＶ：波長３８０ｎｍ以下の紫外波長域で光強度のピークを有する）の組み合わせでもよく、赤外光の波長領域における互いに異なる複数の波長領域の組み合わせでもよく、紫外光の波長領域における互いに異なる複数の波長領域の組み合わせでもよい。また、第１～第３の波長領域を互いに異なる波長領域とし、第４の波長領域を第１～第３の波長領域のうちの１つと同じとしてもよい。本発明の実施形態における分光素子アレイを構成する微小分光素子１０１の各々は、後述する微細構造体に起因する位相遅延効果およびその構造寸法依存性および波長依存性を利用することで、上述した第１から第３の波長領域、または、第１から第４の波長領域に応じて、撮像素子１２に入射した光の伝搬方向を変え、画素アレイ上において空間的に光を分離する機能を有する。すなわち、本発明の実施形態では、撮像素子１２に入射した光は、各微小分光素子１０１によって、第１の方向（右上）、第２の方向（右下）、第３の方向（左下）および第４の方向（左上）の４方向に分離し、互いに隣接する４つの画素の一部に入射する。より詳細な例として、微小分光素子１０１が、赤（Ｒ）を第１の方向（右上）に分離し、緑（Ｇ）を第２の方向（右下）に分離し、青（Ｂ）を第３の方向（左下）に分離し、赤外光（ＩＲ）を第４の方向（左上）に分離する場合を説明する。赤（Ｒ）の波長領域の光は、第１の方向に広がり幅の広い光（波長成分が並んだ光）として、互いに隣接した４つの画素のうちの赤に対応する画素（緑に対応する画素の上側に隣接し、赤外光に対応する画素の右側に隣接する）に入射する（短波長の光の入射角と長波長の光の入射角が異なる）。緑（Ｇ）の波長領域の光は、第２の方向に広がり幅の広い光（波長成分が並んだ光）として、緑に対応する画素（赤に対応する画素の下側に隣接し、青に対応する画素の右側に隣接する）に入射する（短波長の光の入射角と長波長の光の入射角が異なる）。青（Ｂ）の波長領域の光は、第３の方向に広がり幅の広い光（波長成分が並んだ光）として、青に対応する画素（緑に対応する画素の左側に隣接し、赤外光に対応する画素の下側に隣接する）に入射する（短波長の光の入射角と長波長の光の入射角が異なる）。赤外光（ＩＲ）の波長領域の光は、第４の方向に広がり幅の広い光（波長成分が並んだ光）として、赤外光に対応する画素（赤に対応する画素の左側に隣接し、青に対応する画素の上側に隣接する）に入射する（短波長の光の入射角と長波長の光の入射角が異なる）。
【0023】
また、平面２軸方向（ｘｙ平面のｘ軸方向およびｙ軸方向）に隣接する４つの微小分光素子１０１を１つの分光ユニット（分光ユニットは正方形である）とすると、１つの分光ユニットを構成する４つの微小分光素子１０１の分光機能は互いに異なる。具体的に、１つの分光ユニットは、４種類の微小分光素子を含む。例えば、第１の種類の微小分光素子は、第１の波長領域、第２の波長領域、第３の波長領域の光および第４の波長領域の光を、それぞれ第１の方向（右上）、第２の方向（右下）、第３の方向（左下）および第４の方向（左上）に分離させる分光機能を持つ。第２の種類の微小分光素子は、第１の波長領域、第２の波長領域、第３の波長領域および第４の波長領域の光を、それぞれ第２の方向（右下）、第１の方向（右上）、第４の方向（左上）および第３の方向（左下）に分離させる分光機能を持つ。第３の種類の微小分光素子は、第１の波長領域、第２の波長領域、第３の波長領域および第４の波長領域の光を、それぞれ第３の方向（左下）、第４の方向（左上）、第１の方向（右上）および第２の方向（右下）に分離させる分光機能を持つ。第４の種類の微小分光素子は、第１の波長領域、第２の波長領域、第３の波長領域および第４の波長領域の光を、それぞれ第４の方向（左上）、第３の方向（左下）、第３の方向（右下）および第１の方向（右上）に分離させる分光機能を持つ。
【0024】
したがって、微小分光素子１０１と光電変換素子１０２を含む画素との距離を、当該微小分光素子１０１により第１の方向（右上）に分離された光、当該微小分光素子１０１の右側に隣接する微小分光素子により第４の方向（左上)に分離された光、当該微小分光素子１０１の右上側に隣接する微小分光素子により第３の方向（左下）に分離された光、および当該微小分光素子１０１の上側に隣接する微小分光素子により第２の方向（右下）に分離された光が、当該光電変換素子１０２に入射する距離にすることで、各々の分光ユニットの直下にある４つの画素（光電変換素子１０２）は、それぞれ第１、第２、第３および第４の波長領域のいずれかの光のみを受けることになる。画素に光が入射すると、光電変換素子１０２が入射した光の強度に応じた電気信号（光電変換信号）を出力するため、波長領域に応じた信号（３原色であればカラー情報）を、直接的に取得するようになる。以上の微小分光素子１０１および微小分光素子に対応した複数の画素（光電変換素子１０２）が、２次元状に配置されているため、レンズ光学系により形成される物体の光学像の波長領域毎の情報を、特別な信号処理を用いることなく同時に取得することができる。また、この構成では平面２軸方向に沿って光の分離を行うため、任意の画素間における光クロストークの影響が等しくなるため、均一な空間解像度をもつ画像を生成できる。
【0025】
後述する第１の実施形態については、第１から第３の波長領域をＲ、Ｇ、Ｂの３原色とし、第４の波長領域を第２の波長領域と同じとして、微小分光素子１０１によってＲ、Ｇ、Ｂ、Ｇの波長領域毎に入射光を４方向に空間的に分離する。すなわち、入射光のほぼすべてがＲ、Ｇ、Ｂの波長領域に分離された状態で微小分光素子１０１の直下にある隣接する４つの画素（光電変換素子１０２）に入射する。なお、４つの画素のうちの２つは、同じ波長領域の光が入射する。したがって、画素（光電変換素子１０２）から得られる光電変換信号から、カラー情報を直接的に取得することができる。
【0026】
また、後述する第２の実施形態については、第１から第３の波長領域をＲ、Ｇ、Ｂの３原色とし、第４の波長領域を赤外光ＩＲとし、微小分光素子１０１が、Ｒ、Ｇ、Ｂ、およびＩＲの波長領域毎に入射光を４方向に空間的に分離する。すなわち、入射光のほぼすべてがＲ、Ｇ、Ｂ、ＩＲの波長領域に分離された状態で微小分光素子１０１の直下にある隣接する４つの画素（光電変換素子１０２）に入射する。なお、４つの画素は、すべて異なる波長領域の光が入射する。したがって、画素（光電変換素子１０２）から得られる光電変換信号から、直接的に、カラー情報とＩＲ情報を取得することができる。
【0027】
本発明の実施形態における撮像素子１２によれば、減光型のバンドパスフィルタを用いることなく、微小分光素子１０１を用いた波長領域毎の光分離により、特別な信号処理を用いることなく、物体の光学像の波長領域毎の情報を取得することができる。すなわち、第１から第４の波長領域をＲ、Ｇ、Ｂ、Ｇの３原色とすれば、カラー画像を取得することができる。したがって、色フィルタを用いた撮像素子と比較して、画素アレイに到達する光総量を増加させることができ、カラー撮像の感度を高めることが可能となる。また、第１から第４の波長領域をＲ、Ｇ、Ｂの３原色とＩＲとすれば、カラー画像に加えてＩＲ画像を高感度に同時に取得することができる。さらに、画素アレイ上において平面２軸方向に沿った光分離により各波長域の情報を取得するため、任意の画素間における光クロストークの影響が等しく、均一な空間解像度をもつ画像を生成できることから、非特許文献１および２で開示された技術における課題を解決することができる。さらに、本発明の実施形態に係る撮像素子１２は、一般的に採用されているマイクロレンズ形状や画素形状、ベイヤー配置などの画素配置を変更する必要がないため、既存の作製プロセスや撮像システムと整合性が高く、フィルタを微小分光素子に置き換えるだけで効果が得られるといった利点がある。
【0028】
以下、図面を参照しながら、本発明のより実施形態を詳細に説明する。
（第１の実施形態）
以下、本実施形態における撮像素子の構成の概略について説明する。
本実施形態では第１から第３の波長領域をＲ、Ｇ、Ｂの３原色とし、第４の波長領域を第２の領域と同じとし、入射光をＲ、Ｇ、Ｂ、Ｇに分光する形態を示すが、分光される波長領域の数や各波長領域における波長はこれに限られない。たとえば、４つの波長領域のうちの少なくとも１つが３原色以外の波長の光（例えば赤外光や紫外光）であっても良い。
（第１の実施形態）
以下、本実施形態における撮像素子の構成の概略について説明する。
本実施形態では第１から第３の波長領域をＲ、Ｇ、Ｂの３原色とし、第４の波長領域を第２の領域と同じとし、入射光をＲ、Ｇ、Ｂ、Ｇに分光する形態を示すが、分光される波長領域の数や各波長領域における波長はこれに限られない。たとえば、４つの波長領域のうちの少なくとも１つが３原色以外の波長の光（例えば赤外光や紫外光）であっても良い。
【0029】
図６（ａ）に、第１の実施形態による撮像素子１２の例として、画素アレイおよび分光素子アレイを含む撮像素子６００の上面から見た概略構成の一部を模式的に示し、図６（ｂ）に、そのＶＩｂ－ＶＩｂ断面における撮像素子６００の構成の一部を示し、図６（ｃ）に、そのＶＩｃ－ＶＩｃ断面における撮像素子６００の構成の一部を示す。光電変換素子１０２を含む画素がアレイ状になるように配列された２次元画素アレイ上に、ＳｉＯ2等からなる低屈折率の透明層１１１、および複数のマイクロレンズ１０３が積層されている。低屈折率の透明層１１１の内部には、微小分光素子１０１が埋め込まれている。
【0030】
微小分光素子１０１は、透明層１１１の屈折率よりも高い屈折率を有するＳｉＮやＴｉＯ2等の材料で形成された複数の微細構造体を含む。複数の微細構造体は、微細構造パターンを有するように形成されている。便宜上、以下の説明において、２次元画素アレイの法線方向をｚ軸、２次元画素アレイに平行な水平方向をｘ軸、２次元画素アレイに平行なｘ軸に垂直な方向をｙ軸とするｘｙｚ直交座標系を設定する。
【0031】
図６（ａ）～６（ｃ）に示すように、マイクロレンズ１０３、微小分光素子１０１および画素（光電変換素子１０２）はｘｙ平面上において同一の周期で格子状に配置され、それぞれアレイを形成している。各マイクロレンズ１０３の直下に１つの微小分光素子１０１が配置されている。また、マイクロレンズアレイおよび微小分光素子アレイは、画素アレイの配置から、アレイ周期（中心間の距離）の１／２の長さ分、ｘ軸およびｙ軸に沿ってそれぞれシフトしている。微小分光素子１０１における、ｘ軸方向に隣接する微小分光素子との境界からｘ軸方向のアレイ周期の１／２の長さの位置、且つｙ軸方向に隣接する微小分光素子との境界からｙ軸方向のアレイ周期の１／２の長さの位置を、微小分光素子１０１の中心とする。このとき、図６（ａ）に示すように、微小分光素子１０１の中心は、当該微小分光素子１０１の直下にある互いに隣接する４つの微小分光素子１０１が形成する四角形の中心の直上に位置する。微小分光素子アレイは、入射光を３波長領域毎（Ｒ、Ｇ、Ｂ）に、平面上ｘ軸に対して±４５°の方向にそれぞれ平行な４方向に沿って空間的に分離する微小分光素子１０１からなる。また、隣接する４つの微小分光素子１０１を１つの分光ユニット６０１（図６（ａ）に二点破線の矩形で示す）とすると、微小分光素子アレイは、分光ユニットが格子状にアレイを形成しているとみることができる。分光ユニットを構成する隣接する４つの微小分光素子１０１は、３波長領域毎に割り当てられた４つの方向の組み合わせがそれぞれ異なり、ユニットの直下にある４つの画素にそれぞれ同一の波長領域の光が入射するように配置されている。なお、各々の微小分光素子１０１の直下にある４つの画素のうちの２つは、同じ波長領域の光が入射する。上記のユニットは、同一の分光機能をもつ１種類の微小分光素子を９０°回転させて構成してもよく若しくは反転させて構成してもよく、または、４種類の分光機能をそれぞれ実現する４種類の微小分光素子１０１から構成されていてもよい。図６（ａ）に示す分光ユニットは、Ｒの光(実線)を第１の方向（右上）に分離し、Ｇの光（破線）を第２の方向（右下）に分離し、Ｂの光（一点鎖線）を第３の方向（左下）に分離し、Ｇの光（破線）を第４の方向（左上）に分離させる分光機能をもつ素子を含み、当該素子の右側、下側および右下には当該素子を反時計回りに９０°回転させた素子、当該素子を時計回りに９０°回転させた素子、および当該素子を反転させた素子をさらに含む。
【0032】
なお、上述の説明では、一例として、正方形の画素（光電変換素子１０２）からなる直交格子状に配列された２次元画素アレイの場合について説明したが、画素の配列、形状、サイズなどはこの図の例に限らない。また、図６（ａ）～６（ｃ）では省略しているが、２次元画素アレイと微小分光素子アレイとの間に、内部マイクロレンズとして動作し、微小分光素子１０１からの光を画素内の光電変換素子１０２へと導くように作用するＳｉＮやＴｉＯ2等からなる透明層より高い屈折率の凹凸構造による集光機能を持つ構造体を備え得る。図６（ａ）～６（ｃ）に示した構造は、公知の半導体製造技術により作製され得る。
【0033】
なお、図６（ａ）～６（ｃ）に示される撮像素子６００は、電気配線１１２が形成された配線層の反対側から光が入射する裏面照射型の構造を有しているが、本実施形態ではこのような構造に限定されず、例えば配線層の側から受光する表面照射型の構造を有していてもよい。
【0034】
以下、本実施形態に係る撮像素子６００の各構成要素の働きについて説明する。
撮像素子６００に入射する白色の光は、まずマイクロレンズアレイによって集光され、ほぼすべての光が各マイクロレンズ１０３に対応した微小分光素子１０１を通過する。各微小分光素子１０１によって、光は３波長領域毎に４方向に空間的に分離され、各微小分光素子１０１の直下にある隣接する４つの画素（光電変換素子１０２）によりそれぞれ受光される。分光ユニットの構成から、微小分光素子アレイの直下にある画素アレイの各画素はＲ、Ｇ、Ｂのいずれかの波長域の光が入射することになるため、各画素がＲ、Ｇ、Ｂのいずれかのカラー情報の検出を対応する。なお、図６（ａ）～６（ｃ）の例は、４つの画素を１つの画素ユニットとした場合、４つの画素がそれぞれＲ、Ｇ、Ｇ、Ｂの光に対応しているべイヤー配置に適合した一例であって、各微小分光素子１０１の構成によっては、色成分と伝搬方向の組み合わせは自由に変更可能であり、それに伴って、ＲＧＢそれぞれに対応する画素の配置も変更される。最後に、各画素内の光電変換素子１０２によって光電変換がなされ、カラー情報を含む画像信号として出力される。
撮像素子６００に入射する白色の光は、まずマイクロレンズアレイによって集光され、ほぼすべての光が各マイクロレンズ１０３に対応した微小分光素子１０１を通過する。各微小分光素子１０１によって、光は３波長領域毎に４方向に空間的に分離され、各微小分光素子１０１の直下にある隣接する４つの画素（光電変換素子１０２）によりそれぞれ受光される。分光ユニットの構成から、微小分光素子アレイの直下にある画素アレイの各画素はＲ、Ｇ、Ｂのいずれかの波長域の光が入射することになるため、各画素がＲ、Ｇ、Ｂのいずれかのカラー情報の検出を対応する。なお、図６（ａ）～６（ｃ）の例は、４つの画素を１つの画素ユニットとした場合、４つの画素がそれぞれＲ、Ｇ、Ｇ、Ｂの光に対応しているべイヤー配置に適合した一例であって、各微小分光素子１０１の構成によっては、色成分と伝搬方向の組み合わせは自由に変更可能であり、それに伴って、ＲＧＢそれぞれに対応する画素の配置も変更される。最後に、各画素内の光電変換素子１０２によって光電変換がなされ、カラー情報を含む画像信号として出力される。
【0035】
なお、画素アレイと微小分光素子１０１との間に、内部マイクロレンズとして動作するＳｉＮやＴｉＯ2等からなる透明層より高い屈折率の凹凸構造による集光機能を持つ構造体を備え得るが、後述する微小分光素子１０１は形成する位相遅延分布によっては、レンズ機能を有することが可能であるため、内部マイクロレンズを省略することも可能である。
【0036】
以下、本実施形態における微小分光素子１０１について説明する。
微小分光素子１０１が入射光を３波長領域毎（Ｒ、Ｇ、Ｂ）に、上述の４方向に沿って空間的に分離するには、１つの微小分光素子１０１を透過する光に対して、波長領域毎に異なる位相遅延分布を与え、光波面を変化させることが必要である。
微小分光素子１０１が入射光を３波長領域毎（Ｒ、Ｇ、Ｂ）に、上述の４方向に沿って空間的に分離するには、１つの微小分光素子１０１を透過する光に対して、波長領域毎に異なる位相遅延分布を与え、光波面を変化させることが必要である。
【0037】
図７（ａ）～７（ｃ）は、上述した分光特性を実現することが可能な微小分光素子１０１が有する位相遅延分布の１例である。この例では、図７（ａ）に示すように、第１の波長領域（Ｒ）に対応する波長の位相遅延分布は、左下から右上に沿って位相遅延量が０から２πまで線形増加する分布を形成しており、図７（ｂ）に示すように、第２の波長領域（Ｇ）に対応する波長の位相遅延分布は、左上から中央に向かって位相遅延量が０からπまで線形増加し、中央から右下に向かって位相遅延量がπから０まで線形減少する分布を形成しており、図７（ｃ）に示すように、第３の波長領域（Ｂ）に対応する波長の位相遅延分布は、右上から左下に沿って位相遅延量が０から２πまで線形増加する分布を形成している。このような位相遅延分布を有する素子を透過した光は、第１の波長領域（Ｒ）が右上方向、第２の波長領域（Ｇ）が左上および右下方向、第３の波長領域（Ｂ）が左下方向に沿って、それぞれ偏向しながら伝搬する。なお、上述の説明は一例であって、位相遅延分布によっては、波長領域と伝搬方向の組み合わせは自由に変更可能である。以上のような位相遅延分布は、後述するように微細構造体の材料、数、形状、サイズ、パターンなどを適切に設計することにより実現することができる。すなわち、本実施形態における微小分光素子１０１は、微細構造体を２次元平面上に配置し、入射光に対して、波長領域に応じて異なる光波面を与え、色成分を空間的に分離する。
【0038】
図８（ａ）に、本実施形態における微小分光素子１０１を構成する微細構造体の一例の上面を示し、図８（ｂ）に微細構造体の側面図を示す。微細構造体の一例である柱状構造体１２１は、透明層１１１の屈折率ｎ0よりも高い屈折率ｎ1を有するＳｉＮやＴｉＯ2等の材料から形成されており、構造の厚みｈを一定とする。また、柱状構造体１２１の底面および上面は正方形である。この柱状構造体１２１は、透明層１１１と柱状構造体１２１との間の屈折率差から、光を構造内に閉じ込めて伝搬させる光導波路として考えることができる。したがって、上面側から入射した光は、柱状構造体１２１内に強く閉じ込められながら伝搬し、光導波路の実効的な屈折率ｎeffにより決定される位相遅延効果を受けて、底面側から出射する。具体的に、透明層１１１を構造の厚み分の長さを伝搬した光の位相を基準した際、柱状構造体１２１による位相遅延量φは、光の真空中での波長をλとおくと、式（１）で表される。
φ＝（ｎeff－ｎ0）×２πｈ／λ ・・・（１）
この位相遅延量φは、光の波長λによって異なるため、同一の柱状構造体１２１において、光を波長領域（色成分）に応じて異なる位相遅延量を与えることができる。さらに、ｎeffは柱状構造体１２１の幅ｗの関数であることが知られており、ｎ0＜ｎeff＜ｎ1の値をとる。したがって、図８（ａ）および（ｂ）に示す例では、柱状構造体１２１の幅ｗを変化させることで、光の波長λに応じた位相遅延量の多彩な組み合わせを設定することが可能である。また、柱状構造体１２１の底面および上面が正方形であるため、入射光の偏光（偏波）方向を変化させた場合においても、位相遅延効果を含む光学特性に変化はない。
φ＝（ｎeff－ｎ0）×２πｈ／λ ・・・（１）
この位相遅延量φは、光の波長λによって異なるため、同一の柱状構造体１２１において、光を波長領域（色成分）に応じて異なる位相遅延量を与えることができる。さらに、ｎeffは柱状構造体１２１の幅ｗの関数であることが知られており、ｎ0＜ｎeff＜ｎ1の値をとる。したがって、図８（ａ）および（ｂ）に示す例では、柱状構造体１２１の幅ｗを変化させることで、光の波長λに応じた位相遅延量の多彩な組み合わせを設定することが可能である。また、柱状構造体１２１の底面および上面が正方形であるため、入射光の偏光（偏波）方向を変化させた場合においても、位相遅延効果を含む光学特性に変化はない。
【0039】
以上のような構造体を図７（ａ）～（ｃ）を参照して上述した位相遅延分布に適合するように位置に応じて柱状構造体１２１の幅ｗをそれぞれ設定し、２次元平面上に複数配置することで、本実施形態における微小分光素子を実現することができる。また、上述の各柱状構造体１２１の配置において、周期的な構造に起因する不要な回折光が発生することを防ぐため、光の波長以下の間隔で配置することが望ましい。なお、光を効率的に偏向させるには位相遅延分布が０から２πまで変化する分布が適しているため、それぞれの波長域において、厚み一定の柱状構造体１２１による位相遅延量の可変範囲は、２π以上有していることが好ましい。したがって、式（１）から、分離する波長域の最も長波長側の波長域における所望の中心波長をλrとすると、構造の厚みｈは、ｈ＝λr／（ｎ1－ｎ0）以上に設定することが望ましい。上述の例では、柱状構造体１２１の底面および上面が正方形の場合について説明したが、この形状に限定されない。すなわち、面の中心を対称軸として４回回転対称を含む形状面であれば、分光機能の偏光に対する依存性が生じることは無く、位相遅延効果をもたらす光導波路としての動作も失われることは無い。したがって、正方形、中空正方形、円形、中空円形、十字形状といった４回回転対称となる面をもつ柱状構造体を採用することが望ましい。このような厚み一定の微細構造体からなる微小分光素子は、例えば、非特許文献２に開示されている。
【0040】
また、本実施形態における微小分光素子１０１は、上述の柱状構造体１２１に限定されることなく、様々な形態の微細構造を用いることができる。例えば、非特許文献３に開示されているような、計算機によって最適化された構造パターンを持つ厚みが一定の微細構造体は、上述した原理と同様の原理で波長領域毎に位相遅延分布を形成することができ、色成分を空間的に分離することが可能である。さらに、式（１）より、柱状構造体１２１の幅ｗに加えて構造の厚みｈを変化させることで、光の波長λに応じた位相遅延量のより多彩な組み合わせを設定することが可能である。したがって、上述の位相遅延分布に適合するように微細構造体が配置される位置に応じて微細構造体の幅ｗおよび厚みｈをそれぞれ設定し、２次元平面上に複数配置することでも、本実施形態における微小分光素子を実現することができる。
【0041】
上述した分光機能をもつ微小分光素子１０１は、公知の半導体製造技術により、薄膜堆積およびパターニングを実行することにより、作製され得る。
【0042】
以上のように、微小分光素子を構成する構造体の材料、数、形状、サイズ、パターンなどを適切に設計することにより、所望の分光特性を与えることが可能である。その結果、上述したように、個々の画素に所望の波長領域の光を分離して入射させることが可能となり、各画素内の光電変換素子から出力される光電変換信号から、波長領域に対応する信号を直接取得することができる。また、微小分光素子を構成する材料が低損失であれば、光損失はほとんど生じないため、従来技術のフィルタを用いた撮像素子と比較して、画素アレイに到達する光総量を飛躍的に増加させることができ、カラー撮像の感度を高めることが可能となる。また、画素アレイ上において平面２軸方向に沿った光分離により各波長領域の情報を取得するため、任意の画素間における光クロストークの影響が等しく、均一な空間解像度をもつ画像を生成することが可能である。また、本実施形態では、単一の分光素子アレイの形態を用いた撮像素子を説明するが、単一の分光素子アレイの代わりに、複数の分光素子アレイをｚ軸方向に重ねた形態を用いて、撮像素子を実現することも可能である。すなわち、単一の分光素子アレイを構成する微小分光素子１０１が、入射する光を２次元の方向（平面２軸方向）に分光してもよく、光の伝搬方向（ｚ軸方向）に重ねられた複数の微小分光素子が、入射する光を２次元の方向に分光してもよい。なお、各微小分光素子の分光性能が上述した理想的な性能と多少異なっていても、性能の差異の程度に応じて、取得した信号を補正・演算することによって良好な色情報を得ることが可能である。
【0043】
なお、微小分光素子による色成分の分離後において、画素アレイ上での画素間の光クロストークを最小にするには、分離した各光が各画素の中心近傍に入射することが望ましい。したがって、微小分光素子によって偏向する光の伝搬方向と画素アレイの法線方向との角度をθ、画素アレイの周期をＰとすると、微小分光素子の出力端と光電変換素子との間隔が２0.5Ｐ／ｔａｎθの近傍であることが好ましい。
【0044】
以上の説明では、微小分光素子のみを用いた場合の撮像素子について述べた。次に、減色型の色フィルタを併用した際の変形例について説明する。
【0045】
図９（ａ）に、本実施形態の変形例に係る画素アレイおよび分光素子アレイを含む撮像素子９００を示し、図９（ｂ）に、そのＩＸｂ－ＩＸｂ断面における撮像素子９００の構成の一部を示し、図９（ｃ）に、そのＩＸｃ－ＩＸｃ断面における撮像素子９００の構成の一部を示す。図６（ａ）～６（ｃ）に示した撮像素子６００との差異は、色成分に対応した画素の上方に、画素の色にそれぞれ対応した色フィルタ１０４R、１０４G、１０４Bを配置している点であり、その他は同一である。この構成の場合、入射光は、微小分光素子１０１によって色分離された後に、画素（光電変換素子１０２）の直上において色フィルタ１０４によってフィルタリングされる。この場合、色分離後に色フィルタ１０４を透過するため、従来技術の色フィルタのみの構成に比べて、光利用効率が向上する一方、２つの素子を透過する必要があるため、微小分光素子１０１のみの構成に比べて、光利用効率は減少する。また、微小分光素子１０１の分光特性と色フィルタ１０４のフィルタリング特性が掛け合わされ、不要な色成分がより排除された状態で各画素に入射するため、色フィルタ１０４のみの構成および微小分光素子１０１のみの構成に比べて、色再現性が大きく向上する。したがって、光利用率、すなわち感度と色再現性のバランスがよい構成といえる。
【0046】
（第２の実施形態）
次に、本発明の第２の実施形態における撮像素子の構成の概略について説明する。
図１０（ａ）に、撮像素子１２の例として、画素アレイおよび分光素子アレイを含む撮像素子１０００の上面から見た概略構成の一部を模式的に示し、図１０（ｂ）に、そのＸｂ－Ｘｂ断面における撮像素子１０００の構成の一部を示し、図１０（ｃ）に、そのＸｃ－Ｘｃ断面における撮像素子１０００の構成の一部を示す。図１０（ａ）～１０（ｃ）から明らかなように、本実施形態の撮像素子１０００および撮像素子１０００を用いた撮像装置１０は、第１から第４の波長領域をＲ、Ｇ、Ｂの３原色と、赤外光（ＩＲ）とし、微小分光素子１０１によってＲ、Ｇ、Ｂ、およびＩＲの波長領域毎に、入射光を４方向に空間的に分離する点が第１の実施形態の撮像素子と比較して異なる。したがって、入射光のほぼすべてがＲ、Ｇ、Ｂ、およびＩＲの波長領域に分離された状態で微小分光素子１０１の直下にある４つの画素（光電素子１０２R、１０２G、１０２B、１０２IR）に入射する。なお、その他の構成要素は第１の実施形態の撮像素子と同一である。以下、第１の実施形態との相違点を中心に説明し、重複する点は説明を省略する。
次に、本発明の第２の実施形態における撮像素子の構成の概略について説明する。
図１０（ａ）に、撮像素子１２の例として、画素アレイおよび分光素子アレイを含む撮像素子１０００の上面から見た概略構成の一部を模式的に示し、図１０（ｂ）に、そのＸｂ－Ｘｂ断面における撮像素子１０００の構成の一部を示し、図１０（ｃ）に、そのＸｃ－Ｘｃ断面における撮像素子１０００の構成の一部を示す。図１０（ａ）～１０（ｃ）から明らかなように、本実施形態の撮像素子１０００および撮像素子１０００を用いた撮像装置１０は、第１から第４の波長領域をＲ、Ｇ、Ｂの３原色と、赤外光（ＩＲ）とし、微小分光素子１０１によってＲ、Ｇ、Ｂ、およびＩＲの波長領域毎に、入射光を４方向に空間的に分離する点が第１の実施形態の撮像素子と比較して異なる。したがって、入射光のほぼすべてがＲ、Ｇ、Ｂ、およびＩＲの波長領域に分離された状態で微小分光素子１０１の直下にある４つの画素（光電素子１０２R、１０２G、１０２B、１０２IR）に入射する。なお、その他の構成要素は第１の実施形態の撮像素子と同一である。以下、第１の実施形態との相違点を中心に説明し、重複する点は説明を省略する。
【0047】
図１０（ａ）～１０（ｃ）に示されているように、マイクロレンズ１０３、微小分光素子１０１、画素（光電変換素子１０２）は、ｘｙ平面上において同一の周期で格子状に配置され、それぞれアレイを形成しており、各マイクロレンズ１０３の中心軸上に１つの微小分光素子１０１が配置されている。また、マイクロレンズアレイおよび微小分光素子アレイは、画素アレイの配置から、アレイ周期の１／２の長さ分、ｘ軸およびｙ軸に沿ってそれぞれシフトしている。微小分光素子アレイは、入射光を４波長領域毎（Ｒ、Ｇ、Ｂ、ＩＲ）に、ｘ軸に対して±４５°の方向にそれぞれ平行な４方向に沿って空間的に分離する微小分光素子１０１からなる。また、隣接する４つの微小分光素子を１つの分光ユニットとすると（図１０（ａ）に二点破線の矩形で示す）、微小分光素子アレイは、分光ユニットが格子状にアレイを形成しているとみることができる。分光ユニットを構成する微小分光素子１０１は、４波長領域毎に割り当てられた４つの方向の組み合わせがそれぞれ異なり、ユニットの直下にある４つの画素にそれぞれ同一の波長領域の光が入射するように配置されている。なお、４つの画素は、すべて異なる波長領域の光が入射する。上記のユニットは、同一の分光機能をもつ１種類の微小分光素子を９０°回転させて構成してもよく若しくは反転させて構成してもよく、または、４種類の分光機能をそれぞれ実現する４種類の微小分光素子１０１から構成されていてもよい。図１０（ａ）に示す分光ユニットは、Ｒの光(実線)を第１の方向（右上）に分離し、Ｇの光（破線）を第２の方向（右下）に分離し、Ｂの光（一点鎖線）を第３の方向（左下）に分離し、ＩＲの光（二点破線）を第４の方向（左上）に分離させる分光機能をもつ素子を含み、当該素子の右側、下側および右下には当該素子を反時計回りに９０°回転させた素子、当該素子を時計回りに９０°回転させた素子、および当該素子を反転させた素子をさらに含む。
【0048】
撮像素子１０００に入射する白色の光は、まずマイクロレンズアレイによって集光され、ほぼすべての光が各マイクロレンズ１０３に対応した微小分光素子１０１を通過する。各微小分光素子１０１によって、光は４波長領域毎に４方向に空間的に分離され、各微小分光素子１０１の直下にある４画素（光電変換素子１０２）によりそれぞれ受光される。分光ユニットの構成から、微小分光素子アレイの直下にある画素アレイの各画素はＲ、Ｇ、Ｂ、およびＩＲのいずれかの波長域の光が入射することになるため、各画素がＲ、Ｇ、Ｂ、ＩＲのいずれかの波長領域情報の検出に対応する。なお、各微小分光素子１０１の構成によっては、波長領域と伝搬方向の組み合わせは自由に変更可能であり、それに伴って、Ｒ、Ｇ、ＢおよびＩＲそれぞれに対応する画素の配置も変更される。最後に、各画素内の光電変換素子１０２によって光電変換がなされ、カラー情報とＩＲ情報を含む画像信号として出力される。
【0049】
図１１（ａ）～１１（ｃ）は、入射光の４波長領域毎（Ｒ、Ｇ、Ｂ、ＩＲ）の空間的な分離を実現する位相遅延分布の１例である。この例では、図１１（ａ）に示すように、第１の波長領域（Ｒ）に対応する波長の位相遅延分布は、左下から右上に沿って位相遅延量が０から２πまで線形増加する分布を形成しており、図１０（ｂ）に示すように、第２の波長領域（Ｇ）に対応する波長の位相遅延分布は、左上から右下に向かって位相遅延量が０から２πまで線形増加する分布を形成しており、図１０（ｃ）に示すように、第３の波長領域（Ｂ）に対応する波長の位相遅延分布は、右上から左下に沿って位相遅延量が０から２πまで線形増加する分布を形成しており、図１０（ｄ）に示すように、第４の波長領域（ＩＲ）に対応する波長の位相遅延分布は、右下から左上に向かって位相遅延量が０から２πまで線形増加する分布を形成している。このような位相遅延分布を有する素子を透過した光は、第１の波長領域（Ｒ）が右上方向、第２の波長領域（Ｇ）が右下方向、第３の波長領域（Ｂ）が左下方向、第４の波長領域（ＩＲ）が左上方向に沿って、それぞれ偏向しながら伝搬する。なお、上述の説明は一例であって、位相遅延分布によっては、波長領域と伝搬方向の組み合わせは自由に変更可能である。以上のような位相遅延分布は、第１の実施形態の撮像素子と同様に微細構造体の材料、数、形状、サイズ、パターンなどを適切に設計することにより実現することができる。
【0050】
以上より、本実施形態の構成において、カラー情報に加えてＩＲ情報も同時に取得することができる。本実施形態は、上記以外は第１の実施形態と同様であり、第１の実施形態で説明したものと同様の効果を有し、また、同様の変更が可能である。
【0051】
上述した第１の実施形態1および第２の実施形態は、本発明の好適な具体例に過ぎず、本発明はこれらに限定されず、種々の変更が可能である。
【0052】
上述した第１の実施形態および第２の実施形態では、微小分光素子の材料としてＳｉＮやＴｉＯ2を想定した例を示したが、本発明はこれに限定されない。例えば、本発明の実施形態の撮像素子を光の波長が３８０～１０００ｎｍの範囲の可視光～近赤外光領域で用いる場合は、微小分光素子の材料には、ＳｉＮ、ＳｉＣ、ＴｉＯ2、ＧａＮ等の材料が、屈折率が高く、吸収損失が少ないため適している。また、波長が８００～１０００ｎｍの範囲の近赤外光に対しては、これらの光に対して低損失な材料として、Ｓｉ、ＳｉＣ、ＳｉＮ、ＴｉＯ2、ＧａＡｓ、ＧａＮ等の材料が適している。さらに長波長体の近赤外領域（通信波長である１．３μｍや１．５５μｍ等）では、上述の材料に加えて、ＩｎＰ等を用いることができる。さらに、貼り付け、塗布して微小分光素子を形成する場合、フッ素化ポリイミド等のポリイミド、ＢＣＢ（ベンゾシクロブテン）、光硬化性樹脂、ＵＶエポキシ樹脂、ＰＭＭＡ等のアクリル樹脂、レジスト全般などのポリマー等が材料として挙げられる。
【0053】
また、第１の実施形態および第２の実施形態では、透明層１１１の材料としてＳｉＯ2を想定した例を示したが、本発明はこれに限定されない。一般的なガラス材料、ＳｉＯ2、空気層等、屈折率が微小分光素子１０１の材料の屈折率より低く、入射光の波長に対して低損失なものであれば何でもよい。
【0054】
以上、本発明の実施形態に係る撮像素子および当該撮像素子を用いた撮像装置に基づいて説明したが、本発明は上述した実施形態に限定されるものではなく、その要旨を逸脱しない範囲において種々変更可能であることは言うまでもない。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】