特許 6563539 撮像試料用の光学歪み補正

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6563539

(24)【登録日】2019年8月2日

(45)【発行日】2019年8月21日

(54)【発明の名称】撮像試料用の光学歪み補正

(51)【国際特許分類】

   G02B 21/36 20060101AFI20190808BHJP

   G06T 5/00 20060101ALI20190808BHJP

   G06T 3/00 20060101ALI20190808BHJP

   G01N 21/64 20060101ALI20190808BHJP

【ＦＩ】

   G02B21/36

   G06T5/00 725

   G06T3/00 700

   G01N21/64 F

【請求項の数】13

【外国語出願】

【全頁数】28

(21)【出願番号】特願2018-32025(P2018-32025)

(22)【出願日】2018年2月26日

(65)【公開番号】特開2018-173943(P2018-173943A)

(43)【公開日】2018年11月8日

【審査請求日】2018年5月11日

(31)【優先権主張番号】62/468347

(32)【優先日】2017年3月7日

(33)【優先権主張国】US

(31)【優先権主張番号】N2018852

(32)【優先日】2017年5月5日

(33)【優先権主張国】NL

【早期審査対象出願】

【前置審査】

(73)【特許権者】

【識別番号】514202402

【氏名又は名称】イラミーナ インコーポレーテッド

(74)【代理人】

【識別番号】100147485

【弁理士】

【氏名又は名称】杉村 憲司

(74)【代理人】

【識別番号】100169823

【弁理士】

【氏名又は名称】吉澤 雄郎

(72)【発明者】

【氏名】ロバート ラングロワ

(72)【発明者】

【氏名】ポール ベリッツ

【審査官】 岡田 弘

(56)【参考文献】

【文献】 特開２０１４−１６４００４（ＪＰ，Ａ）

【文献】 国際公開第２０１３／０５１１４７（ＷＯ，Ａ１）

【文献】 特開２０１６−０３３６２０（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０２Ｂ １９／００−２１／００

Ｇ０２Ｂ ２１／０６−２１／３６

Ｇ０６Ｔ １／００

Ｇ０６Ｔ １１／６０−１３／８０

Ｇ０６Ｔ １７／０５

Ｇ０６Ｔ １９／００−１９／２０

Ｇ０１Ｎ ２１／６４

(57)【特許請求の範囲】

【請求項1】

複数のスポットを備えるパターン化試料の画像における光学歪みを補正するための方法であって、
画像のアフィン変換を予測するステップ；
前記画像を尖鋭化するステップ；並びに、
尖鋭化された画像につき、最適な歪み補正係数セットを反復探索するステップを備え、尖鋭化された画像につき、最適な歪み補正係数セットを反復探索する前記ステップが、前記画像における複数のスポット位置についての平均純度を、少なくとも該複数のスポット位置の各々から抽出された信号強度を用いて算出するステップ、及び、予測されたアフィン変換を各反復探索の間に適用するステップを備える、方法。

【請求項2】

請求項１に記載の方法であって、前記画像が、第１色チャンネルに対応する第１画像データセット、及び、第２色チャンネルに対応する第２画像データセットを備え、前記アフィン変換及び前記画像の先鋭化を、前記第１画像データセット及び前記第２画像データセットに適用する、方法。

【請求項3】

請求項１に記載の方法であって、尖鋭化された画像につき、最適な歪み補正係数セットを反復探索する前記ステップが、
前記画像について光学歪み補正係数セットを生成するステップ；
前記予測されたアフィン変換を、前記画像における複数のスポット位置に適用するステップ；及び、
前記予測されたアフィン変換を適用した後、前記光学歪み補正係数セットを前記複数のスポット位置の各々に適用するステップ；を備える、方法。

【請求項4】

請求項１に記載の方法であって、
前記抽出された信号強度を正規化するステップ；及び、
前記複数のスポット位置についての平均純度を、少なくとも前記正規化された信号強度を使用して計算するステップ；を備える、方法。

【請求項5】

請求項４に記載の方法であって、前記複数のスポット位置についての平均純度を、少なくとも前記正規化された単一強度を使用して計算するステップが、前記複数のスポット位置の各々について純度を、少なくとも、当該スポット位置の正規化された信号強度に対応する地点からガウス重心までの距離を使用して計算するステップを備える、方法。

【請求項6】

請求項１に記載の方法であって、尖鋭化された画像につき、最適な歪み補正係数セットを反復探索する前記ステップが、該画像における複数のスポットをサブサンプリングするステップを備え、前記先鋭化された画像の行内におけるスポットがサブサンプリングされた場合、該行内における全てのスポットをサブサンプリングする、方法。

【請求項7】

命令を保存した非一時的コンピュータ可読媒体であって、前記命令が１つ又は複数のプロセッサにより実行したときに、システムが、
画像のアフィン変換を予測し、前記画像は、複数のスポットを備えるパターン化試料の画像であり；
前記画像を先鋭化し；
尖鋭化された画像につき、最適な歪み補正係数セットを反復探索し、前記尖鋭化された画像につき、前記最適な歪み補正係数セットを反復探索する際に、前記画像における複数のスポット位置についての平均純度を、少なくとも該複数のスポット位置の各々から抽出された信号強度を用いて算出し、更に、予測されたアフィン変換を各反復探索の間に適用するように構成されている、非一時的コンピュータ可読媒体。

【請求項8】

請求項７に記載の非一時的コンピュータ可読媒体であって、前記画像が、第１色チャンネルに対応する第１画像データセット、及び、第２色チャンネルに対応する第２画像データセットを備え、前記アフィン変換及び前記画像の先鋭化を，前記第１画像データセット及び前記第２画像データセットに適用するように構成されている、非一時的コンピュータ可読媒体。

【請求項9】

請求項７に記載の非一時的コンピュータ可読媒体であって、前記尖鋭化された画像につき、最適な歪み補正係数セットを反復探索する際に、
前記画像について光学歪み補正係数セットを生成し；
前記予測されたアフィン変換を、前記画像における複数のスポット位置に適用し；更に、
前記予測されたアフィン変換を適用した後、前記光学歪み補正係数セットを前記複数のスポット位置の各々に適用するように構成されている、非一時的コンピュータ可読媒体。

【請求項10】

請求項９に記載の非一時的コンピュータ可読媒体であって、前記命令は、１つ又は複数のプロセッサにより実行したときに、システムが更に、
前記複数のスポット位置の各々に前記光学歪み補正係数セットを適用し；
前記複数のスポット位置の各々について信号強度を抽出するように構成されている、非一時的コンピュータ可読媒体。

【請求項11】

請求項１０に記載の非一時的コンピュータ可読媒体であって、前記命令は、１つ又は複数のプロセッサにより実行したときに、システムが更に、
前記抽出された信号強度を正規化し；
前記複数のスポット位置についての平均純度を、少なくとも前記正規化された信号強度を使用して計算するように構成されている、非一時的コンピュータ可読媒体。

【請求項12】

請求項１１に記載の非一時的コンピュータ可読媒体であって、前記複数のスポット位置についての平均純度を、少なくとも前記正規化された単一強度を使用して計算する際に、前記複数のスポット位置の各々について、少なくとも、当該スポット位置の正規化された信号強度に対応する地点からガウス重心までの距離を使用して、純度を計算するように構成されている、非一時的コンピュータ可読媒体。

【請求項13】

請求項１１に記載の非一時的コンピュータ可読媒体であって、前記パターン化試料における複数のスポットの各スポットが、蛍光タグ付けされた核酸を備える、非一時的コンピュータ可読媒体。

【発明の詳細な説明】

【技術分野】

【0001】

＜関連出願の相互参照＞
本願は，2017年 3月 7日付の米国特許仮出願第62/468,347号（発明の名称：撮像試料用の光学歪み補正）の優先権を主張するものであり，同出願はその全体が本願に取り込まれる。更に，本願は，2017年 5月 5日付のオランダ国特許出願第N2018852号（発明の名称：撮像試料用の光学歪み補正）の優先権も主張するものである。

【発明の概要】

【発明が解決しようとする課題】

【0002】

光学レンズを使用する撮像に付随する１つの問題点は，レンズの光学的配置により，画像に異なる形式の歪みが誘発されることである。このような歪みには，例えば，拡大歪み，スキュー歪み，並行歪み，バレル歪み及びピンクッション歪み等の非線形歪みが含まれる。これらの歪みは，一般的には，画像中心から離れた画像点において，より顕著である。

【0003】

試料面を一方向に走査するラインスキャナにおいて，歪みは，走査対象画像の走査方向に対して垂直なエッジに沿う方向において最も顕著である。例えば，光学系における対物レンズ又はその他の光学素子により生じる収差は，倍率が一軸（例えば，ｘ軸に沿って走査されるラインの場合には，そのｘ軸）に沿って変動する「ストレッチ歪み」を誘発することがある。この歪みは，多数（数千単位，数百万単位，数十億単位等）のパターン化スポットを有する基板のマルチサイクル撮像の場合に，走査された画像上における実際のスポット位置を，予想されたスポット位置からシフトさせる可能性がある点において特に致命的である。その結果，データスループットにおける欠落や，マルチサイクル撮像ランの間における誤差率の増大を生じさせかねない。この問題を，図１Ａ及び図１Ｂに示す。図１Ａは，蛍光染料を有する複数の試料領域を備えるパターン化ターゲットのスキャン画像における中心を示す。画像の中心において，スポット50における検出可能な歪みは認められない。図１Ｂは，図１Ａにおけるスキャン画像の右側を示す。右側においては，スポット50の光学収差が顕著である。

【課題を解決するための手段】

【0004】

本願において開示する実施形態は，撮像試料における光学歪みを補正する技術に関するものである。

【0005】

第１態様は，撮像試料用の光学歪み補正方法に関するものであり，この方法は，複数のスポットを備えるパターン化試料について第１撮像サイクルを実行するステップ；該第１撮像サイクルの間に生成された撮像データの第１のセットを，第１の複数の撮像データサブセットに分割するステップであって，該第１の複数の撮像データサブセットにおける各撮像データサブセットが，前記パターン化試料におけるそれぞれの領域に対応し，前記パターン化試料の各領域が複数のスポットを含む，ステップ；前記第１の複数の撮像データサブセットについて画像歪み補正係数セットを計算するステップ；パターン化試料について第２撮像サイクルを実行して，撮像データの第２のセットを生成するステップ；前記第２撮像サイクルの間に生成された撮像データの第２のセットを，第２の複数の撮像データサブセットに分割するステップであって，該第１の複数の撮像データサブセットにおける各撮像データサブセットは，第１の複数の撮像データサブセットにおける１つの撮像データサブセットと対応する，前記パターン化された試料におけるそれぞれの同一領域に対応する，ステップ；及び，前記第２の複数の撮像データサブセットにおける各撮像データサブセットにつき，前記パターン化試料におけるそれぞれの同一領域に対応する，前記第１の複数の撮像データサブセットにおける前記１つの撮像データサブセットについて計算した前記画像歪み補正係数を適用するステップを備える。

【0006】

第１態様の一実施形態において，前記パターン化試料における複数のスポットの各スポットは，蛍光タグ付けされた核酸を備え，前記第１撮像サイクルは第１シーケンスサイクルであり，前記第２撮像サイクルは第２シーケンスサイクルである。

【0007】

第１態様の一実施形態において，前記撮像データの第１セット及び前記撮像データの第２セットの各セットは，それぞれ第１色チャンネルの撮像データ及び第２色チャンネルの撮像データを備え，前記第１の複数の撮像データサブセットについて画像歪み補正係数セットを計算するステップは，各撮像データの各色チャンネルについて歪み相関係数セットを決定するステップを備える。

【0008】

第１態様の一実施形態において，前記第１の複数の撮像データサブセットの各々について画像歪み補正係数セットを計算するステップは，前記撮像データサブセットのアフィン変換を予測するステップ；前記撮像データサブセットを尖鋭化するステップ；及び，前記撮像データサブセットについて最適な歪み補正係数セットを反復探索するステップ；を備える。

【0009】

第１態様の一実施形態において，前記撮像データの第１セット及び前記撮像データの第２セットを，少なくとも前記試料の基点位置を使用して分割し，前記第１の複数の撮像データサブセットの各々についてのアフィン変換を，前記基点を使用して予測する。

【0010】

第２態様は，複数のスポットを備えるパターン化試料の画像における光学歪みを補正する方法に関するものである。この方法は、画像のアフィン変換を予測するステップ；前記画像を尖鋭化するステップ；及び，尖鋭化された画像につき，最適歪み相関係数セットを反復探索するステップを備える。尖鋭化された画像につき，最適化された歪み相関係数セットを反復探索する前記ステップは，該画像における複数のスポット位置についての平均純度を算出するステップ，及び，予測されたアフィン変換を各反復探索の間に適用するステップを備える。

【0011】

第２態様の一実施形態において，尖鋭化された画像につき，最適化された歪み相関係数セットを反復探索する前記ステップは，前記画像について光学歪み補正係数セットを生成するステップ；前記予測されたアフィン変換を，前記画像における複数のスポット位置に適用するステップ；及び，前記予測されたアフィン変換を適用した後，前記光学歪み補正係数セットを前記複数のスポット位置の各々に適用するステップ；を備える。他の実施形態において，光学歪み補正方法は，前記光学歪み補正係数セットを前記複数のスポット位置の各々に適用した後，前記複数のスポット位置の各々について信号強度を抽出するステップを備える。更に他の実施形態において，光学歪み補正方法は：前記抽出された信号強度を正規化するステップ；及び，前記複数のスポット位置についての平均純度を，少なくとも前記正規化された信号強度を使用して計算するステップ；を備える。

【0012】

第２態様の特定の実施形態において，前記複数のスポット位置についての平均純度を，少なくとも前記正規化された単一強度を使用して計算するステップは，前記複数のスポット位置の各々について純度を，少なくとも，当該スポット位置の正規化された信号強度に対応する地点からガウス重心までの距離を使用して，計算するステップを備える。

【0013】

第２態様の特定の実施形態において，尖鋭化された画像につき，最適化された歪み相関係数セットを反復探索する前記ステップは，該画像における複数のスポットをサブサンプリングするステップを備え，先鋭化された画像の行内におけるスポットがサブサンプリングされた場合，該行内における全てのスポットをサブサンプリングする。

【0014】

本開示に係る技術の他の特徴及び特色は，添付図面に関連しての以下の詳細な記載から明白である。図面は，開示される技術の特徴を例示するものである。要約は，特許請求の範囲の記載に基づいて定めるべき発明の技術的範囲及びその均等範囲を限定するものではない。

【0015】

上述した概念の全ての組み合わせは，特段の理由のない限り，本願で開示される発明の一部を構成する。特に，特許請求の範囲に記載される特徴の全ての組み合わせは，本願において開示される発明の一部を構成するものである。

【図面の簡単な説明】

【0016】

【図1】図１Ａは、蛍光染料を有する複数の試料領域を備えるパターン化ターゲットの走査画像における中心部の一例を示す説明図である。図１Ｂは、図１Ａの右側を示す説明図である。

【図2A】本発明に係るシステム及び方法を実施するための例示的な画像走査システムの一般化されたブロック線図である。

【図2B】特定の実施形態において使用することのできる２チャンネル型ライン走査用のモジュラー光学撮像システムを示すブロック線図である。

【図3】本発明の実施形態に従って撮像することのできるパターン化試料を例示する説明図である。

【図4】本発明に係る撮像ランの間に画像歪みを動的に補正するために実施することのできる方法を例示するフローチャートである。

【図5】スポットアレーを有する試料を撮像するためのＮチャンネル撮像システムについて，撮像データを複数の撮像データサブセットに分割する態様の一例を示す説明図である。

【図6】撮像システムにより生成された撮像データについて歪み補正係数を計算する方法を例示するローチャートである。

【図7】６つの基点を含むタイルを例示する説明図である。

【図8】１回のシーケンスサイクルの間に２チャンネルベースコーリングから得られるクラウドを例示する説明図である。

【図9A】フローセルを使用する２チャンネルシーケンス装置における光学系用タイルセットのための歪み曲線群を例示するグラフである。

【図9B】フローセルを使用する別の２チャンネルシーケンス装置における光学系用タイルセットのための歪み曲線群を例示するグラフである。

【図9C】フローセルを使用する４チャンネルシーケンス装置における光学系用タイルセットのための２つの異なる色チャンネルに対応する４本の歪み曲線を例示するグラフである。

【図10】図１０Ａは、ラインスキャナを使用してシーケンスを行ったフローセルのスポットのうち，歪み補正を行わずに純度フィルタを通過してＸ軸に対する視野を横切って排出される割合（％ＰＦ）を示す例示的な実験結果の箱ひげ図である。図１０Ｂは、シーケンスを行ったフローセルのスポットのうち，歪み補正を行った後に純度フィルタを通過した割合を示す例示的な実験結果の箱ひげ図である。

【図11】撮像レンズ（例えば，対物レンズ）の設計最適化のために使用することのできる光学歪み補正係数を決定するための例示的な方法を示すフローチャートである。

【図12】歪み補正のために５次多項式を適用した後，視野を横切るピクセル中に残留する光学歪みを例示する残留歪みプロットである。

【図13】本願に開示する実施形態における各種の特徴を実行するために使用することのできる計算モジュールを例示するブロック図である。

【発明を実施するための形態】

【0017】

以下，添付図面を参照して，本発明を各種実施形態について詳述する。図面は，単なる例示として提示されており，本発明の典型的又は例示的な実施形態を示すに過ぎない。

【0018】

図面は，網羅的なものではなく，また，本発明を開示される実施形態に限定するものではない。

【0019】

本明細書において，「スポット」又は「特徴」とは，パターンにおける点又はエリアであって，他の点又はエリアから相対位置に応じて区別できるものを指す。個々のスポットは，特定形式の１つ又は複数の分子を含むことができる。例えば，スポットは，特定塩基配列を有する単一の目標核酸分子を含むことができ，或いは，同一塩基配列（又は，その相補的塩基配列）を有する数個の核酸分子を含むことができる。

【0020】

本明細書において，「基点」とは，対象物における区別可能な参照点を指す。参照点は，対象物の画像中に存在することができ，又は対象物の検出から得られる別のデータセット中に存在することができる。参照点は，対象物面内におけるｘ座標及び／又はｙ座標で特定することができる。代替的又は付加的に，参照点は，ｘｙ面に垂直で，例えば対象物及び検出器の想定位置により規定されるｚ座標で特定することができる。参照点についての１つ又は複数の座標は，物体における，或いは物体から得られる画像又は他のデータセットにおける１つ又は複数の他の特徴に対して特定することができる。

【0021】

本明細書において，「タイル」とは，試料における同一領域の１つ又は複数の画像を指し，該１つ又は複数の画像の各々は，それぞれの色チャンネルに対応する。タイルは，１回の撮像サイクルの撮像データセットにおける撮像データサブセットを形成することができる。

【0022】

本明細書において，「純度」とは，タイル上におけるスポット位置の「品質」の目安となる評価指数を指す。純度は，歪み補正係数をスポット位置に適用する前後の両者において決定することができる。「平均純度」とは，タイル上における全てのスポット位置又はスポット位置サブセットに亘る純度の平均値を指す。

【0023】

本明細書において，「ｘｙ面」とは，デカルト座標系における直線的なｘ軸及びｙ軸で規定される二次元的エリアを指す。検出器及び該検出器で観察すべき対象物に関して使用される場合，そのエリアは，検出器と，観察すべき対象物との間の観察方向に対して垂直であるものとして更に特定することができる。ラインスキャナに言及する際に使用される場合，「ｙ方向」とは，走査方向を指す。

【0024】

本明細書において，「ｚ座標」とは，ｘｙ面に対して垂直な軸線に沿う点，線又はエリアの位置を特定する情報を指す。特定の実施形態において，ｚ軸は，検出器によって観察すべき対象物のエリアに対して垂直である。例えば，光学系の焦点方向はｚ軸に沿って特定することができる。

【0025】

本明細書において，「ラインを走査する」とは，対象物のｘｙ面内における二次元的な矩形状又は横長形状の断面を検出し，その断面と対象物との間で相対変位を生じさせることを指す。例えば，蛍光撮像の場合，走査に際しての所定の時点において，矩形状又は横長形状を有する観察物のエリア（他のエリアは除外する）を特に励起させ，及び／又は当該エリア（他のエリアは除外する）からの放出を特に取得することができる。

【0026】

本願において開示される実施形態は，複数の繰り返しスポットを有するパターン化試料の撮像に際して生じる画像歪みの動的補正に関する。画像歪み補正係数をマルチサイクル撮像ラン（例えば，シーケンス・ラン）の間に計算し，引き続き，後続サイクルの間に生成される画像データにリアルタイムで適用することができる。

【0027】

第１実施形態において，試料についてのキャリブレーション撮像サイクル（例えば，第１撮像サイクル）の間に生成された撮像データは，パターン化試料の各領域に対応する惹く数の撮像データサブセット（例えば，タイル）に分割することができる。各タイルは，パターン化試料の領域における複数のサンプルスポットにそれぞれ対応する複数のスポットを含むことができる。各タイルについて，歪み補正係数セットを計算することができる。タイルが多色チャンネルの撮像データを含む場合，タイルの各色チャンネルについて歪み補正係数セットを計算することができる。キャリブレーション撮像サイクルの間に計算された歪み補正係数セットを，パターン化試料についての後続の撮像サイクルの間にそれぞれのタイルに適用することができる。かくして，試料の異なる領域について画像歪みを個別的に補正することができる。この領域固有の歪み補正により，グローバル剛体登録では考慮できなかった歪み補正が可能となる。例えば，レンズの形状により，非線形歪み（線形アフィン変換では考慮外）を誘発させることができる。更に，撮像された基板も製造プロセスにより歪みを誘発させ得る。例えば，基板の非剛性によるウェルの接合又は移動に基づく３Ｄバスタブ効果である。最後に，ホルダ内における基板のチルトは，線形アフィン変換では対応されない。

【0028】

第２実施形態は，タイルについての歪み補正係数を生成するための特定の方法に関する。この方法は，タイルの基点を使用してタイルのアフィン変換を予測するステップと；タイルを先鋭化するステップと；タイルにおける複数のスポットの平均純度を最大化する歪み補正係数を探索するステップと；を含む。画像についての単一のアフィン変換のみを行うことにより，開示される方法は，最適な歪み補正係数セットを探索するに要する時間を劇的に短縮させることができる。特定の実施形態において，歪み補正係数の探索は，以下のステップの反復を含むことができる。即ち，歪み補正係数を生成するステップと；生成された歪み補正係数を画像における各スポット位置に適用するステップと；画像における各スポット位置について信号強度を抽出するステップと；信号強度を空間的に正規化するステップと；タイルにおける複数のスポット位置の平均純度を計算するステップと；少なくとも，計算された平均純度を使用して，歪み補正係数の探索を反復するか否かを決定するステップと；を反復するものである。

【0029】

特定の実施形態において，歪み補正係数を生成するための開示された方法は，４種の異なる試料（例えば，４種の異なるＤＮＡ塩基形式）の身元（アイデンティティ）をエンコードした２つの異なる色チャンネルが含まれる画像データにおける画像歪みを補正するために使用することができる。

【0030】

本発明に係るシステム及び方法の実施形態を記載するに先立ち，開示される技術を実施する例示的な環境について記載しておくことが有用である。そのような例示的な環境は，図２Ａに示す撮像システム100の環境である。この例の撮像システムは，試料の画像を取得又は生成する装置を含むことができる。図２Ａに示す例は，バックライト形式の例示的な撮像形態を示すものである。システム及び方法を，その時々において例示的な撮像システム100との関連で記載することがあるが，これらは開示される画像歪み補正方法の実施例に過ぎないことに留意されたい。

【0031】

図２Ａに示す例から明らかなとおり，試料は試料容器110（例えば，本明細書に記載されたフローセル）内に収められ，試料容器110は対物レンズ142の下方における試料ステージ170上に配置される。光源160及び関連する光学系により光ビーム，例えばレーザ光を，試料容器110上における選択された試料位置に向けて照射する。試料の蛍光発光及び結果的に生じる光を対物レンズにより集光し，カメラシステムにおける画像センサに入射させて蛍光を検出する。試料ステージ170を対物レンズ142に対して移動させることにより，試料容器110上における次の試料位置を対物レンズ142の焦点に位置決めする。試料ステージ170の対物レンズ142に対する移動は，試料ステージ自体，対物レンズ，撮像システムにおける他の構成部品，又はこれらの任意の組み合わせの移動により達成することができる。更なる実施形態として，固定された試料上で撮像システム全体を移動させることもできる。

【0032】

流体配送モジュール又はデバイス100により，試薬（例えば，蛍光ラベルを施したヌクレオチド，緩衝液，酵素，切断試薬等）の流れを試料容器110及び排液弁120に導く。試料容器110は，試料を載置する１つ又は複数の基板を含むことができる。例えば，多数の核酸塩基配列を分析するためのシステムの場合，試料容器110は，その上にシーケンスすべき結合し，取付け，又は関連させるための１つ又は複数の基板を含むことができる。各種の実施形態において，拡散が取付け可能な不活性の基板又はマトリックス，例えばガラス面，プラスチック面，ラテックス面，デキストラン面，ポリスチレン面，ポリプロピレン面，ポリアクリルアミドジェル，金面及びシリコンウェファ等，を含むことができる。幾つかのアプリケーションにおいて，基板は，マトリックス内に形成されたチャンネル又はその他にエリア内に，或いは試料容器110を横切るアレー内に配置される。

【0033】

幾つかの実施形態において，試料容器110は，１種又は複数種の蛍光色素を使用して撮像された生物学的試料を含むことができる。例えば，特定のアプリケーションにおいて，試料容器110は，透明カバープレートと，基板と，これらの間に挟まれる液体とを含むパターン化フローセルとして構成することができ，生物学的試料は，透明カバープレートの内面又は基板の内面に配置することができる。フローセルは，基板における既定のアレー（例えば，六角形アレー，正方形アレー等）にパターン化される多数（例えば，数千，数百万，数十億）のウェル又は領域を含むことができる。各領域は，例えば合成によるシーケンス手法によりシーケンスすることのできるＤＮＡ，ＲＮＡ，又は他のゲノム材料よりなる生物学的試料のクラスタ（例えば，モノクローナルクラスタ）を形成することができる。フローセルは，各々がクラスターの六角形アレーを含む複数の離間したレーン（例えば，８本のレーン）に分割することができる。本発明において使用することのできるフローセルは，例えば米国特許第8,778,848号明細書に開示されている。

【0034】

システムは，温度ステーションアクチュエータ130と，試料容器110内における流体温度条件を制御可能とするヒータ／クーラ135とを備える。試料容器のシーケンスをモニタし，又は追跡するために，カメラシステム140を配備することができる。カメラシステム140は，例えば，電荷結合デバイス（ＣＣＤ）型カメラ（例えば，時間差積分（ＴＤＩ）型ＣＣＤカメラ）として構成することができ，これは，フィルタ切り替えアセンブリ145内における各種フィルタ，対物レンズ142及びフォーカシングレーザ／フォーカシングレーザアセンブリ150と協働させることができる。カメラシステム140はＣＣＤカメラに限定されるものではなく，他のカメラやイメージセンサ技術も使用可能である。特定の実施形態において，カメラセンサは，ピクセルサイズを約５〜１５μｍとすることができる。

【0035】

カメラシステム140のセンサからの出力データは，リアルタイム分析モジュール（図示せず）に送信することができる。この分析モジュールは，画像データを分析し（例えば，画質評価），レーザービームの特性（例えば，焦点，形状，強度，パワー，輝度，位置）をグラフィカルユーザインターフェース（ＧＵＩ）に報告又は表示し，更に，画像データにおる歪みを後述する態様で動的に補正するソフトウェアアップリケ―ションとして構成することができる。

【0036】

光源160（例えば，複数のレーザを任意的に含むアセンブリにおける励起レーザ）又は他の光源を配備して，試料内における蛍光シーケンス反応を，光ファイバインターフェース（任意的に，１つ又は複数の再撮像レンズや，光ファイバマウント等を含む）を介して照射することができる。図示例においては，低出力のランプ165，合焦レーザ150及び反転ダイクロイック185も配備されている。幾つかの実施形態において，合焦レーザ150は，撮像の間はスイッチオフされる。他の実施形態において，代替的な合焦形態は，データ収集と同時に表面で反射された散乱ビームの位置を検出するための第２焦点カメラ（図示せず）を含むことができ，これは象限検出器又は位置感知センサ（ＰＳＤ）等のセンサで構成することができる。

【0037】

バックライトデバイスとして開示されているが，他の例として，レーザ又は他の光源からの光を，対物レンズ142を通して試料容器110内における試料に照射する構成とすることもできる。試料容器110を試料ステージ170上に載置して，試料容器110を対物レンズ142に対して移動及び整列させることができる。試料ステージ170は，これを三次元における任意の方向に移動可能とする１つ又は複数のアクチュエータを備えることができる。例えば，デカルト座標系に関して，ステージ170を対物レンズに対してｘ方向，ｙ方向及びｚ方向に移動可能とするアクチュエータを設けることができる。これにより，試料容器110上における試料位置を対物レンズに対して最適整合状態に位置決めすることができる。

【0038】

本例においては，光学素子を試料容器110に対して焦点方向（典型的には，ｚ軸又はｚ方向）に位置決め制御するために合焦（ｚ軸）部品175が設けられている。合焦部品175は，光学ステージ，試料ステージ又はこれら双方に物理的に結合される１つ又は複数のアクチュエータを含むことができ，該アクチュエータにより試料ステージ170上の試料容器110を光学素子（例えば，対物レンズ142）に対して移動させて撮像操作のために適正な合焦状態を提供する構成とすることができる。例えば，アクチュエータは，ステージに対する直接的又は間接的な，機械的，磁気的，流体的又はその他の取付け手段により，或いは接触により，対応するステージに物理的に結合することができる。１つ又は複数のアクチュエータは，ステージをｚ方向に移動させると共に試料ステージを同一面内に維持する（即ち，光軸に対して垂直なレベル又は水平高度を維持する）ように構成することができる。１つ又は複数のアクチュエータは，ステージをチルトさせるように構成することもできる。これは，例えば，試料容器110を，その面の傾斜が補償されるよう，動的にレベル合わせすることで行うことができる。

【0039】

システムの合焦とは，対物レンズの焦点面を，撮像すべき試料に対して選択された試料位置において整列させることを意味する。しかしながら，合焦とは，試料表示の所望の特性，例えばテスト試料画像の所望の先鋭度又はコントラストを得るためのシステム調整も意味する。対物レンズの焦点面視野における使用可能な深度は小さい（時には，１μｍ以下のオーダ）ことがあり得るため，合焦部品175は，撮像される表面に密接に追従する。試料容器は，器材への取付け状態で完全に平坦ではないため，合焦部品175は，走査方向（以下，ｙ軸と称する。）に移動させる間にそのプロファイルに追従するようにセットアップすることができる。

【0040】

撮像される試料位置におけるテスト試料から発せられる光は，カメラシステム140における１つまたは複数の検出器に向けることができる。開口を位置決め配置して，焦点エリアから発せられる光のみを検出器に向けて通過可能とすることができる。開口は，焦点エリア外のエリアから発せられる光の成分を取り除くことにより画質を向上させるために設けることができるものである。発光フィルタをスイッチングアセンブリ145内に配備して，決定された発光波長のみを記録し，かつレーザ迷光をカットアウトすることができる。

【0041】

図示しないが，操作サイクルを制御するためのコントローラを設けることができる。コントローラは，システムの作動要件，例えば，合焦，ステージ移動及び撮像操作を制御するように構成することができる。各種の実施形態において，コントローラは，ハードウェア，アルゴリズム（例えば，コンピュータで実行可能な命令），又はこれらの組み合わせを使用する構成とすることができる。例えば，幾つかの実施形態において，コントローラは，１つ又は複数のＣＰＵ又はプロセッサと，関連するメモリーを含むことができる。他の実施形態として，コントローラは，作動を制御するためのハードウェア又は回路，例えばコンピュータプロセッサ及び，コンピュータ可読命令を記憶している非一時的コンピュータ可読媒体を含むことができる。例えば，この回路は，現場プログラマブルゲートアレー（ＦＰＧＡ），特定用途向け集積回路（ＡＳＩＣ），プログラマブルロジックデバイス（ＰＬＤ），コンプレックスプログラマブルロジックデバイス（ＣＰＬＤ），プログラマブルロジックアレー（ＰＬＡ），プログラマブルアレーロジック（ＰＡＬ），或いは他の同様なプロセッシングデバイス又は回路の１種又は複数種を含むことができる。更に他の実施形態として，コントローラは，この回路と，１つ又は複数のプロセッサの組み合わせを含むこともできる。

【0042】

図２Ｂは，特定に実施形態において使用することのできる２チャンネルライン走査モジュール型の撮像システム200の一例を示す。システム及び方法を，その時々において，例示的な撮像システム200との関連で記載することがあるが，これらは本願において開示される技術を実施する態様の一例に過ぎないことに留意されたい。

【0043】

幾つかの実施形態において，システム200は，核酸のシーケンスのために使用することができる。適用可能な技術には，核酸をアレーにおける固定位置（例えば，フローセルにおけるウェル）に固定し，アレーを反復的に撮像する技術が含まれる。このような実施形態において，システム200は，特定のヌクレオチド塩基形式を互いに区別可能とする２つの異なる色チャンネルで画像を取得することができる。より具体的に，システムは「ベースコーリング」と称されるプロセスを実行し，これは，撮像サイクルにおける画像の所定のスポット位置に対して塩基形式（例えば，アデニン（Ａ），シトシン（Ｃ），グァニン（Ｇ），チミン（Ｔ））を決定するプロセスである。２チャンネルベースコーリングの間，２つの画像から抽出された画像データを使用し，２つの画像の強度の組み合わせとして塩基形式をエンコードすることにより，４種の延期形式の１つの存在を判定することができる。２つの画像の各々における所定のスポット位置について，塩基形式は，信号の組み合わせが［on, on］，［on, off］，［off, on］又は［off, off］の何れであるかによって決定することができる。

【0044】

再び撮像システム200を参照すると，このシステムは，２つの光源211, 212を内蔵したライン生成モジュール（ＬＧＭ）210を含む。光源211, 212は，レーザービームを出力するレーザーダイオード等の，コヒーレント光源で構成することができる。光源211は第１波長（例えば，赤色波長）で発光することができ，光源212は第２波長（例えば，緑色波長）で発光することができる。光源211, 212から出力される光ビームは，ビーム整形レンズ213を通過させることができる。幾つかの実施形態において，単一のビーム整形レンズを使用して両光源から出力される光ビームを整形する。他の実施形態において，各光ビームのための別個のビーム整形レンズを使用する。幾つかの実施形態において，ビーム整形レンズは，光ビームをラインパターンに整形するパウエルレンズで構成する。ライン生成モジュール（ＬＧＭ）210のビーム整形レンズ，又は撮像システムにおける他の光学素子は，光源211, 212から出力される光ビームをラインパターンに整形する（例えば，１つ又は複数のパウエルレンズ，その他のビーム整形レンズ，回折素子，散乱素子等を使用する）ことができる。

【0045】

ライン生成モジュール（ＬＧＭ）210は，更に，光ビームを，単一インターフェースポートを通して発光光学モジュール（ＥＯＭ）230に導くためのミラー214と半反射ミラー215を含むことができる。光ビームは，シャッター素子216を通過させることができる。発光光学モジュール（ＥＯＭ）230は，対物レンズ235と，対物レンズ235をターゲットに対して接近又は離間させるためのｚステージ236とを含むことができる。例えば，ターゲット250は，液体層252及び透明カバープレート251を含み，生物学的試料は，透明カバープレートの内面，及び，液体層の下方に位置する基体層の内面に配置することができる。そして，ｚステージにより対物レンズを移動させて光ビームをフローセルの何れかの内面に合焦させる（即ち，生物学的試料に合焦させる）ことができる。生物学的試料は，ＤＮＡ，ＲＮＡ，タンパク質，又は既知の光学的シーケンスに適合する他の生物学的材料とすることができる。

【0046】

発光光学モジュール（ＥＯＭ）230は，焦点追尾モジュール（ＦＴＭ）から発せられる焦点追尾光ビームをターゲット250に向けて反射させ，引き続いて，ターゲット250から返される光ビームを焦点追尾モジュール（ＦＴＭ）に戻されるように反射するための半反射ミラー233を含むことができる。焦点追尾モジュール（ＦＴＭ）は，戻された焦点追尾光ビームの特性を検出し，かつ，ターゲット250に対して対物レンズ235を最適合焦させるためのフィードバック信号を発生する焦点追尾光学センサを含むことができる。

【0047】

発光光学モジュール（ＥＯＭ）230は，光ビームを対物レンズ235から出射させると共に，ターゲット250から戻される光ビームを通過させるための半反射ミラー234も含むことができる。幾つかの実施形態において，発光光学モジュール（ＥＯＭ）230はチューブレンズ232を含むことができる。チューブレンズ232を通過した光ビームは，フィルタ素子231を通してカメラモジュール（ＣＡＭ）220に入射させることができる。カメラモジュール（ＣＡＭ）220は，入射光ビームに応じて生物学的試料から発せられる光を検出するための１つ又は複数の光学センサ221を含むことができる。

【0048】

カメラモジュール（ＣＡＭ）220のセンサからの出力データは，リアルタイム分析モジュール225に送信することができる。各種の実施形態において，リアルタイム分析モジュールは，画像データを分析し（例えば，画質評価，ベースコーリング等），ビームの特性をグラフィックユーザインターフェース（ＧＵＩ）に報告又は表示するための，コンピュータ可読命令を実行する。これらの操作を撮像サイクルの間にリアルタイムで実行して，下流側での分析時間を最小化すると共に，リアルタイムでフィードバックを行い，かつ撮像ランの間におけるトラブルシューティングを可能とする。実施形態において，リアルタイム分析モジュール225は，撮像システム200に通信接続されて同システムを制御するためのコンピュータデバイス（例えば，コンピュータデバイス1000）で構成することができる。また，後述する実施形態において，アルタイム分析モジュール225は，カメラモジュール（ＣＡＭ）220から受信した出力画像データにおける歪みを補正するためのコンピュータ可読命令を更に実行することができる。

【0049】

図３は，本発明の実施形態に基づいて撮像することのできるパターン化試料300の一例を示す。本例において，試料300は，撮像ランの間に同時に撮像可能なスポット又は特徴310の六角形アレーとしてパターン化される。図示例では六角形アレーとしているが，他の実施形態において，試料は，直線的アレー，円形アレー，八角形アレー又は他のアレーパターンとしてパターン化することができる。図示の簡略化のため，試料300は，数十ないし数百のスポット310を有するものとして示されている。しかしながら，試料300が数千，数百万，数十億のスポット310を有し得ることは，言うまでもない。更に，場合によっては，試料は，撮像ランの間にサンプリングされるスポット310の多層面（合焦方向に対する垂直面）を含む多層面試料で構成することができる。

【0050】

特定の実施形態において，試料300は，レーンに区分けされた数百万又は数十億のウェルをもってパターン化されたフローセルで構成することができる。この特定の実施形態において，フローセルにおける各ウェルは，合成によるシーケンスを使用してシーケンス対象の生物学的材料を含むことができる。

【0051】

上述したように，光学歪みは，多数のスポットを有するパターン化試料300についてのマルチサイクル撮像において特に致命的である。光学歪みにより，走査画像におけるスポットの実際の位置がスポットの予想位置からシフトするためである。歪み効果は，視野のエッジ部に沿って特に顕著となり，これらスポットの撮像データを潜在的に使用不能とする。その結果，データスループットにおける欠落や，マルチサイクル撮像ランの間における誤差率の増大を生じさせかねない。以下に記載する実施形態は，撮像ラン（例えば，シーケンスラン）の間に画像歪みを動的に補正し，これによりデータスループットを改善すると共に撮像ランの間における誤差率を低下させようとするものである。

【0052】

図４は，本発明の開示に基づいて，撮像ランの間に画像歪みを動的に補正するために実行することのできる例示的な方法400を示すフローチャートである。方法400は，その時々において２チャンネル撮像システム（例えば，撮像システム200）と関連させて記載されるが，方法400は任意数のチャンネル（例えば，１チャンネル，３チャンネル，４チャンネル等）を有する撮像システムにも適用することができる。

【0053】

ステップ410において，パターン化試料のキャリブレーション撮像サイクルを実行する。キャリブレーション撮像サイクルの間，画像データは，（例えば，ラインスキャナを使用して）サンプルエリアを１つ又は複数のコヒーレント光源で操作することにより，試料全体について収集する。例示として，撮像システム200は，赤色スペクトル域内の波長を有する光で試料をライン走査すると共に，緑色スペクトル域内の波長を有する光で試料をライン走査するためのシステム光学系と連携するライン生成モジュール（ＬＧＭ）210を使用することができる。ライン走査に応じて，試料の異なるスポット上に位置する蛍光色素が蛍光発光し，その光が対物レンズ235に集光され，ＣＡＭ220のイメージセンサに入射して蛍光を検出することができる。例えば，各スポットの蛍光は，ＣＡＭ220の数ピクセルにより検出することができる。ＣＡＭ220からの画像データ出力は，画像歪み補正（例えば，対物レンズ235のジオメトリから生じる画像歪みの補正）のために，リアルタイム分析モジュール225に送信することができる。

【0054】

各種の実施形態において，キャリブレーション撮像サイクルは，マルチサイクル撮像ランにおける最初の撮像サイクル（例えば，ＤＮＡシーケンスラン）とすることができる。特に，撮像システムは，各撮像ランの開始の間に歪み補正係数を自動的に決定することができる。

【0055】

ステップ430において，キャリブレーション撮像サイクルにより生成された画像データは，パターン化試料のそれぞれの領域に対応する複数の画像データサブセット（例えば，タイル）に分割される。換言すれば，画像データサブセットは，１回の撮像サイクルの画像データセットにおけるピクセルのサブセットを含む。図５は，スポットのアレーを有する試料（例えば，試料300）を撮像するためのＮチャンネル撮像システムについて，撮像データを複数の画僧データサブセットに分割する手法を視覚的に示す。説明の簡略化のため，図５において画像歪みは示されていない。図示のとおり，各チャンネルについて，画像データは，試料の領域に対応する複数のタイル445又は画像データサブセットに分割される。各画像データサブセット自体は，試料上で予想位置から歪んだ複数の画像スポット443（特に，タイルのエッジ部に沿う）を含む。例示として，２チャンネル撮像システムについての画像データサブセットは，各チャンネルについての試料のそれぞれの領域に係る画像データ（例えば，チャンネル１の頂部右側のタイル及びチャンネル２の頂部右側のタイル）を含む。図５に示すように，画像データは，各色チャンネルについて２８個のタイルに分割される。画像データを複数のタイル445に分割することにより，画像処理操作の並行化が可能となる。更に，以下に記載するように，これにより試料の各領域について，試料に局在する追加的な歪み（即ち，光学系によるものではない歪み）を補正するような独立した歪み補正が可能となる。このような歪みは，フローセルのチルトにより，又はフローセルの３Ｄ曲率，例えばバスタブ形状により誘起されるチルトにより導入され得るものである。

【0056】

各種の実施形態において，画像データサブセットのサイズは，試料内又は試料上における撮像システムの視野内に基点マーカ又は基点を配置することにより決定することができる。画像データサブセットは，各画像データサブセット又はタイルのピクセルが所定数の基点（例えば，少なくとも３個の基点，４個の基点，６個の基点，８個の基点等）を有するように分割することができる。例えば，画像データサブセットにおけるピクセルの総数は，画像データサブセットの境界と基点との間の所定ピクセル距離に基づいて決定することができる。図７は，６個の基点510を含むタイル500を例示する。以下に記載するとおり，これらの基点は，画像を整列させ，歪み係数を決定するための参照点として使用することができる。

【0057】

ステップ450において，その特定の実施形態については更に後述するが，各画像データサブセットについて画像歪み補正係数セットを個別的に計算する。画像データサブセットが多色チャンネルを含む場合，各色チャンネルについて別個の歪み補正係数セットを計算することができる。これらの歪み補正係数セットは，キャリブレーション撮像サイクルにおける画像データの歪みを補正するために適用することができる。

【0058】

ステップ470において，パターン化試料についての次の撮像サイクルを実行して，新たな画像データを生成する。ステップ490において，キャリブレーション撮像サイクルの間に計算した歪み補正係数を現在の撮像サイクルの画像データに適用して歪みを補正する。計算された歪み補正係数の各セットは，現在の撮像サイクルの画像データにおける対応するタイルに適用することができる。その後，ステップ470及び490は反復させることができる。このようにして，最初の撮像サイクルの間に計算された歪み補正係数を後続の撮像サイクルに適用して，画像データの異なるタイルにおける歪みを個別的に補正することができる。

【0059】

図６は，撮像システムにより生成された画像データについての歪み補正係数を計算するための例示的な方法450を示すフローチャートである。例示的な方法450は，画像データサブセット445に適用するものとして示されているが，全画像データセット（即ち，試料全体の画像データ）に適用できる点に特に留意されたい。

【0060】

方法450は，撮像サイクルの間に生成された試料の領域に対応する画像データサブセット445を入力とし，後続の撮像サイクルの間に得られた試料の同一領域についての ｉ）画像データサブセット及び ｉｉ）画像データにおける歪みを補正するために適用することのできる多項式のための歪み補正係数468を出力するものである。画像データサブセットが第１色チャンネルについての画像データと，第２色チャンネルについての画像データを含む場合，歪み補正係数セットは，画像データサブセットの各色チャンネルについて生成させることができる。方法450の実施形態を，主として２チャンネル画像データについての歪み補正係数の決定に関連させて記載するが，方法450は，任意数のチャンネルに対応する画像データについての歪み補正係数の決定にも適用することができる点に留意されたい，多チャンネル撮像システムにおいて，ステップ451-452 及び 461-465は，各チャンネルに対応する画像データについて個別に実行することができる点にも留意されたい。説明を簡略化するため，これらのステップは，主として，単一チャンネルについて実行するかのごとく記載する。説明を更に簡略化するため，方法450についての記載は，画像として画像データサブセットに言及する。

【0061】

ステップ451において，画像についてのアフィン変換を，画像基点を使用して予測する。例えば，図７に示すように，ブルズアイリング形状の基点510（コントラストを強調するために暗い縁取りで包囲された光輪）を画像中に見出して，画像中におけるそれらの実際の位置を決定することができる。一実施形態において，画像中における基点の位置は，参照仮想基点との相互相関を行い，相互相関スコアが最大化される位置を取り出して見出すことができる。相互相関は，離散関数についての相互相関方程式〔数１〕を使用して実行することができる。

【数1】

ここに，画像中の基点と仮想基点とのフィットの良否は，スコアリング方程式(2)を使用して計算することができる。
Score = 1 - (RunnerUp_CC - Minimum_CC) / (Maximum_CC - MInimum_CC) (2)
ここに，Minimum_CC は相互相関の最小値，Maximum_CC は相互相関の最大値，RunnerUp_CC はMaximum_CCの位置から４ピクセルの半径の外側における最大の相互相関値である。基点の位置を決定するための特定の方法は，米国特許公開第2015-0125053号明細書（米国特許出願第14/530529号）に詳述されている。

【0062】

基点の理論的な位置を既知とすれば（例えば，基点間に存在すべき等間隔スポットの個数に基づいて），画像上における基点の実際の位置に対する理論的な位置を描くアフィン変換を決定することができる。予測されたアフィン変換は，基点の予想位置からの並進，回転及び拡大を描くことができる。

【0063】

画像の理論的な位置ｘ_ｉ,ｙ_ｉ（即ち，基点のピクセルが実際の試料形態を使用している場合）と，実際の画像の位置ｘ_ｗ,ｙ_ｗ（（基点のピクセルが画像上で実際に現れる場合）とを所与とすれば，アフィン変換は数学的に〔数２〕で表すことができる。

【数2】

ここに，1番目のマトリックスは並進マトリックス，２番目のマトリックスは画像点をｘ方向に倍率ｓ_ｘ で，ｙ方向に倍率 ｓ_ｙ で拡大する倍率マトリックス，３番目のマトリックスは画像点をｚ軸（図縄稚，画像に対して垂直な焦点方向）周りで角度θだけ回転させる回転マトリックスである。代替的に，アフィン変換は〔数３〕で表すこともできる。

【数3】

ここに，係数ａ₁₁及びａ₂₃ は画像点のｘ及びｙ方向に沿う並進を表し，他の４つの係数は画像点のスケーリング及び拡大の組み合わせを表す。画像上における３個の基点の実際の位置（ｕ₁,ｖ₁）_，（ｕ₂,ｖ₂），（ｕ₃,ｖ₃）と，３個の基点の理論的な位置（ｘ₁,ｙ₁）_，（ｘ₂,ｙ₂），（ｘ₃,ｙ₃）を所与とすれば，アフィン変換は〔数４〕を解くことにより予測することができる。

【数4】

〔数４〕を解くため，最小二乗式〔数５〕を解くことができる。

【数5】

６つの変数の各々に関して誤差関数の６つの偏微分を取り出し，この表現をゼロとすれば，〔数６〕のマトリックスで表される６つの方程式が得られる。

【数6】

【0064】

ステップ452において，画像を先鋭化する。例えば，画像は，ラプラス畳み込み又は他の既知の画像先鋭化技術を使用して先鋭化することができる。

【0065】

ステップ460において，画像における複数のスポットの平均純度を最大化する歪み補正係数の反復探索を行う。各種の実施形態において，探索はパターン化された探索である。代替的に，他の既知の探索アルゴリズムを適用することもできる。ステップ460における手順は，以下に記載するとおりである。

【0066】

ある実施形態において，探索アルゴリズムは，画像におけるスポットのサブサンプリングによって加速可能である。特に，その場合の２チャンネル実施形態において，サブサンプリングは，幾つかの行における全てのスポットを含むものでなければならない。これは，［ｏｆｆ, ｏｆｆ］の信号強度を有する信号の２チャンネル（２色）エンコーディング（例えば，ベースコール）に固有の問題である。ベースコールの場合，「ｏｆｆ」（ラベル無し）クラスターとして指定されるガウスクラスターは，「ｏｎ」として登録することができる。代替的に，信号をクラスター（即ち，ウェル間のエリア）から抽出し，「ｏｆｆ」信号として登録することもできる。この問題は，行内における全てのウェルにつき，そして十分な数の行について，ガウスクラスターが純度費用関数を起動しないようにサンプリングを行うことによって克服することができる。

【0067】

ステップ461において，歪み補正係数セットを生成する。歪み補正係数は，画像の歪み補正関数の多項式表示を提供するものである。位置実施形態において，歪み補正係数は，二次多項式，三次多項式，四次多項式又は五次多項式，或いは更に高次の多項式に対応させることができる。撮像システムがラインスキャナ―である場合，歪み補正は数学的に〔数７〕で表すことができる。

【数7】

ここに，

は，画像座標（ｘ，ｙ）の画像における歪み補正位置，ａ₁・・ａ_ｎ はｎ次多項式を記述する歪み補正係数，ｃ_ｘ はｘに係る画像における中心点であり，ｙはラインスキャナ―の走査方向である。この実施形態において，ｙ方向における歪みはｘ方向に関して測定可能である。これは，最大歪みを有する寸法であるためである。（例えば，撮像要件によって）ｙ方向における歪みが無視できる場合，その歪みは，ｄｙ＝0 と仮定することができ，画像中の歪み補正位置は〔数８〕に簡略化することができる。

【数8】

【0068】

一実施形態において，探索ステップ460は，探索の第１段階の間，歪み補正係数を０値（即ち，画像に歪みがない）として開始させることができる。代替的に，探索を開始させるために事前に学習した係数値セットを使用することもできる。

【0069】

ステップ462において，ステップ451において予測したアフィン変換を画像中のスポット位置に適用する。例えば，アフィン変換を上述した〔数３〕に従って適用することができる。

【0070】

ステップ463において，予測されたアフィン変換をスポット位置に適用した後，生成された歪み補正係数を画像中のスポット位置に適用する。例えば，歪みをラインスキャナ―のために二次元的に補正する場合には，〔数７〕を適用することができる。代替的に，ｙ方向における歪みが無視し得る程度であれば，〔数８〕を適用することができる。

【0071】

ステップ464において，画像中における各スポット位置について信号強度を抽出する。例えば，所与のスポット位置につき，信号強度は，スポット位置におけるピクセルの強度の重み付け平均値を決定することにより抽出することができる。例えば，中心のピクセル及び隣接するピクセルの重み付け平均化は，バイリニア補間等として行うことができる。一実施形態において，画像中における各スポット位置は，数個のピクセル（例えば，１個〜５個のピクセル）を含むことができる。

【0072】

任意的なステップ465において，抽出された信号強度を空間的に正規化して，サンプリングされた画像における照度の変動を補償する。例えば，強度値は，５パーセンタイル及び９５パーセンタイルの値がそれぞれ０及び１となるように正規化することができる。

【0073】

ステップ466において，画像についての正規化された信号強度（例えば，各チャンネルについての）正規化された強度）は，画像中における複数のスポットの平均純度を計算するために使用することができる。平均純度を計算するための例示的な方法は，後述するとおりである。

【0074】

一実施形態において，ベースコーリングを行う２チャンネルシステムについて平均純度を計算することができる。一般的に，ベースコーリングとは，上述したとおり，撮像サイクルの間に画像における所与のスポット位置についてベースコール（例えば，Ａ，Ｃ，Ｇ又はＴ）を決定するプロセスを指す。ベースコーリングは，強度データに数学的モデルを割り当てることにより実行することができる。好適に使用することのできる数学的モデルには，例えば，ｋ−ｍｅａｎｓ−ｌｉｋｅクラスタリングアルゴリズム，期待値最大化クラスタリングアルゴリズム，ヒストグラム的方法等が含まれる。４通りのガウス分布を２チャンネル強度データに適合させて，１つの分布をデータセットに示される４種のヌクレオチドのそれぞれに的お湯することができる。

【0075】

特定の実施形態において，期待値最大化（ＥＭ）アルゴリズムを適用することができる。ＥＭアルゴリズムによれば，Ｘ，Ｙ強度値の各々（それぞれ，２チャンネル強度値の各々に対応する）につき，あるＸ，Ｙ強度値がデータを適合させる４種のガウス分布の内の１種に属する確率を表す値を生成することができる。４種の塩基が４種の別個の分布を与える場合，各Ｘ，Ｙ強度値は，それぞれ４種の塩基の各塩基に１種ずつ対応する４種の確率値を有する。４種の確率値における最大の確率値が，ベースコールを示すものである。図８に示すとおり，クラスターが両チャンネルにおいて「ｏｆｆ」であれば，ベースコールはＧである。クラスターが一方のチャンネルで「ｏｆｆ」，他方のチャンネルで「ｏｎ」であればベースコールはＣ又はＴの何れかであり（どのチャンネルがｏｎであるかによる），クラスターが両チャンネルにおいて「ｏｎ」であればベースコールはＡである。

【0076】

より一般的に，任意チャンネル数のベースコール実施形態につき，所与の画像スポットの純度は，少なくとも，それぞれのガウス分布中心に対するチャンネル強度点の距離を使用して決定することができる。画像スポットの強度点が読み取られた塩基の分布中心により近いほど，読み取られた塩基がより正確であり，純度値がより高いことを示す。４チャンネル実施形態において，所与のスポットについてのベースコールの品質（即ち，純度値）は，最も高い強度値をその最高値と２番目に高い強度値の和で除することにより表すことができる。２チャンネル実施形態において，所与のデータ点についてのベースコールの品質又は純度は，最も近い重心点までの距離を２番目に近い重心点までの距離で除することにより表すことができる。数学的に，２チャンネル実施形態における所与の点についての純度は，(10)により表すことができる。
Ｃ＝１．０−Ｄ１／（Ｄ１＋Ｄ２） (10)
ここに，Ｄ１は最も近いガウス平均値までの距離であり，Ｄ２は２番目に近いガウス平均値までの距離である。距離は，（各ガウス重心及び検討対象点で規定される線に沿う分布幅を考慮する）マハラノビス法に基づいて測定することができる。

【0077】

ステップ468において，探索460を反復すべきか否かを決定する。この決定は，各種の実施形態において，平均純度決定値が最適な歪み補正係数セットに収束したか否か，探索460が所定回数だけ反復されたか否か，所定の平均純度値が計算されたか否か，又はこれらの組み合わせに依存する。例えば，係数セットが全体的な平均純度を向上するものであれば，これらの係数は，新たな係数セットの探索及びサンプリングの次の反復の開始点となり得る。特定の実施形態において，探索460は，数十回，数百回，又は数千回に亘って反復することができる（パターン化探索の使用による）。

【0078】

図９Ａ及び図９Ｂは，それぞれ，フローセルを使用する２チャンネルシーケンス装置における光学系用タイルセットのための歪み曲線群を例示するグラフである。図９Ａは１つの装置からのデータに，そして図９Ｂは別の装置からのデータにそれぞれ対応し，装置毎の可変性を示すものである。これらの曲線は，いずれも表面（番号１）及びレーン（番号２）により得られたものである。プロットが示すように，歪みはフローセルのレーン及び表面の両者により変化する。図９Ｃは，フローセルを使用する４チャンネルシーケンス装置における単一の光学系用タイルのための２つの異なる色チャンネルに対応する４本の歪み曲線を例示するグラフである。この場合，フローセルの異なる領域について，開示された実施形態に基づいて行われる独立した画像歪み補正（領域及び色チャンネルの両者による）は，画質を更に改善するものである。

【0079】

図１０Ａは，ラインスキャナを使用してシーケンスを行ったフローセルのスポットのうち，歪み補正を行わずに純度フィルタを通過してＸ軸に対する視野を横切って排出される割合（％ＰＦ）を示す例示的な実験結果の箱ひげ図である。撮像サイクルの間に純度フィルタリングを行って，「低画質」スポットからのデータを除外することができる。例えば，スポットは，所定回数のシーケンスの後に所定の純度値を超えなければ，データ点としては無視することができる。図１０Ａにおいて，サブタイルビン番号はタイル画像の中心の対するスポットのｘ方向における距離を示す。所与のｘ方向について，結果はタイルの全てのｙ方向（ｙ方向は，走査方向である。）に亘って平均化した。図示のとおり，歪み補正を行わなければ，タイルのエッジ部における少ない割合のスポットが純度フィルタを通過し，これらスポットについてのデータは使用不能となった。図１０Ｂは，シーケンスを行ったフローセルのスポットのうち，歪み補正を行った後に純度フィルタを通過した割合を示す例示的な実験結果の箱ひげ図である。図示のとおり，純度フィルタを通過したスポット数は，タイルのエッジ部に向けて劇的に改善された。

【0080】

更なる実施形態において，光学歪みは，撮像システムにおける撮像レンズ（例えば，対物レンズ）の光学設計を最適化することにより，撮像システム内において低減させることができる。光学レンズの設計は，レンズにより撮像された画像にたいして，少なくとも，所定の画像歪み補正アルゴリズム（例えば，本願において開示される画像歪み補正アルゴリズム）を適用してレンズを調整することにより最適化することができる。例えば，画像歪み補正アルゴリズムがレンズ内における０．２〜０．４ピクセルの歪みを想定する場合，歪み無しとは対照的に，想定されるレベルの歪みを有するレンズを設計するのが有利であり得る。

【0081】

図１１は，撮像レンズ（例えば，対物レンズ）の設計最適化のために使用することのできる光学歪み補正係数を決定するための例示的な方法600を示すフローチャートである。方法600は，レンズの視野及びイメージセンサーのピクセルサイズを入力とし，５次多項式のフィット位置から最大絶対光学歪み及び最大誤差を出力するものである。

【0082】

ステップ610において，点拡がり関数の重心ベクトルを計算する。点拡がり関数のベクトルは，最大歪み（ＤｉｓｔＭａｘ）変数をゼロに初期化し，Ｄｉｓｔ＞ＤｉｓｔＭａｘである間に以下のステップを反復して計算することができる。
・視野高さＦにおける近軸Ｙ高さ（Ｙｒｅｆ）を計算する。
・ホイヘンス点拡がり関数の重心（Ｙｒｅａｌ）を計算する。
・歪みを計算する：Ｄｉｓｔ＝１００^＊ＡＢＳＯ（Ｙｒｅａｌ−Ｙｒｅｆ）／Ｙｒｅｆ
・Ｙｒｅａｌをベクトル（Ｖｙｒｅａｌ）として保存し，Ｆをベクトル（ＶＦ）として保存する。

【0083】

ステップ620において，点拡がり関数の多項式フィットを計算する。多項式フィットは，特定の実施形態において，ＶＦ及びＶｙｒｅａｌの多項式フィットを，Ｖｙｒｅａｌ＝ａ１^＊Ｆ＋ａ３^＊Ｆ＾３＋ａ５^＊Ｆ＾５として計算することにより求めることができる。ここに，ａ１は倍率，ａ３は３次係数，ａ５は５次係数である。

【0084】

ステップ630において，各重心をフィット位置と比較することができる。この比較は，フィット位置からの最大誤差（ＥｒｒＭａｘ）をゼロに初期化し，Ｅｒｒ＞ＥｒｒＭａｘである間に以下のステップを反復して行うことができる。
・視野高さＦの近軸Ｙ高さ（Ｙｒｅｆ）を計算する。
・ホイヘンス点拡がり関数の重心（Ｙｒｅａｌ）を計算する。
・ａ１，ａ３，ａ５からの予想される重心位置（Ｙｅｘｐ）を計算する。
・誤差をＥｒｒ＝ａｂｓ（Ｙｅｘｐ−Ｙｒｅａｌ）／Ｓｐｉｘとして計算し，ここにＳｐｉｘはイメージセンサーのピクセルサイズである。

【0085】

この例では，ステップ640において，少なくとも，フィット位置からの決定された最大誤差及び決定された最大絶対歪みを使用してレンズ設計を最適化することができる。一実施形態において，この最適化は，決定された最大誤差，決定された最大絶対及び波面誤差の歪み根二乗和（ｒｓｓ）を求める最小二乗最小化技術に基づくものとすることができる。

【0086】

図１２は，歪み補正のために５次多項式を適用した後，視野を横切るピクセル中に残留する光学歪みを例示する残留歪みプロットである。

【0087】

図１３は，本願に開示する実施形態における各種の特徴，例えば前述した方法400及び500における１つ又は複数の態様の特徴及び機能を実行するために使用することのできる計算モジュールを例示するブロック図である。例えば，計算部品は，リアルタイム分析モジュール225として構成することができる。

【0088】

本明細書において，「モジュール」とは，本願の１つ又は複数の実施形態において実行可能な所与の機能ユニットを記述する用語である。本明細書において，モジュールは，任意形式のハードウェア，ソフトウェア，又はこれらの組み合わせとして構成することができる。例えば，１つ又は複数のプロセッサ，コントローラ，ＡＳＩＣ，ＰＬＡ，ＰＡＬ，ＣＰＬＤ，ＦＰＧＡ，論理素子，ソフトウェアルーチン又は他の機構を使用してモジュールを構成することができる。実施に際して，本明細書に開示する各種モジュールは離散的なモジュールとして構成することができ，記載した機能及び特徴を１つ又は複数のモジュールにおいて部分的又は全面的に共有させることもできる。換言すれば，本明細書を読了した当業者には明らかなことであるが，本願において開示される各種の特徴及び機能は，任意のアプリケーションについて実行可能であり，各種の組み合わせ及び順列における１つ又は複数の別個の，又は共有型モジュールにおいて実行可能である。機能の各種特徴又は素子を別個のモジュールとして個別的に記載される場合があるが，これらの特徴及び機能を１つ又は複数の共通ソフトウェア及びハードウェア素子間で共有することができ，かかる記載は当該特徴及び機能を実行するために別個のソフトウェア又はハードウェア素子を要求し，又は示唆するものでないことは，言うまでもない。

【0089】

アプリケーションの部品又はモジュールが全体的又は部分的にソフトウェアを使用するものである場合，一実施形態において，これらのソフトウェア素子は，関連して記載された機能を実行するためのコンピュータ又はプロセッサモジュールと協働するように構成することができる。そのようなコンピュータモジュールの一例を図１３に示す。各種の実施形態は，この例示的なコンピュータモジュール1000との関連で記載されるものである。他のコンピュータモジュール又はアーキテクチャを使用してアプリケーションを実行する態様は，本明細書を読了した当業者は明らかなことである。

【0090】

図１３を参照すれば，コンピュータモジュール1000とは，例えば，デスクトップ，ラップトップ，ノートブック及びタブレット型コンピュータ装置，ハンドヘルドコンピュータ装置（タブレット，ＰＤＡ，スマートフォン，セルフォン，パームトップ等），メインフレーム，スーパーコンピュータ，ワークステーション又はサーバ，或いは所与のアプリケーション又は環境について望ましい，又は適切な任意形式の特定用途用又は汎用コンピュータ装置におけるコンピュータ機能又はプロセッサ機能を指す。コンピュータモジュール1000とは，所定の装置においてエンベッドされ，又は利用可能とされたコンピュータ機能も指す。例えば，コンピュータモジュールは，他の電子機器，例えばデジタルカメラ，ナビゲーションシステム，セルフォン，ポータブルコンピュータ装置，モデム，ルータ，ＷＡＰ，ターミナル及び何らかの形式のプロセッサ能力を有するその他の電子機器で構成することもできる。

【0091】

コンピュータモジュール1000は，例えば，1つ又は複数のプロセッサ，コントローラ，制御モジュール又は他のプロセッサ，例えばプロセッサ1004を含むことができる。プロセッサ1004は，汎用又は特定アプリケーション用のプロセッサエンジン，例えばマイクロプロセッサ，コントローラ又はその他の制御ロジックで構成することができる。図示の実施形態において，プロセッサ1004はバス1002に接続されているが，制御モジュール1000における他の部品との相互作用を容易とし，又は外部との通信のために任意の通信媒体を使用することもできる。

【0092】

コンピュータモジュール1000は，本明細書において単にメインメモリ1008と称される１つ又は複数のメモリーモジュールを含むことができる。例えば，好適には，ランダムアクセスメモリー（ＲＡＭ）又はその他のダイナミックメモリーを使用して，プロセッサ1004において実行される情報及び命令を保存することができる。メインメモリー1008は，プロセッサ1004により実行すべき命令を実行している間に一時的変数又は中間的情報を保存するために使用することもできる。同様に，コンピュータモジュール1000も，バス1002に接続されてプロセッサ1004用の情報及び命令を保存するための読み出し専用メモリー（ＲＯＭ）又はその他の静的保存デバイスを含むことができる。

【0093】

コンピュータモジュール1000は，１つ又は複数の各種形式の情報保存機構1010を含み，該機構が，例えば，メディアドライブ1012及び保存ユニットインターフェース1020を含む構成とすることができる。メディアドライブ1012は，固定型又は着脱型保存媒体1014をサポートするドライブ又は他の機構を含むことができる。例えば，ハードディスクドライブ，ソリッドステートドライブ，磁気テープドライブ，光ディスクドライブ，ＣＤ又はＤＶＤドライブ（Ｒ又はＲＷ），或いは他の固定型又は着脱型メディアドライブを設けても良い。即ち，保存媒体1014は，例えば，メディアドライブ1012により読み取り，書き込み又はアクセス可能なハードディスク，ソリッドステートドライブ，磁気テープ，カートリッジ，光ディスク，ＣＤ，ＤＶＤ，ブルーレイ，或いは他の固定型又は着脱型メディアを含むことができる。これらの何れも，保存媒体1014が，コンピュータソフトウェア又はデータを保存したコンピュータ可用保存媒体を含み得ることを示すものである。

【0094】

代替的な実施形態において，情報保存機構1010は，コンピュータモジュール1000にコンピュータプログラム，他の命令，又は他のデータのローディングを行うための他の類似手段を含むことができる。このような手段には，例えば，固定型又は着脱型の保存ユニット1022及びインターフェース1020が含まれる。このような保存ユニット1022及びインターフェース1020の例には，ソフトウェア及びデータを保存ユニット1022からコンピュータモジュール1000に転送可能とするプログラムカートリッジ及びカートリッジインターフェース，着脱型メモリー（例えば，フラッシュメモリー又は着脱型メモリーモジュール）及びメモリースロット，ＰＣＭＣＩＡスロット及びカード，並びにその他の固定型又は着脱型の保存ユニット1022及びインターフェースが含まれる。

【0095】

コンピュータモジュール1000は，通信インターフェース1024を含むことができる。通信インターフェース1024は，ソフトウェア及びデータをコンピュータモジュール1000と外部デバイスとの間で転送可能とするように使用することができる。通信インターフェース1024には，モデム又はソフトモデム，ネットワークインターフェース（例えば，イーサネット，ネットワークインターフェースカード，ＷｉＭｅｄｉａ，ＩＥＥＥ８０２．ＸＸ，又は他のインターフェース），通信ポート（例えば，ＵＳＢポート，赤外線ポート，ＲＳ２３２ポート，ブルートゥース（登録商標）インターフェース，或いはその他のポート）が含まれる。通信インターフェース1024を介して転送されるソフトウェア及びデータは，典型的には，電子信号，電磁信号（光学的信号も含む），又は所定の通信インターフェース1024により交換可能なその他の信号により搬送することができる。これらの信号は，チャンネル1028を介して通信インターフェース1024に供給することができる。このチャンネル1028は，信号を搬送することができ，有線又はワイヤレスの通信媒体を使用して構成することができる。幾つかの例において，チャンネルは，例えば，電話回線，セルリンク，ＲＦリンク，オプティカルリンク，ネットワークインターフェース，ＬＡＮ又はＷＡＮ，或いはその他の有線又はワイヤレス通信チャンネルを含むことができる。

【0096】

本明細書において，「コンピュータ可読媒体」，「コンピュータ可用媒体」及び「コンピュータプログラム媒体」とは，一般的に，揮発性又は不揮発性の非一時的媒体を指す。これには，例えば，メモリー1008，記憶ユニット1022及び媒体1014が含まれる。これらの，及びその他の各種形態のコンピュータプログラム媒体及びコンピュータ可用媒体は，１つ又は複数の命令における１つ又は複数の手順をプロセッサ装置まで担持して実行させるために使用することができる。媒体上に保存された命令は，一般的に，「コンピュータプログラムコード」又は「コンピュータ製品」（コンピュータプログラム又はその他のグループとしてグループ化されることがある。）と称される。実行すると，このような命令は，コンピュータモジュール1000により本明細書に開示する発明の機能又は特徴を発揮させる。

【0097】

以上においては，本発明を各種の実施形態及び実施例について記載したが，１つ又は複数の個別的な実施形態における特徴，態様及び機能は，これらについて記載した特定の実施形態にその可用性が限定されるものではなく，単独で，又は組合わせて，１つ又は複数の他の実施形態にも適用可能であり，当該他の実施形態が記載されているか否かを問わず，また，当該特徴が，記載された実施形態の一部として提示されているか否かを問うものではない。そして，本発明の保護範囲は上述した例示的な実施形態により限定されるものではない。

【0098】

上述した概念の全ての組み合わせ（互いに排他的でない限り）は，本願において開示された発明の一部と解すべきである。特に，特許請求の範囲に記載された主題の全ての組み合わせは，本願において開示された発明の一部と解すべきである。

【0099】

本明細書及び特許請求の範囲において，「実質的に」及び「約」とは，例えば処理に際しての変動に起因する僅かなバラツキを含ませる意図で使用する用語である。これらの用語は，例えば，±５％以内，±２％以内，±１％以内，±０．５％以内，±０．２％以内，±０．１％以内又は±０．０５％以内を指すことがある。.

【0100】

本明細書において，「第１」，「第２」，「第３」等は，単に別個の客体を指すために使用する用語であり，特に明記しない限り，経時的な順序を含意するものでない。

【0101】

本願における用語及び語句は，特に明記しない限り，開放的であって閉鎖的ではない。例えば，「含む」とは，「含むが，限定されるものではない」ことを意味する。「例」とは，論じている客体の例示列挙を意味し，限定列挙ではない。「ある」又は「１つの」とは，「少なくとも１つ」或いは「１つ又は複数」を意味する。また，「従来の」，「伝統的な」，「通常の」，「標準的な」，「既知の」等の用語は，記載される客体を所定の時点におけるものに限定する趣旨ではなく，現時点において，或いは将来の時点において公知であって利用可能な，従来の，伝統的な，通常の，又は標準的な客体を含むものと解すべきである。同様に，当業者にとって明白な，又は既知の技術に言及する場合，そのような技術は，現時点において，或いは将来の時点において当業者にとって明白又は公知となる技術を含むものである。

【0102】

「１つ又は複数の」，「少なくとも」又は「限定されるものではない」等の拡張的語句は，そのような語句がない場合に想定される事項のみに狭義解釈すべきでないことを意味する。「モジュール」とは，その一部として記載された構成部品又は機能の全てが共通パッケージとして構成されることを意味するものではない。実際，モジュールにおける各種構成部品は，制御ロジックであるか否か，又はその他の構成部品であるか否かを問わず，単一パッケージとして，又は個別に保守できるものであり，複数のグループ又はパッケージに，或いは複数の位置に対して横断的に組み合わせ得るものである。

【0103】

更に，本願において開示される各種実施形態は，例示的なブロック図やフローチャート等に関連して記載したものである。本明細書を読了した当業者には明らかであるが，図示の実施形態及び各種変形例は，図示例に限定されずに実施し得るものである。例えば，ブロック線図及びその関連記載は，特定の構造又は形態を必須とするものではない。

【0104】

以上，本発明の各種実施形態について記載したが，これは単に例示としての提示に過ぎず，限定的なものではない。同様に，各種の線図は構造形態を例示するものであり，本願において含むことのできる特徴及び機能の理解に資するものとして提示するものである。本願の開示は，図示例の構造形態に限定されるものではなく，所望の機能は，各種の変形的な構造又は形態によって具現することができる。実際，代替となり得る機能的，論理的又は物理的な区分又は形態を，本願において開示する発明の機能を発揮させるために採択し得ることは，当業者において明白である。また，本願において開示する以外の複数の異なる構成モジュールを各種区分に適用することができる。更に，フローチャート，操作関連の記載，又は方法関連の請求項に関して，ステップを提示した順序は，特に明記しない限り，言及された機能を同一の順序で実施する必要があることを意味するものではない。

【図1】

【図2A】

【図2B】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9A】

【図9B】

【図9C】

【図10】

【図11】

【図12】

【図13】