知財求人 - 知財ポータルサイト「IP Force」
特表2024-506531医薬品パッケージングから余分なコンテントを除去し、該医薬品パッケージング中のコンテンツの検証を容易にする為の方法、システム及びコンピュータプログラム製品
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公表特許公報(A)
(11)【公表番号】
(43)【公表日】2024-02-14
(54)【発明の名称】医薬品パッケージングから余分なコンテントを除去し、該医薬品パッケージング中のコンテンツの検証を容易にする為の方法、システム及びコンピュータプログラム製品
(51)【国際特許分類】
G06T 5/60 20240101AFI20240206BHJP
A61J 1/00 20230101ALI20240206BHJP
G06T 5/70 20240101ALI20240206BHJP
G06T 5/92 20240101ALI20240206BHJP
G06T 5/77 20240101ALI20240206BHJP
G06T 7/00 20170101ALI20240206BHJP
G06V 10/82 20220101ALI20240206BHJP
【ＦＩ】
G06T5/60
A61J1/00 Z
G06T5/70
G06T5/92
G06T5/77
G06T7/00 350C
G06V10/82
G06T7/00 610
【審査請求】有
【予備審査請求】未請求
(21)【出願番号】P 2023545301
(86)(22)【出願日】2022-01-28
(85)【翻訳文提出日】2023-09-22
(86)【国際出願番号】 US2022014251
(87)【国際公開番号】W WO2022165135
(87)【国際公開日】2022-08-04
(31)【優先権主張番号】63/143,400
(32)【優先日】2021-01-29
(33)【優先権主張国・地域又は機関】US
(81)【指定国・地域】
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＰＹＴＨＯＮ
２．ＪＡＶＡ
３．ＶＩＳＵＡＬ ＢＡＳＩＣ
(71)【出願人】
【識別番号】523282659
【氏名又は名称】パラタ システムズ，エルエルシー
(74)【代理人】
【識別番号】100118599
【弁理士】
【氏名又は名称】村上 博司
(74)【代理人】
【識別番号】100160738
【弁理士】
【氏名又は名称】加藤 由加里
(72)【発明者】
【氏名】ブゲイ，ジョン アルフレッド
(72)【発明者】
【氏名】ジェンキンス，トッド マーチン
(72)【発明者】
【氏名】ルイス，ラッセル エフ．
(72)【発明者】
【氏名】マーチン，コーリー スペンサー
(72)【発明者】
【氏名】レイ，アビシェーク
(72)【発明者】
【氏名】スワンソン，アーサー エフ．
(72)【発明者】
【氏名】シュ，ロンカイ
【テーマコード（参考）】
4C047
5B057
5L096
【Ｆターム（参考）】
4C047AA05
4C047AA24
4C047CC15
4C047CC16
5B057AA01
5B057CA01
5B057CA08
5B057CA12
5B057CA16
5B057CB01
5B057CB08
5B057CB12
5B057CB16
5B057CD05
5B057CE02
5B057CE04
5B057CE05
5B057CE11
5B057DA04
5B057DB02
5B057DB06
5B057DB09
5B057DC40
5L096AA02
5L096AA06
5L096BA03
5L096EA03
5L096EA05
5L096EA06
5L096EA43
5L096FA04
5L096FA05
5L096FA16
5L096FA34
5L096FA52
5L096GA51
5L096HA11
5L096KA04
(57)【要約】
方法は、１以上の医薬品を含む医薬品パッケージの画像を受信すること、ここで、該画像は、該医薬品パッケージの表面上に表示されたラベルコンテントを含む；該医薬品パッケージの該表面の該ラベルコンテントを、人工知能エンジンを使用して検出すること；及び、該表面から該ラベルコンテントが除去された該医薬品パッケージの修正された画像を生成することを含む。
【選択図】図１
【選択図】図１
【特許請求の範囲】
【請求項1】
１以上の医薬品を含む医薬品パッケージの画像を受信すること、ここで、該画像は、前記医薬品パッケージの表面上に表示されたラベルコンテントを含む；前記医薬品パッケージの前記表面の前記ラベルコンテントを、人工知能エンジンを使用して検出すること；及び、
前記表面から前記ラベルコンテントが除去された前記医薬品パッケージの修正された画像を生成すること
を含む、方法。
【請求項2】
前記ラベルコンテントが、商業マーケティング情報、患者識別情報、又はパーソナルヘルスケア情報を含む、請求項１に記載の方法。
【請求項3】
前記商業マーケティング情報がロゴ又はビジネス名を含み；前記患者識別情報が、患者名、患者の電話番号、患者の住所、又は患者の識別番号を含み；及び、
前記パーソナルヘルスケア情報が、前記１以上の医薬品の名称、前記１以上の医薬品の各々の番号、前記１以上の医薬品の各々についての所定の投与時間、又は前記１以上の医薬品、処方オーダー、患者アカウント若しくは識別番号に関連付けられた１以上のバーコードを含む、請求項２に記載の方法。
【請求項4】
前記医薬品パッケージの前記画像を受信したことに応答して、前記医薬品パッケージの前記画像に対してガンマ補正を実行して、前記医薬品パッケージのガンマ補正された画像を生成すること；前記医薬品パッケージの前記ガンマ補正された画像に対してガウスぼかしノイズ除去を実行して、前記医薬品パッケージのノイズ低減された画像を生成すること；及び、
前記医薬品パッケージの前記ノイズ低減された画像に対して自動画像閾値処理を実行して、前記医薬品パッケージの前景と背景とが分離された画像を生成すること
を更に含み、
ここで、前記ラベルコンテントを、前記人工知能エンジンを使用して検出することが、
前記医薬品パッケージの前記前景と背景とが分離された画像の前記表面上の前記ラベルコンテントを、前記人工知能エンジンを使用して検出すること
を含む、
請求項１に記載の方法。
【請求項5】
前記人工知能エンジンが畳み込みニューラルネットワークである、請求項４に記載の方法。
【請求項6】
前記畳み込みニューラルネットワークが複数の畳み込み層を備えており、ここで、前記複数の畳み込み層の少なくとも一部がスキップ接続を介して互いに接続される、請求項５に記載の方法。
【請求項7】
前記人工知能エンジンが第１の人工知能エンジンであり、及び前記修正された画像が第１の修正された画像であり、前記方法が、
前記１以上の医薬品についての注文情報と前記医薬品パッケージについての識別子とを受信すること；
前記第１の修正された画像内の前記１以上の医薬品の個々の医薬品を、第２の人工知能エンジンを使用して検出すること；並びに、
前記１以上の医薬品の前記個々の医薬品を区別し且つ前記１以上の医薬品を前記注文情報及び前記医薬品パッケージについての前記識別子に関連付けるところの指標を含む、前記医薬品パッケージの第２の修正された画像を生成すること
を更に含む、請求項１に記載の方法。
【請求項8】
前記１以上の医薬品の前記個々の医薬品を区別する前記指標が、１以上のバウンディングボックスを含む、請求項７に記載の方法。
【請求項9】
前記注文情報が、前記医薬品パッケージ内の前記１以上の医薬品についての名称を含み、前記方法が、
第２の修正された画像内の前記１以上の医薬品の少なくとも一部を、第３の人工知能エンジンを使用して、前記１以上の医薬品についての前記名称に基づいて識別すること
を更に含み、
ここで、前記名称が、参照データベース内の医薬品属性に関連付けられている、
請求項７に記載の方法。
【請求項10】
前記１以上の医薬品の前記少なくとも一部が、前記１以上の医薬品の断片化されたものを含む、請求項９に記載の方法。
【請求項11】
前記方法が、前記１以上の医薬品の一部を、前記１以上の医薬品に対する損傷に起因する破片として、第３の人工知能エンジンを使用して識別すること
を更に含む、請求項９に記載の方法。
【請求項12】
第２の修正された画像内の前記１以上の医薬品の前記少なくとも一部に、前記１以上の医薬品についての前記名称を注釈付けすることを更に含む、請求項９に記載の方法。
【請求項13】
前記名称が注釈付けされていない前記１以上の医薬品のいずれかに仮の名称を注釈付けすることを更に含む、請求項１２に記載の方法。
【請求項14】
前記名称が第１の名称であり、及び前記注文情報が前記医薬品パッケージ内の前記１以上の医薬品についてのナショナル・ドラッグ・コード（NDC）を含み、前記方法が、
前記第１の名称で注釈付けされている前記１以上の医薬品の前記少なくとも一部に関連付けられていないNDCを、医薬品参照データと照合すること；及び、
前記医薬品参照データと一致する関連付けられたNDCを有する名称で注釈付けされていない１以上の医薬品のいずれかに、前記医薬品参照データに基づく第２の名称を注釈付けすること
を更に含む、請求項１２に記載の方法。
【請求項15】
前記医薬品参照データが、医薬品の形状、医薬品の色、医薬品のエッチング、医薬品の刻印、医薬品の重量、及び／又は医薬品のラベルを含む、請求項１４に記載の方法。
【請求項16】
システムであって、該システムが、プロセッサ；及び、
前記プロセッサに接続されたメモリ
を備えており、ここで、該メモリは、命令を実行する為の前記プロセッサによって実行可能な、前記メモリ内に具現化されたコンピュータ可読プログラムコードを含み、
前記命令が、
１以上の医薬品を含む医薬品パッケージの画像を受信すること、ここで、該画像は、前記医薬品パッケージの表面上に表示されたラベルコンテントを含む；
前記医薬品パッケージの前記表面の前記ラベルコンテントを、人工知能エンジンを使用して検出すること；及び、
前記表面から前記ラベルコンテントが除去された前記医薬品パッケージの修正された画像を生成すること
を含む、
前記システム。
【請求項17】
前記命令が、前記医薬品パッケージの前記画像を受信したことに応答して、前記医薬品パッケージの前記画像に対してガンマ補正を実行して、前記医薬品パッケージのガンマ補正された画像を生成すること；
前記医薬品パッケージの前記ガンマ補正された画像に対してガウスぼかしノイズ除去を実行して、前記医薬品パッケージのノイズ低減された画像を生成すること；及び、
前記医薬品パッケージの前記ノイズ低減された画像に対して自動画像閾値処理を実行して、前記医薬品パッケージの前景と背景とが分離された画像を生成すること
を更に含み、
ここで、前記ラベルコンテントを、前記人工知能エンジンを使用して検出することが、
前記医薬品パッケージの前記前景と背景とが分離された画像の前記表面上の前記ラベルコンテントを、前記人工知能エンジンを使用して検出すること
を含む、
請求項１６に記載のシステム。
【請求項18】
前記人工知能エンジンが畳み込みニューラルネットワークである、請求項１７に記載のシステム。
【請求項19】
コンピュータプログラム製品であって、該コンピュータプログラム製品が、非一時的コンピュータ可読ストレージ媒体
を備えており、ここで、該非一時的コンピュータ可読ストレージ媒体は、命令を実行する為の前記プロセッサによって実行可能な、該媒体内に具現化されたコンピュータ可読プログラムコードを含み、
前記命令が、
１以上の医薬品を含む医薬品パッケージの画像を受信すること、ここで、該画像は、前記医薬品パッケージの表面上に表示されたラベルコンテントを含む；
前記医薬品パッケージの前記表面の前記ラベルコンテントを、人工知能エンジンを使用して検出すること；及び、
前記表面から前記ラベルコンテントが除去された前記医薬品パッケージの修正された画像を生成すること
を含む、
前記コンピュータプログラム製品。
【請求項20】
前記命令が、前記医薬品パッケージの前記画像を受信したことに応答して、前記医薬品パッケージの前記画像に対してガンマ補正を実行して、前記医薬品パッケージのガンマ補正された画像を生成すること；
前記医薬品パッケージの前記ガンマ補正された画像に対してガウスぼかしノイズ除去を実行して、前記医薬品パッケージのノイズ低減された画像を生成すること；及び、
前記医薬品パッケージの前記ノイズ低減された画像に対して自動画像閾値処理を実行して、前記医薬品パッケージの前景と背景とが分離された画像を生成すること
を更に含み、
ここで、前記ラベルコンテントを、前記人工知能エンジンを使用して検出することが、
前記医薬品パッケージの前記前景と背景とが分離された画像の前記表面上の前記ラベルコンテントを、前記人工知能エンジンを使用して検出すること
を含む、
請求項１９に記載のコンピュータプログラム製品。
【発明の詳細な説明】
【技術分野】
【0001】
関連出願
本出願は、2021年1月29日に出願された米国仮出願第63/143,400号の優先権及びその利益を主張するものであり、その開示は参照によってその全体が本明細書内に組み込まれる。
本出願は、2021年1月29日に出願された米国仮出願第63/143,400号の優先権及びその利益を主張するものであり、その開示は参照によってその全体が本明細書内に組み込まれる。
【背景技術】
【0002】
本開示は、一般的に、医薬品のパッケージングに関し、特に、該医薬品のパッケージングのコンテンツの検証を容易にする為に、医薬品パッケージの表面から余分なコンテントを除去する為の方法、システム及びコンピュータプログラム製品に関する。
【0003】
医薬品パッケージングシステムは、施設、例えば、薬局、病院、長期介護施設等、において、処方箋を満たす為に医薬品を調剤する為に使用されうる。これらの医薬品パッケージングシステムは、様々な容器タイプ、例えば、パウチ、バイアル、ボトル、ブリスターカード、ストリップパッケージングを包含するがこれらに限定されない上記の様々な容器タイプで医薬品を包装するように設計されたシステムを備えうる。ストリップパッケージングは、特定の日付、場合によっては特定の時間、に投与する為に、薬剤が個々のパウチ内に包装されるパッケージングの一種である。典型的に、個々のパウチは取り外し可能に結合されており、ロール状で提供される場合が多い。該パウチは必要に応じて該ロールから切り離されることができる。
【0004】
幾つかの種類の医薬品パッケージ、例えば、パウチ及びブリスターカード、には例えば、その上にパーソナルヘルス情報（PHI：Personal Health Information）、製造者情報、例えばロゴ、名前、連絡先情報等、及び／又は該医薬品パッケージのコンテントに関する他の詳細、例えば、医薬品の数、医薬品名称、投与時間、投与強度（dosing strength）、バーコード等、のコンテント、が印刷されている場合がある。該医薬品パッケージの該表面上のそのようなコンテントは、該医薬品パッケージの画像化を通じて該医薬品パッケージのコンテントを検証することをより困難にする場合がある。
【発明の概要】
【課題を解決するための手段】
【0005】
本発明の概念の幾つかの実施態様において、方法は、１以上の医薬品を含む医薬品パッケージの画像を受信すること、ここで、該画像は、該医薬品パッケージの表面上に表示されたラベルコンテントを含む；該医薬品パッケージの該表面の該ラベルコンテントを、人工知能エンジンを使用して検出すること；及び、該表面から該ラベルコンテントが除去された該医薬品パッケージの修正された画像を生成することを含む。
【0006】
他の実施態様において、該ラベルコンテントが、商業マーケティング情報、患者識別情報、又はパーソナルヘルスケア情報を含む。
【0007】
更に他の実施態様において、該商業マーケティング情報がロゴ又はビジネス名を含み；該患者識別情報が、患者名、患者の電話番号、患者の住所、又は患者の識別番号を含み；及び、該パーソナルヘルスケア情報が、該１以上の医薬品の名称、該１以上の医薬品の各々の番号、該１以上の医薬品の各々についての所定の投与時間、又は該１以上の医薬品、処方オーダー、患者アカウント若しくは識別番号に関連付けられた１以上のバーコードを含む。
【0008】
更に他の実施態様において、該方法は、該医薬品パッケージの該画像を受信したことに応答して、該医薬品パッケージの該画像に対してガンマ補正を実行して、該医薬品パッケージのガンマ補正された画像を生成すること；該医薬品パッケージの該ガンマ補正された画像に対してガウスぼかしノイズ除去を実行して、該医薬品パッケージのノイズ低減された画像を生成すること；及び、該医薬品パッケージの該ノイズ低減された画像に対して自動画像閾値処理を実行して、該医薬品パッケージの前景と背景とが分離された画像を生成することを更に含む。該ラベルコンテントを、該人工知能エンジンを使用して検出することが、該医薬品パッケージの該前景と背景とが分離された画像の該表面上の該ラベルコンテントを、該人工知能エンジンを使用して検出することを含む。
【0009】
更に他の実施態様において、該人工知能エンジンは畳み込みニューラルネットワークである。
【0010】
更に他の実施態様において、該畳み込みニューラルネットワークが複数の畳み込み層を備えており、ここで、該複数の畳み込み層の少なくとも一部がスキップ接続を介して互いに接続される。
【0011】
更に他の実施態様において、該人工知能エンジンが第１の人工知能エンジンであり、及び該修正された画像が第１の修正された画像である。該方法が、該１以上の医薬品についての注文情報と該医薬品パッケージについての識別子とを受信すること；該第１の修正された画像内の該１以上の医薬品の個々の医薬品を、第２の人工知能エンジンを使用して検出すること；並びに、該１以上の医薬品の該個々の医薬品を区別し且つ該１以上の医薬品を該注文情報及び該医薬品パッケージについての該識別子に関連付けるところの指標を含む、該医薬品パッケージの第２の修正された画像を生成することを更に含む。
【0012】
更に他の実施態様において、該１以上の医薬品の該個々の医薬品を区別する該指標が、１以上のバウンディングボックスを含む。
【0013】
更に他の実施態様において、該注文情報が、該医薬品パッケージ内の該１以上の医薬品についての名称を含む。該方法が、該第２の修正された画像内の該１以上の医薬品の少なくとも一部を、第３の人工知能エンジンを使用して、該１以上の医薬品についての該名称に基づいて識別することを更に含む。該名称が、参照データベース内の医薬品属性に関連付けられている。
【0014】
更に他の実施態様において、該１以上の医薬品の該少なくとも一部が、該１以上の医薬品の断片化されたものを含む。
【0015】
更に他の実施態様において、該方法が、該１以上の医薬品の一部を、該１以上の医薬品に対する損傷に起因する破片として、第３の人工知能エンジンを使用して識別することを更に含む。
【0016】
更に他の実施態様において、該方法が、該第２の修正された画像内の該１以上の医薬品の該少なくとも一部に、該１以上の医薬品についての該名称を注釈付けすることを更に含む。
【0017】
更に他の実施態様において、該方法が、該名称が注釈付けされていない該１以上の医薬品のいずれかに医薬品の未知のラベルを注釈付けすることを更に含む。
【0018】
更に他の実施態様において、該名称が第１の名称であり、及び該注文情報が該医薬品パッケージ内の該１以上の医薬品についてのナショナル・ドラッグ・コード（NDC：National Drug Code）を含む。該方法が、該第１の名称で注釈付けされている該１以上の医薬品の該少なくとも一部に関連付けられていないNDCを、医薬品参照データと照合すること；及び、該医薬品参照データと一致する関連付けられたNDCを有する名称で注釈付けされていない１以上の医薬品のいずれかに、医薬品参照データに基づく第２の名称を注釈付けすることを更に含む。
【0019】
更に他の実施態様において、該医薬品参照データが、医薬品の形状、医薬品の色、医薬品のエッチング、医薬品の刻印、医薬品の重量、及び／又は医薬品のラベルを含む。
【0020】
本発明の概念の幾つかの実施態様において、システムが、プロセッサ；及び、該プロセッサに接続されたメモリを備えており、ここで、該メモリは、命令を実行する為の該プロセッサによって実行可能な、該メモリ内に具現化されたコンピュータ可読プログラムコードを含み、該命令が、１以上の医薬品を含む医薬品パッケージの画像を受信すること、ここで、該画像は、該医薬品パッケージの表面上に表示されたラベルコンテントを含む；該医薬品パッケージの該表面の該ラベルコンテントを、人工知能エンジンを使用して検出すること；及び、該表面から該ラベルコンテントが除去された該医薬品パッケージの修正された画像を生成することを含む。
【0021】
更なる実施態様において、該命令が、該医薬品パッケージの該画像を受信したことに応答して、該医薬品パッケージの該画像に対してガンマ補正を実行して、該医薬品パッケージのガンマ補正された画像を生成すること；該医薬品パッケージの該ガンマ補正された画像に対してガウスぼかしノイズ除去を実行して、該医薬品パッケージのノイズ低減された画像を生成すること；及び、該医薬品パッケージの該ノイズ低減された画像に対して自動画像閾値処理を実行して、該医薬品パッケージの前景と背景とが分離された画像を生成することを更に含む。該ラベルコンテントを、該人工知能エンジンを使用して検出することが、該医薬品パッケージの該前景と背景とが分離された画像の該表面上の該ラベルコンテントを、該人工知能エンジンを使用して検出することを含む。
【0022】
なお更なる実施態様において、該人工知能エンジンは畳み込みニューラルネットワークである。
【0023】
本発明の概念の幾つかの実施態様において、コンピュータプログラム製品が、非一時的コンピュータ可読ストレージ媒体を備えており、ここで、該非一時的コンピュータ可読ストレージ媒体は、命令を実行する為の該プロセッサによって実行可能な、該媒体内に具現化されたコンピュータ可読プログラムコードを含む。該命令が、１以上の医薬品を含む医薬品パッケージの画像を受信すること、ここで、該画像は、該医薬品パッケージの表面上に表示されたラベルコンテントを含む；該医薬品パッケージの該表面の該ラベルコンテントを、人工知能エンジンを使用して検出すること；及び、該表面から該ラベルコンテントが除去された該医薬品パッケージの修正された画像を生成することを含む。
【0024】
他の実施態様において、該命令が、該医薬品パッケージの該画像を受信したことに応答して、該医薬品パッケージの該画像に対してガンマ補正を実行して、該医薬品パッケージのガンマ補正された画像を生成すること；該医薬品パッケージの該ガンマ補正された画像に対してガウスぼかしノイズ除去を実行して、該医薬品パッケージのノイズ低減された画像を生成すること；及び、該医薬品パッケージの該ノイズ低減された画像に対して自動画像閾値処理を実行して、該医薬品パッケージの前景と背景とが分離された画像を生成することを更に含む。該ラベルコンテントを、該人工知能エンジンを使用して検出することが、該医薬品パッケージの該前景と背景とが分離された画像の該表面上の該ラベルコンテントを、該人工知能エンジンを使用して検出することを含む。
【0025】
本発明の概念の実施態様に従う、他の方法、システム、製造品及び／又はコンピュータプログラム製品は、添付の図面及び以下の詳細な説明を検討することで、当業者に明らかであるか又は明らかになるであろう。そのような追加のシステム、方法、製造品及び／又はコンピュータプログラム製品は全て、本明細書内に含まれ、本発明の主題の範囲内にあり、添付の特許請求の範囲によって保護されることが意図される。
【0026】
実施態様の他の特徴は、添付の図面と併せて読む場合に、その特定の実施態様の以下の発明の詳細な説明からより容易に理解されるであろう。
【図面の簡単な説明】
【0027】
【発明を実施するための形態】
【0028】
以下の発明の詳細な説明において、本発明の概念の実施態様を十分に理解する為に、多数の具体的な詳細が記載されている。しかしながら、本発明は、それらの具体的な詳細無しに実施されうることが当業者によって理解されるであろう。場合によっては、本発明の概念を不明瞭にしないように、周知の方法、手順、コンポーネント及び回路は詳細に記載されていない。本明細書において開示された全ての実施態様は、別個に実施すること、又は任意の方法及び／又は組み合わせで組み合わせられることが意図される。１つの実施態様に関して記載されている観点は、それに関して特に記載されていないが、異なる実施態様に組み込まれてもよい。すなわち、全ての実施態様及び／又は任意の実施態様の特徴は、任意の方法及び／又は組み合わせにおいて組み合わせられることができる。
【0029】
本明細書において使用される場合に、語「データ処理設備」は、ハードウェア要素、ファームウェアコンポーネント、及び／又はソフトウェアコンポーネントを包含するが、これらに限定されない。データ処理システムは、１以上のデータ処理設備を備えて構成されてもよい。
【0030】
本明細書において使用される場合に、語「医薬品パッケージングシステム」は、あらゆるタイプの医薬製剤調剤システムを云い、該医薬品調剤システムは、バイアル、ボトル、容器、パウチ、ブリスターカード等に医薬品を充填する自動化システム；バイアル、ボトル、容器、パウチ、ブリスターカード等に医薬品を充填する半自動化システム；及び医薬品パッケージに医薬品を充填する自動化システムと半自動化システムとの任意の組み合わせを包含するが、これらに限定されない。医薬品パッケージングシステムはまた、医薬製剤代替品、例えば栄養補助食品及び／又はバイオ医薬品、の為のパッケージングシステムを包含する。
【0031】
本明細書において使用される場合に、語「医薬製剤」（pharmaceutical）及び語「薬」（medication）は、互換可能であり、ヒト又は動物のいずれかの患者に処方される医薬（medicament）を云う。医薬品又は薬は、ピル剤、カプセル剤、タブレット剤等を包含するがこれらに限定されない様々な方法で具現化されうる。
【0032】
語「医薬品」（drug product）は、自動化及び半自動化の医薬品パッケージングシステムによってバイアル、ボトル、容器、パウチ、ブリスターカード等に包装することができるあらゆるタイプの医薬品を云い、これは、ピル、カプセル、タブレット、カプレット、ゲルキャップ、トローチ等を包含するが、これらに限定されない。医薬品はまた、医薬製剤代替品、例えば、栄養補助食品及び／又は生物学的製剤、を云う。医薬品パッケージングシステム、例えば、パッケージング注文を満たす為の管理技術を包含する上記の医薬品パッケージングシステム、の例は、米国特許第１0,492,987号に記載されており、その開示は参照によって本明細書内に組み込まれる。
【0033】
語「医薬品パッケージ」は、医薬品、例えば、バイアル、ボトル、容器、パウチ、ブリスターカード等を包含する上記の医薬品、を保持することができるあらゆるタイプの物体を云う。
【0034】
本発明の概念の実施態様は、１以上の機械学習エンジン及び人工知能（AI）エンジンを備えている医薬品パッケージング解析エンジンの文脈において本明細書に記載されている。本発明の概念の実施態様は、該医薬品パッケージング解析エンジンの特定の実装に限定されず、様々なタイプのAIシステム、例えば、多層ニューラルネットワーク、ディープラーニングシステム、自然言語処理システム、及び／又はコンピュータビジョンシステムを包含するがこれらに限定されない上記の様々なタイプのAIシステム、が使用されうることが理解されるであろう。その上、該多層ニューラルネットワークは、人工ニューロン又はノードを備えている多層人工ニューラルネットワークであり、実際の生物学的ニューロンを備えている生物学的ニューラルネットワークを包含しないことが理解されるであろう。本発明の概念の実施態様は、複数のAIシステムを用いて実装されてもよく、又は様々な機能をより少ない若しくは単一のAIシステムと一緒にすることによって実装されてもよい。
【0035】
本発明の概念の幾つかの実施態様は、医薬品パッケージ、例えばパウチ又はブリスターカード、のコンテンツを検証するときに、該医薬品パッケージの画像解析を実行すると、該医薬品パッケージの表面上のラベルコンテントがその中に含まれている医薬品を不明瞭にしうるという認識に由来する。本発明の概念の実施態様は、医薬品パッケージの表面上のラベルコンテントを、AIエンジンを使用して検出し、該ラベルコンテントが除去された医薬品パッケージの修正された画像を生成しうるAI支援医薬品パッケージ解析システムを提供する。該ラベルコンテントは、例えば、商業マーケティング情報、患者識別情報、パーソナルヘルスケア情報（PHI：personal healthcare information）を包含しうる。該医薬品パッケージの該表面から該ラベルコンテントが除去された状態で、該パッケージ中に含まれている医薬品の１以上の個々の医薬品を検出する為にAIシステムが使用され、そして、該医薬品パッケージ中に含まれている医薬品の個々の医薬品を区別する指標、例えば境界ボックス、を含む第2の修正された画像が生成される。幾つかの実施態様において、破片であるように断片化され、又は破損さえしている医薬品は、該指標によって区別されうる。次に、AIシステムが、該医薬品パッケージ中に含まれている医薬品の１以上を特定の医薬品の名称で識別する為に使用されうる。幾つかの実施態様において、医薬品全体、断片化された医薬品、及び／又は破片は、該医薬品パッケージのコンテンツのナレッジ（knowledge）及び該医薬品パッケージ中に含まれている医薬品の他のものの成功裡の識別と共に、該医薬品の属性、例えば、形状、色、１以上のエッチング、１以上の刻印、重量、及び／又は１以上のラベル、に基づいて、該AIシステムを使用して名称によって識別されうる。識別不可能な医薬品は、該医薬品パッケージ中に含まれている医薬品のナショナル・ドラッグ・コード（NDC：National Drug Code）又は薬物識別番号（DIN：Drug Identification Numbers）を、医薬品の形状、色、１以上のエッチング、１以上の刻印、重量及び／又は１以上のラベルの情報を含みうる医薬品参照データと照合することを通じて更に解析されうる。本明細書において使用される場合に、NDCは、NDC情報とDIN情報の両方を表す為に使用されうる。一致が得られた場合に、これらの医薬品は、該医薬品参照データ及びNDCに基づく名称で注釈付けされうる。本発明の概念の実施態様はまた、使用単位パッケージ（unit of use packages）（すなわち、各パッケージは単一医薬品の単一用量を含む）の充填及び検証の為に使用されうる。使用単位パッケージは、患者固有のものであってもよいが、例えば１回限り又は緊急時の使用の為に、病院又は長期ケア施設におけるフロアストックとして使用されることができるように、患者情報無しで製造されうる。これらのパウチ（又は、カード上のブリスター）の各々は、典型的な医薬品パッケージのサブセット又はわずかに異なるラベル情報を有しうる。例えば、１回使用分のパッケージは、医薬品名、用量、NDC、製造者、ロット番号、有効期限、及び／又は使用期限切れ（BUD：beyond-use-date）を有しうる。該パッケージはまた、薬局情報、又は使用単位パッケージが提供されるところの施設に関する情報を含みうる。
【0036】
図1を参照すると、本発明の概念の幾つかの実施態様に従う、AI支援医薬品パッケージ解析システムを備えている通信ネットワーク100は、図示されているように、ネットワーク140を介して接続される、薬局管理システム（PMS：pharmacy management system）又はホストシステム110、パッケージングシステムサーバ120、１以上のパッケージ解析エンジンのサーバ155、並びに１以上の医薬品パッケージングシステム130a及び130bを備えている。
【0037】
PMSシステム110は、顧客の為の処方箋を管理し且つ充填するように構成されうる。本明細書において使用される場合に、PMSシステムは、薬局において使用されうるか、又は他の用途、例えば栄養補助食品若しくは生物製剤の調剤、の為のバッチ生成システムとして一般的に使用されうる。PMSシステム110は、様々なタイプの施設、例えば、薬局、病院、長期ケア施設等、に関連付けられうる。PMSシステム又はホストシステム110は、有効な処方箋を１以上の製品パッケージングシステム130a及び130bに送信することができる任意のシステムであってもよい。パッケージングシステムサーバ120は、パッケージングシステムインタフェースモジュール135を備えていてもよく、並びに医薬品パッケージングシステム130a及び130bの動作を管理するように構成されていてもよい。例えば、パッケージングシステムサーバ120は、PMSシステム110からパッケージング注文を受信するように、及び該医薬品パッケージングシステム130a及び130bのいずれかが特定の個々の注文又は注文のバッチを包装する為に使用されるべきかを識別するように構成されうる。加えて、パッケージングシステムサーバ120は、医薬品パッケージングシステム130a及び130bの動作を管理するように構成されうる。例えば、パッケージングシステムサーバ120は、医薬品パッケージングシステム130a及び130bの各々を通じて利用可能な医薬品の在庫を管理するように、医薬品パッケージングシステム130a及び130bの１以上に割り当てられた若しくは登録された医薬品調剤キャニスタを管理するように、医薬品パッケージングシステム130a及び130bの動作状態を一般的に管理するように、及び／又はパッケージング注文、医薬品在庫、注文請求等の状態（例えば、割り当て、完了等）に関するレポートを管理するように構成されうる。ユーザ150、例えば薬剤師又は薬局技術者、は、有線接続及び／又は無線接続を介して任意の適切なコンピューティングデバイスを使用して、パッケージングシステムサーバ120と通信しうる。図1においてユーザ150が直接接続を介してパッケージングシステムサーバ120と通信している様子が示されているが、ユーザ150は１以上のネットワーク接続を介してパッケージングシステムサーバ120と通信してもよいことが理解されるであろう。ユーザ150は、医薬品パッケージングシステム130a及び130bを操作する際にパッケージングシステムサーバ120によってなされる様々な推奨を承認又は上書きする為に、パッケージングシステムサーバ120と対話しうる。ユーザ150はまた、医薬品パッケージングシステム130a及び130bについて上述されたような様々なレポートの実行を開始しうる。２つの医薬品パッケージングシステム130a及び130bのみが図1において示されているが、３以上の医薬品パッケージングシステムがパッケージングシステムサーバ120によって管理されてもよいことが理解されるであろう。
【0038】
AI支援医薬品パッケージ解析システムは、１以上のパッケージ解析エンジンのサーバ155を備えていてもよく、該１以上のパッケージ解析エンジンのサーバ155は、医薬品パッケージの画像から余分なコンテントを除去することによって該医薬品パッケージの該コンテンツの検証を容易にする為の１以上のパッケージ解析エンジンのモジュール160を備えている。１以上のパッケージ解析エンジンのサーバ155及び１以上のパッケージ解析エンジンのモジュール160は１以上のAIシステムを表してもよく、該１以上のAIシステムは、１以上の表面からラベルコンテントが除去された該医薬品パッケージの該修正された画像を生成するように、該医薬品パッケージ中に含まれている１以上の医薬品の個々の医薬品を該医薬品パッケージ画像内で検出するように、及び／又は該医薬品パッケージ画像内で検出されたこれらの医薬品を識別するように構成されうる。本発明の概念の様々な実施態様に従って、該ラベルコンテントは、該医薬品パッケージの複数の表面を包含する医薬品パッケージ上の任意の表面、例えば、バイアルの上面、底面、側面、パウチ及びブリスターパックの表裏面等、から除去されることができる。
【0039】
パッケージングシステムサーバ120／パッケージングシステムインタフェースモジュール135と、１以上のパッケージ解析エンジンのサーバ155／１以上のパッケージ解析エンジンのモジュール160との間の本明細書において記載されている機能性の分割は一例であることが理解されるであろう。本発明の概念の異なる実施態様に従って、パッケージングシステムサーバ120／パッケージングシステムインタフェースモジュール135と、１以上のパッケージ解析エンジンのサーバ155／１以上のパッケージ解析エンジンのモジュール160との間で様々な機能性及び能力が移されることができる。その上、幾つかの実施態様において、パッケージングシステムサーバ120／パッケージングシステムインタフェースモジュール135、及び１以上のパッケージ解析エンジンのサーバ155／１以上のパッケージ解析エンジンのモジュール160は、単一の論理的エンティティ及び／又は物理的エンティティとして統合されてもよい。
【0040】
ネットワーク140は、医薬品パッケージングシステム130a及び130b、PMSシステム110、並びにパッケージングシステムサーバ120を互いに接続する。ネットワーク140は、グローバルネットワーク、例えばインターネット又は他の一般的にアクセス可能なネットワーク、でありうる。ネットワーク140の様々な要素は、ワイドエリアネットワーク、ローカルエリアネットワーク、イントラネット、及び／又は他のプライベートネットワークによって相互接続されてもよく、それらは、一般公衆によってアクセス可能でなくてもよい。従って、通信ネットワーク140は、パブリックネットワークとプライベートネットワークとの組み合わせ、又は仮想プライベートネットワーク（VPN：virtual private network）を表してもよい。ネットワーク140は、無線ネットワーク若しくは有線ネットワークであってもよく、又は無線ネットワークと有線ネットワークとの両方の組み合わせであってもよい。幾つかの実施態様において、１以上のパッケージ解析エンジンのサーバ155がまた、ネットワーク140に接続されてもよい。
【0041】
幾つかの実施態様において、１以上のパッケージ解析エンジン155及び１以上のパッケージ解析エンジンのモジュール160を通じて提供されるAI支援医薬品パッケージ解析サービスは、クラウドサービスとして実装されてもよい。幾つかの実施態様において、該AI支援医薬品パッケージ解析サービスは、リプレゼンテーショナル・ステート・トランスファー・ウェブサービス（Representational State Transfer Web Service）（RESTful Web Service）として実装されてもよい。
【0042】
図1は、AI支援医薬品パッケージ解析システムを備えている例示的な通信ネットワークを示しているが、本発明の主題の実施態様は、そのような構成に限定されるものでなく、本明細書において記載されている動作を実行することができる任意の構成を包含することが意図されていることが理解されるであろう。
【0043】
上述されているように、１以上のパッケージ解析エンジンのサーバ155及び１以上のパッケージ解析エンジンのモジュール160は１以上のAIシステムを表してもよく、該１以上のAIシステムは、表面からラベルコンテントが除去された医薬品パッケージの修正された画像を生成するように、該医薬品パッケージ中に含まれている１以上の医薬品の個々の医薬品を該医薬品パッケージ画像内で検出するように、及び／又は該医薬品パッケージ画像内で検出されたそれらの医薬品を識別するように構成されうる。図2は、AIシステム、例えば機械学習システム、を実装する為の１以上のパッケージ解析エンジンのモジュール160のブロック図であり、該AIシステムは、該医薬品パッケージ中に含まれている１以上の医薬品の個々の医薬品を該医薬品パッケージ画像内で検出する為に、及び／又は該医薬品パッケージ画像内で検出されたこれらの医薬品を識別する為に使用されることができる。図2のAIシステムは、該医薬品パッケージ中に含まれている１以上の医薬品の個々の医薬品を該医薬品パッケージ画像内で検出する為に、及び該医薬品パッケージ画像内で検出されたこれらの医薬品を識別する為に、単一のAIシステムとして実装されてもよい。他の実施態様において、図2のAIシステムのアーキテクチャが複製されて、該医薬品パッケージ中に含まれている１以上の医薬品の個々の医薬品を該医薬品パッケージ画像内で検出する為に、該医薬品パッケージ画像内で検出されたこれらの医薬品を夫々識別する為に、別個のAIシステムを形成してもよい。図2において示されているように、１以上のパッケージ解析エンジンのモジュール160は、訓練モジュールと、該医薬品パッケージ画像内の医薬品を検出及び／又は識別する為の新しいデータを処理する為に使用されるモジュールとの両方を備えていてもよい。１以上のパッケージ解析エンジンのモジュール160の訓練部分において使用されるモジュールは、訓練データモジュール205、特徴付けモジュール225、ラベル付けモジュール230、及び機械学習エンジン240を備えている。
【0044】
訓練データ205は、１つの医薬品パッケージの１以上の画像を含み、該画像の各々がその中に１以上の医薬品を含む。１以上の医薬品パッケージは、その表面上にラベルコンテントを含み得、該ラベルコンテントは、商業マーケティング情報、患者識別情報、及び／又はパーソナルヘルスケア情報（PHI）を含みうるが、これらに限定されない。該商業マーケティング情報は、例えば、ロゴ、及び／又はビジネス名を包含しうる。該患者識別情報は例えば、患者名、患者の電話番号、患者の住所、及び／又は患者の識別番号を含みうる。該パーソナルヘルスケア情報は、例えば、該医薬品パッケージ中に含まれている１以上の医薬品の名称、該１以上の医薬品の各々の投与時間、該１以上の医薬品に関連付けられた１以上のバーコード、処方オーダー、患者アカウント、識別番号、及び／又は他の情報を包含しうる。幾つかの実施態様において、図3を参照して以下に記載されているAIシステム、例えばニューラルネットワーク、の使用を通じて、その表面上に含まれているラベルコンテントの少なくとも一部が除去されるように、該医薬品パッケージ画像が修正されうる。幾つかの実施態様において、該医薬品パッケージ中に含まれている１以上の医薬品の個々の医薬品を、その表面上のラベルコンテントの少なくとも一部が除去された修正された医薬品パッケージ画像内で検出する為に、訓練データ205は、該医薬品パッケージ中に含まれている１以上の医薬品についての注文情報及び／又は該医薬品パッケージについての識別子を更に含みうる。更なる実施態様において、該医薬品パッケージ画像内で検出されたこれらの医薬品を識別する為に、訓練データ205中に含まれている注文情報は、該医薬品パッケージ内の該１以上の医薬品の名称を含んでいてもよい。特徴付けモジュール225は、１以上の医薬品を検出及び／又は識別する為に、例えばラベルコンテントが除去された医薬品パッケージ画像内の１以上の医薬品を検出及び／又は識別する為に１以上のパッケージ解析エンジンのモジュール160によって使用される個々の独立変数を識別するように構成され、それは、１以上の従属変数と見なされうる。例えば、訓練データ205は一般的に、加工されていなくてもよく又はフォーマット化されていてもよく、並びに医薬品情報及び／又は医薬品パッケージング情報に加えて余分な情報を含んでいてもよい。例えば、訓練データ205は、口座コード、ビジネスアドレス情報等を含んでいてもよく、それらは特徴付けモジュール225によってフィルタリングされてもよい。訓練データ205から抽出された特徴は属性と呼ばれてもよく、及び特徴の数は次元と呼ばれてもよい。ラベル付けモジュール230は、入力された特徴及び生成された出力の両方について一貫した命名規則を保証する為に、定義されたラベルを、訓練データ並びに検出された及び／又は識別された医薬品に割り当てるように構成されうる。機械学習エンジン240は、特徴付けされた訓練データ205、例えばラベル付けモジュール230によって提供されたラベルを包含する上記の訓練データ205、の両方を処理してもよく、特徴付けされ且つラベル付けされた入力データと生成された出力との間の定量的関係を確立する為に多数の関数をテストするように構成されてもよい。機械学習エンジン240は、モデリング技術を使用して、該生成された出力に対する様々な入力データの特徴の影響を評価しうる。次に、これらの効果は、該特徴付けされ且つラベル付けされた入力データと該生成された出力との間の定量的関係を調整し且つ洗練する為に使用されうる。機械学習エンジン240によって生成された特徴付けされ且つラベル付けされた入力データ間で調整され且つ洗練された定量的関係は、AIエンジン245において使用する為に出力される。機械学習エンジン240は、機械学習アルゴリズムとして言及されうる。
【0045】
医薬品パッケージ中に含まれている１以上の医薬品の個々の医薬品を医薬品パッケージ画像内で検出する為に及び／又は該医薬品パッケージ画像内で検出されたこれらの医薬品を識別する為に使用されるモジュールは、新しいデータモジュール255、特徴付けモジュール265、AIエンジンモジュール245、及び医薬品パッケージ処理及び解析モジュール275を備えている。新しいデータ255は、新しいデータ255が訓練目的ではなく、新しい医薬品パッケージの解析の為に使用されることを除いて、コンテント及び形式において訓練データ205と同じデータ／情報であってもよい。同様に、特徴付けモジュール265は、特徴付けモジュール225が訓練データ205に対して実行するのと同じ機能を新しいデータ255に対して実行する。AIエンジン245は実質的に、特徴付けされ且つラベル付けされた入力データと出力された医薬品パッケージコンテント解析との間に決定された定量的関係の形で、機械学習エンジン240によって生成されてもよい。幾つかの実施態様において、AIエンジン245は、AIモデルとして言及されうる。AIエンジン245は、１以上の医薬品を注文情報及び／又は医薬品パッケージについての識別子と関連付けながら、その中に含まれている１以上の医薬品の個々の医薬品を区別するところの指標を含む医薬品パッケージの修正された画像を生成するように構成されうる。該指標は、様々な方法、例えば、境界ボックス（boundary boxes）、すなわち、多角形；円；囲まれた形状、例えば直線及び曲面を包含する囲まれた形状；曲面のみを含む囲まれた形状；及び／又は、１以上の医薬品間の境界を画定する線又は記号を包含するがこれらに限定されない上記の様々な方法、で具現化されうる。幾つかの実施態様において、該指標は、該医薬品の形状に近似した形状をとりうる。AIエンジン245はまた、１以上の医薬品を医薬品の名称に基づいて識別するように構成されてもよい。AIエンジン245は、医薬品パッケージ中に含まれている１以上の医薬品の個々の医薬品を医薬品パッケージ画像内で検出する為に、及び本発明の概念の異なる実施態様に従って該医薬品パッケージ画像内で検出されたこれらの医薬品を識別する為に、様々なモデリング技術、例えば、回帰技法、ニューラルネットワーク技法、自己回帰積分移動平均（ARIMA：Autoregressive Integrated Moving Average）技法、ディープラーニング技法、線形判別解析技法、決定木技法、ナイーブベイズ（naive Bayes）技法、K-最近傍技法、学習ベクトル量子化技法、サポートベクターマシン技法、及び／又はバギング／ランダムフォレスト技法を包含する上記様々なモデリング技術、を使用しうるがこれらに限定されない。
【0046】
医薬品パッケージ処理及び解析モジュール275は、１以上の医薬品の名称と共に、印（indicial）、例えば境界ボックス、の表示によって識別された１以上の医薬品を有する修正された医薬品パッケージ画像を医薬品パッケージ検証システムに出力するように構成されうる。
【0047】
上述されているように、１以上のパッケージ解析エンジンのサーバ155及び１以上のパッケージ解析エンジンのモジュール160は１以上のAIシステムを表してもよく、該１以上のAIシステムは、その表面からラベルコンテントが除去された医薬品パッケージの修正された画像を生成するように構成されうる。図3は、その表面からラベルコンテントが除去された医薬品パッケージの該修正された画像を生成する為に使用されることができるニューラルネットワークによるAIシステムを実装する為の１以上のパッケージ解析エンジンのモジュール160のブロック図である。図3の例示的な実施態様において、該ニューラルネットワークは畳み込みニューラルネットワークである。しかしながら、医薬品パッケージ画像からラベルコンテントを除去する為のAIシステムは、本発明の概念の他の実施態様に従って、完全に接続されたニューラルネットワーク（fully connected neural network）として具現化されうることが理解されるであろう。しかしながら、畳み込みニューラルネットワークは、画素数が多く、その結果、ニューラルネットワーク層で管理する為の重みの数が多くなる故に、画像を処理又は分類するときに有用でありうる。畳み込みニューラルネットワークは、畳み込みを通じて、主画像行列を、第１の層においてより低い次元を有する行列に減少させてもよく、それにより、使用される重みの数が減少し、且つ学習時間への影響が減少する。
【0048】
ここで図3を参照すると、画像プリプロセッサ305は、その表面に表示されたラベルコンテントを含む医薬品パッケージの１以上の画像を受信しうる。図6を参照して後述されているように、該画像プリプロセッサは、画像データに対する様々な補正、例えば、ガンマ補正、ノイズ低減、及び／又は画像セグメンテーションを包含する上記の様々な補正、を実行しうる。前処理された医薬品パッケージ画像は、次元AxBx3（ここで、数3は、赤、緑、及び青の色を表す）の行列によって表される画像であってもよく、次に、畳み込みニューラルネットワーク310に提供されてもよい。図3において示されているように、畳み込みニューラルネットワーク310は、第１のプーリング層325及び第２のプーリング層335と共に、第１の畳み込み層320及び第２の畳み込み層330を備えている。第１の畳み込み層320及び第２の畳み込み層330の各々は、入力行列よりも小さい次元の行列であり、及び畳み込み演算を同じ次元を有する入力行列の一部と実行するように構成されうる。対応する要素の積の合計が該畳み込み層の出力である。該畳み込み層の各々の出力はまた、0未満の任意の数が0に変換され及び任意の正の数が変更されずに残されるところの正規化線形単位演算（rectified linear unit operation）を介して処理されてもよい。畳み込みニューラルネットワーク310は、第１のプーリング層325及び第２のプーリング層335を更に備えている。該プーリング層325及び335は夫々、ダウンサンプリング演算（down sampling operation）を実行することによって、第１の畳み込み層320及び第２の畳み込み層330の出力夫々をフィルタリングするように構成されうる。プーリング動作又はフィルタのサイズは、入力特徴マップのサイズよりも小さく、幾つかの実施態様において、2ピクセルのストライドで適用される2×2ピクセルである。このことは、該プーリング層は常に各特徴マップのサイズを2分の1に縮小し、例えば各次元を半分に縮小し、各特徴マップにおけるピクセル数又は値を4分の1のサイズに縮小する。例えば、6×6（36ピクセル）の特徴マップに施与されたプーリング層は、3×3（9ピクセル）の特徴マップをプールされた出力を結果として生じるであろう。最終出力層は、通常の完全に接続されたニューラルネットワーク層340であり、それは、その表面上のラベルコンテントの少なくとも一部が除去された修正された医薬品パッケージ画像345として出力を与える。
【0049】
本発明の概念の幾つかの実施態様において、畳み込みニューラルネットワーク310は、第１の畳み込み層320と第２の畳み込み層330との間でスキップ接続が使用されるところの残余のニューラルネットワークであってもよい。該スキップ接続の例が図4において示されている。具体的には、スキップ接続において、畳み込みニューラルネットワークは、前の畳み込み層の出力と該前の畳み込み層への入力との両方を入力として受け取る畳み込み層を含む。
【0050】
２つの畳み込み層320及び330が図3の例示的な畳み込みニューラルネットワーク310において説明の目的の為に示されているが、本発明の概念の様々な実施態様に従う畳み込みニューラルネットワークは、多数の畳み込み層を備えていてもよく、幾つかの実施態様において100層を超えうることが理解されるであろう。
【0051】
図3及び図7～図10は、本発明の概念の幾つかの実施態様に従う、その中のコンテンツの検証を容易にする為に、ラベルコンテントをそこから除去することを含む医薬品パッケージ解析を実行する為の動作を示すフローチャート図である。ここで図5を参照すると、動作はブロック500から開始され、ここでは、畳み込みニューラルネットワーク310は、その表面に表示されたラベルコンテントを有する医薬品パッケージの画像を受信する。該ラベルコンテントは、商業マーケティング情報、患者識別情報及び／又はパーソナルヘルスケア情報（PHI）を含みうるがこれらに限定されない。該商業マーケティング情報は例えば、ロゴ及び／又はビジネス名を包含しうる。該患者識別情報は、例えば、患者名、患者の電話番号、患者の住所及び／又は患者の識別番号を含みうる。該パーソナルヘルスケア情報は例えば、該医薬品パッケージ中に含まれている１以上の医薬品の名称、該１以上の医薬品の各々についての所定の投与時間、該１以上の医薬品に関連付けられた１以上のバーコード、処方オーダー、患者アカウント、識別番号及び／又は他の情報を含みうる。ブロック505では、該医薬品パッケージの表面上のラベルコンテントが、畳み込みニューラルネットワーク310を使用して検出されうる。次に、畳み込みニューラルネットワーク310は、ブロック510において、その表面からラベルコンテントが除去された医薬品パッケージの修正された画像を生成しうる。
【0052】
上述されているように、該医薬品パッケージ画像は、該画像データに様々な補正を行う為の前処理を受けうる。ここで図6及び図7を参照すると、動作はブロック700において始まり、ガンマ補正モジュール605が医薬品パッケージ画像に対してガンマ補正を実行して、ガンマ補正された画像を生成する。１以上のカメラは画像を暗くする場合があるが、該ガンマ補正は該画像を明るくして、畳み込みニューラルネットワーク310が該画像内に表示された様々な要素のエッジをよりよく認識することができることを可能にしうる。ガンマ補正は、低輝度の場合を除き、べき乗変換（power law transform）として具現化される場合があり、輝度ゼロで無限導関数が生じるのを避ける為に線形になる場合がある。このことは、SDR画像をエンコードする為に適用される古典的な非線形性である。指数、すなわち「ガンマ」、は、0.45の値を有していてもよいが、曲線の下部の線形部分により、最終的なガンマ補正関数は、0.5のべき乗低指数、すなわち平方根変換、に近くなる場合があり、それ故に、該ガンマ補正は、明るさ知覚（brightness perception）のDeVries-Rose法則に準拠しうる。ブロック705では、ガウスぼかしノイズ除去モジュール又はフィルタ610が、該ガンマ補正された画像に対してガウスぼかしノイズ除去を実行して、ノイズ低減された画像を生成する為に使用される。該ガウスぼかしノイズ除去モジュール又はフィルタ610は、線形フィルタでありうる。これは、画像をぼかす為に及び／又はノイズを低減する為に使用されうる。出力が「アンシャープマスキング」（unsharp masking）（エッジ検出）の為に減算されるように、２つのガウスぼかしノイズ除去フィルタ又はフィルタ610が使用されうる。該ガウスぼかしノイズ除去モジュール又はフィルタ610は、エッジをぼかし、そして、コントラストを低減しうる。メディアンフィルタは、画像におけるノイズを低減する方法として使用されうる非線形フィルタである。ブロック710では、自動画像閾値処理モジュール615は、前景と背景とが分離された画像を生成する為に、該ノイズ低減された画像に対して自動画像閾値処理を実行しうる。該閾値処理は、画像セグメンテーションアプリケーションにおいて使用される技術である。該閾値処理は、グレーレベル分布（gray-level distribution）に基づいて画像内の関心のあるオブジェクトを背景から分離する為の所望のグレーレベル閾値を選択することを含む。大津法は、画像のグレー値のみに依存する大域的閾値処理（global thresholding）の一種である。該大津法は、グレーレベルヒストグラムを計算することを含むグローバルな閾値選択法である。1次元だけで適用されるときに、画像が十分にセグメント化されない場合がある。各画素のグレーレベル閾値、並びに該画素を取り囲む近傍との空間相関情報の両方に基づく2次元の大津法が用いられうる。その結果、大津法がノイズの多い画像に適用されるときに、満足のいくセグメント化を提供しうる。図6の前処理モジュールからの出力画像は、医薬品パッケージ修正エンジン、例えば、図3の畳み込みニューラルネットワーク310、に適用されうる。
【0053】
ここで図8を参照すると、ブロック800では、該医薬品パッケージ画像は、その表面から除去されたラベルコンテントを有する修正された画像内の１以上の医薬品の個々の医薬品を検出することによって、その中のコンテンツの検証を容易にするように更に処理されうる。該検出は、該医薬品パッケージ中に含まれている１以上の医薬品についての注文情報及び／又は該医薬品パッケージについての識別子と共に、その表面からラベルコンテントが除去された修正された医薬品パッケージ画像に基づいて、AIエンジン、例えば、図2に関して上述されたAIエンジン245、を使用して実行されてもよい。ブロック805では、該AIエンジンは、該医薬品パッケージの第2の修正された画像を生成し得、該第2の修正された画像は、医薬品の個々の医薬品を区別し且つ医薬品を注文情報及び医薬品パッケージについての識別子と関連付けるところの指標を含む。幾つかの実施態様において、例えば、特定の医薬品の位置を識別する為の指標としての円の使用を示す図13に示されているように、バウンディングボックスが、該医薬品の個々の医薬品を区別する指標として使用されうる。
【0054】
ここで図9を参照すると、ブロック900では、該医薬品パッケージ画像は、検出された医薬品の個々の医薬品を有する第2の修正された画像内の１以上の医薬品の少なくとも一部を１以上の医薬品の名称に基づいて識別することによって、そのコンテンツの検証を容易にするように更に処理されてもよい。該識別は、検出された１以上の医薬品の個々の医薬品を含む修正された医薬品パッケージ画像と注文情報（該医薬品パッケージ内の１以上の医薬品についての名称を包含する）とに基づいて、AIエンジン、例えば、図2に関して上述されたAIエンジン245、を使用して実行されうる。本発明の概念の幾つかの実施態様に従って、該名称は、参照データベース内の医薬品属性に関連付けられうる。これらの属性は、医薬品の形状、色、１以上のエッチング、１以上の刻印（imprint）、重量、及び／又は１以上のラベルを包含するがこれらに限定されない。図14は、「医薬品A」という名称で注釈付けされた図13の医薬品を示す。幾つかの実施態様において、識別された１以上の医薬品は、断片化された医薬品、例えばピル又はタブレットの一部、を包含しうる。該識別された１以上の医薬品は、例えば、該医薬品の全部又は一部を粉末にするような該医薬品の損傷に起因する破片の識別を更に含みうる。該医薬品パッケージ画像内の該１以上の医薬品の名称による識別は、該医薬品の一部及びパッケージの破片の識別と共に、該医薬品パッケージのコンテンツを検証する際に使用する為の、該医薬品パッケージ内の該医薬品の数の生成を容易にしうる。該医薬品パッケージ画像には、該１以上の医薬品について決定された名称が注釈付されうるが、AIエンジンが該医薬品パッケージ画像内の１以上の医薬品について名称を決定することができない状況がありうる。名称を決定することができなかった医薬品が１つ又は数個しかない場合に、これらの医薬品には、新しい又は以前には見られなかった仮の名称又はナショナル・ドラッグ・コード（NDC：National Drug Code）を注釈付けしうる。幾つかの実施態様において、これらの医薬品の名称を決定する為に更なる動作、例えば図10を参照して以下に説明されるような動作、が実行されてもよい。
【0055】
ここで図10を参照すると、図9のAIシステム動作を使用して、名称によって識別されなかった医薬品の名称を決定する為の動作がブロック1000で開始され、ここで、該注文情報に含まれているが、名称付けされた医薬品のいずれにも関連付けられていないナショナル・ドラッグ・コード（NDC）と、医薬品参照データ、例えば、医薬品の形状、色、１以上のエッチング、及び／又は１以上のラベル情報との間で照合動作が実行される。次に、ブロック1005において、該医薬品パッケージ画像内の名称付けされていない医薬品のいずれかが、該注文に含まれるNDCに関連付けられた、形状、色、１以上のエッチング、１以上の刻印、重量、及び／又は１以上のラベル情報と一致するかの判定が行われてもよい。一致する場合に、名称のない医薬品には、関連付けられたNDCに対応する名称が割り当てられうる。
【0056】
ここで図11を参照すると、本発明の概念の幾つかの実施態様に従う、図1の１以上の医薬品パッケージ画像解析エンジンのサーバ155を実装する為に使用されうるデータ処理システム1100は、１以上の入力デバイス1102、例えば、キーボード又はキーパッド、バーコードスキャナ又はRFIDリーダ、と、ディスプレイ1104と、プロセッサ1108と通信するメモリ1106とを備えている。データ処理システム1100は、ストレージシステム1110、スピーカ1112、及びプロセッサ1108とまた通信する１以上の入力／出力（I／O）データポート1114を更に備えていてもよい。プロセッサ1108は、例えば、市販又はカスタムのマイクロプロセッサであってもよい。ストレージシステム1110は、リムーバブル及び／又は固定媒体、例えばフロッピーディスク、ZIPドライブ又はハードディスク等、並びに仮想ストレージ、例えばRAMDISK、を包含しうる。１以上のI／Oデータポート1114は、データ処理システム1100と他のコンピュータシステム又はネットワーク（例えば、インターネット）との間で情報を転送する為に使用されうる。これらのコンポーネントは、慣用的なコンポーネント、例えば、慣用的な多くのコンピューティングデバイスにおいて使用されているコンポーネント、であってもよく、慣用的な動作に関するそれらの機能は当業者に一般的に知られている。メモリ1106は、本発明の概念の幾つかの実施態様に従って、医薬品パッケージの表面からの余分なラベルコンテントのAI支援除去、及び／又は医薬品パッケージのコンテンツを検証する為の、その中に含まれている１以上の医薬品の検出及び識別を容易にする為に、コンピュータ可読プログラムコード1116で構成されうる。
【0057】
図12は、本発明の概念の幾つかの実施態様に従って、該医薬品パッケージの表面からの余分なラベルコンテントのAI支援除去及び／又は該医薬品パッケージのコンテンツを検証する為にその中に含まれている１以上の医薬品の検出及び識別を容易にする為に、データ処理システム、例えば、図1の１以上の医薬品パッケージ解析エンジンのサーバ155及び図11のデータ処理システム1100夫々、の実施態様において使用されうるメモリ1205を示す。メモリ1205は、本明細書において記載されているように、１以上の医薬品パッケージ解析エンジンのサーバ155及び１以上の医薬品パッケージ解析エンジンのモジュール160の動作を容易にする為に使用されるソフトウェア及びデータを含む１以上のメモリデバイスの代表である。メモリ1205は、デバイスの下記の種類を包含しうるがこれらに限定されない：キャッシュ、ROM、PROM、EPROM、EEPROM、フラッシュ、SRAM及びDRAM。図12において示されているように、メモリ1205は、オペレーティングシステム1210、１以上の医薬品パッケージ処理及び解析エンジンのモジュール1225、及び通信モジュール1240の5以上のカテゴリのソフトウェア及び／又はデータを含みうる。特に、オペレーティングシステム1210は、データ処理システムのソフトウェアリソース及び／又はハードウェアリソースを管理し、及びプロセッサによるプログラムの実行を調整しうる。１以上の医薬品パッケージ処理及び解析エンジンのモジュール1125は、機械学習エンジンモジュール1230及びAIエンジンモジュール1235を備えていてもよい。機械学習エンジンモジュール1230は、機械学習エンジン240、畳み込みニューラルネットワーク310、並びに図5及び図7～図10のフローチャート図に関して上述された１以上の動作を実行するように構成されてもよい。AIエンジンモジュール1225は、AIエンジン245、畳み込みニューラルネットワーク310、並びに図5及び図7～図10のフローチャート図に関して上述された１以上の動作を実行するように構成されてもよい。通信モジュール1240は、例えば、１以上の医薬品パッケージ解析エンジンのサーバ155と、例えば医薬品パッケージ検証システムと、の間の通信をサポートするように構成されてもよい。
【0058】
図11～図12は、本発明の概念の幾つかの実施態様に従って、データ処理システム、例えば、図1の１以上の医薬品パッケージ解析エンジンのサーバ155及び図11のデータ処理システム1100夫々、において使用されうるハードウェアアーキテクチャ／ソフトウェアアーキテクチャを示しているが、本発明の実施態様はそのような構成に限定されるものでなく、本明細書において記載されている動作を実行することができる任意の構成を包含することが意図されていることが理解されるであろう。
【0059】
図1～図11、図13及び図14に関して上述されたデータ処理システムの動作を実行する為のコンピュータプログラムコードは、開発の便宜上、高水準プログラミング言語、例えば、Python、Java、C、及び／又はC++等、で記述されうる。加えて、本発明の動作を実行する為のコンピュータプログラムコードはまた、他のプログラミング言語、例えば限定されるものでないがインタプリタ型言語、で記述されうる。幾つかのモジュール又はルーチンは、性能及び／又はメモリ使用量を高める為に、アセンブリ言語又はマイクロコードで記述されてもよい。プログラムモジュールのいずれか又は全ての機能はまた、個々のハードウェアコンポーネント、１以上の特定用途向け集積回路（ASIC：application specific integrated circuit）、又はプログラムされたデジタル信号プロセッサ若しくはマイクロコントローラを使用して実装されうることが更に理解されるであろう。
【0060】
その上、図1の１以上の医薬品パッケージ解析エンジンのサーバ155及び図11のデータ処理システム1100の機能は夫々、本発明の概念の様々な実施態様に従って、単一のプロセッサシステム、マルチプロセッサシステム、マルチコアプロセッサシステム、又はスタンドアロンコンピュータシステムのネットワークとして実装されうる。これらのプロセッサ／コンピュータシステムの各々は、「プロセッサ」又は「データ処理システム」として言及されうる。
【0061】
図1～図13に関して本明細書において記載されているデータ処理装置は、本明細書において記載されている本発明の概念の幾つかの実施態様に従って、医薬品パッケージの表面からの余分なラベルコンテントのAI支援除去及び／又は医薬品パッケージのコンテンツを検証する為に、その中に含まれている１以上の医薬品の検出及び識別を容易にする為に使用されうる。これらの装置は、ソフトウェア、ファームウェア及び／又はハードウェアの任意の好適な組み合わせを使用してデータを受信、送信、処理及び記憶するように動作可能であり、スタンドアロンであってもよく、又はインターネットとして知られるグローバル通信ネットワークの全部又は一部を包含するパブリックネットワーク及び／又はプライベートネットワーク、リアルネットワーク及び／又は仮想ネットワーク、有線ネットワーク及び／又は無線ネットワークによって相互接続されてもよい、１以上の企業、アプリケーション、個人、広帯域及び／又は組込みのコンピュータシステム及び／又は装置として具現化され得、並びに様々なタイプの有形、非一時的コンピュータ可読媒体を含みうる。特に、プロセッサに接続されたときのメモリ1205は、該プロセッサによって実行されるときに、該プロセッサに、図1～図10、図13及び図14に関して本明細書において記載されている動作のうちの１以上を含む動作を実行させるコンピュータ可読プログラムコードを含む。
【0062】
上述されているように、本発明の概念の実施態様は、AI支援医薬品パッケージ解析システムを提供し得、該AI支援医薬品パッケージ解析システムは、医薬品パッケージの表面上のラベルコンテントを検出して、ラベルコンテントが除去された医薬品パッケージの修正された画像を生成する為の畳み込みニューラルネットワークと、該医薬品パッケージに含まれている医薬品を検出し且つ識別する為の１以上の機械学習エンジンとを使用しうる。このことにより、例えば、薬局又は医療センターが顧客又は患者にパッケージ化された医薬品を渡す前のパッケージ検証プロセスの精度が向上しうる。
【0063】
更なる定義及び実施態様：
【0064】
本開示の様々な実施態様の上記記載において、本開示の観点は、任意の新規且つ有用なプロセス、機械、製造、若しくは物質の組成物、又はそれらの任意の新規かつ有用な改良を包含する、多数の特許可能なクラス又はコンテキストのいずれかにおいて、本明細書において例示且つ記載されうる。従って、本開示の観点は、完全にハードウェアで実装されてもよく、完全にソフトウェア（ファームウェア、常駐ソフトウェア、マイクロコード等を包含する）で実装されてもよく、又はソフトウェア実装とハードウェア実装とを組み合わせて実装されてもよく、これらは全て、「回路」、「モジュール」、「コンポーネント」又は「システム」として本明細書において一般的に言及されうる。その上、本開示の観点は、その上に具現化されたコンピュータ可読プログラムコードを有する１以上のコンピュータ可読媒体を含むコンピュータプログラム製品の形態をとりうる。
【0065】
１以上のコンピュータ可読媒体の任意の組み合わせが使用されうる。該コンピュータ可読媒体は、コンピュータ可読信号媒体であってもよいし、又はコンピュータ可読ストレージ媒体であってもよい。コンピュータ可読ストレージ媒体は、例えば、電子、磁気、光学、電磁気、又は半導体のシステム、装置、若しくはデバイス、又はそれらの任意の適切な組み合わせであってもよいがこれらに限定されない。該コンピュータ可読ストレージ媒体のより具体的な例（非網羅的なリスト）は下記を包含する：ポータブルコンピュータディスケット（登録商標）、ハードディスク、ランダムアクセスメモリ（RAM：random access memory）、読み取り専用メモリ（ROM：read-only memory）、消去可能なプログラム可能な読み取り専用メモリ（EPROM：erasable programmable read-only memory、すなわちフラッシュメモリ）、中継器を備えた適切な光ファイバ、ポータブルコンパクトディスク読み取り専用メモリ（CD-ROM：compact disc read-only memory）、光学ストレージデバイス、磁気ストレージデバイス、又は上述されたものの任意の適切な組み合わせ。本明細書の文脈において、コンピュータ可読ストレージ媒体は、命令実行システム、装置若しくはデバイスによる使用又はそれらに関連して使用する為のプログラムを含む又は記憶することができる任意の有形媒体でありうる。
【0066】
コンピュータ可読信号媒体は、例えば、ベースバンドにおいて又は搬送波の一部として、その中にコンピュータ可読プログラムコードが具現化された伝搬されたデータ信号を含みうる。そのような伝搬された信号は、様々な形態、例えば、電磁気的、光学的又はそれらの任意の適切な組合せを包含する上記の様々な形態、のいずれかをとりうるがこれらに限定されない。コンピュータ可読信号媒体は、コンピュータ可読ストレージ媒体でなく、命令実行システム、装置若しくは又はデバイスによる使用又はそれらに関連して使用する為のプログラムを通信、伝播又は伝送することができる任意のコンピュータ可読媒体でありうる。コンピュータ可読信号媒体上に具現化されたプログラムコードは、任意の適切な媒体、例えば、無線、有線、光ファイバケーブル、RF等、又は上述されたものの任意の適切な組み合わせを包含するがこれらに限定されない上記の任意の適切な媒体、を使用して伝送されうる。
【0067】
本開示の観点の為の動作を実行する為のコンピュータプログラムコードは、オブジェクト指向プログラミング言語、例えば、Java、Scala、Smalltalk、Eiffel、JADE、Emerald、C++、C#、VB.NET、Python等；慣用的な手続き型プログラミング言語、例えば、「C」プログラミング言語、Visual Basic、Fortran 2003、Perl、COBOL 2002、PHP、ABAP；動的プログラミング言語、例えば、Python、Ruby、Groovy；又は、他のプログラミング言語を包含する１以上のプログラミング言語の任意の組み合わせで記述されうる。該コンピュータプログラムプログラムコードは、スタンドアロンソフトウェアパッケージとしてユーザのコンピュータ上で完全に実行されてもよく、スタンドアロンソフトウェアパッケージとしてユーザのコンピュータ上で部分的に実行されてもよく、ユーザのコンピュータ上で部分的に且つリモートコンピュータ上で部分的に実行されてもよく、又はリモートコンピュータ若しくはサーバ上で完全に実行されてもよい。後者のシナリオにおいて、該リモートコンピュータは、任意のタイプのネットワーク、例えば、ローカルエリアネットワーク（LAN：local area network）若しくはワイドエリアネットワーク（WAN：wide area network）を包含する上記の任意のタイプのネットワーク、を介してユーザのコンピュータに接続されてもよく、又は該接続は、外部コンピュータ（例えば、インターネットサービスプロバイダを使用しインターネットを介して）若しくはクラウドコンピューティング環境で行われるか、或いはサービス、例えば、サービスとしてのソフトウェア（SaaS：Software as a Service）、として提供されてもよい。
【0068】
本開示の観点が、本開示の実施態様に従う、方法、装置（システム）及びコンピュータプログラム製品のフローチャート図及び／又はブロック図を参照して本明細書において記載されている。フローチャート図及び／又はブロック図の各ブロック、並びにフローチャート図及び／又はブロック図における複数のブロックの組み合わせは、コンピュータプログラム命令によって実装されることができることが理解されるであろう。これらのコンピュータプログラム命令は、汎用コンピュータ、特殊用途コンピュータ、又は他のプログラム可能なデータ処理装置のプロセッサに提供され、コンピュータ又は他のプログラム可能な命令実行装置のプロセッサを介して実行される命令が、フローチャート図及び／又はブロック図の１以上のブロックにおいて指定された機能／行為を実装する為の機構を生成するように機械を作成しうる。
【0069】
これらのコンピュータプログラム命令はまた、コンピュータ可読媒体内に記憶され、実行されるときに、フローチャート図及び／又はブロック図の１以上の指定された機能／行為をコンピュータに実行させる命令を含む製造品を作成するように、コンピュータ、他のプログラム可能なデータ処理装置、又は他の装置に特定の方法で機能するように指示することができる。コンピュータプログラム命令はまた、コンピュータ、他のプログラム可能な命令実行装置、又は他の装置にロードされて、コンピュータに実装されたプロセスを生成する為の一連の動作工程をコンピュータ、他のプログラム可能な装置、又は他の装置上で実行させてもよく、従って、コンピュータ、他のプログラム可能な装置、又は他の装置上で実行される命令が、フローチャート図及び／又はブロック図の１以上のブロックで指定された機能／行為を実装する為のプロセスを提供する。
【0070】
図面中のフローチャート図及びブロック図は、本発明の様々な実施態様に従う、システム、方法及びコンピュータプログラム製品若しくはコンピュータプログラムのありうる実装の、アーキテクチャ、機能及び動作を示す。これに関連して、該フローチャート図又は該ブロック図における各ブロックは、命令のモジュール、セグメント、又はその一部を表し得、それは、特定された１以上の論理機能を実装する為の１以上の実行可能命令を含む。幾つかの代替的な実装において、ブロック図に記載された機能は、図面に記載された順序から外れて生じる場合があることがまた留意されるべきである。例えば、連続して示されている2つのブロックは、実際には、実質的に同時に実行されてもよく、又は複数のブロックは、関与する機能に依存して、逆の順序で実行される場合がありうる。ブロック図及び／又はフローチャート図の各ブロック、並びにブロック図及び／又はフローチャート図の複数のブロックの組み合わせは、特定された機能又は行為を実行する特別な目的のハードウェアベースのシステム、又は特別な目的のハードウェアとコンピュータ命令との組み合わせによって実装されることができることにまた留意されたい。
【0071】
本明細書において使用される語は、特定の実施態様を説明することのみを目的としており、本開示を限定することを意図していない。本明細書において使用される場合、単数形「１つ」（a）、「１つ」（an）及び「該」（the）は、文脈が明確に別段の指示をしない限り、複数形をまた含むことが意図されている。本明細書において使用される場合、語「含む」（comprises）、「含んでいる」（comprising）、「包含する」（include）、「包含している」（including）、「包含する」（includes）、「有する」（have）、「有する」（has）、「有している」（having）、又はそれらの変形は、記載された特徴、整数、工程、操作、要素及び／又はコンポーネントの存在を特定するが、１以上の他の特徴、整数、工程、操作、要素、コンポーネント及び／又はそれらのグループの存在又は追加を排除するものでない。本明細書において使用される場合、語「及び／又は」は、関連付けられた列挙された項目の１以上の任意の及び全ての組み合わせを含む。同様の参照番号は、図面の説明全体を通して同様の要素を意味する。
【0072】
本明細書において様々な要素を記載する為に第１、第2等の語が使用されうるが、これらの要素はこれらの語によって限定されるべきものでないことがまた理解されるであろう。これらの語は、ある要素を別の要素から区別する為に使用されているに過ぎない。
【0073】
別段に定義されていなければ、本明細書で使用される全ての語（技術用語及び科学用語を含む）は、この発明が属する、技術分野の当業者によって通常理解されるものと同じ意味を有する。語、例えば通常使用される辞書において定義されるもの、は、本出願及び関連技術分野の文脈において、それらの意味と一致する意味を有するものと解釈されるべきであり、本明細書において明示的にそのように定義されていなければ、理想化された意味又は過度に形式的な意味で解釈されるべきでないことが、更に理解されよう。周知の機能又は構造は、簡潔さ及び／又は明瞭さの為に詳細に説明されない場合がある。
【0074】
本開示の説明は、例示及び説明の目的の為に提示されているが、開示された形態における本開示を網羅的又は限定的に説明することを意図するものでない。多くの修正及び変形が、本開示の範囲及び精神から逸脱すること無しに当業者に明らかであろう。本明細書における本開示の観点は、本開示の原理及び実際の適用を最もよく説明する為に、並びに他の当業者が、企図される特定の用途に適した様々な修正を加えて本開示を理解できるようにする為に選択され且つ記載されている。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【国際調査報告】