知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2022184133
(43)【公開日】2022-12-13
(54)【発明の名称】電子透かし解析装置および電子透かし解析方法
(51)【国際特許分類】
H04N 1/32 20060101AFI20221206BHJP
H04N 1/387 20060101ALI20221206BHJP
【ＦＩ】
H04N1/32 144
H04N1/387
【審査請求】未請求
【請求項の数】7
【出願形態】ＯＬ
(21)【出願番号】P 2021091804
(22)【出願日】2021-05-31
(71)【出願人】
【識別番号】000001007
【氏名又は名称】キヤノン株式会社
(74)【代理人】
【識別番号】110003281
【氏名又は名称】弁理士法人大塚国際特許事務所
(72)【発明者】
【氏名】大曲 勇気
【テーマコード（参考）】
5C076
【Ｆターム（参考）】
5C076AA12
5C076AA17
5C076AA19
5C076BA06
(57)【要約】 （修正有）
【課題】印刷物を撮像して、撮像画像内のどの位置に付加情報を埋め込むと良いかを決める電子透かし解析装置を提供する。
【解決手段】電子透かしを解析する画像処理装置は、所定の周期又は周波数を有するパターンを画像に重畳することで付加情報が埋め込まれた印刷物を撮像し、得られる画像を撮像画像として取得する内部撮像デバイスと、撮像画像内の複数の小エリアを解析して個々の小エリアの空間周波数特性を算出する画像特性算出部と、空間周波数特性に基づいて撮像画像中の付加情報の埋め込み位置及び埋め込み信号強度を推定する信号強度推定部と、埋め込み位置情報及び埋め込み信号強度情報に基づいて、付加情報を取得するための基準位置となるマーカーを検出するためのマーカー検出エリアの撮像画像内における位置を決定するマーカー検出エリア決定部と、検出したマーカーの位置を基準として撮像画像内の付加情報を取得する付加情報取得部と、を備える。
【選択図】図１５
【解決手段】電子透かしを解析する画像処理装置は、所定の周期又は周波数を有するパターンを画像に重畳することで付加情報が埋め込まれた印刷物を撮像し、得られる画像を撮像画像として取得する内部撮像デバイスと、撮像画像内の複数の小エリアを解析して個々の小エリアの空間周波数特性を算出する画像特性算出部と、空間周波数特性に基づいて撮像画像中の付加情報の埋め込み位置及び埋め込み信号強度を推定する信号強度推定部と、埋め込み位置情報及び埋め込み信号強度情報に基づいて、付加情報を取得するための基準位置となるマーカーを検出するためのマーカー検出エリアの撮像画像内における位置を決定するマーカー検出エリア決定部と、検出したマーカーの位置を基準として撮像画像内の付加情報を取得する付加情報取得部と、を備える。
【選択図】図１５
【特許請求の範囲】
【請求項1】
所定の周期ないし周波数を有するパターンを画像に重畳することによって付加情報が埋め込まれた印刷物を撮像し、それにより得られる画像を撮像画像として取得する撮像部と、
前記撮像画像内の複数の小エリアを解析して個々の小エリアの空間周波数特性を算出する算出部と、
前記空間周波数特性に基づいて前記撮像画像中の前記付加情報の埋め込み位置および埋め込み信号強度を特定する特定部と、
前記埋め込み位置情報および前記埋め込み信号強度情報に基づいて、前記付加情報を取得するための基準位置となるマーカーを検出するためのマーカー検出エリアの前記撮像画像内における位置を決定する決定部と、
前記マーカー検出エリア内にてマーカーを検出し、該検出されたマーカーの位置を基準として前記撮像画像内の前記付加情報を取得する取得部と、を備える
ことを特徴とする電子透かし解析装置。
前記撮像画像内の複数の小エリアを解析して個々の小エリアの空間周波数特性を算出する算出部と、
前記空間周波数特性に基づいて前記撮像画像中の前記付加情報の埋め込み位置および埋め込み信号強度を特定する特定部と、
前記埋め込み位置情報および前記埋め込み信号強度情報に基づいて、前記付加情報を取得するための基準位置となるマーカーを検出するためのマーカー検出エリアの前記撮像画像内における位置を決定する決定部と、
前記マーカー検出エリア内にてマーカーを検出し、該検出されたマーカーの位置を基準として前記撮像画像内の前記付加情報を取得する取得部と、を備える
ことを特徴とする電子透かし解析装置。
【請求項2】
所定の周期ないし周波数を有するパターンを画像に重畳することによって付加情報が埋め込まれた印刷物を撮像し、それにより得られる画像を撮像画像として取得する撮像部と、
前記撮像画像内の画素の色情報と、予め保持された該色情報と電子透かしの信号強度との関係を表す情報と、に基づいて、前記付加情報の埋め込み位置および埋め込み信号強度を特定する特定部と、
前記埋め込み位置情報および前記埋め込み信号強度情報に基づいて、前記付加情報を取得するための基準位置となるマーカーを検出するためのマーカー検出エリアの前記撮像画像内における位置を決定する決定部と、
前記マーカー検出エリア内にてマーカーを検出し、該検出されたマーカーの位置を基準として前記撮像画像内の前記付加情報を取得する取得部と、を備える
ことを特徴とする電子透かし解析装置。
前記撮像画像内の画素の色情報と、予め保持された該色情報と電子透かしの信号強度との関係を表す情報と、に基づいて、前記付加情報の埋め込み位置および埋め込み信号強度を特定する特定部と、
前記埋め込み位置情報および前記埋め込み信号強度情報に基づいて、前記付加情報を取得するための基準位置となるマーカーを検出するためのマーカー検出エリアの前記撮像画像内における位置を決定する決定部と、
前記マーカー検出エリア内にてマーカーを検出し、該検出されたマーカーの位置を基準として前記撮像画像内の前記付加情報を取得する取得部と、を備える
ことを特徴とする電子透かし解析装置。
【請求項3】
前記決定部は、前記マーカー検出エリアの位置を、該マーカー検出エリア内に含まれる前記小エリアの埋め込み信号強度の平均値が最も大きくなるように決定する
ことを特徴とする請求項１に記載の電子透かし解析装置。
ことを特徴とする請求項１に記載の電子透かし解析装置。
【請求項4】
前記決定部は、前記埋め込み位置および前記埋め込み信号強度に応じたガイドを表示装置の画面に表示する
ことを特徴とする請求項１に記載の電子透かし解析装置。
ことを特徴とする請求項１に記載の電子透かし解析装置。
【請求項5】
前記決定部は、前記ガイドを、該ガイド内に含まれる前記小エリアの埋め込み信号強度の平均値が最も大きくなるように表示する
ことを特徴とする請求項４に記載の電子透かし解析装置。
ことを特徴とする請求項４に記載の電子透かし解析装置。
【請求項6】
所定の周期ないし周波数を有するパターンを画像に重畳することによって付加情報が埋め込まれた印刷物を撮像し、それにより得られる画像を撮像画像として取得する工程と、
前記撮像画像内の複数の小エリアを解析して個々の小エリアの空間周波数特性を算出する工程と、
前記空間周波数特性に基づいて前記撮像画像中の前記付加情報の埋め込み位置および埋め込み信号強度を特定する工程と、
前記埋め込み位置情報および前記埋め込み信号強度情報に基づいて、前記付加情報を取得するための基準位置となるマーカーを検出するためのマーカー検出エリアの前記撮像画像内における位置を決定する工程と、
前記マーカー検出エリア内にてマーカーを検出し、該検出されたマーカーの位置を基準として前記撮像画像内の前記付加情報を取得する工程と、を含む
ことを特徴とする電子透かし解析方法。
前記撮像画像内の複数の小エリアを解析して個々の小エリアの空間周波数特性を算出する工程と、
前記空間周波数特性に基づいて前記撮像画像中の前記付加情報の埋め込み位置および埋め込み信号強度を特定する工程と、
前記埋め込み位置情報および前記埋め込み信号強度情報に基づいて、前記付加情報を取得するための基準位置となるマーカーを検出するためのマーカー検出エリアの前記撮像画像内における位置を決定する工程と、
前記マーカー検出エリア内にてマーカーを検出し、該検出されたマーカーの位置を基準として前記撮像画像内の前記付加情報を取得する工程と、を含む
ことを特徴とする電子透かし解析方法。
【請求項7】
所定の周期ないし周波数を有するパターンを画像に重畳することによって付加情報が埋め込まれた印刷物を撮像し、それにより得られる画像を撮像画像として取得する工程と、
前記撮像画像内の画素の色情報と、予め保持された該色情報と電子透かしの信号強度との関係を表す情報と、に基づいて、前記付加情報の埋め込み位置および埋め込み信号強度を特定する工程と、
前記埋め込み位置情報および前記埋め込み信号強度情報に基づいて、前記付加情報を取得するための基準位置となるマーカーを検出するためのマーカー検出エリアの前記撮像画像内における位置を決定する工程と、
前記マーカー検出エリア内にてマーカーを検出し、該検出されたマーカーの位置を基準として前記撮像画像内の前記付加情報を取得する工程と、を含む
ことを特徴とする電子透かし解析方法。
前記撮像画像内の画素の色情報と、予め保持された該色情報と電子透かしの信号強度との関係を表す情報と、に基づいて、前記付加情報の埋め込み位置および埋め込み信号強度を特定する工程と、
前記埋め込み位置情報および前記埋め込み信号強度情報に基づいて、前記付加情報を取得するための基準位置となるマーカーを検出するためのマーカー検出エリアの前記撮像画像内における位置を決定する工程と、
前記マーカー検出エリア内にてマーカーを検出し、該検出されたマーカーの位置を基準として前記撮像画像内の前記付加情報を取得する工程と、を含む
ことを特徴とする電子透かし解析方法。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、主に電子透かし解析装置に関する。
【背景技術】
【0002】
電子透かしと呼ばれる技術がある（特許文献１～２参照）。電子透かしは、画像内に画像に関連する付加情報を、視覚的に判別し難いように埋め込む技術であり、ウォーターマークとも呼ばれうる。また、同様の技術として、画像と関連のない付加情報を埋め込むステガノグラフィと呼ばれるものもある。付加情報が埋め込まれた画像は、インターネット等のネットワークを通じて流通され、付加情報が埋め込まれた画像から付加情報を抽出することが行われる。
【0003】
また、付加情報が埋め込まれた画像が複写機及びプリンタ等の画像出力装置において紙上に印刷され、それにより得られた印刷物から付加情報を抽出することも行われうる。印刷物からの付加情報の抽出は、スキャナによる画像取り込み機能や携帯端末によるカメラ機能を利用して取り込まれた印刷物の画像を解析することにより行われうる。
【先行技術文献】
【特許文献】
【0004】
【特許文献1】特開２００５－２２９５０８号公報
【特許文献2】特許第４６４５４５７号公報
【発明の概要】
【発明が解決しようとする課題】
【0005】
特許文献１によれば、予め読み取り強度の評価を行おく必要があり、また、特許文献２によれば、撮像画像内のどの位置にどの程度の埋め込み信号強度で埋め込みが行われているかが特定されている必要がある。そのため、特許文献１～２の構成においては、未知の電子透かしを印刷物から読み取り可能とするのに改善の余地があった。
【0006】
本発明は上記課題を契機としてなされたものであり、電子透かしの読み取りの多様化に有利な技術を提供することを例示的目的とする。
【課題を解決するための手段】
【0007】
本発明の一つの側面は電子透かし解析装置にかかり、前記電子透かし解析装置は、
所定の周期ないし周波数を有するパターンを画像に重畳することによって付加情報が埋め込まれた印刷物を撮像し、それにより得られる画像を撮像画像として取得する撮像部と、
前記撮像画像内の複数の小エリアを解析して個々の小エリアの空間周波数特性を算出する算出部と、
前記空間周波数特性に基づいて前記撮像画像中の前記付加情報の埋め込み位置および埋め込み信号強度を特定する特定部と、
前記埋め込み位置情報および前記埋め込み信号強度情報に基づいて、前記付加情報を取得するための基準位置となるマーカーを検出するためのマーカー検出エリアの前記撮像画像内における位置を決定する決定部と、
前記マーカー検出エリア内にてマーカーを検出し、該検出されたマーカーの位置を基準として前記撮像画像内の前記付加情報を取得する取得部と、を備える
ことを特徴とする。
所定の周期ないし周波数を有するパターンを画像に重畳することによって付加情報が埋め込まれた印刷物を撮像し、それにより得られる画像を撮像画像として取得する撮像部と、
前記撮像画像内の複数の小エリアを解析して個々の小エリアの空間周波数特性を算出する算出部と、
前記空間周波数特性に基づいて前記撮像画像中の前記付加情報の埋め込み位置および埋め込み信号強度を特定する特定部と、
前記埋め込み位置情報および前記埋め込み信号強度情報に基づいて、前記付加情報を取得するための基準位置となるマーカーを検出するためのマーカー検出エリアの前記撮像画像内における位置を決定する決定部と、
前記マーカー検出エリア内にてマーカーを検出し、該検出されたマーカーの位置を基準として前記撮像画像内の前記付加情報を取得する取得部と、を備える
ことを特徴とする。
【発明の効果】
【0008】
本発明によれば、電子透かしの読み取りの多様化に有利である。
【図面の簡単な説明】
【0009】
【図1】画像処理システムのハードウェア構成例を示す図である。
【図2】プリンタの記録ヘッドの模式図である。
【図3】プリンタの制御回路部の構成例を示す図である。
【図4】システムの構成例を示すブロック図である。
【図5】アプリケーションの画面構成例を示す図である。
【図6】アプリケーションの埋め込み情報入力ダイアログ例である。
【図7】アプリケーションの印刷設定ダイアログ例である。
【図8】ＳＶＧの記述例を示す図である。
【図9】印刷データ生成処理のフローチャートである。
【図10】プリントコマンドの例を示す図である。
【図11】付加情報の埋め込み処理のフローチャートである。
【図12】埋め込みパターンを示す図である。
【図13】単位ブロックの構成例を示す図である。
【図14】印刷物への単位ブロック埋め込み例を示す図である。
【図15】付加情報読み取り処理部を含むブロック図である。
【図16】印刷物を読み取る時の撮像画像とマーカー検出エリアの例を示す図である。
【図17】撮像画像内の複数小エリアの例を示す図である。
【図18】画像特性の算出例を示す図である。
【図19】空間周波数領域での解析例を示す図である。
【図20】マーカー検出エリアの位置決定処理のフローチャートである。
【図21】ディスプレイによる通知例を示す図である。
【図22】付加情報読み取り処理部を含むブロック図である。
【図23】埋め込み信号強度テーブルの例を示す図である。
【発明を実施するための形態】
【0010】
以下、添付図面を参照して実施形態を詳しく説明する。なお、以下の実施形態は特許請求の範囲に係る発明を限定するものでない。実施形態には複数の特徴が記載されているが、これらの複数の特徴の全てが発明に必須のものとは限らず、また、複数の特徴は任意に組み合わせられてもよい。さらに、添付図面においては、同一若しくは同様の構成に同一の参照番号を付し、重複した説明は省略する。
【0011】
＜＜第１実施形態＞＞
＜画像処理システムの概要＞
第１実施形態に係る画像処理装置（画像処理装置１００とする。画像処理装置１００は情報処理装置１００と表現されてもよい。）は、詳細については後述とするが、付加情報の埋め込みと読み取りとを実行可能なアプリケーション４００（図４参照）を備える。アプリケーション４００は、付加情報が埋め込まれたコンテンツとして画像データを作成するプログラムであり、アプリケーションプログラムとも表現されうる。図１等を参照しながら後述するが、画像処理装置１００は、コンテンツとしての画像データから印刷データを生成し、該印刷データをプリンタ１１２に送信する。プリンタ１１２は、印刷データを用いて印刷を行い、付加情報が埋め込まれた印刷物を出力する。
＜画像処理システムの概要＞
第１実施形態に係る画像処理装置（画像処理装置１００とする。画像処理装置１００は情報処理装置１００と表現されてもよい。）は、詳細については後述とするが、付加情報の埋め込みと読み取りとを実行可能なアプリケーション４００（図４参照）を備える。アプリケーション４００は、付加情報が埋め込まれたコンテンツとして画像データを作成するプログラムであり、アプリケーションプログラムとも表現されうる。図１等を参照しながら後述するが、画像処理装置１００は、コンテンツとしての画像データから印刷データを生成し、該印刷データをプリンタ１１２に送信する。プリンタ１１２は、印刷データを用いて印刷を行い、付加情報が埋め込まれた印刷物を出力する。
【0012】
ここでいう「付加情報」とは、印刷物に埋め込まれる情報のことである。付加情報は、視覚的に目立たないように或いは視認し難いように印刷物に埋め込まれ、付加され、又は、多重化される。このような付加情報は、多重化情報、透かし情報または埋め込み情報とも表現されうる。
【0013】
＜画像処理装置のハードウェア構成＞
図１は、本実施形態に係る画像処理システムＳＹの構成例を示す。画像処理システムＳＹは、画像処理装置１００、外部撮像デバイス１１１、プリンタ１１２およびサーバ１１４を備える。画像処理装置１００とプリンタ１１２とは、ネットワーク１１３を介して或いは直接的に相互接続されうる。尚、図１では、サーバ１１４は、ネットワーク１１３を介して接続されるものとするが、他の実施形態として省略されてもよい。
図１は、本実施形態に係る画像処理システムＳＹの構成例を示す。画像処理システムＳＹは、画像処理装置１００、外部撮像デバイス１１１、プリンタ１１２およびサーバ１１４を備える。画像処理装置１００とプリンタ１１２とは、ネットワーク１１３を介して或いは直接的に相互接続されうる。尚、図１では、サーバ１１４は、ネットワーク１１３を介して接続されるものとするが、他の実施形態として省略されてもよい。
【0014】
画像処理装置１００には、携帯型または非携帯型の公知の端末が用いられればよく、例えば、スマートフォン、タブレットＰＣ（パーソナルコンピュータ）、ノートＰＣ、デスクトップＰＣ等が典型的に用いられうる。本実施形態では、画像処理装置１００として、タッチパネル式ディスプレイを備えるもの、いわゆるスマートフォン、が使用されるものとする。
【0015】
画像処理装置１００は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１０２、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１０３、及び、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１０４を備える。また、画像処理装置１００は、２次記憶装置１０５、ディスプレイ１０６、ＩＦ（Ｉｎｔｅｒｆａｃｅ）１０７、１０８及び１０９、並びに、内部撮像デバイス１１０を更に備える。
【0016】
ＣＰＵ１０２は、所定のプログラムをメモリ上に展開して実行することにより後述の各種処理を実現する。図１においては単一のＣＰＵ１０２が示されているが、複数のＣＰＵあるいはＣＰＵコアが設けられてもよい。ＲＯＭ１０３は、ＣＰＵ１０２により実行されるプログラムを記憶する。ＲＡＭ１０４は、ＣＰＵ１０２によるプログラムの実行時に、各種情報を一時的に記憶する。
【0017】
２次記憶装置１０５は、ハードディスクドライブ（ＨＤＤ）、ソリッドステードドライブ（ＳＳＤ）、フラッシュメモリ等の公知の不揮発性メモリないし記憶媒体である。２次記憶装置１０５は、ファイル、画像解析等の処理結果を保持するデータベース等のデータ、並びに、各種プログラムを記憶する。
【0018】
ディスプレイ１０６は、各種処理を実現するための操作を受け付けるためのＵＩ（ユーザインタフェース）を表示したり、該実行された処理結果等の各種情報を表示したり、する。本実施形態においてはディスプレイ１０６にはタッチパネル式ディスプレイが用いられ、即ち、ディスプレイ１０６はタッチセンサを備えるものとする。これにより、ユーザは、タップ、スワイプ、ピンチイン、ピンチアウト等のタッチ操作により、所望の操作をディスプレイ１０６に対して入力可能とする。
【0019】
内部撮像デバイス（撮像部）１１０は撮像を行う。撮像によって得られた画像データは、所定の画像処理が行われた後、２次記憶装置１０５に保存される。また、画像データは、外部撮像デバイス１１１からＩＦ１０８を介して取得され、２次記憶装置１０５に保存されてもよい。
【0020】
ＩＦ１０９は、ネットワーク１１３を介して外部装置（例えばプリンタ１１２やサーバ１１４）と通信を行うことができる。
【0021】
ＩＦ１０７～１０９は、有線通信および無線通信のいずれの通信形態を採用してもよい。画像処理装置１００は、ＩＦ１０７～１０９を介して、ネットワーク１１３に接続されたサーバ１１４から、又は、外部撮像デバイス１１１から画像データを取得したり、プリンタ１１２に対して画像データ（印刷データ）等を出力したり、することができる。有線通信の例としては、ＵＳＢ、イーサネット（登録商標）等が挙げられる。無線通信の例としては、無線ＬＡＮ、ＮＦＣ（Ｎｅａｒ Ｆｉｅｌｄ Ｃｏｍｕｎｉｃａｔｉｏｎ）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、赤外線通信等が挙げられる。
【0022】
上述の要素の個々は、内部バス１０１を介して相互に接続され、ＣＰＵ１０２は、内部バス１０１を介して其れら要素を制御する。本実施形態では、ＣＰＵ１０２によりプログラムが実行され、即ち、画像処理装置１００はソフトウェアの実行場所（ソフトウェア実行環境）と云える。
【0023】
＜プリンタのハードウェア構成＞
図２は、プリンタ１１２のハードウェア構成の一部を示す模式図である。本実施形態では、プリンタ１１２はインクジェット方式を採用するものとするが、電子写真方式等、他の記録方式が採用されてもよい。プリンタ１１２は、記録ヘッド２０１、インク部２０２および制御回路部２０３を備える。
図２は、プリンタ１１２のハードウェア構成の一部を示す模式図である。本実施形態では、プリンタ１１２はインクジェット方式を採用するものとするが、電子写真方式等、他の記録方式が採用されてもよい。プリンタ１１２は、記録ヘッド２０１、インク部２０２および制御回路部２０３を備える。
【0024】
記録ヘッド２０１は、印刷メディア２０４の幅方向に走査（往復移動）可能に構成され、記録ヘッド２０１に搭載されたインク部２０２から受け取ったインクを印刷メディア２０４に吐出することにより記録を行う。ここでは、４つのインク部２０２が設けられるものとするが、其れらは何色でもよく、同色または同種でもよい。
【0025】
制御回路部２０３は、記録ヘッド２０１を駆動するために必要な記憶部、演算部及び通信部を含む。記録ヘッド２０１は、制御回路部２０３から記録信号および制御信号を受信し、制御信号に基づいて記録信号に応じた記録を行う。記録媒体である印刷メディア２０４は、記録ヘッド２０１により記録が行われている間、不図示の搬送ローラによって搬送され、このようにして、印刷メディア２０４上には画像が形成される。
【0026】
図３は、制御回路部２０３の構成を示すブロック図である。制御回路部２０３は、入力ＩＦ３０１、ＣＰＵ３０２、出力ＩＦ３０３、ＲＯＭ３０４およびＲＡＭ３０５を含む。入力ＩＦ３０１は、プリンタ１１２の外部の画像処理装置等から、画像データと、記録ヘッド２０１を駆動するための制御信号とを入力信号として受け付ける。入力ＩＦ３０１は、画像データと制御信号とをＲＡＭ３０５およびＣＰＵ３０２に送る。
【0027】
これに応じて、ＣＰＵ３０２は、不揮発性メモリであるＲＯＭ３０４に記憶されている制御プログラムを実行して、画像データに対して信号処理を行う。該信号処理された画像データは記録データとして制御信号とともに、出力ＩＦ３０３から出力される。記録ヘッド２０１は、該出力された記録データと、制御信号とに基づいて駆動され、これにより、印刷メディア２０４上に画像が印刷される。
【0028】
＜システム構成＞
図４は、アプリケーション４００およびプリンタ１１２を含む画像処理システムの構成例を示す。アプリケーション４００は、画像処理装置１００で動作し、本実施形態では、表示処理部４０１、画像取得部４０２、付加情報設定部４０３、印刷設定部４０４、印刷データ生成部４０５、データ送受信部４０６および付加情報読み取り部４０７を備える。尚、アプリケーション４００は、必要に応じて他の部（ブロック等と表現されてもよい。）を更に備えていてもよい。
図４は、アプリケーション４００およびプリンタ１１２を含む画像処理システムの構成例を示す。アプリケーション４００は、画像処理装置１００で動作し、本実施形態では、表示処理部４０１、画像取得部４０２、付加情報設定部４０３、印刷設定部４０４、印刷データ生成部４０５、データ送受信部４０６および付加情報読み取り部４０７を備える。尚、アプリケーション４００は、必要に応じて他の部（ブロック等と表現されてもよい。）を更に備えていてもよい。
【0029】
アプリケーション４００は、ＲＯＭ１０３または２次記憶装置１０５にプログラムとして格納されており、ＣＰＵ１０２により読み出されて実行され、これにより、ＣＰＵ１０２はアプリケーション４００の上述の個々の部として機能する。アプリケーション４００は、印刷対象の画像データと、入力された付加情報とに基づいて付加情報が埋め込まれた画像データを生成する機能を備え、また、生成した画像データを印刷するための印刷データをプリンタ１１２に送信する機能を備える。
【0030】
プリンタ１１２は、印刷処理部４０８およびデータ送受信部４０９を備える。印刷処理部４０８およびデータ送受信部４０９は、ＣＰＵ３０２がＲＯＭ３０４に格納されたプログラムを読み出して実行することにより実現される。
【0031】
【0032】
表示処理部４０１は、付加情報として埋め込む文字情報、印刷処理に利用する画像などを画像処理装置１００のディスプレイ１０６に表示する処理を行う。表示処理部４０１は、画像および文字等を選択するボタンならびに印刷設定のリスト等、ユーザインタフェイス（ＵＩ）に関わる情報を表示する機能も備える。
【0033】
図５に例示されるように、画像処理装置１００のディスプレイ１０６には、画像選択ボタン５０１、埋め込み情報設定ボタン５０２および印刷設定ボタン５０３が表示されうる。また、コンテンツ編集エリア５００には、編集中のコンテンツとなる画像が表示されうる。尚、ボタン５０１～５０３は、本例に限られるものではなく、他の名称が付されたものであってもよいし、シンボル化されたアイコンであってもよい。
【0034】
画像取得部４０２は、付加情報が埋め込まれる対象となる画像を取得する。例えば画像選択ボタン５０１が選択されると、画像選択ダイアログ（ダイアログボックス。他の例としてウィンドウであってもよい。）が立ち上がり、これを用いて、ユーザは、画像処理装置１００において利用可能な画像を選択することができる。なお、本実施形態では、ユーザは画像選択ダイアログから画像選択を行うものとしたが、他の実施形態として、ユーザは、別途、内部撮像デバイス１１０を起動して、撮像した画像を利用することも可能とする。画像取得部４０２により取得された画像は、コンテンツ編集エリア５００に表示され、タッチ操作により、拡大・縮小・回転や移動をすることができる。その他、任意の編集が追加的に行われてもよい。
【0035】
図６は、埋め込み情報設定のダイアログ６００の一例を示す。埋め込み情報設定ボタン５０２が押下されると、ディスプレイ１０６には、埋め込み情報設定のダイアログ６００が表示される。付加情報設定部４０３は、埋め込み情報設定のダイアログ６００を通じて編集された情報を、付加情報として設定する。エリア６０１をユーザがタップすると、埋め込みたい情報（付加情報）の編集をユーザが行うことができる。例として「ｈｅｌｌｏ」という文字列を付加情報として埋め込むこととする。
【0036】
ここではテキスト入力を例示するが、他の実施形態として、画像に関する著作権、撮像日時、撮像場所、撮像者等の属性情報が付加情報として埋め込まれてもよい。或いは、ＵＲＬ（Ｕｎｉｆｏｒｍ Ｒｅｓｏｕｒｃｅ Ｌｏｃａｔｏｒ）など、リンク先の情報が付加情報として埋め込まれてもよい。更に他の実施形態として、音声や動画等のように、テキスト以外の情報が付加情報として埋め込まれてもよい。また、共通のデータテーブルがある場合、そのデータテーブルのデータを識別するための識別情報が付加情報として埋め込まれてもよい。
【0037】
ユーザは、入力を完了した場合には決定ボタン６０２を押下し、キャンセルする場合にはキャンセルボタン６０３を押下することができる。
【0038】
なお、付加情報の埋め込みは、ユーザが埋め込みたい付加情報を意識的に入力する形態（図６参照）でもよいし、ユーザが意識しない形で付加情報をアプリケーション４００が入力する形態でもよい。例えば、選択した画像がＪＰＥＧ画像でＥｘｉｆ（Ｅｘｃｈａｎｇｅａｂｌｅ Ｉｍａｇｅ Ｆｉｌｅ Ｆｏｒｍａｔ）タグに情報が埋め込まれていた場合には、画像の撮影日時、撮影場所等の情報が自動的に埋め込まれうる。
【0039】
図７は、印刷設定ダイアログ７００の一例を示す。印刷設定ボタン５０３が押下されると、ディスプレイ１０６には、印刷設定ダイアログ７００が表示される。ユーザは、印刷設定ダイアログ７００を通じて、プリンタの選択、用紙種別の選択、用紙サイズの選択、フチあり／なし印刷の設定を行うことができる。
【0040】
プリンタ選択リスト７０１がタップされると、使用可能なプリンタのリストが表示され、ユーザは任意のプリンタを選択することができる。用紙種別リスト７０２がタップされると、使用可能な用紙種別のリストが表示され、ユーザは任意の用紙種別を選択することができる。用紙種別としては、例えば、光沢紙、マット紙、普通紙等が挙げられる。用紙サイズ選択リスト７０３がタップされると、用紙種別リスト７０２で選択されている用紙種別で使用可能な用紙サイズのリストが表示され、ユーザは任意の用紙サイズを選択することができる。また、ユーザは、印刷フチ設定７０４をタップすることにより、印刷時のフチ設定（フチあり／フチなし）を行うことができる。フチあり印刷とは、印刷物の四辺に余白ができる印刷方法であり、フチなし印刷とは、用紙に余白が生じないように印刷する印刷方法のことである。
【0041】
印刷ボタン７０５が押下されると、印刷設定部４０４は、印刷設定を印刷データ生成部４０５に送信し、印刷工程に移行する。キャンセルボタン７０６が押下されると、印刷は実行されずに前画面に戻ることとなる。
【0042】
なお、印刷設定ダイアログ７００に表示されるプリンタの印刷設定に関する情報は、予め情報処理装置に保持されていてもよいし、ネットワーク１１３を通じてサーバ１１４やプリンタ１１２から適宜ダウンロードされてもよい。
【0043】
印刷データ生成部４０５は、コンテンツのレンダリング処理、付加情報の埋め込み処理、および、プリンタ１１２で印刷するために必要なデータの生成処理を行う。レンダリング処理では、印刷データ生成部４０５は、画像取得部４０２により取得されてコンテンツ編集エリア５００に表示されたコンテンツから、印刷に用いる画像データを生成する。付加情報の埋め込み処理では、印刷データ生成部４０５は、該レンダリング処理で生成された画像データに、付加情報設定部４０３で設定した付加情報を埋め込む。尚、付加情報の埋め込み処理は多重化処理と表現されてもよい。
【0044】
印刷データの生成に使用されるコンテンツは、ウェブ標準言語（ＨＴＭＬ（Ｈｙｐｅｒ Ｔｅｘｔ Ｍａｒｋｕｐ Ｌａｎｇｕａｇｅ）、ＣＳＳ、ＪａｖａＳｃｒｉｐｔ（登録商標）等）を用いて記述されうる。本実施形態では、ＨＴＭＬにおけるグラフィック表記手法の一つであるＳＶＧ（Ｓｃａｌａｂｌｅ Ｖｅｃｔｏｒ Ｇｒａｐｈｉｃｓ）が用いられるものとする。しかし、これに限定されるものではなく、例えば、ＨＴＭＬでグラフィックを記述するのに使用されるＣａｎｖａｓが用いられてもよい。
【0045】
図８（ａ）及び８（ｂ）は、本実施形態において印刷に使用するコンテンツを記述した例を示す。図８（ａ）は、画像を１枚のみ配置した場合におけるコンテンツのＳＶＧの記述の一例の概略を示す。尚、図中の左端の数字は行番号を示す。
【0046】
図８（ａ）によれば、第１行目は、コンテンツがＳＶＧによって記述されていること、および、ＳＶＧのサイズを示す。第２行目は、コンテンツに追加された画像に関する記述を示す。本実施形態では、アプリケーション４００は、画像１枚のみのコンテンツを作成する形態とするが、これにテキスト、スタンプ等が追加された形態であってもよい。その場合、該追加されたテキスト、スタンプ等の情報がＳＶＧによって記述される。
【0047】
次に、図９を参照しながら、印刷データ生成部４０５が、ＳＶＧで記述された上記コンテンツのレンダリング処理を実行し、付加情報の埋め込み処理を施して印刷データの生成を行うまでの処理について述べる。
【0048】
図９は、印刷データ生成部４０５で行われる印刷データ生成処理の一例を示すフローチャートである。
【0049】
まず、Ｓ９０２（以下、単に「Ｓ９０２」と示す。後述の他のステップについても同様とする。）では、印刷データ生成部４０５は、用紙設定に応じたレンダリングサイズを決定する。例えば、用紙設定がＬ版、フチありで印刷解像度が３００ｄｐｉであった場合、レンダリングサイズは横幅９５０ｐｘ（ピクセル）×縦幅１４００ｐｘとなる。
【0050】
なお、印刷設定として３００ｄｐｉ以外の印刷解像度が設定可能である場合、他の印刷解像度に対応するレンダリングサイズが決定される。例えば、上述のように用紙設定がＬ版、フチありで、印刷解像度が６００ｄｐｉの場合、レンダリングサイズとして１９００ｐｘ×２８００ｐｘが算出される。
【0051】
Ｓ９０３では、印刷データ生成部４０５は、コンテンツであるＳＶＧの一部を印刷用に書き換える。ここでは、Ｓ９０２で決定されたレンダリングサイズに合うように、ＳＶＧの横幅および縦幅を、プリンタ１１２へ送信する画像サイズに基づいて変更する。具体的には、図８（ａ）のＳＶＧの第２行目と第３行目のｗｉｄｔｈが「９５０」に、ｈｅｉｇｈｔが「１４００」に、第２行目のｖｉｅｗＢｏｘが「０ ０ ９５０ １４００」に変更される。書き換えられたＳＶＧの例を図８（ｂ）に示す。
【0052】
Ｓ９０４では、印刷データ生成部４０５は、画像処理装置１００の不図示のＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）に対して画面生成を要求する。ここでは、Ｓ９０３にて書き換えられたＳＶＧを参照して、９５０ｐｘ×１４００ｐｘの領域の情報が取得される。そして、ＯＳによって、ＳＶＧ用の画面生成（９５０ｐｘ×１４００ｐｘ）が実行される。ここで、ＳＶＧのサイズに関する情報は、ＳＶＧ自体ではなく、アプリケーション４００に保持されてもよい。その後、ＯＳが生成する画面は、ＵＩには表示されない画面がオフスクリーン画面として生成される。
【0053】
Ｓ９０５では、印刷データ生成部４０５は、ステップＳ９０４で生成された画面にＳＶＧを描画するようにＯＳに対して要求する。ＯＳは、ＳＶＧの情報をロードする。ＳＶＧの情報がロードされたタイミングで、アプリケーション４００はＯＳからロード完了の通知を受け取る。この通知は、ＯＳに標準的に備えられた機能を利用して行われればよい。アプリケーション４００は、ロード完了通知を受け取ると、ＳＶＧの描画が完了したものと判定して次のステップに進む。
【0054】
Ｓ９０６では、印刷データ生成部４０５は、ＯＳに対しコンテンツの画像データを要求する。ここでいう画像データとは、オフスクリーン画面に表示されているコンテンツのＲＧＢＡデータである。Ｓ９０６は、端的には、画面キャプチャを実行するステップと云える。ＯＳは、アプリケーション４００からの要求に応じて、コンテンツが描画されたオフスクリーン画面の画面キャプチャを実行し、取得したＲＧＢＡデータをアプリケーション４００へ送信する。
【0055】
Ｓ９０７では、印刷データ生成部４０５は、Ｓ９０６で取得されたＲＧＢＡデータに対して付加情報の埋め込み処理を行う。付加情報は、視認されにくくなるように画像中に埋め込まれ、付加情報設定部４０３により設定されたものが使用される。付加情報の埋め込み処理の詳細については後述とする。Ｓ９０６にてＯＳから取得されたＲＧＢＡデータにはＡ（Ａｌｐｈａ。ここでは透過度。）の情報が含まれている。本実施形態では、この透過度の情報は印刷には用いられないので削除されてＲＧＢデータとして付加情報の埋め込み処理が行われる。
【0056】
Ｓ９０８では、印刷データ生成部４０５は、付加情報の埋め込み処理後のＲＧＢデータをＪＰＥＧ画像データへ変換する。なお、本実施形態では画像データをＪＰＥＧに変換する態様を例示するが、公知の他の態様が採用されてもよく、例えば、ＰＤＦ（Ｐｏｒｔａｂｌｅ Ｄｏｃｕｍｅｎｔ Ｆｏｒｍａｔ）が採用されてもよい。
【0057】
Ｓ９０９では、印刷データ生成部４０５は、プリンタ１１２に送信するためのプリントコマンドを、Ｓ９０８にて生成されたＪＰＥＧ画像データに付加する。ここで、ＪＰＥＧ画像データに付加するデータは、前述の印刷設定の情報を基に生成される。付随的に、Ｓ９０９において、印刷データ生成部４０５は、必要に応じて、プリンタ１１２を制御するためのコマンドを付加してもよい。
【0058】
図１０は、印刷データのプリントコマンドの例を示す。ここでは、プリントコマンドとして、ＸＭＬ形式で記述されたコマンドが使用される。第３行目から第５行目には、「Ｌ版サイズの光沢紙に対して標準モードで印刷する」ことを示すプリンタ用の設定が記述されている。また、第７行目から第９行目には、印刷データは「横幅９５０、縦幅１４００のＪＰＥＧデータ」ということが記述され、第１０行目には、Ｓ９０９で変換されたＪＰＥＧデータが挿入されることが記述されている。
【0059】
プリンタ１１２は、画像データ（ＪＰＥＧデータ）と共に上述のようなプリントコマンドを受け取ることで印刷を実行する。以上のステップにより、印刷データ生成部４０５で行われるレンダリング処理、付加情報の埋め込み処理および印刷データの生成処理が終了する。
【0060】
再び図４を参照すると、画像処理装置１００側のデータ送受信部４０６は印刷データをプリンタ１１２に送信する。アプリケーション４００は、ＯＳに対して印刷データの送信を要求し、ＯＳはアプリケーションから受け取ったデータをプリンタ１１２へ送信する。データの送信は、画像処理装置１００とプリンタ１１２とを通信可能な公知の方式で実現されればよく、ここでは無線ＷｉＦｉにより行われるものとする。他の例として、データの送信は、有線により行われてもよく、例えば、画像処理装置１００とプリンタとをＵＳＢポートで接続することにより実現されてもよい。この場合、該データは、画像処理装置１００のプリンタドライバによりプリンタ１１２で印刷可能なラスターデータに変換され、そのラスターデータがＵＳＢポートでプリンタ１１２に送信されればよい。或いは、ラスターデータがプリンタ１１２にて印刷可能なデータに変換され、印刷が行われてもよい。
【0061】
プリンタ１１２において、データ送受信部４０９は、画像処理装置１００から印刷データを受信する。データ送受信部４０９は、該受信した印刷データに含まれるプリントコマンドを解析し、その解析により得られた用紙サイズおよび用紙の種類などを示す印刷設定情報を印刷処理部４０８に送る。また、データ送受信部４０９は、印刷データに含まれるＪＰＥＧファイルを復号化処理して画像データに変換し、変換後の画像データを印刷処理部４０８に送る。
【0062】
ここで、通常の印刷時において、印刷設定情報に補正処理情報が含まれている場合には、画像データに対して画像補正処理を実行可能である。画像補正処理の例としては、明度調整、コントラスト調整、カラーバランスの調整のほか、写真印刷を想定した逆光補正や赤目補正など、公知の画像処理が挙げられる。尚、付加情報が埋め込まれた画像を印刷する場合には、画像処理によって該埋め込まれた情報が消失ないし損失する可能性があるため、画像補正処理の実行は抑制されうる。上述の画像補正処理を実行する場合には、アプリケーション４００で印刷データを生成する前（付加情報を埋め込む前）に画像補正処理が実行されるとよい。
【0063】
印刷処理部４０８は、データ送受信部４０９から受け取った画像データを、プリンタ１１２による出力の際に好適な色で出力されるように色分解してインク色データに変換する。インク色データへの変換は、画面表示に利用する画像フォーマット（ＲＧＢ）から印刷用のインク色（ＣＭＹＫ）に変換する公知の色変換処理のいずれが行われてもよい。
【0064】
例えば、プリンタ１１２のインク色として、シアン（Ｃ）、マゼンタ（Ｍ）、イエロー（Ｙ）およびブラック（Ｋ）の４色の場合を想定する。印刷処理部４０８は、入力されたレッド（Ｒ）、グリーン（Ｇ）およびブルー（Ｂ）の３色から成るデータを、Ｃ，Ｍ，Ｙ及びＫの４色のインク色データに変換する。該変換の際には、色分解テーブルが用いられうる。色分解テーブルは、Ｒ，Ｇ及びＢの３つの値の入力を受けて、其れらをＣ，Ｍ，Ｙ及びＫのインク色の値に変換する３次元のルックアップテーブルである。このようにして、印刷処理部４０８は、入力された画像データの画素毎に、色分解テーブルを利用して、Ｒ，Ｇ及びＢの値をＣ，Ｍ，Ｙ及びＫのインク色の値に変換する。
【0065】
更に、印刷処理部４０８は、ルックアップテーブル等に設定された画像処理パラメータを用いて、出力階調補正やハーフトーニング等の画像処理を行うことができ、それによりインク色データを印刷出力用データに変換する。
【0066】
上記変換された印刷出力用データは、制御回路部２０３に送信される。制御回路部２０３は、上述のようにして得られた印刷出力用データに基づいて印刷メディア２０４にインクを吐出して画像を形成する。以上のステップにより、印刷データの印刷処理が終了する。
【0067】
以上のようにして得られた印刷物（画像の形成の完了した印刷メディア２０４）には付加情報が埋め込まれている。アプリケーション４００の付加情報読み取り部４０７は、付加情報が埋め込まれた印刷物から、付加情報を読み出して抽出する処理を行う機能を備える。付加情報の抽出処理の詳細については後述する。
【0068】
なお、図４の例では、アプリケーション４００が付加情報の埋め込みと読み出しとの双方を行うことが可能な態様を示したが、付加情報の埋め込みと読み出しとは互いに異なるアプリケーションにより個別に行なわれてもよい。
【0069】
＜付加情報の埋め込み処理＞
図１１は、アプリケーション４００（主に印刷データ生成部４０５）により行われる埋め込み処理であってレンダリング後の画像データに対して付加情報を埋め込む埋め込み処理についてのフローチャートである。端的には、本フローチャートは、図９のステップＳ９０７の詳細を示す。
図１１は、アプリケーション４００（主に印刷データ生成部４０５）により行われる埋め込み処理であってレンダリング後の画像データに対して付加情報を埋め込む埋め込み処理についてのフローチャートである。端的には、本フローチャートは、図９のステップＳ９０７の詳細を示す。
【0070】
Ｓ１１０１では、印刷データ生成部４０５は、付加情報をバイナリデータに変換する。ここでは、付加情報の一例として、「ｈｅｌｌｏ」という文字列が入力された場合を考える。バイナリデータとは、「０」または「１」の情報であり、これらを連続で並べることによりバイナリデータに特定の意味を持たせることができる。バイナリデータと文字との対応は「文字コード」とも称されるコードで定義される。例えば、文字コードの一例である「シフトＪＩＳ」によれば、「ｈ」はバイナリデータ「０１１０１０００」に対応しうる。同様に、「ｅ」は「０１１００１０１」に対応し、「ｌ」は「０１１０１１００」に対応し、「ｏ」は「０１１０１１１１」に対応しうる。
【0071】
即ち、上記「ｈｅｌｌｏ」という文字は、バイナリデータ「０１１０１００００１１００１０１０１１０１１０００１１０１１０００１１０１１１１」と表現されうる。一方、「０１１０１００００１１００１０１０１１０１１０００１１０１１０００１１０１１１１」というバイナリデータが取得された場合には「ｈｅｌｌｏ」という文字が取得されることとなる。このように、「０」または「１」を判定可能にバイナリデータが埋め込まれることで、付加情報の埋め込みが実現される。
【0072】
図１２（ａ）及び１２（ｂ）は、画像に対してバイナリデータ「０」または「１」の情報を埋め込む方法の幾つかの例を示す。
【0073】
図１２（ａ）に示されるパターンはバイナリデータ「０」を表し、図１２（ｂ）に示されるパターンバイナリデータ「１」を表し、また、これらは何れも８ｐｘ×８ｐｘで構成されるものとする（図中の１個分の矩形が１ｐｘ（１画素）を示す。）。印刷データ生成部４０５は、これらのパターンを用いて「０」および「１」のバイナリデータで構成された付加情報を画像に埋め込み、画像内の８×８の領域に対して、周期性を有するパターン（或いは周期的なパターン）を重畳ないし付与する。
【0074】
画像へのパターンの埋め込み方法の一例としては、例えば、ＲＧＢの値（輝度情報）に、直接、上記周期性を有するパターンを重畳する方式が考えられる。他の例としては、ＲＧＢの値を、輝度－色差情報など、他の色空間情報（例えばＣＩＥ Ｌ＊ａ＊ｂ＊、ＹＣｒＣｂ信号）に分離して上記埋め込みが実現されてもよい。更に他の例としては、ＲＧＢの値をインク色（例えばＣＭＹＫ信号）に分離して上記埋め込みが実現されてもよい。
【0075】
本実施形態では、説明の簡易化のため、ＲＧＢ成分のＢ成分に上記周期性を有するパターンを重畳する方法が採用されるものとする。ここで、各成分は８ビット（０～２５５）で表現されているものとする。画像へのパターン埋め込みでは、図１２（ａ）および１２（ｂ）にてハッチングされたピクセル部分に対して、Ｂ成分の画素値（Ｂ値）から、例えば３０を減算する処理を行う。
【0076】
付随的に、加算されるピクセル部分が存在すると更によい。減算されるピクセル部分と、加算されるピクセル部分とが実質的に同等数の場合、付加情報が埋め込まれた後の画像における違和感が軽減されうる。
【0077】
図１２（ｃ）および１２（ｄ）は、上記減算されるピクセル部分と、上記加算されるピクセル部分とが混在する場合のパターンを示す（加算されたピクセル部分は、減算されたピクセル部分よりも薄いハッチングで図示される。）。このように、付加情報の埋め込みは、埋め込み対象の画像のＲＧＢデータのうちの何れかに対して所定のパターンを用いた処理を行うことにより実現される。
【0078】
ここで、画像に対して上記周期性を有するパターンを重畳して埋め込む場合、自然界に存在し難いパターンの周期（或いは色の振幅変化）で埋め込まれるとよい。例えば、本実施形態ではＢ成分が増減するものとしたが、Ｂ成分が比較的高い周期で増減するパターンは自然界には存在し難い。このような態様で埋め込みを実現することにより、付加情報の読み取りを行う際に生じうる埋め込み信号と元画像との干渉を軽減可能となる。
【0079】
代替的／付随的に、埋め込み対象の画像に対して、予め、重畳対象となるパターンの周期に対応する周波数についてフィルタリング処理を行うことも考えられる。このことは公知のフィルタを用いて実現可能であり、一例として、ＦＦＴ（高速フーリエ変換）フィルタを用いたフィルタリング処理により実現されうる。即ち、埋め込み対象の画像に対してＦＦＴを実行して空間周波数領域の画像に変換し、重畳対象となるパターンに対応する周波数についてフィルタリング処理を行って逆ＦＦＴを実行することによって、特定周波数についてフィルタリング処理が行われた画像が得られうる。このようにして得られた画像に対して上記埋め込みを行うことにより、付加情報の読み取りを行う際に生じうる上記干渉を軽減可能となる。
【0080】
図１３は、本実施形態に係る付加情報の単位ブロック（多重化ブロック）を示す。本実施形態によれば、単位ブロック１３００内の全情報を読み取ることにより、上記埋め込まれた付加情報が取得される。単位ブロック１３００は、本実施形態では、マーカー部１３０１とデータ部１３０２とを含む２４０ｐｘ×２４０ｐｘで構成されるものとする。
【0081】
マーカー部１３０１は、付加情報の読み取りを行う際に単位ブロック１３００の位置を特定するために利用される８０ｐｘ×８０ｐｘのブロックであり、マーカー部１３０１であることを示す情報が埋め込まれている。マーカー部１３０１であることを示す情報として、本例では図１２（ａ）および１２（ｂ）の組み合わせから成る特定のパターンが付与され、このパターンを検出することでマーカー部１３０１を特定することができる。他の方法として、図１２（ａ）および１２（ｂ）とは異なる周期性（或いは周期の方向）を有するパターンでマーカー部１３０１を構成することも可能である。
【0082】
なお、１００ビットのマーカー部１３０１のデータ内に誤り訂正や誤り検出のデータを含むことで、付加情報の読み取りを行う際のデータの欠損や読み取りの誤りを検出して修正するようにしてもよい。誤り訂正の手法の例として、リード・ソロモン符号やゴレイ符号等が用いられ、誤り検出の手法の例として、ＣＲＣ（Ｃｙｃｌｉｃ Ｒｅｄｕｎｄａｎｃｙ Ｃｈｅｃｋ）等が用いられうる。
【0083】
データ部１３０２は、図１２（ａ）または図１２（ｂ）のパターン１３０３（すなわち「０」か「１」を表すバイナリパターン）が配置される。本実施形態では、データ部１３０２には８００個のパターン１３０３が配置される。パターン１３０３は１つで１ビットの情報を表すことができる。そのため、ブロック１３００全体には８００ビットの情報量が含まれることになる。この８００ビットのバイナリデータに対しても、マーカー部１３０１のバイナリデータ同様、誤り訂正や誤り検出のデータが設けられてもよい。
【0084】
なお、本実施形態では、マーカー部１３０１は、単位ブロック１３００の左上部に配置されているものとするが、右上部や中央部等、他の位置に配置されてもよい。また、マーカー部１３０１は、矩形以外の形状に設けられてもよいし、単位ブロック内に分散して配置されてもよい。
【0085】
図１４は、単位ブロック１３００が繰り返し埋め込まれた印刷メディア２０４を示す。本実施形態によれば、同じ付加情報を表す単位ブロック１３００が、印刷メディア２０４の全面に繰り返し埋め込まれる。尚、印刷設定には、Ｌ版、３００ｄｐｉ印刷、及び、フチあり印刷が設定されているものとする。
【0086】
本実施形態では、Ｓ９０２の処理により、この場合の印刷画像サイズは、横幅９５０ｐｘ×縦幅１４００ｐｘとなる。そのため、２４０ｐｘ×２４０ｐｘの単位ブロック１３００は３行×５列で（計１５ブロックが）配列可能である。印刷メディア２０４に埋め込まれた付加情報を読み出すには、上記繰り返し埋め込まれた複数の単位ブロック１３００のうち、１つ分のデータ部１３０２の読み出しが行われればよい。
【0087】
なお、同じ情報（単位ブロック１３００）を印刷メディア２０４の全面に多く埋め込むことで、付加情報の読み取りを行う際のロバスト性を高めることができる。その理由は、或る単位ブロック１３００では、付加情報を読み出すことができなかったとしても、他の単位ブロック１３００では、付加情報を読み出すことが可能な場合があるからである。
【0088】
なお、ここでは同じ情報（単位ブロック１３００）を繰り返し埋め込む場合を例示するが、本例に限られない。異なる情報（異なる内容のブロック）が画像の全面に埋め込まれてもよい。また、図１４では、印刷メディアの右部分と下部分にはブロックサイズが足りないエリアが存在するが、このエリアにもブロックの一部が埋め込まれうる。
【0089】
再び図１１を参照して、Ｓ１１０２では、印刷データ生成部４０５は、単位ブロック１３００の配置を決定する。印刷データ生成部４０５は、印刷画像の左上を起点に、単位ブロック１３００を配列する。前述の図１４の例は、印刷画像の左上を起点として単位ブロック１３００を配置した例を示している。
【0090】
Ｓ１１０３では、印刷データ生成部４０５は、上記決定された配置でブロック１３００が配列された画像に対して付加情報の埋め込みを行う。付加情報の埋め込みは、埋め込み対象の画像と、図１４のブロック１３００の配置とを対応付けながら、各画素に対して図１２のパターンを重畳することにより行われる。具体的には、図１４の各ブロック１３００内のデータ部１３０２は、図１２（ａ）または図１２（ｂ）のパターンで構成されている。そのため、各パターンにおいてハッチングされたピクセル部分に対して、前述の減算する処理（Ｂ値から３０を減算する処理）を行う。Ｂ値が０を下回る場合には減算後の画素値を０とする。これを画像全体に適用することにより、画像への付加情報の埋め込みが完了となる。
【0091】
以上のようにして、画像に付加情報を埋め込んでプリンタ１１２で印刷することができる。図１２（ａ）～１２（ｄ）のパターンは、埋め込みパターンとも表現されうる。
【0092】
＜付加情報の埋め込み信号強度＞
次に、付加情報の読み取りの際に該読み取りの実現のしやすさに関連する埋め込み信号強度について述べる。上述の説明では、付加情報の埋め込み処理において、Ｂ値を減算（付随的に加算）することで周期的なパターンを形成する例を示したが、減算または加算によりＢ値が０を下回る場合またはＢ値が２５５を上回る場合には、それぞれ、０または２５５に制限される。これにより色の振幅量が低下してしまうこととなるため、本例においては、Ｂ値が０～２９または２２６～２５５の範囲の場合には埋め込み信号強度が低下することになってしまう。また、Ｒ値＝Ｇ値＝Ｂ値＝０の白色およびその近傍の色域においては、Ｂ値の加算により白地に色がついてしまう（Ｒ値はＲ成分の画素値を示し、Ｇ値はＧ成分の画素値を示す。）。そのため、付加情報の埋め込みでは、白色およびその近傍の色域に対しては、埋め込み信号強度を低くし、上述の減算または加算を行わない（または減算量または加算量を減らす）ことが多い。埋め込み信号強度が低いと付加情報を読み取り難く、埋め込み信号強度が高いと付加情報を読み取り難いため、一般に、印刷物内においては付加情報を読み取り易いエリアと付加情報を読み取り難いエリアが混在することになる。
次に、付加情報の読み取りの際に該読み取りの実現のしやすさに関連する埋め込み信号強度について述べる。上述の説明では、付加情報の埋め込み処理において、Ｂ値を減算（付随的に加算）することで周期的なパターンを形成する例を示したが、減算または加算によりＢ値が０を下回る場合またはＢ値が２５５を上回る場合には、それぞれ、０または２５５に制限される。これにより色の振幅量が低下してしまうこととなるため、本例においては、Ｂ値が０～２９または２２６～２５５の範囲の場合には埋め込み信号強度が低下することになってしまう。また、Ｒ値＝Ｇ値＝Ｂ値＝０の白色およびその近傍の色域においては、Ｂ値の加算により白地に色がついてしまう（Ｒ値はＲ成分の画素値を示し、Ｇ値はＧ成分の画素値を示す。）。そのため、付加情報の埋め込みでは、白色およびその近傍の色域に対しては、埋め込み信号強度を低くし、上述の減算または加算を行わない（または減算量または加算量を減らす）ことが多い。埋め込み信号強度が低いと付加情報を読み取り難く、埋め込み信号強度が高いと付加情報を読み取り難いため、一般に、印刷物内においては付加情報を読み取り易いエリアと付加情報を読み取り難いエリアが混在することになる。
【0093】
図１６は、上述の埋め込み信号強度の大小を示す印刷物１６０１の画像データの一例を示す。図中においては、薄い色ほど埋め込み信号強度が低いことを示し、濃い色ほど埋め込み信号強度が高いことを示す。
【0094】
＜付加情報の読み取り処理＞
次に、印刷物から付加情報を読み取る処理について説明する。付加情報の読み取り処理は、アプリケーション４００の付加情報読み取り部４０７（図４参照）によって実行されるが、他の装置のアプリケーションにより行われてもよい。
次に、印刷物から付加情報を読み取る処理について説明する。付加情報の読み取り処理は、アプリケーション４００の付加情報読み取り部４０７（図４参照）によって実行されるが、他の装置のアプリケーションにより行われてもよい。
【0095】
図１５は、付加情報の読み取り処理を行うための画像処理装置１００の構成例を示すブロック図である。画像処理装置１００のアプリケーション４００に含まれる付加情報読み取り部４１１は、画像取得部１５０１、画像特性算出部１５０２、信号強度特定部１５０３、マーカー検出エリア決定部１５０４および付加情報取得部１５０５を備える。
【0096】
画像取得部１５０１は、内部撮像デバイス１１０を制御して、付加情報が埋め込まれた印刷物１６０１の撮像を行い、印刷物１６０１の画像データを取得する。画像データは、静止画データでもよいし、所定のフレームレートで取得された動画データから抜き出された静止画データを使用してもよい。このようにして得られた画像データは画像特性算出部１５０２に送られる。画像データは、ＲＧＢ形式の８ビットデータとして得られるものとし、そのサイズは１０８０×１９２０（２Ｋサイズ）とする。
【0097】
図１６は、上述のようにして得られた画像データの一例を示す。図１６に示されるように、画像処理装置１００の内部撮像デバイス１１０により、付加情報が埋め込まれた印刷物１６０１が撮像され、撮像エリア１６０４の画像データが取得される。付加情報の取得は、撮像エリア１６０４内のマーカー検出エリア１６０５の解析により行われる。付加情報の取得は、計算量の低減のため、撮像エリア１６０４全体に対してではなく、一部エリアに対して行われる。
【0098】
画像特性算出部１５０２は、印刷物１６０１の画像データ内の複数の小エリアから画像特性を取得する。画像特性の算出に際しては、周波数解析により得られる空間周波数情報が使用されうる。
【0099】
図１７（ａ）は、上述の周波数解析についての説明図を示す。図中の撮像エリア１６０４内に複数配置されている小エリア１７０１は周波数解析に用いられる。
【0100】
図１８は、画像特性の算出方法の一例を示すフローチャートを示す。Ｓ１８００では、パラメータｉ＝０を設定する。
【0101】
Ｓ１８０１では、複数の小エリア１７０１のトリミング処理を行う。小エリア１７０１を解析サイズとし、１２８ｐｘ×１２８ｐｘサイズでトリミングする。本実施形態では、１２８ｐｘ×１２８ｐｘサイズで解析を行うものとするが、必ずしもこのサイズである必要はない。ただし、後述の空間周波数領域に変換する処理のため、２のべき乗サイズ（例えば、６４ｐｘ×６４ｐｘ、２５６ｐｘ×２５６ｐｘ等）とするとよい。
【0102】
Ｓ１８０２では、Ｓ１８０１で得られたトリミング画像について空間周波数領域に変換する変換処理を行い、本実施形態では２次元のＦＦＴを行う。このようにして得られる画像をＦＦＴ画像と表現する。尚、ＦＦＴのアルゴリズムについては公知の技術が使用されればよい。
【0103】
図１９（ａ）は、画像データの一部を空間周波数領域に変換して実際に得られたＦＦＴ画像の一例を示す。画像の中心を原点とすると、横軸が水平方向の周波数、縦軸が垂直方向の周波数を表し、原点から遠いほど高周波域であることを示す。ここで示されたＦＦＴ画像は、実部と虚部の絶対値の和を各周波数に対応する画素毎に求め、その最大値と最小値（ゼロ）で正規化したものをそれぞれの画素の画素値としたものである。正規化は０～２５５（最大値）で行い、モノクロ８ビット画像とする。このようにして得られたモノクロ８ビットのＦＦＴ画像は、小エリア１７０１の画像特性を表す情報として用いられる。
【0104】
Ｓ１８０３では、パラメータｉに基づいて、すべてのエリアの画像特性の算出が完了したか否かを判定する。算出が完了していない場合は、Ｓ１８０４にてパラメータｉに１を加算して、次のエリアの画像特性を算出するためＳ１８０１に戻る。全てのエリアの画像特性の算出が完了していた場合（パラメータｉが所定値に達した場合）には、画像特性としてＦＦＴ画像を信号強度特定部１５０３に送信する。
【0105】
信号強度特定部１５０３は、画像特性算出部１５０２で得られた小エリア１７０１の特性情報（ＦＦＴ画像）を使用して、小エリア１７０１ごとの特徴量を算出し、それらの相対比較に基づいて付加情報の埋め込み位置および埋め込み信号強度を特定ないし推定する。尚、信号強度特定部１５０３は、信号強度推定部１５０３と表現されてもよいし、或いは、単に特定部または推定部と表現されてもよい。
【0106】
図１６に示されるように、印刷物１６０１の画像データ内には、印刷物１６０１に埋め込まれた前述の２つの埋め込みパターン（図１２（ａ）及び１２（ｂ）参照）が含まれている。そのため、画像データからトリミングされた一部を空間周波数領域に変換すると、２つの埋め込みパターンの周期性（或いは周期の方向）に対応する周波数においてパワースペクトルのピークを呈する。ＦＦＴ画像は、原点に対して反対側にも同じパワースペクトルのピークを呈する。図１９（ａ）からも分かるように、空間周波数領域では、中央部の直流成分の他、４つのパワースペクトルのピークを呈する。
【0107】
前述の小エリア１７０１の特徴量として、小エリア１７０１のパワースペクトルの演算値（例えば平均値や最大値など）を使用することも考えられるが、その場合、埋め込みパターンとは異なる成分（例えば、現画像に含まれる周期性を有する成分）がノイズとして混入してしまう。そこで、本実施形態では、埋め込みパターンのパワースペクトルのピーク（付随的に、その近傍）の成分を抽出して上記特徴量とする。尚、パワースペクトルのピークは以下の説明において単にピークと表現されうる。
【0108】
図１９（ｂ）は、ＦＦＴ画像内の小エリアの分割態様の他の例を示す。内部撮像デバイス１１０と印刷物１６０１との間で傾き（回転）が生じていない場合、埋め込みパターンに対応するピークは、ライン１９０１及び１９０２の上に呈される。ただし、ピークを呈する周波数は、内部撮像デバイス１１０と印刷物１６０１との間の距離によって変動する。例えば、この距離が近い場合には低周波側にピークが呈され、この距離が遠い場合には高周波側にピークが呈される。図１９（ｂ）の例では、原点付近の低周波領域を除き、低周波側からＡ～Ｆの６つの小エリアがリング状に設定される。
【0109】
この例においては、前述のピークがこれらリング状の小エリアの何れに含まれるかを判定する。例えば、複数の小エリアの個々に含まれるパワースペクトルの最大値を求め、複数の小エリアのうち該最大値が最も大きいものを、ピークが存在する小エリアと判定する。或いは、複数の小エリアの個々に含まれるパワースペクトルの平均値を求め、複数の小エリアのうち該平均値が最も大きいものを、ピークが存在する小エリアと判定してもよい。
【0110】
次に、傾き（回転）に対応したピークの抽出を行う。内部撮像デバイス１１０と印刷物１６０１との間で傾き（回転）が生じていた場合、図１９（ｃ）に示されるように、ピークは、その位置が位置ａ～ｉ間で回転して呈される。すなわち、ライン１９０１及び１９０２が回転する。尚、位置ａ～ｉは１０°間隔で配置される。
【0111】
ここでは一例として、リング状の小エリア１９０３（エリアＡ～Ｆ）のうちエリアＣでピークが検出された場合を考える。上記傾き（回転）が生じていない場合には、小エリア１９０３における４つのピークは位置ａに現れる。これに対し、上記傾き（回転）が左回り（反時計回り）に１０°に生じていた場合には、ピークは位置ｂに現れる。同様に、上記傾き（回転）が右回り（時計回り）に３０°傾いていた場合、ピークは位置ｇに現れる。
【0112】
このようにして、ピークの位置を検出することにより上記傾き（回転）を判定可能となる。具体的には、位置ａ～ｉの個々に含まれるパワースペクトルの平均値Ｘを位置ごとに算出し、平均値Ｘが最大になる位置に対応する傾きが発生していると判定される。前述の特徴量としては、この平均値Ｘの値を利用可能である。
【0113】
なお、本実施形態では、リング状の小エリア１９０３の判定後、上記傾きの判定を行っている。これにより、リング状の小エリア１９０３外に局所的に強いパワースペクトルのピークがノイズとして生じていた場合に上記傾きの誤検出を軽減できる。
【0114】
図１７（ｂ）は、図１７（ａ）の個々の小エリア１７０１に対して特徴量を算出した結果を示す。色が濃い小エリア１７０１は埋め込み信号強度が高いため、特徴量の数値が高くなり、また、色が薄い小エリア１７０１は埋め込み信号強度が低いため、特徴量の数値が低くなる。つまり、個々の小エリア１７０１の位置と、その特徴量とに基づいて、付加情報の埋め込み位置および埋め込み信号強度を特定可能である。本例の場合、右上部の円形が含まれる小エリア１７０１は相対的に埋め込み信号強度が低く、右下部の矩形が含まれる小エリア１７０１は相対的に埋め込み信号強度が高い。
【0115】
上記特定された埋め込み位置および埋め込み信号強度を示す情報は、それぞれ、埋め込み位置情報および埋め込み信号強度情報表現される。本実施形態では、２次元配列ＩＮＦＯ［Ｘ］［Ｙ］に格納された埋め込み信号強度が使用される。信号強度は、整数型で０～２５５で表現され、また、Ｘ及びＹは、それぞれ、図１７（ｂ）に示される小エリア１７０１の横方向及び縦方向の座標値に相当するインデックス値である。埋め込み位置情報と埋め込み信号強度情報は、マーカー検出エリア決定部１５０４に送信される。
【0116】
マーカー検出エリア決定部１５０４は、上述の埋め込み位置情報および埋め込み信号強度情報に基づいて、図１６の撮像画像１６０４内のマーカー検出エリア１６０５の位置を決定する。より具体的には、マーカー検出エリア１６０５の位置は、マーカー検出エリア１６０５内に含まれる小エリア１７０１の埋め込み信号強度の平均値が最も大きくなるように決定される。
【0117】
図２０は、マーカー検出エリア１６０５の位置を決定する方法の一例を示すフローチャートである。ここでは、簡単のため、マーカー検出エリア１６０５は、小エリア１７０１が４行×４列で配列されたサイズとし、また、小エリア１７０１間のマージンは０とする。つまり、マーカー検出エリア１６０５のサイズは５１２ｐｘ×５１２ｐｘとする。
【0118】
Ｓ２００１では、変数（Ｍａｘ、Ａｖｅ、Ｘ、Ｙ、ＸｍａｘおよびＹｍａｘ）の初期化を行う。変数Ｍａｘは、埋め込み信号強度の最大値を格納する変数であり、初期値は０である。変数Ａｖｅは、埋め込み信号強度の平均値を格納する変数であり、初期値は０である。変数Ｘ及びＹは、それぞれ、撮像画像１６０４内の小エリア１７０１の横方向及び縦方向の座標値に相当する変数であり、初期値はいずれも０である。尚、図１７（ｂ）では、撮像画像１６０４の左上部に位置する小エリア１７０１はＸ＝０かつＹ＝０であり、撮像画像１６０４の右下部に位置する小エリア１７０１はＸ＝７かつＹ＝１３となる。変数Ｘｍａｘ及びＹｍａｘは、それぞれ、埋め込み信号強度が最大となるＸ値及びＹ値を格納するための変数であり、初期値はいずれも０である。
【0119】
Ｓ２００２では、変数Ｘ及びＹを左上部の起点とした４行×４列の小エリア１７０１の埋め込み信号強度ＩＮＦＯ［Ｘ］［Ｙ］の平均値Ａｖｅを算出する。
【0120】
Ｓ２００３では、平均値Ａｖｅと最大値Ｍａｘとの比較を行う。平均値Ａｖｅの方が最大値Ｍａｘより大きい場合、Ｓ２００４に進む。最大値Ｍａｘの初期値は０であるため、平均値Ａｖｅが０でない限りは初回では平均値Ａｖｅの方が最大値Ｍａｘより大きいと判定される。平均値Ａｖｅが最大値Ｍａｘ以下の場合、Ｓ２００５に進む。
【0121】
Ｓ２００４では、最大値Ｍａｘの更新を行う。最大値Ｍａｘに平均値Ａｖｅを格納し、その時の座標値Ｘ及びＹをそれぞれ変数Ｘｍａｘ及びＹｍａｘに格納し、その後、Ｓ２００５に進む。Ｓ２００２～Ｓ２００４により単一の小エリア１７０１についての探索が完了となる。
【0122】
Ｓ２００５では、マーカー検出エリア１６０５の全てについて探索が完了したか否かを判定する。本例では、Ｘ＝４かつＹ＝１０に達した時点で完了となる。探索が完了していた場合には本フローチャート終了とする。探索が完了していない場合には座標値Ｘ及びＹを更新してＳ２００２に戻る。座標値Ｘ及びＹは、例えば座標値Ｘを１ずつインクリメントし、探索の右端であるＸ＝４を超えた場合には座標値Ｘを０に戻し、座標値Ｙを１インクリメントする。一連の探索において、座標値Ｘ、Ｙのインクリメントの順番は逆であってもよい。
【0123】
以上により、マーカー検出エリア１６０５内に含まれる小エリア１７０１の埋め込み信号強度の平均値Ａｖｅが最大となる座標値Ｘ及びＹの位置がそれぞれ変数Ｘｍａｘ及びＹｍａｘとして得られる。これら変数Ｘｍａｘ及びＹｍａｘを撮像画像１６０４内の座標系に変換し、マーカー検出エリア１６０５の位置として決定する。今回の例では、変数Ｘｍａｘ＝４かつ変数Ｙｍａｘ＝９が得られ、マーカー検出エリア１６０５の撮像画像１６０４内の位置はｘ＝５１２＋α、かつ、ｙ＝１１５２＋βとなる。ここで、上述のｘ及びｙは、それぞれ、撮像画像１６０４の左上座標をｘ＝０かつｙ＝０とした時の座標である。尚、α及びβは、図１７（ｂ）の左上座標と、図１７（ａ）の撮像画像１６０４の左上座標と、のずれを補正するためのオフセット量とする。
【0124】
今回の例では、オフセット量αは、撮像画像１６０４の横方向のサイズ１０８０ｐｘから１２８ｐｘ×８＝１０２４ｐｘを減算した５６ｐｘを２で除算したα＝２８ｐｘとなる。同様に、オフセット量βは、縦方向のサイズ１９２０ｐｘから１２８ｐｘ×１４＝１７９２ｐｘを減算した１２８ｐｘを２で除算したβ＝６４ｐｘとなる。よって、マーカー検出エリア１６０５の位置は、ｘ＝５４０ｐｘ、かつ、ｙ＝１２１６ｐｘとなる。
【0125】
上述の説明では、マーカー検出エリア１６０５を、小エリア１７０１のサイズである１２８ｐｘずつずらしながら探索して、埋め込み信号強度が最大となる位置を検索する態様を例示した。しかしながら、マーカー検出エリア１６０５のサイズは、必ずしも小エリア１７０１のサイズの倍数でなくてもよいし、探索は、１ｐｘずつずらしながら行われてもよい。尚、マーカー検出エリア１６０５内に小エリア１７０１全体が入らない場合が考えられるが、その場合、マーカー検出エリア１６０５内に含まれる小エリア１７０１部分の面積比によってマーカー検出エリア１６０５全体の埋め込み信号強度が算出されればよい。
【0126】
また、本実施形態では、マーカー検出エリア１６０５の位置を、マーカー検出エリア１６０５内に含まれる小エリア１７０１の平均値が最大となるように決定したが、平均値ではなく、他の演算値（例えば中央値や最大値など）が使用されてもよい。
【0127】
付加情報取得部１５０５は、マーカー検出エリア決定部１５０４で決定されたマーカー検出エリア１６０５に対して、マーカー検出を実行し、付加情報を取得するための制御を行う。
【0128】
まず、マーカーの位置検出について説明する。本実施形態では、図１２（ａ）及び１２（ｂ）に示される２つのパターンが画像に埋め込まれている。埋め込み例ではＲＧＢのＢ成分に３０の減算を行っている。これにより、図１２（ａ）および図１２（ｂ）のパターンは、特定の２つの方向に比較的大きなパワースペクトルを呈し、このことは、図１８（ａ）及び１８（ｂ）からも明らかである。付加情報取得部１５０５は、８ｐｘ×８ｐｘの局所エリアにおいて、このパワースペクトルを検出することにより、「０」か「１」のデータ抽出を行う。なお、該検出の前処理として、エッジ検出やシャープネス処理を行うことにより、パワースペクトルを強調することも可能である。
【0129】
周波数解析による上記データ抽出を行うのに際しては、画像データのマーカー検出エリア１６０５からマーカーを正確に切り出すことが必要となる。特に、スマートフォン等の携帯端末を用いた撮像の場合、撮像距離が一定となり難いことから、距離を補正して図１２（ａ）等の８ｐｘ×８ｐｘのパターンを正確に切り出すための処理が行われる。該補正の方法の例としては、前述のリング状の小エリア１７０１の解析（図１９（ｂ）参照）が挙げられる。マーカー検出エリア１６０５をＦＦＴにより空間周波数領域に変換した後、リング状の小エリア１７０１についての上記解析によって、ピークが検出される小エリア１７０１を判定する。そして、該判定されたリング状の小エリア１７０１に対応する撮像距離と、読み取り基準となる撮像距離との関係に基づいて、画像の拡縮率を算出し、該拡縮された画像に対して、その後の処理を行う。上記補正は、撮像画像に対して前処理として実行されるとよい。他の実施形態として、予め設定された複数段階の拡縮率でマーカー検出エリア１６０５の画像を拡縮し、その後の処理を行うことも可能である。
【0130】
次に、座標位置のずれを補正する処理が行われる。この方法の一例としては、画像内からの８ｐｘ×８ｐｘの切り出しと周波数解析とを、横方向および縦方向に１ｐｘずつずらしながら（即ち、横８回×縦８回の計６４回。）繰り返し行い、それらのうち、最もパワースペクトルが強くなる箇所を、切り出しの基準位置とすることが挙げられる。
【0131】
上述の切り出しの基準位置の検出が完了した後、マーカー検出を行う。図１３の例によれば、マーカー検出に際して、まず、特定のバイナリパターンから成る単位ブロック１３００のマーカー部１３０１を検出する。マーカー部１３０１には、図１２（ａ）または１２（ｂ）の８ｐｘ×８ｐｘのパターンが所定のルールに従って１０行×１０列の計１００個配置される。そして、マーカー検出エリア１６０５内に、このパターンが存在するか否か（すなわち、１００ビット分の「０」又は「１」の数列が取得可能か否か）の検査が行われる。具体的には、上記１００個のデータ抽出がマーカー検出エリア１６０５内の位置を８ｐｘずつずらしながら実行し、上記パターンと一致する箇所を検出する。なお、１００ビット内に前述の誤り検出や誤り訂正のデータが含まれている場合、該取得されたデータに対して誤り検出や誤り訂正が行われる。
【0132】
マーカー部１３０１が検出された後、マーカー部１３０１の位置を基準としてデータ部１３０２から付加情報の抽出（或いは分離と表現されてもよい。）を行う。付加情報の抽出は、上述の単位ブロック１３００では、部分的にのみ抽出が行われてしまう場合があるが、その場合には抽出が行われなかった他の部分のデータを他のブロックのデータで補って、データを完成させてもよい。すなわち、付加情報の抽出は、第１のブロックで第１の部分のデータを抽出し、第１のブロックとは別の第２のブロックで、第１の部分以外の第２の部分のデータを抽出することで行なわれてもよい。図１３の例では、データが完成すると、８００ビット分の「０」又は「１」数列が得られる。付加情報のデータに対しても、マーカー部１３０１同様に誤り検出や誤り訂正のデータが含まれている場合には、取得されたデータに対して誤り検出や誤り訂正が行われる。
【0133】
上述のようにして付加情報の抽出が完了した後、付加情報として抽出された数値列に対してデータの解析を行い、埋め込まれた際の付加情報の形式に変換する処理を行う。例えば、あらかじめ、埋め込む対象の付加情報を、テキスト文書データとして、文字コード「シフトＪＩＳ」で数値化した値としておく。
【0134】
シフトＪＩＳの１バイトコード（半角文字）では、上位４ビットと下位４ビットの組み合わせで、数値及び文字に対応した変換を行うことができる。例えば、上位４ビットが「０１００」で且つ下位４ビットが「０００１」の場合、文字列として、「Ａ」と判定される。このように、予め保持ないし準備された変換マップに基づいて上記抽出された数値列に対して変換処理を行うことで、対応の文字へと変換することができる。
【0135】
付加情報として抽出された数値列はＲＡＭ１０４に一時的に保持され、２次記憶装置１０５に予め保持された「シフトＪＩＳ」変換マップが参照されることで（図１参照）、上記変換処理を比較的簡便に実現可能となる。
【0136】
一例として、付加情報抽出部１７０２が抽出した付加情報の数値列が「０１１０１００００１１００１０１０１１０１１０００１１０１１０００１１０１１１１」の場合、本例に係る変換マップによれば、以下のように変換される：
上位４ビット「０１１０」かつ下位４ビット「１０００」から文字「ｈ」が得られ；
上位４ビット「０１１０」かつ下位４ビット「０１０１」で、文字「ｅ」が得られ；
上位４ビット「０１１０」かつ下位４ビット「１１００」で、文字「ｌ」が得られ；
上位４ビット「０１１０」かつ下位４ビット「１１００」で、文字「ｌ」が得られ；及び、
上位４ビット「０１１０」かつ下位４ビット「１１１１」で、文字「ｏ」が得られる。
上位４ビット「０１１０」かつ下位４ビット「１０００」から文字「ｈ」が得られ；
上位４ビット「０１１０」かつ下位４ビット「０１０１」で、文字「ｅ」が得られ；
上位４ビット「０１１０」かつ下位４ビット「１１００」で、文字「ｌ」が得られ；
上位４ビット「０１１０」かつ下位４ビット「１１００」で、文字「ｌ」が得られ；及び、
上位４ビット「０１１０」かつ下位４ビット「１１１１」で、文字「ｏ」が得られる。
【0137】
従って、文字列の「ｈｅｌｌｏ」となる。抽出された文字列は表示処理部４０１によりディスプレイ１０６に表示される（図４参照）。また、抽出された文字列が、ＵＲＬの場合には、ネットワークに接続して所定のブラウザを利用してＵＲＬ先の画面がディスプレイ１０６に表示されうる。また、そのＵＲＬが動画サイトであった場合には、ディスプレイ１０６および不図示のスピーカーにより動画が再生されてもよい。
【0138】
以上の処理によれば、所定の周期（或いは、其れに対応する周波数）を有するパターンを対象の画像に重畳することにより、該画像には付加情報が埋め込まれる。そして、その印刷物１６０１を撮像して得られた撮像画像における複数の小エリア１７０１を解析することにより、空間周波数特性が算出される。小エリア１７０１ごとの空間周波数特性からは、撮像画像中の付加情報の埋め込み位置および埋め込み信号強度が特定ないし推定される。該特定ないし推定された埋め込み位置または埋め込み信号強度に基づいて、撮像画像内におけるマーカー検出エリア１６０５の位置を決定し、該決定されたマーカー検出エリア１６０５内にてマーカー検出が実行される。そして、該検出されたマーカー位置を基準にすることで、撮像画像内の付加情報を取得可能となる。これにより、撮像画像中のどの位置にどの程度の信号強度で電子透かし情報が埋め込まれているかを特定することが可能となり、それに基づいて、付加情報を取得する制御を行うことが可能となる。そのため、本実施形態によれば、多様な態様の電子透かし情報の取得を比較的簡便に行うことが可能であり、電子透かしの読み取りの多様化に有利と云える。
【0139】
＜＜第２実施形態＞＞
前述の第１実施形態では、マーカー検出エリア１６０５の位置を変更しながら埋め込まれた付加情報を取得する態様を例示したが、第２実施形態として、画像処理装置（携帯端末）１００を操作しているユーザに対してディスプレイ１０６によって所定の通知が行われてもよい。
前述の第１実施形態では、マーカー検出エリア１６０５の位置を変更しながら埋め込まれた付加情報を取得する態様を例示したが、第２実施形態として、画像処理装置（携帯端末）１００を操作しているユーザに対してディスプレイ１０６によって所定の通知が行われてもよい。
【0140】
図２１（ａ）は、上記通知の一例として、携帯端末１００の移動を促す表示が行われる態様を示す。ここでは、現在のマーカー検出エリア１６０５がガイド２１０１として表示され、付加情報の読み取りを更に実行し易い位置が視覚的に表示される。
【0141】
さらに、「携帯端末をかざす位置を変えてください」といった文字による通知が行われると更によい。該通知を受けたユーザは印刷物１６０１に対する携帯端末１００の位置を変えることで、印刷物１６０１の埋め込み信号強度が高い位置での付加情報の読み取りが可能となり、それにより該読み取りを適切に実現可能となる。
【0142】
なお、一般的に撮像画像の端部に近い領域は撮像に際して焦点距離の調整が困難な場合があり、また、携帯端末１００が典型的に備えうる光源を使用して撮像する場合には該光源の光量が充分でない場合もある。すなわち、埋め込みの信号強度が同じであっても、上述のような場合には、付加情報の読み取りを適切に実現することが難しくなりうる。そのため、マーカー検出エリア１６０５外に埋め込み信号強度が高い小エリア１７０１が存在した場合、付加情報の読み取りを実行し易いマーカー検出エリア１７０１内で撮像することにより、埋め込み信号強度を更に高めて該読み取りを行うことが可能になる。
【0143】
図２１（ｂ）は、ユーザに対する通知を視覚的に行う態様の一例として、個々の小エリア１７０１の特徴量（図１７（ｂ）参照）を撮像画像上に重畳させて表示する態様を示す。その際に、付加情報の読み取りの行い易さをユーザが把握できるように、通知２１０２が視覚的に行われるとよい。
【0144】
また、マーカー検出エリア１６０５に含まれる小エリア１７０１の埋め込み信号強度が視覚的に表示されてもよい。例えば、ガイド２１０１の枠の色や小エリア１７０１の色が埋め込み信号強度に応じて変更されてもよい。
【0145】
本実施形態によれば、第１実施形態記載の効果が得られる他、携帯端末１００を用いて付加情報の読み取りをより適切に実現可能となるため、携帯端末１００のユーザビリティの向上にも有利となりうる。
【0146】
＜＜第３実施形態＞＞
前述の第１実施形態では、複数の小エリア１７０１の画像特性として周波数解析により得られる空間周波数情報を算出し、その画像特性を使用して付加情報の埋め込み位置および埋め込み信号強度を特定ないし推定するものとした。しかしながら、このことは、他の態様によって実現されてもよく、例えば、撮像画像内の色情報が用いられてもよい。
前述の第１実施形態では、複数の小エリア１７０１の画像特性として周波数解析により得られる空間周波数情報を算出し、その画像特性を使用して付加情報の埋め込み位置および埋め込み信号強度を特定ないし推定するものとした。しかしながら、このことは、他の態様によって実現されてもよく、例えば、撮像画像内の色情報が用いられてもよい。
【0147】
図２２は、第３実施形態に係る付加情報の読み取り処理を行うための画像処理装置１００の構成の他の例を示すブロック図である。画像処理装置１００のアプリケーション４００に含まれる付加情報読み取り部４０７は、画像取得部２２０１、信号強度特定部２２０２、マーカー検出エリア決定部２２０３、および、付加情報取得部２２０４を備える。
【0148】
画像取得部２２０１は、第１実施形態の画像取得部１５０１同様、内部撮像デバイス１１０を駆動制御して、付加情報が埋め込まれた印刷物１６０１の撮像を行って画像データを取得する。該撮像によって得られた画像データは、信号強度特定部２２０２に送られる。
【0149】
信号強度特定部２２０２は、画像データの色情報（ＲＧＢ値）に基づいて、付加情報の埋め込み位置および埋め込み信号強度を特定ないし推定する。具体的には、ＲＧＢ値に対応して埋め込み信号強度を参照可能な参照テーブルを予め画像処理装置１００のアプリケーション４００内に保持させ、埋め込み信号強度への変換は、画像データの画素毎に該参照テーブルを参照することにより行われればよい。この変換は、画像データの画素毎の画素値に対して行われてもよいし、第１実施形態同様に複数の小エリア１７０１を定義して小エリア１７０１毎のＲＧＢ値の代表値を算出して、その代表値に対して行われてもよい。ここでいう代表値の例としては、小エリア１７０１のＲＧＢ値の平均値、最頻値、中央値などが挙げられる。
【0150】
尚、信号強度特定部１５０３同様、信号強度特定部２２０２は、信号強度推定部２２０２と表現されてもよいし、或いは、単に特定部または推定部と表現されてもよい。
【0151】
図２３は、上述の参照テーブルの一例として埋め込み信号強度変換テーブル２３０１を示す。詳細については後述とするが、テーブル２３０１は、付加情報の埋め込みの対象となる色のＲＧＢ値の組み合わせと、埋め込み信号強度とが対応付けられた３Ｄルックアップテーブル（３Ｄ－ＬＵＴ）である。Ｒ値、Ｇ値、及び、Ｂ値のそれぞれは、０、３２、６４、９６、１２８、１６０、１９２、２２４、２５５のいずれかであり、テーブル２３０１は、９×９×９＝７２９個分のデータを示す。
【0152】
テーブル２３０１は、ＲＧＢ値に対する埋め込み信号強度を色ごとに予め測定することにより得られる。例えば、２４０ｐｘ×２４０ｐｘのサイズの（Ｒ、Ｇ、Ｂ）＝（１２８、１２８、１２８）のパッチ画像に、図１３に例示されたマーカー部１３０１およびデータ部１３０２の付加情報を埋め込み、プリンタ１１２で印刷する。そのパッチを撮像して前述の実施形態１同様の手順で埋め込み信号強度を測定する。この測定を７２９色それぞれに対して順に実施することで、ルックアップテーブル２３０１を作成可能である。なお、該撮像に際しては、撮像の条件（例えば印刷物１６０１との距離や照明など）は固定されるとよい。
【0153】
任意のＲＧＢ値に対する埋め込み信号強度は、例えば３Ｄ－ＬＵＴの四面体補間により、ＲＧＢ値から求められる。補間の方法の他の例としては、公知の線形補間方法である立方体補間、三角柱補間などが用いられてもよい。
【0154】
マーカー検出エリア決定部２２０３以降の処理については、第１実施形態同様であるため、ここでは説明を省略する。
【0155】
なお、本実施形態では、変換テーブル２３０１の入力値としてＲＧＢ値を使用する態様を例示したが、他の色空間が用いられてもよい。例えば、ＣＩＥ－ＸＹＺ、ＹＣｂＣｒ（ＹＵＶ）、ＣＩＥ－Ｌａｂ等が用いられてもよい。
【0156】
また、埋め込みを行う際のＲＧＢ値は、通常、ｓＲＧＢ色空間の値として扱われるが、内部撮像デバイス１１０から得られる撮像画像のＲＧＢ値が、カラーマネジメントされていないデバイス固有のＲＧＢ値であった場合、ｓＲＧＢのＲＧＢ値とは異なる値となる。そのような場合、それらの差が補正されるように、デバイスＲＧＢ－ｓＲＧＢの変換を行うための３Ｄ－ＬＵＴが予めアプリケーション４００内に保持されていてもよい。この場合、付加情報の読み取りを行う際にアプリケーションＵＩにてデバイスの種類を選択し、デバイスの種類に応じた３Ｄ－ＬＵＴを参照して色変換することにより、デバイスの種類に応じた埋め込み信号強度の特定ないし推定が可能となる。
【0157】
また、印刷物１６０１の用紙の種類によって埋め込み信号強度が変わる場合には、用紙毎の３Ｄ－ＬＵＴを予めアプリケーション４００内に保持しておいてもよい。その場合、付加情報の読み取りを行う際にアプリケーションＵＩにて印刷物１６０１の用紙の種類を選択し、用紙の種類に応じた３Ｄ－ＬＵＴを参照して変換することにより、用紙の種類に応じた埋め込み信号強度の特定ないし推定が可能となる。
【0158】
本実施形態によれば、付加情報が埋め込まれた印刷物１６０１の撮像画像内の色情報に基づいて該撮像画像中の付加情報の埋め込み位置および埋め込み信号強度を特定ないし推定可能となる。よって、本実施形態によっても第１実施形態記載の効果が得られる。
【0159】
＜＜その他の実施形態＞＞
前述の各実施形態では、印刷画像の全面の個々の単位ブロック１３００に同一の付加情報を繰り返し埋め込む態様を例示したが、この例に限られるものではない。例えば、個々の単位ブロック１３００には、それぞれ別個の情報が埋め込まれてもよい。あるいは、単位ブロック１３００を複数のグループに分類して、第１のグループのブロックには第１の付加情報が埋め込まれ、第１のグループとは異なる第２のグループのブロックには第１の付加情報とは異なる第２の付加情報が埋め込まれてもよい。尚、これら第１のグループおよび第２のグループは、印刷画像内において所定の領域に偏って配置されてもよいし、分散して配置されてもよい。また、グループの数は３以上でもよい。
前述の各実施形態では、印刷画像の全面の個々の単位ブロック１３００に同一の付加情報を繰り返し埋め込む態様を例示したが、この例に限られるものではない。例えば、個々の単位ブロック１３００には、それぞれ別個の情報が埋め込まれてもよい。あるいは、単位ブロック１３００を複数のグループに分類して、第１のグループのブロックには第１の付加情報が埋め込まれ、第１のグループとは異なる第２のグループのブロックには第１の付加情報とは異なる第２の付加情報が埋め込まれてもよい。尚、これら第１のグループおよび第２のグループは、印刷画像内において所定の領域に偏って配置されてもよいし、分散して配置されてもよい。また、グループの数は３以上でもよい。
【0160】
また、前述の各実施形態では、付加情報が埋め込まれる領域は所定のサイズのブロックである態様を例示したが、この例に限られるものではない。例えば、ブロックは、矩形の形状でなくてもよく、他の任意の形状であってもよい。
【0161】
また、付加情報が可変長の情報であり、付加情報のサイズ（付加情報が埋め込まれている範囲）を示す情報が単位ブロック１３００のデータ部１３０２の所定の場所（例えば最初の部分）に埋め込まれていてもよい。例えば、８００ビットの場合、冒頭の一部のビット（例えば８０ビット）が、その単位ブロック１３００内に付加情報が埋め込まれている範囲を示してもよい。
【0162】
また、付加情報の埋め込みの方式が複数ある場合、それらに対応する複数のルールをアプリケーション４００に予め複数規定すると共に、付加情報の例えば冒頭のヘッダ部に対応のルールを識別し選択する情報が埋め込まれていてもよい。この場合、識別されたルールに基づいて付加情報の抽出が行われることとなる。
【0163】
また、前述の個々の実施形態では、画像処理装置１００とプリンタ１１２とがネットワークで接続されており、画像処理装置１００により生成された印刷データがプリンタ１１２で印刷される態様を例示したが、この例に限られるものではない。例えば、プリンタ１１２がアプリケーション４００を備えていてもよく、プリンタ１１２が、プリンタ１１２自身で生成した印刷データに基づいて、付加情報が埋め込まれた印刷物１６０１を出力してもよい。つまり、実施形態で説明されたアプリケーション４００の機能の一部は、プリンタ１１２に設けられてもよい。
【0164】
＜＜プログラム＞＞
本発明は、上記実施形態の１以上の機能を実現するプログラムをネットワーク又は記憶媒体を介してシステム又は装置に供給し、該システム又は装置のコンピュータにおける１以上のプロセッサがプログラムを読み出して実行する処理により実現されてもよい。例えば、本発明は、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によって実現されてもよい。
本発明は、上記実施形態の１以上の機能を実現するプログラムをネットワーク又は記憶媒体を介してシステム又は装置に供給し、該システム又は装置のコンピュータにおける１以上のプロセッサがプログラムを読み出して実行する処理により実現されてもよい。例えば、本発明は、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によって実現されてもよい。
【0165】
＜＜その他＞＞
上述の説明においては、インクジェット記録方式を用いたプリンタ１１２を例に挙げて説明したが、記録方式は上述の態様に限られるものではない。また、プリンタ１１２は、記録機能のみを有するシングルファンクションプリンタであっても良いし、記録機能、ＦＡＸ機能、スキャナ機能等の複数の機能を有するマルチファンクションプリンタであっても良い。また、例えば、カラーフィルタ、電子デバイス、光学デバイス、微小構造物等を所定の記録方式で製造するための製造装置であっても良い。
上述の説明においては、インクジェット記録方式を用いたプリンタ１１２を例に挙げて説明したが、記録方式は上述の態様に限られるものではない。また、プリンタ１１２は、記録機能のみを有するシングルファンクションプリンタであっても良いし、記録機能、ＦＡＸ機能、スキャナ機能等の複数の機能を有するマルチファンクションプリンタであっても良い。また、例えば、カラーフィルタ、電子デバイス、光学デバイス、微小構造物等を所定の記録方式で製造するための製造装置であっても良い。
【0166】
また、本明細書でいう「記録」は広く解釈されるべきものである。従って、「記録」の態様は、記録媒体上に形成される対象が文字、図形等の有意の情報であるか否かを問わないし、また、人間が視覚で知覚し得るように顕在化したものであるか否かも問わない。
【0167】
また、「記録媒体」は、上記「記録」同様広く解釈されるべきものである。従って、「記録媒体」の概念は、一般的に用いられる紙の他、布、プラスチックフィルム、金属板、ガラス、セラミックス、樹脂、木材、皮革等、インクを受容可能な如何なる部材をも含みうる。
【0168】
更に、「インク」は、上記「記録」同様広く解釈されるべきものである。従って、「インク」の概念は、記録媒体上に付与されることによって画像、模様、パターン等を形成する液体の他、記録媒体の加工、インクの処理（例えば、記録媒体に付与されるインク中の色剤の凝固または不溶化）等に供され得る付随的な液体をも含みうる。
【0169】
発明は上記実施形態に制限されるものではなく、発明の精神及び範囲から離脱することなく、様々な変更及び変形が可能である。従って、発明の範囲を公にするために請求項を添付する。
【符号の説明】
【0170】
１１０：内部撮像デバイス（撮像部）、１５０２：画像特性算出部（算出部）、１５０３：信号強度特定部（特定部）、１５０４：マーカー検出エリア決定部（決定部）、１５０５：付加情報取得部（取得部）。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
【図20】
【図21】
【図22】
【図23】