ホーム > 特許ランキング > 富士フイルム株式会社
知財求人 - 知財ポータルサイト「IP Force」
特開2024-49159画像処理方法、画像処理装置、プリント方法、及びプリント出力システム
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024049159
(43)【公開日】2024-04-09
(54)【発明の名称】画像処理方法、画像処理装置、プリント方法、及びプリント出力システム
(51)【国際特許分類】
H04N 1/387 20060101AFI20240402BHJP
【ＦＩ】
H04N1/387
【審査請求】未請求
【請求項の数】14
【出願形態】ＯＬ
(21)【出願番号】P 2022155455
(22)【出願日】2022-09-28
(71)【出願人】
【識別番号】306037311
【氏名又は名称】富士フイルム株式会社
(74)【代理人】
【識別番号】100152984
【弁理士】
【氏名又は名称】伊東 秀明
(74)【代理人】
【識別番号】100148080
【弁理士】
【氏名又は名称】三橋 史生
(72)【発明者】
【氏名】横山 幸徳
【テーマコード（参考）】
5C076
【Ｆターム（参考）】
5C076AA02
5C076AA13
5C076AA21
5C076AA22
5C076AA36
5C076BA01
5C076BA02
5C076BA06
(57)【要約】 （修正有）
【課題】第１のプリントの画像からの情報に基づいて、最適な画像を記録するための第２のプリント用画像データを生成することができる画像処理方法及び画像処理装置並びに最適な画像を記録した第２のプリントを出力するプリント方法及びプリント出力システムを提供する。
【解決手段】画像処理方法は、第１２の領域及び第２の領域を有する第１のプリントから第１のプリント画像データを取得する取得工程と、少なくとも一方の領域から取得された情報に基づいて、適用する画像処理を決定する決定工程と、第１のプリント画像データに画像処理を行って、第１の領域に対応する第３の領域を有する第２のプリントを出力するための第２のプリント用画像データを生成する生成工程と、を備える。
【選択図】図１
【解決手段】画像処理方法は、第１２の領域及び第２の領域を有する第１のプリントから第１のプリント画像データを取得する取得工程と、少なくとも一方の領域から取得された情報に基づいて、適用する画像処理を決定する決定工程と、第１のプリント画像データに画像処理を行って、第１の領域に対応する第３の領域を有する第２のプリントを出力するための第２のプリント用画像データを生成する生成工程と、を備える。
【選択図】図１
【特許請求の範囲】
【請求項1】
第１の領域と第２の領域とを有する第１のプリントから第１のプリント画像データを取得する取得工程と、
前記第１の領域、及び前記第２の領域の少なくとも一方の領域から取得された情報に基づいて、適用する画像処理を決定する決定工程と、
取得された前記第１のプリント画像データに前記画像処理を行って、前記第１の領域に対応する第３の領域を有する第２のプリントを出力するための第２のプリント用画像データを生成する生成工程と、を備えた画像処理方法。
前記第１の領域、及び前記第２の領域の少なくとも一方の領域から取得された情報に基づいて、適用する画像処理を決定する決定工程と、
取得された前記第１のプリント画像データに前記画像処理を行って、前記第１の領域に対応する第３の領域を有する第２のプリントを出力するための第２のプリント用画像データを生成する生成工程と、を備えた画像処理方法。
【請求項2】
前記第２のプリントは、前記第２の領域に対応する第４の領域を有する、請求項１に記載の画像処理方法。
【請求項3】
前記取得工程は、前記第１のプリントの前記第１の領域の第１の領域画像データと、前記第１のプリントの前記第２の領域の第２の領域画像データとを検出する検出工程を備え、
前記決定工程は、検出された、前記第１の領域画像データ、及び前記第２の領域画像データに、それぞれ異なる画像処理を決定し、
前記生成工程は、前記第１の領域画像データと前記第２の領域画像データに基づいて、前記第３の領域の第３の領域画像データと、前記第４の領域の第４の領域画像データとを生成し、前記第２のプリント用画像データとして合成する請求項２に記載の画像処理方法。
前記決定工程は、検出された、前記第１の領域画像データ、及び前記第２の領域画像データに、それぞれ異なる画像処理を決定し、
前記生成工程は、前記第１の領域画像データと前記第２の領域画像データに基づいて、前記第３の領域の第３の領域画像データと、前記第４の領域の第４の領域画像データとを生成し、前記第２のプリント用画像データとして合成する請求項２に記載の画像処理方法。
【請求項4】
前記第１のプリントの用紙サイズと、前記第２のプリントの記録媒体サイズが異なる場合、前記生成工程は、
前記第１のプリントの前記第２の領域にはリサイズを行わず、映像の補填、又はクロッピングをする画像処理を前記第１のプリントの前記第２の領域画像データに対して行って、前記第２のプリントの前記第４の領域画像データを生成し、
前記第２のプリントの前記第４の領域のサイズの情報に基づいて前記第１のプリントの前記第１の領域にリサイズをする画像処理を前記第１のプリントの前記第１の領域画像データに対して行って、前記第２のプリントの前記第３の領域画像データを生成し、
前記第２のプリントの前記第４の領域画像データと、前記第２のプリントの前記第３の領域画像データとを合成して、前記第２のプリント用画像データを生成する請求項３に記載の画像処理方法。
前記第１のプリントの前記第２の領域にはリサイズを行わず、映像の補填、又はクロッピングをする画像処理を前記第１のプリントの前記第２の領域画像データに対して行って、前記第２のプリントの前記第４の領域画像データを生成し、
前記第２のプリントの前記第４の領域のサイズの情報に基づいて前記第１のプリントの前記第１の領域にリサイズをする画像処理を前記第１のプリントの前記第１の領域画像データに対して行って、前記第２のプリントの前記第３の領域画像データを生成し、
前記第２のプリントの前記第４の領域画像データと、前記第２のプリントの前記第３の領域画像データとを合成して、前記第２のプリント用画像データを生成する請求項３に記載の画像処理方法。
【請求項5】
前記第１の領域、及び前記第３の領域は、それぞれ前記第１のプリント、及び前記第２のプリントの写真部分であり、
前記第２の領域、及び前記第４の領域は、それぞれ前記第１のプリント、及び前記第２のプリントのフレーム部分である請求項２に記載の画像処理方法。
前記第２の領域、及び前記第４の領域は、それぞれ前記第１のプリント、及び前記第２のプリントのフレーム部分である請求項２に記載の画像処理方法。
【請求項6】
前記生成工程は、前記第１のプリントのフレーム部分の柄と手描きのテキストを認識し、認識結果に応じた画像処理を前記第１のプリントの前記写真部分の第１のプリント画像データに適用して前記第２のプリント用画像データを生成する請求項５に記載の画像処理方法。
【請求項7】
前記生成工程は、前記第１のプリントの前記フレーム部分の柄と、前記第２のプリントに使用する記録媒体の前記フレーム部分の柄の組合せに応じた画像処理を前記第１のプリントの前記写真部分の第１のプリント画像データに適用して前記第２のプリント用画像データを生成する請求項５に記載の画像処理方法。
【請求項8】
前記第２のプリントの前記フレーム部分は、前記第１のプリントの前記フレーム部分と異なる請求項５に記載の画像処理方法。
【請求項9】
前記生成工程は、前記第２のプリント用の画像のクロッピング領域として、前記第１のプリントの前記写真部分に対応する第１の画像、前記第１の画像に対するクロッピング領域情報、及び前記第２のプリントの記録媒体サイズ情報に基づいて、前記第２のプリント用の画像を生成するための新たなクロッピング領域の情報を生成する請求項５に記載の画像処理方法。
【請求項10】
前記少なくとも一方の領域から取得された情報は、前記少なくとも一方の領域の前記第１のプリント画像データの画像処理の結果を含む請求項１に記載の画像処理方法。
【請求項11】
請求項１～１０のいずれか１項に記載の画像処理方法によって生成された前記第２のプリント用画像データに基づいて、前記第２のプリント用の画像が前記第２のプリントの記録媒体上に記録された前記第２のプリントを出力するプリント方法。
【請求項12】
第１の領域と第２の領域とを有する第１のプリントから第１のプリント画像データを取得するスマートデバイスと、
前記第１の領域、及び前記第２の領域の少なくとも一方の領域から取得された情報に基づいて、適用する画像処理を決定し、取得された前記第１のプリント画像データに決定された前記画像処理を行って、前記第１の領域に対応する第３の領域を有する第２のプリントを出力するための第２のプリント用画像データを生成するプロセッサと、
前記スマートデバイスにおいて取得された前記第１のプリント画像データを前記プロセッサに送信するネットワークと、を備えた画像処理装置。
前記第１の領域、及び前記第２の領域の少なくとも一方の領域から取得された情報に基づいて、適用する画像処理を決定し、取得された前記第１のプリント画像データに決定された前記画像処理を行って、前記第１の領域に対応する第３の領域を有する第２のプリントを出力するための第２のプリント用画像データを生成するプロセッサと、
前記スマートデバイスにおいて取得された前記第１のプリント画像データを前記プロセッサに送信するネットワークと、を備えた画像処理装置。
【請求項13】
前記スマートデバイスは、前記第１のプリントの前記第１の領域の第１の領域画像データと、前記第１のプリントの前記第２の領域の第２の領域画像データとを検出し、
前記プロセッサは、検出された前記第１の領域画像データ、及び前記第２の領域画像データに、それぞれ異なる画像処理を決定し、前記第１の領域画像データと前記第２の領域画像データに基づいて、前記第３の領域の第３の領域画像データと、前記第２の領域に対応する第４の領域の第４の領域画像データとを生成し、前記第２のプリント用画像データとして合成する請求項１２に記載の画像処理装置。
前記プロセッサは、検出された前記第１の領域画像データ、及び前記第２の領域画像データに、それぞれ異なる画像処理を決定し、前記第１の領域画像データと前記第２の領域画像データに基づいて、前記第３の領域の第３の領域画像データと、前記第２の領域に対応する第４の領域の第４の領域画像データとを生成し、前記第２のプリント用画像データとして合成する請求項１２に記載の画像処理装置。
【請求項14】
請求項１２、又は１３に記載の画像処理装置と、
前記画像処理装置によって生成された前記第２のプリント用画像データに基づいて、前記第２のプリント用の画像が前記第２のプリントの記録媒体上に記録された前記第２のプリントを出力するプリンタと、を有するプリント出力システム。
前記画像処理装置によって生成された前記第２のプリント用画像データに基づいて、前記第２のプリント用の画像が前記第２のプリントの記録媒体上に記録された前記第２のプリントを出力するプリンタと、を有するプリント出力システム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、画像処理方法、画像処理装置、プリント方法、及びプリント出力システムに関する。
【背景技術】
【0002】
様々な撮影手段で撮影された画像の画像データを用いて、多様なメディアサイズの出力メディアに様々な画像処理を施して様々な画像を出力することが行われている。例えば、プリント画像の画像データの複数の領域を画像処理の対象領域として設定して各領域に応じた画像処理を行う場合がある（特許文献１参照）。また、撮影画像のズーム倍率、被写体の注目度、検出した被写体の位置、及び／又は大きさに基づいて画像のトリミングを行う場合がある（特許文献２、３参照）。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特開２００３－２５００４７号公報
【特許文献2】特開２００７－２５８８６９号公報
【特許文献3】特開２００７－２７４０１７号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
ところで、第１のプリント、例えば元プリントの画像の画像データから第２のプリント、例えば再プリントの画像の画像データを生成し、再プリントの画像を、観察に適した画像として出力することが求められている。例えば、元プリントのフレーム領域、写真（印画）領域の全体、及び一部の領域の少なくとも1つの領域の画像データ、及び／又は情報を用いることができれば、再プリントの画像を、観察に適した画像として出力することができる。
【0005】
本発明は、上記従来技術の問題点を解消し、記録済の第1のプリントの画像から得られた写真領域、及び／又はフレーム領域等の複数の領域の情報、必要に応じてさらにはその画像データに基づいて、新たな記録媒体に最適な画像を記録するための新たな第２のプリント用画像データを生成することができる画像処理方法、及び画像処理装置を提供することを目的とする。
また、本発明は、こうして生成された新たな第２のプリント用画像データに基づいて最適な画像が記録媒体に記録された第２のプリントを出力することができるプリント方法、及びプリント出力システムを提供することを目的とする。
また、本発明は、こうして生成された新たな第２のプリント用画像データに基づいて最適な画像が記録媒体に記録された第２のプリントを出力することができるプリント方法、及びプリント出力システムを提供することを目的とする。
【課題を解決するための手段】
【0006】
上記目的を達成するために、本発明の一実施形態に係る画像処理方法は、第１の領域と第２の領域とを有する第１のプリントから第１のプリント画像データを取得する取得工程と、第１の領域、及び第２の領域の少なくとも一方の領域から取得された情報に基づいて、適用する画像処理を決定する決定工程と、取得された第１のプリント画像データに画像処理を行って、第１の領域に対応する第３の領域を有する第２のプリントを出力するための第２のプリント用画像データを生成する生成工程と、を備える。
また、上記目的を達成するために、本発明の一実施形態に係るプリント方法は、上記実施形態の画像処理方法によって生成された第２のプリント用画像データに基づいて、第２のプリント用の画像が第２のプリントの記録媒体上に記録された第２のプリントを出力する。
また、上記目的を達成するために、本発明の一実施形態に係るプリント方法は、上記実施形態の画像処理方法によって生成された第２のプリント用画像データに基づいて、第２のプリント用の画像が第２のプリントの記録媒体上に記録された第２のプリントを出力する。
【0007】
ここで、第２のプリントは、第２の領域に対応する第４の領域を有していても良い。
また、取得工程は、第１のプリントの第１の領域の第１の領域画像データと、第１のプリントの第２の領域の第２の領域画像データとを検出する検出工程を備え、決定工程は、検出された、第１の領域画像データ、及び第２の領域画像データに、それぞれ異なる画像処理を決定し、生成工程は、第１の領域画像データと第２の領域画像データに基づいて、第３の領域の第３の領域画像データと、第４の領域の第４の領域画像データとを生成し、第２のプリント用画像データとして合成しても良い。
また、取得工程は、第１のプリントの第１の領域の第１の領域画像データと、第１のプリントの第２の領域の第２の領域画像データとを検出する検出工程を備え、決定工程は、検出された、第１の領域画像データ、及び第２の領域画像データに、それぞれ異なる画像処理を決定し、生成工程は、第１の領域画像データと第２の領域画像データに基づいて、第３の領域の第３の領域画像データと、第４の領域の第４の領域画像データとを生成し、第２のプリント用画像データとして合成しても良い。
【0008】
また、第１のプリントの用紙サイズと、第２のプリントの記録媒体サイズが異なる場合、生成工程は、第１のプリントの第２の領域にはリサイズを行わず、映像の補填、又はクロッピングをする画像処理を第１のプリントの第２の領域画像データに対して行って、第２のプリントの第４の領域画像データを生成し、第２のプリントの第４の領域のサイズの情報に基づいて第１のプリントの第１の領域にリサイズをする画像処理を第１のプリントの第１の領域画像データに対して行って、第２のプリントの第３の領域画像データを生成し、第２のプリントの第４の領域画像データと、第２のプリントの第３の領域画像データとを合成して、第２のプリント用画像データを生成しても良い。
【0009】
また、第１の領域、及び第３の領域は、それぞれ第１のプリント、及び第２のプリントの写真部分であり、第２の領域、及び第４の領域は、それぞれ第１のプリント、及び第２のプリントのフレーム部分であっても良い。
また、生成工程は、第１のプリントのフレーム部分の柄と手描きのテキストを認識し、認識結果に応じた画像処理を第１のプリントの写真部分の第１のプリント画像データに適用して第２のプリント用画像データを生成しても良い。
また、生成工程は、第１のプリントのフレーム部分の柄と、第２のプリントに使用する記録媒体のフレーム部分の柄の組合せに応じた画像処理を第１のプリントの写真部分の第１のプリント画像データに適用して第２のプリント用画像データを生成しても良い。
また、生成工程は、第１のプリントのフレーム部分の柄と手描きのテキストを認識し、認識結果に応じた画像処理を第１のプリントの写真部分の第１のプリント画像データに適用して第２のプリント用画像データを生成しても良い。
また、生成工程は、第１のプリントのフレーム部分の柄と、第２のプリントに使用する記録媒体のフレーム部分の柄の組合せに応じた画像処理を第１のプリントの写真部分の第１のプリント画像データに適用して第２のプリント用画像データを生成しても良い。
【0010】
また、第２のプリントのフレーム部分は、第１のプリントのフレーム部分と異なっていても良い。
また、生成工程は、第２のプリント用の画像のクロッピング領域として、第１のプリントの写真部分に対応する第１の画像、第１の画像に対するクロッピング領域情報、及び第２のプリントの記録媒体サイズ情報に基づいて、第２のプリント用の画像を生成するための新たなクロッピング領域の情報を生成しても良い。
また、少なくとも一方の領域から取得された情報は、少なくとも一方の領域の第１のプリント画像データの画像処理の結果を含んでいても良い。
また、生成工程は、第２のプリント用の画像のクロッピング領域として、第１のプリントの写真部分に対応する第１の画像、第１の画像に対するクロッピング領域情報、及び第２のプリントの記録媒体サイズ情報に基づいて、第２のプリント用の画像を生成するための新たなクロッピング領域の情報を生成しても良い。
また、少なくとも一方の領域から取得された情報は、少なくとも一方の領域の第１のプリント画像データの画像処理の結果を含んでいても良い。
【0011】
上記目的を達成するために、本発明の一実施形態に係る画像処理装置は、第１の領域と第２の領域とを有する第１のプリントから第１のプリント画像データを取得するスマートデバイスと、第１の領域、及び第２の領域の少なくとも一方の領域から取得された情報に基づいて、適用する画像処理を決定し、取得された第１のプリント画像データに決定された画像処理を行って、第１の領域に対応する第３の領域を有する第２のプリントを出力するための第２のプリント用画像データを生成するプロセッサと、スマートデバイスにおいて取得された第１のプリント画像データをプロセッサに送信するネットワークと、を備える。
また、上記目的を達成するために、本発明の一実施形態に係るプリント出力システムは、上記実施形態の画像処理装置と、画像処理装置によって生成された第２のプリント用画像データに基づいて、第２のプリント用の画像が第２のプリントの記録媒体上に記録された第２のプリントを出力するプリンタと、を有する。
また、上記目的を達成するために、本発明の一実施形態に係るプリント出力システムは、上記実施形態の画像処理装置と、画像処理装置によって生成された第２のプリント用画像データに基づいて、第２のプリント用の画像が第２のプリントの記録媒体上に記録された第２のプリントを出力するプリンタと、を有する。
【0012】
ここで、スマートデバイスは、第１のプリントの第１の領域の第１の領域画像データと、第１のプリントの第２の領域の第２の領域画像データとを検出し、プロセッサは、検出された、第１の領域画像データ、及び第２の領域画像データに、それぞれ異なる画像処理を決定し、第１の領域画像データと第２の領域画像データに基づいて、第３の領域の第３の領域画像データと、第２の領域に対応する第４の領域の第４の領域画像データとを生成し、第２のプリント用画像データとして合成しても良い。
【発明の効果】
【0013】
本発明によれば、記録済の第1のプリントの画像から得られた写真領域、及び／又はフレーム領域等の複数の領域の情報、必要に応じてさらにはその画像データに基づいて、新たな記録媒体に最適な画像を記録するための新たな第２のプリント用画像データを生成することができる画像処理方法、及び画像処理装置を提供することができる。
また、本発明によれば、こうして生成された新たな第２のプリント用画像データに基づいて最適な画像が記録媒体に記録された第２のプリントを出力することができるプリント方法、及びプリント出力システムを提供することができる。
また、本発明によれば、こうして生成された新たな第２のプリント用画像データに基づいて最適な画像が記録媒体に記録された第２のプリントを出力することができるプリント方法、及びプリント出力システムを提供することができる。
【図面の簡単な説明】
【0014】
【図1】本発明の一実施形態に係る画像処理方法、及びプリント方法のフローチャートである。
【図2A】本発明の一実施形態に係る画像処理装置を備えるプリント出力システムのブロック図である。
【図3A】第２のプリントの画像を記録する記録媒体の一例を示す図である。
【図3E】第２のプリントの画像を記録する記録媒体として用いられるカラーペーパーのサイズ情報を示す表である。
【図4】本発明に係る画像処理方法、及びプリント方法の第１実施形態を説明する図である。
【図5】本発明に係る画像処理方法、及びプリント方法の第２実施形態を説明する図である。
【図6】本発明に係る画像処理方法、及びプリント方法の第３実施形態を説明する図である。
【図7】本発明に係る画像処理方法、及びプリント方法の第４実施形態を説明する図である。
【図8】本発明に係る画像処理方法、及びプリント方法の第５実施形態を説明する図である。
【発明を実施するための形態】
【0015】
本発明の具体的な実施形態について説明する。ただし、以下に説明する実施形態は、本発明の理解を容易にするために挙げた一例に過ぎず、本発明を限定するものではない。すなわち、本発明は、その趣旨を逸脱しない限りにおいて、以下に説明する実施形態から変更又は改良され得る。また、本発明には、その等価物が含まれる。
【0016】
また、本明細書において、「画像」は、元となる第1のプリント（元プリントともいう）、及び第1のプリントとは異なる新しい第２のプリント（再プリントともいう）の全体の領域の画像を意味する。更に、「画像」は、これらの全体の領域の画像に加え、第1のプリントの主要な第1の領域、及び第２のプリントの第３の領域（以下、これらの２つの領域を写真部分、写真領域、印画領域ともいう）に記録された写真画像を意味する。更に、「画像」は、これらのみならず、第1のプリントの第1の領域の周囲を囲む第２の領域（以下、フレーム部分、フレーム領域ともいう）に記録された柄の画像、模様、及びユーザなどによって記載された手書きテキスト等の画像を意味する。また、本発明では、第２のプリントの第３の領域の周囲を囲む第４の領域を有していても良く、この場合には、「画像」は、第４の領域（以下、フレーム部分、フレーム領域ともいう）に記録された柄、模様、及びテキスト等の画像をも意味する。
また、本明細書において、「画像」は、第1のプリント、及び第２のプリントに記録されて表示された画像のみならず、後述する画像データによって表示される得る画像をも意味する。
また、本明細書において、「画像」は、第1のプリント、及び第２のプリントに記録されて表示された画像のみならず、後述する画像データによって表示される得る画像をも意味する。
【0017】
また、本明細書において、「画像データ」は、画素毎の階調を示すデータ（デジタル画像データ）を意味し、第1のプリントを撮影、又はスキャンして得られる第1のプリント画像データ、及び第２のプリントを出力するための第２のプリント用画像データを始めとして、第1のプリントの第１、及び第２の領域、並びに第２のプリントの第３、及び第４の領域の画像のデジタル画像データを意味する。
画像データのファイルフォーマットとしては、例えばＪＰＥＧ（Joint Photographic Experts Group）、Ｔｉｆｆ（Tagged Image File Format）、ＧＩＦ（Graphics Interchange Format）、ＢＭＰ（Microsoft Windows Bitmap Image）、ＰＮＧ（Portable Network Graphics）、ＨＥＩＦ（High Efficiency Image File Format）等が挙げられる。
画像データのファイルフォーマットとしては、例えばＪＰＥＧ（Joint Photographic Experts Group）、Ｔｉｆｆ（Tagged Image File Format）、ＧＩＦ（Graphics Interchange Format）、ＢＭＰ（Microsoft Windows Bitmap Image）、ＰＮＧ（Portable Network Graphics）、ＨＥＩＦ（High Efficiency Image File Format）等が挙げられる。
【0018】
また、本明細書において、「システム」という概念には、分散して互いに独立して存在しつつ協働（連携）して特定の機能を発揮する複数の装置の組み合わせも含まれる。
また、本発明書において、「ユーザ」は、本発明の画像処理方法、及びプリント方法を利用する者であり、具体的には、例えば、本発明の画像処理方法によって生成された第２のプリント用画像データ、及び本発明のプリント方法によって出力された第２のプリントを利用する者である。また、本明細書において、「者」は、特定の行為を行う主体を意味し、個人、グループ、企業等の法人、及び団体等を含み、さらには人工知能（ＡＩ：Artificial Intelligence）を構成するコンピュータ及びデバイスも含み得る。人工知能は、推論、予測及び判断等の知的な機能をハードウェア資源及びソフトウェア資源を使って実現されるものである。人工知能のアルゴリズムは任意であり、例えば、エキスパートシステム、事例ベース推論（ＣＢＲ：Case-Based Reasoning）、ベイジアンネットワーク又は包摂アーキテクチャ等である。
また、本発明書において、「ユーザ」は、本発明の画像処理方法、及びプリント方法を利用する者であり、具体的には、例えば、本発明の画像処理方法によって生成された第２のプリント用画像データ、及び本発明のプリント方法によって出力された第２のプリントを利用する者である。また、本明細書において、「者」は、特定の行為を行う主体を意味し、個人、グループ、企業等の法人、及び団体等を含み、さらには人工知能（ＡＩ：Artificial Intelligence）を構成するコンピュータ及びデバイスも含み得る。人工知能は、推論、予測及び判断等の知的な機能をハードウェア資源及びソフトウェア資源を使って実現されるものである。人工知能のアルゴリズムは任意であり、例えば、エキスパートシステム、事例ベース推論（ＣＢＲ：Case-Based Reasoning）、ベイジアンネットワーク又は包摂アーキテクチャ等である。
【0019】
＜＜本発明の一実施形態＞＞
以下、図１、図２、及び図２Ａを参照しつつ、本発明の一実施形態の画像処理方法、及びプリント方法、並びにこれらを実施する画像処理装置、及びプリント出力システムの一構成例について説明する。
以下、図１、図２、及び図２Ａを参照しつつ、本発明の一実施形態の画像処理方法、及びプリント方法、並びにこれらを実施する画像処理装置、及びプリント出力システムの一構成例について説明する。
【0020】
図１に示すように、本発明の画像処理方法は、第１のプリント画像データの取得工程Ｓ１０と、適用画像処理の決定工程Ｓ１２と、第２のプリント用画像データの生成工程Ｓ１４と、を有する。
また、本発明のプリント方法は、本発明の画像処理方法の第２のプリント用画像データの生成工程Ｓ１４で生成された第２のプリント用画像データを用いた第２のプリント画像の記録工程Ｓ１６と、第２のプリントの出力工程Ｓ１８と、を有する。
また、本発明のプリント方法は、本発明の画像処理方法の第２のプリント用画像データの生成工程Ｓ１４で生成された第２のプリント用画像データを用いた第２のプリント画像の記録工程Ｓ１６と、第２のプリントの出力工程Ｓ１８と、を有する。
【0021】
図２に示すように、図1に示す本発明の画像処理方法、及びプリント方法を実施するプリント出力システム１０は、スマートデバイス１２と、コンピュータ１４と、サーバ１６と、写真プリンタ１８と、ネットワーク２０とを備える。
また、図２Ａに示すように、プリント出力システム１０は、画像処理装置５０と、図２に示す写真プリンタ１８とを備える。ここで、画像処理装置５０は、図２に示すスマートデバイス１２と、図２に示すコンピュータ１４、及び／又はサーバ１６によって構成されるプロセッサ５２と、メモリ５４と、ストレージ５６と、通信用インタフェース５８と、を備える。
また、図２Ａに示すように、プリント出力システム１０は、画像処理装置５０と、図２に示す写真プリンタ１８とを備える。ここで、画像処理装置５０は、図２に示すスマートデバイス１２と、図２に示すコンピュータ１４、及び／又はサーバ１６によって構成されるプロセッサ５２と、メモリ５４と、ストレージ５６と、通信用インタフェース５８と、を備える。
【0022】
本発明の画像処理方法の取得工程Ｓ１０は、例えば、プリンタ付きアナログカメラ２２によって被写体が撮影されて出力された第１のプリント２４をスマートデバイス１２によって撮影して第１のプリント画像データ（デジタル画像データ）を取得する工程である。
本発明において、第１のプリント２４は、図２に示す例では、プリンタ付きアナログカメラ２２によって撮影されて出力された第１の領域２５ａと、第２の領域２５ｂとを有する矩形状のプリントであるが、本発明では、これに限定されず、どのようなプリントであっても良いし、どのようにして出力された物であっても良い。
本発明において、第１のプリント２４は、図２に示す例では、プリンタ付きアナログカメラ２２によって撮影されて出力された第１の領域２５ａと、第２の領域２５ｂとを有する矩形状のプリントであるが、本発明では、これに限定されず、どのようなプリントであっても良いし、どのようにして出力された物であっても良い。
【0023】
第１のプリント２４は、第１の領域２５ａと、第２の領域２５ｂとを有していればよく、例えば、図３Ａ、図３Ｂ、及び図３Ｃにそれぞれ示すサイズが異なる矩形状の記録媒体（以下、プリント用紙ともいう）２８（例えば、インスタントフィルム２８ａ、２８ｂ、及び２８ｃ）の第１の領域２９ａに写真画像が記録されたプリントであっても良い。なお、第１のプリント２４、従ってプリント用紙２８のサイズ、及びアスペクト比も、これらの３つのサイズ、及びアスペクト比に限定されず、様々なサイズ、及びアスペクト比であっても良く、また、第１のプリント２４の形状も、矩形状されず、様々な形状であっても良い。なお、第１のプリント２４の第１の領域２５ａ、及び第２の領域２５ｂ、従って、プリント用紙２８の第１の領域２９ａ及び第２の領域２９ｂも、様々な形状、サイズ、及びアスペクト比であっても良い。
また、第１のプリント２４は、例えば、写真フィルムの写真画像が写真プリンタによって記録媒体２８の第１の領域２９ａにプリントされた物であっても良いし、プリンタ付きデジタルカメラで撮影されて出力された物であっても良く、いかなるプリンタから出力されたものであっても良い。
また、第１のプリント２４は、例えば、写真フィルムの写真画像が写真プリンタによって記録媒体２８の第１の領域２９ａにプリントされた物であっても良いし、プリンタ付きデジタルカメラで撮影されて出力された物であっても良く、いかなるプリンタから出力されたものであっても良い。
【0024】
本発明において、第１のプリント２４の第１の領域２５ａと、第２の領域２５ｂとは、それぞれ異なる画像が記録された領域を意味するが、一方の領域の画像は写真画像であり、他方の領域の画像は、写真画像の周囲を囲むフレームの画像である。なお、フレームの画像は、通常フレームを形成する柄等であるが、何も記録されていない無地も含む。
なお、後述する第２のプリント２６の第３の領域２７ａ、及び第４の領域２７ｂも、それぞれ第１のプリント２４の第１の領域２５ａ、及び第２の領域２５ｂに対応しているものである。
以下では、第１の領域２５ａ、及び対応する第３の領域２７ａは、写真画像が記録される、又は記録された写真部分であり、第２の領域２５ｂ、及び対応する第４の領域２７ｂは、フレームの柄等の画像が記録されたフレーム部分として説明する。
なお、後述する第２のプリント２６の第３の領域２７ａ、及び第４の領域２７ｂも、それぞれ第１のプリント２４の第１の領域２５ａ、及び第２の領域２５ｂに対応しているものである。
以下では、第１の領域２５ａ、及び対応する第３の領域２７ａは、写真画像が記録される、又は記録された写真部分であり、第２の領域２５ｂ、及び対応する第４の領域２７ｂは、フレームの柄等の画像が記録されたフレーム部分として説明する。
【0025】
次に、図２に示す例では、第１のプリント２４の全領域の画像をスマートデバイス１２によって撮影して第１のプリント画像データを取得している。ここで、スマートデバイス１２としては、スマートフォン等の撮影機能付きの情報機器端末を挙げることができる。
本発明においては、第１のプリント画像データは、スマートデバイス１２によって取得するものに限定されず、第１のプリント画像データを取得できれば、どのようにして取得しても良い。
例えば、第１のプリント画像データは、第１のプリント２４の全領域の画像を、デジタルカメラによって撮影して取得されたものであっても、スキャナー、又は複写装置によってスキャンして取得されたものであっても良い。
本発明においては、第１のプリント画像データは、スマートデバイス１２によって取得するものに限定されず、第１のプリント画像データを取得できれば、どのようにして取得しても良い。
例えば、第１のプリント画像データは、第１のプリント２４の全領域の画像を、デジタルカメラによって撮影して取得されたものであっても、スキャナー、又は複写装置によってスキャンして取得されたものであっても良い。
【0026】
なお、取得工程Ｓ１０は、第１のプリント２４の第１の領域２５ａの第１の領域画像データと、第２の領域２５ｂの第２の領域画像データとをそれぞれ検出する検出工程を備え、これらを合成して第１のプリント画像データを取得しても良い。
図２、及び図２Ａに示すように、スマートデバイス１２等の撮影機能付きの情報機器端末は、ネットワーク２０を介してコンピュータ（パーソナルコンピュータ；ＰＣ）１４、及びサーバ１６に接続させることができる。こうして得られた第１のプリント画像データは、スマートデバイス１２からネットワーク２０を介して画像処理装置５０を構成するコンピュータ１４、及び／又はサーバ１６に送信され、通信用インタフェース５８を介してプロセッサ５２に入力されると共に、必要に応じてメモリ５４、又はストレージ５６に保存される。
図２、及び図２Ａに示すように、スマートデバイス１２等の撮影機能付きの情報機器端末は、ネットワーク２０を介してコンピュータ（パーソナルコンピュータ；ＰＣ）１４、及びサーバ１６に接続させることができる。こうして得られた第１のプリント画像データは、スマートデバイス１２からネットワーク２０を介して画像処理装置５０を構成するコンピュータ１４、及び／又はサーバ１６に送信され、通信用インタフェース５８を介してプロセッサ５２に入力されると共に、必要に応じてメモリ５４、又はストレージ５６に保存される。
【0027】
ここで、本発明において用いられるコンピュータ１４、及び／又はサーバ１６は、この決定工程Ｓ１２、及び後述する生成工程Ｓ１４を実行できれば、どのようなものであっても良く、例えば、図２Ａに示すように、プロセッサ５２、メモリ５４、ストレージ（記憶装置）５６、通信用インタフェース５８、などを有していればよく、これらを備える一体型のサーバコンピュータであっても良い。更に、コンピュータ１４は、キーボード、マウス、及びスキャナーなどの入力機器６０、並びにディスプレイ（表示装置）６２、及びプリンタ等の出力機器を有していても良い。
なお、プロセッサ５２は、例えば、ＣＰＵ（Central Processing Unit）、ＧＰＵ（Graphics Processing Unit）、ＤＳＰ（Digital Signal Processor）、又はＴＰＵ（Tensor Processing Unit）等によって構成される。メモリ５４は、例えば、ＲＯＭ（Read Only Memory）及びＲＡＭ（Random Access Memory）等の半導体メモリ等によって構成される。ストレージ（記憶装置）５６は、ハードディスク、又は光磁気ディスクドライブ等によって構成される。通信用インタフェース５８は、例えば、ネットワークインタフェースカード又は通信インタフェースボード等によって構成される。
なお、プロセッサ５２は、例えば、ＣＰＵ（Central Processing Unit）、ＧＰＵ（Graphics Processing Unit）、ＤＳＰ（Digital Signal Processor）、又はＴＰＵ（Tensor Processing Unit）等によって構成される。メモリ５４は、例えば、ＲＯＭ（Read Only Memory）及びＲＡＭ（Random Access Memory）等の半導体メモリ等によって構成される。ストレージ（記憶装置）５６は、ハードディスク、又は光磁気ディスクドライブ等によって構成される。通信用インタフェース５８は、例えば、ネットワークインタフェースカード又は通信インタフェースボード等によって構成される。
【0028】
次に、決定工程Ｓ１２は、コンピュータ１４、及び／又はサーバ１６のプロセッサ５２において実行され、第１のプリント２４の第１の領域２５ａ、及び第２の領域２５ｂの少なくとも一方の領域から取得された情報に基づいて、第２のプリント用画像データを生成するために、第１のプリント画像データに適用する画像処理を決定する工程である。
決定工程Ｓ１２において、第１のプリント２４の第１の領域２５ａから取得される情報としては、第１の領域２５ａのサイズ、アスペクト比、写真部分２５ａの写真画像のトリミングの有無、トリミング領域のサイズ、アスペクト比、写真部分２５ａの写真画像内の被写体、例えば人物の認識結果、被写体の場面の認識結果等を挙げることができる。これらの情報は、メモリ５４に保存されても良いし、ストレージ５６に保存されても良い。
なお、これらの情報は、取得工程Ｓ１０で取得された第１のプリント２４の第１の領域２５ａの画像データをプロセッサ５２において分析することによって取得されるものであっても良いし、予め、第１の領域２５ａの写真画像からユーザによって取得されるものであっても良い。これらの情報は、メモリ５４に保存されても良いし、ストレージ５６に保存されても良い。
決定工程Ｓ１２において、第１のプリント２４の第１の領域２５ａから取得される情報としては、第１の領域２５ａのサイズ、アスペクト比、写真部分２５ａの写真画像のトリミングの有無、トリミング領域のサイズ、アスペクト比、写真部分２５ａの写真画像内の被写体、例えば人物の認識結果、被写体の場面の認識結果等を挙げることができる。これらの情報は、メモリ５４に保存されても良いし、ストレージ５６に保存されても良い。
なお、これらの情報は、取得工程Ｓ１０で取得された第１のプリント２４の第１の領域２５ａの画像データをプロセッサ５２において分析することによって取得されるものであっても良いし、予め、第１の領域２５ａの写真画像からユーザによって取得されるものであっても良い。これらの情報は、メモリ５４に保存されても良いし、ストレージ５６に保存されても良い。
【0029】
次に、第１のプリント２４の第２の領域（フレーム部分）２５ｂから取得される情報としては、フレーム部分２５ｂのサイズ、フレーム部分２５ｂの柄（図柄）、例えば、色、絵柄、及びデザイン、並びにフレーム部分に記載された第１のプリント２４の主題を表す「誕生日」等の手書きテキスト等を挙げることができる。
なお、これらの情報は、取得工程Ｓ１０で取得された第１のプリント２４の第２の領域２５ｂの画像データをプロセッサ５２において分析することによって取得されるものであっても良いし、予め、第２の領域２５ｂのフレームの画像からユーザによって取得されるものであっても良い。なお、手書きテキストが第１のプリント２４の第２の領域２５ｂのみならず、第１の領域２５ａ、又は両方の領域に渡って記載された場合であっても、手書きテキストの情報を第２の領域２５ｂのみならず、第１の領域２５ａ、又は両方の領域から取得しても良い。
なお、これらの情報は、取得工程Ｓ１０で取得された第１のプリント２４の第２の領域２５ｂの画像データをプロセッサ５２において分析することによって取得されるものであっても良いし、予め、第２の領域２５ｂのフレームの画像からユーザによって取得されるものであっても良い。なお、手書きテキストが第１のプリント２４の第２の領域２５ｂのみならず、第１の領域２５ａ、又は両方の領域に渡って記載された場合であっても、手書きテキストの情報を第２の領域２５ｂのみならず、第１の領域２５ａ、又は両方の領域から取得しても良い。
【0030】
また、決定工程Ｓ１２において決定される画像処理としては、例えば、フレーム部分２５ｂの柄、及び／又は手書きテキスト等に応じて、第２のプリント２６の第３の領域２７ａ、及び／又は第４の領域２７ｂに適した模様などを付けるために、第１のプリント画像データ、若しくは第１の領域画像データ、及び／又は第２の領域画像データに行うフィルター処理を挙げることができる。例えば、決定工程において、上記検出工程で検出された第１の領域画像データ、及び第２の領域画像データに適用する画像処理として、それぞれ異なる画像処理を決定しても良い。
また、他の画像処理としては、第１のプリント２４のフレーム部分２５ｂの柄、及び第２のプリント２６の第４の領域（フレーム部分）２７ｂの柄の組合せに応じて柄を決定し、決定された柄を第２のプリント２６の第３の領域（写真部分）２７ａの周囲に構成する画像処理を挙げることができる。
また、他の画像処理としては、分離して取得された第１のプリント２４の写真部分２５ａの第１の領域画像データと、フレーム部分２５ｂの第１の領域画像データとそれぞれリサイズして合成する画像処理等を挙げることができる。
また、他の画像処理としては、第１のプリント２４のフレーム部分２５ｂの柄、及び第２のプリント２６の第４の領域（フレーム部分）２７ｂの柄の組合せに応じて柄を決定し、決定された柄を第２のプリント２６の第３の領域（写真部分）２７ａの周囲に構成する画像処理を挙げることができる。
また、他の画像処理としては、分離して取得された第１のプリント２４の写真部分２５ａの第１の領域画像データと、フレーム部分２５ｂの第１の領域画像データとそれぞれリサイズして合成する画像処理等を挙げることができる。
【0031】
また、他の画像処理としては、第１のプリント２４の第１の領域２５ａの写真画像が元となる原プリントの原写真画像である場合、第１のプリント２４の写真画像とするために行われた原写真画像のトリミング領域を参考にして、第２のプリント２６の第３の領域（写真部分）２７ａの写真画像とするために原写真画像に対するトリミング領域を決定する画像処理等を挙げることができる。
また、上述の原写真画像に映っている被写体、人物、及び／又は場面を認識し、認識結果に基づいて、第２のプリント２６の写真画像とするために原写真画像に対するトリミング領域を決定する画像処理等も挙げることができる。
以上の複数の画像処理は、予めメモリ５４、又はストレージ５６に保存されていることが好ましい。
また、上述の原写真画像に映っている被写体、人物、及び／又は場面を認識し、認識結果に基づいて、第２のプリント２６の写真画像とするために原写真画像に対するトリミング領域を決定する画像処理等も挙げることができる。
以上の複数の画像処理は、予めメモリ５４、又はストレージ５６に保存されていることが好ましい。
【0032】
次に、生成工程Ｓ１４は、コンピュータ１４、及び／又はサーバ１６のプロセッサ５２において実行され、取得工程Ｓ１０において取得された第１のプリント画像データに、決定工程Ｓ１２で決定された上述した画像処理を行って、第１のプリント２４の第１の領域(写真部分)２５ａに対応する第３の領域(写真部分)２７ａを有する第２のプリント２６を出力するための第２のプリント用画像データを生成する工程である。
こうして、本発明の画像処理方法においては、上述した様々な画像処理が施され、新たな記録媒体２８に最適な画像を記録するための新たな様々な第２のプリント用画像データを生成することができる。こうして生成工程Ｓ１４において生成された第２のプリント用画像データは、必要に応じてメモリ５４、又はストレージ５６に保存されることが好ましい。
こうして生成された第２のプリント画像データは、コンピュータ１４、及び／又はサーバ１６のプロセッサ５２から通信用インタフェース５８を経て画像処理装置５０のコンピュータ１４、及び／又はサーバ１６からプリンタ１８に送信される。
こうして、本発明の画像処理方法においては、上述した様々な画像処理が施され、新たな記録媒体２８に最適な画像を記録するための新たな様々な第２のプリント用画像データを生成することができる。こうして生成工程Ｓ１４において生成された第２のプリント用画像データは、必要に応じてメモリ５４、又はストレージ５６に保存されることが好ましい。
こうして生成された第２のプリント画像データは、コンピュータ１４、及び／又はサーバ１６のプロセッサ５２から通信用インタフェース５８を経て画像処理装置５０のコンピュータ１４、及び／又はサーバ１６からプリンタ１８に送信される。
【0033】
次に、本発明のプリント方法について説明する。
本発明のプリント方法の記録工程Ｓ１６は、コンピュータ１４、及び／又はサーバ１６のプロセッサ５２から通信用インタフェース５８を経てネットワーク２０を介してプリンタ１８に送信された第２のプリント用画像データに基づいて、プリンタ１８において第２のプリント用の画像を第２のプリント用の記録媒体２８上に記録する工程である。なお、送信された第２のプリント用画像データは、画像処理装置５０、即ちコンピュータ１４、及び／又はサーバ１６のプロセッサ５２において、上述した本発明の画像処理方法の第２のプリント用画像データの生成工程Ｓ１４で生成されたものである。
ここで、第２のプリント用の記録媒体２８は、プリンタ１８において用いることができ、第２のプリント用の画像を記録できるものであれば、どのようなものでも良く、再プリント用紙、例えばインスタントフィルム、インクジェット用紙、写真用の印画紙、例えばモノクロームペーパー、カラーペーパー等を挙げることができる。なお、第２のプリント用の記録媒体２８は、第1のプリント２４の記録媒体(プリント用紙）２８と同様のものを用いることができるが、その形状、サイズ、及びアスペクト比は、同じであってもよいし、異なっていても良い。
本発明のプリント方法の記録工程Ｓ１６は、コンピュータ１４、及び／又はサーバ１６のプロセッサ５２から通信用インタフェース５８を経てネットワーク２０を介してプリンタ１８に送信された第２のプリント用画像データに基づいて、プリンタ１８において第２のプリント用の画像を第２のプリント用の記録媒体２８上に記録する工程である。なお、送信された第２のプリント用画像データは、画像処理装置５０、即ちコンピュータ１４、及び／又はサーバ１６のプロセッサ５２において、上述した本発明の画像処理方法の第２のプリント用画像データの生成工程Ｓ１４で生成されたものである。
ここで、第２のプリント用の記録媒体２８は、プリンタ１８において用いることができ、第２のプリント用の画像を記録できるものであれば、どのようなものでも良く、再プリント用紙、例えばインスタントフィルム、インクジェット用紙、写真用の印画紙、例えばモノクロームペーパー、カラーペーパー等を挙げることができる。なお、第２のプリント用の記録媒体２８は、第1のプリント２４の記録媒体(プリント用紙）２８と同様のものを用いることができるが、その形状、サイズ、及びアスペクト比は、同じであってもよいし、異なっていても良い。
【0034】
ここで、第２のプリント用の記録媒体（プリント用紙）２８としては、図３（ａ）、（ｂ）、及び（ｃ）に示す記録媒体（インスタントフィルム）２８ａ（instax mini film；富士フイルム社製）、２８ｂ（instax SQUARE film；富士フイルム社製）、及び２８ｃ（instax WIDE film；富士フイルム社製）のように、予め第２のプリント２６のフレーム部分２７ｂとなるフレーム部分２９ｂに柄等を有しており、第２のプリント２６の写真部分２７ａとなる写真部分２９ａに第２のプリント用の画像の写真画像のみを記録する記録媒体であっても良い。また、第２のプリント用の記録媒体２８としては、写真部分２９ａには第２のプリント用の画像の写真画像を記録し、柄等を有するフレーム部分２９ｂにも、第２のプリント用の画像のフレーム画像を重ねて記録することができる記録媒体であっても良い。更には、第２のプリント用の記録媒体２８は、フレーム部分２９ｂには何も記録されておらず、全体が画像を記録可能な記録媒体であっても良い。この場合には、第２のプリント用画像データが、第２のプリント２６の写真部分２７ａとなる第３の領域画像データと、第２のプリント２６のフレーム部分２７ｂとなる第４の領域画像データとを有しており、第２のプリント用画像データに基づいて、このような記録媒体２８に第２のプリント用の画像を記録することにより、第２のプリント２６の写真部分２７ａ、及びフレーム部分２７ｂが記録されるものであっても良い。
【0035】
なお、第２のプリント２６のサイズ、及びアスペクト比も、第１のプリント２４と同様に、これらの３つのサイズ、及びアスペクト比に限定されず、様々なサイズ、及びアスペクト比であっても良く、また、第２のプリント２６の形状も、第１のプリント２４と同様に、矩形状されず、様々な形状であっても良い。なお、第２のプリント用の記録媒体２８は、第1のプリント２４の記録媒体(プリント用紙）２８と同様のものを用いることができるが、その形状、サイズ、及びアスペクト比は、同じであってもよいし、異なっていても良い。勿論、第２のプリント２６の写真部分２７ａも、第1のプリント２４の写真部分２５ａと、その形状、サイズ、及びアスペクト比が、同じであってもよいし、異なっていても良い。
【0036】
例えば、プリント用紙２８であるインスタントフィルム２８ａ、２８ｂ、及び２８ｃの用紙形状、用紙サイズ、及びアスペクト比等は、図３Ａ、図３Ｂ、及び図３Ｃ、並びに図３Ｄに記載されたサイズ情報等を参照することができる。また、プリント用紙２８であるインスタントフィルム２８ａ、２８ｂ、及び２８ｃのフレーム部分２９ｂの柄、及び／又は模様については、白、白以外の黒・赤・青・ピンクのような単色、及び／又は混合色、複数色、複数色のグラデーション、ドット・チェック・ストライプ・ステンドグラス・カンフェティ・星・和風などの柄、自然物、及び／又は生き物をモチーフにした模様、アート表現、及び／又はキャラクタデザイン等、様々な配色、及び／又はデザイン性のある模様等を挙げることができる。
また、プリント用紙２８であるカラーペーパーの用紙形状、用紙サイズ、及びアスペクト比等は、図３Ｅに記載された多数のサイズ情報を参照することができる。
また、プリント用紙２８であるカラーペーパーの用紙形状、用紙サイズ、及びアスペクト比等は、図３Ｅに記載された多数のサイズ情報を参照することができる。
【0037】
次に、出力工程Ｓ１８は、記録工程Ｓ１６において、プリンタ１８によって、第２のプリント用の画像が記録媒体２８に記録された第２のプリント２６を出力する工程である。
第２のプリント２６は、写真部分２７ａ、及び／又はフレーム部分２７ｂに、被写体、人物、及び／又は場面に最適な画像が記録されているプリントである。
本発明の一実施形態の画像処理方法、及びプリント方法、並びに本発明の一実施形態の画像処理装置、及びプリント出力システムは、基本的に以上のように構成される。
第２のプリント２６は、写真部分２７ａ、及び／又はフレーム部分２７ｂに、被写体、人物、及び／又は場面に最適な画像が記録されているプリントである。
本発明の一実施形態の画像処理方法、及びプリント方法、並びに本発明の一実施形態の画像処理装置、及びプリント出力システムは、基本的に以上のように構成される。
【0038】
以下に、本発明の画像処理方法、及びプリント方法の具体的な実施形態について説明する。
［第１実施形態について］
まず、図１、図４、及び図４Ａを参照しつつ、本発明の画像処理方法、及びプリント方法の第1の実施形態について具体的に説明する。
［第１実施形態について］
まず、図１、図４、及び図４Ａを参照しつつ、本発明の画像処理方法、及びプリント方法の第1の実施形態について具体的に説明する。
【0039】
図４の左側に示すように、写真部分２５ａに２人の人物の写真画像が記録され、写真部分２５ａの周囲を囲むフレーム部分２５ｂの全域に柄があり、下側の領域に「Happy birthday（誕生日）」を簡略化した「Happy b-day」という手書きのテキストが記載された元（第１の）プリント２４が用意されている。
この時、図１に示す本発明の画像処理方法の取得工程Ｓ１０において元プリント２４全体の元（第１の）プリント画像データを取得する。即ち、図４Ａに示す工程Ｓ１０ａのように、写真部分２５ａに人物、フレーム部分２５ｂに柄、及び手書きテキストが記載された元プリント２４の元プリント画像データを取得する。
ここで、図４の中側に示すように、取得された元プリント画像データが表すスキャン画像（スキャンされた元プリント２４全体の画像）の写真部分２５ａの画像と、フレーム部分２５ｂの柄の画像とその中の手書きテキストを認識することができる（図４Ａの工程Ｓ１０ａ１参照）。
この時、図１に示す本発明の画像処理方法の取得工程Ｓ１０において元プリント２４全体の元（第１の）プリント画像データを取得する。即ち、図４Ａに示す工程Ｓ１０ａのように、写真部分２５ａに人物、フレーム部分２５ｂに柄、及び手書きテキストが記載された元プリント２４の元プリント画像データを取得する。
ここで、図４の中側に示すように、取得された元プリント画像データが表すスキャン画像（スキャンされた元プリント２４全体の画像）の写真部分２５ａの画像と、フレーム部分２５ｂの柄の画像とその中の手書きテキストを認識することができる（図４Ａの工程Ｓ１０ａ１参照）。
【0040】
次に、決定工程Ｓ１２において、取得工程Ｓ１０において取得された元プリント画像データが表すスキャン画像のフレーム部分２５ｂの柄、及び手書きテキストを認識し、画像データに適用する画像処理として、認識したフレーム部分２５ｂの柄、及び手書きテキストに応じたフィルター処理を決定する（図４Ａの工程Ｓ１２ａ）。なお、この認識は、取得された元プリント画像データのフレーム部分２５ｂの画像データからコンピュータ１４、サーバ１６のプロセッサ５２によって行っても良いし、ユーザが認識してコンピュータ１４、サーバ１６に入力しても良い。
ここで、フィルター処理としては、例えば、図４の右側に示すように、手書きテキストが示す誕生日に応じた星マークを写真部分２５ａの画像に重ね合わせる処理等を挙げることができる。
ここで、フィルター処理としては、例えば、図４の右側に示すように、手書きテキストが示す誕生日に応じた星マークを写真部分２５ａの画像に重ね合わせる処理等を挙げることができる。
【0041】
次に、生成工程Ｓ１４において、再（第２の）プリント２６の写真部分２７ａの画像データとして、図４の右側に示すように、２人の人物の写真画像に星マークが重ね合わされた再プリント２６の画像の再プリント用画像データが生成される。即ち、図４Ａの工程Ｓ１４ａのように、再プリント２６の写真部分２７ａの画像データとして、人物の画像に星マークが重ね合わされた再プリント用画像データを生成する。
ここで、図４の右側には、フレーム部分２７ｂの画像が図示されていないが、フレーム部分２７ｂは、元プリント２４のフレーム部分２５ｂと同じ柄の画像であっても良いし、この柄に同様の星マークを重ね合わせた画像であっても良い。
こうして、本発明の画像処理方法は終了する。
ここで、図４の右側には、フレーム部分２７ｂの画像が図示されていないが、フレーム部分２７ｂは、元プリント２４のフレーム部分２５ｂと同じ柄の画像であっても良いし、この柄に同様の星マークを重ね合わせた画像であっても良い。
こうして、本発明の画像処理方法は終了する。
【0042】
この後、本発明の画像処理方法で生成された再プリント用画像データに基づいて、図１に示す本発明のプリント方法の記録工程Ｓ１６、及び出力工程Ｓ１８が実施され、図４の右側に示す人の人物の写真画像に星マークが重ね合わされた写真画像が記録された写真部分２７ａを持つ再（第２の）プリント２６が出力される。即ち、図４Ａの工程Ｓ１６ａのように、再プリント用画像データに基づいて再プリント用の記録媒体２８に写真部分２７ａに人物の画像に星マークが重ね合わされた写真画像を記録する。続いて、工程Ｓ１８ａのように、写真部分２７ａに人物の画像に星マークが重ね合わされた写真画像が記録された再プリント２６を出力する。
なお、本第１実施形態では、再プリント２６の写真部分２７ａの星マーク付きの写真画像の代わりに、写真画像を再プリント２６の写真部分２７ｃとして、２人の人物の画像の上方に手書きテキストと同じテキストを所定の書体で記録した写真画像を再プリント２６の写真部分２７ｃとしても良い。
なお、本第１実施形態では、再プリント２６の写真部分２７ａの星マーク付きの写真画像の代わりに、写真画像を再プリント２６の写真部分２７ｃとして、２人の人物の画像の上方に手書きテキストと同じテキストを所定の書体で記録した写真画像を再プリント２６の写真部分２７ｃとしても良い。
【0043】
本第１実施形態においては、再プリント２６を作製する再プリント時に、元プリント２４のフレーム部分２５ｂの手書きテキストの情報を用いることができ、再プリント２６の写真部分２７ａ、及び２７ｃの画像を、元プリント２４の写真部分２５ａの画像、及びフレーム部分２５ｂの手書きテキストの情報に最適な雰囲気を持つ最適な画像にすることができる。即ち、図５に示すように、フレーム部分に「Happy b-day（誕生日）」と書いてあることを認識して、再プリント２６の写真部分２７ａも画像に楽しい雰囲気のフィルターをかけることができる。
【0044】
［第２実施形態について］
まず、図１、図５、及び図５Ａを参照しつつ、本発明の画像処理方法、及びプリント方法の第２の実施形態について具体的に説明する。
本第２実施形態においても、図５の左側に示すように、第１実施形態の図４に示す元プリント２４と同じ元（第１の）プリント２４ａが用意されている。
まず、図１、図５、及び図５Ａを参照しつつ、本発明の画像処理方法、及びプリント方法の第２の実施形態について具体的に説明する。
本第２実施形態においても、図５の左側に示すように、第１実施形態の図４に示す元プリント２４と同じ元（第１の）プリント２４ａが用意されている。
【0045】
ここでも、第１実施形態と同様に、図１に示す本発明の画像処理方法の取得工程Ｓ１０において、元プリント２４ａの画像データを取得する。
ここで、図５の中側に示すように、図４に示す写真部分２５ａの画像と同じスキャン画像（スキャンされた元プリント２４ａ全体の画像）の写真部分２５ａの画像と、フレーム部分２５ｂの柄の画像とを分離して、それぞれ、写真部分２５ａの画像データと、フレーム部分２５ｂの柄の画像の画像データを取得する。即ち、図５Ａに示す工程Ｓ１０ｂのように、元プリント２４ａの元プリント画像データとして、写真部分２５ａの画像データと、フレーム部分２５ｂの画像データとを分離して取得する。
ここで、図５の中側に示すように、図４に示す写真部分２５ａの画像と同じスキャン画像（スキャンされた元プリント２４ａ全体の画像）の写真部分２５ａの画像と、フレーム部分２５ｂの柄の画像とを分離して、それぞれ、写真部分２５ａの画像データと、フレーム部分２５ｂの柄の画像の画像データを取得する。即ち、図５Ａに示す工程Ｓ１０ｂのように、元プリント２４ａの元プリント画像データとして、写真部分２５ａの画像データと、フレーム部分２５ｂの画像データとを分離して取得する。
【0046】
次に、決定工程Ｓ１２において、取得工程Ｓ１０において取得された写真部分２５ａの画像データ、及びフレーム部分２５ｂの柄の画像の画像データに、それぞれ施す異なる画像処理、例えば、リサイズ処理、クロッピング処理、及び合成処理、又は映像の補填処理等を決定する。即ち、図５Ａの工程Ｓ１２ｂのように、元プリント画像データの写真部分２５ａの画像データと、フレーム部分２５ｂの画像データとに対して施す画像処理として、それぞれ異なる画像処理を決定する。ここでは、スキャン画像の写真部分２５ａの画像、及びフレーム部分２５ｂの柄の画像に対して、画像の拡大縮小処理、即ち拡縮処理は行わない。
【0047】
例えば、再プリント２６ａの記録媒体２８のサイズが元プリント２４ａのサイズと異なり、より大きい場合、再プリント２６ａの記録媒体２８の写真部分２９ａのサイズの情報に合わせて、元プリント２４ａの写真部分２５ａの画像に対してリサイズ処理する。即ち、図５Ａの工程Ｓ１２ｂ１のように、写真部分２５ａの人物の画像データに対する画像処理として、人物の両側を拡大するリサイズ処理を決定する。これと共に、このリサイズ処理は行わず、これとは別に、再プリント２６ａの記録媒体２８のフレーム部分２９ｂのサイズに合わせて、元プリント２４ａのフレーム部分２５ｂの画像に対して合成処理、又は映像の補填処理を行って、再プリント２６ａのフレーム部分２７ｂとする必要がある。即ち、図５Ａの工程Ｓ１２ｂ２のように、フレーム部分２５ｂの画像データに対する画像処理として、柄を追加する合成処理、又は映像の補填処理を決定する。したがって、再プリント２６ａのフレーム部分２７ｂと、元プリント２４ａのフレーム部分２５ｂとは異なる。
【0048】
例えば、元プリント２４ａの記録媒体２８が図３Ａに示す記録媒体２８ａであり、再プリント２６ａの記録媒体２８が図３Ｃに示す記録媒体２８ｃであり、そのサイズが大きい場合に、元プリント２４ａの写真部分２５ａの画像には、後述する第４実施形態、及び第５実施形態のようなリサイズ処理を画像処理として行って、再プリント２６ａの写真部分２７ａの画像を記録媒体２８ｃの写真部分２９ａのサイズに合わせる。即ち、詳細は後述するが、このリサイズ処理は、元プリント２４ａの写真部分２５ａの画像が、図示しない元画像（以下、原画像ともいう）をトリミングしたものである場合に、原画像に戻し、原画像を記録媒体２８ｃの写真部分２９ａのサイズに合わせてトリミングするリサイズ処理を行うことにより、画像の拡縮を行うことなく、再プリント２６ａの写真部分２７ａの画像とする画像データを生成する画像処理である。
図５の右側に示す再プリント２６ａの写真部分２７ａの画像の場合には、原画像にも２人の人物しか写っておらず、その両側は背景であったことを表している。
図５の右側に示す再プリント２６ａの写真部分２７ａの画像の場合には、原画像にも２人の人物しか写っておらず、その両側は背景であったことを表している。
【0049】
一方、再プリント２６ａのフレーム部分２７ｂの柄の画像に関しては、元プリント２４ａのフレーム部分２５ｂの柄の画像の画像処理は、記録媒体２８ｃのフレーム部分２９ｂのサイズに合わせて、元プリント２４ａのフレーム部分２５ｂの柄の画像を塗り足す処理、即ち合成処理、又は画像の補填処理を行うことにより、画像の拡縮を行うことなく、再プリント２６ａのフレーム部分２７ｂの画像とする画像データを生成する画像処理である。
図５の右側の再プリント２６ａに示すように、元プリント２４ａのスキャン画像には拡縮処理を行わないので、元プリント２４ａのフレーム部分２５ｂの柄の画像、及び「Happy b-day」なる手書きのテキストは、第１実施形態と同様に、そのまま生かしておき、リサイズ処理によってサイズが大きくなった写真部分２７ａの画像の２人の左右の両側の画像領域に対応するフレーム部分２７ｂの左右の領域２７ｂ１、２７ｂ２、２７ｂ３、及び２７ｂ４に柄の画像を付け加えて、又は補填して合成したことを表している。
図５の右側の再プリント２６ａに示すように、元プリント２４ａのスキャン画像には拡縮処理を行わないので、元プリント２４ａのフレーム部分２５ｂの柄の画像、及び「Happy b-day」なる手書きのテキストは、第１実施形態と同様に、そのまま生かしておき、リサイズ処理によってサイズが大きくなった写真部分２７ａの画像の２人の左右の両側の画像領域に対応するフレーム部分２７ｂの左右の領域２７ｂ１、２７ｂ２、２７ｂ３、及び２７ｂ４に柄の画像を付け加えて、又は補填して合成したことを表している。
【0050】
次に、生成工程Ｓ１４において、元プリント２４ａの写真部分２５ａの画像データにはリサイズ処理が行われて再プリント２６ａの写真部分２７ａの画像データが生成され、元プリント２４ａのフレーム部分２５ｂの柄、及び手書きテキストの画像には柄の画像を塗り足す処理が行われて再プリント２６ａのフレーム部分２７ｂの画像データが生成され、写真部分２７ａの画像データとフレーム部分２７ｂの画像データとが合成され、再プリント２６ａの画像の再プリント用画像データが生成される。即ち、図５Ａの工程Ｓ１４ｂのように、再プリント２６の写真部分２７ａのリサイズされた画像データと、フレーム部分２７ｂの合成処理された画像データとを合成して再プリント用画像データを生成する。
こうして、本発明の画像処理方法が終了する。
こうして、本発明の画像処理方法が終了する。
【0051】
この後、本発明の画像処理方法で生成された再プリント用画像データに基づいて、図１に示す本発明のプリント方法の記録工程Ｓ１６、及び出力工程Ｓ１８が実施され、図５の右側に示すように、写真部分２７ａには、リサイズ処理がされた写真画像がプリントされ、フレーム部分２７ｂには、塗り足し処理がされた柄、及び手書きテキストの画像がプリントされた再プリント２６が出力される。即ち、図５Ａの工程Ｓ１６ｂのように、再プリント用画像データに基づいて再プリント用の記録媒体２８にリサイズ処理された写真部分２７ａの画像と合成処理されたフレーム部分２７ｂの画像とを持つ写真画像を記録する。続いて、図５Ａの工程Ｓ１８ｂのように、リサイズ処理された写真部分２７ａの画像と合成処理されたフレーム部分２７ｂの画像とを持つ写真画像が記録された再プリント２６を出力する。
【0052】
なお、本第２実施形態では、再プリント２６のための記録媒体２８は、写真部分２９ａと同様に、フレーム部分２９ｂもプリント可能である必要がある。
本第２実施形態においては、再プリント２６を作製する再プリント時に、元プリント２４の写真部分２５ａとフレーム部分２５ｂとを分離してそれぞれの画像データに異なる画像処理を施して、再プリント２６の写真部分２７ａの画像とフレーム部分２７ｂの画像を生成するので、画像の拡縮を行うことなく、元プリント２４の写真部分２５ａとフレーム部分２５ｂの特徴を生かしたまま、どのようなサイズの再プリント２６も出力することができるし、最適な画像とすることができる。
本第２実施形態においては、再プリント２６を作製する再プリント時に、元プリント２４の写真部分２５ａとフレーム部分２５ｂとを分離してそれぞれの画像データに異なる画像処理を施して、再プリント２６の写真部分２７ａの画像とフレーム部分２７ｂの画像を生成するので、画像の拡縮を行うことなく、元プリント２４の写真部分２５ａとフレーム部分２５ｂの特徴を生かしたまま、どのようなサイズの再プリント２６も出力することができるし、最適な画像とすることができる。
【0053】
また、本第２実施形態においては、元プリント２４ａのフレーム部分２５ｂの画像処理結果に基づいて、再プリント２６ａを出力するための再プリント画像を生成する。したがって、元プリント２４ａと再プリント２６ａとでプリント用紙（記録媒体２８）のサイズ等の条件が異なる場合に、再プリント２６ａに最適な画像を生成することができる。
また、元プリント２４ｂと再プリント２６ｂ（記録媒体２８）の用紙サイズが異なる場合に、再プリント２６ｂのフレーム部分２７ｂはリサイズせずに塗り足し処理、又はクロッピング処理をしてから、写真部分２７ａはリサイズ処理してから合成することで、手書き文字の歪みを防止しつつ、再プリント２６ｂに適した画像を生成することができる。
また、元プリント２４ｂと再プリント２６ｂ（記録媒体２８）の用紙サイズが異なる場合に、再プリント２６ｂのフレーム部分２７ｂはリサイズせずに塗り足し処理、又はクロッピング処理をしてから、写真部分２７ａはリサイズ処理してから合成することで、手書き文字の歪みを防止しつつ、再プリント２６ｂに適した画像を生成することができる。
【0054】
【0055】
本第３実施形態においても、図６の左側に示すように、図４に示す元プリント２４と同様に写真部分２５ａに２人の人物の写真画像が記録され、写真部分２５ａの周囲を囲むフレーム部分２５ｂの全域に、図４とは異なる柄の画像が記録された元プリント２４ｂが用意されている。
また、再プリント２６ｂの画像が記録される再プリント用紙（記録媒体）２８ｃも用意されている。図６に示す例では、記録媒体２８ｃのサイズは、元プリント２４ｂのサイズより大きい。
また、再プリント２６ｂの画像が記録される再プリント用紙（記録媒体）２８ｃも用意されている。図６に示す例では、記録媒体２８ｃのサイズは、元プリント２４ｂのサイズより大きい。
【0056】
この時、図１に示す本発明の画像処理方法の取得工程Ｓ１０において、元プリント２４ｂをスキャンして元プリント２４ｂの画像データを取得する。
ここで、図６の中側に示すように、元プリント２４ｂのスキャン画像の写真部分２５ａの画像の画像データを取得しておく。即ち、図６Ａに示す工程Ｓ１０ｃのように、元プリント２４ａの元プリント画像データとして、写真部分２５ａの画像データと、フレーム部分２５ｂの画像データとをそれぞれ取得する。
また、元プリント２４ｂのスキャン画像のフレーム部分２５ｂの柄の画像２５ｂ１、及び元プリント２４ｂとサイズと異なる再プリント用の記録媒体２８ｃのフレーム部分２９ｂの柄の画像２９ｂ１を認識しておく（図６Ａの工程Ｓ１０ｃ１）。
ここで、図６の中側に示すように、元プリント２４ｂのスキャン画像の写真部分２５ａの画像の画像データを取得しておく。即ち、図６Ａに示す工程Ｓ１０ｃのように、元プリント２４ａの元プリント画像データとして、写真部分２５ａの画像データと、フレーム部分２５ｂの画像データとをそれぞれ取得する。
また、元プリント２４ｂのスキャン画像のフレーム部分２５ｂの柄の画像２５ｂ１、及び元プリント２４ｂとサイズと異なる再プリント用の記録媒体２８ｃのフレーム部分２９ｂの柄の画像２９ｂ１を認識しておく（図６Ａの工程Ｓ１０ｃ１）。
【0057】
次に、決定工程Ｓ１２において、取得工程Ｓ１０において取得された元プリント画像データが表すスキャン画像のフレーム部分２５ｂの柄の画像２５ｂ１と、記録媒体２８ｃのフレーム部分２９ｂの柄の画像２９ｂ１とが認識されており、認識された両者の柄の画像２５ｂ１と画像２９ｂ１との組み合わせに基づいて再プリント２６ｂの写真画像において合成する新しい柄の画像を決定し、決定された柄の画像を再プリント２６ｂの写真部分２７ａの２人の人物の写真画像の周囲に合成する画像処理を決定する（図６Ａの工程Ｓ１２ｃ参照）。
なお、図６の中側に示すように、新しい柄の画像３０は、再プリント２６の写真部分２７ａとなる再プリント用画像３２の２人の人物の写真画像の周囲に合成するために決定されることは言うまでもない。
なお、図６の中側に示すように、新しい柄の画像３０は、再プリント２６の写真部分２７ａとなる再プリント用画像３２の２人の人物の写真画像の周囲に合成するために決定されることは言うまでもない。
【0058】
ここで、決定工程Ｓ１２において決定される画像処理は、元プリント２４ｂの写真部分２５ａの写真画像を、そのままサイズの大きい記録媒体２８ｃの写真部分２９ａの中央に配置するリサイズ処理をして、その周囲に上述の決定された新しい柄の画像３０を合成し、再プリント２６ｂの再プリント用画像３２とする画像処理と言える。即ち、新しい柄の画像３０を合成する前の再プリント２６ｂの写真部分２７ａの画像は、第２実施形態の再プリント２６ａの写真部分２７ａの画像と同様に、元プリント２４ｂの写真部分２５ａの写真画像がリサイズ処理されたものであると言える。
なお、サイズの大きい記録媒体２８ｃの写真部分２９ａの中央に配置される元プリント２４ｂの写真部分２５ａの写真画像は、その周囲に新しい柄の画像３０を合成することができれば、多少の拡縮処理を行っても良い。
なお、サイズの大きい記録媒体２８ｃの写真部分２９ａの中央に配置される元プリント２４ｂの写真部分２５ａの写真画像は、その周囲に新しい柄の画像３０を合成することができれば、多少の拡縮処理を行っても良い。
【0059】
次に、生成工程Ｓ１４において、元プリント２４ｂの写真部分２５ａの画像の画像データにはリサイズ処理が行われ、次いで、写真部分２５ａの画像の周囲には新しい柄の画像３０が合成されて、再プリント２６ｂの写真部分２７ａの再プリント用画像３２を記録するための再プリント用画像データが生成される。即ち、図６Ａに示す工程Ｓ１４ｃのように、元プリント２４ｂの写真部分２５ａの画像データがリサイズ処理され、リサイズ処理された写真部分２５ａの人物の両側には新しい柄の画像が合成された再プリント２６ｂの写真部分２７ａのみの再プリント用画像データを生成する。なお、この再プリント用画像データには、再プリント２６ｂのフレーム部分２７ｂの画像データは含まれていない。
こうして、本発明の画像処理方法が終了する。
こうして、本発明の画像処理方法が終了する。
【0060】
この後、本発明の画像処理方法で生成された再プリント用画像データに基づいて、図１に示す本発明のプリント方法の記録工程Ｓ１６、及び出力工程Ｓ１８が実施され、図６の中側に示すように、記録媒体２８ｃの第１の領域（写真部分）２９ａに再プリント用画像３２が記録されて写真部分２７ａとなった再プリント２６ｂが出力される。即ち、図６Ａの工程Ｓ１６ｃのように、再プリント用画像データに基づいて再プリント用の記録媒体の写真部分に、リサイズ処理された写真部分の画像に対して、両側に新しい柄の画像が合成された写真部分のみの写真画像を記録する。続いて、図６Ａの工程Ｓ１８ｃのように、写真部分の画像に対して、両側に新しい柄の画像が合成された写真部分のみの写真画像が記録された再プリント２６を出力する。
なお、本第３実施形態では、再プリント２６ｂのフレーム部分２７ｂは、記録媒体２８ｃのフレーム部分２９ｂである。
なお、本第３実施形態では、再プリント２６ｂのフレーム部分２７ｂは、記録媒体２８ｃのフレーム部分２９ｂである。
【0061】
本第３実施形態においては、再プリント２６ｂを作製する再プリント時に、プリントされた元プリント２４ｂの写真部分２５ａの周囲に、元プリント２４ｂ、及び再プリント用紙（記録媒体）２８の両フレーム部分２５ｂ、及び２９ｂの柄の画像の組合せに基づいて決定された新しい柄の画像３０を合成するので、最適な画像とすることができる。
即ち、元プリント２４ｂと再プリント２６ｂ（記録媒体２８）の用紙サイズが異なる場合に、認識した元プリント２４ｂのフレーム部分２５ｂの柄の画像と再プリント２６ｂのフレーム部分２７ｂ（記録媒体２８ｃのフレーム部分２９ｂ）の柄の画像に合った新しい柄の画像３０（枠）を元プリント２４ｂの写真部分２５ａの画像に合成して再プリント２６の隙間を埋めつつ全体を調和させることができる。
即ち、元プリント２４ｂと再プリント２６ｂ（記録媒体２８）の用紙サイズが異なる場合に、認識した元プリント２４ｂのフレーム部分２５ｂの柄の画像と再プリント２６ｂのフレーム部分２７ｂ（記録媒体２８ｃのフレーム部分２９ｂ）の柄の画像に合った新しい柄の画像３０（枠）を元プリント２４ｂの写真部分２５ａの画像に合成して再プリント２６の隙間を埋めつつ全体を調和させることができる。
【0062】
以上の第１～３実施形態においては、元プリント２４（２４ａ、２４ｂ）のフレーム部分２５ｂの柄、手書きテキスト、再プリント２６（２６ａ、２６ｂ）のフレーム部分２７ｂ（２９ｂ）の柄に基づいて、またこれらの組合せに基づいて再プリント用画像を加工するので、フレーム部分２５ｂ、２７ｂ（２９ｂ）の情報を利用することができ、また、写真部分２５ａ、２７ａ（２９ａ）とフレーム部分２５ｂ、２７ｂ（２９ｂ）とで異なる処理をすることができるので、再プリント用画像を再プリント２６（２６ａ、２６ｂ）に最適な画像とすることができる。
【0063】
［第４実施形態について］
まず、図１、図７、及び図７Ａを参照しつつ、本発明の画像処理方法、及びプリント方法の第４の実施形態について具体的に説明する。
本第４実施形態においては、図７の左側に示すように、元プリント２４ｃは、元画像（原画像）３４をトリミングして、即ち、元画像３４の４人の人物の内の内側の２人を含む元トリミング領域３５内の画像を写真部分２５ａの写真画像としてプリントしたものである。
まず、図１、図７、及び図７Ａを参照しつつ、本発明の画像処理方法、及びプリント方法の第４の実施形態について具体的に説明する。
本第４実施形態においては、図７の左側に示すように、元プリント２４ｃは、元画像（原画像）３４をトリミングして、即ち、元画像３４の４人の人物の内の内側の２人を含む元トリミング領域３５内の画像を写真部分２５ａの写真画像としてプリントしたものである。
【0064】
この元プリント２４ｃを、図１に示す本発明の画像処理方法の取得工程Ｓ１０において、スキャンして元プリント２４ｃの（デジタル）画像データを取得する。この画像データは、元プリント２４ｃをスキャンした画像、即ちスキャン画像３６を表す。
ここで、図７の中上側に示すように、元プリント２４ｃのスキャン画像３６の画像データを写真部分２５ａの画像の画像データと、スキャン画像３６のフレーム部分２５ｂの柄の画像の画像データとに分離しておく。即ち、図７Ａに示す工程Ｓ１０ｄのように、元プリント２４ａの元プリント画像データとして、写真部分２５ａの画像データと、フレーム部分２５ｂの画像データとをそれぞれ分離して取得する。
ここで、図７の中上側に示すように、元プリント２４ｃのスキャン画像３６の画像データを写真部分２５ａの画像の画像データと、スキャン画像３６のフレーム部分２５ｂの柄の画像の画像データとに分離しておく。即ち、図７Ａに示す工程Ｓ１０ｄのように、元プリント２４ａの元プリント画像データとして、写真部分２５ａの画像データと、フレーム部分２５ｂの画像データとをそれぞれ分離して取得する。
【0065】
次に、決定工程Ｓ１２において、取得工程Ｓ１０において取得された画像データに適用する画像処理が決定される（図７ＡのＳ１２ｄ参照）。
決定工程Ｓ１２において決定される画像処理には、まず、図７の中上側に示すように、元プリント２４ｃの写真部分２５ａの画像の画像データから元画像３４を決定し、元画像３４の画像データを取得し、元画像３４から元プリント２４ｃの写真部分２５ａの画像とするための元画像３４の元トリミング領域３５を特定する画像処理１がある（図７ＡのＳ１２ｄ１参照）。ここで、元画像３４の取得、及び元トリミング領域３５の特定は、例えば、元プリント２４ｃのＱＲ（Quick Response）コード（登録商標）、各種マーカーを使用して行うことができる。
決定工程Ｓ１２において決定される画像処理には、まず、図７の中上側に示すように、元プリント２４ｃの写真部分２５ａの画像の画像データから元画像３４を決定し、元画像３４の画像データを取得し、元画像３４から元プリント２４ｃの写真部分２５ａの画像とするための元画像３４の元トリミング領域３５を特定する画像処理１がある（図７ＡのＳ１２ｄ１参照）。ここで、元画像３４の取得、及び元トリミング領域３５の特定は、例えば、元プリント２４ｃのＱＲ（Quick Response）コード（登録商標）、各種マーカーを使用して行うことができる。
【0066】
また、この画像処理には、図７の右上側に示すように、元トリミング領域３５内の画像に含まれる２人の人物の顔などを含む領域を注目領域３７として特定する画像処理２が含まれる（図７ＡのＳ１２ｄ２参照）。
また、この画像処理には、図７の中側に示すように、再プリント２６ｃとするために画像を記録する記録媒体２８の写真部分２９ａのサイズである再プリントサイズ情報３８を取得し、図７の右側に示すように、元トリミング領域３５、注目領域３７、及び再プリントサイズ情報３８に基づいて元画像３４の注目領域３７を含む再プリント用トリミング領域３９を決定して設定し、図７の右下側に示すように、元画像３４の再プリント用トリミング領域３９内の画像を再プリント用画像４０として決定し、元画像３４の画像データから再プリント用画像４０の再プリント用画像データを生成する画像処理３が含まれる（図７ＡのＳ１２ｄ３参照）。
また、この画像処理には、図７の中側に示すように、再プリント２６ｃとするために画像を記録する記録媒体２８の写真部分２９ａのサイズである再プリントサイズ情報３８を取得し、図７の右側に示すように、元トリミング領域３５、注目領域３７、及び再プリントサイズ情報３８に基づいて元画像３４の注目領域３７を含む再プリント用トリミング領域３９を決定して設定し、図７の右下側に示すように、元画像３４の再プリント用トリミング領域３９内の画像を再プリント用画像４０として決定し、元画像３４の画像データから再プリント用画像４０の再プリント用画像データを生成する画像処理３が含まれる（図７ＡのＳ１２ｄ３参照）。
【0067】
次に、生成工程Ｓ１４において、元プリント２４ｂの写真部分２５ａの画像データに上記画像処理（画像処理１、２、３）を施し、再プリント用画像４０の再プリント用画像データを生成する（図７ＡのＳ１４ｄ参照）。
生成工程Ｓ１４において、まず、上記画像処理１を行い、元画像３４を決定し、元画像３４の画像データを取得し、元画像３４の元トリミング領域３５を特定する（図７ＡのＳ１４ｄ１参照）。
次に、上記画像処理２を行って、注目領域３７を特定し（図７ＡのＳ１４ｄ２参照）、続いて上記画像処理３を行って、再プリントサイズ情報３８を取得し、元画像３４の注目領域３７を含む再プリント用トリミング領域３９を設定し、再プリント用トリミング領域３９内の再プリント用画像４０を決定し、元画像３４の画像データから再プリント用画像４０の再プリント用画像データ生成する（図７ＡのＳ１４ｄ３参照）。
こうして、本発明の画像処理方法が終了する。
生成工程Ｓ１４において、まず、上記画像処理１を行い、元画像３４を決定し、元画像３４の画像データを取得し、元画像３４の元トリミング領域３５を特定する（図７ＡのＳ１４ｄ１参照）。
次に、上記画像処理２を行って、注目領域３７を特定し（図７ＡのＳ１４ｄ２参照）、続いて上記画像処理３を行って、再プリントサイズ情報３８を取得し、元画像３４の注目領域３７を含む再プリント用トリミング領域３９を設定し、再プリント用トリミング領域３９内の再プリント用画像４０を決定し、元画像３４の画像データから再プリント用画像４０の再プリント用画像データ生成する（図７ＡのＳ１４ｄ３参照）。
こうして、本発明の画像処理方法が終了する。
【0068】
この後、本発明の画像処理方法で生成された再プリント用画像データに基づいて、図１に示す本発明のプリント方法の記録工程Ｓ１６、及び出力工程Ｓ１８が実施され、図７の下中側に示すように、フレーム部分２７ｂに周囲が囲まれた写真部分２７ａに再プリント用画像４０が記録された再プリント２６ｃが出力される。即ち、図７Ａの工程Ｓ１６ｄのように、再プリント用画像データに基づいて再プリント用の記録媒体の写真部分に、再プリント用画像を記録する。続いて、図７Ａの工程Ｓ１８ｄのように、写真部分２７ａに再プリント用画像が記録された再プリント２６を出力する。
なお、本第４実施形態では、再プリント２６ｃのフレーム部分２７ｂには、新たな画像が記録されず、記録媒体２８、例えば記録媒体２８ｃのフレーム部分２９ｂそのものである。しかしながら、上記第１実施形態、及び第２実施形態のように、記録媒体２８のフレーム部分２９ｂに画像、及びテキスト等を記録するようにしても良い。
なお、本第４実施形態では、再プリント２６ｃのフレーム部分２７ｂには、新たな画像が記録されず、記録媒体２８、例えば記録媒体２８ｃのフレーム部分２９ｂそのものである。しかしながら、上記第１実施形態、及び第２実施形態のように、記録媒体２８のフレーム部分２９ｂに画像、及びテキスト等を記録するようにしても良い。
【0069】
本第４実施形態においては、元プリント２４ｃの写真部分２５ａの画像に基づいて、元プリント２４ｃの元画像３４を取得し、元画像３４に基づく再プリント用画像４０を写真部分２７ａに有する再プリント２６ｃを出力するので、再プリント用画像４０を、元プリント２４ｃの画像に新しい画像が追加された再プリント２６ｃに最適な画像とすることができる。
また、元プリント２４ｃの用紙サイズの制約を反映したトリミング領域（クロッピング領域）ではなく、再プリント２６ｃの用紙サイズに最適化されたトリミング領域（クロッピング領域）で再プリント２６ｃに適した再プリント画像を生成することができる。
また、元プリント２４ｃの用紙サイズの制約を反映したトリミング領域（クロッピング領域）ではなく、再プリント２６ｃの用紙サイズに最適化されたトリミング領域（クロッピング領域）で再プリント２６ｃに適した再プリント画像を生成することができる。
【0070】
なお、特許文献２では、ズーム倍率、及び被写体の注目度に基づいてトリミングするが、本第４実施形態では、元画像と異なるサイズ用に指定された元プリントのトリミング領域をヒント情報としてさらに利用して再プリント用トリミング領域を決定する点で相違する。
ところで、本第４実施形態においても、上記第１～第３実施形態の画像処理方法を追加して行っても良い。
ところで、本第４実施形態においても、上記第１～第３実施形態の画像処理方法を追加して行っても良い。
【0071】
［第５実施形態について］
まず、図１、図８、及び図８Ａを参照しつつ、本発明の画像処理方法、及びプリント方法の第５の実施形態について具体的に説明する。
本第５実施形態は、図８の右中側に示すように、元プリント２４ｃのスキャン画像から抽出された元プリント２４ｃの写真部分２５ａの画像内の人物、及び／又は場面４２を認識し、認識結果を追加して画像処理３の再プリント用トリミング領域３９を決定している点において、図７に示す上記第４の実施形態と異なるが、その他の点では上記第４の実施形態と同じである。このため、上記第４の実施形態と同じである部分の詳細な説明は、省略し、主に相違点について説明する。
まず、図１、図８、及び図８Ａを参照しつつ、本発明の画像処理方法、及びプリント方法の第５の実施形態について具体的に説明する。
本第５実施形態は、図８の右中側に示すように、元プリント２４ｃのスキャン画像から抽出された元プリント２４ｃの写真部分２５ａの画像内の人物、及び／又は場面４２を認識し、認識結果を追加して画像処理３の再プリント用トリミング領域３９を決定している点において、図７に示す上記第４の実施形態と異なるが、その他の点では上記第４の実施形態と同じである。このため、上記第４の実施形態と同じである部分の詳細な説明は、省略し、主に相違点について説明する。
【0072】
即ち、この第５実施形態は、上記第４の実施形態と同様に、図１に示す本発明の画像処理方法の取得工程Ｓ１０が行われる。即ち、図８Ａに示すように、図７Ａに示す工程Ｓ１０ｄと同じ工程Ｓ１０ｅが実施される。
次に、決定工程Ｓ１２において、取得工程Ｓ１０において取得された画像データに適用する画像処理が決定される。
決定工程Ｓ１２において決定される画像処理の内、元画像３４の元トリミング領域３５を特定する画像処理１、及び注目領域３７を特定する画像処理２は、上記第４の実施形態と同様である。即ち、図８Ａに示す工程Ｓ１２ｅのように、図７Ａに示す工程Ｓ１２ｄの内の工程Ｓ１２ｄ１、及び工程Ｓ１２ｄ２と同じ工程Ｓ１２ｅ１、及び工程Ｓ１２ｅ２が実施される。
次に、決定工程Ｓ１２において、取得工程Ｓ１０において取得された画像データに適用する画像処理が決定される。
決定工程Ｓ１２において決定される画像処理の内、元画像３４の元トリミング領域３５を特定する画像処理１、及び注目領域３７を特定する画像処理２は、上記第４の実施形態と同様である。即ち、図８Ａに示す工程Ｓ１２ｅのように、図７Ａに示す工程Ｓ１２ｄの内の工程Ｓ１２ｄ１、及び工程Ｓ１２ｄ２と同じ工程Ｓ１２ｅ１、及び工程Ｓ１２ｅ２が実施される。
【0073】
しかしながら、再プリント用トリミング領域３９を決定して設定し、再プリント用画像４０を決定し、再プリント用画像データを生成する上記第４の実施形態の画像処理３において、再プリント用トリミング領域３９を決定する処理が上記第４の実施形態と異なる。即ち、本第５の実施形態における画像処理は、上記第４の実施形態の画像処理３に類似するが、図８の右中側に示すように、更に、元プリント２４ｃの写真部分２５ａの画像内の人物、及び／又は場面４２を認識しておき、図８の右側に示すように、元トリミング領域３５、注目領域３７、及び再プリントサイズ情報３８に、更に認識結果を追加して、これらの情報に基づいて元画像３４の注目領域３７を含む再プリント用トリミング領域３９を決定して設定する新たな画像処理を含む画像処理４である。
【0074】
本第５の実施形態の画像処理４においても、再プリント用トリミング領域３９が決定された後、図８の右下側に示すように、元画像３４の再プリント用トリミング領域３９内の画像を再プリント用画像４０として決定し、元画像３４の画像データから再プリント用画像４０の再プリント用画像データを生成する点では、上記第４の実施形態の画像処理３と同様である。即ち、図８Ａに示す工程Ｓ１２ｅ３のように、元プリント２４ｃの写真部分の画像内の人物、及び／又は場面を認識しておき、元トリミング領域３５、注目領域３７、再プリントサイズ情報３８、及び認識結果に基づいて再プリント用トリミング領域３９を設定し、その領域内の再プリント用画像４０を決定し、その画像データを再プリント用画像データとして生成する画像処理４を決定する。
なお、本第５の実施形態においては、画像処理２として注目領域３７を特定する際に、認識された場面、及び人物のいずれか１つ以上に応じて注目領域３７を決定しても良い。例えば、元プリント２４ｃに含まれる人物の家族、及び／又は友人関係にある人物を含むように決定しても良い。また、認識された場面において重要、及び／又は象徴的な被写体を含むように決定しても良い。
なお、本第５の実施形態においては、画像処理２として注目領域３７を特定する際に、認識された場面、及び人物のいずれか１つ以上に応じて注目領域３７を決定しても良い。例えば、元プリント２４ｃに含まれる人物の家族、及び／又は友人関係にある人物を含むように決定しても良い。また、認識された場面において重要、及び／又は象徴的な被写体を含むように決定しても良い。
【0075】
次に、生成工程Ｓ１４において、上記第４の実施形態と同様に、上記画像処理１を行い、元画像３４を決定し、元画像３４の画像データを取得し、元画像３４の元トリミング領域３５を特定し、上記画像処理２を行って、注目領域３７を特定する。即ち、図８Ａに示す工程Ｓ１４ｅのように、図７Ａに示す工程Ｓ１２４の内の工程Ｓ１４ｄ１、及び工程Ｓ１４ｄ２と同じ上記画像処理１を行う工程Ｓ１４ｅ１、及び上記画像処理２を行う工程Ｓ１４ｅ２が実施される。
続いて上記画像処理４を行って、再プリントサイズ情報３８を取得し、元画像３４の注目領域３７を含む再プリント用トリミング領域３９を設定し、再プリント用トリミング領域３９内の再プリント用画像４０を決定し、元画像３４の画像データから再プリント用画像４０の再プリント用画像データ生成する。即ち、図８Ａに示す工程Ｓ１４ｅ３が実施される。
こうして、本発明の画像処理方法が終了する。
続いて上記画像処理４を行って、再プリントサイズ情報３８を取得し、元画像３４の注目領域３７を含む再プリント用トリミング領域３９を設定し、再プリント用トリミング領域３９内の再プリント用画像４０を決定し、元画像３４の画像データから再プリント用画像４０の再プリント用画像データ生成する。即ち、図８Ａに示す工程Ｓ１４ｅ３が実施される。
こうして、本発明の画像処理方法が終了する。
【0076】
この後、上記第４の実施形態と同様に、本発明の画像処理方法で生成された再プリント用画像データに基づいて、図１に示す本発明のプリント方法の記録工程Ｓ１６、及び出力工程Ｓ１８が実施され、図７の下中側に示すように、フレーム部分２７ｂに周囲が囲まれた写真部分２７ａに再プリント用画像４０が記録された再プリント２６ｃが出力される。即ち、図８Ａの工程Ｓ１６ｅのように、図７Ａの工程Ｓ１６ｄと同様に、再プリント用画像データに基づいて再プリント用の記録媒体の写真部分に、再プリント用画像を記録する。続いて、図８Ａの工程Ｓ１８ｅのように、図７Ａの工程Ｓ１８ｄと同様に、写真部分２７ａに再プリント用画像が記録された再プリント２６を出力する。
【0077】
本第５実施形態においては、元プリント２４ｃの写真部分２５ａの画像内の人物、及び／又は場面４２を認識した結果を更に加えた上で、再プリント用トリミング領域３９を決定し、再プリント用画像４０を写真部分２７ａに有する再プリント２６ｃを出力するので、再プリント２６ｃの再プリント用画像４０を、元プリント２４ｃの画像内の人物、場面を考慮した最適な画像とすることができる。
本発明の画像処理方法、及びプリント方法の第１～第５実施形態は、以上のように構成される。
本発明の画像処理方法、及びプリント方法の第１～第５実施形態は、以上のように構成される。
【0078】
本発明においては、元プリントのフレーム部分の画像処理結果に基づいて、別の印画領域に印画するための画像を生成することとしている。
また、フレーム部分の存在、位置、描画内容に基づいて、別の印画領域（写真部分）に印画するための画像を生成するため、フレーム部分を有する元プリントの画像をスキャンし別の印画領域に印画する際に、同一、又は別のアスペクト比の印画領域に対しても、最適な印画内容とすることができる。
また、フレーム部分の存在、位置、描画内容に基づいて、別の印画領域（写真部分）に印画するための画像を生成するため、フレーム部分を有する元プリントの画像をスキャンし別の印画領域に印画する際に、同一、又は別のアスペクト比の印画領域に対しても、最適な印画内容とすることができる。
【0079】
以上、本発明の画像処理方法、及びプリント方法について詳細に説明したが、本発明は上記実施形態に限定されず、本発明の主旨を逸脱しない範囲において、種々の改良、及び変更をしてもよいのはもちろんである。
【符号の説明】
【0080】
１０ プリント出力システム
１２ スマートデバイス
１４コンピュータ
１６ サーバ
１８プリンタ
２０ ネットワーク
２２ プリンタ付きアナログカメラ
２４、２４ａ、２４ｂ、２４ｃ 第１のプリント（元プリント）
２５ａ、２９ａ 第１の領域（写真部分）
２５ｂ、２９ｂ 第２の領域（フレーム部分）
２５ｂ１、２９ｂ１、３０ 柄の画像
２６、２６ａ、２６ｂ、２６ｃ 第２のプリント（再プリント）
２７ａ、２７ｃ 第３の領域（写真部分）
２７ｂ 第４の領域（フレーム部分）
２７ｂ１、２７ｂ２、２７ｂ３、２７ｂ４ 領域
２８、２８ａ、２８ｂ、２８ｃ 記録媒体（プリント用紙）
３２ 再プリント用画像
３４ 元画像（原画像）
３５ 元トリミング領域
３６ スキャン画像
３７ 注目領域
３８ 再プリントサイズ情報
３９ 再プリント用トリミング領域
４０ 再プリント用画像
４２ 人物、及び／又は場面
５０ 画像処理装置
５２ プロセッサ
５４ メモリ
５６ ストレージ
５８ 通信用インタフェース
６０ 入力機器
６２ ディスプレイ（表示装置）
Ｓ１０ 第１のプリント画像データの取得工程
Ｓ１０ａ、Ｓ１０ａ１、Ｓ１０ｂ、Ｓ１０ｃ、Ｓ１０ｃ１、Ｓ１０ｄ、Ｓ１０ｅ （取得）工程
Ｓ１２ 適用画像処理の決定工程
Ｓ１２ａ、Ｓ１２ｂ、Ｓ１２ｂ１、Ｓ１２ｂ２、Ｓ１２ｃ、Ｓ１２ｄ、Ｓ１２ｄ１、Ｓ１２ｄ２、Ｓ１２ｄ３、Ｓ１２ｅ、Ｓ１２ｅ１、Ｓ１２ｅ２、Ｓ１２ｅ３ （決定）工程
Ｓ１４ 第２のプリント用画像データの生成工程
Ｓ１４ａ、Ｓ１４ｂ、Ｓ１４ｃ、Ｓ１４ｄ、Ｓ１４ｄ１、Ｓ１４ｄ２、Ｓ１４ｄ３、Ｓ１４ｅ、Ｓ１４ｅ１、Ｓ１４ｅ２、Ｓ１４ｅ３ （生成）工程
Ｓ１６ 第２のプリント画像の記録工程
Ｓ１６ａ、Ｓ１６ｂ、Ｓ１６ｃ、Ｓ１６ｄ、Ｓ１６ｅ （記録）工程
Ｓ１８ 第２のプリントの出力工程
Ｓ１８ａ、Ｓ１８ｂ、Ｓ１８ｃ、Ｓ１８ｄ、Ｓ１８ｅ （出力）工程
１２ スマートデバイス
１４コンピュータ
１６ サーバ
１８プリンタ
２０ ネットワーク
２２ プリンタ付きアナログカメラ
２４、２４ａ、２４ｂ、２４ｃ 第１のプリント（元プリント）
２５ａ、２９ａ 第１の領域（写真部分）
２５ｂ、２９ｂ 第２の領域（フレーム部分）
２５ｂ１、２９ｂ１、３０ 柄の画像
２６、２６ａ、２６ｂ、２６ｃ 第２のプリント（再プリント）
２７ａ、２７ｃ 第３の領域（写真部分）
２７ｂ 第４の領域（フレーム部分）
２７ｂ１、２７ｂ２、２７ｂ３、２７ｂ４ 領域
２８、２８ａ、２８ｂ、２８ｃ 記録媒体（プリント用紙）
３２ 再プリント用画像
３４ 元画像（原画像）
３５ 元トリミング領域
３６ スキャン画像
３７ 注目領域
３８ 再プリントサイズ情報
３９ 再プリント用トリミング領域
４０ 再プリント用画像
４２ 人物、及び／又は場面
５０ 画像処理装置
５２ プロセッサ
５４ メモリ
５６ ストレージ
５８ 通信用インタフェース
６０ 入力機器
６２ ディスプレイ（表示装置）
Ｓ１０ 第１のプリント画像データの取得工程
Ｓ１０ａ、Ｓ１０ａ１、Ｓ１０ｂ、Ｓ１０ｃ、Ｓ１０ｃ１、Ｓ１０ｄ、Ｓ１０ｅ （取得）工程
Ｓ１２ 適用画像処理の決定工程
Ｓ１２ａ、Ｓ１２ｂ、Ｓ１２ｂ１、Ｓ１２ｂ２、Ｓ１２ｃ、Ｓ１２ｄ、Ｓ１２ｄ１、Ｓ１２ｄ２、Ｓ１２ｄ３、Ｓ１２ｅ、Ｓ１２ｅ１、Ｓ１２ｅ２、Ｓ１２ｅ３ （決定）工程
Ｓ１４ 第２のプリント用画像データの生成工程
Ｓ１４ａ、Ｓ１４ｂ、Ｓ１４ｃ、Ｓ１４ｄ、Ｓ１４ｄ１、Ｓ１４ｄ２、Ｓ１４ｄ３、Ｓ１４ｅ、Ｓ１４ｅ１、Ｓ１４ｅ２、Ｓ１４ｅ３ （生成）工程
Ｓ１６ 第２のプリント画像の記録工程
Ｓ１６ａ、Ｓ１６ｂ、Ｓ１６ｃ、Ｓ１６ｄ、Ｓ１６ｅ （記録）工程
Ｓ１８ 第２のプリントの出力工程
Ｓ１８ａ、Ｓ１８ｂ、Ｓ１８ｃ、Ｓ１８ｄ、Ｓ１８ｅ （出力）工程
【図1】
【図2】
【図2A】
【図3A】
【図3B】
【図3C】
【図3D】
【図3E】
【図4】
【図4A】
【図5】
【図5A】
【図6】
【図6A】
【図7】
【図7A】
【図8】
【図8A】