ホーム > 特許ランキング > 辰巳電子工業株式会社
知財求人 - 知財ポータルサイト「IP Force」
特開2022-61920撮影装置、画像形成方法、画像形成プログラム、及び撮影システム
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2022061920
(43)【公開日】2022-04-19
(54)【発明の名称】撮影装置、画像形成方法、画像形成プログラム、及び撮影システム
(51)【国際特許分類】
H04N 5/232 20060101AFI20220412BHJP
H04N 5/235 20060101ALI20220412BHJP
G03B 17/53 20210101ALI20220412BHJP
G03B 15/05 20210101ALI20220412BHJP
G07F 17/26 20060101ALI20220412BHJP
【ＦＩ】
H04N5/232 290
H04N5/232 930
H04N5/235 400
G03B17/53
G03B15/05
G07F17/26
【審査請求】未請求
【請求項の数】8
【出願形態】ＯＬ
(21)【出願番号】P 2020170189
(22)【出願日】2020-10-07
(71)【出願人】
【識別番号】597047392
【氏名又は名称】辰巳電子工業株式会社
(74)【代理人】
【識別番号】100124039
【弁理士】
【氏名又は名称】立花 顕治
(74)【代理人】
【識別番号】100170542
【弁理士】
【氏名又は名称】桝田 剛
(72)【発明者】
【氏名】中西 竜介
(72)【発明者】
【氏名】梶本 泰生
(72)【発明者】
【氏名】野間 忠
【テーマコード（参考）】
2H053
2H104
5C122
【Ｆターム（参考）】
2H053AD11
2H104AA19
2H104BC48
5C122DA03
5C122DA04
5C122DA34
5C122EA59
5C122EA60
5C122EA61
5C122FK23
5C122FK24
5C122GG03
5C122GG27
5C122HA13
5C122HA35
5C122HB01
5C122HB02
5C122HB05
(57)【要約】 （修正有）
【課題】質の高い動画を提供することができる撮影装置及び撮影システムを提供する。
【解決手段】撮影装置は、第１画像データ及び第２画像データの少なくとも一方を含む動画像用データを取得する動画像撮影部と、静止画像用データを取得する静止画像撮影部と、編集動画像を生成する画像処理部と、を備える。動画像撮影部は、動画像用データに第１画像データが含まれる場合、静止画像用データの取得前に第１画像データを取得し、動画像用データに第２画像データが含まれる場合、静止画像用データの取得後に第２画像データを取得する。画像処理部は、静止画像用データ、第１画像データまたは第２画像データの少なくとも１つに基づいて生成される、特別画像データを取得し、第１画像データ、特別画像データ及び第２画像データの順、第１画像データ及び特別画像データの順又は特別画像データ及び第２画像データの順で再生される編集動画像を表示させる。
【選択図】図１２
【解決手段】撮影装置は、第１画像データ及び第２画像データの少なくとも一方を含む動画像用データを取得する動画像撮影部と、静止画像用データを取得する静止画像撮影部と、編集動画像を生成する画像処理部と、を備える。動画像撮影部は、動画像用データに第１画像データが含まれる場合、静止画像用データの取得前に第１画像データを取得し、動画像用データに第２画像データが含まれる場合、静止画像用データの取得後に第２画像データを取得する。画像処理部は、静止画像用データ、第１画像データまたは第２画像データの少なくとも１つに基づいて生成される、特別画像データを取得し、第１画像データ、特別画像データ及び第２画像データの順、第１画像データ及び特別画像データの順又は特別画像データ及び第２画像データの順で再生される編集動画像を表示させる。
【選択図】図１２
【特許請求の範囲】
【請求項1】
第１画像データ及び第２画像データの少なくとも一方を含む動画像用データを取得する動画像撮影部と、
静止画像用データを取得する静止画像撮影部と、
編集動画像を生成する画像処理部と、
を備え、
前記動画像撮影部は、
前記動画像用データに第１画像データが含まれる場合、前記静止画像用データの取得前に前記第１画像データを取得し、前記動画像用データに第２画像データが含まれる場合、前記静止画像用データの取得後に前記第２画像データを取得し、
前記画像処理部は、
前記静止画像用データ、前記第１画像データ、または前記第２画像データの少なくとも１つに基づいて生成される、特別画像データを取得し、
前記第１画像データ、前記特別画像データ、及び前記第２画像データの順、前記第１画像データ、及び前記特別画像データの順、又は前記特別画像データ、及び前記第２画像データの順で再生される前記編集動画像の少なくとも一部を表示させる、
撮影装置。
静止画像用データを取得する静止画像撮影部と、
編集動画像を生成する画像処理部と、
を備え、
前記動画像撮影部は、
前記動画像用データに第１画像データが含まれる場合、前記静止画像用データの取得前に前記第１画像データを取得し、前記動画像用データに第２画像データが含まれる場合、前記静止画像用データの取得後に前記第２画像データを取得し、
前記画像処理部は、
前記静止画像用データ、前記第１画像データ、または前記第２画像データの少なくとも１つに基づいて生成される、特別画像データを取得し、
前記第１画像データ、前記特別画像データ、及び前記第２画像データの順、前記第１画像データ、及び前記特別画像データの順、又は前記特別画像データ、及び前記第２画像データの順で再生される前記編集動画像の少なくとも一部を表示させる、
撮影装置。
【請求項2】
前記特別画像データは、
前記第１画像データのうち、前記静止画像用データの取得前の所定時間内に取得された後部画像データ、
前記第２画像データのうち、前記静止画像用データの取得後の所定時間内に取得された前部画像データ、及び
前記静止画像用データ、
の少なくとも１つに画像処理を施すことで、生成される、
請求項１に記載の撮影装置。
前記第１画像データのうち、前記静止画像用データの取得前の所定時間内に取得された後部画像データ、
前記第２画像データのうち、前記静止画像用データの取得後の所定時間内に取得された前部画像データ、及び
前記静止画像用データ、
の少なくとも１つに画像処理を施すことで、生成される、
請求項１に記載の撮影装置。
【請求項3】
前記動画像撮影部は、取得開始指示を受けた後、取得終了指示を受けるまでの間に、前記第１画像データ及び前記第２画像データを含む前記動画像用データを取得する、
請求項１または２に記載の撮影装置。
請求項１または２に記載の撮影装置。
【請求項4】
被写体に光を照射する照明部をさらに備え、
前記画像処理部は、少なくとも、前記動画像用データの取得中には、所定の明るさ以上の光を継続して出力するように、前記照明部を制御する、
請求項１から３のいずれかに記載の撮影装置。
前記画像処理部は、少なくとも、前記動画像用データの取得中には、所定の明るさ以上の光を継続して出力するように、前記照明部を制御する、
請求項１から３のいずれかに記載の撮影装置。
【請求項5】
表示部をさらに備え、
前記画像処理部は、
少なくとも前記動画像用データに基づく表示用動画を、被写体を写すライブ動画として前記表示部に表示し、
前記静止画像用データが取得されるタイミングで、前記表示用動画に代わって、所定の演出が施された演出静止画または演出動画を前記表示部に表示する、
請求項１から４のいずれかに記載の撮影装置。
前記画像処理部は、
少なくとも前記動画像用データに基づく表示用動画を、被写体を写すライブ動画として前記表示部に表示し、
前記静止画像用データが取得されるタイミングで、前記表示用動画に代わって、所定の演出が施された演出静止画または演出動画を前記表示部に表示する、
請求項１から４のいずれかに記載の撮影装置。
【請求項6】
動画像用の第１画像データ及び第２画像データの少なくとも１つと、静止画像用データとを取得するステップであって、
前記第１画像データが取得される場合には、前記第１画像データの取得後に、前記静止画像用データを取得し、前記第２画像データが取得される場合には、前記静止画像用データの取得後に、前記第２画像データを取得するステップと、
前記静止画像用データ、前記第１画像データ、または前記第２画像データの少なくとも１つに基づいて生成される、特別画像データを取得するステップと、
前記第１画像データ、前記特別画像データ、及び前記第２画像データの順、前記第１画像データ、及び前記特別画像データの順、又は前記特別画像データ、及び前記第２画像データの順で再生される前記動画像を生成するステップと、
を備えている、画像生成方法。
前記第１画像データが取得される場合には、前記第１画像データの取得後に、前記静止画像用データを取得し、前記第２画像データが取得される場合には、前記静止画像用データの取得後に、前記第２画像データを取得するステップと、
前記静止画像用データ、前記第１画像データ、または前記第２画像データの少なくとも１つに基づいて生成される、特別画像データを取得するステップと、
前記第１画像データ、前記特別画像データ、及び前記第２画像データの順、前記第１画像データ、及び前記特別画像データの順、又は前記特別画像データ、及び前記第２画像データの順で再生される前記動画像を生成するステップと、
を備えている、画像生成方法。
【請求項7】
コンピュータに、
動画像用の第１画像データ及び第２画像データの少なくとも１つと、静止画像用データと、を取得するステップであって、
前記第１画像データが取得される場合には、前記第１画像データの取得後に、前記静止画像用データを取得し、前記第２画像データが取得される場合には、前記静止画像用データの取得後に、前記第２画像データを取得するステップと、
前記静止画像用データ、前記第１画像データ、または前記第２画像データの少なくとも１つに基づいて生成される、特別画像データを取得するステップと、
前記第１画像データ、前記特別画像データ、及び前記第２画像データの順、前記第１画像データ、及び前記特別画像データの順、又は前記特別画像データ、及び前記第２画像データの順で再生される前記動画像を取得するステップと、
を実行させる、画像生成プログラム。
動画像用の第１画像データ及び第２画像データの少なくとも１つと、静止画像用データと、を取得するステップであって、
前記第１画像データが取得される場合には、前記第１画像データの取得後に、前記静止画像用データを取得し、前記第２画像データが取得される場合には、前記静止画像用データの取得後に、前記第２画像データを取得するステップと、
前記静止画像用データ、前記第１画像データ、または前記第２画像データの少なくとも１つに基づいて生成される、特別画像データを取得するステップと、
前記第１画像データ、前記特別画像データ、及び前記第２画像データの順、前記第１画像データ、及び前記特別画像データの順、又は前記特別画像データ、及び前記第２画像データの順で再生される前記動画像を取得するステップと、
を実行させる、画像生成プログラム。
【請求項8】
撮影装置と、
編集動画像を生成する画像処理部と、
を備え、
前記撮影装置は、
第１画像データ及び第２画像データの少なくとも一方を含む動画像用データを取得する動画像撮影部と、
静止画像用データを取得する静止画像撮影部と、
を備え、
前記動画像撮影部は、
前記動画像用データに第１画像データが含まれる場合、前記静止画像用データの取得前に前記第１画像データを取得し、前記動画像用データに第２画像データが含まれる場合、前記静止画像用データの取得後に前記第２画像データを取得し、
前記画像処理部は、
前記静止画像用データ、前記第１画像データ、または前記第２画像データの少なくとも１つに基づいて、特別画像データを生成し、
前記第１画像データ、前記特別画像データ、及び前記第２画像データの順、前記第１画像データ、及び前記特別画像データの順、又は前記特別画像データ、及び前記第２画像データの順で再生する編集動画像を生成する
撮影システム。
編集動画像を生成する画像処理部と、
を備え、
前記撮影装置は、
第１画像データ及び第２画像データの少なくとも一方を含む動画像用データを取得する動画像撮影部と、
静止画像用データを取得する静止画像撮影部と、
を備え、
前記動画像撮影部は、
前記動画像用データに第１画像データが含まれる場合、前記静止画像用データの取得前に前記第１画像データを取得し、前記動画像用データに第２画像データが含まれる場合、前記静止画像用データの取得後に前記第２画像データを取得し、
前記画像処理部は、
前記静止画像用データ、前記第１画像データ、または前記第２画像データの少なくとも１つに基づいて、特別画像データを生成し、
前記第１画像データ、前記特別画像データ、及び前記第２画像データの順、前記第１画像データ、及び前記特別画像データの順、又は前記特別画像データ、及び前記第２画像データの順で再生する編集動画像を生成する
撮影システム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、撮影装置、画像形成方法、画像形成プログラム、及び撮影システムに関する。
【背景技術】
【0002】
従来、ユーザをカメラで撮影することで得られた撮影画像を写真印刷シートとして出力したり、電子データとして、撮影画像をネットワークを介して外部の装置に送信したりすることができる遊戯用撮影装置が知られている。ところで、例えば、特許文献１に記載の近年の遊戯用撮影装置は、遊戯性を高めるため、電子データとして、静止画のみならず、動画を提供するように構成されている。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特開２０１９－０３８３４４号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
しかしながら、特許文献１の遊戯層撮影装置で提供される動画には改良の余地があり、さらに質の高い動画の提供が要望されていた。本発明は、上記問題を解決するためになされたものであり、さらに質の高い動画を提供することができる撮影装置、画像形成方法、画像形成プログラム、及び撮影システムを提供することを目的とする。
【課題を解決するための手段】
【0005】
本発明に係る撮影装置は、第１画像データ及び第２画像データの少なくとも一方を含む動画像用データを取得する動画像撮影部と、静止画像用データを取得する静止画像撮影部と、編集動画像を生成する画像処理部と、を備え、前記動画像撮影部は、前記動画像用データに第１画像データが含まれる場合、前記静止画像用データの取得前に前記第１画像データを取得し、前記動画像用データに第２画像データが含まれる場合、前記静止画像用データの取得後に前記第２画像データを取得し、前記画像処理部は、前記静止画像用データ、前記第１画像データ、または前記第２画像データの少なくとも１つに基づいて生成される、特別画像データを取得し、前記第１画像データ、前記特別画像データ、及び前記第２画像データの順、前記第１画像データ、及び前記特別画像データの順、又は前記特別画像データ、及び前記第２画像データの順で再生される前記編集動画像の少なくとも一部を表示させる。
【0006】
本発明に係る画像生成方法は、動画像用の第１画像データ及び第２画像データの少なくとも１つと、静止画像用データとを取得するステップであって、前記第１画像データが取得される場合には、前記第１画像データの取得後に、前記静止画像用データを取得し、前記第２画像データが取得される場合には、前記静止画像用データの取得後に、前記第２画像データを取得するステップと、前記静止画像用データ、前記第１画像データ、または前記第２画像データの少なくとも１つに基づいて生成される、特別画像データを取得するステップと、前記第１画像データ、前記特別画像データ、及び前記第２画像データの順、前記第１画像データ、及び前記特別画像データの順、又は前記特別画像データ、及び前記第２画像データの順で再生される前記動画像を生成するステップと、を備えている。
【0007】
本発明に係る画像生成プログラムは、コンピュータに、動画像用の第１画像データ及び第２画像データの少なくとも１つと、静止画像用データと、を取得するステップであって、前記第１画像データが取得される場合には、前記第１画像データの取得後に、前記静止画像用データを取得し、前記第２画像データが取得される場合には、前記静止画像用データの取得後に、前記第２画像データを取得するステップと、前記静止画像用データ、前記第１画像データ、または前記第２画像データの少なくとも１つに基づいて生成される、特別画像データを取得するステップと、前記第１画像データ、前記特別画像データ、及び前記第２画像データの順、前記第１画像データ、及び前記特別画像データの順、又は前記特別画像データ、及び前記第２画像データの順で再生される前記動画像を取得するステップと、を実行させる。
【0008】
本発明に係る撮影システムは、撮影装置と、編集動画像を生成する画像処理部と、を備え、前記撮影装置は、第１画像データ及び第２画像データの少なくとも一方を含む動画像用データを取得する動画像撮影部と、静止画像用データを取得する静止画像撮影部と、を備え、前記動画像撮影部は、前記動画像用データに第１画像データが含まれる場合、前記静止画像用データの取得前に前記第１画像データを取得し、前記動画像用データに第２画像データが含まれる場合、前記静止画像用データの取得後に前記第２画像データを取得し、前記画像処理部は、前記静止画像用データ、前記第１画像データ、または前記第２画像データの少なくとも１つに基づいて、特別画像データを生成し、前記第１画像データ、前記特別画像データ、及び前記第２画像データの順、前記第１画像データ、及び前記特別画像データの順、又は前記特別画像データ、及び前記第２画像データの順で再生する編集動画像を生成する。
【発明の効果】
【0009】
本発明によれば、さらに質の高い動画を提供することができる。
【図面の簡単な説明】
【0010】
【図1A】本発明の一実施形態に係る撮影装置（カーテンなし）の外観を示す斜視図である。
【図4】カメラによる動画像と静止画像の撮影のフローを示す図である。
【図6】背景選択のための画面である。
【図7】背景選択のための画面である。
【図8】背景選択のための画面である。
【図9】撮影スタイルの選択のための画面である。
【図10】撮影のための画面である。
【図11】撮影のための画面である。
【図12】遊戯用動画像データの作成の例を示す図である。
【図13】遊戯用動画像データの作成の例を示す図である。
【図14】遊戯用動画像データの作成の例を示す図である。
【図15】編集プレイにおける落書き編集の人数を設定する画面である。
【図16】編集プレイにおける編集処理を示す画面である。
【図17】シートレイアウトを選択するための画面である。
【図18】プレイの手順を示すフローチャートである。
【図19】遊戯用動画像の再生の例を示す図である。
【図20】コラージュ動画としての遊戯用動画像の再生の例を示す図である。
【図21】本発明に係る撮影システムの一例を示す概略図である。
【発明を実施するための形態】
【0011】
＜１．撮影装置の概要＞
以下、本実施形態に係る撮影装置について説明する。図１Ａは、本実施形態に係る撮影装置１００からカーテン１３を取り除いた状態を示す斜視図、図１Ｂは、図１Ａにおいてカーテン１３を取り付けた状態を示す斜視図である。
以下、本実施形態に係る撮影装置について説明する。図１Ａは、本実施形態に係る撮影装置１００からカーテン１３を取り除いた状態を示す斜視図、図１Ｂは、図１Ａにおいてカーテン１３を取り付けた状態を示す斜視図である。
【0012】
図１Ａ及び図１Ｂに示されるとおり、撮影装置１００は、直方体状の筐体１を備えており、この筐体１の両側面には、内部の撮影空間１０に通じる出入口１１が形成されている。この出入口１１の上縁にはカーテンレール１２が取り付けられており、このカーテンレール１２には、カーテン１３が取り付けられている。これにより、ユーザが撮影を行う際には、カーテン１３を閉じることで、撮影空間１０を外部から見えないようにすると共に、外部から余計な光が撮影空間１０に入らないようにすることができる。筐体１の内装において、後述するカメラ３２が配置される面とは反対側の面（背面）等の撮影範囲には、クロマキー合成処理のための単一の色（例えば、青色、緑色等）が付される。単一の色が付される範囲は、撮影範囲の一部であってもよいし、全体であってもよい。
【0013】
筐体１の内部（撮影空間１０）において、撮影時にユーザが存在すべき位置の前方には、撮影ユニット３が設けられている。撮影ユニット３は、撮影空間１０内のユーザを撮影し、得られた画像の編集を受け付け、編集された画像をプリントするように構成される。撮影ユニット３の構成の詳細は後述する。なお、当該画像の編集する構成に関して、ユーザの操作に関係なく自動的に行う構成や、編集自体がない構成とすることも可能である。
【0014】
＜２．撮影装置のハードウェア構成＞
次に、図２及び図３を更に用いて、本実施形態に係る撮影装置１００のハードウェア構成について説明する。図２は、本実施形態に係る撮影装置１００の撮影ユニット３を例示する。図３は、撮影装置１００のハードウェア構成の一例を模式的に例示する。
次に、図２及び図３を更に用いて、本実施形態に係る撮影装置１００のハードウェア構成について説明する。図２は、本実施形態に係る撮影装置１００の撮影ユニット３を例示する。図３は、撮影装置１００のハードウェア構成の一例を模式的に例示する。
【0015】
図３に示すように、本実施形態に係る撮影装置１００は、制御部５、記憶部６、通信インタフェース７、ドライブ８、タッチパネルディスプレイ３１、カメラ３２、照明ユニット（照明部）３３、スピーカ３４、プリンタ３５、及び決済処理部３６が電気的に接続されたコンピュータを備えており、これらは、上述した撮影ユニット３に収容されている。なお、図３では、通信インタフェースを「通信Ｉ／Ｆ」と記載している。また、タッチパネルディスプレイ３１は、本発明の「表示部」の一例であり、カメラ３２は、本発明の「静止画像撮影部」及び「動画像撮影部」の一例である。
【0016】
制御部５は、ＣＰＵ（Central Processing Unit）、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）等を含み、情報処理に応じて各構成要素の制御を行う。記憶部６は、例えば、ハードディスクドライブ、ソリッドステートドライブ等の補助記憶装置であり、制御部５で実行されるプログラム６１等の各種データを記憶する。
【0017】
プログラム６１は、写真撮影の依頼の受け付け、受け付けた依頼に応じた写真撮影、撮影画像の編集、印刷を行うための処理を撮影装置１００に実行させるためのプログラムであり、本発明に係る画像形成プログラムが含まれている。この他、記憶部６には、各処理過程で利用される画面データ等が記憶される。詳細は後述する。
【0018】
通信インタフェース７は、例えば、有線ＬＡＮ（Local Area Network）モジュール、無線ＬＡＮモジュール等であり、ネットワークを介した有線又は無線通信を行うためのインタフェースである。通信インタフェース７の種類は、撮影装置１００の設置場所等に応じて適宜選択されてよい。撮影装置１００は、通信インタフェース７を介して、外部サーバ等とデータ通信を行うことができる。
【0019】
ドライブ８は、例えば、ＣＤ（Compact Disk）ドライブ、ＤＶＤ（Digital Versatile Disk）ドライブ等であり、記憶媒体（不図示）に記憶されたプログラムを読み込みための装置である。ドライブ８の種類は、記憶媒体の種類に応じて適宜選択されてよい。プログラム６１は、記憶媒体に記憶されていてもよい。
【0020】
記憶媒体は、コンピュータその他装置、機械等が記録されたプログラム等の情報を読み取り可能なように、このプログラム等の情報を、電気的、磁気的、光学的、機械的又は化学的作用によって蓄積する媒体である。この記憶媒体の一例として、例えば、ＣＤ、ＤＶＤ、フラッシュメモリ等を挙げることができる。
【0021】
タッチパネルディスプレイ３１は、撮影ユニット３本体の前面パネルの中央に配置されており、タッチパネルディスプレイ３１の上方には、写真撮影に利用されるカメラ３２が配置されている。制御部５は、カメラ３２による撮影を制御する。また、制御部５は、タッチパネルディスプレイ３１の表示及びタッチパネルディスプレイ３１に対する入力を制御する。タッチパネルディスプレイ３１及びカメラ３２の種類は、実施形態に応じて適宜選択されてよい。
【0022】
具体的には、カメラ３２は、制御部５による制御にしたがって撮影を行う公知の一眼レフカメラによって構成されており、撮影によって得られた画像をＲＡＭ又は記憶部６に記憶する。本実施形態では、撮影時にユーザの位置が概ね決まっているため、撮影時のユーザとカメラ３２との距離が概ね決まっている。そのため、本実施形態に係るカメラ３２の焦点距離は一定である。但し、カメラ３２が、ズームレンズを備えていてもよく、必要に応じて制御部５によって焦点距離を調整することができる。
【0023】
このカメラ３２は、動画像と静止画像を撮影できるようになっている。すなわち、動画像を撮影する際には、レンズを通過した光が撮影素子によって動画像用データ（動画像用信号）に変換される。動画像用データは、後述するように前半部分の第１画像データと後半部分の第２画像データにより構成されている。そして、動画像用データは、制御部５のＲＡＭ及び記憶部６に記憶されるとともに、第１画像データに対して、後述する画像処理部５１（図５参照）により表示用の画像処理が行われた上で、タッチパネルディスプレイ３１に送信される。動画像用データは、例えば、サンプリングレートが２０フレーム／秒の複数のフレーム画像により構成されており、画像処理部では、第１画像データを構成する各フレーム画像に、逐次左右反転処理を行った上で、クロマキー処理により被写体を抽出し、これを背景画像と合成する。こうしてライブ合成画像（表示用動画）が生成され、タッチパネルディスプレイ３１において表示される。すなわち、タッチパネルディスプレイ３１に表示されるライブ合成画像は、左右が反転した画像であり、ユーザは鏡に映った自身の姿を見るような感覚で、タッチパネルディスプレイ３１に表示されたライブ合成画像を確認することができる。こうして生成されたライブ合成画像は記憶部６に記憶される。なお、記憶された動画像用データは、後述するように遊戯用動画像の生成に用いられる。したがって、本実施形態において、動画像用データは、ライブ合成画像と遊戯用動画像の生成に用いられる。
【0024】
一方、静止画像を撮影する際には、一旦シャッターが閉じた後、これが開閉する際に、レンズを通過した光が撮影素子によって静止画像用データ（静止画像用信号）に変換される。静止画像用データは、制御部５のＲＡＭ及び記憶部６に記憶されるとともに、タッチパネルディスプレイ３１に送信される。この際にも、ライブ合成画像と同様に、タッチパネルディスプレイ３１に表示される静止画像は、画像処理部５１によって、静止画像用データに左右反転処理とクロマキー処理が施された上で、背景画像と合成され、合成静止画像として記憶される。なお、この合成静止画像に対して後述するトリミングが行われた後の画像も、説明の便宜のため、合成静止画像と称することとする。この他、静止画像用データは、上述した編集動画像、及びユーザに提供される印刷用のデータ、後述するサーバに送信されるデータとして利用される。但し、ユーザに提供される合成静止画像は、上述した左右反転処理を施していないものとすることができる。
【0025】
なお、動画像を撮影している際に、静止画像を撮影することもできるが、この場合には、カメラ３２のメカニカルシャッター（不図示）が開閉するため、少なくとも開閉を含む所定期間の間は動画像用データの生成が一旦中断される。この点について、図４を参照しつつ説明する。図４に示すように、動画像の撮影開始の指令が制御部５からカメラ３２に送信されると、動画像の撮影が開始され、動画像用データが生成される。そして、静止画像用のフォーカスの調整が開始され、調整が完了するとメカニカルシャッターが開閉され、静止画像用データが取得される。この間、動画像用データの生成が中断する。そして、静止画像の撮影が完了すると、動画像用データの生成が再び開始され、動画像の撮影終了の指令が制御部５からカメラ３２に送信されると、動画像用データの生成が終了する。このとき、動画像の撮影は、撮影開始の指令から撮影終了の指令まで続けられ、連続した動画像用データが生成される。但し、この動画像用データは、静止画像が撮影されている間、つまりフォーカスの調整開始から、静止画像の撮影終了付近までの時間は、データが欠落している。この点について、詳しく説明する。
【0026】
動画像用データは、撮影開始指令から撮影終了指令までに生成されたフレーム画像により構成され、生成されたフレーム画像には、例えば、時系列順にファイル名（Ａ#ａ, Ａ#ａ＋１, Ａ#ａ＋２, Ａ#ａ＋ｎ, Ａ#ａ＋ｎ＋１,・・・）が付けられ記憶される。ファイル名の前半部の「Ａ」が複数回行われる撮影のうちの何回目の撮影であるかを示しており、後半部の「ａ」、「ａ＋１」・・・が何番目に生成されたフレーム画像であるかを示している。また、どの時点のデータが欠落しているかを判別するために、フォーカスの調整指令がカメラ３２に入ったタイミングを基準に、その直前に生成されたフレーム画像（基準フレーム画像という）のファイル名（あるいは、フレーム画像の番号）が記憶される。そして、動画像用データのうち、撮影開始指令から基準フレーム画像までのフレーム画像が第１画像データを構成し、基準フレーム画像の次のフレーム画像から撮影終了指令までの間に生成されたフレーム画像が第２画像データを構成する。なお、メカニカルシャッターを有するカメラの種類によっては、フォーカス調整の指令にかかわらず、メカニカルシャッターが開閉している間のみ、データが欠落するような動画像用データが生成されることがある。なお、この場合は、どの時点のデータが欠落しているかを判別するために、フォーカスの調整指令のタイミングではなく、メカニカルシャッターが切られたタイミングを基準に基準フレーム画像を設定する。上記基準フレーム画像が、本発明の後部画像データに相当する。
【0027】
なお、本明細書では、説明の便宜のため、これら第１画像データ及び第２画像データに、それぞれ、背景画像が合成されたり、画像処理が施されているものも、第１画像データ及び第２画像データと称することとする。
【0028】
タッチパネルディスプレイ３１には、上述した静止画像及びライブ合成画像を表示するほか、上記プログラム６１に基づいて、撮影の案内を示す案内画面等が表示される。各画面では、選択操作等の操作入力が受け付けられる。制御部５は、各画面に対する操作入力（タッチ入力）を検知し、検知された操作入力に応じた処理を行う。
【0029】
照明ユニット３３は、上部照明部３３１及び下部照明部３３２を備えている。図２に示すように、上部照明部３３１は、ユーザ側に向く円形状のカバーを有しており、その内部には、複数の直管型ＬＥＤが配置されている。カバーは、乳白色のアクリル板などの透光性を有する材料で形成されており、直管型ＬＥＤから照射された光は、カバーを介して、正面上方から、ユーザの顔付近に照射されるようになっている。一方、下部照明部３３２は、タッチパネルディスプレイ３１の下側、写真プリントの取出口３７の周囲に配置されている。下部照明部３３２は、矩形状のカバーと、その内部に配置された複数の直管型ＬＥＤとを備えており、カバーは、上部照明部３３１のカバーと同様の材料で形成されている。そして、下部照明部３３２は、被写体に対して正面下方から光を照射するようになっている。各照明部３３１、３３２の直管型ＬＥＤは、制御部５により制御されており、発光量を調節することで、ユーザの撮影処理の段階に応じて撮影空間１０内の明るさを調節する。
【0030】
スピーカ３４及びプリンタ３５は、撮影ユニット３本体に内蔵されている。スピーカ３４は、制御部５による制御に従って、写真撮影の案内等の音声出力を行う。また、プリンタ３５は、制御部５による制御に従って、撮影された画像又は編集済みの画像をプリントし、プリントした画像を取出口３７に排出する。
【0031】
決済処理部３６は、タッチパネルディスプレイ３１の右側に配置されている。詳細な図示は省略するが、この決済処理部３６は、コイン投入口、紙幣投入口、カードリーダ、釣銭排出口を備えている。この決済処理部には、各種のセンサが設けられており、コイン、紙幣の投入を検知し、当該検知を表わす起動信号を制御部５に出力する。また、撮影のキャンセル及び撮影に要する金額分より多い金額分の現金が投入された際に、該当金額分の現金を紙幣投入口、または釣銭排出口に排出する。
【0032】
カードリーダは、ＩＣカード、クレジットカード等のカードの情報を読取可能に構成される。このカードリーダには、各種カードの情報を読取可能な公知のリーダが用いられてよい。カードリーダは、電子マネー、クレジットカード等による料金の支払いを受け付け、当該料金の支払いを受け付けた際には、そのことを表わす起動信号を制御部５に出力する。
【0033】
（その他）
なお、撮影装置１００の具体的なハードウェア構成に関して、実施形態に応じて、適宜、構成要素の省略、置換及び追加が可能である。例えば、制御部５は、複数のプロセッサを含んでもよい。また、撮影装置１００は、提供されるサービス専用に設計された情報処理装置の他、汎用のＰＣ（Personal Computer）等であってもよい。
なお、撮影装置１００の具体的なハードウェア構成に関して、実施形態に応じて、適宜、構成要素の省略、置換及び追加が可能である。例えば、制御部５は、複数のプロセッサを含んでもよい。また、撮影装置１００は、提供されるサービス専用に設計された情報処理装置の他、汎用のＰＣ（Personal Computer）等であってもよい。
【0034】
＜３．撮影装置のソフトウェア構成＞
次に、図５を用いて、本実施形態に係る撮影装置１００のソフトウェア構成の一例を説明する。図５は、本実施形態に係る撮影装置１００のソフトウェア構成の一例を模式的に例示する。
次に、図５を用いて、本実施形態に係る撮影装置１００のソフトウェア構成の一例を説明する。図５は、本実施形態に係る撮影装置１００のソフトウェア構成の一例を模式的に例示する。
【0035】
撮影装置１００の制御部５は、記憶部６に記憶されたプログラム６１をＲＡＭに展開する。そして、制御部５は、ＲＡＭに展開されたプログラム６１をＣＰＵにより解釈及び実行して、各構成要素を制御する。これによって、図５に示すように、本実施形態に係る撮影装置１００の制御部５等は、ソフトウェアモジュールとして、背景画像の選択、撮影プレイの処理、照明の制御、及び後述する遊戯用動画像の生成を行う画像処理部５１、編集プレイを提供する編集処理部５２、及びシートの印刷、動画像の表示などの処理を行う出力処理部５３として機能する。撮影プレイは、後述するようにユーザの撮影を行うための一連のプレイであり、編集プレイは、後述する編集用画像に落書きなどの編集を行うための一連のプレイである。
【0036】
＜３－１．画像処理部＞
画像処理部５１は、以下の処理を行う。なお、特に断りのない限り、以下で説明する処理は、画像処理部５１によって行われることとする。背景画像を選択させるため、まず、図６に示す背景画像選択画面６をタッチパネルディスプレイ３１に表示する。本実施形態では、２枚のアップ画像と２枚の全身画像の撮影が行われるが、各画像用の背景画像がそれぞれ選択される。図６に示す画面の上段には、２枚のアップ画像用の背景画像スペースと、２枚の全身画像用の背景画像スペースが設けられている。以下、説明の便宜上、これらのスペースを左から右に向かって第１～第４スペース６１～６４と称することがある。そして、これら背景画像スペース６１～６４の下には「おまかせ」ボタン６５が配置され、その下方に１０枚の背景画像の候補が表示されたサンプルスペース６６が設けられている。このサンプルスペース６６には、１０枚の背景画像が示されているが、右スクロールボタン６６１または左スクロールボタン６６２をタッチすると、他の１０枚の背景画像の候補が表示されるようになっている。
画像処理部５１は、以下の処理を行う。なお、特に断りのない限り、以下で説明する処理は、画像処理部５１によって行われることとする。背景画像を選択させるため、まず、図６に示す背景画像選択画面６をタッチパネルディスプレイ３１に表示する。本実施形態では、２枚のアップ画像と２枚の全身画像の撮影が行われるが、各画像用の背景画像がそれぞれ選択される。図６に示す画面の上段には、２枚のアップ画像用の背景画像スペースと、２枚の全身画像用の背景画像スペースが設けられている。以下、説明の便宜上、これらのスペースを左から右に向かって第１～第４スペース６１～６４と称することがある。そして、これら背景画像スペース６１～６４の下には「おまかせ」ボタン６５が配置され、その下方に１０枚の背景画像の候補が表示されたサンプルスペース６６が設けられている。このサンプルスペース６６には、１０枚の背景画像が示されているが、右スクロールボタン６６１または左スクロールボタン６６２をタッチすると、他の１０枚の背景画像の候補が表示されるようになっている。
【0037】
ユーザが、サンプルスペース６６の中のいずれかの背景画像を選択すると（タッチすると）、図７に示すように、第１～第４スペース６１～６４に、選択した背景画像が順に表示されるようになっている。このとき、背景画像が表示された背景画像スペース６１～６４をタッチすると、背景画像の選択がキャンセルされ、その背景画像スペース６１～６４から背景画像が消去される。これにより、背景画像の再選択が可能となる。
【0038】
また、「おまかせ」ボタン６５により背景画像を選択することも可能である。すべての背景画像スペース６１～６４に背景画像が表示されていない状態で、「おまかせ」ボタン６５をタッチすると、背景画像スペース６１～６４のそれぞれに、サンプルスペース６６からランダムに選択された背景画像が表示される。このとき、各背景画像スペース６１～６４に表示される背景画像は重複しないように選択される。この状態で、背景画像が表示された背景画像スペース６１～６４、または背景画像スペース６１～６４内の「Ｘ」ボタンをタッチすると、上記と同様に、背景画像の選択がキャンセルされ、その背景画像スペース６１～６４から背景画像が消去される。ここで、例えば、図８に示すように、第２及び第４スペース６２，６４の背景画像がキャンセルされた状態で、「おまかせ」ボタン６５をタッチすると、２枚の背景画像がランダムに選択され、キャンセルされた第２及び第４スペース６２，６４にそれぞれ表示される。このとき、新たな２枚の背景画像は、第１及び第３スペース６１，６３において既に選択されている２枚の背景画像とは重複しないように選択される。このように、「おまかせ」ボタン６５をタッチすると、背景画像が表示されていない背景画像スペース６１～６４の数だけ、重複しないように、新たな背景画像が選択され、その背景画像スペース６１～６４に表示される。なお、４枚の背景画像が全て選択されている状態で、「おまかせ」ボタン６５をタッチすると、背景画像スペース６１～６４に表示されている４枚の背景画像が、これら４枚の背景画像を除く複数の背景画像の中からランダムに選択された別の４枚の背景画像に入れ替わるようになっている。
【0039】
そして、背景画像の選択が完了し、ＯＫボタン６７をタッチすると、次の撮影処理に移行する。すなわち、ＯＫボタン６７がタッチされるまでは、背景画像の選択を何度でも行うことができる。なお、ＯＫボタン６７をタッチする前であっても、所定時間が経過した場合には、背景画像の選択処理を強制的に終了してもよい。このとき、４枚の背景画像の選択が完了していなければ、背景画像選択部５１が任意に背景画像を選択する。なお、一部の背景画像がすでに選ばれている場合は、選ばれている一部の背景画像以外を任意に選択する。
【0040】
次に、撮影プレイの処理について説明する。背景画像選択画面６において、ＯＫボタン６７からの選択が行われると、撮影に関する処理が開始される。まず、アップ画像の撮影から行われる。このとき、図９に示す、アップ画像のスタイルを選択するためのスタイル選択画面７０１がタッチパネルディスプレイ３２に表示される。図９に示すように、このスタイル選択画面７０１には、３種類のアップ画像の撮影のためのスタイルが表示されている。すなわち、左側から右側に向かって、高めスタイル７１、低めスタイル７２、及び多人数スタイル７３が表示されている。高めスタイル７１は、大人などの背の高い被写体の上半身が含まれる静止画像を生成するためのスタイルであり、撮影された画像の上部付近がトリミングされ、これに基づいて、上述した合成静止画像が生成される。低めスタイル７２は、子供などの背の低い被写体の上半身が含まれる静止画像を生成するためのスタイルであり、撮影された画像の中間部付近がトリミングされ、これに基づいて、上述した合成静止画像が生成される。多人数スタイル７３は、例えば、３人以上の被写体が横方向に並んでいる静止画像を生成するためのスタイルであり、撮影された画像の中間部から上部付近が左右方向に長めにトリミングされ、これに基づいて、上述した合成静止画像が生成される。トリミングの縦横比は、どのスタイルとも同じである。
【0041】
ユーザがいずれかのスタイル７１～７３を選択し、ＯＫボタン７４をタッチすると、スタイルの選択が完了し、アップ画像の撮影に移行する。なお、ＯＫボタン７４がタッチされるまでは、スタイルの選択を何度でも行うことができる。
【0042】
これまで説明したОＫボタン６７やＯＫボタン７４や、以下の説明で登場する各種の選択確定ボタンは、各画面に対してユーザが１回目の選択操作するまで非表示としたり、画面が表示されてから数秒の期間非表示としたりすることも可能である。これにより、ユーザが誤って選択確定ボタンをタッチし、ユーザの意に沿わない選択を確定させてしまう確率を低減することができる。
【0043】
図１０はアップ画像の撮影準備画面である。図１０に示すように、この撮影準備画面７０２にはアップ画像の撮影が開始される旨が表示され、その下方に、選択されたスタイルのサンプルポーズ７５が表示されている。例えば、低めスタイルを選択した場合には、モデルに子供を含むファミリー（２人）用のサンプルポーズが示され、大人に対しては撮影に当たって少しかがむことが音声等により促される。また、高めスタイルを選択したときには、大人用（カップル等）のサンプルポーズが示され、多人数スタイを選択したときには、子供を含む３人以上のサンプルポーズが示される。また、サンプルポーズの下方には４つの撮影画像スペース７６が表示されており、このスペース７６に撮影された合成静止画像（アップ画像２枚と全身画像２枚）が配置される。
【0044】
図１０の画面は所定時間表示されるが、この間にユーザにサンプルポーズ７５を確認させる。そして、所定時間が経過すると、図１１のアップ画像の撮影画面７０３に遷移し、カメラ３２による動画像撮影、すなわち動画像用データの取得が開始される。図１１の画面には、取得された動画像用データの前半部である第１画像データに対して画像処理が施されたライブ合成画像（表示用動画）７７が生成・表示され、その両側にサンプルポーズ７８が表示されている。なお、サンプルポーズ７８は、図１０のサンプルポーズ７５と同じ画像である。また、ライブ合成画像７７の下方には、上述した撮影画像スペース７６が表示されている。上述したとおり、ライブ合成画像７７は、カメラ３２で撮影された第１画像データに対して、少なくとも下記の４つの処理が１～４の順でなされたものである。
１．図９のスタイル選択の結果に応じたトリミング処理（トリミング処理）
２．クロマキー処理による被写体抽出（被写体抽出処理）
３．選択された背景画像との合成処理（合成処理）
４．左右反転処理による鏡像化（鏡像化処理）
１．図９のスタイル選択の結果に応じたトリミング処理（トリミング処理）
２．クロマキー処理による被写体抽出（被写体抽出処理）
３．選択された背景画像との合成処理（合成処理）
４．左右反転処理による鏡像化（鏡像化処理）
【0045】
なお、背景画像のデザインを左右反転させたくない場合は、４の「左右反転処理」を、３の「背景画像との合成処理」よりも前に行えばよい。これにより、ユーザは、ライブ合成画像７７を見ながら、ポーズを取ったり、被写体が撮影画像に含まれるように位置の調整を行うことができる。
【0046】
そして、カウントダウンがなされた後、カメラ３２が駆動されて撮影が行われ、静止画像用データが取得される。カメラ３２の駆動時に、カメラ３２のフォーカスが開始されると動画像用データの取得が中断され、第１画像データの取得が完了する。これにより、ライブ合成画像７７のタッチディスプレイ３１への表示も停止される。そして、取得された静止画像用データに対してスタイル選択の結果に応じたトリミングを行い、さらにクロマキー処理により、被写体部分を抽出した静止画像を生成する。この静止画像と、選択された背景画像とを合成して合成静止画像を生成し、記憶部６に記憶する。そして、この合成静止画像は、撮影の結果として、タッチディスプレイ３１のライブ画像７７が表示されていた領域に表示される。撮影結果として表示される合成静止画像は、ライブ合成画像７７と同様の左右反転処理が施されたものであってもよい。
【0047】
静止画像用データが取得された後、動画像用データの取得が再開され、第２画像データの取得を開始する。そして、所定期間後の次の撮影が始まる前に、動画像撮影、すなわち動画像用データの取得が終了し、第２画像データの取得が完了する。第１画像データ及び第２画像データは、動画像用データとして記憶部６に記憶される。
【0048】
なお、静止画像を撮影するに当たっては、シャッターが切られる直前（数ミリ秒前）からシャッターが切られた直後までの間に、タッチパネルディスプレイ３１は、図１１の画面ではなく、全体が白の画面（演出静止画）が表示される。これにより、より明るい撮影画像を得ることができる。暗い撮影画像としたい場合は、白の画面に変えて黒の画面を表示することもできる。また、ユーザにカメラ３２を向かせるために、タッチパネルディスプレイ３１には、カメラ３２のレンズの方向に向けた矢印等の表示を示すことができる。
【0049】
以上説明したアップ撮影が２回行われた後、アップ撮影と同様の手順で全身画像の撮影が２回行われる。そして、それぞれの撮影に対応する合成静止画像、静止画像用データ及び動画像用データが生成される。なお、アップ画像と同様に、タッチパネルディスプレイ３１には、図１０と同様の撮影準備画面が所定時間表示された後、図１１と同様の撮影画面が表示され、全身画像の撮影が行われる。なお、このときの撮影準備画面及び撮影画面には、所定の全身画像用のサンプルポーズが示される。こうして、２回の全身画像の撮影が完了すると、出力処理に移行する。なお、全身画像の撮影に関して、これにより生成される合成静止画像は、アップ撮影の合成生成画像とは異り、被写体の下半身も含まれるようなトリミング範囲で切り出された画像となっている。
【0050】
なお、画像処理部５１による照明の制御により、プレイが始まってから終了するまで、照明ユニット３３から発せられる光の強度が制御されているが、静止画像が撮影される所定時間前から静止画の撮影が完了後の所定時間経過後までの間、上部照明部３３１及び下部照明部３３２の光の強度が高くされ、静止画像を適切に撮影できるようにする。各照明部３３１，３３２の光の強度を強くする時間は、適宜変更できるが、例えば、動画像用データの取得開始指令が出てから、取得終了指令が出るまでの時間にすることができる。
【0051】
次に、画像処理部５１による遊戯用動画像を生成する処理について説明する。画像処理部５１は、記憶部６に記憶された動画像用データ及び静止画像用データを利用して、動画像を生成する機能を有する。この動画像を上述したライブ合成動画７７と区別するため、遊戯用動画像（編集動画像）と称することとし、この遊戯用動画像のためのデータを遊戯用動画像データと称する。この遊戯用動画の提供は、ユーザに対するサプライズのサービスであり、遊戯用動画像を生成していることをユーザには通知せずに、生成を行う。
【0052】
遊戯用動画像の生成は、上述した４回の撮影の少なくとも１つを利用して行う。例えば、１回目のアップ撮影を行っている際に、遊戯用動画像の生成を併せて行う。上述したように、画像処理部５１は、ライブ合成画像７７を説明する際に示した通り、静止画像の撮影の所定時間前に動画像用データの取得開始指令をカメラ３２に対して行い、静止画像の撮影から所定時間経過後に取得終了指令をカメラ３２に対して行う（図４参照）。これにより、上述したような第１画像データ及び第２画像データを含む動画像用データが生成され、記憶部６に記憶される。そして、この動画像用データを構成する各フレーム画像には、上述したスタイル選択画面７０１で選択されたスタイルに基づいて、画像処理部５１により、トリミングが施される。このとき、動画像用データに施されるトリミングは、合成静止画像に施されたトリミングと、トリミング適合するように行われ、これによって、後述するように、動画像用データと静止画像用データとを合成するときに不自然さが生じないようにする。また、各フレーム画像には、クロマキー処理が行われて被写体のみを抽出し、これに背景画像を合成する。このとき合成される背景画像は、上述した背景画像選択部５１による処理で選択された背景画像とは異なるものであり、画像処理部５１が、任意に選択した背景画像である。なお、説明の便宜のため、フレーム画像にトリミング処理、クロマキー処理、及び背景画像の合成が行われた後の動画像用データ、第１画像データ、及び第２画像データも、それぞれ動画像用データ、第１画像データ、及び第２画像データと称することとする。
【0053】
次に、画像処理部５１は、第１画像データと第２画像データとの間、つまり第１画像データの最後の基準フレーム画像の後に特別画像データを挿入し、第１画像データ、特別画像データ、及び第２画像データがこの順で再生される遊戯用動画像データを生成する。すなわち、特別画像データは、上述したように、画像が欠落している時間帯を補完するように生成された動画用の画像データである。特別画像データの生成方法は、種々の方法があるが、以下では例として３つの方法を示す。
【0054】
第１の方法では、図１２に示すように、特別画像データとして、第１画像データと第２画像データの間で生成された被写体の静止画像用データを用いる。より詳細に説明すると、まず、上述したスタイル選択画面７０１で選択されたスタイルに基づいて、画像処理部５１により、静止画像用データに対してトリミングが施される。そして、クロマキー処理により、トリミングされた静止画像用データから被写体を抽出し、これに動画像用データと同様に、ユーザが選択したものとは異なる背景画像が合成された合成画像データを生成する。そして、１つの合成画像データを１フレームとし、これを複数繋いで数フレームの動画像となる特別画像データを生成する。ここで生成するフレーム数は特には限定されないが、例えば、画像が欠落した時間に合わせてフレーム数を決めることもできるし、その時間よりも長くしたり短くしたりすることもできる。こうして生成された特別画像データを第１画像データと第２画像データとの間に組み込むと、遊戯用動画像データが生成され、記憶部６に記憶される。
【0055】
第２の方法としては、第２画像データの最初のフレーム画像、つまり基準フレーム画像の次のフレーム画像（前部画像データ）を用いる。より詳細には、図１３に示すように、このフレーム画像を１フレームとし、これを複数繋いで数フレームの動画像となる特別画像データを生成する。フレーム数の決定は第１の方法と同様である。こうして生成された特別画像データを第１画像データと第２画像データとの間に組み込むと、遊戯用動画像データが生成される。なお、第２画像データの最初のフレーム画像の代わりに、第１画像データの最後の基準フレーム画像（後部画像データ）を用いて特別画像データを生成することもできる。但し、上述したようなフォーカスの調整指令後にデータの欠損が生じるようなカメラでは、第１画像データの生成中は、静止画像の撮影前であるため、ポーズを取るなど、被写体が動くことが多いため、撮影においてポーズが決まった直後の第２画像データを用いることが好ましい。一方、シャッターが開閉している間のデータが欠損するタイプのカメラでは、第１画像データ及び第２画像データのいずれを用いても大差はない。また、第１画像データの最後のフレーム画像（基準フレーム画像）のみ、または第２画像データの最初のフレーム画像のみだけではなく、例えば、第１画像データの最後の数フレームの画像（後部画像データに相当）、または第２画像データの最初の数フレームの画像（前部画像データに相当）を用いて特別画像データを生成することもできる。また、顔検出を用いて、第１画像データ及び第２画像データのフレーム画像のうち、被写体が、より前を向いているフレーム画像を選択することもできる。
【0056】
第３の方法としては、図１４に示すように、第１画像データの最後のフレーム画像と、第２画像データの最初のフレーム画像とを用い、ニューラルネットワーク等を用いた機械学習により、特別画像データを生成することができる。例えば、上記２つのフレーム画像を入力データ、特別画像データを出力データとする教師データにより、誤差逆伝播法により学習された学習器を生成する。第１画像データと第２画像データの間には、所定時間が形成しており、第１画像データの最後のフレーム画像に写る被写体と、第２画像データの最初のフレーム画像に写る被写体とは異なる可能性がある。したがって、教師データに含まれる出力データは、２つのフレーム画像の間での被写体の動きが含まれる複数のフレーム画像とすることができる。こうして、学習器から出力された特別画像データを、第１画像データと第２画像データとの間に組み込むと、遊戯用動画像データが生成される。
【0057】
なお、特別画像データにさらに画像処理を施すこともできる。例えば、特別画像データの最初や途中に白色のフレーム画像を挿入すると、遊戯用動画像の途中でストロボが発光したような演出を施すことができる。その他、特別画像データには、種々の演出用の画像処理を施すことができるが、例えば、遊戯用動画像において特別画像データに対応する部分の最初、途中及び／又は最後の数フレームに対して色を変更したり、スライドイン、フェードイン、ターン等の演出がなされるように、特別画像データに画像処理を行うことができる。また、第１画像データや第２画像データに対しても、同様の画像処理を施すこともできる。
【0058】
こうして生成された遊戯用動画像データは、後述する出力処理において用いられる。なお、上述したライブ合成画像を用いて、遊戯用動画像データを生成することもできる。この場合、ライブ合成画像が、第１画像データに相当する。ライブ合成画像は、上述したとおり、トリミング処理、被写体抽出処理、合成処理及び鏡像化処理が施されているので、特別画像データ及び第２画像データもこれら４つの処理が施されたものを使用する。これにより、左右反転した遊戯用動画像を生成することができる。左右反転処理された遊戯用動画像は、鏡に映った自分であるので、普段から見慣れた自身の姿を動画像として提供することができる。
【0059】
＜３－２．編集処理部＞
次に、編集処理部５２について説明する。編集処理部５４は、図１５に示すように、編集を行う人数を選択するための画面を、タッチパネルディスプレイ３１に表示する。この画面において、ユーザは、編集を行う人数が１人または２人のいずれかを選択する。そして、編集を行う人数が２人であれば、図１６の編集用の画面がタッチパネルディスプレイ３１に表示され、１人であれば、図示を省略するが、編集用の画面が１つだけ示された画面が表示される。
次に、編集処理部５２について説明する。編集処理部５４は、図１５に示すように、編集を行う人数を選択するための画面を、タッチパネルディスプレイ３１に表示する。この画面において、ユーザは、編集を行う人数が１人または２人のいずれかを選択する。そして、編集を行う人数が２人であれば、図１６の編集用の画面がタッチパネルディスプレイ３１に表示され、１人であれば、図示を省略するが、編集用の画面が１つだけ示された画面が表示される。
【0060】
図１６に示す画面は、画像処理部５１により生成された合成静止画像に対して、編集を行う画面であり、中央に編集用の複数のスタンプが表示されたスタンプリスト８０４が配置されている。そして、その両側には、合成静止画像８０５が表示されている。これらは同じものである。ここで表示される合成静止画像は、作成された４枚の合成静止画像のうちの１つであるが、選択できるようにしてもよい。また、スタンプリストの下方には編集終了までの時間を示すカウントダウン表示が示されている。さらに、各合成静止画像８０５の下方には、編集用の複数の色のカラーペン８０６が示されている。
【0061】
合成静止画像８０５の編集は、例えば、次のように行われる。ユーザが、いずれかのスタンプをタッチしてスタンプの選択を行った後、合成静止画像８０５のいずれかの位置をタッチすると、選択されたスタンプが、タッチされた位置に表示される。そして、他のスタンプが選択されるか、あるいは後述するカラーペン８０６が選択されるまでは、合成静止画像８０５をタッチする度に、その時点で選択されているスタンプが合成静止画像８０５に表示される。
【0062】
また、いずれかの色のカラーペン８０６をタッチして選択すると、ペンの色が設定され、その状態で、合成静止画像８０５上で指によって線や文字を描くと、選択された色の線や文字が合成静止画像８０５に表示される。そして、スタンプが選択されるか、あるいは他の色のカラーペン８０６が選択されるまでは、合成静止画像８０５に指で線を描く度に、その時点で選択されている色の線が合成静止画像８０５に表示される。
【0063】
以上のような編集処理部５４の処理により、カウントダウン表示が０になるまで、ユーザは、編集処理を行うことができる。そして、カウントダウン表示が０になると、編集処理部５４は、編集処理を終了し、合成静止画像に編集が施された後の編集画像を編集画像データとして記憶部６に記憶する。次に説明する出力処理部５５による出力処理が行われる。
【0064】
＜３－３．出力処理部＞
出力処理部５５は、出力用画像が印刷されるシートのサンプルを表示する。上記のように、２人で編集を行った場合には、図１７に示すように、複数のシートデザイン８０９が示され、ユーザがいずれかをタッチして選択できるようになっている。なお、ＯＫボタンがタッチされるまで、また所定時間が経過するまでは、何回でもシートデザインを選択し直すことができる。各シートデザインには、生成された編集画像または合成静止画像のうちの複数が配置されており、シートのデザイン、画像のレイアウト、画像の輪郭、位置などが相違している。
出力処理部５５は、出力用画像が印刷されるシートのサンプルを表示する。上記のように、２人で編集を行った場合には、図１７に示すように、複数のシートデザイン８０９が示され、ユーザがいずれかをタッチして選択できるようになっている。なお、ＯＫボタンがタッチされるまで、また所定時間が経過するまでは、何回でもシートデザインを選択し直すことができる。各シートデザインには、生成された編集画像または合成静止画像のうちの複数が配置されており、シートのデザイン、画像のレイアウト、画像の輪郭、位置などが相違している。
【0065】
こうして、シートが決定すると、出力処理部５５は、プリンタにより、シートを印刷する。シートの印刷の準備が始まってから、シートが取出口３７から排出されるまでの間、出力処理部５５は、遊戯用動画像をタッチディスプレイ３１にて表示する。
【0066】
また、出力処理部５５は、生成された静止画像用データ、編集画像データ、画像が配置されたシートの画像データ、及び遊戯用動画像データの少なくとも１つを出力することもできる。この場合、これらのデータを、ユーザの携帯端末に直接送信したり、あるいは外部サーバに送信後、当該外部サーバからユーザがインターネットを介して取得することもできる。
【0067】
なお、本実施形態では、撮影装置１００の各ソフトウェアモジュールがいずれも汎用のＣＰＵにより実現される例について説明している。しかしながら、以上のソフトウェアモジュールの一部又は全部が、１又は複数の専用のハードウェアプロセッサにより実現されてもよい。また、撮影装置１００のソフトウェア構成に関して、実施形態に応じて、適宜、機能の省略、置換及び追加が行われてもよい。
【0068】
【0069】
決済処理の終了後、図６に示す画面をタッチパネルディスプレイ３１に表示し、背景画像を選択させる（ステップＳ１１）。背景画像が選択されると、図９に示す画面が表示され、撮影スタイルの選択が行われる（ステップＳ１２）。次に、図１０及び図１１に示す画面が順に表示され、アップ画像及び全身画像の撮影が行われる（ステップＳ１３）。この撮影が行われている間に、遊戯用動画像の生成も並行して行われる。
【0070】
こうして、撮影が完了すると、図１５に示す画面において編集を行う人数の選択が行われた後、図１６に示す編集用の画面がタッチパネルディスプレイに表示され、ユーザに編集用画像の編集を行わせる（ステップＳ１４）。編集が終了すると、図１７に示す画面がタッチパネルディスプレイに表示され、シートのレイアウトの選択が行われる（ステップＳ１５）。こうして、シートのレイアウトが決定すると、出力処理部５５はシートの印刷を開始する（ステップＳ１６）。印刷が行われている間、タッチパネルディスプレイ３１には、画像処理部５１が生成した遊戯用動画像の少なくとも一部（遊戯用動画像のサムネイル、遊戯用動画像の存在をユーザに通知するための画像や文字等を含む）を、例えば、図１９に示すように再生する（ステップＳ１７）。このとき、スピーカ３４による音声で、遊戯用動画像の存在をユーザに通知することもできる。そして、印刷が完了すると、取出口３７からシートを排出するとともに、タッチパネルディスプレイ３１に、印刷が完了した旨の記載を表示する（ステップＳ１８）。
【0071】
＜５．特徴＞
以上のように、本実施形態によれば、以下の効果を得ることができる。
（１）この撮影装置１００では、撮影処理を行っている間に遊戯用動画像の生成を行い、シートの印刷を行っている際に、この遊戯用動画像をタッチパネルディスプレイ３１で再生するようにしている。遊戯用動画像を撮影していることは、ユーザには通知していないため、このことを、ユーザにとって、サプライズのサービスとすることができる。特に、遊戯用動画像で用いられる背景画像は、合成静止画像で用いられる背景画像とは異なるものであるため、作成される動画像の背景画像もユーザが見たことがないものである。したがって、この遊戯用動画像が、サプライズ用のサービスであることをより強調することができる。但し、遊戯用動画像の背景画像を、ユーザが選択した背景画像にすることもできる。
以上のように、本実施形態によれば、以下の効果を得ることができる。
（１）この撮影装置１００では、撮影処理を行っている間に遊戯用動画像の生成を行い、シートの印刷を行っている際に、この遊戯用動画像をタッチパネルディスプレイ３１で再生するようにしている。遊戯用動画像を撮影していることは、ユーザには通知していないため、このことを、ユーザにとって、サプライズのサービスとすることができる。特に、遊戯用動画像で用いられる背景画像は、合成静止画像で用いられる背景画像とは異なるものであるため、作成される動画像の背景画像もユーザが見たことがないものである。したがって、この遊戯用動画像が、サプライズ用のサービスであることをより強調することができる。但し、遊戯用動画像の背景画像を、ユーザが選択した背景画像にすることもできる。
【0072】
（２）本実施形態で用いられるカメラ３２は、一眼レフカメラであるため、動画像用データの生成中に、静止画像用データを生成しようとすると、上述したように、動画像用データの欠落が生じる。すなわち、第１画像データと第２画像データの間に、所定時間の欠落が生じる。これに対して、本実施形態では、静止画像の撮影処理を行う前の第１画像データと、静止画像の撮影が完了した後の第２画像データとの間に、静止画像用データ、第１画像データ、及び第２画像データの少なくとも１つに基づいて生成される特別画像データが組み込まれ、第１画像データ、特別画像データ、及び第２画像データの順に再生される遊戯用動画像を生成する。したがって、第１画像データと第２画像データとの間の時間に入るべき動画像を、特別画像データによって補完するため、スムーズな動画像を提供することができる。
【0073】
（３）静止画像の撮影時には、ストロボではなく、ＬＥＤの照明を用いているため、ストロボの映り込みがない第１画像データ及び第２画像データを生成することができる。
【0074】
＜６．変形例＞
以上、本発明の一実施形態について説明したが、本発明は上記実施形態に限定されるものではなく、その趣旨を逸脱しない限りにおいて、種々の変更が可能である。なお、以下で示す変形例は、適宜組み合わせ可能である。
以上、本発明の一実施形態について説明したが、本発明は上記実施形態に限定されるものではなく、その趣旨を逸脱しない限りにおいて、種々の変更が可能である。なお、以下で示す変形例は、適宜組み合わせ可能である。
【0075】
＜６．１＞
上記実施形態で示したタッチパネルディスプレイ３１に表示される画面は一例であり、画面のレイアウト、表示する内容は、適宜変更することができる。また、編集においては、スタンプ、カラーペンを設けているが、その他の編集ツールを適宜設けることもできる。
上記実施形態で示したタッチパネルディスプレイ３１に表示される画面は一例であり、画面のレイアウト、表示する内容は、適宜変更することができる。また、編集においては、スタンプ、カラーペンを設けているが、その他の編集ツールを適宜設けることもできる。
【0076】
＜６．２＞
背景画像の数、編集スタンプやカラーペンの数のほか、編集時間、撮影される写真の枚数、選択できるシートのレイアウトなど、種々の制限を設けることができる。また、編集プレイは必ずしも必要ではなく、撮影処理後に出力処理を行うこともできる。
背景画像の数、編集スタンプやカラーペンの数のほか、編集時間、撮影される写真の枚数、選択できるシートのレイアウトなど、種々の制限を設けることができる。また、編集プレイは必ずしも必要ではなく、撮影処理後に出力処理を行うこともできる。
【0077】
＜６．３＞
上記実施形態では、遊戯用動画像は、出力処理の際に再生、通知されているが、これに限定されず、撮影処理中、編集処理中に再生、通知することもできる。
上記実施形態では、遊戯用動画像は、出力処理の際に再生、通知されているが、これに限定されず、撮影処理中、編集処理中に再生、通知することもできる。
【0078】
＜６．４＞
上記実施形態のように、一種類の遊戯用動画像を再生するだけではなく、１つの画面において複数の遊戯用動画像が再生されるようにしてもよい。上記実施形態では、４回の撮影があるので、４種類の遊戯用動画像が生成される。これら４種類の動画像を並べて表示・再生することができる。
上記実施形態のように、一種類の遊戯用動画像を再生するだけではなく、１つの画面において複数の遊戯用動画像が再生されるようにしてもよい。上記実施形態では、４回の撮影があるので、４種類の遊戯用動画像が生成される。これら４種類の動画像を並べて表示・再生することができる。
【0079】
また、動画コラージュをタッチディスプレイ３１に表示することができる。例えば、図２０に示すように、複数の遊戯用動画像の再生用のウインドウを有する画面を生成することができる。この場合、(1)複数のウインドウの形状、(2)各ウインドウで再生される動画像を、適宜変更することができる。例えば、各ウインドウで再生される動画像は同じであるが、複数のウインドウの形状の少なくとも１つが相違するように画面を構成することができる。あるいは、各ウインドウの形状は同じであるが、少なくとも１つが異なる動画像が再生されるような画面を構成することができる。具体的には上記実施形態では、４枚の静止画を撮影したため、４種類の異なる遊戯用動画像を生成可能である。これら４種類の異なる遊戯用動画像を、所定の動画テンプレートに合成して１つの新たな遊戯用動画像を生成することもできるし、４種類のうちの１種類の遊戯用動画像を複数用いて、所定の動画テンプレートに合成して１つの新たな遊戯用動画像を生成することもできる。
【0080】
＜６．５＞
上記実施形態では、静止画像用データと動画像用データを１つのカメラ３２で生成しているが、これらを異なるカメラで生成することもできる。すなわち、２つのカメラを設けることもできる。また、一眼レフ以外のカメラを用いることもでき、ミラーレスの一眼レフカメラ、ｗｅｂカメラを用いることもできる。
上記実施形態では、静止画像用データと動画像用データを１つのカメラ３２で生成しているが、これらを異なるカメラで生成することもできる。すなわち、２つのカメラを設けることもできる。また、一眼レフ以外のカメラを用いることもでき、ミラーレスの一眼レフカメラ、ｗｅｂカメラを用いることもできる。
【0081】
なお、ｗｅｂカメラやミラーレスカメラを用いたり、２つのカメラを用いると、静止画像の撮影中にも動画像を撮影できるため、第１画像データと第２画像データとの間にデータの欠落が生じないようにすることができる。すなわち、第１画像データと２画像データとを特段区別しない一連の動画像用データが生成される。しかしながら、このような場合でも特別画像データを生成し、これを第１画像データと第２画像データとの間に組み込んで動画像用データを生成することができる。一般的に、静止画像用データは、動画像用データに比べて画素数が多いため、画像の質が高い。例えば、トリミングを行ったとしても、画質を維持できる。したがって、静止画像用データに対しては、動画像用データと比べ種々の画像処理を施すことができる。よって、このような質が高く、また種々の画像処理を施すことが可能な静止画像に基づく特別画像データを用いると、遊戯用動画像の質を高めることができる。
【0082】
＜６．６＞
上記実施形態では、ＬＥＤを内蔵する照明ユニット３３を用いているが、ストロボが内蔵された照明ユニットを用いることもできる。この場合、静止画の撮影時にストロボの光が動画像に対して映り込むおそれがあるが、ストロボの光が映り込むおそれのある発光時間帯の前後に、第１画像データ及び第２画像データを生成し、この発光時間帯に対応する特別画像データを上記のように生成すれば、ストロボの光が映り込まない動画像用データを生成することができる。なお、ストロボが発光する時間帯は静止画撮影のシャッターが切られるタイミングであるので、シャッターを有するカメラを用いればこのときの動画像用データは欠損する。
上記実施形態では、ＬＥＤを内蔵する照明ユニット３３を用いているが、ストロボが内蔵された照明ユニットを用いることもできる。この場合、静止画の撮影時にストロボの光が動画像に対して映り込むおそれがあるが、ストロボの光が映り込むおそれのある発光時間帯の前後に、第１画像データ及び第２画像データを生成し、この発光時間帯に対応する特別画像データを上記のように生成すれば、ストロボの光が映り込まない動画像用データを生成することができる。なお、ストロボが発光する時間帯は静止画撮影のシャッターが切られるタイミングであるので、シャッターを有するカメラを用いればこのときの動画像用データは欠損する。
【0083】
したがって、本発明においては、照明の種類によらず、強い光の映り込みを抑制できる動画像用データを生成することができる。なお、照明ユニット３３における光源は、撮影用及びその他の通常の照明用に、上述したＬＥＤ及びストロボのほか、白熱灯、ＨＩＤ、水銀灯等の少なくとも１つを用いることができる。
【0084】
＜６．７＞
上記実施形態に係る撮影装置１００は、概ね閉じた撮影空間１０を有しているが、タッチパネルディスプレイ３１、カメラ３２、照明ユニット３３、スピーカ３４、プリンタ３５、及び決済処理部３６が設けられた撮影ユニット３のみで撮影装置１００を構成し、撮影ユニット３が外部に開放されるよう構成することができる。この場合、クロマキー処理のためのカーテンがないため、ユーザの背後には撮影装置１００が配置される屋内または屋外の景色が広がる。
上記実施形態に係る撮影装置１００は、概ね閉じた撮影空間１０を有しているが、タッチパネルディスプレイ３１、カメラ３２、照明ユニット３３、スピーカ３４、プリンタ３５、及び決済処理部３６が設けられた撮影ユニット３のみで撮影装置１００を構成し、撮影ユニット３が外部に開放されるよう構成することができる。この場合、クロマキー処理のためのカーテンがないため、ユーザの背後には撮影装置１００が配置される屋内または屋外の景色が広がる。
【0085】
そして、このような撮影装置１００においても、背景画像と合成した合成静止画像、遊戯用動画像、またはライブ合成動画を生成するために、撮影画像から被写体のみを抽出する必要があるが、クロマキー処理用のカーテンがないため、例えば、撮影装置１００が屋外に設置された場合には、屋内または屋外の景色のほか、被写体以外の通行人が撮影画像において被写体の背後に写り込む場合があるため、これらを除くような公知の画像処理を撮影画像に施して被写体を抽出する必要がある。この場合、被写体と通行人とは、カメラ３２に対する顔の向き、顔の大きさ、カメラ３２からの距離が相違するため、このような相違をもとに被写体と通行人とを区別し、被写体のみを撮影画像から抽出することができる。このとき、カメラ３２からの距離は、被写界深度を算出したり、あるいは距離画像センサ、赤外線センサといったデバイスを設けることで、算出することができる。また、撮影装置１００が設置されている地面に枠を描くことで、撮影ユニット３に対するユーザの立ち位置の範囲を制限することができ、このようにすると被写体と通行人とをより正確に区別することができる。さらに、撮影画像からの被写体の抽出を機械学習により行うこともできる。
【0086】
このように撮影空間１０を外部に開放し、密な空間での撮影が行われないような撮影装置１００であっても、被写体と背景画像とを合成した静止画像用データや動画像用データを生成することができる。
【0087】
＜６．８＞
上記実施形態では、指によるタッチ操作で、タッチパネルディスプレイ３１に入力を行っているが、例えば、電子ペンにより入力を行うこともできる。あるいは物理的なボタン等の入力部を設けて入力を行うこともできる。
上記実施形態では、指によるタッチ操作で、タッチパネルディスプレイ３１に入力を行っているが、例えば、電子ペンにより入力を行うこともできる。あるいは物理的なボタン等の入力部を設けて入力を行うこともできる。
【0088】
＜６．９＞
上記実施形態では、撮影された画像と背景画像とを合成しているが、背景画像のほか、前景画像であってもよく、撮影された画像を装飾するような画像であればよい。また、編集プレイにおいては、合成された編集用画像を編集しているが、これに限定されず、合成を行っていない撮影された画像、またはそれをトリミング等のわずかな加工を施した画像に、編集を行ってもよい。
上記実施形態では、撮影された画像と背景画像とを合成しているが、背景画像のほか、前景画像であってもよく、撮影された画像を装飾するような画像であればよい。また、編集プレイにおいては、合成された編集用画像を編集しているが、これに限定されず、合成を行っていない撮影された画像、またはそれをトリミング等のわずかな加工を施した画像に、編集を行ってもよい。
【0089】
＜６．１０＞
上記実施形態では、撮影装置１００によって上述した全ての処理を行っているが、これに限定されない。例えば、図２１には、上記実施形態で示した撮影装置１００を含む撮影システムを示しているが、撮影装置１００を、インターネットなどのネットワーク４００を介して、画像提供サーバ２００及びユーザの携帯端末３００と接続することができる。例えば、主としてカメラ３２による被写体の撮影及びタッチパネルディスプレイ３１への表示に係る処理（少なくとも本発明の動画像撮影部及び静止画像撮影部による処理）を撮影装置で行い、その他の処理（例えば、遊戯用動画像の生成等、上述した画像処理部５１の一部）を画像提供サーバ及びユーザの携帯端末３００の少なくとも一方で行うことができる。ユーザの携帯端末３００を用いる場合には、例えば、専用のアプリケーションを予めインストールしておき、このアプリケーションにより、上述したその他の処理を行うことができる。以上の後世の場合、本発明に係る撮影システムの画像処理部は、画像提供サーバ２００及び携帯端末３００の少なくとも一方が有することになる。
上記実施形態では、撮影装置１００によって上述した全ての処理を行っているが、これに限定されない。例えば、図２１には、上記実施形態で示した撮影装置１００を含む撮影システムを示しているが、撮影装置１００を、インターネットなどのネットワーク４００を介して、画像提供サーバ２００及びユーザの携帯端末３００と接続することができる。例えば、主としてカメラ３２による被写体の撮影及びタッチパネルディスプレイ３１への表示に係る処理（少なくとも本発明の動画像撮影部及び静止画像撮影部による処理）を撮影装置で行い、その他の処理（例えば、遊戯用動画像の生成等、上述した画像処理部５１の一部）を画像提供サーバ及びユーザの携帯端末３００の少なくとも一方で行うことができる。ユーザの携帯端末３００を用いる場合には、例えば、専用のアプリケーションを予めインストールしておき、このアプリケーションにより、上述したその他の処理を行うことができる。以上の後世の場合、本発明に係る撮影システムの画像処理部は、画像提供サーバ２００及び携帯端末３００の少なくとも一方が有することになる。
【0090】
例えば、第１画像データ、第２画像データ、静止画像用データ、背景画像、及びコラージュのベースとなるデータ、つまり遊戯用動画像を生成するためのすべてのデータを撮影装置１００から受信し、画像提供サーバ２００や携帯端末３００において、遊戯用動画像データを作成する。この場合、第１画像データ、第２画像データ、静止画像用データにクロマキー処理が施されていない場合には、さらにクロマキー情報（マスク画像）及びトリミング範囲を示す情報を受信する必要がある。そして、画像提供サーバ２００や携帯端末３００では、クロマキー処理、背景画像の合成、トリミング等の画像処理を合わせて行い、遊戯用動画像を生成する。
【0091】
あるいは、背景画像及びコラージュのベースとなるデータは、予め画像提供サーバ２００や携帯端末３００に保存しておき、第１画像データ、第２画像データ、及び静止画像用データを、撮影装置１００から受信する。そして、受信したデータに基づき、サーバ２００や携帯端末３００において遊戯用動画像の生成を行う。
【0092】
＜６．１１＞
遊戯用動画像を生成するに当たっては、再生時間を短縮するため、第１画像データ及び第２画像データの全てを用いず、一部を用いることもできる。この場合、第１画像データ及び第２画像データと、特別画像データと、のつなぎ目で遊戯用動画像の被写体が不自然な動きとならないようにするためには、第１画像データの前半部及び／または第２画像データの後半部を用いずに遊戯用動画を生成することが好ましい。また、第１画像データ及び第２画像データの一部をある一定間隔で間引いたものを使用することも可能である。そうすることで、フレームレートを下げた動画などを作成することができ、被写体がカクカク動く面白い動画を作成することができる。このような一部が間引かれた第１画像データ及び第２画像データも、それぞれ第１画像データ及び第２画像データと称する。
遊戯用動画像を生成するに当たっては、再生時間を短縮するため、第１画像データ及び第２画像データの全てを用いず、一部を用いることもできる。この場合、第１画像データ及び第２画像データと、特別画像データと、のつなぎ目で遊戯用動画像の被写体が不自然な動きとならないようにするためには、第１画像データの前半部及び／または第２画像データの後半部を用いずに遊戯用動画を生成することが好ましい。また、第１画像データ及び第２画像データの一部をある一定間隔で間引いたものを使用することも可能である。そうすることで、フレームレートを下げた動画などを作成することができ、被写体がカクカク動く面白い動画を作成することができる。このような一部が間引かれた第１画像データ及び第２画像データも、それぞれ第１画像データ及び第２画像データと称する。
【0093】
＜６．１２＞
以上の説明では、遊戯用動画像データの生成に、第１画像データ、特別画像データ、及び第２画像データを用いているが、これら３つのデータをすべて使用せず、例えば、第１画像データ及び特別画像データをこの順で再生するように遊戯用動画像データを生成したり、あるいは特別画像データ及び第２画像データをこの順で再生するような遊戯用動画像データを生成することもできる。したがって、この観点からすると、本発明に係る動画像用データは、第１画像データ及び第２画像データの少なくとも一方が含まれていればよい。したがって、カメラ３２（本発明の動画像取得部の少なくとも一部）は、例えば、第１画像データのみ、または第２画像データのみを取得することもできる。
以上の説明では、遊戯用動画像データの生成に、第１画像データ、特別画像データ、及び第２画像データを用いているが、これら３つのデータをすべて使用せず、例えば、第１画像データ及び特別画像データをこの順で再生するように遊戯用動画像データを生成したり、あるいは特別画像データ及び第２画像データをこの順で再生するような遊戯用動画像データを生成することもできる。したがって、この観点からすると、本発明に係る動画像用データは、第１画像データ及び第２画像データの少なくとも一方が含まれていればよい。したがって、カメラ３２（本発明の動画像取得部の少なくとも一部）は、例えば、第１画像データのみ、または第２画像データのみを取得することもできる。
【0094】
＜６．１３＞
上記の実施形態では合成静止画像、ライブ合成動画及び遊戯用動画像のトリミングの範囲をユーザに選ばせているが、自動で決定することも可能である。例えば、第１画像データの取得よりも前に動画撮影を開始し、その動画を用いて、ユーザの人数や構成（身長、年齢、性別）を分析し、その結果に応じたトリミング範囲を、各撮影ごとに設定することもできる。
上記の実施形態では合成静止画像、ライブ合成動画及び遊戯用動画像のトリミングの範囲をユーザに選ばせているが、自動で決定することも可能である。例えば、第１画像データの取得よりも前に動画撮影を開始し、その動画を用いて、ユーザの人数や構成（身長、年齢、性別）を分析し、その結果に応じたトリミング範囲を、各撮影ごとに設定することもできる。
【0095】
＜６．１４＞
合成静止画像、ライブ合成動画像及び遊戯用動画像に対し、顔に関する画像処理（目の拡大、小顔等）や、肌をきれいに見せる画像処理、足を長く見せる画像処理などを追加で施すこともできる。これらの画像処理は、ユーザに選ばせるようにしてもよいし、予め決められたものを適用するようにしてもよい。
合成静止画像、ライブ合成動画像及び遊戯用動画像に対し、顔に関する画像処理（目の拡大、小顔等）や、肌をきれいに見せる画像処理、足を長く見せる画像処理などを追加で施すこともできる。これらの画像処理は、ユーザに選ばせるようにしてもよいし、予め決められたものを適用するようにしてもよい。
【0096】
＜６．１５＞
動画像用データ及び／または静止画像用データ（元データ）を用いてディープフェイク動画を作成し、それを遊戯用動画像として提供することもできる。具体的には、元データを用いて、元データに含まれる各ユーザの特徴（喜怒哀楽の表情、年齢、性別、国籍等）を検出し、予め用意してある動画テンプレートのモデルの顔の表情に合致するように、当該モデルの顔に変えてユーザの顔を合成することで、ディープフェイク動画を生成する。ユーザが複数いる場合は、ユーザの年齢や性別国籍等に応じて、各ユーザの顔を動画テンプレートのどのモデルに合成するかを決定する。遊園地などの施設の場合は、キャラクターとキャスト（パフォーマー等）のパレードの動画を動画テンプレートとして用意しておき、キャストの顔をユーザの顔と入れ替えた遊戯用動画像を作成することもできる。なお、ディープフェイク動画の精度を向上させるため、それ専用の撮影を行ってもよい。
動画像用データ及び／または静止画像用データ（元データ）を用いてディープフェイク動画を作成し、それを遊戯用動画像として提供することもできる。具体的には、元データを用いて、元データに含まれる各ユーザの特徴（喜怒哀楽の表情、年齢、性別、国籍等）を検出し、予め用意してある動画テンプレートのモデルの顔の表情に合致するように、当該モデルの顔に変えてユーザの顔を合成することで、ディープフェイク動画を生成する。ユーザが複数いる場合は、ユーザの年齢や性別国籍等に応じて、各ユーザの顔を動画テンプレートのどのモデルに合成するかを決定する。遊園地などの施設の場合は、キャラクターとキャスト（パフォーマー等）のパレードの動画を動画テンプレートとして用意しておき、キャストの顔をユーザの顔と入れ替えた遊戯用動画像を作成することもできる。なお、ディープフェイク動画の精度を向上させるため、それ専用の撮影を行ってもよい。
【符号の説明】
【0097】
３１…タッチパネルディスプレイ（表示部）
３２…カメラ（静止画像撮影部、動画像撮影部）
５１…画像処理部
３２…カメラ（静止画像撮影部、動画像撮影部）
５１…画像処理部
【図1A】
【図1B】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
【図20】
【図21】
