特許 5874421 遊戯用撮影装置、遊戯用撮影方法およびプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】5874421

(24)【登録日】2016年1月29日

(45)【発行日】2016年3月2日

(54)【発明の名称】遊戯用撮影装置、遊戯用撮影方法およびプログラム

(51)【国際特許分類】

   H04N 5/225 20060101AFI20160218BHJP

   G03B 17/53 20060101ALI20160218BHJP

   G06T 1/00 20060101ALI20160218BHJP

   H04N 5/76 20060101ALI20160218BHJP

   G07F 17/26 20060101ALI20160218BHJP

【ＦＩ】

   H04N5/225 F

   G03B17/53

   G06T1/00 340A

   H04N5/76 E

   G07F17/26

【請求項の数】4

【全頁数】23

(21)【出願番号】特願2012-24931(P2012-24931)

(22)【出願日】2012年2月8日

(65)【公開番号】特開2013-162451(P2013-162451A)

(43)【公開日】2013年8月19日

【審査請求日】2015年1月26日

(73)【特許権者】

【識別番号】597047392

【氏名又は名称】辰巳電子工業株式会社

(74)【代理人】

【識別番号】100104695

【弁理士】

【氏名又は名称】島田 明宏

(74)【代理人】

【識別番号】100121348

【弁理士】

【氏名又は名称】川原 健児

(72)【発明者】

【氏名】辰巳 聡

(72)【発明者】

【氏名】近藤 理美

【審査官】 ▲徳▼田 賢二

(56)【参考文献】

【文献】 特開２００９−２５１６３３（ＪＰ，Ａ）

【文献】 特開２００９−２８４３６１（ＪＰ，Ａ）

【文献】 特開２０１０−１７０２１９（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｈ０４Ｎ ５／２２５

Ｇ０３Ｂ １７／５３

Ｇ０６Ｔ １／００

Ｇ０７Ｆ １７／２６

Ｈ０４Ｎ ５／７６

(57)【特許請求の範囲】

【請求項1】

撮影のための撮影空間における複数の利用者の撮影を行う遊戯用撮影装置であって、
被写体である利用者を含む像を撮影する撮影手段と、
前記撮影手段によって得られる撮影画像に含まれる前記利用者の像における足部分の少なくとも一部を所定方向に拡大するとともに、当該像における胴部分の少なくとも一部を前記所定方向に縮小する変形処理を前記撮影画像に対して施して編集画像を生成する画像変形手段と、
前記編集画像を出力する出力手段と、を備え、
前記画像変形手段は、前記編集画像に含まれる前記利用者の像における前記所定方向の長さが前記撮影画像に含まれる前記利用者の像における前記所定方向の長さとほぼ等しくなるように、前記拡大および前記縮小の程度を決定することを特徴とする、遊戯用撮影装置。

【請求項2】

前記撮影画像における所定位置より下の範囲を含む脚部画像に前記利用者の像における顔部分が含まれるか否かを判定する顔検出手段をさらに備え、
前記画像変形手段は、前記撮影画像に前記利用者の像における顔部分が含まれていると判定された場合、前記変形処理を行なわない、前記変形処理による拡大および縮小の程度を小さくする、あるいは、前記顔検出手段により検出された顔部分以外の範囲に対して前記変形処理を行うことを特徴とする請求項１に記載の遊戯用撮影装置。

【請求項3】

撮影のための撮影空間における複数の利用者の撮影を行う遊戯用撮影方法であって、
被写体である利用者を含む像を撮影する撮影ステップと、
前記撮影ステップによって得られる撮影画像に含まれる前記利用者の像における足部分の少なくとも一部を所定方向に拡大するとともに、当該像における胴部分の少なくとも一部を前記所定方向に縮小する変形処理を前記撮影画像に対して施して編集画像を生成する画像変形ステップと、
前記編集画像を出力する出力ステップと、を有し、
前記画像変形ステップでは、前記編集画像に含まれる前記利用者の像における前記所定方向の長さが前記撮影画像に含まれる前記利用者の像における前記所定方向の長さとほぼ等しくなるように、前記拡大および前記縮小の程度が決定されることを特徴とする、遊戯用撮影方法。

【請求項4】

撮影のための撮影空間における複数の利用者の撮影を行う遊戯用撮影装置を動作させるためのプログラムであって、
被写体である利用者を含む像を撮影する撮影ステップと、
前記撮影ステップによって得られる撮影画像に含まれる前記利用者の像における足部分の少なくとも一部を所定方向に拡大するとともに、当該像における胴部分の少なくとも一部を前記所定方向に縮小する変形処理を前記撮影画像に対して施して編集画像を生成する画像変形ステップと、
前記編集画像を出力する出力ステップと、を有し、
前記画像変形ステップでは、前記編集画像に含まれる前記利用者の像における前記所定方向の長さが前記撮影画像に含まれる前記利用者の像における前記所定方向の長さとほぼ等しくなるように、前記拡大および前記縮小の程度が決定されることを特徴とするプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、遊戯用撮影装置、遊戯用撮影方法およびプログラムに関し、さらに詳しくは、利用者をカメラで撮影し、その撮影画像に基づき生成される合成画像を利用者に提供する遊戯用撮影装置、遊戯用撮影方法およびプログラムに関する。

【背景技術】

【0002】

従来、利用者をカメラで撮影し、その撮影画像を写真シールや写真カード等として出力する遊戯用撮影装置が知られている。このような遊戯用撮影装置は、遊戯性または娯楽性が高いことから、撮影画像と合成すべき画像を、利用者の嗜好に応じて、予め用意された多種多様な背景画像および前景画像（例えばフレーム画像やスタンプ画像など）から選択したり、タッチペンを用いて利用者が自由に描いたりできるように構成されているものが多い。利用者によるこのような操作は、撮影画像に対してなされるため、「落書き」と呼ばれる。

【0003】

このような遊戯用撮影装置では、限定された撮影室内で利用者を様々な態様で撮影することができるカメラが使用されることが多い。例えば、特開２００６−１９５３２１号公報には、ズームできるカメラが使用され、限られたブース内においても利用者の全身撮影を簡単に行うことができる構成が開示されている。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２００６−１９５３２１号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

このような全身撮影によって得られた撮影画像には利用者の全身の像が含まれる。そのため、足が実際の利用者よりも長く見える撮影画像（理想的な足の長さの撮影画像）がより好まれる。これを実現するための方法としては、理想的な足の長さになるように人物の足部分だけを上下に引き伸ばすような画像補正を行うことも考えられる。しかし、このような単純な画像補正を行えば、撮影画像における利用者の像の頭身が実際の利用者の頭身と大幅に異なり、全体として不自然な写り方となることは避けられない。

【0006】

そこで、本発明では、撮影対象となる利用者の足部分が不自然に写らないように、かつ足を長く見せる画像補正を行う遊戯用撮影装置を提供することを目的とする。

【課題を解決するための手段】

【0007】

本発明は、撮影のための撮影空間における複数の利用者の撮影を行う遊戯用撮影装置に関するものである。本発明は、被写体である利用者を含む像を撮影する撮影手段と、撮影画像に含まれる利用者の像における足部分の少なくとも一部を所定方向に拡大するとともに、当該像における胴部分の少なくとも一部を所定方向に縮小する変形処理を撮影画像に対して施して編集画像を生成する画像変形手段と、編集画像を出力する出力手段と、を備える。そして、画像変形手段は、編集画像に含まれる利用者の像における所定方向の長さが撮影画像に含まれる利用者の像における所定方向の長さとほぼ等しくなるように、拡大および縮小の程度を決定する。

【発明の効果】

【0008】

上記本発明によれば、撮影画像に含まれる像の足部分の長さを長くするとともに、それに合わせて胴部分の長さを短くすることができる。これにより、撮影画像に含まれる像の頭身を元の撮影画像からほとんど変えず、足の長さを長くすることができる。その結果、撮影画像において、自然に利用者の足を長くすることができ、ユーザの満足度を向上させる、という効果が期待できる。

【図面の簡単な説明】

【0009】

【図1】本発明の一実施形態に係る遊戯用撮影装置である遊戯用撮影装置の外観を示す図である。

【図2】上記実施形態における撮影ユニットの正面図である。

【図3】上記実施形態における編集ユニットの正面図である。

【図4】上記実施形態における出力ユニットの正面図である。

【図5】上記実施形態における撮影操作用タッチパネルの表示構成を示す模式図である。

【図6】上記実施形態に係る遊戯用撮影装置の要部を機能面から見た構成を示すブロック図である。

【図7】上記実施形態における撮影処理の手順を示すフローチャートである。

【図8】上記実施形態における落書き編集処理の手順を示すフローチャートである。

【図9】上記実施形態において、カメラ位置近傍から見た利用者Ｕ１，Ｕ２と背景との位置関係を簡略に示す図である。

【図10】上記実施形態において、撮影画像における予め定められた腹部位置および膝位置を示す図である。

【図11】上記実施形態において、図１０に示される画像に対してなされる脚部伸張処理の結果得られる画像を示す図である。

【図12】上記実施形態において、脚部伸張処理と、その上下方向の位置毎の画像変形量とを説明するための図である。

【図13】上記実施形態において、撮影画像における検出された各利用者の腹部位置および膝位置を示す図である。

【図14】上記実施形態における、図１１に示す例とは異なる撮影画像における検出された各利用者の腹部位置および膝位置を示す図である。

【発明を実施するための形態】

【0010】

以下、添付図面を参照しつつ本発明の一実施形態について説明する。
＜１．全体構成＞
図１は、本発明の一実施形態に係る遊戯用撮影装置である遊戯用撮影装置の外観を示す図である。より詳細には、図１（ａ）は、この遊戯用撮影装置を横から見た外観側面図であり、図１（ｂ）は、上から見た外観平面図である。この遊戯用撮影装置は、利用者が入る撮影室２と、利用者を撮影し背景画像および前景画像の選択を受け付ける撮影ユニット３と、利用者による落書き（描画操作）を含む編集操作を受け付け撮影画像に合成した合成画像を生成する編集ユニット４と、合成画像を出力する出力ユニット５とを備えている。図２は、撮影ユニット３の正面図であり、図３は、編集ユニット４の正面図であり、図４は、出力ユニット５の正面図である。以下、図１から図４を参照しつつ、本実施形態に係る遊戯用撮影装置の全体構成について説明する。

【0011】

撮影室２は、略直方体形状であって、撮影ユニット３は、内部に入る利用者から見て前の面である撮影室２の前面に沿って配置されている。なお、撮影室２の左右両側面の一部には、それぞれ利用者が出入りするための開口部と、当該開口部の一部または全部を覆う遮光カーテンとが設けられている。また、撮影室２の内部に入る利用者から見て後ろの面である背面にはクロマキー合成処理のための単一の色（ここでは青色または緑色）が付されている。なお、これらの色は、例えば、撮影ユニット３の撮影範囲に含まれる床面等にも付されていてもよい。また、撮影室２は、上記の構成に限定されることはなく、撮影に適した空間であればよい。

【0012】

撮影ユニット３は、利用者を撮影する撮像手段としての２つのカメラ１０，１１と、当該カメラ１０，１１の左右や上方の位置に配置され閃光を発するストロボ１３Ｌ、１３Ｒ、１４と、当該カメラ１０の下方に配置され利用者からの操作の受け付けや撮影画像の表等を撮影操作用タッチパネル２０および確認用液晶パネル１２とを備える。

【0013】

カメラ１０，１１は、典型的には、ＣＣＤ（電荷結合素子）を利用してデジタル画像信号を生成するデジタルカメラであって、利用者を撮影し、その撮影画像を表す画像信号を出力する。カメラ１０は利用者の全身を撮影するため広角レンズを使用している。また、カメラ１１は、利用者の上半身または顔をアップで撮影するためのものである。ストロボ１３，１４は、撮影のための充分な光を得るために利用者に向かって閃光を発する。撮影操作用タッチパネル２０は、撮影の際に利用者による各種操作を受け付けるための操作画面を提供するとともに、カメラ１１からの上記画像信号に基づく画像をリアルタイムで表示するように構成されている。また、確認用液晶パネル１２は、カメラ１０からの上記画像信号に基づく画像をリアルタイムで表示するように構成されている。ところで、図１に示すように、全身撮影用のカメラ１０は、アップ撮影用のカメラ１１よりも低い位置に配置されている。これにより、利用者を下方から撮影することができるので、利用者の足部分が長く、かつ、同部分が短くなるように全身撮影を行うことができる。その結果、撮影画像に含まれる利用者の像がより理想に近い体型となるように、撮影を行うことができる、という効果が得られる。

【0014】

図５は、撮影操作用タッチパネル２０の表示構成を示す模式図である。図５に示すように、撮影操作用タッチパネル２０には、リアルタイムで撮影画像を表示するためのリアルタイムプレビュー領域２０１と、ポーズの見本を表示するためのポーズ見本表示領域２０２と、撮影によって得られる落書き対象画像を表示するための落書き対象画像表示領域２０３とが表示されている。なお、リアルタイムプレビュー領域２０１には、撮影画像に対してリアルタイムでクロマキー合成された背景画像が合わせて表示される。

【0015】

図５は、撮影操作用タッチパネル２０の表示構成を示す模式図である。図５に示すように、撮影時点において、撮影操作用タッチパネル２０には、リアルタイムで撮影画像を表示するためのリアルタイムプレビュー領域２０１と、ポーズの見本を表示するためのポーズ見本表示領域２０２と、撮影によって既に得られた落書き対象画像を表示するための落書き対象画像表示領域２０３とが表示されている。なお、リアルタイムプレビュー領域２０１には、撮影画像に対してリアルタイムでクロマキー合成された背景画像が合わせて表示される。

【0016】

また撮影ユニット３は、編集ユニット４内に内蔵されるコンピュータを中心とした構成要素、すなわち各部の制御等を行う制御装置、Ｉ／Ｏ制御装置、および他のコンピュータと通信を行うためのネットワークアダプタ等によって制御されている。また、撮影ユニット３は、前面下方にコイン投入口２６を備えている。

【0017】

編集ユニット４は、撮影ユニット３を制御するコンピュータとは異なるコンピュータによって制御されている。また、編集ユニット４は、図１（ｂ）に示すように、２組の利用者がプレイ可能なように２つのユニット４ａ、４ｂに分かれている。そのうちの一方のユニット４ａには、落書き領域や落書きのためのメニュー、ツール等を表示する領域を含みＧＵＩ（Graphical User Interface）表示手段として機能する編集操作用タッチパネル４００と、当該編集操作用タッチパネル４００に対する操作に使用されるポインティングデバイスとしてのタッチペン４９Ｌ、４９Ｒとが設けられている。なお、他方のユニット４ｂについても同様の構成となっている。ここで図１（ａ）において手前に見えるユニット４ａを「落書きブースＡ」と呼び、その反対側（図では裏側）のユニット４ｂを「落書きブースＢ」と呼ぶ。

【0018】

本実施形態における編集操作用タッチパネル４００は、各ユニット４ａ、４ｂにおいてそれぞれ２人の利用者が同時に落書きを行えるような表示構成となっている。なお、本説明においては、左側の利用者が使用する構成要素には「Ｌ」を含む参照符号を付し、右側の利用者が使用する構成要素には「Ｒ」を含む参照符号を付している。もっとも、３人以上の利用者がこれらを適宜に使用してもよい。

【0019】

また、本実施形態における編集操作用タッチパネル４００は、複数のタッチペン４９Ｌ、４９Ｒによる操作位置を同時に検出可能に構成されており、かつ、検出される各操作位置が、タッチペン４９Ｌ、４９Ｒのうちのいずれの操作に対応するのかも検出可能となっている。例えば、編集操作用タッチパネル４００として静電容量方式のタッチパネルを使用した場合には、このような複数の操作位置の同時検出と操作されたタッチペンの識別とが可能である。

【0020】

この点、撮影操作用タッチパネル２０は、タッチペンが使用されるのではなく（もちろん使用されてもよいが）、利用者の指による操作位置を複数検出可能に構成されている。このことを実現するために、撮影操作用タッチパネル２０として、例えば上記静電容量方式のタッチパネルや、光センサ方式などその他の周知の方式により、指の近接、接触、または押圧を検出可能な表示パネル（このような検出が可能な表示パネルを「タッチセンサ付きパネル」という）が使用される。

【0021】

出力ユニット５は、図４に示すように、典型的には前面下方に、編集ユニット４で編集操作が行われた合成画像を印刷した写真シールや写真カード等を取り出す取出口３３を備えている。また、出力ユニット５は、例えば携帯電話端末に内蔵される赤外線ポートにより、例えばデコメール（登録商標）画像等の素材画像や撮影画像に落書きをした合成画像などを利用者の携帯電話端末に転送する際に利用者によって操作される出力操作用タッチパネル３０と、出力操作用タッチパネル３０の下方に配置され上記素材画像等を赤外線信号として携帯電話端末に向けて直接送信するための赤外線ポート（非接触通信ポート）３１と、上記通信の際に必要な操作方法や効果音などを音声によって利用者に知らせるスピーカ３２とを備えている。なおこの構成は一例であってこれらの要素の一部または全部を備えない場合もある。

【0022】

出力操作用タッチパネル３０は、利用者が合成画像を印刷された写真シール等だけでなく携帯電話端末においても見たい場合に、上記素材画像等を上記非接触通信機能を備えた携帯電話端末に送信するのに必要な各種操作を受け付けるための操作画面を提供するように構成されている。なお、当該操作は主に合成画像の写真シール等が印刷されるまでの時間を利用して行われるので、利用者は写真シール等が印刷されるまでの時間を持て余すことなく有効に利用することができる。また、出力ユニット５に出力操作用タッチパネル３０を設けずに、当該操作を編集ユニット４の編集操作用タッチパネル４００で行うようにすることもできる。

【0023】

また出力ユニット５は、携帯電話端末装置５５を内蔵しており、利用者によって使用される携帯電話端末によってサーバから当該合成画像をダウンロードできるよう、撮影画像を含む合成画像を画像データとして典型的には第３世代型携帯電話（３Ｇ）方式の無線通信方式で近傍の無線基地へ送信し、この画像データは当該無線基地局からインターネットを介して図示されない画像サーバに与えられ蓄積される。

【0024】

このような出力ユニット５も、撮影ユニット３を制御するコンピュータを中心に構成され各部の制御等を行う制御装置および他のコンピュータと通信を行うためのネットワークアダプタ等によって制御されているほか、合成画像を写真シール等として印刷するネットワークプリンタ３５を備えている。

【0025】

以上のような構成において、利用者は、撮影室２において撮影を行った後、編集ユニット４の落書きブースＡまたは落書きブースＢの編集操作用タッチパネル４００を使用することにより、撮影画像に基づいて生成された落書き対象画像に対して落書きを行う。そして、利用者は、落書きによって生成された合成画像をネットワークプリンタによって印刷したり、赤外線通信機能を有する携帯電話端末に画像を送信し、携帯電話端末で受信した画像を端末画面に表示させたりする。

【0026】

＜２． 機能的構成＞
図６は、本実施形態に係る遊戯用撮影装置の要部を機能面から見た構成を示すブロック図である。この図６に示す遊戯用撮影装置は、機能的には、落書き対象画像に対する利用者の落書き操作に応じて当該落書き対象画像の編集処理を行う編集処理部８と、主として利用者を撮影する処理（撮影処理）を行うとともに、編集処理が行われた落書き対象画像を写真シール等として出力したり、作成された素材画像等を非接触通信を利用して携帯電話端末に出力したりする処理（出力処理）を行う撮影出力処理部７とから構成されている。

【0027】

撮影出力処理部７は、第１の制御部７０と、撮像部７１と、第１の表示・操作部７２と、Ｉ／Ｏ制御部７３と、照明部７４と、第１の通信部７５と、第４の表示・操作部９１と、印刷出力部９２と、音声出力部９３と、非接触通信部９４と、無線通信部９６とによって構成されている。また、編集処理部８は、第２の制御部８０と、第２の表示・操作部８１と、第３の表示・操作部８２と、第２の通信部８５とによって構成されている。ネットワークアダプタである第１および第２の通信部７５，８５は、ＬＡＮ（Local Area Network）であるネットワーク６を介してそれぞれ相互に通信可能となっている。

【0028】

撮像部７１は、ＣＣＤ等の撮像素子を用いて構成されるカメラ１０，１１に相当し、リアルタイムに画像を取り込んで当該画像（撮影画像）を表す画像信号を出力する。この画像信号は第１の制御部７０に入力されて、その内部のメモリに撮影画像データとして一時的に記憶される。また、この撮影画像データは撮影画像信号として第１の制御部７０から第１の表示・操作部７２に供給され、当該撮影画像信号に基づく撮影画像がリアルタイムに表示される。なお実際には、撮影画像として保存される撮影画像データは高解像度の静止画データであり、リアルタイム表示を行うための撮影画像データ（「スルー画像データ」とも呼ばれる）は低解像度の動画データであるが、撮影対象は同一であるので、以下ではこれらを特に区別しないで説明することがある。

【0029】

第１の表示・操作部７２は、ここでは撮影操作用タッチパネル２０に相当する表示入力手段として機能し、撮影画像に付加されるべき背景画像（および前景画像）を選択する操作や、後述する利用者の像を補正するためのパラメータ設定等を行う操作、シャッター操作等を受け付ける。これらの操作を示す信号は、操作信号として第１の制御部７０に入力される。また、第１の表示・操作部７２は、確認用液晶パネル１２に相当する表示手段としても機能し、例えば撮影画像データをスルー表示する。なお、撮影操作用タッチパネル２０は一例であって、そのほかの表示入力装置であってもよいし、表示装置（例えば液晶パネル等）と入力装置（例えばボタンや、キーボード、トラックボール等）とにより表示入力装置が構成されており、画面に対応する入力装置による操作入力を受け付け可能に構成されていてもよい。ここで、利用者を撮影するための（選択された撮影メニューに対応する）所定の処理が開始されると、第１の表示・操作部７２に利用者のための案内が表示され、その後の第１の制御部７０からの指示に基づき、数秒程度の予め決められた時間の経過後にカメラ１０，１１の撮影方向にストロボ１３，１４から閃光が放たれる。そのとき、利用者の撮影画像を表す信号として撮像部７１から（すなわちアップ撮影の場合にはカメラ１０から、全身撮影の場合にはカメラ１１から）出力される画像信号が第１の制御部７０に入力され、第１の制御部７０内のメモリまたは補助記憶装置としてのハードディスク装置等に撮影画像データとして格納される。

【0030】

照明部７４は、カメラ１０，１１の左右や上方の位置に配置されたストロボ１３，１４（図２参照）に相当し、第１の制御部７０からの指示に基づきＩ／Ｏ制御部７３によって点灯／消灯および調光が制御される。Ｉ／Ｏ制御部７３は、撮影ユニット３に内蔵されるＩ／Ｏ制御装置に相当し、第１の制御部７０からの指示に基づき、照明部７４を制御する。また、後述のコイン検出部（不図示）からの検出信号等の入力信号を第１の制御部７０へ転送する。第１の通信部７５は、ネットワークアダプタに相当し、ネットワーク６を介したデータ送受信の際のインタフェースとして機能する。

【0031】

第１の制御部７０は、編集ユニット４に内蔵され、ＣＰＵ、メモリ、フレームバッファ、タイマー、補助記憶装置等を含むコンピュータを中心に構成される制御装置に相当し、内部メモリに格納された所定プログラムをＣＰＵが実行することにより、上述のようにして入力される操作信号等に基づき各部を制御するために、上述のように各部に指示を出す。また撮影された画像に基づいて落書き対象画像を生成する。生成された落書き対象画像はフレームバッファに書き込まれることにより、第１の表示・操作部７２に表示される。さらに、第１の制御部７０は、落書き対象画像に所定の背景画像や前景画像を描画した画像である合成画像を生成する。この落書き対象画像には、マスクの作成に使用されるキー色となる背景色が付されており、周知のクロマキー合成処理の手法に基づき、利用者の像のみを含む撮影画像部分を抽出し、当該撮影画像部分が背景画像中に嵌め込まれるように合成する。このように生成された合成画像はフレームバッファに書き込まれることにより第１の表示・操作部７２に表示される。

【0032】

上記の構成要素の他、撮影ユニット３におけるコイン投入口２６に投入されたコインを検出するためのコイン検出部（不図示）が更に撮影ユニット３に設けられており、第１の制御部７０は、コイン検出部での検出結果に基づき、利用者に所定時間だけ撮影や背景画像および前景画像の選択や落書き等、本遊戯用撮影装置によるプレイを許容するように各部を制御する。このコイン検出部による検出動作やその検出結果に基づく第１の制御部７０による制御動作は、従来の遊戯用撮影装置と同様であって周知であるので、その詳しい説明を省略する。

【0033】

次に第２の制御部８０は、第１の制御部７０とは別に、編集ユニット４に内蔵され、ＣＰＵ、メモリ、フレームバッファ、タイマー、および補助記憶装置等を含むコンピュータを中心に構成される制御装置に相当し、内部メモリに格納された所定プログラムをＣＰＵが実行することにより、編集ユニット４において行われる編集処理に関する全体の制御を行う。すなわち第２の制御部８０は、第２および第３の表示・操作部８１，８２を制御するＧＵＩ制御手段として機能する。また、第２の制御部８０は、生成された落書き対象画像（撮影画像を含む画像）に対する落書き処理を行うための操作信号に基づき、その落書き対象画像に所定画像を描画した画像である合成画像を生成する。描画される所定画像としては、例えば、選択されたスタンプ画像や、タッチペンで描かれた線状の画像、選択された２以上のスタンプを所定の順で重ね合わせることにより生成した合成スタンプ画像等を利用することができる。

【0034】

このような合成画像の生成が終了すると、利用者による分割レイアウトの選択指示を受け付けられ、選択された分割レイアウトを示す情報および生成された合成画像は第１の制御部７０に送られる。なお、印刷出力部９２が別の合成画像を出力中である場合には、その旨が表示されるとともに終了を待って送られる。なお、これらの情報はネットワーク６を介して送受信される。

【0035】

第２および第３の表示・操作部８１，８２は、落書きのためのＧＵＩ表示手段として機能する編集操作用タッチパネル４００に相当し、タッチペンを用いた利用者の操作を受け付ける。

【0036】

第２の通信部８５は、ネットワークアダプタに相当し、ネットワーク６を介したデータ送受信の際のインタフェースとして機能する。

【0037】

また第１の制御部７０は、上記の撮影処理のほか、出力処理に関する全体の制御を行う。第１の制御部７０は、第２の制御部８０から送られてきた合成画像を合成画像データとしてメモリに格納する。印刷出力部９２は出力ユニットに内蔵されるネットワークプリンタ３５に相当し、メモリに格納された合成画像データを（適宜にレイアウトした）写真シール（または写真カード）として印刷する。印刷された写真シール等は、出力ユニット５の正面下方に設けられた取出口３３から取り出される。

【0038】

さらに第１の制御部７０は、第２の制御部８０から送られてきた分割レイアウト情報および合成画像に基づいて写真シール等の印刷処理を開始すると同時に、利用者の入力操作を受け付けるための後述する操作画面を第４の表示・操作部９１に表示する。この第４の表示・操作部９１は出力操作用タッチパネル３０に相当し、入力手段として機能する。出力操作用タッチパネル３０は、液晶ディスプレイまたはＣＲＴ（Cathode Ray Tube）等の表示手段として機能するモニタと、その上面に積層され、入力座標を認識することができる１人用のタッチパネルから構成される。モニタは複数の画面に分割された操作画面を表示することができ、タッチパネルは分割された複数の画面ごとに利用者のタッチペンを用いた入力操作を受け付け、受け付けた入力操作を操作信号として第１の制御部７０に入力する。

【0039】

無線通信部９６は、出力ユニット５に内蔵される携帯電話端末装置５５に相当し、携帯電話端末によって図示されない画像サーバ部から当該合成画像をダウンロードできるように、第１の制御部７０により作成された合成画像のデータを３Ｇ方式の無線通信方式で無線基地部へ送信する。

【0040】

ここで、第１の制御部７０は、落書きを終えてから操作を始めるまでの間、補助記憶装置に予め記憶されているデモ画像（デモンストレーション用の画像）をフレームバッファに書き込むことにより第４の表示・操作部９１に表示する。また音声出力部９３は、スピーカ３２に相当する。音声出力部９３は、第４の表示・操作部９１に表示される操作画面と連動して入力操作方法を利用者に説明し、また第４の表示・操作部９１にデモ画像が表示されているときにデモ画像に応じた楽曲等を流す。なお、入力操作方法の説明や楽曲等は補助記憶装置としてのハードディス装置等に予め格納されている。

【0041】

その後、第１の制御部７０は、第４の表示・操作部９１の表示や音声出力部９３による音声や効果音等により合成画像の印刷が完了するまで後述するミニゲームを利用者に提供し続ける。このミニゲームの内容も同様にハードディスク装置等に予め格納されている。

【0042】

ここで、各制御装置において実行される上記所定プログラムは、例えば、そのプログラムを記録した記録媒体であるＤＶＤ−ＲＯＭによって提供される。すなわち、上記所定プログラムの記録媒体としてのＤＶＤ−ＲＯＭが補助記憶装置として制御装置内に内蔵されたＤＶＤ−ＲＯＭ駆動装置に装着され、そのＤＶＤ−ＲＯＭから所定プログラムが読み出されて補助記憶装置としてのハードディスク装置にインストールされる。また、上記所定プログラムは、ＤＶＤ−ＲＯＭ以外の記録媒体（ＣＤ−ＲＯＭ等）や通信回線を介して提供されてもよい。そして、本遊戯用撮影装置の起動のための操作がなされると、ハードディスク装置にインストールされた所定プログラムは、制御装置内のメモリに転送されてそこに一時的に格納され、制御装置内のＣＰＵによって実行される。これにより、制御装置による上記各部の制御処理が実現される。

【0043】

なお、上記第１および第２の制御部７０，８０は、異なるコンピュータを含む装置に相当するものとして説明したが、このような構成は一例であって、上記第１および第２の制御部７０，８０は、１つまたは３つ以上の装置により実現されてもよいし、どのユニットに内蔵されていてもよい。なお、この場合には各装置において、それぞれ実現されるべき機能に応じたプログラムが実行される。また、撮影ユニット３、編集ユニット４、および出力ユニット５についても、２つ以下または４つ以上のユニットにより構成されてもよい。

【0044】

＜３．遊戯用撮影装置における処理手順＞
上述したように、この遊戯用撮影装置には、撮影ユニット３と編集ユニット４と出力ユニット５とが含まれている。撮影ユニット３では撮影処理が行われ、編集ユニット４では後述する落書き編集処理が行われ、出力ユニット５では出力処理が行われる。なお、或る利用者が撮影ユニット３でプレイしている時に他の利用者は編集ユニット４でプレイし、さらに他の利用者は出力ユニット５で合成画像を出力することができるように構成されている。すなわち、この遊戯用撮影装置は、撮影処理と落書き編集処理と出力処理とを並行して行うことができる。以下に、撮影処理、落書き編集処理、および出力処理の手順の概要について説明する。

【0045】

＜３．１ 撮影処理＞
図７は、本実施形態における撮影処理の手順を示すフローチャートである。この遊戯用撮影装置が使用されていない時（プレイが行われていない時）には、撮影操作用タッチパネル２０にはデモ画像が表示されている。デモ画像の表示中に利用者がコイン投入口２６にコインを投入すると、プレイが開始される（ステップＳ１００）。

【0046】

プレイが開始されると、第１の制御部７０は、利用者による撮影モードの選択を受け付ける（ステップＳ１１０）。ステップＳ１１０では、例えば画質（具体的にはコントラストが高いくっきりとした画質、柔らかなふんわりとした画質、または透明感のあるクールな画質のうちのいずれか）を選択し、明るさを選択し、自動で撮影するか手動で撮影するかを選択し、自動で撮影する場合には撮影用テーマの選択が行われる。この場合、第１の制御部７０は、予め用意された複数の撮影用テーマの中から１つ以上の撮影用テーマを利用者に選択させるための画面を撮影操作用タッチパネル２０に表示し、利用者による選択操作を受け付ける。そして、第１の制御部７０は、利用者の選択操作に基づいて選択情報を取得し、選択された撮影用テーマに基づいて、撮影の際に使用するフレームと背景との組み合わせを決定する。また手動で撮影する場合は、上記フレームと背景とを利用者が自由に決定する。その後、処理はステップＳ１２０に進み、撮影が行われる。この撮影により、撮影画像データが第１の制御部７０のメモリに格納される。

【0047】

ステップＳ１３０では、撮影画像に基づいて生成された落書き対象画像（撮影画像を含む画像）が、撮影操作用タッチパネル２０に表示される。詳しくは、ステップＳ１３０の処理が行われる都度、図５に示した撮影操作用タッチパネル２０の落書き対象画像表示領域２０３に落書き対象画像が順次追加表示される。なお、典型的には、カメラ１１により利用者の上半身または顔を撮影するアップ撮影と、カメラ１０により利用者の全身を撮影する全身撮影とを１セット３回ずつ行うか、またはこれを２〜３セット繰り返して行う。その後、処理はステップＳ１４０に進み、第１の制御部７０は、予め定められた枚数の撮影が終了したか否かを判定する。判定の結果、当該枚数の撮影が終了していれば処理はステップＳ１５０に進み、当該枚数の撮影が終了していなければステップＳ１２０に戻る。なお、実際には撮影のための制限時間（例えば３分）が設けられており、制限時間よりも（或る程度）早く予定枚数の撮影が終了した場合には、さらに所定枚数だけ撮影が行われる（ボーナスショットと呼ばれる）。

【0048】

ステップＳ１５０では、複数の落書き対象画像の中から実際の落書き対象となる画像の（利用者による）選択が行われる。具体的には、第１の制御部７０は、落書きおよび印刷に使用する画像を利用者に選択させるために、落書き対象画像の一覧を撮影操作用タッチパネル２０に表示し、利用者による選択操作を受け付ける。ステップＳ１５０の終了後、処理はステップＳ１６０に進む。

【0049】

ステップＳ１６０では、選択された落書き対象となる画像に対して周知の歪曲収差、典型的には広角レンズを使用するカメラ１０によって生じる樽型歪みを解消するための補正処理が行われる。この補正処理は、例えば方形の画像を糸巻き型に変形するような縮小変形処理を行うものである。このような補正処理は周知であるので詳しい説明は省略する。また、ここで幾何学歪みを補正する処理や、そのほかの各種補正処理を行ってもよい。ステップＳ１６０の終了後、処理はステップＳ１７０に進む。

【0050】

ステップＳ１７０では、歪曲収差が補正された撮影画像に対して撮影対象となる利用者の足部分を不自然に写らないよう伸張する、本実施形態の特徴的な処理である脚部伸張処理が行われる。なお、この撮影画像に代えて、上記落書き対象画像に対して脚部伸張処理を行ってもよいし、クロマキー合成前の後述する透明領域に対応する利用者の像のみを含む撮影画像部分（以下「利用者画像」という）に対して脚部伸張処理を行ってもよい。この脚部伸張処理は、複数の処理態様が考えられ、それらの処理内容は詳しく後述する。ステップＳ１７０の終了後、処理はステップＳ１８０に進む。

【0051】

ステップＳ１８０では、クロマキー合成処理が行われる。このクロマキー合成処理は、一般的にはクロマキーマスクを作成する処理と、背景画像を合成する処理とを含む。クロマキーマスクとは、例えば周知の合成マスク（アルファチャネル）であって、対象となる撮影画像のうちのキー色（ここでは青色または緑色）を有する領域、すなわち撮影室２の背面の像が占める領域を透明とし、それ以外の領域を非透明とするためのデータである。この合成マスクは一般的には対象となる画像の画素毎に０（完全透明）または２５５（完全非透明）の透過度を示す値αが設定される。このようなクロマキーマスクを使用することにより、撮影画像の非透明領域（α＝２５５）に相当する背景画像の領域は隠され（マスクされ）、その透明領域（α＝０）に相当する背景画像の領域は見えるように合成される。そのため、あたかも対象となる撮影画像の非透明領域の部分が切り取られ、切り取られた当該部分が上記背景画像に対して貼り付けられたような合成画像が得られる。このようなクロマキー処理によって遊戯性の高い画像作成を行うことができる。なお、この背景画像は撮影中に利用者によって適宜選択されるが、後述する落書き処理中に利用者の選択操作に応じて選ばれてもよい。そして、第１の制御部７０は、以上のように補正されクロマキー処理された画像を実際の落書き対象画像として第２の制御部８０に送る。ステップＳ１８０の終了後、処理はステップＳ１９０に進む。

【0052】

ステップＳ１９０では、案内画面の表示が行われる。具体的には、第１の制御部７０は、利用者を編集ユニット４のいずれか（４ａまたは４ｂ）に導くための画面を撮影操作用タッチパネル２０に表示する。これにより、撮影処理が終了する。

【0053】

＜３．２ 落書き編集処理＞
図８は、本実施形態における落書き編集処理の手順を示すフローチャートである。第２の制御部８０が所定のプログラムに基づき図８に示すように動作することで、この落書き編集処理が実現される。この処理では、上述した撮影処理の終了後、第２の制御部８０は、ネットワーク（ＬＡＮ）６を介して第１の制御部７０から送られる落書き対象画像（図７のステップＳ１５０で利用者によって選択され、ステップＳ１６０，Ｓ１７０で補正された画像）を取得する（ステップＳ２００）。その後、タイマーが所定の時間（具体的には、落書きを許可する時間）に設定され、カウントダウンが開始される（ステップＳ２１０）。

【0054】

タイマーのカウントダウン開始後、編集ユニット４を構成するユニット４ａ，４ｂのそれぞれの編集操作用タッチパネル４００において、落書き編集操作画面が表示され、利用者による落書き操作（描画操作）が受け付けられる（ステップＳ２３２〜Ｓ２３６）。なおこの落書き編集処理時において、編集ユニット４では、撮影画像に基づく落書き対象画像に対する編集操作の他に、デコメール画像等の素材画像を作成するための編集操作が受け付けられてもよい。

【0055】

具体的には、編集操作画面内のボタンやツールなどの１つをタッチペンでタッチすると、その座標値が入力され（Ｓ２３２）、対応する落書き画面処理（Ｓ２３４）が行われる。その後ステップＳ２３６においてタイマーの残り時間が０になる（または利用者が終了させる操作を行う）ことにより落書きが終了したかが判定され、終了していない場合（Ｓ２３６においてＮｏの場合）にはステップＳ２３２に戻り、落書きが終了するまで処理が繰り返され、落書きが終了した場合（Ｓ２３６においてＹｅｓの場合）には、処理はステップＳ２４０に進む。

【0056】

ステップＳ２４０では、出力される写真の分割パターンの選択が行われる。具体的には、第２の制御部８０は、予め用意された複数の分割パターンの中からいずれかの分割パターンを利用者に選択させるための画面を編集操作用タッチパネル４００に表示し、利用者による選択操作を受け付ける。そして、第２の制御部８０は、利用者の選択操作に基づいて、選択情報を取得する。ステップＳ２４０の処理が終了した後、ステップＳ２５０の処理に進む。

【0057】

ステップＳ２５０では、案内画面の表示が行われる。具体的には、第２の制御部８０は、利用者を出力ユニット５に導くための画面を編集操作用タッチパネル４００に表示する。これにより、落書き編集処理が終了する。落書き編集処理が終了すると、出力ユニット５において、編集ユニット４から送られてきた合成画像に基づいて写真シール等の印刷処理が開始されることなどについては前述した通りである。

【0058】

以上のような処理のうち、前述したようにステップＳ１７０における脚部伸張処理が特徴的な内容となっており、複数の処理態様が考えられる。以下、順に具体的に説明する。なお、この脚部伸張処理（Ｓ１７０）は、第１の制御部７０によって、撮影終了直後に行われるが、第２の制御部８０によって行われてもよいし、落書き操作中に例えば利用者の指示に応じて行われる構成であってもよい。

【0059】

＜３．３ 脚部伸張処理の具体的な内容＞
＜３．３．１ 第１の処理態様＞
図９は、カメラ位置近傍から見た利用者Ｕ１，Ｕ２と背景との位置関係を簡略に示す図である。この図９に示されるように、利用者Ｕ１，Ｕ２は、撮影室２内部のクロマキー色を付された背面１１０を背にして、クロマキー色が付された床面１２０の上に立っている。背面（背景）１１０および床面１２０のうち、カメラ１０により撮影される撮影範囲１０１は点線で示されている。

【0060】

ここで、遊戯用撮影装置では、撮影対象となる撮影範囲１０１内に写る利用者Ｕ１，Ｕ２（以下、「利用者Ｕ」とも称する）は、実物よりも足が長く写る方が好ましい。そこで、ステップ１７０に示される脚部伸張処理において、利用者Ｕの足を含む画像部分（以下「脚部画像」という）を上下方向に伸張変形することにより、利用者Ｕの足をスタイル良く長くみせる。

【0061】

この脚部伸張処理では、詳しくは後述するように、脚部画像に含まれる足の部分が拡大される（伸ばされる）ように（長くなるように）変形され、脚部画像に含まれる胴の部分が縮小される（縮める）ように（短くなるように）変形されるが、脚部画像全体の上下方向の長さはほぼ変化しないように変形される。これに対して、脚部画像を下方向（または上下方向）に伸張する（拡大する）ことにより、足を長く見せる手法も考えられる。

【0062】

しかし、この手法によれば、人物の背の高さが大きく変化し、人体を構成する要素の上下方向におけるバランス（以下「頭身バランス」とも言う）が崩れ、不自然な見え方となる。また、足が長い人と短い時とでは頭身バランスが異なる場合が多いため、等しい伸張率（拡大率）で伸張（変形）すると、足は長く見せることができるとしても、スタイル良く見せることができるとは限らない。一般的には、人物の背の高さ（人物の像の上下方向の長さ）は、変形前とほぼ等しいこと、具体的にはその変化が±１０％以内の範囲内にあることが好ましく、この場合には不自然な見え方とはならない。また、脚部画像と脚部画像以外の画像との境界で、拡大率が急激に変化するため、当該境界付近の画像（の連続性）が不自然なものとなる。

【0063】

そこで、本実施形態では、ステップ１７０に示される脚部伸張処理において、利用者Ｕの膝（近傍の）位置（後述する図１０の線分Ｐｂに対応する位置）を伸張方向の変化点として、膝近傍の画像を上下方向に引き延ばすように伸張（変形）する。また、当該伸張（変形）の上限位置は、利用者Ｕの腹部付近（後述する図１０の線分Ｐａに対応する位置）であり、その下限位置は、撮影画像の下端（後述する図１０の線分Ｐｃに対応する位置）である。

【0064】

ここで、利用者Ｕの膝位置および腹部の位置は、予め定められた位置に決定される。すなわち、利用者が立位姿勢をとる場合、手や肘の位置は様々に変化するため、予め定めることは不可能に近い。しかし、平均的な身長の利用者の膝や腹部の位置のうち、カメラ１０から見て左右方向における（立ち）位置を予め定めることは困難であっても、カメラ１０から見て上下方向における（立ち）位置を予め定めることは比較的容易である。なぜなら、限定された撮影室２内で背面を背にする利用者は、当該背面からほぼ等しい距離を空けて立つことが多く、したがって、足を大きく振り上げたり屈むなどの姿勢を取らない限り、利用者Ｕの膝位置および腹部位置は、ほぼ一定の位置（高さ）になるからである。そこで、撮影画像における利用者Ｕの膝位置および腹部位置であると（比較的高い確度で）推測される予め定められた膝位置および腹部位置に基づき、上記脚部伸張処理を行う。以下、図１０から図１２までを参照して、この脚部伸張処理の具体的な処理内容について説明する。

【0065】

なお、以下において膝や腹部などの位置とは、撮影画像（または利用者画像など）における上下方向（Ｙ軸方向）の位置（すなわち左右方向（Ｘ軸方向）の位置を考慮しない位置）を指す。

【0066】

図１０は、撮影画像における予め定められた腹部位置および膝位置を示す図である。図１０では、撮影範囲１０１に等しいものとして撮影画像１１１の範囲（外周）を点線で示している。前述のように、利用者Ｕの腹部位置および膝位置は、ほぼ一定の位置（高さ）であると考えた場合、このことに基づき予め定められる腹部位置は図中では線分Ｐａとして示され、膝位置は図中では線分Ｐｂとして示されている。また、撮影画像の下端は図中では線分Ｐｃとして示されている。

【0067】

したがって、脚部画像は、利用者Ｕ１，Ｕ２の腹部位置を含むであろうと推測され、かつ利用者Ｕ１，Ｕ２の膝位置を含むであろうと推測される画像領域、すなわち線分Ｐａを上辺とし、線分Ｐｃである撮影画像の下端（下辺）を下辺とし、これら上辺および下辺と撮影画像の左端（左辺）および右端（右辺）とで囲まれた領域と定めることができる。

【0068】

ここで、脚部画像の下辺を撮影画像の下端（下辺）と一致させる場合には、利用者Ｕ１，Ｕ２の足先位置を含む可能性が極めて高いが、実際の足先位置は撮影画像の下端から離れた上方であることが多い。すなわち、前述のように、限定された撮影室２内で背面を背にする利用者は、当該背面からほぼ等しい位置に立つことが多く、したがって、利用者Ｕの腹部位置および膝位置と同様に、足先位置もほぼ一定の位置（高さ）になる。よって、線分Ｐａ，Ｐｂと同様に足先位置を含むべき線分を設定することが可能であるので、この足先位置を含むべき線分を、撮影画像の下端に代えて、脚部画像の下辺とすることもできる。もっとも、後述するように、脚部画像の変形量を上下方向の位置（Ｙ座標）で変化させる本実施形態の構成では、利用者Ｕの膝近傍の比較的広い範囲が伸張するように変形することが好ましく、また足先近傍が大きく縮小するように変形することは好ましくない。このように変形させるためには、脚部画像の下辺を足先位置よりも撮影画像の下端にする構成が好適である。

【0069】

次に、以上のようにして決定される脚部画像は、利用者の像の一部であるため、利用者の像としての連続性が保たれるように縮小または拡大されなければならない。そこで、脚部画像は、線分Ｐａである上辺と線分Ｐｃである下辺とをそれぞれ固定し、線分Ｐｂを境界として、当該線分Ｐｂより上方の画像を線分Ｐａに向かって移動させ（変形し）、当該線分Ｐｂより下方の画像を線分Ｐｃに向かって移動させる（変形する）。このときの移動量は線分Ｐｂに近いほど大きく設定する。そうすれば、線分Ｐｂ付近で画像が上下に大きく移動することにより、当該膝部分の画像が拡大され、線分Ｐａおよび線分Ｐｃ近傍の画像が縮小される。

【0070】

もっとも、このような拡大および縮小は、（基準点によって変化する）相対的なものであって、線分Ｐａから線分Ｐｂまでの範囲の画像は、線分Ｐａに向かって縮小されているとも言え、同様に線分Ｐｃから線分Ｐｂまでの範囲の画像は、線分Ｐｃに向かって縮小されているとも言える。しかし、人の像を上記のように変形させる場合、変形方向の変化点は線分Ｐｂの位置である膝の位置にあり、脚部を基準として（着目して）拡大または縮小が判断される（感じられる）ことが多い。したがって、上記のように変形させると、足の部分が伸張され、線分Ｐａ近傍の胴の部分が縮小されたように感じられ、全体として利用者Ｕの足をスタイル良く長くみせることができる。ただし前述したように、人物の背の高さは、±１０％以内の範囲内で変化することが好ましく、当該範囲内で上記拡大および縮小の程度を定めることが好ましい。

【0071】

図１１は、図１０に示される画像に対してなされる脚部伸張処理の結果得られる画像を示す図であり、図１２は、脚部伸張処理と、その上下方向の位置毎の画像変形量とを説明するための図である。この図１２において、図１１に示される脚部伸張処理の結果得られる（利用者Ｕ１，Ｕ２の）脚部画像は、実線で描かれており、図１０に示される撮影画像に含まれる（利用者Ｕ１，Ｕ２の）脚部画像は、破線で描かれている。また、図１２に含まれるグラフ図の横軸に示される移動量｜ΔＹ｜は、脚部画像の変形による画素位置のＹ軸方向の移動量ないし変化量（の絶対値）であって、縦軸は、移動する画素のＹ座標である。

【0072】

図１１に示されるように、脚部画像は拡大の前後でその上辺（ここでは線分Ｐａ）および下辺（ここでは線分Ｐｃ）の位置に変化はなく、上記脚部伸張処理により膝部が上下に伸張され、胴部近傍が上下に縮小されたように見える。なお、足先近傍が上下に縮小されたように見えないのは、脚部画像の下辺が足先位置に置かれていないからである。

【0073】

具体的には、図１２に示されるＹ座標に応じた移動量｜ΔＹ｜の変化からわかるように、脚部画像は線分Ｐａおよび線分Ｐｃの位置では移動量｜ΔＹ｜がゼロであり、線分Ｐｂの位置で最大となる。ただし、前述したように変化方向は反対となるので、線分Ｐｂの位置で画像が上下方向に大きく変化することになる。この結果、人の膝近傍部分が伸張されたように見える。例えば、図１２に示される利用者Ｕ２の左足付け根部分の画素は、脚部伸張処理によって上方向に移動量ｙａだけ移動する。もっとも実際には、各画素のＹ座標を個別の変化させることにより画素位置を移動させるのではなく、予め定められた範囲の画素群（ブロック）毎に、画素の変化態様が定められており、そのＹ座標に応じて適宜の画素が間引かれ（縮小され）、または適宜に画素が補間される（拡大される）。これらの具体例としては、Ｙ軸方向（上下方向）に３つの画素がある場合、中央の画素以外を間引いたり、３つの画素の平均値の階調で表示することにより縮小処理を行ったり、Ｙ軸方向（上下方向）に２つの画素がある場合、上側の画素を２画素分だけ上方向へ移動させ、下側の画素を１画素分だけ下方向へ移動させ、さらに２つの画素を補完することにより、４つの画素を表示することにより拡大処理を行う。このような画素を間引くことによる縮小処理または画素を補間することによる拡大処理は、周知の画像処理手法によるため、ここでは詳しい説明を省略する。

【0074】

このように、撮影画像における脚部画像部分の上端と下端とで移動量をゼロにし、かつ膝部近傍で移動量（の絶対値）を最大にすれば、脚部伸張処理後の利用者の像の連続性が保たれるとともに、利用者Ｕの足が不自然に長く見える（写る）状態を解消でき、利用者Ｕ１，Ｕ２の足をスタイル良く長く見せることができる。

【0075】

なお、上記脚部画像は、線分Ｐａを上辺、撮影画像の下端である線分Ｐｃを下辺とする撮影画像の矩形領域部分であるものとして説明したが、これらの矩形領域に含まれる（クロマキー処理によって抽出された）利用者画像部分であってもよい。撮影画像に対して上記脚部伸張処理を行った後にクロマキー処理を行う場合と、クロマキー処理後の利用者画像に対して上記脚部伸張処理を行う場合とで変わりはないからである。

【0076】

もっとも、脚部伸張処理は、多くの演算が必要であるため、演算結果を早く得るためには演算対象である画像のデータ量はできるだけ小さい方が好ましい。この点、撮影画像は例えばＲＧＢ各８ビットの階調データにより１つのカラー画素のデータが構成されるのに対して、利用者画像はこれらの階調データに加えてアルファチャネルの（例えば８ビットの）データにより１つのカラー画素データが構成される。したがって、脚部伸張処理は、撮影画像に対して行う方が、クロマキー処理のためのアルファチャネルを有する利用者画像に対して行うよりも、より高速に行うことができる。

【0077】

また前述したように、脚部画像は、図１０または図１１に示されるように、線分Ｐａの位置が（一般的な利用者の）腹部位置となる。なお、この位置は足を長く見せるために、脚部から上方向に少し離れた位置であって、縮小するように見えた方が好ましい位置として腹部の位置が選ばれているが、その近傍や胸部位置が選ばれても同様の効果が得られる。ただし、線分Ｐａの位置は、後述するように顔位置よりも下の位置であることが好適である。後述の各変形例等も同様である。

【0078】

このように、脚部画像の上辺は、一般的な人の足の高さの上限よりもさらに上に位置するため、一般的な利用者より相当に背が低い利用者（典型的には子供）や、しゃがんだ姿勢の利用者などが撮影対象に含まれている場合、上記脚部伸張処理により脚部画像を拡大すると違和感を生じる合成画像が生成されることがある。特に、線分Ｐｂ近傍の位置に利用者の顔部分が位置することにより脚部画像に顔の像が含まれる場合、画像の拡大によって顔の形が変形してしまうため、特に違和感を生じることになる。

【0079】

そこで、ステップ１７０に示される脚部伸張処理の第１の態様における変形例として、脚部画像に利用者Ｕの顔の像が含まれる場合には、脚部伸張処理を一切行わないか、または変形する程度（画像変形量）を小さくする構成が考えられる。このように構成すれば、顔が変形するような違和感を解消または低減することができる。具体的には、第１の制御部７０は、脚部画像である線分Ｐａ，Ｐｃの間の撮影画像中に、人物の顔の像が含まれているか否かを周知のパターン認識などの手法に基づく顔認識処理により判定し、当該顔認識処理によって顔の像が含まれていると判定されない場合には、上記第１の態様と同一の処理を行い、含まれていると判定される場合には、脚部画像を一切変形しないか、または画像変形量を小さく設定した後に変形する。そうすれば、撮影画像に写る利用者の顔が変形するような違和感を解消または低減することができる。なお、上記顔認識には顔検出用ＬＳＩチップなどのハードウェアを使用してもよい。そうすればソフトウェア処理の場合よりも顔検出を高速化することができる。

【0080】

さらにステップＳ１８０におけるクロマキー合成処理を脚部伸張処理と関連付け、このクロマキー合成処理により得られる利用者画像に基づき、利用者Ｕ１，Ｕ２の（実際の）腹部位置および膝位置を検出する構成も考えられる。そうすれば、正確な腹部位置および膝位置が得られるので、足が不自然に長く見える状態をより確実に解消でき、また足をよりスタイル良く長く見せることができる。以下、上記利用者画像を利用した脚部伸張処理の第２の態様について説明する。

【0081】

＜３．３．２ 第２の処理態様＞
この第２の処理態様では、上記第１の処理態様とは異なり、利用者画像に基づき、利用者Ｕ１，Ｕ２の実際の腹部位置および膝位置を検出する。この腹部位置および膝位置を検出する方法としては、周知のパターンマッチングに基づく画像認識手法など、様々な方法が考えられる。なお、腹部位置および膝位置を検出するのではなく、利用者による位置指定の入力を受け付けることにより、腹部位置および膝位置を定める構成であってもよい。

【0082】

例えば、各利用者に対応する利用者画像の上下方向の長さ（具体的には頭の上端から足先までの長さ）に基づき、腹部位置および膝位置を算出してもよい。なぜなら、人間の腹部位置および膝位置は、身長に対して所定の割合で定まる位置にあることが多いからである。

【0083】

また、利用者画像の左右方向の幅から（典型的には最も幅が大きい位置で）腰の位置を検出し、当該腰の位置（および足先位置など）を上記上下方向の長さとともに判断対象とすることにより、腹部位置および膝位置を算出してもよい。腰の位置から足の長さが定まることが多いからである。

【0084】

さらに、利用者画像の形状を解析することにより、当該利用者画像のそれぞれの足部分に対応する画像における足先からの最初の屈曲位置を腹部位置とし、二番目の屈曲位置を膝位置として検出してもよい。

【0085】

さらにまた、様々な姿勢をとる利用者を撮影することにより得られる数多くの利用者画像の画像パターンとその腹部位置および膝位置とを対応付けて予め記憶しておき、上記クロマキー処理により得られる利用者画像とその形状が近似する画像パターンを検索し、当該画像パターンに対応する腹部位置および膝位置を、本利用者画像における腹部位置および膝位置として検出してもよい。

【0086】

また、リアルタイム表示を行うためのスルー画像データに基づき、リアルタイムで生成される利用者画像を利用し、当該利用者画像の動きから膝関節や腹部の位置を検出してもよい。このような位置検出は、人体の特徴点を抽出するための（面積相関法や位相限定相関法などに基づく）周知の様々な手法を適宜採用することにより実現することができる。

【0087】

以上のようにして腹部位置および膝位置を検出すれば、上記第１の処理態様における線分Ｐａ，Ｐｂを設定することができるので、上記第１の処理態様と同様に脚部伸張処理を行うことにより、同様に、利用者Ｕ１，Ｕ２の足を不自然無くスタイル良く長く見せることができる。

【0088】

なお、本第２の処理態様においても第１の処理態様と同様に、上記脚部画像は、撮影画像の矩形領域部分である必要はなく、これらの矩形領域に含まれる（クロマキー処理によって抽出された）利用者画像部分であってもよい。

【0089】

また、第１の態様における変形例と同様に、脚部画像に利用者Ｕの顔の像が含まれる場合には、脚部画像を一切変形しないか、または変形する程度（画像変形量）を小さくしてもよい。このように構成すれば、顔が変形するような違和感を解消または低減することができる。

【0090】

ここで、上記第２の処理態様では、利用者Ｕ１，Ｕ２の各腹部位置および各膝位置は、それぞれ同一かまたはほぼ変わらない位置にあるものとして説明したが、これらが異なる場合には、全ての位置を平均化したり、最も異なる１つを除いて平均化したり、または代表的な１つの位置に基づいて決定するなど様々な手法などが考えられる。

【0091】

もっとも、さらに正確な脚部伸張処理を行うためには、利用者Ｕ１，Ｕ２の各腹部位置および各膝位置を個別に検出した上で、個別に（すなわち利用者毎に）脚部伸張処理を行う必要がある。そこでこのように個別の脚部伸張処理を行う、脚部伸張処理の第３の態様について、図１３および図１４を参照して説明する。

【0092】

＜３．３．３ 第３の処理態様＞
図１３は、撮影画像における検出された各利用者の腹部位置および膝位置を示す図である。図中では、利用者Ｕ１，Ｕ２の腹部位置（を含む線分の位置）はｈａとして示され、利用者Ｕ１，Ｕ２の膝位置（を含む線分の位置）はｈｂとして示されている。

【0093】

図１３に示されるように、利用者Ｕ１の腹部位置および膝位置と、利用者Ｕ２の腹部位置および膝位置は共に異なっている。そこで、本処理態様では、利用者毎の脚部画像が生成され、利用者毎に正確に腹部位置および膝位置が検出され、個別に適切な脚部伸張処理がなされる。

【0094】

すなわち、或る利用者の膝位置が他の利用者の膝位置とは異なる場合に、一律に上記脚部伸張処理を行うと、当該脚部画像の変形が適切なものではなくなることがある。本第３の処理態様によれば、このような不都合を解消することができ、各足に対して漏れなくより確実に、利用者Ｕ１，Ｕ２の足をそれぞれ不自然なく、よりスタイル良く長く見せることができる。

【0095】

ここで、図１３に示される場合とは異なり、利用者Ｕ１の像と利用者Ｕ２の像とが重なっている場合であって、利用者Ｕ１の腹部位置および膝位置と、利用者Ｕ２の腹部位置および膝位置が共に異なっている場合、利用者Ｕ１の像と利用者Ｕ２の像との境界線を認識できる場合には、利用者毎に脚部伸張処理が可能であるようにも思える。しかし、このような場合に個別に（画像変形量が異なる）脚部伸張処理を行うと、利用者Ｕ１の像と利用者Ｕ２の像とが重なり（重なっている部分）がずれてくるため、本来は見えないはずの部分が見えるように表示されるなど、不自然な表示状態となる場合がある。したがって、このような表示状態を回避するため、利用者Ｕ１の像と利用者Ｕ２の像とが重なっている場合には、画像変形量を小さくして脚部伸張処理を行うか、または脚部伸張処理を行わない構成が好適である。そうすれば、不自然な表示状態を回避することができる。なお、利用者Ｕ１の像と利用者Ｕ２の像とが重なっている部分がいずれかの顔部分を含む場合には、脚部伸張処理を行うべきでないことは前述したとおりである。

【0096】

また、利用者Ｕ１の像と利用者Ｕ２の像とが重なっている部分の画像変形量を小さくして脚部伸張処理を行うか、または当該重なっている部分の画像に対しては脚部伸張処理を行わず、かつ重なっていない部分については、利用者毎に個別に適切な脚部伸張処理を行う構成も好適である。そうすれば、同様に不自然な表示状態を回避することができる。さらに、この場合に、上記重なっている部分の画像変形量を同一にして脚部伸張処理を行う構成であってもよい。

【0097】

なお、ここでは説明の便宜のために、拡大または縮小の方向は上下方向であるように説明したが、これは通常、立位姿勢の利用者の各足は、床に対して垂直に伸びるためである。したがって、利用者の足毎に伸びる方向（例えば脚部画像に含まれる最も離れた２点を結ぶ線分に沿った方向等）を算出し、足毎に算出された伸びる方向へ上記脚部伸張処理における拡大および縮小を行う構成であってもよい。また、各足における脚部画像と足先画像とについて個別にそれぞれの伸びる方向を算出し、拡大または縮小を行う構成であってもよい。

【0098】

また、以上では脚部伸張処理を各足において必ず行うものとして説明したが、例えば図１４に示されるように足を大きく振り上げている場合など、足首から足先が床に対して平行またはほぼ平行になっていない場合（典型的には足先を床面から離して伸ばしている場合）、この足に対して脚部伸張処理を行うと、かえって違和感を生じる場合も考えられる。

【0099】

図１４は、図１１に示す例とは異なる撮影画像における検出された各利用者の腹部位置および膝位置を示す図である。この図１４に示されるように、利用者Ｕ１，Ｕ２の腹部位置ｈａおよび利用者Ｕ１，Ｕ２の膝位置ｈｂは、図１１に示される場合と同一であるが、利用者Ｕ２の左足の足首位置ｈｉおよび足先位置ｈｊは、図１１に示される場合よりもさらに上方にあって足先を伸ばす形（すなわち膝から足先までがほぼ同一直線上にある形）となっている。

【0100】

したがって、例えば、同一の利用者Ｕ（ここでは利用者Ｕ２）の他方の足（ここでは右足）における足先位置よりも、当該足（ここでは左足）の足先位置が上である場合、当該足先は通常は床面から離れているため、床面と平行でなく伸ばされているものとして、当該足における脚部画像に対しては、上記脚部伸張処理を行わないようにする。そうすれば、違和感を生じる脚部伸張処理を行わないようにして不自然さを解消しつつ、利用者Ｕ１，Ｕ２の足をよりスタイル良く長く見せることができる。

【0101】

＜４．効果＞
以上のように本実施形態によれば、腹部位置を上辺とし撮影画像の下端を下辺とする脚部画像において、膝位置近傍を変化点として上下方向に画像が拡大されるので、利用者の像の連続性を保ちつつ、撮影対象となる利用者の足部分が不自然に写らないように（不自然に長く見えないように）することができ、利用者の足をスタイル良く長く見せることができる。

【0102】

＜５．その他の変形例＞
なお、上述した実施形態および変形例等では、線分Ｐａ、ｈａよりも下の範囲に、利用者の顔が含まれる場合、脚部画像を一切変形しないか、または変形する程度（画像変形量）を通常よりも小さくしたが、当該顔部分を除いた部分を通常通りの変形量で変形させることもできる。

【0103】

また、上述した実施形態および変形例等では、撮影画像における利用者の像を、その膝近傍を中心に変形させる処理を行なっているが、この処理に限らない。撮影画像における利用者の像において、足部分を長くするとともに、その長さに応じた分だけ胴部分を短くする処理であればどのようなものであってもよい。

【符号の説明】

【0104】

３…撮影ユニット
４…編集ユニット
５…出力ユニット
６…ネットワーク（ＬＡＮ）
１０，１１…カメラ
２０…撮影操作用タッチパネル
３０…出力操作用タッチパネル
３５…ネットワークプリンタ
３１…赤外線ポート
３２…スピーカ
７０…第１の制御部
７２…第１の表示・操作部（撮影操作用タッチパネル）
８０…第２の制御部
８１，８２…第２および第３の表示・操作部（編集操作用タッチパネル）
９１…第４の表示・操作部（出力操作用タッチパネル）
９２…印刷出力部（ネットワークプリンタ）
９４…非接触通信部（赤外線ポート）
Ｕ、Ｕ１、Ｕ２ …利用者

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】