特許 7472681 情報処理装置、プログラムおよび情報処理方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-04-15

(45)【発行日】2024-04-23

(54)【発明の名称】情報処理装置、プログラムおよび情報処理方法

(51)【国際特許分類】

   H04N 1/387 20060101AFI20240416BHJP

   G06T 13/80 20110101ALI20240416BHJP

   G06F 3/0484 20220101ALI20240416BHJP

【ＦＩ】

H04N1/387 110

G06T13/80 A

G06F3/0484

【請求項の数】 10

(21)【出願番号】P 2020113076

(22)【出願日】2020-06-30

(65)【公開番号】P2021090186

(43)【公開日】2021-06-10

【審査請求日】2023-02-24

(31)【優先権主張番号】P 2019212595

(32)【優先日】2019-11-25

(33)【優先権主張国・地域又は機関】JP

(73)【特許権者】

【識別番号】000006747

【氏名又は名称】株式会社リコー

(74)【代理人】

【識別番号】100089118

【弁理士】

【氏名又は名称】酒井 宏明

(72)【発明者】

【氏名】赤池 真奈

(72)【発明者】

【氏名】岸 宣之

(72)【発明者】

【氏名】伊藤 篤

【審査官】豊田 好一

(56)【参考文献】

【文献】特開２０１０－０７３１４９（ＪＰ，Ａ）

【文献】特開２０１６－１９２８１９（ＪＰ，Ａ）

【文献】特開２０１６－１７７５９５（ＪＰ，Ａ）

【文献】特開２０１４－２３８８１１（ＪＰ，Ａ）

【文献】特開２０１８－０４５６６３（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ １／３８７

Ｇ０６Ｔ １３／８０

Ｇ０６Ｆ ３／０４８４

(57)【特許請求の範囲】

【請求項1】

媒体に描かれた素材画像に対して付加する付加部材を決定する決定手段と、
前記決定手段により決定された前記付加部材を前記素材画像に付加した加工画像を生成する生成手段と、
前記生成手段により生成した前記加工画像を記憶する記憶手段と、
前記記憶手段に記憶された前記加工画像を、端末装置の保存先に送信する手段と、
を備え、
前記生成手段は、前記決定手段により決定された前記付加部材を前記素材画像に付加した前記加工画像を生成する際に、当該加工画像を生成する領域の背景を変える、
ことを特徴とする情報処理装置。

【請求項2】

前記付加部材は、前記素材画像に対する動作を前記素材画像に対して付加することを特徴とする請求項１に記載の情報処理装置。

【請求項3】

前記付加部材は、予め設定された所定の画像を含み、該所定の画像に対して動作をさらに付加することを特徴とする請求項１または２に記載の情報処理装置。

【請求項4】

前記決定手段は、前記素材画像に対する動作を、前記素材画像の解析結果に基づいて決定することを特徴とする請求項１に記載の情報処理装置。

【請求項5】

前記決定手段は、前記素材画像に対する動作を、前記媒体中の所定の識別情報に基づいて決定することを特徴とする請求項１に記載の情報処理装置。

【請求項6】

前記決定手段は、前記素材画像に対する動作を、予め決められた複数の動作の中からの選択に応じて決定することを特徴とする請求項１に記載の情報処理装置。

【請求項7】

前記所定の画像は、ロゴ、イベント名、ハッシュタグの何れかを含むことを特徴とする請求項３に記載の情報処理装置。

【請求項8】

前記素材画像は、前記媒体の所定の領域に記入された文字列を含み、
前記文字列は、前記付加部材を構成することを特徴とする請求項１に記載の情報処理装置。

【請求項9】

コンピュータを、
媒体に描かれた素材画像に対して付加する付加部材を決定する決定手段と、
前記決定手段により決定された前記付加部材を前記素材画像に付加した加工画像を生成する生成手段と、
前記生成手段により生成した前記加工画像を記憶する記憶手段と、
前記記憶手段に記憶された前記加工画像を、端末装置の保存先に送信する手段と、
として機能させ、
前記生成手段は、前記決定手段により決定された前記付加部材を前記素材画像に付加した前記加工画像を生成する際に、当該加工画像を生成する領域の背景を変える、
ためのプログラム。

【請求項10】

情報処理装置における情報処理方法であって、
媒体に描かれた素材画像に対して付加する付加部材を決定する決定工程と、
前記決定工程により決定された前記付加部材を、前記素材画像に付加した加工画像を生成する生成工程と、
前記生成工程により生成した前記加工画像を記憶する記憶工程と、
前記記憶工程において記憶された前記加工画像を、端末装置の保存先に送信する工程と、
を含み、
前記生成工程は、前記決定工程により決定された前記付加部材を前記素材画像に付加した前記加工画像を生成する際に、当該加工画像を生成する領域の背景を変える、
ことを特徴とする情報処理方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報処理装置、プログラムおよび情報処理方法に関する。

【背景技術】

【0002】

従来、イベント会場でイベント参加者が描いた絵を画像データとして読み取り、その絵の画像に動きを与えてイベント会場内の表示装置で表示させるシステムが知られている。このシステムでは複数のイベント参加者により作成された絵の画像を次々に表示領域内に登場させて、各絵の画像を同じ表示領域内で動き回らせることができる。このシステムがあることによりイベント参加者が会場を一層楽しむことができ、集客も見込まれるため販促用などとして用いられている。

【0003】

特許文献１には、例えば生き物の絵の画像から抽出した特徴量に基づいて絵の画像に動きを与え、背景（陸や海や空）の中を各絵の画像に自由に移動させ、それをプロジェクタで投影するなどして表示させる技術が開示されている。

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、従来技術では、イベントの場でないと、そのような遊びをすることができず、参加者が自分で描いた絵であるにもかかわらず、いつでもどこでも何度でも楽しむという機会を提供することが困難であった。

【0005】

本発明は、上記に鑑みてなされたものであって、イベントの後などにおいても、参加者が描いた絵を基にいつでもどこでも何度でも楽しむ機会を提供することを目的とする。

【課題を解決するための手段】

【0006】

上述した課題を解決し、目的を達成するために、本発明は、媒体に描かれた素材画像に対して付加する付加部材を決定する決定手段と、前記決定手段により決定された前記付加部材を前記素材画像に付加した加工画像を生成する生成手段と、前記生成手段により生成した前記加工画像を記憶する記憶手段と、前記記憶手段に記憶された前記加工画像を、端末装置の保存先に送信する手段と、を備え、前記生成手段は、前記決定手段により決定された前記付加部材を前記素材画像に付加した前記加工画像を生成する際に、当該加工画像を生成する領域の背景を変える、ことを特徴とする。

【発明の効果】

【0007】

本発明によれば、イベントの後などにおいても、参加者が描いた絵を基にいつでもどこでも何度でも楽しむ機会を提供することができる、という効果を奏する。

【図面の簡単な説明】

【0008】

【図1】図１は、第１の実施の形態にかかる情報処理システムの構成の一例を示す図である。

【図2】図２は、画像表示システムの構成の一例を示す図である。

【図3】図３は、用紙のレイアウトの一例を示す図である。

【図4】図４は、コンテンツ提供サーバのハードウェア構成の一例を示す図である。

【図5】図５は、コンテンツ提供サーバの機能ブロックの構成の一例を示す図である。

【図6】図６は、端末装置のハードウェア構成の一例を示す図である。

【図7】図７は、情報処理システムにおいて店舗のＰＣがコンテンツ提供サーバに素材画像などを登録する処理のシーケンスの一例を示す図である。

【図8】図８は、コンテンツ提供サーバにおける加工画像生成処理の流れを示すフローチャートである。

【図9】図９は、トップページの一例を示す図である。

【図10】図１０は、加工画像生成コンテンツの一例を示す図である。

【図11】図１１は、加工画像生成コンテンツの別の一例を示す図である。

【図12】図１２は、加工画像（スタンプ）の一例を示す図である。

【図13】図１３は、第２の実施形態にかかる用紙のレイアウトの一例を示す図である。

【発明を実施するための形態】

【0009】

以下に添付図面を参照して、情報処理装置、プログラム、情報処理方法および情報処理システムの実施の形態を詳細に説明する。

【0010】

（第１の実施の形態）
本実施の形態では、画像表示システムで表示可能な素材画像に対して付加部材を付加した加工画像を参加者の端末装置で生成する仕組みや、装置の構成や、方法について一例を挙げて説明する。一例として、店舗での展示会などのイベントに訪れた客（以下では「イベント参加者」や「参加者」と呼ぶ）がイベント会場で指定の用紙に作成した絵（「描いた絵」とも言う）に対して動きや装飾などの付加部材を付加した加工画像（スタンプ）を参加者の端末装置に提供する場合について示す。

【0011】

ここで「描いた絵」は、塗り絵を含む概念である。なお、本実施の形態に係る「媒体に描かれた素材」は、イベント参加者に限らず、スタッフなどが描いた絵も含まれる。また、描いた絵に限られず、予め作成された絵や、印刷されたものなどであってもよい。「用紙」は、媒体の一例である。なお、本実施の形態に係る「媒体」は、用紙に限られず、素材の表示が可能なものであれば、例えば電子的に絵を描く媒体や磁気的に絵を描く媒体であってもよい。

【0012】

図１は、第１の実施の形態にかかる情報処理システム１の構成の一例を示す図である。図１に示すように、情報処理システム１は、端末装置２０、コンテンツサーバとしてのコンテンツ提供サーバ４０、画像表示システム５０などを備える。端末装置２０と、情報処理装置であるコンテンツ提供サーバ４０と、画像表示システム５０とは、ネットワーク２を介して通信接続される。

【0013】

ネットワーク２は、ＬＡＮ（Local Area Network）や、ＶＰＮ（Virtual Private Network）や、インターネットなどである。ネットワーク２は、これ以外にも、適宜、アプリ提供サーバや、外部サービス提供サーバや、ＳＮＳ（Social Networking Service）サーバなどを通信可能に接続する。

【0014】

端末装置２０、コンテンツ提供サーバ４０は、それぞれ、コンピュータによって構築されている。なお、それぞれは、一部または全てが専用のハードウェアで動作するものであってもよい。

【0015】

イベント会場では、参加者が描いた絵（例えば生き物の塗り絵など）の用紙をスタッフ（オペレータ）がスキャナ５５で読み取って画像データ化し、画像表示システム５０で、その絵の画像に動きを付けて表示装置に表示する。

【0016】

図２は、画像表示システム５０の構成の一例を示す図である。図２において、画像表示システム５０は、ＰＣ（Personal Computer）５１と、プロジェクタ（ＰＪ）５２と、画像ＤＢ５３と、センサ５４と、画像読取装置（スキャナ）５５とを含む。ここで、画像読取装置（スキャナ）５５は、例えば図１においてネットワーク２に接続したスキャナ５５である。

【0017】

画像読取装置（スキャナ）５５は、「読取手段」の一例である。画像読取装置（スキャナ）５５は、所定の位置にセットされた用紙Ｙをスキャンして、用紙Ｙの画像（読取画像）を取得する。例えば、画像読取装置５５は、スキャナ（撮像部）と、用紙Ｙを載置する載置台と、載置台に対してスキャナを所定の高さに固定するための治具とを含む。載置台に用紙Ｙを表向きにセットして、用紙Ｙの表面を光走査することによりスキャナで用紙Ｙの表面の画像を読み取ることができる。

【0018】

ＰＣ５１は、画像表示システム５０全体の動作を制御する。ＰＣ５１は、イベント会場でイベント参加者が描いた絵の用紙Ｙを、画像読取装置（スキャナ）５５から読取画像として取得し、用紙Ｙに描かれた絵の読取画像をＤＢ５３に登録する。

【0019】

ＰＣ５１は、参加者が描いた絵の読取画像の所定領域から素材となる素材画像を抽出し、抽出した素材画像をＤＢ５３に登録する。また、ＰＣ５１は、参加者が描いた絵の読取画像の所定領域を解析し、解析した結果のテキストデータを生成する。ＰＣ５１は、画像解析結果のテキストデータをＤＢ５３に登録する。さらに、ＰＣ５１は、ＤＢ５３に登録した用紙Ｙに描かれた絵の読取画像から抽出した素材画像、テキストデータを、所定のタイミングでコンテンツ提供サーバ４０に送信する。

【0020】

さらに、ＰＣ５１は、ＤＢ５３の用紙Ｙに描かれた絵の読取画像から抽出した素材画像に立体的な動きを与えた表示情報Ａを順次生成する。

【0021】

ＰＪ５２は、ＰＣ５１から出力された表示信号に従い、被投射媒体５７に表示情報Ａを投射する。センサ５４は、人の身ぶりや手ぶりなどを検知して出力し、センサ５４からの出力に応じてＰＣ５１が各絵の動きなどを更新する。なお、ＰＣ５１の処理は、複数台のＰＣ５１により実行してもよい。

【0022】

図３は、用紙Ｙのレイアウトの一例を示す図である。用紙Ｙは、イベント会場で配布される絵描き用の用紙である。図３には、用紙Ｙの表面Ｙ１と裏面Ｙ２の各レイアウトを示している。イベント参加者が表面Ｙ１に絵を描き、画像読取装置５５により表面Ｙ１の画像を読み取る。裏面Ｙ２は、主に端末装置２０で参加者がコンテンツを取得する際に使用する。

【0023】

表面Ｙ１には、イベント参加者が絵を手書きするための手書き領域Ｙ１０が設けられている。この例では、絵のタイトルを手書きする領域Ｙ１１も設けられている。また、表面Ｙ１には、さらに一意の識別情報を設定した識別領域Ｙ１２が設けられている。図３には、識別情報の一例としてバーコードを示している。識別情報は、用紙Ｙを識別する情報である。

【0024】

識別情報は、二次元コード（例えばＱＲコード（登録商標））であってもよい。また、数字やアルファベットや記号などで構成された識別コードであってもよい。また、その他のマーカであってもよい。また、識別領域Ｙ１２にカラーコードなどを含めてもよい。このように、識別領域Ｙ１２に対し識別情報を適宜設定してよい。この他、設定に応じて用紙の向きおよび各領域の配置を特定するためのマークなどを設けてもよい。

【0025】

なお、上記は手書き領域Ｙ１０にイベント参加者がフリーハンドで絵を描く例としているが、例えば図３（ｃ）のように、手書き領域Ｙ１０内に下絵を設け、イベント参加者が色を塗るという形態にしてもよい。また、識別領域Ｙ１２も、図３（ｃ）や図３（ｄ）のように、表面Ｙ１の任意の位置に、同種または複数種の識別情報を設けるようにしてもよい。

【0026】

裏面Ｙ２には、表面Ｙ１に描かれた絵を利用するＷｅｂページの利用方法などの説明を含む説明領域Ｙ２１が設けられている。また、表面Ｙ１の識別領域Ｙ１２に設定した識別情報と同じ識別情報を設定した識別領域Ｙ２２が設けられている。この識別領域Ｙ２２には、人が読み取って端末装置２０にキー入力が可能な数字やアルファベットや記号などで構成された識別情報が設定される。

【0027】

また、裏面Ｙ２には、広告領域Ｙ２３が設けられている。広告領域Ｙ２３には、例えばイベントの広告のイラストや、イベントを告知する文書などを適宜設定することができる。

【0028】

用紙Ｙの各領域への情報の設定は、印刷、シールの貼り付け、あるいは、イベント会場の任意の場所に設けたＵＲＬの転記などにより行われる。以下では、各情報が印刷されているものとして説明する。

【0029】

コンテンツ提供サーバ４０は、素材画像を基に端末装置２０のＷｅｂブラウザで利用するためのコンテンツを生成し、一意の管理情報と対応付けて登録する。本例では、当該素材は、参加者が描いた絵をスキャナ５５で読み取った用紙表面Ｙ１の画像から抽出される手書き領域Ｙ１０の絵の画像である。

【0030】

コンテンツ提供サーバ４０は、参加者が描いた絵の用紙表面Ｙ１の画像から手書き領域Ｙ１０の絵の画像を抽出した画像に基づき、端末装置２０がインストールしたＷｅｂブラウザで利用可能なコンテンツを生成する。コンテンツの登録先は、絵を描いた用紙に付されている一意の識別情報などの管理情報で指定する。

【0031】

端末装置２０は、タブレット型コンピュータやスマートフォンといった携帯容易な端末装置である。端末装置２０のユーザは、例えばイベント参加者や、イベント参加者が子供であれば、その家族である。端末装置２０には、Ｗｅｂブラウザがインストールされる。Ｗｅｂブラウザは、ＷＷＷ（World Wide Web）上の情報リソースを扱うアプリケーションである。Ｗｅｂブラウザは、所定のＷｅｂサイト（アプリ提供サーバなど）からダウンロードされ、インストールされる。なお、Ｗｅｂサイトに限らずＣＤ－ＲＯＭなど可搬型媒体で提供を受けてもよい。

【0032】

端末装置２０はＷｅｂブラウザを起動すると、Ｗｅｂブラウザが端末装置２０をインターネットに接続する。これにより、端末装置２０は、Ｗｅｂブラウザを介してネットワーク２上のコンテンツ提供サーバ４０から所望のコンテンツを取得する。

【0033】

コンテンツ提供サーバ４０は、端末装置２０のＷｅｂブラウザで利用可能なコンテンツを記憶するコンテンツ記憶部４１を有し、端末装置２０に対し対象のコンテンツを提供する。

【0034】

コンテンツ提供サーバ４０は、端末装置２０に対象のコンテンツをネットワーク２を介して送信する。コンテンツは、コンテンツ提供サーバ４０が生成したＷｅｂページである。各コンテンツは、それぞれ、ＨＤ５０４（図４参照）に、登録時に対応付けられた識別情報により指定される保管場所（端末装置２０による情報取得先）に格納される。ここでは一例として、各コンテンツは、店舗別に、一意の識別コード（図示せず）で示される格納場所に、格納されるものとする。例えば、各コンテンツは、ディレクトリの階層構造に分けられて、店舗別に、識別コードで指定されるファイルパスに、登録される。なお、ここでは複数のコンテンツ記憶部４１を示しているが、これらは、例えばコンテンツの種類などに応じて分けたものである。それぞれのコンテンツ記憶部４１には、コンテンツ提供サーバ４０にそれぞれに対応するパスからアクセスされるものとする。

【0035】

［コンテンツ提供サーバ４０のハードウェア構成］
図４は、コンテンツ提供サーバ４０のハードウェア構成の一例を示す図である。コンテンツ提供サーバ４０は、一台または複数台のコンピュータによって構築されており、図４に示されているように、ＣＰＵ５０１、ＲＯＭ５０２、ＲＡＭ５０３、ＨＤ５０４、ＨＤＤ（Hard Disk Drive）コントローラ５０５、ディスプレイ５０６、外部機器接続Ｉ／Ｆ（Interface）５０８、ネットワークＩ／Ｆ５０９、バスライン５１０、キーボード５１１、ポインティングデバイス５１２、ＤＶＤ－ＲＷ（Digital Versatile Disk Rewritable）ドライブ５１４、メディアＩ／Ｆ５１６を備えている。

【0036】

これらのうち、ＣＰＵ５０１は、コンテンツ提供サーバ４０全体の動作を制御する。ＲＯＭ５０２は、ＩＰＬ等のＣＰＵ５０１の駆動に用いられるプログラムを記憶する。ＲＡＭ５０３は、ＣＰＵ５０１のワークエリアとして使用される。

【0037】

ＨＤ５０４は、プログラム等の各種データを記憶する。ＨＤＤコントローラ５０５は、ＣＰＵ５０１の制御にしたがってＨＤ５０４に対する各種データの読み出し又は書き込みを制御する。

【0038】

ディスプレイ５０６は、カーソル、メニュー、ウィンドウ、文字、又は画像などの各種情報を表示する。外部機器接続Ｉ／Ｆ５０８は、各種の外部機器を接続するためのインタフェースである。この場合の外部機器は、例えば、ＵＳＢ（Universal Serial Bus）メモリやプリンタ等である。ネットワークＩ／Ｆ５０９は、ネットワーク２を利用してデータ通信をするためのインタフェースである。バスライン５１０は、図４に示されているＣＰＵ５０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。

【0039】

また、キーボード５１１は、文字、数値、各種指示などの入力のための複数のキーを備えた入力手段の一種である。ポインティングデバイス５１２は、各種指示の選択や実行、処理対象の選択、カーソルの移動などを行う入力手段の一種である。

【0040】

ＤＶＤ－ＲＷドライブ５１４は、着脱可能な記録媒体の一例としてのＤＶＤ－ＲＷ５１３に対する各種データの読み出し又は書き込みを制御する。なお、ＤＶＤ－ＲＷに限らず、ＤＶＤ－Ｒ等であってもよい。メディアＩ／Ｆ５１６は、フラッシュメモリ等の記録メディア５１５に対するデータの読み出し又は書き込み（記憶）を制御する。

【0041】

本実施形態のコンテンツ提供サーバ４０で実行されるプログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ－ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ－Ｒ、ＤＶＤ（Digital Versatile Disk）等のコンピュータで読み取り可能な記録媒体に記録されて提供される。

【0042】

また、本実施形態のコンテンツ提供サーバ４０で実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、本実施形態のコンテンツ提供サーバ４０で実行されるプログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。

【0043】

また、本実施形態のコンテンツ提供サーバ４０で実行されるプログラムを、ＲＯＭ等に予め組み込んで提供するように構成してもよい。

【0044】

［コンテンツ提供サーバ４０の機能構成］
次に、コンテンツ提供サーバ４０のＣＰＵ５０１がプログラムに従って実行する各種の演算処理のうち、本実施の形態の特長的な処理であるコンテンツ提供処理について以下に説明する。

【0045】

図５は、コンテンツ提供サーバ４０の機能ブロックの構成の一例を示す図である。図５において、コンテンツ提供サーバ４０は、取得手段として機能する取得部１０１と、提供手段として機能する提供部１０２と、決定手段として機能する決定部１０３と、生成手段として機能する生成部１０４と、記憶手段として機能する記憶部１０５と、を含む。

【0046】

取得部１０１は、画像表示システム５０から出力された媒体に描かれた素材画像（用紙表面Ｙ１の画像中の手書き領域Ｙ１０に描かれた絵の画像。以下、同じ）を取得する。

【0047】

提供部１０２は、素材画像を所定の端末装置２０に対して提供する。より詳細には、提供部１０２は、素材画像を含み、当該素材画像に対して動作や装飾などの付加部材の付加を可能とするコンテンツを所定の端末装置２０に対して提供する。コンテンツは、端末装置２０のＷｅｂブラウザで利用することができるようしたＷｅｂページである。

【0048】

決定部１０３は、素材画像に対して付加する付加部材を所定の端末装置２０のＷｅｂブラウザを介して決定する。

【0049】

生成部１０４は、決定部１０３により決定された付加部材を、素材画像（用紙表面Ｙ１の画像から手書き領域Ｙ１０の絵の画像を抽出した画像）に付加した加工画像を生成する。

【0050】

記憶部１０５は、生成部１０４により生成した加工画像を所定の端末装置２０に記憶する。

【0051】

［端末装置２０のハードウェア構成］
図６は、端末装置２０のハードウェア構成の一例を示す図である。端末装置２０は、スマートフォンである。図６に示されているように、端末装置２０は、ＣＰＵ４０１、ＲＯＭ４０２、ＲＡＭ４０３、ＥＥＰＲＯＭ４０４、ＣＭＯＳセンサ４０５、撮像素子Ｉ／Ｆ４０６、加速度・方位センサ４０７、メディアＩ／Ｆ４０９、ＧＰＳ受信部４１１を備えている。

【0052】

これらのうち、ＣＰＵ４０１は、端末装置２０全体の動作を制御する。ＲＯＭ４０２は、ＣＰＵ４０１やＩＰＬ等のＣＰＵ４０１の駆動に用いられるプログラムを記憶する。ＲＡＭ４０３は、ＣＰＵ４０１のワークエリアとして使用される。ＥＥＰＲＯＭ４０４は、ＣＰＵ４０１の制御にしたがって、Ｗｅｂブラウザなどのスマートフォン用プログラム等の各種データの読み出し又は書き込みを行う。

【0053】

ＣＭＯＳ（Complementary Metal Oxide Semiconductor）センサ４０５は、ＣＰＵ４０１の制御に従って被写体（主に自画像）を撮像して画像データを得る内蔵型の撮像手段の一種である。なお、ＣＭＯＳセンサではなく、ＣＣＤ（Charge Coupled Device）センサ等の撮像手段であってもよい。撮像素子Ｉ／Ｆ４０６は、ＣＭＯＳセンサ４０５の駆動を制御する回路である。

【0054】

加速度・方位センサ４０７は、地磁気を検知する電子磁気コンパスやジャイロコンパス、加速度センサ等の各種センサである。メディアＩ／Ｆ４０９は、フラッシュメモリ等の記録メディア４０８に対するデータの読み出し又は書き込み（記憶）を制御する。ＧＰＳ受信部４１１は、ＧＰＳ衛星からＧＰＳ信号を受信する。

【0055】

また、端末装置２０は、遠距離通信回路４１２、ＣＭＯＳセンサ４１３、撮像素子Ｉ／Ｆ４１４、マイク４１５、スピーカ４１６、音入出力Ｉ／Ｆ４１７、ディスプレイ４１８、外部機器接続Ｉ／Ｆ（Interface）４１９、近距離通信回路４２０、近距離通信回路４２０のアンテナ４２０ａ、及びタッチパネル４２１を備えている。

【0056】

これらのうち、遠距離通信回路４１２は、通信ネットワーク１００を介して、他の機器と通信する回路である。ＣＭＯＳセンサ４１３は、ＣＰＵ４０１の制御に従って被写体を撮像して画像データを得る内蔵型の撮像手段の一種である。撮像素子Ｉ／Ｆ４１４は、ＣＭＯＳセンサ４１３の駆動を制御する回路である。

【0057】

マイク４１５は、音を電気信号に変える内蔵型の回路である。スピーカ４１６は、電気信号を物理振動に変えて音楽や音声などの音を生み出す内蔵型の回路である。音入出力Ｉ／Ｆ４１７は、ＣＰＵ４０１の制御に従ってマイク４１５及びスピーカ４１６との間で音信号の入出力を処理する回路である。

【0058】

ディスプレイ４１８は、被写体の画像や各種アイコン等を表示する液晶や有機ＥＬ（Electro Luminescence）などの表示手段の一種である。外部機器接続Ｉ／Ｆ４１９は、各種の外部機器を接続するためのインタフェースである。近距離通信回路４２０は、ＮＦＣ（Near Field Communication）やＢｌｕｅｔｏｏｔｈ（登録商標）等の通信回路である。タッチパネル４２１は、利用者がディスプレイ４１８を押下することで、端末装置２０を操作する入力手段の一種である。

【0059】

また、端末装置２０は、バスライン４１０を備えている。バスライン４１０は、図６に示されているＣＰＵ４０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。

【0060】

本実施形態の端末装置２０で実行されるＷｅｂブラウザなどのプログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ－ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ－Ｒ、ＤＶＤ（Digital Versatile Disk）等のコンピュータで読み取り可能な記録媒体に記録されて提供される。

【0061】

また、本実施形態の端末装置２０で実行されるＷｅｂブラウザなどのプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、本実施形態の端末装置２０で実行されるＷｅｂブラウザなどのプログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。

【0062】

また、本実施形態の端末装置２０で実行されるＷｅｂブラウザなどのプログラムを、ＲＯＭ等に予め組み込んで提供するように構成してもよい。

【0063】

［システム動作］
次に、情報処理システム１における各種の処理動作について説明する。

【0064】

（登録処理）
まず、素材画像などの登録シーケンスについて簡単に説明する。

【0065】

図７は、情報処理システム１において店舗の画像表示システム５０のＰＣ５１がコンテンツ提供サーバ４０に素材画像などを登録する処理のシーケンスの一例を示す図である。

【0066】

図７に示すシーケンスは、例えばイベント会場内において、イベント参加者が絵を描いた用紙Ｙを、オペレータが受け取り、その用紙Ｙを画像読取装置（スキャナ）５５にセットして画像読取開始のボタンを押下するなどして開始される。

【0067】

先ず、画像読取装置（スキャナ）５５は、画像読取装置（スキャナ）５５にセットされた用紙Ｙの表面Ｙ１の読取画像をＰＣ５１に出力する（ステップＳ１）。

【0068】

続いて、ＰＣ５１は、読取画像に含まれる手書き領域Ｙ１０の画像を抽出した素材画像を生成する素材画像生成処理を行う（ステップＳ２）。

【0069】

ＰＣ５１は、所定の店舗コードと、読取画像の識別領域Ｙ１２の識別情報とにより当該素材画像の管理情報を構成し、コンテンツ提供サーバ４０に当該管理情報が示す場所への素材画像の登録を要求する（ステップＳ３）。

【0070】

コンテンツ提供サーバ４０は、ＰＣ５１からの登録要求に基づき、素材画像を管理情報が示す一意のパスに登録する（ステップＳ４）。

【0071】

なお、本実施の形態に示す構成では、ステップＳ１でＰＣ５１に出力される読取画像は、画像表示システム５０においても動きを付加された画像として随時表示される。

【0072】

また、このシーケンスでは、ＰＣ５１に画像読取装置（スキャナ）５５から１枚ごとに用紙の読取画像が出力され、ＰＣ５１は用紙の読取画像を１枚ずつ受信する度に登録の手順（ステップＳ２、ステップＳ３）を繰り返し行う。しかし、登録の手順の一部または全てを、読取画像が一定数溜まった段階や、所定時間置きなどに、複数の読取画像をまとめて行ってもよい。

【0073】

また、ここでは一例として、オペレータは、イベント参加者が絵を描いた各用紙Ｙを、画像読取装置（スキャナ）５５に１枚ずつセットする度に画像読取開始のボタンを押下して画像読取りを開始する。しかし、画像読取装置（スキャナ）５５がＡＤＦ（Auto Document Feeder）を備えるものであれば、複数枚をセットして画像読取開始のボタンの１回の押下で各用紙Ｙの連続読取りを実行してもよい。

【0074】

（加工画像生成処理）
次に、情報処理システム１において端末装置２０からコンテンツ提供サーバ４０にアクセスして素材画像に対して動作や装飾などの付加部材を付加して加工画像を生成する加工画像生成処理について説明する。

【0075】

図８は、コンテンツ提供サーバ４０における加工画像生成処理の流れを示すフローチャートである。

【0076】

先ず、端末装置２０がユーザ操作によりＷｅｂブラウザを起動すると、コンテンツ提供サーバ４０は、端末装置２０のディスプレイ４１８にトップページＰ１を表示する（ステップＳ１１）。

【0077】

ここで、図９はトップページＰ１の一例を示す図である。図９に示すように、端末装置２０のディスプレイ４１８に表示されるトップページＰ１には、コンテンツ提供サーバ４０に登録された素材画像のサムネイルが一覧表示される。

【0078】

参加者は、トップページＰ１に一覧表示された素材画像のサムネイルから所望の素材画像をタッチパネル４２１を介して選択する。

【0079】

なお、トップページＰ１において一覧表示される素材画像は、イベントが開催された店舗別や日時別であってもよい。また、参加者が識別情報を入力することで、当該識別情報に対応付けられた素材画像のみが端末装置２０のディスプレイ４１８に表示されるトップページＰ１に表示されるようにしてもよい。

【0080】

コンテンツ提供サーバ４０の取得部１０１は、端末装置２０で選択された所望の素材画像を取得する（ステップＳ１２）。

【0081】

ついで、コンテンツ提供サーバ４０の提供部１０２は、当該素材画像に対して動作や装飾などの付加部材の付加を可能とする加工画像生成コンテンツ（Ｗｅｂページ）を端末装置２０に提供してディスプレイ４１８に表示する（ステップＳ１３）。

【0082】

ここで、図１０は加工画像生成コンテンツＰ２の一例を示す図である。図１０に示すように、端末装置２０のディスプレイ４１８に表示される加工画像生成コンテンツＰ２には、加工画像生成エリアＡ１、付加部材エリアＡ２、位置調整ボタンＢ１、サイズ調整ボタンＢ２、作成ボタンＢ３、やり直しボタンＢ４、使い方ボタンＢ５などが表示される。

【0083】

加工画像生成エリアＡ１には、選択された素材画像Ｉ１が表示される。また、加工画像生成エリアＡ１には、ロゴ、イベント名、ハッシュタグなどの予め設定した所定の画像（付加部材）Ｉ２が表示される。

【0084】

参加者は、素材画像Ｉ１の位置を、タッチパネル４２１を介して位置調整ボタンＢ１により加工画像生成エリアＡ１の範囲内で調整する。また、参加者は、素材画像Ｉ１のサイズを、タッチパネル４２１を介してサイズ調整ボタンＢ２により加工画像生成エリアＡ１の範囲内で調整する。

【0085】

付加部材エリアＡ２は、各種の付加部材を選択させるエリアである。付加部材エリアＡ２には、予め登録しておいた付加部材が表示される。ここでの付加部材は、素材画像を装飾する絵であったり、文字であったりする。また、「文字」としては、領域Ｙ１１に手書きされた絵のタイトルのテキストデータも含まれる。

【0086】

参加者は、付加部材エリアＡ２の付加部材から所望の付加部材をタッチパネル４２１を介して選択する。

【0087】

コンテンツ提供サーバ４０の決定部１０３は、選択された付加部材Ｉ３を加工画像生成エリアＡ１内に合成することを決定する（ステップＳ１４）。なお、コンテンツ提供サーバ４０は、選択された付加部材（絵や文字）に応じて、加工画像生成エリアＡ１の背景が変わるようにしてもよい。

【0088】

また、コンテンツ提供サーバ４０の決定部１０３は、加工画像生成エリアＡ１に表示された素材画像Ｉ１に対して付加する付加部材（動き）を決定する（ステップＳ１５）。なお、コンテンツ提供サーバ４０の決定部１０３は、ステップＳ１４で選択された付加部材（絵や文字）Ｉ３に対しても動きを付加してもよい。例えば、コンテンツ提供サーバ４０は、保有している下記の複数の動きのうち、ランダムに一の動きを付加する。
１．はねる
２．ゆれる
３．回転
４．はしる

【0089】

また、コンテンツ提供サーバ４０の決定部１０３は、特許文献１に記載のように、例えば素材画像Ｉ１から抽出した特徴量に基づいて付加する動きを決定するようにしてもよい。さらに、コンテンツ提供サーバ４０の決定部１０３は、素材画像Ｉ１に対する動作を、用紙Ｙを識別する識別情報に基づいて決定するようにしてもよい。

【0090】

ここで、図１１は加工画像生成コンテンツＰ２の別の一例を示す図である。図１１に示すように、端末装置２０のディスプレイ４１８に表示される加工画像生成コンテンツＰ２には、素材画像Ｉ１に対して動きを選択するラジオボタンＢ６が表示されるようにしてもよい。

【0091】

以上により、参加者は、加工画像生成コンテンツ（Ｗｅｂページ）Ｐ２を用いることにより、素材画像Ｉ１を決められた動きで動かしたり、素材画像Ｉ１の周辺に選択された付加部材（絵や文字）Ｉ３で装飾を施したりすることができる。

【0092】

参加者は、素材画像Ｉ１の加工が完了した場合、タッチパネル４２１を介して作成ボタンＢ３を押下する。なお、参加者は、素材画像Ｉ１の加工をやり直す場合、タッチパネル４２１を介してやり直しボタンＢ４を押下する。また、参加者は、素材画像Ｉ１の加工の仕方がわからない場合、タッチパネル４２１を介して使い方ボタンＢ５を押下する。

【0093】

コンテンツ提供サーバ４０の生成部１０４は、作成ボタンＢ３が押下されると（ステップＳ１６のＹｅｓ）、素材画像Ｉ１に対して動きや装飾などの付加部材Ｉ３を付加した加工画像（スタンプ）を生成する（ステップＳ１７）。

【0094】

次いで、コンテンツ提供サーバ４０の記憶部１０５は、端末装置２０のＥＥＰＲＯＭ４０４に形成されたカメラロールなどの保存先に加工画像（スタンプ）を保存する（ステップＳ１８）。加工画像は、アニメーションＧＩＦもしくは静止画で保存される。

【0095】

ここで、図１２は加工画像（スタンプ）Ｓの一例を示す図である。図１２に示すように、加工画像（スタンプ）Ｓは、素材画像Ｉ１に対して動きや装飾などの付加部材Ｉ３を付加したものである。

【0096】

なお、参加者は、端末装置２０のＥＥＰＲＯＭ４０４に形成されたカメラロールに保存された加工画像（スタンプ）Ｓを、シェア画面を表示するなどして、シェアする先のＳＮＳ（Social Networking Service）の選択を受け付けてアップロードすることができる。

【0097】

このように本実施形態によれば、参加者が描いた絵を基にした素材画像に対して動きや装飾などの付加部材を付加した加工画像を生成できるので、イベントの後などにおいても、参加者が描いた絵を基にいつでもどこでも何度でも楽しむ機会を提供することができる。

【0098】

（第２の実施の形態）
次に、第２の実施形態について説明する。

【0099】

第２の実施形態は、専用紙で素材画像の動きを設定するようにした点が、第１の実施形態と異なる。以下、第２の実施形態の説明では、第１の実施形態と同一部分の説明については省略し、第１の実施形態と異なる箇所について説明する。

【0100】

図１３は、第２の実施形態にかかる用紙のレイアウトの一例を示す図である。図１３に示すように、用紙Ｙは、図３で説明した構成に加えて、素材画像に対して表示情報Ａとして立体的な動きを与えるための動きを決定する動き選択領域Ｙ３０が設けられている。例えば、参加者は、下記の複数の動きのうち、一の動きを選択する。
１．はねる
２．ゆれる
３．回転
４．はしる

【0101】

ＰＣ５１は、参加者が描いた絵の読取画像の動き選択領域Ｙ３０を解析し、解析した動きにかかる動きデータを生成する。ＰＣ５１は、画像解析結果の動きデータをＤＢ５３に登録する。さらに、ＰＣ５１は、ＤＢ５３に登録した用紙Ｙに描かれた絵の読取画像から抽出した素材画像、テキストデータ、動きデータを、所定のタイミングでコンテンツ提供サーバ４０に送信する。

【0102】

そして、図８に示すステップＳ１５において、コンテンツ提供サーバ４０の決定部１０３は、加工画像生成エリアＡ１に表示された素材画像に対して付加する動きを動きデータに基づいて決定する。

【0103】

このように本実施形態によれば、素材画像に対して動きや装飾などの付加部材を付加した加工画像（スタンプ）を、イベント会場での画像表示システム５０における動きと同じ動きにすることができる。

【0104】

上記で説明した実施形態の各機能は、一又は複数の処理回路によって実現することが可能である。ここで、本明細書における「処理回路」とは、電子回路により実装されるプロセッサのようにソフトウェアによって各機能を実行するようプログラミングされたプロセッサや、上記で説明した各機能を実行するよう設計されたＡＳＩＣ（Application Specific Integrated Circuit）、ＤＳＰ（Digital Signal Processor）、ＦＰＧＡ（Field Programmable Gate Array）や従来の回路モジュール等のデバイスを含むものとする。

【0105】

実施例に記載された装置群は、本明細書に開示された実施形態を実施するための複数のコンピューティング環境のうちの１つを示すものにすぎない。ある実施形態では、コンテンツ提供サーバ４０は、サーバクラスタといった複数のコンピューティングデバイスを含む。複数のコンピューティングデバイスは、ネットワークや共有メモリなどを含む任意のタイプの通信リンクを介して互いに通信するように構成されており、本明細書に開示された処理を実施する。

【符号の説明】

【0106】

１ 情報処理システム
２０ 端末装置
４０ 情報処理装置
１０１ 取得手段
１０２ 提供手段
１０３ 決定手段
１０４ 生成手段
１０５ 記憶手段

【先行技術文献】

【特許文献】

【0107】

【文献】特開２０１６－１７７５９５号公報

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】