特開 2024-41674 メッセージを伝達するためのメッセージデータ

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024041674

(43)【公開日】2024-03-27

(54)【発明の名称】メッセージを伝達するためのメッセージデータ

(51)【国際特許分類】

   G06T 19/00 20110101AFI20240319BHJP

   G06F 3/04815 20220101ALI20240319BHJP

   G06F 3/01 20060101ALI20240319BHJP

   G06F 3/16 20060101ALI20240319BHJP

   G10L 13/00 20060101ALI20240319BHJP

【ＦＩ】

G06T19/00 600

G06F3/04815

G06F3/01 510

G06F3/16 690

G10L13/00 100Z

【審査請求】未請求

【請求項の数】9

【出願形態】ＯＬ

(21)【出願番号】P 2022146613

(22)【出願日】2022-09-14

(71)【出願人】

【識別番号】521062309

【氏名又は名称】株式会社ベルマネジメントワイズ

(74)【代理人】

【識別番号】100124419

【弁理士】

【氏名又は名称】井上 敬也

(74)【代理人】

【識別番号】100162293

【弁理士】

【氏名又は名称】長谷 久生

(72)【発明者】

【氏名】野嵜 健

(72)【発明者】

【氏名】古川 智太

【テーマコード（参考）】

5B050

5E555

【Ｆターム（参考）】

5B050AA03

5B050BA06

5B050BA08

5B050BA09

5B050BA11

5B050BA13

5B050CA07

5B050CA08

5B050DA01

5B050EA04

5B050EA19

5B050EA24

5B050EA26

5B050FA02

5B050FA10

5B050FA14

5E555AA27

5E555AA76

5E555BA01

5E555BA06

5E555BB06

5E555BC17

5E555BD01

5E555BE17

5E555CA12

5E555CA42

5E555CB12

5E555CB34

5E555CB48

5E555CB74

5E555CC01

5E555CC03

5E555DA09

5E555DA23

5E555DB18

5E555DB31

5E555DB41

5E555DB53

5E555DC09

5E555DC13

5E555DC43

5E555DC63

5E555DC85

5E555DD08

5E555FA00

(57)【要約】

【課題】プレゼントの贈呈に合わせてメッセージを伝達する際に、受取人の受ける印象をより強くする。
【解決手段】受取人ＲＣＰへのメッセージ伝達に使用される多機能携帯端末１００は、プレゼントＧＦＴに同梱されたメッセージカードＭＣＤに記載され、メッセージデータＭＤＴの格納場所を表すコード画像の読取に応じて当該データＭＤＴを取得する機能と、当該データＭＤＴの取得に応じて、実空間を撮影した実画像と、仮想オブジェクトを表す仮想画像と、を合成して表示する機能と、所定のトリガー条件の充足に応じて、仮想オブジェクトを変更するとともに、メッセージ音声を再生する機能とを有している。トリガー条件が充足された場合、仮想オブジェクトであるギフトボックスは開くように変形され、花束とメッセージ文とが仮想オブジェクトに追加されるとともに、メッセージ音声が贈り主ＰＳＴの声で再生される。
【選択図】図１

【特許請求の範囲】

【請求項1】

多機能携帯端末にメッセージを伝達するためのメッセージデータであって、
前記多機能携帯端末は、
前記メッセージデータの取得先を表すコード画像の読取に応じて、前記メッセージデータを取得する機能と、
前記メッセージデータの取得に応じて、前記多機能携帯端末で実空間を撮影した実画像と、前記メッセージデータにより規定される仮想オブジェクトが前記実空間における前記受取人により指定された配置位置に配置されたとした場合に前記多機能携帯端末で撮影される前記仮想オブジェクトの画像である仮想画像と、を合成して表示する機能と、
前記実空間における前記仮想オブジェクトと前記多機能携帯端末との位置関係によって判断される条件であって、前記メッセージデータにより規定されるトリガー条件の充足に応じて、前記メッセージデータにより規定される変更態様で前記仮想オブジェクトを変更する機能と、
前記トリガー条件の充足に応じて、前記メッセージデータにより規定されるメッセージ音声を再生する機能と、
を有していることを特徴とするメッセージデータ。

【請求項2】

前記多機能携帯端末が、プレゼントの受取人のものであり、
前記コード画像が、そのプレゼントに同梱されたメッセージカードに記載された画像であることを特徴とする請求項１に記載のメッセージデータ。

【請求項3】

前記メッセージ音声は、前記プレゼントの贈り手の声で再生されるものであることを特徴とする請求項１、または２に記載のメッセージデータ。

【請求項4】

前記仮想オブジェクトは、未開封のギフトボックスであり、
前記変更態様は、前記ギフトボックスを開くように変形するとともに、前記配置位置に配置される花束と、前記プレゼントの贈り手によって登録され、前記配置位置の上方に配置されるメッセージ文と、を追加する態様であることを特徴とする請求項１、または２に記載のメッセージデータ。

【請求項5】

前記ギフトボックスが変形する過程は、アニメーションとして表示される、請求項４に記載のメッセージデータ。

【請求項6】

前記メッセージ音声は、前記メッセージ文の文字列を読み上げる前記プレゼントの贈り手の声に基づいて音声合成された音声である、請求項３に記載のメッセージデータ。

【請求項7】

前記音声合成は、前記多機能携帯端末によって行われる、請求項６に記載のメッセージデータ。

【請求項8】

前記音声合成は、前記多機能携帯端末による前記メッセージデータの取得に先立って行われる、請求項６に記載のメッセージデータ。

【請求項9】

前記メッセージ音声は、前記プレゼントの贈り手による前記メッセージ文の文字列の登録に際して録音された前記贈り手の声である、請求項３に記載のメッセージデータ。

【発明の詳細な説明】

【技術分野】

【0001】

この発明は、メッセージを伝達するためのメッセージデータに関し、特に、プレゼントの贈呈に合わせてメッセージを伝達するメッセージデータに関する。

【背景技術】

【0002】

誕生日プレゼント等のプレゼントを贈る際に、贈り主からのメッセージを受取人に伝達するため、当該メッセージを記載したメッセージカードをプレゼントに同梱することが行われている。このメッセージカード等の紙媒体とともに、贈り主（依頼者）の肉声を送り届けることができれば、贈り主の気持ちをより効果的に相手に伝えることができる。

【0003】

そこで、贈り主の発声による音声データの書き込まれた音声メモリが組み込まれた音声チップと、音声メモリから音声データに対応した電気信号が印加される圧電振動素子とを、紙媒体に取り付けることが提案されている（例えば、特許文献１参照）。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２００７－０７４６１２号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

しかしながら、特許文献１で提案されている手段によっては、贈り主の肉声が伝えられるものの、メッセージを受け取る際の臨場感が高くないため、メッセージが受取人に与える印象を十分に強くすることができない。

【0006】

本発明は、上述した従来の課題を解決するためになされたものであり、プレゼントの贈呈に合わせてメッセージを伝達する際に、受取人の受ける印象をより強くすることを可能にする技術を提供することを目的とする。

【課題を解決するための手段】

【0007】

本発明の内、請求項１に記載の発明は、多機能携帯端末にメッセージを伝達するためのメッセージデータであって、前記多機能携帯端末は、前記メッセージデータの取得先を表すコード画像の読取に応じて、前記メッセージデータを取得する機能と、前記メッセージデータの取得に応じて、前記多機能携帯端末で実空間を撮影した実画像と、前記メッセージデータにより規定される仮想オブジェクトが前記実空間における前記受取人により指定された配置位置に配置されたとした場合に前記多機能携帯端末で撮影される前記仮想オブジェクトの画像である仮想画像と、を合成して表示する機能と、前記実空間における前記仮想オブジェクトと前記多機能携帯端末との位置関係によって判断される条件であって、前記メッセージデータにより規定されるトリガー条件の充足に応じて、前記メッセージデータにより規定される変更態様で前記仮想オブジェクトを変更する機能と、前記トリガー条件の充足に応じて、前記メッセージデータにより規定されるメッセージ音声を再生する機能と、を有していることを特徴とするものである。

【0008】

請求項２に記載の発明は、請求項１記載のメッセージデータにおいて、前記多機能携帯端末が、プレゼントの受取人のものであり、前記コード画像が、そのプレゼントに同梱されたメッセージカードに記載された画像であることを特徴とするものである。

【0009】

請求項３に記載の発明は、請求項１、または２記載のメッセージデータにおいて、前記メッセージ音声は、前記プレゼントの贈り手の声で再生されるものであることを特徴とする。なお、本発明における「プレゼントの贈り手」は、プレゼントの送り主本人に限定されず、プレゼントの送り主と関係を有する者が含まれる。

【0010】

請求項４に記載の発明は、請求項１、または２に記載のメッセージデータにおいて、前記仮想オブジェクトは、未開封のギフトボックスであり、前記変更態様は、前記ギフトボックスを開くように変形するとともに、前記配置位置に配置される花束と、前記プレゼントの贈り手によって登録され、前記配置位置の上方に配置されるメッセージ文と、を追加する態様であることを特徴とするものである。

【0011】

請求項５に記載の発明は、請求項４に記載のメッセージデータにおいて、前記ギフトボックスが変形する過程が、アニメーションとして表示されることを特徴とするものである。

【0012】

請求項６に記載の発明は、請求項３に記載のメッセージデータにおいて、前記メッセージ音声が、前記メッセージ文の文字列を読み上げる前記プレゼントの贈り手の声に基づいて音声合成された音声であることを特徴とするものである。

【0013】

請求項７に記載の発明は、請求項６に記載のメッセージデータにおいて、前記音声合成が、前記多機能携帯端末によって行われることを特徴とするものである。

【0014】

請求項８に記載の発明は、請求項６に記載のメッセージデータにおいて、前記音声合成が、前記多機能携帯端末による前記メッセージデータの取得に先立って行われることを特徴とするものである。

【0015】

請求項９に記載の発明は、請求項３に記載のメッセージデータにおいて、前記メッセージ音声は、前記プレゼントの贈り手による前記メッセージ文の文字列の登録に際して録音された前記贈り手の声であることを特徴とするものである。

【発明の効果】

【0016】

請求項１に係るメッセージデータは、多機能携帯端末に、実空間を撮影した実画像に仮想画像を合成して表示し、所定のトリガー条件の充足に応じてその仮想画像を変化させる。したがって、請求項１に係るメッセージデータによれば、メッセージデータの受取人に、臨場感がある形でメッセージを伝達することで強い印象を与えることが可能となる。

【0017】

請求項２に係るメッセージデータは、受取人が多機能携帯端末を用いてプレゼントに同梱されたメッセージカードのコード画像を読み取ることによって、実空間を撮影した実画像に仮想画像が合成して表示され、所定のトリガー条件の充足に応じてその仮想画像が変化する。したがって、請求項１に係るメッセージデータによれば、プレゼントの受取人に、臨場感がある形でメッセージを伝達することが可能となり、受取人に強い印象を与えることが可能となる。

【0018】

請求項３に係るメッセージデータによれば、プレゼントに加えて、仮想画像とメッセージ文と贈り主の声のメッセージ音声とが伝達される。これにより、プレゼントの受取人には、あたかも贈り主がその場でメッセージを伝達したかのような非常に臨場感がある形でメッセージを伝達することが可能となり、受取人にきわめて強い印象を与えることが可能となる。

【0019】

請求項４に係るメッセージデータによれば、プレゼントに加えて、仮想現実で表わされた花束と、メッセージ文と、メッセージ音声とが伝達される。これにより、プレゼントの受取人には、あたかも贈り主がその場で花束を贈ってメッセージを伝達したように感じられるように、臨場感がある形でメッセージが伝達される。そのため、プレゼントの贈呈に合わせてメッセージを伝達する際に、受取人の受ける印象をより強くすることができる。

【0020】

請求項５に係るメッセージデータによれば、表示される画像に違和感が生じるのが抑制されるので、メッセージをより自然な形で伝達することができる。

【0021】

請求項６に係るメッセージデータによれば、直接声に出すのが容易でないメッセージであっても、メッセージ音声を伝達することが容易となる。

【0022】

請求項７に係るメッセージデータによれば、メッセ－ジデータのサイズをより小さくすることができる。

【0023】

請求項８に係るメッセージデータによれば、多機能携帯端末における演算処理量を低減することができる。

【0024】

請求項９に係るメッセージデータによれば、音声合成のための演算処理を省略することができる。

【0025】

なお、本発明は、種々の態様で実現することが可能である。例えば、メッセージデータ、そのメッセージデータを使用したメッセージの伝達方法、そのメッセージデータやメッセージの伝達方法を利用したメッセージ伝達システム等の態様で実現することができる。

【図面の簡単な説明】

【0026】

【図1】本発明の一実施形態としてのメッセージデータによりメッセージが伝達される様子を示す説明図である。

【図2】メッセージの伝達に使用される多機能携帯端末の機能的な構成を示すブロック図である。

【図3】メッセージデータによって多機能携帯端末のユーザーにメッセージが伝達される様子を示す説明図である。

【図4】メッセージデータによって多機能携帯端末のユーザーにメッセージが伝達される様子を示す説明図である。

【図5】メッセージデータによって多機能携帯端末のユーザーにメッセージが伝達される様子を示す説明図である。

【図6】メッセージデータによって多機能携帯端末のユーザーにメッセージが伝達される様子を示す説明図である。

【図7】メッセージデータによって多機能携帯端末のユーザーにメッセージが伝達される様子を示す説明図である。

【図8】メッセージデータによって多機能携帯端末のユーザーにメッセージが伝達される様子を示す説明図である。

【図9】メッセージデータによって多機能携帯端末のユーザーにメッセージが伝達される様子を示す説明図である。

【図10】メッセージデータによって多機能携帯端末のユーザーにメッセージが伝達される様子を示す説明図である。

【発明を実施するための形態】

【0027】

以下、本発明を実施するための形態を以下の順序で説明する。
Ａ．メッセージデータによるメッセージの伝達：
Ｂ．多機能携帯端末の機能的構成：
Ｃ．メッセージの伝達：
Ｄ．変形例：

【0028】

Ａ．メッセージデータによるメッセージの伝達：
図１は、本発明の一実施形態としてのメッセージデータＭＤＴによりメッセージが伝達される様子を示す説明図である。図１の例では、贈り主ＰＳＴが受取人ＲＣＰへの誕生日プレゼントＧＦＴを贈るのに合わせて、受取人ＲＣＰにメッセージが伝達される様子を示している。

【0029】

具体的には、贈り主ＰＳＴは、自身が所有するスマートフォン等の多機能携帯端末を使用して図示しない電子商取引サイトにアクセスする。そして、電子商取引サイトにおいて、誕生日プレゼントＧＦＴ（以下、単に「プレゼントＧＦＴ」とも謂う）を注文する。このプレゼントＧＦＴの注文に際し、電子商取引サイトでは、メッセージカードＭＣＤに記載する挨拶文の指定を受け付けるとともに、受取人ＲＣＰにメッセージを伝達するためのメッセージサーバーＭＳＶを案内する。メッセージサーバーＭＳＶに案内された贈り主ＰＳＴは、メッセージサーバーＭＳＶに、受取人ＲＣＰ宛てのメッセージ文と、贈り主ＰＳＴ自身の声とを登録する。

【0030】

メッセージ文と贈り主ＰＳＴの音声との登録を受け付けたメッセージサーバーＭＳＶは、メッセージ文と音声データとを含むメッセージデータＭＤＴを生成する。生成されたメッセージデータＭＤＴは、メッセージサーバーＭＳＶに設けられた記憶装置ＳＴＲに格納される。なお、メッセージデータＭＤＴの詳細については、後述する。

【0031】

電子商取引サイトからは、挨拶文等が記載されたメッセージカードＭＣＤが、プレゼントＧＦＴに同梱された状態で、受取人ＲＣＰに発送される。図１に示すように、メッセージカードＭＣＤには、電子商取引サイトにおいて指定を受け付けた挨拶文とともに、ＱＲコード（登録商標）（株式会社デンソーウェーブ）等のコード画像が記載されている。

【0032】

本実施形態において、メッセージカードＭＣＤに記載されたコード画像は、メッセージデータＭＤＴの格納先を示すＵＲＬを表している。そのため、コード画像で表されるＵＲＬを参照することにより、メッセージサーバーＭＳＶの記憶装置ＳＴＲに格納されたメッセージデータＭＤＴを取得することができる。

【0033】

プレゼントＧＦＴを受け取った受取人ＲＣＰは、メッセージカードＭＣＤに記載されたコード画像を用いて、自身が所有する多機能携帯端末１００から、インターネットＩＮＥＴを介して接続されたメッセージサーバーＭＳＶにアクセスする。これにより、受取人ＲＣＰは、多機能携帯端末１００によってメッセージサーバーＭＳＶの記憶装置ＳＴＲに格納されたメッセージデータＭＤＴを取得し、メッセージデータＭＤＴで表される贈り主ＰＳＴからのメッセージを受け取ることができる。

【0034】

Ｂ：多機能携帯端末の機能的構成：
図２は、メッセージの伝達に使用される多機能携帯端末１００（以下、単に「端末１００」とも謂う）の機能的な構成を示すブロック図である。図２に示すように、多機能携帯端末１００は、メッセージの伝達に使用される機能ブロックとして、コード入力処理部１１０、データ伝送処理部１２０および拡張現実処理部１３０を有している。多機能携帯端末１００は、ＣＰＵ、ＲＯＭ、ＲＡＭ等（いずれも図示しない）を有するコンピューターとして構成されており、これらの機能ブロック１１０，１２０，１３０は、ＣＰＵがＲＯＭあるいはＲＡＭに格納されたブログラムを実行することにより実現される。

【0035】

また、多機能携帯端末１００は、図示しないが、インターネットＩＮＥＴ（図１）等の外部との間でデータ伝送を行う機能を実現するための通信処理部、音声を入力するためのマイク、音声を出力するためのスピーカー、画像を表示するとともに接触による位置指定を受け付けるタッチスクリーン、および、画像を撮影するカメラ等を有している。これらの各部は、ＣＰＵによって制御可能となるように、所定のインターフェースを介してＣＰＵに接続されている。

【0036】

コード入力処理部１１０は、カメラで撮影した画像からコード画像を抽出して取得するコード画像取得部１１１と、取得したコード画像からコードを解析するコード解析部１１２と、コード解析部１１２で解析されたコード解析結果をデータ伝送処理部１２０に転送する解析結果転送部１１３とを有している。

【0037】

なお、本実施形態では、読取対象となるコード画像がメッセージサーバーＭＳＶ（図１）の記憶装置ＳＴＲに格納されたメッセージデータＭＤＴのＵＲＬを表している。そのため、解析結果転送部１１３は、コード解析結果をデータ伝送処理部１２０に転送しているが、コード画像がＵＲＬを表すものでない場合、解析結果転送部１１３は、コード解析結果を、対応する処理を実行する機能ブロックに転送する。

【0038】

データ伝送処理部１２０は、通信処理部を介して伝送されるデータを取得する伝送データ取得部１２１と、取得されたデータのメディアタイプを判定するメディアタイプ判定部１２２と、取得したデータを転送する取得データ転送部１２３とを有している。

【0039】

伝送データ取得部１２１は、コード入力処理部１１０の解析結果転送部１１３から転送されてきたコード解析結果に応じて、インターネットＩＮＥＴ（図１）を介して外部のサーバー（本実施形態では、メッセージサーバーＭＳＶ）に接続し、コード解析結果であるＵＲＬで表されるデータ（メッセージデータＭＤＴ）を取得する。

【0040】

このようにして、コード入力処理部１１０とデータ伝送処理部１２０を有する多機能携帯端末１００は、メッセージデータＭＤＴの取得先を表すコード画像の読取に応じて、メッセージデータＭＤＴを取得することができる。

【0041】

メディアタイプ判定部１２２は、コード解析結果あるいは取得したデータに基づいて、取得したデータのメディアタイプを判定する。そして、メディアタイプ判定部１２２で判定されたメディアタイプに応じて、取得データ転送部１２３は、適切な機能ブロックに取得したデータを転送する。

【0042】

上述のように、メッセージカードＭＣＤ（図１）に記載されたコード画像は、メッセージサーバーＭＳＶからメッセージデータＭＤＴを取得するためのＵＲＬを表している。詳細については後述するが、本実施形態において、メッセージデータＭＤＴは、拡張現実（ＡＲ：Augmented Reality）において表示される仮想オブジェクトを表すためのデータを含んでいる。そのため、取得データ転送部１２３は、取得したデータを拡張現実処理部１３０に転送する。

【0043】

そして、取得データ転送部１２３が、取得したデータ（すなわち、メッセージデータＭＤＴ）を拡張現実処理部１３０に転送することにより、端末１００は、メッセージデータＭＤＴの取得に応じて、拡張現実処理部１３０によって実現される各種機能を実行することとなる。

【0044】

拡張現実処理部１３０は、実画像取得部１３１と、オブジェクト操作部１３２と、端末配置取得部１３３と、位置関係算出部１３４と、トリガー条件判定部１３５と、仮想画像生成部１３６と、ＡＲ画像表示部１３７と、音声出力部１３８とを有している。

【0045】

実画像取得部１３１は、端末１００に設けられたカメラ（図示しない）を用いて、現実の端末１００周辺の空間（実空間）を撮影し、拡張現実において表示される実空間の画像である実画像を取得する。

【0046】

オブジェクト操作部１３２は、仮想オブジェクトの実空間への配置等、仮想オブジェクトに対する種々の操作を行う。オブジェクト操作部１３２は、また、仮想オブジェクトを変更する機能、すなわち、仮想オブジェクトの配置や形状を変更し、あるいは、配置される仮想オブジェクトの追加や削除を行う機能を有している。

【0047】

端末配置取得部１３３は、実空間における端末１００の配置を取得する。位置関係算出部１３４は、オブジェクト操作部１３２で設定された仮想オブジェクトの配置と、端末配置取得部１３３で取得された端末１００の配置とに基づいて、仮想オブジェクトと端末１００との位置関係を算出する。トリガー条件判定部１３５は、仮想オブジェクトの変更や、音声出力を開始するトリガーとなる条件が満たされているか否かを判定する。

【0048】

仮想画像生成部１３６は、実空間に置かれた現実の物体、仮想オブジェクトおよび端末１００の位置関係に基づいて、端末１００のカメラから見えるであろう仮想オブジェクトの画像（仮想画像）を生成する。ＡＲ画像表示部１３７は、実画像取得部１３１で取得された実画像と、仮想画像生成部１３６で生成された仮想画像を合成して、タッチスクリーンの画像表示部に表示する。

【0049】

音声出力部１３８は、所定のトリガー条件が満たされた場合に、メッセージデータＭＤＴに含まれる音声データに基づいてスピーカー等から出力する。

【0050】

なお、実空間における端末１００の配置は、ユーザー（本実施形態では、図１の受取人ＲＣＰ）の動作に伴って時間とともに変化する可能性がある。また、仮想オブジェクトの実空間における配置は、ユーザーの操作に従って変化する可能性がある。そのため、拡張現実処理部１３０の各部１３１～１３８は、ユーザーの指示によって仮想現実の処理が開始してから、表示の停止や画面の切替等で拡張現実の処理が必要でなくなるまで、それぞれの機能を実行し続ける。

【0051】

Ｃ．メッセージの伝達：
図３ないし図１０は、本実施形態のメッセージデータＭＤＴによって端末１００のユーザー（すなわち、図１の受取人ＲＣＰ）にメッセージが伝達される様子を示す説明図である。

【0052】

図３は、端末１００によって、メッセージカードＭＣＤに記載されたコード画像ＩＭＱが読み取られる様子を示している。図３に示すように、端末１００は、カメラ（図示しない）がメッセージカードＭＣＤ側を向くように配置される。そして、ユーザーがコード画像ＩＭＱの読取を指示する操作をすることにより、カメラは、メッセージカードＭＣＤを撮影する。撮影された画像は、端末１００の画像表示部１０１に表示されるとともに、コード入力処理部１１０（図２）に供給される。

【0053】

コード入力処理部１１０のコード画像取得部１１１は、供給されたメッセージカードＭＣＤの画像から、コード画像ＩＭＱを抽出する。抽出されたコード画像ＩＭＱは、コード解析部１１２で解析され、コード解析結果として、メッセージサーバーＭＳＶ（図１）の記憶装置ＳＴＲに格納されたメッセージデータＭＤＴのＵＲＬが得られる。コード解析結果として得られたメッセージデータＭＤＴのＵＲＬは、解析結果転送部１１３からデータ伝送処理部１２０に転送される。

【0054】

データ伝送処理部１２０の伝送データ取得部１２１は、コード入力処理部１１０の解析結果転送部１１３から転送されてきたメッセージデータＭＤＴ（図１）のＵＲＬに応じ、インターネットＩＮＥＴを介して、メッセージデータＭＤＴが格納されているメッセージサーバーＭＳＶとの接続を確立する。確立された接続を通して、伝送データ取得部１２１は、メッセージサーバーＭＳＶにメッセージデータＭＤＴを送信する要求を送出し、メッセージサーバーＭＳＶは、当該要求に応じて、伝送データ取得部１２１に対して、記憶装置ＳＴＲに格納されたメッセージデータＭＤＴを送出する。これにより、伝送データ取得部１２１は、メッセージサーバーＭＳＶから送出されたメッセージデータＭＤＴを取得する。なお、伝送データ取得部１２１とメッセージサーバーＭＳＶとの接続の確立とデータの伝送は、ＨＴＴＰ等の一般的なデータ伝送プロトコルに基づいて行うことができる。

【0055】

伝送データ取得部１２１により取得されたデータは、そのメディアタイプ（MIME-Type）がメディアタイプ判定部１２２において判定される。本実施形態では、メッセージサーバーＭＳＶから送出されるメッセージデータＭＤＴが、拡張現実における仮想オブジェクトの形状等を規定するデータを含んでいる。そのため、伝送データ取得部１２１が取得したデータ（メッセージデータＭＤＴ）は、拡張現実処理部１３０の処理対象となると判定され、拡張現実処理部１３０に転送される。

【0056】

なお、本実施形態において、メッセージサーバーＭＳＶから送出されるメッセージデータＭＤＴには、仮想オブジェクトの三次元的形状を規定する三次元モデルデータ（モデルデータ）、仮想オブジェクトが変更される際の変更態様を規定するデータ、仮想オブジェクトを変更するトリガー条件、および、再生される音声を表す音声データと音声再生のトリガー条件が含まれている。

【0057】

拡張現実処理部１３０にメッセージデータＭＤＴ（図１）が転送されることにより、拡張現実処理部１３０は、図４に示すように、メッセージデータＭＤＴが含んでいるモデルデータに基づいて、仮想オブジェクト（図４の例では、未開封のギフトボックスＧＢＸ）を画像表示部１０１に表示するとともに、拡張現実処理部１３０が稼働を開始したことを表すアイコンＩＣＮを画像表示部１０１に表示する。そして、図５に示すように、ユーザーがアイコンＩＣＮの表示部分に指ＦＮＧを接触させる（アイコンＩＣＮをタップする）と、拡張現実処理部１３０の各部１３１～１３８は、それぞれの機能の実行を開始し、拡張現実の処理が開始される。

【0058】

拡張現実の処理が開始されると、実画像取得部１３１が実空間を撮影して実画像を取得する。一方、この状態においては、仮想オブジェクトの配置が決定されていないため、仮想オブジェクトが配置されていないものとして取り扱われる。そのため、仮想画像生成部１３６では、仮想オブジェクトの画像である仮想画像が生成されず、ＡＲ画像表示部１３７は、実画像のみを画像表示部１０１に表示する。

【0059】

これにより、図６に示すように、端末１００の画像表示部１０１には、アイコンＩＣＮとともに、実空間を撮影した実画像が表示される。なお、図６の例では、実空間には、何も載せられていない１卓のダイニングテーブルＴＢＬと、２脚のチェアーＣＨＲとが置かれている。

【0060】

この状態で、ユーザーが、図７に示すように、表示された実画像におけるダイニングテーブルＴＢＬの天板部分をタップする。これにより、オブジェクト操作部１３２は、仮想オブジェクト（ギフトボックスＧＢＸ）をユーザーにより指定された配置位置、すなわち、ダイニングテーブルＴＢＬの天板上に配置する。そして、仮想画像生成部１３６により、端末１００のカメラから見えるであろう仮想オブジェクト（ギフトボックスＧＢＸ）の仮想画像が生成される。この仮想画像がＡＲ画像表示部１３７によって実画像に合成されて表示されることにより、図８に示すように、仮想オブジェクトであるギフトボックスＧＢＸは、あたかもダイニングテーブルＴＢＬの天板上に置かれたように表示される。

【0061】

仮想オブジェクトであるギフトボックスＧＢＸが表示された状態で、ユーザーがダイニングテーブルＴＢＬに近づいていくと、端末１００とギフトボックスＧＢＸの配置位置とが接近する。この接近に伴って、端末１００の画像表示部１０１上には、図９に示すように、ギフトボックスＧＢＸが大きく表示されるようになる。

【0062】

本実施形態において、仮想オブジェクトの変更および音声出力開始のトリガー条件は、いずれも、端末１００と仮想オブジェクトとの距離が所定の間隔（例えば、１ｍ）以下であるという条件に設定されている。

【0063】

そのため、図９に示すように、端末１００が仮想オブジェクトであるギフトボックスＧＢＸに接近し、トリガー条件判定部１３５により当該トリガー条件が満たされたと判断された場合、オブジェクト操作部１３２がメッセージデータＭＤＴに規定された態様で仮想オブジェクトを変更する。

【0064】

本実施形態において、仮想オブジェクトの変更は、仮想オブジェクトである未開封のギフトボックスＧＢＸを開くように変形するとともに、仮想オブジェクトとして、後述する花束とメッセージ文とを追加する態様で行われる。そして、仮想画像生成部１３６により開かれたギフトボックス、花束およびメッセージ文の仮想画像が生成される。

【0065】

これにより、図１０に示すように、画像表示部１０１上には、開いたギフトボックスＸＢＸと、花束ＢＱＴとがあたかもユーザーにより指定された配置位置（ダイニングテーブルＴＢＬの天板上）に配置され、さらに、配置位置の上方にメッセージ文が配置された画像が表示される。

【0066】

なお、図９および図１０の例では、未開封のギフトボックスＧＢＸが表示された状態と、開いたギフトボックスＸＢＸが表示された状態とを別個に示しているが、未開封のギフトボックスＧＢＸが開いていく過程をアニメーションとして表示するのが好ましい。この場合、花束ＢＱＴおよびメッセージ文ＭＳＴは、図１０に示すようにギフトボックスＸＢＸが完全に開いた状態において表示される。このように、ギフトボックスＧＢＸが開いていく変形の過程をアニメーションとして表示すれば、表示される画像に違和感が生じるのが抑制されるので、メッセージをより自然な形で伝達することができる。

【0067】

また、本実施形態では、音声の再生開始のトリガー条件も、仮想オブジェクトを変更するトリガー条件と同一に設定される。そのため、花束ＢＱＴが表示されるのに合わせて、メッセージデータＭＤＴに含まれる音声データに基づいて音声が再生される。なお、音声データとしては、メッセージサーバーＭＳＶに登録された贈り主ＰＳＴの音声を基にして、メッセージ文ＭＳＴを読み上げた音声を音声合成により生成したものを使用している。そのため、端末１００のユーザーである受取人ＲＣＰには、仮想現実によって表される花束ＢＱＴに添えられたメッセージ文ＭＳＴと、贈り主ＰＳＴ本人の声と同質の声（贈り主ＰＳＴの声）でメッセージ文ＭＳＴを読み上げるメッセージ音声とが伝達される。

【0068】

なお、本実施形態では、音声の再生を開始するトリガー条件と、仮想オブジェクトを変更するトリガー条件と同一に設定しているが、これらのトリガー条件は、必ずしも同一に設定する必要はない。音声の再生開始は、仮想オブジェクト（ギフトボックスＧＢＸ）を変更するトリガー条件の充足に応じて行われていれば良く、例えば、仮想オブジェクトの変更状態をトリガー条件として音声の再生を開始するものとしても良い。

【0069】

このように、本実施形態によれば、プレゼントＧＦＴ（図１）の受取人ＲＣＰには、プレゼントＧＦＴに加えて、仮想現実で表わされた花束ＢＱＴと、花束ＢＱＴに添えられたメッセージ文ＭＳＴと、メッセージ文ＭＳＴを表す贈り主ＰＳＴの声のメッセージ音声が伝達される。そのため、受取人ＲＣＰには、あたかも贈り主ＰＳＴがその場で花束ＢＱＴを贈ってメッセージを伝達したように感じられる。そして、このように臨場感があるメッセージの伝達が行われることにより、贈り主ＰＳＴは、受取人ＲＣＰに対して、より印象的な形でプレゼントＧＦＴを贈ることが可能となる。

【0070】

さらに、本実施形態によれば、図８に示すように最初にギフトボックスＧＢＸが表示され、受取人ＲＣＰがギフトボックスＧＢＸに近づくことにより、ギフトボックスＧＢＸから花束ＢＱＴ（図１０）が出てくる画像が提示される。これにより、受取人ＲＣＰは、花束ＢＱＴが出てくるまでの過程を、期待感を持ちつつ楽しむことができる。そのため、贈り主ＰＳＴは、受取人ＲＣＰに対して、好印象を与えるようにメッセージを伝達することができる。

【0071】

また、本実施形態では、受取人ＲＣＰが、多機能携帯端末１００でメッセージデータＭＤＴのＵＲＬが記載されたコード画像を読み取ることにより、多機能携帯端末１００にメッセージデータＭＤＴが伝送される。そのため、受取人ＲＣＰが煩雑な操作を行うことなく、多機能携帯端末１００がメッセージデータＭＤＴを取得することができるので、メッセージの伝達をより容易にすることができる。

【0072】

加えて、メッセージデータＭＤＴによって規定される仮想オブジェクトの表示や変更、あるいは音声の再生は、多機能携帯端末１００が有する機能を用いることにより実現される。そのため、受取人ＲＣＰが、メッセージを受け取るためのアプリケーションのインストール等の多機能携帯端末１００を操作することなく、メッセージを受け取ることができるので、メッセージの伝達をさらに容易にすることができる。

【0073】

Ｄ．変形例：
本発明は上記実施形態に限られるものではなく、その要旨を逸脱しない範囲において種々の態様において実施することが可能であり、例えば次のような変形も可能である。

【0074】

Ｄ１．変形例１：
上記実施形態では、メッセージデータＭＤＴに含まれる音声データとして、メッセージサーバーＭＳＶに登録された贈り主ＰＳＴの音声を基にして、メッセージ文ＭＳＴを読み上げた音声を音声合成により生成したものを使用している。しかしながら、メッセージデータＭＤＴに含まれる音声データとしては、贈り主ＰＳＴの声によるメッセージ音声を表すものであれば、種々変更することができる。

【0075】

例えば、メッセージデータＭＤＴに含まれる音声データとしては、音声合成が可能となるように、贈り主ＰＳＴの声の特徴を表すデータと、読み上げる文章（上記実施形態では、メッセージ文ＭＳＴ）とからなるデータを使用することができる。この場合、多機能携帯端末１００（図２）の音声出力部１３８は、音声合成を行って音声を出力する。このようにすれば、音声データのサイズをより小さくすることができるので、多機能携帯端末１００と外部との間で伝送されるメッセージデータＭＤＴのサイズをより小さくすることができる。但し、多機能携帯端末１００における演算処理量を低減することができる点で、音声の合成は、多機能携帯端末１００によるメッセージデータＭＤＴの取得に先立って行われ、メッセージデータＭＤＴには、音声合成で生成された音声データを含めるのが好ましい。

【0076】

また、メッセージデータＭＤＴに含まれる音声データとして、贈り主ＰＳＴがメッセージサーバーＭＳＶに登録した声をそのまま表すものを使用することもできる。このようにすれば、音声合成のための演算処理を省略することができる。但し、好意を伝えるようなメッセージ等、声に出すのに気恥ずかしさを覚えるようなメッセージを伝達し、あるいは、外国語でメッセージを伝達する場合のように、直接声に出すのが容易でないメッセージ音声を伝達することが容易となるので、音声データとしては、音声合成により生成したものを使用するのが好ましい。

【0077】

一方、多機能携帯端末に表示される仮想オブジェクトは、上記実施形態の如く、未開封のギフトボックスに限定されず、くす玉や卵等の他の画像に変更することも可能である。加えて、トリガー条件の充足により実行される変化態様は、上記実施形態の如く、ギフトボックスが開くように変形するとともに花束とメッセージ文とが追加される態様に限定されず、くす玉が割れてメッセージ入りの垂れ幕が現れる態様や、卵が割れてメッセージ入りのプラカードを持った動物が現れる態様等の他の態様に変更することも可能である。

【産業上の利用可能性】

【0078】

本発明のメッセージデータは、上述の通り優れた効果を奏するものであるから、プレゼントの贈呈に合わせてメッセージを伝達することに好適に用いることができる。

【符号の説明】

【0079】

１００・・多機能携帯端末
１０１・・画像表示部
１１０・・コード入力処理部
１１１・・コード画像取得部
１１２・・コード解析部
１１３・・解析結果転送部
１２０・・データ伝送処理部
１２１・・伝送データ取得部
１２２・・メディアタイプ判定部
１２３・・取得データ転送部
１３０・・拡張現実処理部
１３１・・実画像取得部
１３２・・オブジェクト操作部
１３３・・端末配置取得部
１３４・・位置関係算出部
１３５・・トリガー条件判定部
１３６・・仮想画像生成部
１３７・・ＡＲ画像表示部
１３８・・音声出力部
ＢＱＴ・・花束
ＣＨＲ・・チェアー
ＦＮＧ・・指
ＧＢＸ・・ギフトボックス
ＧＦＴ・・プレゼント
ＩＣＮ・・アイコン
ＩＭＱ・・コード画像
ＭＣＤ・・メッセージカード
ＭＤＴ・・メッセージデータ
ＭＳＴ・・メッセージ文
ＭＳＶ・・メッセージサーバー
ＰＳＴ・・贈り主
ＲＣＰ・・受取人
ＳＴＲ・・記憶装置
ＴＢＬ・・ダイニングテーブル
ＸＢＸ・・ギフトボックス
ＩＮＥＴ・・インターネット

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】