特許 7538581 音声生成装置、音声生成システム及びコンピュータプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B1)

(11)【特許番号】

(24)【登録日】2024-08-14

(45)【発行日】2024-08-22

(54)【発明の名称】音声生成装置、音声生成システム及びコンピュータプログラム

(51)【国際特許分類】

   G10L 13/033 20130101AFI20240815BHJP

   G10L 13/04 20130101ALI20240815BHJP

【ＦＩ】

G10L13/033 102B

G10L13/04 Z

【請求項の数】 6

(21)【出願番号】P 2024534764

(86)(22)【出願日】2024-03-21

(86)【国際出願番号】 JP2024011134

【審査請求日】2024-06-11

(31)【優先権主張番号】P 2023047639

(32)【優先日】2023-03-24

(33)【優先権主張国・地域又は機関】JP

【早期審査対象出願】

(73)【特許権者】

【識別番号】518122560

【氏名又は名称】合同会社音楽呼吸総研

(74)【代理人】

【識別番号】100108947

【弁理士】

【氏名又は名称】涌井 謙一

(74)【代理人】

【識別番号】100117086

【弁理士】

【氏名又は名称】山本 典弘

(74)【代理人】

【識別番号】100124383

【弁理士】

【氏名又は名称】鈴木 一永

(74)【代理人】

【識別番号】100173392

【弁理士】

【氏名又は名称】工藤 貴宏

(74)【代理人】

【識別番号】100189290

【弁理士】

【氏名又は名称】三井 直人

(72)【発明者】

【氏名】宮浦 清

【審査官】山下 剛史

(56)【参考文献】

【文献】特表２０１９－５０７３８９（ＪＰ，Ａ）

【文献】特表２００６－５１３４４８（ＪＰ，Ａ）

【文献】特開２０１１－１３３８８２（ＪＰ，Ａ）

【文献】特開２０１４－２２４９７６（ＪＰ，Ａ）

【文献】国際公開第２０１８／０２１５１９（ＷＯ，Ａ１）

【文献】米国特許出願公開第２０１２／０３１２１４５（ＵＳ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ１０Ｌ １３／００－１３／１０

Ｇ１０Ｈ １／００

Ｇ１０Ｇ １／００

(57)【特許請求の範囲】

【請求項1】

コンテンツデータが入力されると、対応する音声データを生成する音声生成装置であって、
以下の構成を備えることを特徴とする音声生成装置。
（１）以下の構成で構築されるパケットデータが記憶手段に記憶されている。
（ａ）（ｎ＋２）個（ｎ≧１）の音情報記憶スロットからなる（ｎ＋２）音１拍を一単位とする音情報記憶領域
（ｂ）１音を構成する音名コードに対応する第一の音属性コードが、１番目の前記音情報記憶スロットに設定される。
（ｃ）（ｎ＋２）個未満の複数音を構成する音名コードに対応する第二の音属性コードが、以下の条件で前記音情報記憶スロットに設定される。
（ｃ１）前記１番目の音情報記憶スロットに設定される。
（ｃ２）ｎ＝１の場合、２番目又は３番目の音情報記憶スロットに設定される。
（ｃ３）ｎ≧２の場合、偶数番目、奇数番目及び（ｎ＋２）番目の音情報記憶スロットの中から選択される一つの前記音情報記憶スロットに設定される。
（ｃ４）ｎ≧２の場合、さらに、偶数番目、奇数番目及び（ｎ＋２）番目の前記音情報記憶スロットの中から選択される複数の前記音情報記憶スロットの組み合わせに設定される。
（ｄ）（ｎ＋２）個の音を構成する音名コードに対応する第三の音属性コードが、すべての前記音情報記憶スロットに設定される。
（２）以下の手順に従って、入力された前記コンテンツデータに対応する（ｎ＋２）音１拍を一単位とする音声データを生成する音声生成手段
（ａ）入力された前記コンテンツデータを前記第一の音属性コード、前記第二の音属性コード及び前記第三の音属性コードの少なくとも一方と関連付けて前記パケットデータを生成する処理を行う。
（ｂ）前記パケットデータに対応する前記音名コードで構成される前記音声データを生成する処理を行う。

【請求項2】

以下の構成をさらに備える請求項１記載の音声生成装置。
（１）（ｅ）前記パケットデータには、前記第一の音属性コード、前記第二の音属性コード及び前記第三の音属性コードの前記音情報記憶スロットへの設定パターンを表すパターンコードが付与される。
（ｆ）前記パターンコードと、前記第一の音属性コード、前記第二の音属性コード又は前記第三の音属性コードの組み合わせをフレーズコードとし、複数の前記フレーズコードがサウンドＩＤとして設定される。

【請求項3】

以下の構成をさらに備える請求項１記載の音声生成装置。
（１）（ｅ）複数の前記パケットデータが階層化され、一のパケットデータに係る前記音情報記憶領域に、他のパケットデータに係る前記音情報記憶領域が設定されている。
（２）（ｃ）入力された前記コンテンツデータを、何れかの階層の前記パケットデータに設定されている前記第一の音属性コード、前記第二の音属性コード及び前記第三の音属性コードの少なくとも一方と関連付ける処理を行う。

【請求項4】

以下の構成をさらに備えることを特徴とする請求項１から請求項３の何れか一項に記載の音声生成装置。
（３）前記生成された音声データを出力する音声データ出力手段

【請求項5】

コンテンツデータが入力されると、対応する音声データを生成する音声生成装置と、前記音声データを前記音声生成装置から受信する受信端末と、を備える音声生成システムであって、
以下の構成を備えることを特徴とする音声生成システム。
（１）前記音声生成装置は、以下の構成で構築されるパケットデータを記憶している記憶手段を備えている。
（ａ）（ｎ＋２）個（ｎ≧１）の音情報記憶スロットからなる（ｎ＋２）音１拍を一単位とする音情報記憶領域
（ｂ）１音を構成する音名コードに対応する第一の音属性コードが、１番目の前記音情報記憶スロットに設定される。
（ｃ）（ｎ＋２）個未満の複数音を構成する音名コードに対応する第二の音属性コードが、以下の条件で前記音情報記憶スロットに設定される。
（ｃ１）前記１番目の音情報記憶スロットに設定される。
（ｃ２）ｎ＝１の場合、２番目又は３番目の音情報記憶スロットに設定される。
（ｃ３）ｎ≧２の場合、偶数番目、奇数番目及び（ｎ＋２）番目の音情報記憶スロットの中から選択される一つの前記音情報記憶スロットに設定される。
（ｃ４）ｎ≧２の場合、さらに、偶数番目、奇数番目及び（ｎ＋２）番目の前記音情報記憶スロットの中から選択される複数の前記音情報記憶スロットの組み合わせに設定される。
（ｄ）（ｎ＋２）個の音を構成する音名コードに対応する第三の音属性コードが、すべての前記音情報記憶スロットに設定される。
（２）前記音声生成装置は、以下の手順に従って、入力された前記コンテンツデータに対応する（ｎ＋２）音１拍を一単位とする音声データを生成する音声生成手段を備えている。
（ａ）入力された前記コンテンツデータを前記第一の音属性コード、前記第二の音属性コード及び前記第三の音属性コードの少なくとも一方と関連付けて前記パケットデータを生成する処理を行う。
（ｂ）前記パケットデータに対応する前記音名コードで構成される前記音声データを生成する処理を行う。
（３）前記音声生成装置は、前記生成された音声データを出力する音声データ出力手段を備える。
（４）前記受信端末は、前記生成された音声データを、前記コンテンツデータに変換するデータ変換手段を備える。

【請求項6】

請求項５記載の音声生成システムとしてコンピュータを機能させるコンピュータプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

この発明は、音声生成装置、音声生成システム及びコンピュータプログラムに関する。

【背景技術】

【0002】

今日の情報通信社会において、入力した文字情報を所定の言語体系で音声出力する音声変換方法や、特定の情報に対して、当該特定の情報であると識別することができる固有の表現生成方法等が種々提案されている。

【0003】

特許文献１には、発明者による音声生成装置、音声生成方法及びプログラムが提案されている。特許文献１によれば、日本語による文字データから、当該日本語の言語的意味を持った音楽フレーズを生成することができる。

【先行技術文献】

【特許文献】

【0004】

【文献】特開２０１４－２２４９７６号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

特許文献１で提案されている発明では、入力された日本語１文字に対して２音の音符コードを抽出して音声データを生成するため、当該音声データに係る音楽フレーズは全体としてリズムの変化がない平坦なものとなっている。そこで、所定のリズムを有する音楽フレーズを生成することが課題となっていた。

【0006】

この発明は、入力された文字データや記号データ及びこれらの組み合わせに対してリズムの変化を有する音声フレーズを生成し、当該音声フレーズに種々のコンテンツデータを関連付けて提供することを目的とする。

【課題を解決するための手段】

【0007】

［１］
コンテンツデータが入力されると、対応する音声データを生成する音声生成装置であって、
以下の構成を備えることを特徴とする音声生成装置。
（１）以下の構成で構築されるパケットデータが記憶手段に記憶されている。
（ａ）（ｎ＋２）個（ｎ≧１）の音情報記憶スロットからなる（ｎ＋２）音１拍を一単位とする音情報記憶領域
（ｂ）１音を構成する音名コードに対応する第一の音属性コードが、１番目の前記音情報記憶スロットに設定される。
（ｃ）（ｎ＋２）個未満の複数音を構成する音名コードに対応する第二の音属性コードが、以下の条件で前記音情報記憶スロットに設定される。
（ｃ１）前記１番目の音情報記憶スロットに設定される。
（ｃ２）ｎ＝１の場合、２番目又は３番目の音情報記憶スロットに設定される。
（ｃ３）ｎ≧２の場合、偶数番目、奇数番目及び（ｎ＋２）番目の音情報記憶スロットの中から選択される一つの前記音情報記憶スロットに設定される。
（ｃ４）ｎ≧２の場合、さらに、偶数番目、奇数番目及び（ｎ＋２）番目の前記音情報記憶スロットの中から選択される複数の前記音情報記憶スロットの組み合わせに設定される。
（ｄ）（ｎ＋２）個の音を構成する音名コードに対応する第三の音属性コードが、すべての前記音情報記憶スロットに設定される。
（２）以下の手順に従って、入力された前記コンテンツデータに対応する（ｎ＋２）音１拍を一単位とする音声データを生成する音声生成手段
（ａ）入力された前記コンテンツデータを前記第一の音属性コード、前記第二の音属性コード及び前記第三の音属性コードの少なくとも一方と関連付けて前記パケットデータを生成する処理を行う。
（ｂ）前記パケットデータに対応する前記音名コードで構成される前記音声データを生成する処理を行う。

【0008】

［２］
コンテンツデータが入力されると、対応する音声データを生成する音声生成装置と、前記音声データを前記音声生成装置から受信する受信端末と、を備える音声生成システムであって、
以下の構成を備えることを特徴とする音声生成システム。
（１）前記音声生成装置は、以下の構成で構築されるパケットデータを記憶している記憶手段を備えている。
（ａ）（ｎ＋２）個（ｎ≧１）の音情報記憶スロットからなる（ｎ＋２）音１拍を一単位とする音情報記憶領域
（ｂ）１音を構成する音名コードに対応する第一の音属性コードが、１番目の前記音情報記憶スロットに設定される。
（ｃ）（ｎ＋２）個未満の複数音を構成する音名コードに対応する第二の音属性コードが、以下の条件で前記音情報記憶スロットに設定される。
（ｃ１）前記１番目の音情報記憶スロットに設定される。
（ｃ２）ｎ＝１の場合、２番目又は３番目の音情報記憶スロットに設定される。
（ｃ３）ｎ≧２の場合、偶数番目、奇数番目及び（ｎ＋２）番目の音情報記憶スロットの中から選択される一つの前記音情報記憶スロットに設定される。
（ｃ４）ｎ≧２の場合、さらに、偶数番目、奇数番目及び（ｎ＋２）番目の前記音情報記憶スロットの中から選択される複数の前記音情報記憶スロットの組み合わせに設定される。
（ｄ）（ｎ＋２）個の音を構成する音名コードに対応する第三の音属性コードが、すべての前記音情報記憶スロットに設定される。
（２）前記音声生成装置は、以下の手順に従って、入力された前記コンテンツデータに対応する（ｎ＋２）音１拍を一単位とする音声データを生成する音声生成手段を備えている。
（ａ）入力された前記コンテンツデータを前記第一の音属性コード、前記第二の音属性コード及び前記第三の音属性コードの少なくとも一方と関連付けて前記パケットデータを生成する処理を行う。
（ｂ）前記パケットデータに対応する前記音名コードで構成される前記音声データを生成する処理を行う。
（３）前記音声生成装置は、前記生成された音声データを出力する音声データ出力手段を備える。
（４）前記受信端末は、前記生成された音声データを、前記コンテンツデータに変換するデータ変換手段を備える。

【発明の効果】

【0009】

この発明によれば、入力された文字データや記号データ及びこれらの組み合わせに対してリズムの変化を有する音声フレーズを生成し、当該音声フレーズに種々のコンテンツデータを関連付けて提供することができる。

【図面の簡単な説明】

【0010】

【図1】（ａ）本実施形態の音声生成装置及び音声生成システムを構成する受信端末のハードウェア構成の一例、（ｂ）本実施形態の音声生成装置のソフトウェア構成の一例を表す図、（ｃ）本実施形態の音声生成システムを構成する受信端末のソフトウェア構成の一例を表す図

【図2】（ａ）音情報記憶領域の一例を表す図、（ｂ）音名コードと変換コードの対応関係の一例を表す図、（ｃ）パケットデータの一例を表す図、（ｄ）音声データの一例を表す図

【図3】（ａ）１音マトリクスの一例を表す図、（ｂ）２音マトリクスの一例を表す図、（ｃ）３音マトリクスの一例を表す図

【図4】（ａ）音情報記憶領域の他の一例を表す図、（ｂ）音名コードと変換コードの対応関係の一例を表す図、（ｃ）パケットデータの他の一例を表す図、（ｄ）音声データの他の一例を表す図

【図5】（ａ）１音マトリクスの一例を表す図、（ｂ）２音マトリクスの一例を表す図、（ｃ）３音マトリクスの一例を表す図、（ｄ）４音マトリクスの一例を表す図

【図6】（ａ）音情報記憶領域の他の一例を表す図、（ｂ）音名コードと変換コードの対応関係の他の一例を表す図

【図7】音属性コードの配列パターンの類型を表す図

【図8】サウンドＩＤの構成を説明する図

【図9】パケットデータの階層構造の一例を表す図

【図10】入力データから音声データを生成する説明の一例を表す図

【図11】パケットデータの階層構造における入力データから音声データを生成する説明の一例を表す図

【図12】図１１に続き、入力データから音声データを生成する説明の一例を表す図

【図13】コンテンツデータの階層構造の一例を表す図

【図14】本実施形態の音声生成システムによる処理の一例を表すフロー図

【発明を実施するための形態】

【0011】

以下、添付図面を参照して本発明の実施形態の一例を説明する。本実施形態の一態様である音声生成装置は、文字データ、記号データ、画像データ、映像データ又はこれらの組み合わせからなるコンテンツデータ（以下、「入力データ」ということがある。）に対応する音声データを生成する機器又はサーバである。

【0012】

本実施形態の音声生成装置による音声生成プロセスとしては以下の態様を例示できる。
・本実施形態の音声生成装置が入力データを受け付け、対応する音声データを生成及び出力する態様
・本実施形態の音声生成装置が入力データを受け付け、対応する音声データを生成し、当該音声データを受信端末である外部の出力機器又は装置に送信し出力させる態様
・外部の入力機器又は装置から入力データを本実施形態の音声生成装置が受信し、対応する音声データを生成及び出力する態様
・外部の入力機器又は装置から入力データを本実施形態の音声生成装置が受信し、対応する音声データを生成し、当該音声データを受信端末である外部の出力機器又は装置に送信し出力させる態様
本実施形態では、文字データには日本語のかな文字や他の言語体系の文字のデータが含まれ、記号データには、濁点、半濁点、長音、句読点、数字及びその他の記号のデータが含まれるものとして説明する。

【0013】

また、本実施形態には、この実施形態で説明する音声生成システムとしてコンピュータを機能させるコンピュータプログラムを含む。

【0014】

本実施形態で説明する音声生成装置及び受信端末には本実施形態の音声生成システムによる音声生成サービスに係るアプリケーションソフトウェアがインストールされている。このアプリケーションソフトウェアを実行することで、入力データに対応する音声データを生成し出力すること及び音声データから入力データへの変換処理ができる。

【0015】

［音声生成装置］
本実施形態の音声生成装置１はパーソナルコンピュータ、スマートフォン、タブレット、等の端末機器や、ミュージックシーケンサー、ＭＩＤＩコントローラ、シンセサイザー、ミュージックワークステーション、等のＭＩＤＩデータやオーディオデータを扱える電子機器や、サーバ装置である。

【0016】

ハードウェア構成として図１（ａ）に示すように、各種コンピュータプログラムの実行及び演算処理を行うＣＰＵ２、ＲＡＭ、ＲＯＭといった各種データを記憶するメモリ３、内蔵ストレージ等の補助記憶装置４、ＭＩＤＩケーブル等の有線接続や、インターネット通信網、無線通信規格で定められている無線通信網によるネットワーク接続、等の通信手段を介して外部の入力機器及び出力機器との間で各種情報を送受信する通信モジュール５、マウス、キーボード、タッチパネル等の入力装置６及び液晶ディスプレイ、スピーカ等の出力装置７を備えている。

【0017】

また、音声生成装置１はソフトウェア構成として図１（ｂ）に示すように、データ入力部１０１、データ受信部１０２、記憶部１０３、音声データ生成部１０５及び音声データ出力部１０６を備えている。ＣＰＵ２及びメモリ３等が協働することでこれらの処理部による情報処理が制御される。

【0018】

データ入力部１０１は、例えば事業者等のデータ入力者が音声生成装置１を上記端末機器や電子機器として使用する際に、コンテンツデータの入力ウインドウを表示画面に表示し、入力データを受け付ける処理を行う。

【0019】

データ受信部１０２は、上述した外部の入力機器又は装置から送信される入力データを受信する処理を行う。なお、上記外部の入力機器又は装置は、パーソナルコンピュータ、スマートフォン、タブレット、等の端末機器や、ミュージックシーケンサー、ＭＩＤＩコントローラ、シンセサイザー、ミュージックワークステーション、等のＭＩＤＩデータやオーディオデータを扱える電子機器である。

【0020】

記憶部１０３には、パケットデータ１７が記憶されている。本実施形態のパケットデータ１７は、（ｎ＋２）個（ｎ≧１）の音情報記憶スロットからなる（ｎ＋２）音１拍を一単位とする音情報記憶領域を備えている。パケットデータ１７の構成例を以下に示す。

【0021】

（パケットデータの構成例１）
図２に示すｎ＝１の例では、パケットデータ１７は、３つの音情報記憶スロット１０ａ、１０ｂ、１０ｃからなる３音１拍を一単位とする音情報記憶領域９を備えている。

【0022】

一番目の音情報記憶スロット１０ａには、図３（ａ）に示すような１音マトリクス１１ａが設定されている。

【0023】

１音マトリクス１１ａは、１音に対応する変換コード１２を１０通り設定可能なマトリクスとなっている。図２（ｂ）、（ｃ）及び図３（ａ）に示すように、一番目の音情報記憶スロット１０ａに、１音に対応する第一の音属性コード（１音属性コード）１３を０から９の１０種類の変換コード１２を用いて１０通り設定することができる。以下、変換コード１２が設定されていない音情報記憶スロット１０には休符を表す休符コードが設定される。

【0024】

第一の音属性コード１３に音名コード１６が関連付けられる。例えば図２（ｄ）に示すように、一番目の音情報記憶スロット１０ａに設定されている第一の音属性コード１３「０」に音名「ド（Ｃ）」を表す音名コード１６が関連付けられる。

【0025】

一番目の音情報記憶スロット１０ａと二番目の音情報記憶スロット１０ｂの組み合わせ又は一番目の音情報記憶スロット１０ａと三番目の音情報記憶スロット１０ｃの組み合わせには、図３（ｂ）に示すような２音マトリクス１１ｂが設定されている。

【0026】

２音マトリクス１１ｂは、２音に対応する変換コード１２を２００通り設定可能なマトリクスとなっている。図２（ｂ）、（ｃ）及び図３（ｂ）に示すように、一番目の音情報記憶スロット１０ａと二番目の音情報記憶スロット１０ｂの組み合わせ及び一番目の音情報記憶スロット１０ａと三番目の音情報記憶スロット１０ｃの組み合わせに、２音に対応する第二の音属性コード（２音属性コード）１４を０から９の１０種類の変換コード１２を用いて２００通り設定することができる。

【0027】

第二の音属性コード１４に音名コード１６が関連付けられる。例えば図２（ｄ）に示すように、一番目の音情報記憶スロット１０ａと二番目の音情報記憶スロット１０ｂの組み合わせに設定されている第二の音属性コード１４「２４」に音名「ミソ（ＥＧ）」を表す二つの音名コード１６が関連付けられる。

【0028】

一番目の音情報記憶スロット１０ａ、二番目の音情報記憶スロット１０ｂ及び三番目の音情報記憶スロット１０ｃの組み合わせには、図３（ｃ）に示すような３音マトリクス１１ｃが設定されている。

【0029】

３音マトリクス１１ｃは、３音に対応する変換コード１２を１０００通り設定可能なマトリクスとなっている。図２（ｂ）、（ｃ）及び図３（ｃ）に示すように、一番目の音情報記憶スロット１０ａ、二番目の音情報記憶スロット１０ｂ及び三番目の音情報記憶スロット１０ｃの組み合わせに、３音を表す第三の音属性コード（３音属性コード）１５を０から９の１０種類の変換コード１２を用いて１０００通り設定することができる。

【0030】

第三の音属性コード１５に音名コード１６が関連付けられる。例えば図２（ｄ）に示すように、一番目の音情報記憶スロット１０ａ、二番目の音情報記憶スロット１０ｂ及び三番目の音情報記憶スロット１０ｃの組み合わせに設定されている第三の音属性コード１５「０１５」に音名「ドレラ（ＣＤＡ）」を表す三つの音名コード１６が関連付けられる。

【0031】

上記第一の音属性コード１３、第二の音属性コード１４及び第三の音属性コード１５の少なくとも一方にコンテンツデータが関連付けられたパケットデータ１７が記憶部１０３に記憶される。

【0032】

以上から、ｎ＝１の場合、パケットデータ１７は以下の構成で構築され、１２１０種類のコンテンツデータを設定することができる。
（ａ）３つの音情報記憶スロット１０からなる３音１拍を一単位とする音情報記憶領域９
（ｂ）１音を構成する音名コードに対応する第一の音属性コード１３が、１番目の音情報記憶スロット１０ａに設定される。
（ｃ）２音を構成する音名コードに対応する第二の音属性コード１４が、以下の音情報記憶スロット１０に設定される。
（ｃ１）１番目の音情報記憶スロット１０ａ
（ｃ２）２番目の音情報記憶スロット１０ｂ又は３番目の音情報記憶スロット１０ｃ
（ｄ）３音を構成する音名コードに対応する第三の音属性コード１５が、音情報記憶スロット１０ａ、１０ｂ、１０ｃに設定される。

【0033】

（パケットデータの構成例２）
図４に示すｎ＝２の例では、パケットデータ１７は、４つの音情報記憶スロット１０からなる４音１拍を一単位とする音情報記憶領域９を備えている。

【0034】

一番目の音情報記憶スロット１０ａには、図５（ａ）に示すような１音マトリクス１１ａが設定されている。

【0035】

１音マトリクス１１ａは、１音に対応する変換コード１２を１０通り設定可能なマトリクスとなっている。図４（ｂ）、（ｃ）及び図５（ａ）に示すように、一番目の音情報記憶スロット１０ａに、１音に対応する第一の音属性コード（１音属性コード）１３を０から９の１０種類の変換コード１２を用いて１０通り設定することができる。

【0036】

第一の音属性コード１３に音名コード１６が関連付けられる。例えば図４（ｄ）に示すように、一番目の音情報記憶スロット１０ａに設定されている第一の音属性コード１３「０」に音名「ド（Ｃ）」を表す音名コード１６が関連付けられる。

【0037】

一番目の音情報記憶スロット１０ａと二番目の音情報記憶スロット１０ｂの組み合わせ、一番目の音情報記憶スロット１０ａと三番目の音情報記憶スロット１０ｃの組み合わせ又は一番目の音情報記憶スロット１０ａと四番目の音情報記憶スロット１０ｄの組み合わせには、それぞれ図５（ｂ）に示すような２音マトリクス１１ｂが設定されている。

【0038】

２音マトリクス１１ｂは、２音に対応する変換コード１２を３００通り設定可能なマトリクスとなっている。図４（ｂ）、（ｃ）及び図５（ｂ）に示すように、一番目の音情報記憶スロット１０ａと二番目の音情報記憶スロット１０ｂの組み合わせ、一番目の音情報記憶スロット１０ａと三番目の音情報記憶スロット１０ｃの組み合わせ及び一番目の音情報記憶スロット１０ａと四番目の音情報記憶スロット１０ｄの組み合わせに、２音に対応する第二の音属性コード（２音属性コード）１４ａを０から９の１０種類の変換コード１２を用いて３００通り設定することができる。

【0039】

第二の音属性コード１４ａに音名コード１６が関連付けられる。例えば図４（ｄ）に示すように、一番目の音情報記憶スロット１０ａと二番目の音情報記憶スロット１０ｂの組み合わせに設定されている第二の音属性コード１４ａ「２４」に音名「ミソ（ＥＧ）」を表す二つの音名コード１６が関連付けられる。

【0040】

一番目の音情報記憶スロット１０ａと二番目の音情報記憶スロット１０ｂと三番目の音情報記憶スロット１０ｃの組み合わせ、一番目の音情報記憶スロット１０ａと三番目の音情報記憶スロット１０ｃと四番目の音情報記憶スロット１０ｄの組み合わせ又は一番目の音情報記憶スロット１０ａと二番目の音情報記憶スロット１０ｂ及び四番目の音情報記憶スロット１０ｄには、それぞれ図５（ｃ）に示すような３音マトリクス１１ｃが設定されている。

【0041】

３音マトリクス１１ｃは、３音に対応する変換コード１２を３０００通り設定可能なマトリクスとなっている。例えば図４（ｂ）、（ｃ）及び図５（ｃ）に示すように、一番目の音情報記憶スロット１０ａと二番目の音情報記憶スロット１０ｂと三番目の音情報記憶スロット１０ｃの組み合わせ、一番目の音情報記憶スロット１０ａと三番目の音情報記憶スロット１０ｃと四番目の音情報記憶スロット１０ｄの組み合わせ及び一番目の音情報記憶スロット１０ａと二番目の音情報記憶スロット１０ｂと四番目の音情報記憶スロット１０ｄの組み合わせに、３音に対応する第二の音属性コード（３音属性コード）１４ｂを０から９の１０種類の変換コード１２を用いて３０００通り設定することができる。

【0042】

第二の音属性コード１４ｂに音名コード１６が関連付けられる。例えば図４（ｄ）に示すように、一番目の音情報記憶スロット１０ａと二番目の音情報記憶スロット１０ｂと三番目の音情報記憶スロット１０ｃの組み合わせに設定されている第二の音属性コード１４ｂ「０１５」に音名「ドレラ（ＣＤＡ）」を表す三つの音名コード１６が関連付けられる。

【0043】

一番目の音情報記憶スロット１０ａ、二番目の音情報記憶スロット１０ｂ、三番目の音情報記憶スロット１０ｃ及び四番目の音情報記憶スロット１０ｄの組み合わせには、図５（ｄ）に示すような４音マトリクス１１ｄが設定されている。

【0044】

４音マトリクス１１ｄは、４音に対応する変換コード１２を１００００通り設定可能なマトリクスとなっている。図４（ｂ）、（ｃ）及び図５（ｄ）に示すように、一番目の音情報記憶スロット１０ａ、二番目の音情報記憶スロット１０ｂ、三番目の音情報記憶スロット１０ｃ及び四番目の音情報記憶スロット１０ｄの組み合わせに、４音に対応する第三の音属性コード（４音属性コード）１５を０から９の１０種類の変換コード１２を用いて１００００通り設定することができる。

【0045】

第三の音属性コード１５に音名コード１６が関連付けられる。例えば、図４（ｄ）に示すように、一番目の音情報記憶スロット１０ａ、二番目の音情報記憶スロット１０ｂ、三番目の音情報記憶スロット１０ｃ及び四番目の音情報記憶スロット１０ｄの組み合わせに設定されている第三の音属性コード１５「０１５３」に音名「ドレラファ（ＣＤＡＦ）」を表す４つの音名コード１６が関連付けられる。

【0046】

上記第一の音属性コード１３、第二の音属性コード１４ａ、１４ｂ及び第三の音属性コード１５の少なくとも一方にコンテンツデータが関連付けられたパケットデータ１７が記憶部１０３に記憶される。

【0047】

以上から、ｎ＝２の場合、パケットデータ１７は以下の構成で構築され、１３３１０種類のコンテンツデータを設定することができる。
（ａ）４つの音情報記憶スロット１０からなる４音１拍を一単位とする音情報記憶領域９
（ｂ）１音を構成する音名コードに対応する第一の音属性コード１３が、１番目の音情報記憶スロット１０ａに設定される。
（ｃ）２音及び３音を構成する音名コードに対応する第二の音属性コード１４ａ、１４ｂが、以下の音情報記憶スロット１０に設定される。
（ｃ１）１番目の音情報記憶スロット１０ａ
（ｃ２）２番目（偶数番目）の音情報記憶スロット１０ｂ又は３番目（奇数番目）の音情報記憶スロット１０ｃ
（ｃ３）２番目（偶数番目）の音情報記憶スロット１０ｂ、３番目（奇数番目）の音情報記憶スロット１０ｃ及び４番目（（ｎ＋２）番目）の音情報記憶スロット１０ｄの中から選択される複数の音情報記憶スロット１０
（ｄ）４音を構成する音名コードに対応する第三の音属性コード１５が、音情報記憶スロット１０ａ、１０ｂ、１０ｃ、１０ｄに設定される。

【0048】

また、パケットデータの構成例１及び構成例２から、ｎ≧２の場合、パケットデータ１７は以下の構成で構築されることとなる。
（ａ）（ｎ＋２）個の音情報記憶スロット１０からなる（ｎ+２）音１拍を一単位とする音情報記憶領域９
（ｂ）１音を構成する音名コードに対応する第一の音属性コード１３が、１番目の音情報記憶スロット１０ａに設定される。
（ｃ）（ｎ＋２）個未満の複数音を構成する音名コードに対応する第二の音属性コード１４が、以下の音情報記憶スロット１０に設定される。
（ｃ１）１番目の音情報記憶スロット１０ａ
（ｃ２）偶数番目の音情報記憶スロット１０、奇数番目の音情報記憶スロット１０及び（ｎ＋２）番目の音情報記憶スロット１０の中から選択される一つの音情報記憶スロット１０
（ｃ３）上記（ｃ２）のほか、偶数番目の音情報記憶スロット１０、奇数番目の音情報記憶スロット１０及び（ｎ＋２）番目の音情報記憶スロット１０の中から選択される複数の音情報記憶スロット１０の組み合わせ
（ｄ）（ｎ＋２）音を構成する音名コードに対応する第三の音属性コード１５が、すべての音情報記憶スロット１０に設定される。

【0049】

（パケットデータの構成例３）
図６－図８に示す例では、パケットデータ１７は、４つの音情報記憶スロット１０からなる４音１拍を一単位とする音情報記憶領域９を備えている。

【0050】

一番目の音情報記憶スロット１０ａには、１音マトリクス１１ａが設定されている。

【0051】

１音マトリクス１１ａは、１音に対応する変換コード１２を２５通り設定可能なマトリクスとなっている。具体的には、一番目の音情報記憶スロット１０ａに、１音に対応する第一の音属性コード（１音属性コード）１３を図６（ｂ）に示す２５種類の変換コード１２を用いて２５通り設定することができる。

【0052】

また、第一の音属性コード１３が設定されたパケットデータ１７には、図７に示すようにパターンコード２０「ａ」が付与される。パターンコード２０は第一の音属性コード１３、第二の音属性コード１４及び第三の音属性コード１５の４つの音情報記憶スロット１０への設定パターンを表す。

【0053】

第一の音属性コード１３は、図７に示すように一番目の音情報記憶スロット１０ａに設定されるので、パターンコード２０は１種類となる。

【0054】

第一の音属性コード１３に音名コード１６が関連付けられる。例えば図６（ｂ）及び図７に示すように、一番目の音情報記憶スロット１０ａに設定されている第一の音属性コード１３「１」に音名「ド（Ｃ）」を表す音名コード１６が関連付けられる。

【0055】

一番目の音情報記憶スロット１０ａと二番目の音情報記憶スロット１０ｂの組み合わせ、一番目の音情報記憶スロット１０ａと三番目の音情報記憶スロット１０ｃの組み合わせ又は一番目の音情報記憶スロット１０ａと四番目の音情報記憶スロット１０ｄの組み合わせには、２音マトリクス１１ｂが設定されている。

【0056】

２音マトリクス１１ｂは、２音に対応する変換コード１２を１８７５通り設定可能なマトリクスとなっている。具体的には、一番目の音情報記憶スロット１０ａと二番目の音情報記憶スロット１０ｂの組み合わせ、一番目の音情報記憶スロット１０ａと三番目の音情報記憶スロット１０ｃの組み合わせ及び一番目の音情報記憶スロット１０ａと四番目の音情報記憶スロット１０ｄの組み合わせに、２音に対応する第二の音属性コード（２音属性コード）１４ａを図６（ｂ）に示す２５種類の変換コード１２を用いて１８７５（６２５×３）通り設定することができる。

【0057】

また、第二の音属性コード１４ａが設定されたパケットデータ１７には、図７に示すようにパターンコード２０「ｂ」、「ｃ」、「ｄ」の何れかが付与される。

【0058】

第二の音属性コード１４ａは、図７に示すように一番目の音情報記憶スロット１０ａと二番目の音情報記憶スロット１０ｂの組み合わせ、一番目の音情報記憶スロット１０ａと三番目の音情報記憶スロット１０ｃの組み合わせ又は一番目の音情報記憶スロット１０ａと四番目の音情報記憶スロット１０ｄの組み合わせに設定されるので、パターンコード２０は３種類となる。

【0059】

第二の音属性コード１４ａに音名コード１６が関連付けられる。例えば図６（ｂ）及び図７に示すように、一番目の音情報記憶スロット１０ａと二番目の音情報記憶スロット１０ｂの組み合わせに設定されている第二の音属性コード１４ａ「１２」に音名「ドド^＃（ＣＣ^＃）」を表す二つの音名コード１６が関連付けられる。

【0060】

一番目の音情報記憶スロット１０ａと二番目の音情報記憶スロット１０ｂと三番目の音情報記憶スロット１０ｃの組み合わせ、一番目の音情報記憶スロット１０ａと二番目の音情報記憶スロット１０ｂ及び四番目の音情報記憶スロット１０ｄ又は一番目の音情報記憶スロット１０ａと三番目の音情報記憶スロット１０ｃと四番目の音情報記憶スロット１０ｄの組み合わせには、３音マトリクス１１ｃが設定されている。

【0061】

３音マトリクス１１ｃは、３音に対応する変換コード１２を４６８７５通り設定可能なマトリクスとなっている。具体的には、一番目の音情報記憶スロット１０ａと二番目の音情報記憶スロット１０ｂと三番目の音情報記憶スロット１０ｃの組み合わせ、一番目の音情報記憶スロット１０ａと二番目の音情報記憶スロット１０ｂと四番目の音情報記憶スロット１０ｄの組み合わせ及び一番目の音情報記憶スロット１０ａと三番目の音情報記憶スロット１０ｃと四番目の音情報記憶スロット１０ｄの組み合わせに、３音に対応する第二の音属性コード（３音属性コード）１４ｂを図６（ｂ）に示す２５種類の変換コード１２を用いて４６８７５（１５６２５×３）通り設定することができる。

【0062】

また、第二の音属性コード１４ｂが設定されたパケットデータ１７には、図７に示すようにパターンコード２０「ｅ」、「ｆ」、「ｇ」の何れかが付与される。

【0063】

第二の音属性コード１４ｂは、図７に示すように一番目の音情報記憶スロット１０ａと二番目の音情報記憶スロット１０ｂと三番目の音情報記憶スロット１０ｃの組み合わせ、一番目の音情報記憶スロット１０ａと二番目の音情報記憶スロット１０ｂと四番目の音情報記憶スロット１０ｄの組み合わせ又は一番目の音情報記憶スロット１０ａと三番目の音情報記憶スロット１０ｃ及び四番目の音情報記憶スロット１０ｄの組み合わせに設定されるので、パターンコード２０は３種類となる。

【0064】

第二の音属性コード１４ｂに音名コード１６が関連付けられる。例えば図６（ｂ）及び図７に示すように、一番目の音情報記憶スロット１０ａと二番目の音情報記憶スロット１０ｂと三番目の音情報記憶スロット１０ｃの組み合わせに設定されている第二の音属性コード１４ｂ「１２３」に音名「ドド^＃レ（ＣＣ^＃Ｄ）」を表す三つの音名コード１６が関連付けられる。

【0065】

一番目の音情報記憶スロット１０ａ、二番目の音情報記憶スロット１０ｂ、三番目の音情報記憶スロット１０ｃ及び四番目の音情報記憶スロット１０ｄの組み合わせには、４音マトリクス１１ｄが設定されている。

【0066】

４音マトリクス１１ｄは、４音に対応する変換コード１２を３９０６２５通り設定可能なマトリクスとなっている。具体的には、一番目の音情報記憶スロット１０ａ、二番目の音情報記憶スロット１０ｂ、三番目の音情報記憶スロット１０ｃ及び四番目の音情報記憶スロット１０ｄの組み合わせに、４音に対応する第三の音属性コード（４音属性コード）１５を図６（ｂ）に示す２５種類の変換コード１２を用いて３９０６２５通り設定することができる。

【0067】

第三の音属性コード１５に音名コード１６が関連付けられる。例えば、図６（ｂ）及び図７に示すように、一番目の音情報記憶スロット１０ａ、二番目の音情報記憶スロット１０ｂ、三番目の音情報記憶スロット１０ｃ及び四番目の音情報記憶スロット１０ｄの組み合わせに設定されている第三の音属性コード１５「１２３４」に音名「ドド^＃レレ^＃（ＣＣ^＃ＤＤ^＃」を表す４つの音名コード１６が関連付けられる。

【0068】

また、第三の音属性コード１５が設定されたパケットデータ１７には、図７に示すようにパターンコード２０「ｈ」が付与される。

【0069】

第三の音属性コード１５は、図７に示すように一番目の音情報記憶スロット１０ａ、二番目の音情報記憶スロット１０ｂ、三番目の音情報記憶スロット１０ｃ及び四番目の音情報記憶スロット１０ｄの組み合わせに設定されるので、パターンコード２０は１種類となる。

【0070】

上記第一の音属性コード１３、第二の音属性コード１４ａ、１４ｂ及び第三の音属性コード１５の少なくとも一方にコンテンツデータが関連付けられたパケットデータ１７が記憶部１０３に記憶される。この構成例のパケットデータ１７では、４３９４００種類のコンテンツデータを設定することができる。

【0071】

また、この構成例では、パターンコード２０と第一の音属性コード１３の組み合わせ、パターンコード２０と第二の音属性コード１４ａ、１４ｂの組み合わせ又はパターンコード２０と第三の音属性コード１５の組み合わせにフレーズコード２１が付与され、複数のフレーズコード２１がサウンドＩＤ２２として設定されている。

【0072】

図８に示す例では、３つのフレーズコード２１をサウンドＩＤ２２として設定している。これにより、フレーズコード２１の数と音名コード１６が固定された特定のメロディをサウンドＩＤ２２として設定することができる。

【0073】

（パケットデータの構成例４）
この構成例では、上記構成例１から構成例３で説明したパケットデータに係る音情報記憶領域に、別のパケットデータに係る音声情報記憶領域が設定されている。

【0074】

図９に示す例では、１音マトリクス１１ａ、２音マトリクス１１ｂ及び３音マトリクス１１ｃが設定されている音情報記憶領域９を備える３つのパケットデータ１７ａ、１７ｂ、１７ｃが階層化されている。図９では、以下の階層構造が形成されている。
・パケットデータ１７ａに係る音情報記憶領域９ａの各音情報記憶スロット１０に、パケットデータ１７ｂに係る音情報記憶領域９ｂが設定されている。
・パケットデータ１７ｂに係る音情報記憶領域９ｂの各音情報記憶スロット１０に、パケットデータ１７ｃに係る音情報記憶領域９ｃが設定されている。

【0075】

このような構成によりメロディによる情報のツリー化、情報のインデックス化が可能となる。

【0076】

上記と同様の効果が得られるのであれば、１音マトリクス１１ａ、２音マトリクス１１ｂ、３音マトリクス１１ｃ及び４音マトリクス１１ｄが設定されている音情報記憶領域９を備える４つのパケットデータ１７ａ、１７ｂ、１７ｃ、１７ｄを階層化してもよい。この場合、以下の階層構造が形成される。
・パケットデータ１７ａに係る音情報記憶領域９ａの各音情報記憶スロット１０に、パケットデータ１７ｂに係る音情報記憶領域９ｂが設定される。
・パケットデータ１７ｂに係る音情報記憶領域９ｂの各音情報記憶スロット１０に、パケットデータ１７ｃに係る音情報記憶領域９ｃが設定される。
・パケットデータ１７ｃに係る音情報記憶領域９ｃの各音情報記憶スロット１０に、パケットデータ１７ｄに係る音情報記憶領域９ｄが設定される。

【0077】

音声データ生成部１０５は、入力データに対応する音声データを生成する処理を行う。本実施形態では以下のように入力データを処理して音声データを生成する。

【0078】

（１）パケットデータ１７が、上記パケットデータの構成例１で説明した１音マトリクス１１ａ、２音マトリクス１１ｂ及び３音マトリクス１１ｃで構成されている場合、入力データは第一の音属性コード１３、第二の音属性コード１４及び第三の音属性コード１５の少なくとも一方と関連付けられる。

【0079】

例えば、図１０に示すように、文字データ「Thank you」が入力された場合、以下の処理が行われる。

【0080】

（ａ１）文字データ「T」、「n」及び「o」がそれぞれパケットデータ１７の一番目の音情報記憶スロット１０ａに割り当てられ、１音に対応する第一の音属性コード１３「０」、「６」及び「２」と関連付けられる。

【0081】

（ａ２）文字データ「h」、「k」及び「u」がそれぞれパケットデータ１７の一番目の音情報記憶スロット１０ａ及び二番目の音情報記憶スロット１０ｂに割り当てられ、２音に対応する第二の音属性コード１４「１２」、「７８」及び「３４」と関連付けられる。

【0082】

（ａ３）文字データ「a」及び「y」がそれぞれパケットデータ１７の一番目の音情報記憶スロット１０ａ、二番目の音情報記憶スロット１０ｂ及び三番目の音情報記憶スロット１０ｃに割り当てられ、３音に対応する第三の音属性コード１５「３４５」及び「９０１」と関連付けられる。
上記のほか、以下の処理を行うことができる。

【0083】

（ｂ１）一番目、四番目、七番目のパケットデータ１７の一番目の音情報記憶スロット１０ａに、それぞれ１音に対応する第一の音属性コード１３「０」、「６」及び「２」が設定される。

【0084】

（ｂ２）二番目、五番目、八番目のパケットデータ１７の一番目の音情報記憶スロット１０ａ及び二番目の音情報記憶スロット１０ｂに、それぞれ２音に対応する第二の音属性コード１４「１２」、「７８」及び「３４」が設定される。

【0085】

（ｂ３）三番目、六番目のパケットデータ１７の一番目の音情報記憶スロット１０ａ、二番目の音情報記憶スロット１０ｂ及び三番目の音情報記憶スロット１０ｃに、それぞれ３音に対応する第三の音属性コード１５「３４５」及び「９０１」が設定される。

【0086】

（ｂ４）第一の音属性コード１３、第二の音属性コード１４及び第三の音属性コード１５の組み合わせ「０ １２ ３４５ ６ ７８ ９０１ ２ ３４」に「Thank you」が関連付けられる。

【0087】

音声データ生成部１０５は、上記関連付けられた音属性コードで構成される一乃至複数の音声データを生成する処理を行う。

【0088】

例えば、図２（ｂ）及び図１０に示すように、第一の音属性コード１３「０」、「６」、「２」に対応する「Ｃ（ド）」、「Ｂ（シ）」、「Ｅ（ミ）」と、第二の音属性コード１４「１２」、「７８」、「３４」に対応する「ＤＥ（レミ）」、「Ｃ２Ｄ２（ド２レ２）」、「ＦＧ（ファソ）」と、第三の音属性コード１５「３４５」、「９０１」に対応する「ＦＧＡ（ファソラ）」、「Ｅ２ＣＤ（ミ２ドレ）」を表す音名コード１６で構成される３音１拍で８フレーズの音声データ１９を生成する処理を行う。

【0089】

（２）パケットデータ１７が、上記パケットデータの構成例３で説明した１音マトリクス１１ａ、２音マトリクス１１ｂ、３音マトリクス１１ｃ及び４音マトリクス１１ｄで構成され、上記パケットデータの構成例４で説明したパケットデータに係る音情報記憶領域の各音情報記憶スロット１０に、別のパケットデータに係る音声情報記憶領域が設定されている場合、入力データは、階層化されている音情報記憶領域の第一の音属性コード１３、第二の音属性コード１４及び第三の音属性コード１５の少なくとも一方と関連付けられる。

【0090】

図１１に示す例では、１音マトリクス１１ａ、２音マトリクス１１ｂ、３音マトリクス１１ｃ及び４音マトリクス１１ｄが設定されている音情報記憶領域９を備える２つのパケットデータ１７ａ、１７ｂが階層化されている。第一階層目のパケットデータ１７ａに係る音情報記憶領域９ａの音情報記憶スロット１０ａに、第二階層目のパケットデータ１７ｂに係る音情報記憶領域９ｂが設定されている。

【0091】

また、第一階層目の各パケットデータ１７ａには図７に示すパターンコード２０「ｇ」、「ｂ」、「ｈ」及びフレーズコード２１「ｇ３５９」、「ｂ１３」、「ｈＫＭＮＷ」が付与され、３つのフレーズコード２１をサウンドＩＤ２２として設定している。さらに、第二階層目のパケットデータ１７ｂには図７に示すパターンコード２０「ｄ」及びフレーズコード２１「ｄ４Ｐ」が付与されている。

【0092】

この場合において、例えばローマ字及び記号の組み合わせで構成される所定のＷｅｂサイトのアドレスや、商品へのリンク先のアドレスが入力されると、以下の処理が行われる。

【0093】

（ａ１）Ｗｅｂサイトのアドレスのうち、文字データ「www.」の部分が第一階層目の一番目のパケットデータ１７ａの一番目の音情報記憶スロット１０ａ、三番目の音情報記憶スロット１０ｃ及び四番目の音情報記憶スロット１０ｄに割り当てられ、３音に対応する第二の音属性コード１４ｂ「３５９」と関連付けられる。

【0094】

（ａ２）Ｗｅｂサイトのアドレスのうち、文字データ「XYZ.」の部分が第一階層目の二番目のパケットデータ１７ａの一番目の音情報記憶スロット１０ａ及び二番目の音情報記憶スロット１０ｂに割り当てられ、２音に対応する第二の音属性コード１４ａ「１３」と関連付けられる。

【0095】

（ａ３）Ｗｅｂサイトのアドレスのうち、文字データ「co.jp」の部分が第一階層目の三番目のパケットデータ１７ａの一番目の音情報記憶スロット１０ａ、二番目の音情報記憶スロット１０ｂ、三番目の音情報記憶スロット１０ｃ及び四番目の音情報記憶スロット１０ｄに割り当てられ、４音に対応する第三の音属性コード１５「ＫＭＮＷ」と関連付けられる。

【0096】

（ａ４）ＨＰからのリンク先となる商品情報のページのアドレスのうち、文字データ「/pro」の部分が第二階層目のパケットデータ１７ｂの一番目の音情報記憶スロット１０ａ及び四番目の音情報記憶スロット１０ｄに割り当てられ、２音に対応する第二の音属性コード１４ａ「４Ｐ」と関連付けられる。
上記のほか、以下の処理を行うことができる。

【0097】

（ｂ１）第一階層目の第二の音属性コード１４ａ、１４ｂ及び第三の音属性コード１５の組み合わせ「３５９ １３ ＫＭＮＷ」にＷｅｂサイトのアドレス「www.XYZ.co.jp」が関連付けられる。

【0098】

（ｂ２）第二階層目の第二の音属性コード１４ａ「４Ｐ」に商品情報のページのアドレスのうち、文字データ「/pro」の部分が関連付けられる。

【0099】

音声データ生成部１０５は、上記関連付けられた音属性コードで構成される一乃至複数の音声データを生成する処理を行う。

【0100】

例えば、図６（ｂ）及び図１１に示すように、第二の音属性コード１４ｂ「３５９」に対応する「ＤＥＧ^＃（レミソ^＃）」と、第二の音属性コード１４ａ「１３」に対応する「ＣＤ（ドレ）」と、第三の音属性コード１５「ＫＭＮＷ」に対応する「ＡＢＣ２Ａ２（ラシド２ラ２）」を表す音名コード１６で構成される４音１拍で３フレーズの音声データ１９ａと、第二の音属性コード１４ａ「４Ｐ」に対応する「Ｄ^＃Ｄ２（レ^＃レ２）」を生成する処理を行う。

【0101】

図１１の例では、ある事業者のＨＰを４音１拍で３フレーズのパケットデータ１７ａからなる音声データ１９ａで表し、これをサウンドＩＤ２２として固定化している。また、リンク先となる商品情報のページを４音１拍で１フレーズのパケットデータ１７ｂからなる音声データ１９ｂで表し、これをサウンドＩＤ２２に紐づけている。

【0102】

そこで、図１３に示すように、ある事業者XYZのＨＰを想起させる音声データ１９をサウンドＩＤ２２として設定し、上記ＨＰからのリンク先となる種々のページを表す音声データ１９をフレーズコード２１として設定することで、情報を音声で階層化することができる。また、音声データ１９をサウンドＩＤ２２として設定することで特定の者を識別するサウンドのドメインが付与されたことになる。

【0103】

音声データ出力部１０６は、音声データ生成部１０５が生成した音声データ１９を音声で出力する処理を行う。なお、音声データ１９を出力する際に入力データを表示画面に表示することもできる。

【0104】

［受信端末］
本実施形態の受信端末８はパーソナルコンピュータ、スマートフォン、タブレット、等の端末機器である。

【0105】

ハードウェア構成として図１（ａ）に示すように、各種コンピュータプログラムの実行及び演算処理を行うＣＰＵ２、ＲＡＭ、ＲＯＭといった各種データを記憶するメモリ３、内蔵ストレージ等の補助記憶装置４、インターネット通信網、無線通信規格で定められている無線通信網によるネットワーク接続、等の通信手段を介して外部の音声生成装置１との間で各種情報を送受信する通信モジュール５、マウス、キーボード、タッチパネル、マイクロフォン等の入力装置６及び液晶ディスプレイ、スピーカ等の出力装置７を備えている。

【0106】

また、受信端末８はソフトウェア構成として図１（ｃ）に示すように、データ受信部８０１、記憶部８０２及びデータ変換部８０３を備えている。ＣＰＵ２及びメモリ３等が協働することでこれらの処理部による情報処理が制御される。

【0107】

データ受信部８０１は、音声生成装置１から出力される音声データ１９を受信する処理を行う。

【0108】

記憶部８０２には、パケットデータ１７が記憶されている。パケットデータ１７の構成については音声生成装置１での説明と同様であるので省略する。
データ変換部８０３は、受信した音声データ１９を音声生成装置１で入力されたコンテンツデータに変換する処理を行う。

【0109】

例えば、音声データ１９が図１０に示す「Ｃ（ド）」、「ＤＥ（レミ）」、「ＦＧＡ（ファソラ）」、「Ｂ（シ）」、「Ｃ２Ｄ２（ド２レ２）」、「Ｅ２ＣＤ（ミ２ドレ）」「Ｅ（ミ）」、「ＦＧ（ファソ）」、で構成される３音１拍で８フレーズの音声データ１９の場合、各音の音名コード１６に設定されている第一の音属性コード１３「０」、「６」、「２」と、第二の音属性コード１４「１２」、「７８」、「３４」と、第三の音属性コード１５「３４５」、「９０１」を判別し、各音属性コードが関連付けられている「Thank you」の文字データに変換する処理を行う。

【0110】

また、例えば、音声データ１９が図１１に示す「ＤＥＧ^＃（レミソ^＃）」、「ＣＤ（ドレ）」、「ＡＢＣ２Ａ２（ラシド２ラ２）」、「Ｄ^＃Ｄ２（レ^＃レ２）」で構成される４音１拍で４フレーズの音声データ１９ａ、１９ｂの場合、パケットデータ１７ａに設定されているサウンドＩＤ２２のフレーズコード２１と、パケットデータ１７ｂに付与されているフレーズコード２１から各音の音名コード１６に設定されている第二の音属性コード１４ｂ「３５９」と、第二の音属性コード１４ａ「１３」と、第三の音属性コード１５「ＫＭＮＷ」と、第二の音属性コード１４ａ「４Ｐ」を判別し、各音属性コードが関連付けられている「www.XYZ.co.jp」のページ内容に変換する処理を行う。

【0111】

これら変換された情報は、受信端末８のディスプレイに表示される。

【0112】

［音声生成システムによる処理フロー］
図１１―図１４を参照して、本実施形態の一態様である音声生成システムによる処理フローを説明する。この処理フローでは、一例としてコンビニエンスストアの所定の場所にタブレットである音声生成装置１が設置され、来店したユーザが所有する受信端末８であるスマートフォンで、音声生成装置１で生成された音声データを受信しコンテンツを表示する態様を説明する。また、パケットデータ１７について、上記パケットデータの構成例３、４を組み合わせたものとして説明する。

【0113】

（Ｓ１０１）
音声生成装置１では、データ受信部１０２は、上述した外部の入力機器又は装置から送信される入力データとして例えば、「１６時から飲み物１割引き！」を内容とするXYZのＨＰ、対象商品一覧ページ、対象商品の割引ページを受信する処理を行う。

【0114】

（Ｓ１０２）
音声データ生成部１０５は以下の処理を行う。
図１１に示すように、第一階層目の一番目のパケットデータ１７ａの一番目の音情報記憶スロット１０ａ、三番目の音情報記憶スロット１０ｃ及び四番目の音情報記憶スロット１０ｄに、３音に対応する第二の音属性コード１４ｂ「３５９」を設定する。
第一階層目の二番目のパケットデータ１７ａの一番目の音情報記憶スロット１０ａ及び二番目の音情報記憶スロット１０ｂに、２音に対応する第二の音属性コード１４ａ「１３」を設定する。
第一階層目の三番目のパケットデータ１７ａの一番目の音情報記憶スロット１０ａ、二番目の音情報記憶スロット１０ｂ、三番目の音情報記憶スロット１０ｃ及び四番目の音情報記憶スロット１０ｄに、４音に対応する第三の音属性コード１５「ＫＭＮＷ」を設定する。
第一階層目の各パケットデータ１７ａに図７に示すパターンコード２０「ｇ」、「ｂ」、「ｈ」及びフレーズコード２１「ｇ３５９」、「ｂ１３」、「ｈＫＭＮＷ」を付与し、３つのフレーズコード２１をサウンドＩＤ２２として設定する。
第一階層目の第二の音属性コード１４ａ、１４ｂと第三の音属性コード１５の組み合わせ「３５９ １３ ＫＭＮＷ」に、入力データ１８ａであるＷｅｂサイトのアドレス「www.XYZ.co.jp」を関連付ける。
図１１に示すように、第二階層目のパケットデータ１７ｂの一番目の音情報記憶スロット１０ａ及び四番目の音情報記憶スロット１０ｄに、２音に対応する第二の音属性コード１４ａ「４Ｐ」を設定する。なお、第一階層目の一番目のパケットデータ１７ａの一番目の音情報記憶スロット１０ａに、第二階層目のパケットデータ１７ｂに係る音情報記憶領域９ｂが設定されている。
第二階層目のパケットデータ１７ｂに図７に示すパターンコード２０「ｄ」及びフレーズコード２１「ｄ４Ｐ」を付与し、このフレーズコード２１をサウンドＩＤ２２に紐づける。
第二階層目の第二の音属性コード１４ａ「４Ｐ」に、入力データ１８ｂであるＨＰからのリンク先となる対象商品一覧ページのアドレスのうち、文字データ「/pro」の部分を関連付ける。
図１２に示すように、第三階層目のパケットデータ１７ｃの一番目の音情報記憶スロット１０ａ及び三番目の音情報記憶スロット１０ｃに、２音に対応する第二の音属性コード１４ａ「ＶＫ」を設定する。なお、第二階層目のパケットデータ１７ｂの一番目の音情報記憶スロット１０ａに、第三階層目のパケットデータ１７ｃに係る音情報記憶領域９ｃが設定されている。
第三階層目のパケットデータ１７ｃに図７に示すパターンコード２０「ｃ」及びフレーズコード２１「ｃＶＫ」を付与し、このフレーズコード２１をサウンドＩＤ２２に紐づける。
第三階層目の第二の音属性コード１４ａ「ＶＫ」に、入力データ１８ｃである上記対象商品一覧ページからのリンク先となる対象商品の割引ページのアドレスのうち、文字データ「/a-discount」の部分を関連付ける。

【0115】

（Ｓ１０３）
音声データ生成部１０５はさらに以下の処理を行う。
第一階層目の第二の音属性コード１４ｂ「３５９」に対応する「ＤＥＧ^＃（レミソ^＃）」と、第二の音属性コード１４ａ「１３」に対応する「ＣＤ（ドレ）」と、第三の音属性コード１５「ＫＭＮＷ」に対応する「ＡＢＣ２Ａ２（ラシド２ラ２）」を表す音名コード１６で構成される４音１拍で３フレーズの音声データ１９ａを生成する。
第二階層目の第二の音属性コード１４ａ「４Ｐ」に対応する「Ｄ^＃Ｄ２（レ^＃レ２）」を表す音名コード１６で構成される４音１拍で１フレーズの音声データ１９ｂを生成する。
第三階層目の第二の音属性コード１４ａ「ＶＫ」に対応する「Ｇ^＃２Ａ（ソ^＃２ラ）」を表す音名コード１６で構成される４音１拍で１フレーズの音声データ１９ｃを生成する。

【0116】

（Ｓ１０４）
音声データ出力部１０６は、音声データ生成部１０５が生成した音声データ１９ａ、１９ｂ、１９ｃを所定の期間、所定のタイミングで出力する処理を行う。例えば１６時から１７時で、１分間隔で音声データ１９を出力する。

【0117】

（Ｓ１０５）
上記コンビニエンスストアに来店したユーザは、受信端末８を操作して上記アプリケーションソフトウェアを実行すると、データ受信部８０１が音声データ１９ａ、１９ｂ、１９ｃを受信する。

【0118】

（Ｓ１０６）
データ変換部８０３は以下の処理を行う。
パケットデータ１７ａに設定されているサウンドＩＤ２２のフレーズコード２１から各音の音名コード１６に設定されている第二の音属性コード１４ｂ「３５９」と、第二の音属性コード１４ａ「１３」と、第三の音属性コード１５「ＫＭＮＷ」を判別し、各音属性コードが関連付けられている「www.XYZ.co.jp」のページ内容に変換する処理を行う。
パケットデータ１７ｂに付与されているフレーズコード２１から各音の音名コード１６に設定されている第二の音属性コード１４ａ「４Ｐ」を判別し、第二の音属性コード１４ａが関連付けられている「www.XYZ.co.jp/pro/list」のページ内容に変換する処理を行う。
パケットデータ１７ｃに付与されているフレーズコード２１から各音の音名コード１６に設定されている第二の音属性コード１４ａ「ＶＫ」を判別し、第二の音属性コード１４ａが関連付けられている「www.XYZ.co.jp/pro/list/a-discount」のページ内容に変換する処理を行う。

【0119】

（Ｓ１０７）
変換された上記Ｗｅｂサイトや、対象商品一覧ページ、対象商品の割引ページが表示画面に表示され、上記ユーザはこれらのコンテンツの閲覧、利用等することができる。

【0120】

以上、本実施形態では、音属性コードを含む均一の時間軸を有する音情報記憶スロットで音情報記憶領域を構成しているので、情報のメロディ化及びメロディの情報化が可能となり、これら情報のエンコード及びデコードが可能となっている。

【0121】

特に、エンコード及びデコードする際に上記パケットデータが階層化（レイヤー化）されていることで、メロディによる情報のツリー化、インデックス化が可能となり、極めて多数の情報にアクセスすることが可能となる。

【0122】

そして、文字データ、記号データ、画像データ、映像データ又はこれらの組み合わせの少なくとも一方からなるコンテンツデータをメロディ化しているので、このメロディを受信端末で受信すれば当該メロディに紐づけされた具体的情報へ瞬時にアクセスすることができる。

【産業上の利用可能性】

【0123】

本実施形態に係る音声生成装置、音声生成システム及びコンピュータプログラムは、以下の活用例によって産業上の利用可能性に資するものとなっている。
・音楽言語体系の提供に活用
・メロディによる各種情報の提供に活用
・メロディによるインターネットに連動したアクセス情報の提供に活用
・音情報記憶スロットの事業者への提供に活用
・ラジオ、ＴＶ、公共交通機関等における音声による広告媒体に活用
・メロディのライセンス提供に活用
・情報のアーカイブ化に活用
・事業者専用の音声暗号に活用

【0124】

例えば本実施形態に係る音声生成システムにおいて、政府や官公庁、各地方自治体等のＨＰを特定するパケットデータ１７を複数準備し、これらをサウンドＩＤ２２として設定する。
サウンドＩＤ２２に紐づくフレーズコード２１に各種情報を関連付ける。
上記サウンドＩＤ２２及びフレーズコード２１からなる音声データ１９を、各地域に設置されている防災スピーカで出力する。
地域住民は受信端末８であるスマートフォンを操作して音声データ１９を受信する。
受信端末８には、上記音声データ１９から変換された緊急情報（災害情報など）が表示される。

【0125】

このような活用例によって災害等の緊急事態時に一例として以下の効果が発揮される。
・災害等の現場周辺の個別地区情報等の言葉では伝えきれない情報を、音声データを用いて瞬時に提供、利用することができる。
・外国語での情報の提供、利用も可能である。
・停電下においても情報の取得が可能である。

【符号の説明】

【0126】

９ 音情報記憶領域
１０ａ－１０ｄ 音情報記憶スロット
１１ ｎ音マトリクス
１１ａ １音マトリクス
１１ｂ ２音マトリクス
１１ｃ ３音マトリクス
１１ｄ ４音マトリクス
１２ 変換コード
１３ 第一の音属性コード
１４ 第二の音属性コード
１５ 第三の音属性コード
１６ 音名コード
１７ パケットデータ
１８ 入力データ
１９ 音声データ
２０ パターンコード
２１ フレーズコード
２２ サウンドＩＤ

【要約】

入力された文字データや記号データ及びこれらの組み合わせに対してリズムの変化を有する音声フレーズを生成し、当該音声フレーズに種々のコンテンツデータを関連付けて提供すること
コンテンツデータが入力されると、対応する音声データを生成する音声生成装置であって、
以下の構成を備えることを特徴とする音声生成装置。
１音を構成する音名コードに対応する第一の音属性コード、複数音を構成する音名コードに対応する第二の音属性コード及び第三の音属性コードの少なくとも一方にコンテンツデータを関連付けてパケットデータを生成する。
前記パケットデータに対応する前記音名コードで構成される前記音声データを生成する処理を行う。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】