知財求人 - 知財ポータルサイト「IP Force」
▶ 株式会社バンダイナムコゲームスの特許一覧 ▶ 株式会社バンダイナムコ研究所の特許一覧
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2022157292
(43)【公開日】2022-10-14
(54)【発明の名称】コンテンツ再生制御システム及びプログラム
(51)【国際特許分類】
G06Q 50/10 20120101AFI20221006BHJP
H04N 21/258 20110101ALI20221006BHJP
H04N 21/233 20110101ALI20221006BHJP
G10L 13/10 20130101ALI20221006BHJP
G06T 13/40 20110101ALI20221006BHJP
【ＦＩ】
G06Q50/10
H04N21/258
H04N21/233
G10L13/10 112B
G06T13/40
【審査請求】未請求
【請求項の数】9
【出願形態】ＯＬ
(21)【出願番号】P 2021061424
(22)【出願日】2021-03-31
(71)【出願人】
【識別番号】000134855
【氏名又は名称】株式会社バンダイナムコエンターテインメント
(71)【出願人】
【識別番号】519180002
【氏名又は名称】株式会社バンダイナムコ研究所
(74)【代理人】
【識別番号】100090387
【弁理士】
【氏名又は名称】布施 行夫
(74)【代理人】
【識別番号】100090398
【弁理士】
【氏名又は名称】大渕 美千栄
(72)【発明者】
【氏名】▲高▼橋 誠史
【テーマコード（参考）】
5B050
5C164
5L049
【Ｆターム（参考）】
5B050AA10
5B050BA08
5B050BA11
5B050CA08
5B050EA09
5B050EA27
5B050FA02
5B050FA05
5B050FA10
5C164MA07S
5C164PA44
5C164PA46
5C164SA52S
5C164SB04P
5C164SC11P
5C164YA11
5L049CC11
(57)【要約】
【課題】コンテンツそもそもの制作費などの現実的な状況を含めて様々な制限を排除し、よりリアルで聴取者や視聴などの好みに合致した配役体験を提供するコンテンツ再生制御システムなどを提供すること。
【解決手段】サーバ装置１０は、コンテンツに登場するキャラクタに音素データを割り当てるとともに、当該割り当てた音素データによって発話するための音声言語データを生成する音声言語データ生成処理を実行し、当該生成した音声言語データに基づいてコンテンツをユーザに視聴させる構成を有している。特に、サーバ装置１０は、音声言語データを含めコンテンツを提供する際に、ユーザにおけるコストの支払いの有無によって、又は、既に支払ったコスト内に収まっているか否かによって、音声言語データの利用を制限させることが可能な構成を有している。
【選択図】図４
【解決手段】サーバ装置１０は、コンテンツに登場するキャラクタに音素データを割り当てるとともに、当該割り当てた音素データによって発話するための音声言語データを生成する音声言語データ生成処理を実行し、当該生成した音声言語データに基づいてコンテンツをユーザに視聴させる構成を有している。特に、サーバ装置１０は、音声言語データを含めコンテンツを提供する際に、ユーザにおけるコストの支払いの有無によって、又は、既に支払ったコスト内に収まっているか否かによって、音声言語データの利用を制限させることが可能な構成を有している。
【選択図】図４
【特許請求の範囲】
【請求項1】
記憶手段に記憶されている情報であって、ユーザに関するユーザ情報と、当該ユーザ情報に対応付けられており、かつ、発話者から採取された音素データから構成される発話音素情報と、を管理するユーザ情報管理手段と、
前記発話者の音声によって音声言語化するためのテキストがデータ化されたテキストデータ及び当該テキストを発話するキャラクタに関するキャラクタデータを少なくとも含むコンテンツデータから構成されるコンテンツ情報を管理するコンテンツ管理手段と、
所与の指示に基づいて、前記キャラクタデータに、前記音素データを割り当てて、前記コンテンツのテキストを音声言語化するための音声言語データを生成する生成処理を実行する生成処理手段と、
前記コンテンツデータのテキストに沿って前記キャラクタの音声を再生出力する再生出力手段に、前記生成された音声言語データを提供する提供制御処理を実行する提供制御手段と、
前記生成処理に用いる音素データ、キャラクタデータ及びテキストデータのうち、いずれか１のデータのコストが規定されたコストパラメータを管理するコスト管理手段と、
前記コストパラメータに基づいて、前記生成処理を実行する際の実行コストを算出する算出処理を実行するコスト算出手段と、
前記算出処理によって算出された実行コストに対する前記ユーザの支払いの有無に基づいて、前記生成処理、及び、前記提供制御処理の少なくともいずれか一方の処理の実行許可の可否を判定する実行許可判定処理を実行する許可判定処理手段と、
を備えることを特徴とするコンテンツ再生制御システム。
前記発話者の音声によって音声言語化するためのテキストがデータ化されたテキストデータ及び当該テキストを発話するキャラクタに関するキャラクタデータを少なくとも含むコンテンツデータから構成されるコンテンツ情報を管理するコンテンツ管理手段と、
所与の指示に基づいて、前記キャラクタデータに、前記音素データを割り当てて、前記コンテンツのテキストを音声言語化するための音声言語データを生成する生成処理を実行する生成処理手段と、
前記コンテンツデータのテキストに沿って前記キャラクタの音声を再生出力する再生出力手段に、前記生成された音声言語データを提供する提供制御処理を実行する提供制御手段と、
前記生成処理に用いる音素データ、キャラクタデータ及びテキストデータのうち、いずれか１のデータのコストが規定されたコストパラメータを管理するコスト管理手段と、
前記コストパラメータに基づいて、前記生成処理を実行する際の実行コストを算出する算出処理を実行するコスト算出手段と、
前記算出処理によって算出された実行コストに対する前記ユーザの支払いの有無に基づいて、前記生成処理、及び、前記提供制御処理の少なくともいずれか一方の処理の実行許可の可否を判定する実行許可判定処理を実行する許可判定処理手段と、
を備えることを特徴とするコンテンツ再生制御システム。
【請求項2】
記憶手段に記憶されている情報であって、ユーザに関するユーザ情報と、当該ユーザ情報に対応付けられており、かつ、発話者から採取された音素データから構成される発話音素情報と、を管理するユーザ情報管理手段と、
前記発話者の音声によって音声言語化するためのテキストがデータ化されたテキストデータ及び当該テキストを発話するキャラクタに関するキャラクタデータを少なくとも含むコンテンツデータから構成されるコンテンツ情報を管理するコンテンツ管理手段と、
所与の指示に基づいて、前記キャラクタデータに、前記音素データを割り当てて、前記コンテンツのテキストを音声言語化するための音声言語データを生成する生成処理を実行する生成処理手段と、
前記コンテンツデータのテキストに沿って前記キャラクタの音声を再生出力する再生出力手段に、前記生成された音声言語データを提供する提供制御処理を実行する提供制御手段と、
前記生成処理に用いる音素データ、キャラクタデータ及びテキストデータのうち、いずれか１のデータの使用に関するコストが規定されたコストパラメータを管理するコスト管理手段と、
前記コストパラメータと、予め設定されたコストの限界値と、が所与の関係条件を具備している場合に、前記生成処理、及び、前記提供制御処理の少なくともいずれか一方の処理の実行を許可する実行許可判定処理を実行する許可判定処理手段と、
を備えることを特徴とするコンテンツ再生制御システム。
前記発話者の音声によって音声言語化するためのテキストがデータ化されたテキストデータ及び当該テキストを発話するキャラクタに関するキャラクタデータを少なくとも含むコンテンツデータから構成されるコンテンツ情報を管理するコンテンツ管理手段と、
所与の指示に基づいて、前記キャラクタデータに、前記音素データを割り当てて、前記コンテンツのテキストを音声言語化するための音声言語データを生成する生成処理を実行する生成処理手段と、
前記コンテンツデータのテキストに沿って前記キャラクタの音声を再生出力する再生出力手段に、前記生成された音声言語データを提供する提供制御処理を実行する提供制御手段と、
前記生成処理に用いる音素データ、キャラクタデータ及びテキストデータのうち、いずれか１のデータの使用に関するコストが規定されたコストパラメータを管理するコスト管理手段と、
前記コストパラメータと、予め設定されたコストの限界値と、が所与の関係条件を具備している場合に、前記生成処理、及び、前記提供制御処理の少なくともいずれか一方の処理の実行を許可する実行許可判定処理を実行する許可判定処理手段と、
を備えることを特徴とするコンテンツ再生制御システム。
【請求項3】
請求項１又は２に記載のコンテンツ再生制御システムにおいて、
前記ユーザのコンテンツに関する所与の状況を検出するユーザ状況検出手段を更に備え、
前記コスト管理手段が、
前記検出されたユーザのコンテンツに関する状況に基づいて、前記コストパラメータの変動を制御する変動制御処理を実行する、コンテンツ再生制御システム。
前記ユーザのコンテンツに関する所与の状況を検出するユーザ状況検出手段を更に備え、
前記コスト管理手段が、
前記検出されたユーザのコンテンツに関する状況に基づいて、前記コストパラメータの変動を制御する変動制御処理を実行する、コンテンツ再生制御システム。
【請求項4】
請求項１～３のいずれか１項に記載のコンテンツ再生制御システムにおいて、
前記コスト管理手段が、
前記コンテンツデータ、キャラクタデータ及びテキストデータのうち、いずれか１のデータに関する情報を示す関連情報に基づいて、前記コストパラメータの変動を制御する変動制御処理を実行する、コンテンツ再生制御システム。
前記コスト管理手段が、
前記コンテンツデータ、キャラクタデータ及びテキストデータのうち、いずれか１のデータに関する情報を示す関連情報に基づいて、前記コストパラメータの変動を制御する変動制御処理を実行する、コンテンツ再生制御システム。
【請求項5】
請求項１～４のいずれか１項に記載のコンテンツ再生制御システムにおいて、
前記生成処理によって割り当てた音素データの組み合わせを検出する組み合わせ検出手段を更に備え、
前記コスト管理手段が、
前記検出された音素データの組み合わせの情報に基づいて、前記コストパラメータの変動を制御する変動制御処理を実行する、コンテンツ再生制御システム。
前記生成処理によって割り当てた音素データの組み合わせを検出する組み合わせ検出手段を更に備え、
前記コスト管理手段が、
前記検出された音素データの組み合わせの情報に基づいて、前記コストパラメータの変動を制御する変動制御処理を実行する、コンテンツ再生制御システム。
【請求項6】
請求項１～４のいずれか１項に記載のコンテンツ再生制御システムにおいて、
前記生成処理手段が、
前記所与の指示としての前記ユーザの指示に基づいて、前記音素データが割り当てられていないキャラクタを特定キャラクタとして検出した場合には、当該特定キャラクタに、予め定められた音素データを設定する、コンテンツ再生制御システム。
前記生成処理手段が、
前記所与の指示としての前記ユーザの指示に基づいて、前記音素データが割り当てられていないキャラクタを特定キャラクタとして検出した場合には、当該特定キャラクタに、予め定められた音素データを設定する、コンテンツ再生制御システム。
【請求項7】
請求項１～４のいずれか１項に記載のコンテンツ再生制御システムにおいて、
前記生成処理手段が、
前記キャラクタの属性、及び、前記テキストの属性の少なくともいずれか一方の属性に基づいて生成された音素データのデータモデルを示すモデル情報に従って、前記音声言語データを生成する前記生成処理を実行し、
当該生成した音声言語データに基づいて前記モデル情報を学習させる学習処理を実行し、
前記コスト管理手段が、
前記モデル情報の学習処理の状況に基づいて、前記コストパラメータの変動を制御する変動制御処理を実行する、コンテンツ再生制御システム。
前記生成処理手段が、
前記キャラクタの属性、及び、前記テキストの属性の少なくともいずれか一方の属性に基づいて生成された音素データのデータモデルを示すモデル情報に従って、前記音声言語データを生成する前記生成処理を実行し、
当該生成した音声言語データに基づいて前記モデル情報を学習させる学習処理を実行し、
前記コスト管理手段が、
前記モデル情報の学習処理の状況に基づいて、前記コストパラメータの変動を制御する変動制御処理を実行する、コンテンツ再生制御システム。
【請求項8】
記憶手段に記憶されている情報であって、ユーザに関するユーザ情報と、当該ユーザ情報に対応付けられており、かつ、発話者から採取された音素データから構成される発話音素情報と、を管理するユーザ情報管理手段、
前記発話者の音声によって音声言語化するためのテキストがデータ化されたテキストデータ及び当該テキストを発話するキャラクタに関するキャラクタデータを少なくとも含むコンテンツデータから構成されるコンテンツ情報を管理するコンテンツ管理手段、
所与の指示に基づいて、前記キャラクタデータに、前記音素データを割り当てて、前記コンテンツのテキストを音声言語化するための音声言語データを生成する生成処理を実行する生成処理手段、
前記コンテンツデータのテキストに沿って前記キャラクタの音声を再生出力する再生出力手段に、前記生成された音声言語データを提供する提供制御処理を実行する提供制御手段、
前記生成処理に用いる音素データ、キャラクタデータ及びテキストデータのうち、いずれか１のデータのコストが規定されたコストパラメータを管理するコスト管理手段、
前記コストパラメータに基づいて、前記生成処理を実行する際の実行コストを算出する算出処理を実行するコスト算出手段、及び、
前記算出処理によって算出された実行コストに対する前記ユーザの支払いの有無に基づいて、前記生成処理、及び、前記提供制御処理の少なくともいずれか一方の処理の実行許可の可否を判定する実行許可判定処理を実行する許可判定処理手段、
としてコンピュータを機能させることを特徴とするプログラム。
前記発話者の音声によって音声言語化するためのテキストがデータ化されたテキストデータ及び当該テキストを発話するキャラクタに関するキャラクタデータを少なくとも含むコンテンツデータから構成されるコンテンツ情報を管理するコンテンツ管理手段、
所与の指示に基づいて、前記キャラクタデータに、前記音素データを割り当てて、前記コンテンツのテキストを音声言語化するための音声言語データを生成する生成処理を実行する生成処理手段、
前記コンテンツデータのテキストに沿って前記キャラクタの音声を再生出力する再生出力手段に、前記生成された音声言語データを提供する提供制御処理を実行する提供制御手段、
前記生成処理に用いる音素データ、キャラクタデータ及びテキストデータのうち、いずれか１のデータのコストが規定されたコストパラメータを管理するコスト管理手段、
前記コストパラメータに基づいて、前記生成処理を実行する際の実行コストを算出する算出処理を実行するコスト算出手段、及び、
前記算出処理によって算出された実行コストに対する前記ユーザの支払いの有無に基づいて、前記生成処理、及び、前記提供制御処理の少なくともいずれか一方の処理の実行許可の可否を判定する実行許可判定処理を実行する許可判定処理手段、
としてコンピュータを機能させることを特徴とするプログラム。
【請求項9】
記憶手段に記憶されている情報であって、ユーザに関するユーザ情報と、当該ユーザ情報に対応付けられており、かつ、発話者から採取された音素データから構成される発話音素情報と、を管理するユーザ情報管理手段、
前記発話者の音声によって音声言語化するためのテキストがデータ化されたテキストデータ及び当該テキストを発話するキャラクタに関するキャラクタデータを少なくとも含むコンテンツデータから構成されるコンテンツ情報を管理するコンテンツ管理手段、
所与の指示に基づいて、前記キャラクタデータに、前記音素データを割り当てて、前記コンテンツのテキストを音声言語化するための音声言語データを生成する生成処理を実行する生成処理手段、
前記コンテンツデータのテキストに沿って前記キャラクタの音声を再生出力する再生出力手段に、前記生成された音声言語データを提供する提供制御処理を実行する提供制御手段、
前記生成処理に用いる音素データ、キャラクタデータ及びテキストデータのうち、いずれか１のデータの使用に関するコストが規定されたコストパラメータを管理するコスト管理手段及び、
前記コストパラメータと、予め設定されたコストの限界値と、が所与の関係条件を具備している場合に、前記生成処理、及び、前記提供制御処理の少なくともいずれか一方の処理の実行を許可する実行許可判定処理を実行する許可判定処理手段、
としてコンピュータを機能させることを特徴とするプログラム。
前記発話者の音声によって音声言語化するためのテキストがデータ化されたテキストデータ及び当該テキストを発話するキャラクタに関するキャラクタデータを少なくとも含むコンテンツデータから構成されるコンテンツ情報を管理するコンテンツ管理手段、
所与の指示に基づいて、前記キャラクタデータに、前記音素データを割り当てて、前記コンテンツのテキストを音声言語化するための音声言語データを生成する生成処理を実行する生成処理手段、
前記コンテンツデータのテキストに沿って前記キャラクタの音声を再生出力する再生出力手段に、前記生成された音声言語データを提供する提供制御処理を実行する提供制御手段、
前記生成処理に用いる音素データ、キャラクタデータ及びテキストデータのうち、いずれか１のデータの使用に関するコストが規定されたコストパラメータを管理するコスト管理手段及び、
前記コストパラメータと、予め設定されたコストの限界値と、が所与の関係条件を具備している場合に、前記生成処理、及び、前記提供制御処理の少なくともいずれか一方の処理の実行を許可する実行許可判定処理を実行する許可判定処理手段、
としてコンピュータを機能させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、コンテンツ再生制御システム及びプログラムなどに関する。
【背景技術】
【0002】
従来から、テキストだけでなく、漫画などのコンテンツに含まれるテキストに音声データを割り当てて、様々な音声によってテキストを朗読させるコンテンツ再生システムなるものが登場している。
【0003】
特に、最近では、漫画データにおけるキャラクタのセリフを音声として出力するための音声データの選択を受け付け、当該漫画データを表示させる際に、選択された音声データに基づいて、表示された漫画データのキャラクタにおけるセリフを音声として出力させるシステムが知られている（例えば、特許文献１）。
【先行技術文献】
【特許文献】
【0004】
【特許文献1】特開２０１８－１６９６９１号公報
【発明の概要】
【発明が解決しようとする課題】
【0005】
しかしながら、特許文献１に記載のシステムにあっては、単に音声データをテキストに割り当てるだけであり、コンテンツを提供する事業者の収益を確保させ、かつ、従来のコンテンツ提供者によって予め定められたキャラクタの音声に制限されること無く、純粋にユーザの好きな音声によってコンテンツの聴取や視聴を実行させることは難しいとされている。
【0006】
本発明は、上記課題を解決するためになされたものであり、その目的は、コンテンツそもそもの制作費などの現実的な状況を含めて様々な制限を排除し、かつ、よりリアルで聴取者や視聴などの好みに合致した配役体験を提供し、ユーザのコンテンツに対する興趣性を向上させるコンテンツ再生制御システムなどを提供することにある。
【課題を解決するための手段】
【0007】
（１）上記課題を解決するため、本発明は、
記憶手段に記憶されている情報であって、ユーザに関するユーザ情報と、当該ユーザ情報に対応付けられており、かつ、発話者から採取された音素データから構成される発話音素情報と、を管理するユーザ情報管理手段と、
前記発話者の音声によって音声言語化するためのテキストがデータ化されたテキストデータ及び当該テキストを発話するキャラクタに関するキャラクタデータを少なくとも含むコンテンツデータから構成されるコンテンツ情報を管理するコンテンツ管理手段と、
所与の指示に基づいて、前記キャラクタデータに、前記音素データを割り当てて、前記コンテンツのテキストを音声言語化するための音声言語データを生成する生成処理を実行する生成処理手段と、
前記コンテンツデータのテキストに沿って前記キャラクタの音声を再生出力する再生出力手段に、前記生成された音声言語データを提供する提供制御処理を実行する提供制御手段と、
前記生成処理に用いる音素データ、キャラクタデータ及びテキストデータのうち、いずれか１のデータの使用に関するコストが規定されたコストパラメータを管理するコスト管理手段と、
前記コストパラメータに基づいて、前記生成処理を実行する際の実行コストを算出する算出処理を実行するコスト算出手段と、
前記算出処理によって算出された実行コストに対する前記ユーザの支払いの有無に基づいて、前記生成処理、及び、前記提供制御処理の少なくともいずれか一方の処理の実行許可の可否を判定する実行許可判定処理を実行する許可判定処理手段と、
を備える、構成を有している。
記憶手段に記憶されている情報であって、ユーザに関するユーザ情報と、当該ユーザ情報に対応付けられており、かつ、発話者から採取された音素データから構成される発話音素情報と、を管理するユーザ情報管理手段と、
前記発話者の音声によって音声言語化するためのテキストがデータ化されたテキストデータ及び当該テキストを発話するキャラクタに関するキャラクタデータを少なくとも含むコンテンツデータから構成されるコンテンツ情報を管理するコンテンツ管理手段と、
所与の指示に基づいて、前記キャラクタデータに、前記音素データを割り当てて、前記コンテンツのテキストを音声言語化するための音声言語データを生成する生成処理を実行する生成処理手段と、
前記コンテンツデータのテキストに沿って前記キャラクタの音声を再生出力する再生出力手段に、前記生成された音声言語データを提供する提供制御処理を実行する提供制御手段と、
前記生成処理に用いる音素データ、キャラクタデータ及びテキストデータのうち、いずれか１のデータの使用に関するコストが規定されたコストパラメータを管理するコスト管理手段と、
前記コストパラメータに基づいて、前記生成処理を実行する際の実行コストを算出する算出処理を実行するコスト算出手段と、
前記算出処理によって算出された実行コストに対する前記ユーザの支払いの有無に基づいて、前記生成処理、及び、前記提供制御処理の少なくともいずれか一方の処理の実行許可の可否を判定する実行許可判定処理を実行する許可判定処理手段と、
を備える、構成を有している。
【0008】
この構成により、本発明は、ユーザによって実行コストの支払いが無い場合には音声言語データの生成、提供、又はその双方が実行されず、当該ユーザによって実行コストの支払いがある場合には音声言語データの生成、提供、又はその双方を実行させることができる。
【0009】
すなわち、本発明は、ユーザにおけるコストの支払いの有無によって音声言語データの利用を制限させることができるので、コンテンツや音素データを提供する事業者の収益を確保することができるとともに、従来のコンテンツ提供者によって予め定められたキャラクタ（声優や俳優などの）の音声に制限されること無く、純粋にユーザの好きな音声によってコンテンツの聴取や視聴を実行させることができる。
【0010】
したがって、本発明は、コンテンツそもそもの制作費などの現実的な状況を含めて様々な制限を排除し、よりリアルで聴取者や視聴などの好みに合致した配役体験を提供し、ユーザのコンテンツに対する興趣性を向上させることができる。
【0011】
なお、「発話者」とは、例えば、声優、俳優、又は、アナウンサーなどの実際に声を発する者を示す。
【0012】
そして、「音素データ」とは、子音・母音・半母音などの分節音素、当該分節音素の関係性を示す声調・イントネーションを含む音の高さ、強勢やアクセント、方言の種別、言語の種別（日本語や英語）、及び、文字間における子音と母音のつながり（すなわち、連接要素）などが規定されている音の素となるデータを示す。
【0013】
また、「キャラクタデータ」とは、テキストをセリフとして発する（すなわち、発話する）キャラクタのデータであり、例えば、映画、漫画、ゲーム、アニメーション、又は、小説などのコンテンツ内に登場するキャラクタに関するデータを示す。
【0014】
さらに、「コンテンツデータ」とは、例えば、ゲーム、アニメーション、映画、又は、漫画などの画像（静止画及び動画を含む。）、コンテンツに登場するキャラクタに関するキャラクタデータ、及び、画像に合わせた各キャラクタなどのセリフなどのテキストデータ、から構成されるコンテンツデータが記憶される。ただし、当該「コンテンツデータ」には、画像が無く、テキストデータ及びキャラクタデータから構成されるものが含まれてもよい。
【0015】
そして、「コンテンツ情報の管理」とは、コンテツ情報がデータベースに読み出し可能に記憶されていること、又は、ネットワークなどの外部から取得することなどを示す。
【0016】
上記に加えて、「コストパラメータ」とは、例えば、キャラクタデータ、テキストデータ若しくは音素データの音声言語データを生成するために必要なデータのコストやアイテムなどの消費量を定めたパラメータを示す。
【0017】
特に、「コストパラメータ」としては、システム内通貨若しくはシステム内で用いるアイテム（例えば、アイテム種別や数）に基づいて規定される消費量、又は、課金額が規定
されている。
されている。
【0018】
また、「提供制御処理」には、再生出力手段（例えば、ユーザの端末装置）にダウンロードさせて当該端末装置における再生を制御するための各種のデータを提供する処理、又は、音声言語データを含み、コンテンツ情報を再生し、その再生出力データをリアルタイムでユーザの端末装置に提供するストリーミング方式によって提供する処理が含まれる。ただし、再生出力手段は、システムに組み込まれた手段であってもよく、この場合には、提供制御処理として、再生出力手段を制御する制御処理を実行する。
【0019】
（２）また、上記課題を解決するため、本発明は、
記憶手段に記憶されている情報であって、ユーザに関するユーザ情報と、当該ユーザ情報に対応付けられており、かつ、発話者から採取された音素データから構成される発話音素情報と、を管理するユーザ情報管理手段と、
前記発話者の音声によって音声言語化するためのテキストがデータ化されたテキストデータ及び当該テキストを発話するキャラクタに関するキャラクタデータを少なくとも含むコンテンツデータから構成されるコンテンツ情報を管理するコンテンツ管理手段と、
所与の指示に基づいて、前記キャラクタデータに、前記音素データを割り当てて、前記コンテンツのテキストを音声言語化するための音声言語データを生成する生成処理を実行する生成処理手段と、
前記コンテンツデータのテキストに沿って前記キャラクタの音声を再生出力する再生出力手段に、前記生成された音声言語データを提供する提供制御処理を実行する提供制御手段と、
前記生成処理に用いる音素データ、キャラクタデータ及びテキストデータのうち、いずれか１のデータの使用に関するコストが規定されたコストパラメータを管理するコスト管理手段と、
前記コストパラメータと、予め設定されたコストの限界値と、が所与の関係条件を具備している場合に、前記生成処理、及び、前記提供制御処理の少なくともいずれか一方の処理の実行を許可する実行許可判定処理を実行する許可判定処理手段と、
を備える、構成を有している。
記憶手段に記憶されている情報であって、ユーザに関するユーザ情報と、当該ユーザ情報に対応付けられており、かつ、発話者から採取された音素データから構成される発話音素情報と、を管理するユーザ情報管理手段と、
前記発話者の音声によって音声言語化するためのテキストがデータ化されたテキストデータ及び当該テキストを発話するキャラクタに関するキャラクタデータを少なくとも含むコンテンツデータから構成されるコンテンツ情報を管理するコンテンツ管理手段と、
所与の指示に基づいて、前記キャラクタデータに、前記音素データを割り当てて、前記コンテンツのテキストを音声言語化するための音声言語データを生成する生成処理を実行する生成処理手段と、
前記コンテンツデータのテキストに沿って前記キャラクタの音声を再生出力する再生出力手段に、前記生成された音声言語データを提供する提供制御処理を実行する提供制御手段と、
前記生成処理に用いる音素データ、キャラクタデータ及びテキストデータのうち、いずれか１のデータの使用に関するコストが規定されたコストパラメータを管理するコスト管理手段と、
前記コストパラメータと、予め設定されたコストの限界値と、が所与の関係条件を具備している場合に、前記生成処理、及び、前記提供制御処理の少なくともいずれか一方の処理の実行を許可する実行許可判定処理を実行する許可判定処理手段と、
を備える、構成を有している。
【0020】
この構成により、本発明は、例えば、生成処理に用いる音素データのコストが、ユーザが有するコストの限界値又はコンテンツに設定されているコストの限界値を超えている場合などの関係性条件が具備されていない場合には音声言語データの生成、提供、又はその双方を実行せず、当該生成処理に用いる音素データのコストが、限界値内の場合などの当該関係性条件が具備された場合には、音声言語データの生成、提供、又は、その双方を実行させることができる。
【0021】
すなわち、本発明は、例えば、予めユーザが既に支払った範囲内か否か（サブスクリプションなどの予め定められた支払い額の範囲内か否か）によって、音声言語データの利用を制限させることができるので、コンテンツや音素データを提供する事業者の収益をも確保することができるとともに、従来のコンテンツ提供者によって予め定められたキャラクタ（声優や俳優などの）の音声に制限されること無く、純粋にユーザの好きな音声によってコンテンツの聴取や視聴を実行させることができる。
【0022】
したがって、本発明は、現実的な状況を含めて様々な制限を排除し、よりリアルで聴取者や視聴などの好みに合致した配役体験を提供し、ユーザのコンテンツに対する興趣性を向上させることができる。
【0023】
なお、「予め設定されたコストの限界値」とは、例えば、ユーザが予め支払ったコストなどの上限値やそれに対応する値を示し、コンテンツに対応付けられて設定されている値
（例えば、コンテンツ毎に設定された値）でもよいし、ユーザに対応付けられた値であってもよい。
（例えば、コンテンツ毎に設定された値）でもよいし、ユーザに対応付けられた値であってもよい。
【0024】
（３）また、本発明は、
前記ユーザのコンテンツに関する所与の状況を検出するユーザ状況検出手段を更に備え、
前記コスト管理手段が、
前記検出されたユーザの状況に基づいて、前記コストパラメータの変動を制御する変動制御処理を実行する、構成を有している。
前記ユーザのコンテンツに関する所与の状況を検出するユーザ状況検出手段を更に備え、
前記コスト管理手段が、
前記検出されたユーザの状況に基づいて、前記コストパラメータの変動を制御する変動制御処理を実行する、構成を有している。
【0025】
この構成により、本発明は、変動されたコストパラメータを用いて算出された実行コストに基づいて、又は、当該変動されたコストパラメータとコストの限界値とを比較することによって、実行許可判定処理を実行することができる。
【0026】
すなわち、本発明は、例えば、ユーザの課金額、又は、当該コンテンツを聴取や視聴するサービスにログインすることによってコンテンツの再生制御を行う場合には、ログイン状況などの所定の条件に応じて、実行コストや音素データの利用によるコストを変更することができる。
【0027】
したがって、本発明は、このようなサービスを利用するユーザに応じて支払うコスト、割り当て可能な音素データの数、又は、利用可能なコンテンツ数を変化させることができるので、ユーザに対するサービスなどを充実させてユーザのコンテンツ利用の満足度を向上させることができる。
【0028】
この結果、本発明は、長期に渡るサービスの利用を促し、事業者の収益性を確保させて適切なビジネス環境を構築させることができる。
【0029】
なお、「ユーザの状況」には、例えば、
（Ａ１）ユーザの現在までの課金額の総計、
（Ａ２）コンテンツを聴取や視聴するサービスにログインすることによってコンテンツの再生制御を行う場合には、ログイン状況（ログインの頻度、総ログイン時間、又は、ログインによって獲得した特典の数・種別及び量）、
（Ａ３）コンテンツの現在までの利用時間（聴取時間や視聴時間）又は利用することによって獲得したポイント、及び、
（Ａ４）ユーザのランクやレベルなどの他のユーザからの優位性を示す優位度、
などが含まれる。
（Ａ１）ユーザの現在までの課金額の総計、
（Ａ２）コンテンツを聴取や視聴するサービスにログインすることによってコンテンツの再生制御を行う場合には、ログイン状況（ログインの頻度、総ログイン時間、又は、ログインによって獲得した特典の数・種別及び量）、
（Ａ３）コンテンツの現在までの利用時間（聴取時間や視聴時間）又は利用することによって獲得したポイント、及び、
（Ａ４）ユーザのランクやレベルなどの他のユーザからの優位性を示す優位度、
などが含まれる。
【0030】
また、「検出されたユーザの状況に基づいて、コストパラメータの変動を制御する」とは、変動値とコストパラメータとが対応付けられたテーブルデータを参照することによって当該変動値を定めること、又は、所与の演算式によってユーザの状況に基づいて変動値を算出することなどを示す。
【0031】
（４）また、本発明は、
前記コスト管理手段が、
前記コンテンツデータ、キャラクタデータ及びテキストデータのうち、いずれか１のデータに関する情報を示す関連情報に基づいて、前記コストパラメータの変動を制御する変動制御処理を実行する、構成を有している。
前記コスト管理手段が、
前記コンテンツデータ、キャラクタデータ及びテキストデータのうち、いずれか１のデータに関する情報を示す関連情報に基づいて、前記コストパラメータの変動を制御する変動制御処理を実行する、構成を有している。
【0032】
この構成により、本発明は、例えば、キャラクタの発話回数や人気度などの属性に応じて、実行コストを変更することができるので、ユーザの興趣性を向上させつつ、コンテン
ツなどを提供する事業者の収益を確保することができる。
ツなどを提供する事業者の収益を確保することができる。
【0033】
なお、「関連情報」とは、コンテンツデータの場合には、例えば、コンテンツのジャンルを示すジャンル情報、及び、テキストデータ又はキャラクタデータの場合には、例えば、テキスト又はキャラクタの属性を示す属性情報などが含まれる。
【0034】
また、「関連情報」とは、音素データの場合には、声優やアナウンサーなどの発話者のジャンル、性別、年齢や年代、又は、人気度などの音素データを生成する際の発話者の属性を示す属性情報が含まれる。
【0035】
そして、テキストの属性には、例えば、小説、漫画、ノンフィクション、新聞などのテキストの種別、及び、当該テキストが属するキャラクタ（当該テキストが発話されるキャラクタ）の属性が含まれる。
【0036】
さらに、キャラクタの属性（すなわち、キャラクタの属性）には、動物・ロボット・人間などの種別、性別や年齢、方言やテキストの言語（他言語）の種別、人気度などの属性が含まれる。
【0037】
（５）また、本発明は、
前記生成処理によって割り当てた音素データの組み合わせを検出する組み合わせ検出手段を更に備え、
前記コスト管理手段が、
前記検出された音素データの組み合わせの情報に基づいて、前記コストパラメータの変動を制御する変動制御処理を実行する、構成を有している。
前記生成処理によって割り当てた音素データの組み合わせを検出する組み合わせ検出手段を更に備え、
前記コスト管理手段が、
前記検出された音素データの組み合わせの情報に基づいて、前記コストパラメータの変動を制御する変動制御処理を実行する、構成を有している。
【0038】
この構成により、本発明は、例えば、同一の属性（例えば、発話者のジャンルが同一であること、又は、発話者が属する組織（グループ）が同一であることなど）、又は、同一の発話者によって採取されたデータなどの音素データの組み合わせによって実行コストを低減させることができるので、ユーザに対して利用しやすい環境を提供することができる。
【0039】
なお、「組み合わせの情報」には、例えば、同一の属性（例えば、発話者のジャンルが同一であること、又は、発話者が属する組織（グループ）が同一であることなど）であること、又は、同一の発話者によって採取されたデータであることなどが含まれる。
【0040】
（６）また、本発明は、
前記生成処理手段が、
前記所与の指示としての前記ユーザの指示に基づいて、前記音素データが割り当てられていないキャラクタを特定キャラクタとして検出した場合には、当該特定キャラクタに、予め定められた音素データを設定する、構成を有している。
前記生成処理手段が、
前記所与の指示としての前記ユーザの指示に基づいて、前記音素データが割り当てられていないキャラクタを特定キャラクタとして検出した場合には、当該特定キャラクタに、予め定められた音素データを設定する、構成を有している。
【0041】
この構成により、本発明は、コンテンツデータに設定されている全てのキャラクタに音素データを割り当てる必要もないので、ユーザの操作性を向上させることができるとともに、たとえ、ユーザが音素データをキャラクタに割り当てることができない場合であっても、コンテンツの聴取又は視聴を行うこと、及び、ユーザが指定していないキャラクタに割り当てられた音素データにコストを発生させなければ、ユーザの負担をも軽減させることができる。
【0042】
したがって、本発明は、ユーザに対して利用しやすい環境を提供することができる。
【0043】
（７）また、本発明は、
前記生成処理手段が、
前記キャラクタの属性、及び、前記テキストの属性の少なくともいずれか一方の属性に基づいて生成された音素データのデータモデルを示すモデル情報に従って、前記音声言語データを生成する前記生成処理を実行し、
当該生成した音声言語データに基づいて前記モデル情報を学習させる学習処理を実行し、
前記コスト管理手段が、
前記モデル情報の学習処理の状況に基づいて、前記コストパラメータの変動を制御する変動制御処理を実行する、構成を有している。
前記生成処理手段が、
前記キャラクタの属性、及び、前記テキストの属性の少なくともいずれか一方の属性に基づいて生成された音素データのデータモデルを示すモデル情報に従って、前記音声言語データを生成する前記生成処理を実行し、
当該生成した音声言語データに基づいて前記モデル情報を学習させる学習処理を実行し、
前記コスト管理手段が、
前記モデル情報の学習処理の状況に基づいて、前記コストパラメータの変動を制御する変動制御処理を実行する、構成を有している。
【0044】
この構成により、本発明は、変動されたコストパラメータを用いて算出された実行コストに基づいて、又は、当該変動されたコストパラメータとコストの限界値とを比較することによって、実行許可判定処理を実行することができる。
【0045】
すなわち、本発明は、例えば、音声言語データが生成されればされるほど、すなわち、利用されればされるほどコストを低減又は増加させることができるので、ユーザに利益を還元すること、又は、より品質の良いデータに付加価値を付けて提供することができる。
【0046】
なお、「属性情報に基づいて生成された音素データのデータモデルを示すモデル情報」とは、人工知能（ＡＩ：Artificial Intelligent）の技術を用いたモデルの情報あって、例えば、音素データをテキストに割り当てることによって発話音（すなわち、音声としての発話される音）を構築して発話音声データを生成する際に、各テキストやコンテンツの属性情報に対応付けて各音素の変化量や変化態様などの特徴量を抽出し、当該抽出された特徴量について機械学習をすることなどによって生成された音素データのモデル情報をいう。
【0047】
また、「学習処理」とは、例えば、評価された音声言語データ（すなわち、発話された音）を教師データとして用いるサポートベクターマシンやニューラルネットワーク（例えば、再帰型ニューラルネットワーク）などのディープラーニングを含む機械学習、又は、ＧＡＮ（敵対的生成ネットワーク）やアソシエーション分析などの教師データ無しのディープラーニングを含む機械学習を実行する処理を示す。
【0048】
さらに、「学習状況」には、例えば、学習回数、学習進度（所与期間における学習回数）、学習した音声言語データの評価値（例えば、人気度などの利用回数を含む。）、などが含まれる。
【0049】
（８）また、上記課題を解決するため、本発明は、
記憶手段に記憶されている情報であって、ユーザに関するユーザ情報と、当該ユーザ情報に対応付けられてており、かつ、発話者から採取された音素データから構成される発話音素情報と、を管理するユーザ情報管理手段、
前記発話者の音声によって音声言語化するためのテキストがデータ化されたテキストデータ及び当該テキストを発話するキャラクタに関するキャラクタデータを少なくとも含むコンテンツデータから構成されるコンテンツ情報を管理するコンテンツ管理手段、
所与の指示に基づいて、前記キャラクタデータに、前記音素データを割り当てて、前記コンテンツのテキストを音声言語化するための音声言語データを生成する生成処理を実行する生成処理手段、
前記コンテンツデータのテキストに沿って前記キャラクタの音声を再生出力する再生出力手段に、前記生成された音声言語データを提供する提供制御処理を実行する提供制御手段、
前記生成処理に用いる音素データ、キャラクタデータ及びテキストデータのうち、いずれか１のデータの使用に関するコストが規定されたコストパラメータを管理するコスト管理手段、
前記コストパラメータに基づいて、前記生成処理を実行する際の実行コストを算出する算出処理を実行するコスト算出手段、及び、
前記算出処理によって算出された実行コストに対する前記ユーザの支払いの有無に基づいて、前記生成処理、及び、前記提供制御処理の少なくともいずれか一方の処理の実行許可の可否を判定する実行許可判定処理を実行する許可判定処理手段、
として機能させる、構成を有している。
記憶手段に記憶されている情報であって、ユーザに関するユーザ情報と、当該ユーザ情報に対応付けられてており、かつ、発話者から採取された音素データから構成される発話音素情報と、を管理するユーザ情報管理手段、
前記発話者の音声によって音声言語化するためのテキストがデータ化されたテキストデータ及び当該テキストを発話するキャラクタに関するキャラクタデータを少なくとも含むコンテンツデータから構成されるコンテンツ情報を管理するコンテンツ管理手段、
所与の指示に基づいて、前記キャラクタデータに、前記音素データを割り当てて、前記コンテンツのテキストを音声言語化するための音声言語データを生成する生成処理を実行する生成処理手段、
前記コンテンツデータのテキストに沿って前記キャラクタの音声を再生出力する再生出力手段に、前記生成された音声言語データを提供する提供制御処理を実行する提供制御手段、
前記生成処理に用いる音素データ、キャラクタデータ及びテキストデータのうち、いずれか１のデータの使用に関するコストが規定されたコストパラメータを管理するコスト管理手段、
前記コストパラメータに基づいて、前記生成処理を実行する際の実行コストを算出する算出処理を実行するコスト算出手段、及び、
前記算出処理によって算出された実行コストに対する前記ユーザの支払いの有無に基づいて、前記生成処理、及び、前記提供制御処理の少なくともいずれか一方の処理の実行許可の可否を判定する実行許可判定処理を実行する許可判定処理手段、
として機能させる、構成を有している。
【0050】
この構成により、本発明は、ユーザにおけるコストの支払いの有無によって音声言語データの利用を制限させることができるので、コンテンツや音素データを提供する事業者の収益を確保することができるとともに、従来のコンテンツ提供者によって予め定められたキャラクタ（声優や俳優などの）の音声に制限されること無く、純粋にユーザの好きな音声によってコンテンツの聴取や視聴を実行させることができる。
【0051】
したがって、本発明は、コンテンツそもそもの制作費などの現実的な状況を含めて様々な制限を排除し、よりリアルで聴取者や視聴などの好みに合致した配役体験を提供し、ユーザのコンテンツに対する興趣性を向上させることができる。
【0052】
（９）また、上記課題を解決するため、本発明は、
記憶手段に記憶されている情報であって、ユーザに関するユーザ情報と、当該ユーザ情報に対応付けられており、かつ、発話者から採取された音素データから構成される発話音素情報と、を管理するユーザ情報管理手段、
前記発話者の音声によって音声言語化するためのテキストがデータ化されたテキストデータ及び当該テキストを発話するキャラクタに関するキャラクタデータを少なくとも含むコンテンツデータから構成されるコンテンツ情報を管理するコンテンツ管理手段、
所与の指示に基づいて、前記キャラクタデータに、前記音素データを割り当てて、前記コンテンツのテキストを音声言語化するための音声言語データを生成する生成処理を実行する生成処理手段、
前記コンテンツデータのテキストに沿って前記キャラクタの音声を再生出力する再生出力手段に、前記生成された音声言語データを提供する提供制御処理を実行する提供制御手段、
前記生成処理に用いる音素データ、キャラクタデータ及びテキストデータのうち、いずれか１のデータの使用に関するコストが規定されたコストパラメータを管理するコスト管理手段、及び、
前記コストパラメータと、予め設定されたコストの限界値と、が所与の関係条件を具備している場合に、前記生成処理、及び、前記提供制御処理の少なくともいずれか一方の処理の実行を許可する実行許可判定処理を実行する許可判定処理手段、
として機能させる、構成を有している。
記憶手段に記憶されている情報であって、ユーザに関するユーザ情報と、当該ユーザ情報に対応付けられており、かつ、発話者から採取された音素データから構成される発話音素情報と、を管理するユーザ情報管理手段、
前記発話者の音声によって音声言語化するためのテキストがデータ化されたテキストデータ及び当該テキストを発話するキャラクタに関するキャラクタデータを少なくとも含むコンテンツデータから構成されるコンテンツ情報を管理するコンテンツ管理手段、
所与の指示に基づいて、前記キャラクタデータに、前記音素データを割り当てて、前記コンテンツのテキストを音声言語化するための音声言語データを生成する生成処理を実行する生成処理手段、
前記コンテンツデータのテキストに沿って前記キャラクタの音声を再生出力する再生出力手段に、前記生成された音声言語データを提供する提供制御処理を実行する提供制御手段、
前記生成処理に用いる音素データ、キャラクタデータ及びテキストデータのうち、いずれか１のデータの使用に関するコストが規定されたコストパラメータを管理するコスト管理手段、及び、
前記コストパラメータと、予め設定されたコストの限界値と、が所与の関係条件を具備している場合に、前記生成処理、及び、前記提供制御処理の少なくともいずれか一方の処理の実行を許可する実行許可判定処理を実行する許可判定処理手段、
として機能させる、構成を有している。
【0053】
この構成により、本発明は、例えば、予めユーザが既に支払った範囲内か否か（サブスクリプションなどの予め定められた支払い額の範囲内か否か）によって、音声言語データの利用を制限させることができるので、コンテンツや音素データを提供する事業者の収益をも確保することができるとともに、従来のコンテンツ提供者によって予め定められたキャラクタ（声優や俳優などの）の音声に制限されること無く、純粋にユーザの好きな音声によってコンテンツの聴取や視聴を実行させることができる。
【0054】
したがって、本発明は、現実的な状況を含めて様々な制限を排除し、よりリアルで聴取者や視聴などの好みに合致した配役体験を提供し、ユーザのコンテンツに対する興趣性を
向上させることができる。
向上させることができる。
【図面の簡単な説明】
【0055】
【図1】一実施形態のゲームシステムの構成を示すシステム構成の一例を示す図である。
【図2】一実施形態のサーバ装置の機能ブロックを示す図である。
【図3】一実施形態の端末装置の機能ブロックを示す図である。
【図4】一実施形態における実行許可判定処理を説明するための図（その１）である。
【図5】一実施形態における実行許可判定処理を説明するための図（その２）である。
【図6】一実施形態のコンテンツ情報記憶部、又は、音素情報記憶部のそれぞれに記憶されコンテンツ情報、又は、音素情報の一例を示す図である。
【図7】一実施形態のユーザ情報記憶部に記憶されユーザ情報の一例を示す図である。
【図8】一実施形態の実行コスト算出処理を含む実行コストに基づく実行許可判定処理を説明するための図（その１）である。
【図9】一実施形態の実行コスト算出処理を含む実行コストに基づく実行許可判定処理を説明するための図（その２）である。
【図10】一実施形態の実行コストと限界値とに基づく実行許可判定処理について説明するための図（その１）である。
【図11】一実施形態の実行コストと限界値とに基づく実行許可判定処理について説明するための図（その２）である。
【図12】一実施形態のサーバ装置によって実行される音声言語データ生成処理、及び、実行コストに基づく実行許可判定処理を含むコンテンツの視聴を開始する際のコンテンツ試聴開始処理の動作を示すフローチャート（その１）である。
【図13】一実施形態のサーバ装置によって実行される音声言語データ生成処理、及び、実行コストに基づく実行許可判定処理を含むコンテンツの視聴を開始する際のコンテンツ試聴開始処理の動作を示すフローチャート（その２）である。
【発明を実施するための形態】
【0056】
以下、本実施形態について説明する。なお、以下に説明する本実施形態は、特許請求の範囲に記載された本発明の内容を不当に限定するものではない。また本実施形態で説明される構成の全てが、本発明の必須構成要件であるとは限らない。
【0057】
［１］コンテンツ提供システム
まず、図１を用いて本実施形態のコンテンツ提供システム１の概要及び概要構成について説明する。なお、図１は、本実施形態のコンテンツ提供システム１の構成を示すシステム構成の一例を示す図である。
まず、図１を用いて本実施形態のコンテンツ提供システム１の概要及び概要構成について説明する。なお、図１は、本実施形態のコンテンツ提供システム１の構成を示すシステム構成の一例を示す図である。
【0058】
本実施形態のコンテンツ提供システム１は、図１に示すように、ユーザに、漫画（アニメ）、映画、又はゲームなどのコンテンツを視聴（以下、「聴取」のみも含む。）させるサービスを提供するサーバ装置１０と、当該コンテンツを視聴するためにユーザが用いる端末装置２０（例えば、端末装置２０Ａ、２０Ｂ、２０Ｃ）と、がインターネット（ネットワークの一例）に接続可能に構成されている。
【0059】
ユーザは、端末装置２０からサーバ装置１０にアクセスすることにより、インターネットを介してサーバ装置１０から送信されてくる各種のデータを受信し、コンテンツを視聴することができるようになっている。
【0060】
そして、ユーザは、端末装置２０からサーバ装置１０にアクセスすることにより、他のユーザとの間でコミュニケーションを図ることができるようになっている。
【0061】
サーバ装置１０は、インターネットを介して通信接続された端末装置２０を用いて、ユ
ーザにコンテンツを視聴させる（提供する）サービス（以下、「コンテンツ視聴サービス」ともいう。）を提供することが可能な情報処理装置である。
ーザにコンテンツを視聴させる（提供する）サービス（以下、「コンテンツ視聴サービス」ともいう。）を提供することが可能な情報処理装置である。
【0062】
また、サーバ装置１０は、コミュニケーション型のサービスを提供するＳＮＳサーバとして機能してもよい。
【0063】
なお、ＳＮＳサーバとは、複数のユーザ間でコミュニケーションを提供することが可能なサービスを提供する情報処理装置である。
【0064】
特に、サーバ装置１０は、例えば、ＳＮＳサーバとして機能する場合には、提供するＳＮＳの動作環境（ＡＰＩ（アプリケーションプログラミングインタフェース）、プラットフォーム等）を利用してコンテンツ（具体的には、コンテンツを視聴させるために構成されたコンテンツデータ）を提供することができるようになっている。
【0065】
具体的には、サーバ装置１０は、端末装置２０のＷｅｂブラウザ、例えばＨＴＭＬ、ＦＬＡＳＨ（登録商標）、ＣＧＩ、ＰＨＰ、ｓｈｏｃｋｗａｖｅ、Ｊａｖａ（登録商標）アプレット、ＪａｖａＳｃｒｉｐｔ（登録商標）など様々な言語で作られたブラウザ又は専用のアプリケーションを介して提供することができるようになっている。
【0066】
一方、サーバ装置１０は、１つの（装置、プロセッサ）で構成されていてもよいし、複数の（装置、プロセッサ）で構成されていてもよい。
【0067】
そして、サーバ装置１０の記憶領域（後述する記憶部１４０）に記憶される課金情報、ログイン情報、コンテンツに関する各情報を、ネットワーク（イントラネット又はインターネット）を介して接続されたデータベース（広義には記憶装置、メモリ）に記憶するようにしてもよいし、ＳＮＳサーバとして機能する場合には、記憶領域に記憶されるユーザ情報記憶部１４８等の情報を、ネットワーク（イントラネット又はインターネット）を介して接続されたデータベース（広義には記憶装置、メモリ）に記憶するようにしてもよい。
【0068】
具体的には、本実施形態のサーバ装置１０は、端末装置２０のユーザ（すなわち、コンテンツの視聴を希望するユーザ）の操作に基づく入力情報を受信し、受信した入力情報に基づいてコンテンツの提供や視聴に関する各種の処理を行うようになっている。
【0069】
そして、サーバ装置１０は、ユーザによって選択されたコンテンツを視聴させるためのデータ（すなわち、コンテンツデータ）などを端末装置２０に送信し、端末装置２０は、サーバ装置１０から受信したコンテンツデータなどを端末装置２０にユーザに視聴可能に提供する各種の処理を行うようになっている。
【0070】
なお、サーバ装置１０は、端末装置２０を介してユーザにコンテンツを視聴させる際に、ストリーミング方式によってコンテンツデータを提供してもよいし、ダウンロードさせて提供してもよい。
【0071】
端末装置２０は、スマートフォン、携帯電話、ＰＨＳ、コンピュータ、ゲーム装置、ＰＤＡ等、画像生成装置などの情報処理装置であり、インターネット（ＷＡＮ）、ＬＡＮなどのネットワークを介してサーバ装置１０に接続可能な装置である。なお、端末装置２０とサーバ装置１０との通信回線は、有線でもよいし無線でもよい。
【0072】
特に、端末装置２０は、Ｗｅｂページ（ＨＴＭＬ形式のデータ）を閲覧可能なＷｅｂブラウザを備えている。すなわち、端末装置２０は、サーバ装置１０との通信を行うための
通信制御機能、及び、サーバ装置１０から受信したデータ（Ｗｅｂデータ、ＨＴＭＬ形式で作成されたデータなど）を用いて表示制御を行うとともに、ユーザ操作のデータをサーバ装置１０に送信するＷｅｂブラウザ機能などを備える。
通信制御機能、及び、サーバ装置１０から受信したデータ（Ｗｅｂデータ、ＨＴＭＬ形式で作成されたデータなど）を用いて表示制御を行うとともに、ユーザ操作のデータをサーバ装置１０に送信するＷｅｂブラウザ機能などを備える。
【0073】
そして、端末装置２０は、Ｗｅｂブラウザ機能によって、サーバ装置１０から提供されたコンテンツを視聴するためのコンテンツデータや制御情報を取得して所定の処理を実行し、ユーザにコンテンツを視聴させる。
【0074】
具体的には、端末装置２０は、所定コンテンツの視聴を希望する旨の要求をサーバ装置１０に対して行うと、サーバ装置１０のコンテンツを提供するサイトに接続され、コンテンツの視聴が開始される。
【0075】
そして、端末装置２０は、必要に応じてＡＰＩを用いることにより、ＳＮＳサーバとして機能するサーバ装置１０に所定の処理を行わせ、又は、ＳＮＳサーバとして機能するサーバ装置１０が管理するユーザ情報記憶部１４８を取得させて種々のＳＮＳなどと連動させてコンテンツの提供を実行する構成を有している。
【0076】
［２］サーバ装置
次に、図２を用いて本実施形態のサーバ装置１０について説明する。なお、図２は、本実施形態のサーバ装置１０の機能ブロックを示す図である。また、本実施形態のサーバ装置１０は図２の構成要素（各部）の一部を省略した構成としてもよい。
次に、図２を用いて本実施形態のサーバ装置１０について説明する。なお、図２は、本実施形態のサーバ装置１０の機能ブロックを示す図である。また、本実施形態のサーバ装置１０は図２の構成要素（各部）の一部を省略した構成としてもよい。
【0077】
サーバ装置１０は、管理者やその他の入力に用いるための入力部１２０、所定の表示を行う表示部１３０、所定の情報が記憶された情報記憶媒体１８０、端末装置２０やその他と通信を行う通信部１９６、主に提供するコンテンツに関する処理を実行する処理部１００、及び、主にコンテンツに用いる各種のデータを記憶する記憶部１４０を含む。
【0078】
入力部１２０は、システム管理者等がコンテンツに関する設定やその他の必要な設定、データの入力に用いるものである。例えば、本実施形態の入力部１２０は、マウスやキーボード等によって構成される。
【0079】
表示部１３０は、システム管理者用の操作画面を表示するものである。例えば、本実施形態の表示部１３０は、液晶ディスプレイ等によって構成される。
【0080】
情報記憶媒体１８０（コンピュータにより読み取り可能な媒体）は、プログラムやデータなどを格納するものであり、その機能は、光ディスク（ＣＤ、ＤＶＤ）、光磁気ディスク（ＭＯ）、磁気ディスク、ハードディスク、磁気テープ、或いはメモリ（ＲＯＭ）などによって構成される。
【0081】
通信部１９６は、外部（例えば、端末、他のサーバや他のネットワークシステム）との間で通信を行うための各種制御を行うものであり、その機能は、各種プロセッサ又は通信用ＡＳＩＣなどのハードウェアや、プログラムなどによって構成される。
【0082】
記憶部１４０は、処理部１００や通信部１９６などのワーク領域となるもので、その機能は、ＲＡＭ（ＶＲＡＭ）などによって構成される。
【0083】
なお、記憶部１４０に記憶される情報は、データベースで管理してもよい。また、本実施形態の記憶部１４０は、本発明の記憶手段を構成する。
【0084】
また、本実施形態の記憶部１４０は、主記憶部１４２の他に、
（Ａ１）各コンテンツに関するデータ（以下、「コンテンツデータ」という。）を有し、各コンテンツデータに基づいてコンテンツを視聴する際のコストに関する情報（以下、「コンテンツコスト情報」という。）を含む、コンテンツ情報が記憶されるコンテンツ情報記憶部１４４と、
（Ａ２）コンテンツを再生する際に、当該コンテンツに登場するキャラクタに割り当てられ、発話者から予め採取された音素データ（例えば、後述のデータモデル）を有し、当該音素データを使用する際のコストに関する情報（以下、「音素データコスト情報」という。）を含む音素情報が記憶される音素情報記憶部１４６と、
（Ａ３）各ユーザが所有するコンテンツ（所有の有無に関係なく視聴可能なコンテンツを含む。）の情報、及び、ユーザが使用可能な音素データ（所有の有無に関係なく使用可能な音素データを含む。）の情報と、各ユーザに関する情報と、を有するユーザ情報と、各ユーザにおける当該コンテンツを視聴する際に支払われるコストの管理に関する情報（以下。「ユーザコスト情報」ともいう。）と、が各ユーザに対応付けて記憶されるユーザ情報記憶部１４８と、
（Ａ４）コンテンツのテキストを音声言語化するための音声言語データを生成する生成処理（以下、「音声言語データ生成処理」という。）を含む、各処理を実行するためのアプリケーションなどのコンテンツの視聴を実行するために必要なデータ（例えば、テーブルデータなど）が記憶されるアプリケーション情報記憶部１４９と、
を有している。
（Ａ１）各コンテンツに関するデータ（以下、「コンテンツデータ」という。）を有し、各コンテンツデータに基づいてコンテンツを視聴する際のコストに関する情報（以下、「コンテンツコスト情報」という。）を含む、コンテンツ情報が記憶されるコンテンツ情報記憶部１４４と、
（Ａ２）コンテンツを再生する際に、当該コンテンツに登場するキャラクタに割り当てられ、発話者から予め採取された音素データ（例えば、後述のデータモデル）を有し、当該音素データを使用する際のコストに関する情報（以下、「音素データコスト情報」という。）を含む音素情報が記憶される音素情報記憶部１４６と、
（Ａ３）各ユーザが所有するコンテンツ（所有の有無に関係なく視聴可能なコンテンツを含む。）の情報、及び、ユーザが使用可能な音素データ（所有の有無に関係なく使用可能な音素データを含む。）の情報と、各ユーザに関する情報と、を有するユーザ情報と、各ユーザにおける当該コンテンツを視聴する際に支払われるコストの管理に関する情報（以下。「ユーザコスト情報」ともいう。）と、が各ユーザに対応付けて記憶されるユーザ情報記憶部１４８と、
（Ａ４）コンテンツのテキストを音声言語化するための音声言語データを生成する生成処理（以下、「音声言語データ生成処理」という。）を含む、各処理を実行するためのアプリケーションなどのコンテンツの視聴を実行するために必要なデータ（例えば、テーブルデータなど）が記憶されるアプリケーション情報記憶部１４９と、
を有している。
【0085】
処理部１００は、記憶部１４０内の主記憶部１４２をワーク領域として各種処理を行う。処理部１００の機能は各種プロセッサ（ＣＰＵ、ＤＳＰ等）、ＡＳＩＣ（ゲートアレイ等）などのハードウェアや、プログラムにより実現できる。
【0086】
処理部１００は、情報記憶媒体１８０に格納されるプログラム（データ）に基づいて本実施形態の種々の処理を行う。即ち情報記憶媒体１８０には、本実施形態の各部としてコンピュータを機能させるためのプログラム（各部の処理をコンピュータに実行させるためのプログラム）が記憶される。
【0087】
例えば、処理部１００（プロセッサ）は、情報記憶媒体に記憶されているプログラムに基づいて、サーバ装置１０全体の制御を行うとともに、各部間におけるデータ等の受け渡しの制御などの各種の処理を行う。さらに、端末装置２０からの要求に応じた各種サービスを提供する処理を行う。
【0088】
具体的には、本実施形態の処理部１００は、通信制御部１０１、Ｗｅｂ処理部１０２、ログイン管理部１０３、ユーザ管理部１０４、コンテンツ管理部１０５、発話音声生成処理部１０６、コスト管理部１０７、タイマ管理部１０９、及び、情報提供部１１０を少なくとも有している。
【0089】
なお、例えば、本実施形態のユーザ管理部１０４は、本発明のユーザ情報管理手段及びユーザ状況検出手段を構成し、コンテンツ管理部１０５は、本発明のコンテンツ管理手段、及び、提供制御処理手段を構成する。また、発話音声生成処理部１０６は、本発明の生成処理手段及び組み合わせ検出手段を構成し、コスト管理部１０７は、本発明のコスト算出手段、コスト管理手段及び許可判定処理手段を構成する。
【0090】
通信制御部１０１は、端末装置２０とネットワークを介してデータを送受信する処理を行う。すなわち、サーバ装置１０は、通信制御部１０１によって端末装置２０等から受信した情報に基づいて各種処理を行う。
【0091】
特に、本実施形態の通信制御部１０１は、ユーザの端末装置２０からの要求に基づいて
、コンテンツデータ及び当該コンテンツデータの再生に用いられるデータや情報を、当該ユーザの端末装置２０に送信する処理を行う。
、コンテンツデータ及び当該コンテンツデータの再生に用いられるデータや情報を、当該ユーザの端末装置２０に送信する処理を行う。
【0092】
また、通信制御部１０１は、端末装置２０に入力されたユーザの指示を受け付けるための各種の処理を実行する。
【0093】
Ｗｅｂ処理部１０２は、Ｗｅｂサーバとして機能する。例えば、Ｗｅｂ処理部１０２は、ＨＴＴＰ（Ｈｙｐｅｒｔｅｘｔ Ｔｒａｎｓｆｅｒ Ｐｒｏｔｏｃｏｌ）等の通信プロトコルを通じて、端末装置２０にインストールされているＷｅｂブラウザ２１１の要求に応じてデータを送信する処理、及び、端末装置２０のＷｅｂブラウザ２１１によって送信されるデータを受信する処理を行う。
【0094】
なお、本実施形態のサーバ装置１０は、コンテンツ用のサーバと、ＳＮＳ用のサーバとを別々に形成してもよいし、同一のサーバによって構成されてもよい。また、本実施形態のコンテンツをユーザに視聴及び提供させるための各種の処理は、サーバ装置１０が一部又は全部を実行してもよいし、各ユーザの端末装置２０がその一部を実行してもよい。
【0095】
ログイン管理部１０３は、各ユーザのコンテンツ視聴サービスに対するログインに関する管理を行う。
【0096】
具体的には、ログイン管理部１０３は、各ユーザにおける、ログイン回数（総ログイン回数・所定期間内のログイン回数）及び連続ログイン日数、並びに、コンテンツの総視聴時間や所定期間内（例えば、直近１週間や１月）の視聴期間をユーザ情報記憶部１４８に登録し、プレーヤ毎にプレーヤ関連情報として管理する。
【0097】
ユーザ管理部１０４は、ユーザ毎に、ユーザ毎に、ユーザ情報記憶部１４８に、ユーザ情報とユーザコスト情報とを記録して管理する。
【0098】
コンテンツ管理部１０５は、コンテンツ情報記憶部１４４に記憶されている各コンテンツにおけるコンテンツ情報と、音素情報記憶部１４６に記憶された各発話音素情報と、を管理する。
【0099】
特に、コンテンツ管理部１０５は、端末装置２０にコンテンツデータを含むコンテンツ情報を提供し、各ユーザにおけるコンテンツデータの提供及び再生の制御に関する処理を実行する。
【0100】
発話音声生成処理部１０６は、プレーヤの指示に基づいて、又は、プログラムに従って、コンテンツデータに含まれるキャラクタに、発話音素情報に含まれる音素データを割り当てて、コンテンツデータの当該キャラクタが発話するテキストを音声言語化するための音声言語データを生成する音声言語データ生成処理を実行する。
【0101】
コスト管理部１０７は、生成処理に用いる音素データ、キャラクタデータ及びテキストデータの使用に関するコストが規定されたパラメータ（以下、「コストパラメータ」ともいう。）を管理する。
【0102】
特に、コスト管理部１０７は、生成処理などコンテンツをユーザに視聴するための処理を実行する際のコスト（以下、「実行コスト」という。）を算出する算出処理を実行する。
【0103】
タイマ管理部１０９は、タイマ機能を有し、ストリーミングなどによって端末装置２０
にコンテンツを提供する際に、当該コンテンツの再生状況を管理するために用いる。特に、タイマ管理部１０９は、コンテンツ管理部１０５と連動し、現在時刻や予め設定された時刻を各部に出力する。また、タイマ管理部１０９は、各端末装置２０と同期を取るために用いられる。
にコンテンツを提供する際に、当該コンテンツの再生状況を管理するために用いる。特に、タイマ管理部１０９は、コンテンツ管理部１０５と連動し、現在時刻や予め設定された時刻を各部に出力する。また、タイマ管理部１０９は、各端末装置２０と同期を取るために用いられる。
【0104】
情報提供部１１０は、端末装置２０によってコンテンツを再生させるため各種のコンテンツ情報を生成して該当する端末装置２０に提供する。
【0105】
［３］端末装置
次に、図３を用いて本実施形態の端末装置２０について説明する。なお、図３は、本実施形態の端末装置２０の機能ブロックを示す図である。また、本実施形態の端末装置２０は図２の構成要素（各部）の一部を省略した構成としてもよい。
次に、図３を用いて本実施形態の端末装置２０について説明する。なお、図３は、本実施形態の端末装置２０の機能ブロックを示す図である。また、本実施形態の端末装置２０は図２の構成要素（各部）の一部を省略した構成としてもよい。
【0106】
入力部２６０は、ユーザからの入力情報を入力するための機器であり、ユーザの入力情報を処理部２００に出力する。本実施形態の入力部２６０は、ユーザの入力情報（入力信号）を検出する検出部２６２を備える。入力部２６０は、例えば、レバー、ボタン、ステアリング、マイク、タッチパネル型ディスプレイ、キーボード、マウスなどがある。
【0107】
記憶部２７０は、処理部２００や通信部２９６などのワーク領域となるもので、その機能はＲＡＭ（ＶＲＡＭ）などにより実現できる。そして、本実施形態の記憶部２７０は、ワーク領域として使用される主記憶部２７１と、最終的な表示画像等が記憶される画像バッファ２７２とを含む。なお、これらの一部を省略する構成としてもよい。
【0108】
情報記憶媒体２８０（コンピュータにより読み取り可能な媒体）は、プログラムやデータなどを格納するものであり、その機能は、光ディスク（ＣＤ、ＤＶＤ）、光磁気ディスク（ＭＯ）、磁気ディスク、ハードディスク、磁気テープ、或いはメモリ（ＲＯＭ）などにより実現できる。
【0109】
処理部２００は、情報記憶媒体２８０に格納されるプログラム（データ）に基づいて本実施形態の種々の処理を行う。情報記憶媒体２８０には、本実施形態の各部としてコンピュータを機能させるためのプログラム（各部の処理をコンピュータに実行させるためのプログラム）を記憶することができる。
【0110】
なお、本実施形態では、サーバ装置１０が有する情報記憶媒体１８０や記憶部１４０に記憶されている本実施形態の各部としてコンピュータを機能させるためのプログラムやコンテンツデータを含むコンテンツ情報などを、ネットワークを介して受信し、受信したプログラムやデータを情報記憶媒体２８０に記憶する。
【0111】
なお、記憶部２７０には、サーバ装置１０から受信したプログラムやデータが記憶される。このようにプログラムやデータを受信してネットワークシステムを機能させる場合も本発明の範囲内に含む。
【0112】
表示部２９０は、本実施形態により生成された画像を出力するものであり、その機能は、ＣＲＴ、ＬＣＤ、タッチパネル型ディスプレイ、或いはＨＭＤ（ヘッドマウントディスプレー）などにより実現できる。
【0113】
音出力部２９２は、本実施形態により生成された音を出力するものであり、その機能は、スピーカ、或いはヘッドフォンなどにより実現できる。
【0114】
通信部２９６は、外部（例えば他の端末、サーバ）との間で通信を行うための各種制御
を行うものであり、その機能は、各種プロセッサ又は通信用ＡＳＩＣなどのハードウェアや、プログラムなどにより実現できる。
を行うものであり、その機能は、各種プロセッサ又は通信用ＡＳＩＣなどのハードウェアや、プログラムなどにより実現できる。
【0115】
処理部２００（プロセッサ）は、通信部２９６を介してサーバ装置１０から取得したコンテンツデータを含むコンテンツに関する情報、取得し入力部２６０からの入力情報、又は、プログラムなどに基づいて、コンテンツ処理、表示制御、画像生成処理、或いは、音生成処理などの処理を行う。
【0116】
この処理部２００は、記憶部２７０内の主記憶部２７１をワーク領域として各種処理を行う。処理部２００の機能は各種プロセッサ（ＣＰＵ、ＤＳＰ等）、ＡＳＩＣ（ゲートアレイ等）などのハードウェアや、プログラムにより実現できる。
【0117】
処理部２００は、通信制御部２１０、Ｗｅｂブラウザ２１１、コンテンツ処理部２１２、表示制御部２１３、描画部２２０、音処理部２３０を含む。なお、これらの一部を省略する構成としてもよい。
【0118】
通信制御部２１０は、サーバ装置１０、それぞれとデータを送受信する処理を行う。また、通信制御部２１０は、サーバ装置１０から受信したデータを記憶部２７０に格納する処理、受信したデータを解析する処理、その他のデータの送受信に関する制御処理等を行う。
【0119】
なお、通信制御部２１０は、サーバの宛先情報（ＩＰアドレス、ポート番号）を情報記憶媒体２８０に記憶し、管理する処理を行うようにしてもよい。そして、通信制御部２１０は、ユーザからの通信開始の入力情報を受け付けた場合に、サーバ装置１０との通信を行うようにしてもよい。
【0120】
特に、通信制御部２１０は、サーバ装置１０にユーザの識別情報や操作情報を送信して、コンテンツに関する情報（ユーザ情報、コンテンツ情報（音声言語データ及びテキストデータなどを含む、コンテンツデータ））、及び、ユーザのＷｅｂページをサーバ装置１０から受信する処理を行う。
【0121】
なお、通信制御部２１０は、所定周期でサーバ装置１０とデータ送受信を行ってもよいし、入力部２６０からの入力情報を受け付けた場合に、サーバ装置１０とデータ送受信を行ってもよい。
【0122】
Ｗｅｂブラウザ２１１は、Ｗｅｂページ（コンテンツの表示画面）を閲覧するためのアプリケーションプログラムであって、Ｗｅｂサーバ（サーバ装置１０）から、ＨＴＭＬファイルや画像ファイル等をダウンロードし、レイアウトを解析して表示制御する。また、Ｗｅｂブラウザ２１１は、入力フォーム（リンクやボタンやテキストボックス等）を用いてデータをＷｅｂサーバ（サーバ装置１０）に送信する。
【0123】
本実施形態のＷｅｂブラウザ２１１は、ブラウザコンテンツを実現することができる。例えば、Ｗｅｂブラウザ２１１は、Ｗｅｂサーバ（サーバ装置１０）から受信したＪａｖａＳｃｒｉｐｔ（登録商標）、ＦＬＡＳＨ（登録商標）、Ｊａｖａ（登録商標）等で記述されたプログラムを実行するものであってもよい。
【0124】
端末装置２０は、Ｗｅｂブラウザ２１１によって、インターネットを介してＵＲＬによって指定されたＷｅｂサーバからの情報を表示させることができる。例えば、端末装置２０は、サーバ装置１０から受信したコンテンツ（ＨＴＭＬ等のデータ）をＷｅｂブラウザ２１１によって表示させることができる。
【0125】
コンテンツ処理部２１２は、コンテンツを表示するための種々の処理を実行する。例えばコンテンツ処理部２１２は、コンテンツ開始条件が満たされた場合にコンテンツを開始する処理、コンテンツデータ及び音声言語データに基づいてコンテンツを再生制御する処理、及び、コンテンツの再生終了条件が満たされた場合にコンテンツの再生を終了する処理などがある。
【0126】
特に、コンテンツ処理部２１２は、コンテンツデータに基づいて画像を生成しつつ、テキストデータによって示されるテキストに従って音声言語データを再生し、画像の再生に沿ってキャラクタの発話のための制御処理を実行する。
【0127】
表示制御部２１３は、表示部２９０に表示する処理を行う。例えば、表示制御部２１３は、Ｗｅｂブラウザ２１１を用いて表示してもよい。
【0128】
描画部２２０は、処理部２００で行われる種々の処理（例えば、コンテンツ処理）に基づいて描画処理を行い、これにより画像を生成し、表示制御部２１３によって表示部２９０に出力する。描画部２２０が生成する画像は、いわゆる２次元画像であってもよいし、いわゆる３次元画像であってもよい。
【0129】
音処理部２３０は、処理部２００で行われる種々の処理の結果に基づいて音処理を行い、ＢＧＭ、効果音、又は音声などのコンテンツ音を生成し、音出力部２９２に出力する。
【0130】
【0131】
【0132】
本実施形態のサーバ装置１０は、端末装置２０と連動し、ユーザ毎に、ユーザが希望するコンテンツを当該ユーザに提供させる装置であって、コンテンツに登場するキャラクタに、ユーザの希望する音声によって発話させつつ、当該コンテンツをユーザに視聴させるための装置である。
【0133】
すなわち、本実施形態のサーバ装置１０は、ユーザの指示の下に、コンテンツに登場するキャラクタ（具体的には、キャラクタデータ）に音素データを割り当てるとともに、当該キャラクタのテキストに沿って割り当てた音素データによって発話するための音声言語データを生成する音声言語データ生成処理を実行し、当該生成した音声言語データ及びコンテンツデータを含むコンテンツ情報を該当する端末装置２０に提供し、コンテンツをユーザに視聴させる構成を有している。
【0134】
そして、本実施形態のサーバ装置１０は、音声言語データを含めコンテンツを提供する際に、ユーザにおけるコストの支払いの有無によって、又は、既に支払ったコスト内に収まっているか否かによって、音声言語データの利用を制限させることが可能な構成を有している。
【0135】
具体的には、サーバ装置１０は、例えば、図４に示すように、
（Ａ１）ユーザが使用可能な音素データの情報を有するユーザ情報と、
（Ａ２）コンテンツに割り当てられる音素データを含む音素情報と、
（Ａ３）音声言語化するためのテキストがデータ化されたテキストデータ及び当該テキストを発話するキャラクタに関するキャラクタデータを含むコンテンツデータから構成されるコンテンツ情報と、
（Ａ４）音声言語データ生成処理に用いる音素データ、当該音声言語データ生成処理において音素データが割り当てられるキャラクタのキャラクタデータ若しくはテキストのテキストデータ、又は、これらの２以上のデータのコストを示すコストパラメータと、
を管理する構成を有している。
（Ａ１）ユーザが使用可能な音素データの情報を有するユーザ情報と、
（Ａ２）コンテンツに割り当てられる音素データを含む音素情報と、
（Ａ３）音声言語化するためのテキストがデータ化されたテキストデータ及び当該テキストを発話するキャラクタに関するキャラクタデータを含むコンテンツデータから構成されるコンテンツ情報と、
（Ａ４）音声言語データ生成処理に用いる音素データ、当該音声言語データ生成処理において音素データが割り当てられるキャラクタのキャラクタデータ若しくはテキストのテキストデータ、又は、これらの２以上のデータのコストを示すコストパラメータと、
を管理する構成を有している。
【0136】
そして、サーバ装置１０は、例えば、図４に示すように、
（Ｂ１）プレーヤの指示又はプログラムの指示などの所与の指示に基づいて、キャラクタデータ（又は、テキストデータ）に、音素データを割り当てて、コンテンツのテキストを音声言語化するための音声言語データを生成する音声言語データ生成処理、
（Ｂ２）コンテンツのテキストに沿ってキャラクタの音声を再生出力する、該当する端末装置２０に、生成した音声言語データを提供する処理（以下、「コンテンツ提供制御処理」という。）、
（Ｂ３）コストパラメータに基づいて、音声言語データ生成処理を実行する際の実行コストを算出する実行コスト算出処理、及び、
（Ｂ４）算出処理によって算出された実行コストに対するユーザの支払いの有無に基づいて、音声言語データ生成処理、及び、コンテンツ提供制御御処理の少なくともいずれか一方の処理の実行許可を判定する実行許可判定処理、
を実行する構成を有している。
（Ｂ１）プレーヤの指示又はプログラムの指示などの所与の指示に基づいて、キャラクタデータ（又は、テキストデータ）に、音素データを割り当てて、コンテンツのテキストを音声言語化するための音声言語データを生成する音声言語データ生成処理、
（Ｂ２）コンテンツのテキストに沿ってキャラクタの音声を再生出力する、該当する端末装置２０に、生成した音声言語データを提供する処理（以下、「コンテンツ提供制御処理」という。）、
（Ｂ３）コストパラメータに基づいて、音声言語データ生成処理を実行する際の実行コストを算出する実行コスト算出処理、及び、
（Ｂ４）算出処理によって算出された実行コストに対するユーザの支払いの有無に基づいて、音声言語データ生成処理、及び、コンテンツ提供制御御処理の少なくともいずれか一方の処理の実行許可を判定する実行許可判定処理、
を実行する構成を有している。
【0137】
なお、図４には、サーバ装置１０に、ユーザが使用可能な音素データの情報として音素データＩＤを含むユーザ情報と、音素データ及び各音素データに対応付けられたコストパラメータから構成される音素情報と、キャラクタデータ及びテキストデータを有するコンテンツ情報と、が管理されていることが示されている（図４の［１］データ管理を参照）。ただし、図４は、音素情報に含まれるコスト情報のみ使用した場合の例を示している。
【0138】
また、図４には、キャラクタ１、２及び３に割り当てる音素データＡ、Ｃ及びＥが選択され、かつ、当該選択された音素データＡ、Ｃ及びＥのコスト情報（すなわち、コストパラメータ）から実行コストが算出されたことが示されている（図４の［２］実行コスト算出処理を参照）。
【0139】
そして、図４には、算出された実行コストを端末装置２０に通知し、かつ、当該実行コストに対するユーザの支払いの有無（支払い済み又は未払い）を検出し、当該検出によって音声言語データ生成処理の実行の可否を判定すること（図４の［３］及び［４］の処理を参照）、及び、当該ユーザの支払いがあったことを検出した場合に、キャラクタ１、２及び３に音素データＡ、Ｃ及びＥを割り当てて音声言語データを生成指示及びその実行をし、かつ、当該生成された音声言語データを端末装置２０に提供されることが示されている（図４の［５］及び［６］の処理を参照）。
【0140】
特に、図４の音声言語生成処理としては、キャラクタ１（キャラクタデータ１及びテキストデータ１）、キャラクタ２（キャラクタデータ２及びテキストデータ２）及びキャラクタ３（キャラクタデータ３及びテキストデータ３）にそれぞれ音素データＡ、音素データＣ及び音素データＥが割り当ててられて、音声言語データＡ、音声言語データＥ及び音声言語データＣが生成されている。
【0141】
一方、サーバ装置１０は、上記の（Ｂ４）の処理に代えて、例えば、図５に示すように、実行許可判定処理において、算出処理によって算出された音素データにおける実行コストと、予め定められた限界値（すなわち、コストの上限値）を比較し、所定の関係性情報
を具備した場合には、音声言語データ生成処理、及び、コンテンツ提供制御御処理の少なくともいずれか一方の処理の実行許可を判定する実行許可判定処理を実行してもよい、
を具備した場合には、音声言語データ生成処理、及び、コンテンツ提供制御御処理の少なくともいずれか一方の処理の実行許可を判定する実行許可判定処理を実行してもよい、
【0142】
なお、図５には、サーバ装置１０に、図４に示す例と同様に、ユーザが使用可能な音素データの情報として音素データＩＤが含まれたユーザ情報と、音素データ及び各音素データに対応付けられたコストパラメータから構成される音素情報と、キャラクタデータ及びテキストデータが含まれるコンテンツ情報と、が管理されていることが示されている（図５の［１］データ管理を参照）。
【0143】
また、図５には、図４に示す例と同様に、キャラクタ１、２及び３に割り当てる音素データＡ、Ｃ及びＥが選択され、かつ、当該選択された音素データＡ、Ｃ及びＥのコスト情報（コストパラメータ）から実行コストが算出されたことが示されている（図５の［２］データ管理を参照）。
【0144】
そして、図５には、実行コストと限界値とを比較して音声言語データ生成処理の実行の可否を判定すること（図５の［４］の処理を参照）、及び、実行コストが限界値よりも小さい場合に、キャラクタ１、２及び３に音素データＡ、Ｃ及びＥを割り当てて音声言語データを生成指示及びその実行をし、かつ、当該生成された音声言語データを端末装置２０に提供されることが示されている（図５の［５］及び［６］の処理を参照）。
【0145】
特に、図５の音声言語生成処理としては、図４に示す例と同様に、キャラクタ１（キャラクタデータ１及びテキストデータ１）、キャラクタ２（キャラクタデータ２及びテキストデータ２）及びキャラクタ３（キャラクタデータ３及びテキストデータ３）にそれぞれ音素データＡ、音素データＣ及び音素データＥが割り当ててられて、音声言語データＡ、音声言語データＥ及び音声言語データＣが生成されている。
【0146】
本実施形態においては、このような構成を有することによって、ユーザにおけるコストの支払いの有無によって音声言語データ及びコンテンツの利用を制限させることができるので、コンテンツや音素データを提供する事業者の収益を確保することができるとともに、従来のコンテンツ提供者によって予め定められたキャラクタ（声優や俳優などの）の音声に制限されること無く、純粋にユーザの好きな音声によってコンテンツの聴取や視聴を実行させることができるようになっている。
【0147】
また、本実施形態においては、例えば、予めユーザが既に支払った範囲内か否か（サブスクリプションなどの予め定められた支払い額の範囲内か否か）によって、音声言語データの利用を制限させることができるので、コンテンツや音素データを提供する事業者の収益をも確保することができるとともに、従来のコンテンツ提供者によって予め定められたキャラクタ（声優や俳優などの）の音声に制限されること無く、純粋にユーザの好きな音声によってコンテンツの聴取や視聴を実行させることができるようになっている。
【0148】
したがって、本実施形態においては、コンテンツそもそもの制作費（すなわち、予算）などの現実的な状況を含めて様々な制限を排除し、よりリアルで聴取者や視聴者などの好みに合致した配役体験を提供し、ユーザのコンテンツに対する興趣性を向上させることができるようになっている。
【0149】
［４．２］コンテンツ情報等
次に、図６を用いて、本実施形態のコンテンツ情報、音素情報及びユーザ情報について説明する。
次に、図６を用いて、本実施形態のコンテンツ情報、音素情報及びユーザ情報について説明する。
【0150】
なお、図６は、本実施形態のコンテンツ情報記憶部１４４、又は、音素情報記憶部１４
６にそれぞれ記憶されコンテンツ情報、又は、音素情報の一例を示す図であり、図７は、本実施形態のユーザ情報記憶部１４８に記憶されユーザ情報の一例を示す図である。
６にそれぞれ記憶されコンテンツ情報、又は、音素情報の一例を示す図であり、図７は、本実施形態のユーザ情報記憶部１４８に記憶されユーザ情報の一例を示す図である。
【0151】
（コンテンツ情報）
各コンテンツ情報は、それぞれ、例えば、映画、漫画、ゲーム、アニメーション、又は、小説などのユーザが視聴するコンテンツに関する情報であって、端末装置２０によって視聴可能な各種のデータ及び情報を有しており、コンテンツ情報記憶部１４４に記憶され、かつ、コンテンツ管理部１０５によって管理される。
各コンテンツ情報は、それぞれ、例えば、映画、漫画、ゲーム、アニメーション、又は、小説などのユーザが視聴するコンテンツに関する情報であって、端末装置２０によって視聴可能な各種のデータ及び情報を有しており、コンテンツ情報記憶部１４４に記憶され、かつ、コンテンツ管理部１０５によって管理される。
【0152】
例えば、各コンテンツ情報には、図６（Ａ）に示すように、コンテンツＩＤに対応付けて、
（Ａ１）画像データ、キャラクタデータ及びテキストがデータ化されたテキストデータを含むコンテンツデータ、
（Ａ２）コンテンツが視聴される際のコスト（アイテムやポイントなどの消費量を含む。）が規定されているコンテンツコスト情報及び各コンテンツにおける発話音声データ生成処理時などに設定されている実行コストの限界値を示す限界値情報を含むコスト関連情報、
（Ａ３）コンテンツデータに音声言語データを割り当てて、コンテンツデータ及びテキストデータを含めて、端末装置２０において再生させるための再生制御データから構成される再生制御情報、及び、
（Ａ４）題名、あらすじ及び予告編や広告のためのコンテンツなどの書誌的な情報であって付加的な情報（以下、「付加情報」という。）、
などが含まれる。
（Ａ１）画像データ、キャラクタデータ及びテキストがデータ化されたテキストデータを含むコンテンツデータ、
（Ａ２）コンテンツが視聴される際のコスト（アイテムやポイントなどの消費量を含む。）が規定されているコンテンツコスト情報及び各コンテンツにおける発話音声データ生成処理時などに設定されている実行コストの限界値を示す限界値情報を含むコスト関連情報、
（Ａ３）コンテンツデータに音声言語データを割り当てて、コンテンツデータ及びテキストデータを含めて、端末装置２０において再生させるための再生制御データから構成される再生制御情報、及び、
（Ａ４）題名、あらすじ及び予告編や広告のためのコンテンツなどの書誌的な情報であって付加的な情報（以下、「付加情報」という。）、
などが含まれる。
【0153】
特に、キャラクタデータとしては、テキストをセリフとして発するキャラクタのデータであり、例えば、映画、漫画、ゲーム、アニメーション、又は、小説などのコンテンツ内に登場するキャラクタの属性に関する情報（すなわち、属性情報）が規定されたデータを示す。
【0154】
例えば、属性には、動物・ロボット・人間などのキャラクタの種別や役割（役どころ）、キャラクタの性別や年齢、キャラクタの特徴（性格）、キャラクタが使用する方言やテキストの言語（他言語）の種別、及び、キャラクタの人気度などの属性が含まれる。
【0155】
また、テキストデータは、コンテンツに登場する各キャラクタのセリフや各シーンを説明するための文章（例えば、ト書き）、１又は２以上の文章、又は、章・ページ・段落・節などの区切り毎のテキストのデータである。
【0156】
なお、テキストデータには、形態素解析、構文解析、意味解析及び文脈解析などの自然言語処理が既に実行されて、その解析結果に関する情報（以下、「テキスト解析情報」という。）、及び、当該テキストが用いられるキャラクタの属性（すなわち、当該テキストを発話するキャラクタに関する属性）を示す情報（すなわち、属性情報）が規定されていてもよい。
【0157】
例えば、テキスト解析情報には、単語、文字や文字列、及び、文章などの各テキストにおける品詞に関する情報、係り受けに関する情報、意味を示す情報、及び、推定された代名詞や省略された名詞の対象に関する情報などが含まれる。
【0158】
すなわち、テキストデータには、各テキストに関する品詞、係り受け、意味、代名詞や省略された対象などの各情報を有していてもよい。
【0159】
一方、コンテンツコスト情報において、キャラクタデータを規定するコスト情報は、コンテンツに登場する全てのキャラクタに対して規定されたパラメータ（すなわち、コストパラメータ）であってもよいし、メインのキャラクタに対して、又は、コンテンツ上、重要なキャラクタに対して規定されたコストパラメータであってもよい。
【0160】
また、コンテンツコスト情報において、テキストデータを規定するコスト情報は、コンテンツデータ全体のみならず、シーン毎、セリフ毎、及び、キャラクタ毎などの予め定められた部分毎に規定されていてもよい。
【0161】
そして、コンテンツコスト情報は、コンテンツ視聴サービスで用いられるサービス内通貨若しくは当該サービスで用いるアイテム（例えば、数、又は、種別とその数）に基づいて規定される消費量などのコスト、又は、コストに対応する課金額が規定されているパラメータ（以下、「コンテンツコストパラメータ」ともいう。）である。
【0162】
なお、本実施形態においては、コンテンツデータには、画像に関するデータが無く、テキストデータ及びキャラクタデータから構成されるものが含まれる。
【0163】
また、本実施形態のコンテンツ情報は、コンテンツ情報記憶部１４４に記憶されているが、図示ししない他のデータベースから取得してもよい。
【0164】
（音素情報）
各音素情報は、それぞれ、例えば、声優、俳優、又は、アナウンサーなどの発話者から予め採取されて生成された音素に関する情報であって、コンテンツのキャラクタをテキストに基づいて、発話させる際に用いる音声言語データを生成する際に用いる情報である。
各音素情報は、それぞれ、例えば、声優、俳優、又は、アナウンサーなどの発話者から予め採取されて生成された音素に関する情報であって、コンテンツのキャラクタをテキストに基づいて、発話させる際に用いる音声言語データを生成する際に用いる情報である。
【0165】
例えば、各音素情報には、図６（Ｂ）に示すように、音素データＩＤに対応付けて、
（Ｂ１）子音・母音・半母音などの分節音素、当該分節音素の関係性を示す声調（トーン）・イントネーションを含む音の高さ、強勢やアクセント、方言の種別、言語の種別（日本語や英語）、及び、文字間における子音と母音のつながり（すなわち、連接要素）などが規定されている音素データ、
（Ｂ２）音素データが音声言語データ生成処理に用いられる際のコスト（アイテムなどの消費量や課金額）が規定されている音素コスト情報、及び、
（Ｂ３）音素情報をユーザに説明するため書誌的な情報などの付加的な情報（以下、「付加情報」ともいう。）、
が含まれる。
（Ｂ１）子音・母音・半母音などの分節音素、当該分節音素の関係性を示す声調（トーン）・イントネーションを含む音の高さ、強勢やアクセント、方言の種別、言語の種別（日本語や英語）、及び、文字間における子音と母音のつながり（すなわち、連接要素）などが規定されている音素データ、
（Ｂ２）音素データが音声言語データ生成処理に用いられる際のコスト（アイテムなどの消費量や課金額）が規定されている音素コスト情報、及び、
（Ｂ３）音素情報をユーザに説明するため書誌的な情報などの付加的な情報（以下、「付加情報」ともいう。）、
が含まれる。
【0166】
なお、音素コスト情報は、コンテンツコスト情報と同様に、コンテンツ視聴サービスで用いられるサービス内通貨若しくは当該サービスで用いるアイテム（例えば、数、又は、種別とその数）に基づいて規定される消費量などのコスト、又は、当該コストに対応する課金額が規定されているパラメータ（以下、「音素コストパラメータ」ともいう。）である。
【0167】
（ユーザ情報）
ユーザ情報には、図７に示すように、ユーザ毎に
（Ｃ１）ユーザのニックネームやユーザＩＤ、
（Ｃ２）現在のランク、ポイント、経験値、エネルギーパラメータ値（ライフエネルギー値、体力値やパワー値でコンテンツ視聴サービスなどにゲーム的な要素が含まれている場合など）などの属性に関する情報（以下、「属性情報」ともいう。）、
（Ｃ３）使用可能なコンテンツデータ、キャラクタデータ、テキストデータ及び音素情報に関する利用可能であることを示す情報（以下、「利用可能情報」といい、例えば、音素
ＩＤ又はコンテンツＩＤに対応付けて視聴回数などの数な制限、視聴期間などの時期的制限又はユーザレベルなどのユーザ毎の個別的な制限を示す情報）、
（Ｃ４）コンテンツ視聴サービスへの支払い状況などを含む。当該サービスに関する課金履歴及び課金額などの課金に関する情報（ユーザコスト情報）、及び、支払い制限などの発話音声データ生成処理時などの限界値を示す情報（以下、「限界値情報」ともいう。）と、
（Ｃ５）コンテンツ視聴サービスへのログインの回数、その時間及びその頻度などのログイン履歴に関する情報（以下、「アクセス履歴情報」という。）、
（Ｃ６）登録されたフレンドやフォロワーなどの一定の関係性を有する他のユーザ（以下、「関連ユーザ」ともいう。）に関する情報（以下、「関連ユーザ情報」という。）、
などが記憶される。
ユーザ情報には、図７に示すように、ユーザ毎に
（Ｃ１）ユーザのニックネームやユーザＩＤ、
（Ｃ２）現在のランク、ポイント、経験値、エネルギーパラメータ値（ライフエネルギー値、体力値やパワー値でコンテンツ視聴サービスなどにゲーム的な要素が含まれている場合など）などの属性に関する情報（以下、「属性情報」ともいう。）、
（Ｃ３）使用可能なコンテンツデータ、キャラクタデータ、テキストデータ及び音素情報に関する利用可能であることを示す情報（以下、「利用可能情報」といい、例えば、音素
ＩＤ又はコンテンツＩＤに対応付けて視聴回数などの数な制限、視聴期間などの時期的制限又はユーザレベルなどのユーザ毎の個別的な制限を示す情報）、
（Ｃ４）コンテンツ視聴サービスへの支払い状況などを含む。当該サービスに関する課金履歴及び課金額などの課金に関する情報（ユーザコスト情報）、及び、支払い制限などの発話音声データ生成処理時などの限界値を示す情報（以下、「限界値情報」ともいう。）と、
（Ｃ５）コンテンツ視聴サービスへのログインの回数、その時間及びその頻度などのログイン履歴に関する情報（以下、「アクセス履歴情報」という。）、
（Ｃ６）登録されたフレンドやフォロワーなどの一定の関係性を有する他のユーザ（以下、「関連ユーザ」ともいう。）に関する情報（以下、「関連ユーザ情報」という。）、
などが記憶される。
【0168】
［４．３］音声言語データ生成処理
次に、本実施形態の音声言語データ生成処理について説明する。
次に、本実施形態の音声言語データ生成処理について説明する。
【0169】
（音声言語データ生成処理の概要）
発話音声生成処理部１０６は、実行許可判定処理の判定結果を前提に、プレーヤの指示に基づいて、又は、プログラムに従って、コンテンツデータに含まれるキャラクタデータ（すなわち、キャラクタ）に、音素情報に含まれる音素データを割り当てて、コンテンツのテキストを音声言語化するための音声言語データを生成する音声言語データ生成処理を実行する。
発話音声生成処理部１０６は、実行許可判定処理の判定結果を前提に、プレーヤの指示に基づいて、又は、プログラムに従って、コンテンツデータに含まれるキャラクタデータ（すなわち、キャラクタ）に、音素情報に含まれる音素データを割り当てて、コンテンツのテキストを音声言語化するための音声言語データを生成する音声言語データ生成処理を実行する。
【0170】
具体的には、発話音声生成処理部１０６は、プレーヤの指示によって、又は、プログラムに従って自動的に、コンテンツ情報が選択されると、当該選択されたコンテンツ情報からコンテンツに登場するすべてのキャラクタ又は音素データを割り当て可能なキャラクタの情報（すなわち、キャラクタ情報）を抽出する。
【0171】
そして、発話音声生成処理部１０６は、抽出した各キャラクタ情報に基づいて、プレーヤに音素データを割り当てるキャラクタの種別や当該キャラクタに関する情報を含む、キャラクタ選択情報をそれぞれ生成し、選択可能な各キャラクタをプレーヤに選択可能に提示させるために、当該生成したキャラクタ選択情報を送信する。
【0172】
また、発話音声生成処理部１０６は、プレーヤが割り当て可能な音素データの発話音素情報を取得し、当該音素データの種別や特徴を示す情報を含む、割り当て可能音素選択情報を生成し、割り当て可能な音素データをプレーヤに選択可能に提示させるために、当該生成した割り当て音素選択情報を送信する。
【0173】
そして、発話音声生成処理部１０６は、プレーヤによって選択されたキャラクタと当該キャラクタに割り当てを希望する音素データとの組み合わせを示す組み合わせ情報を取得すると、当該組み合わせ情報に基づいて該当する音素データと、該当するキャラクタにおける各テキストを示すキャラクタデータと、に基づいて、選択されたキャラクタのテキストを音声言語化するための音声言語データを生成する音声言語データ生成処理を実行する。
【0174】
特に、このときに、実行許可判定処理が実行され、音声言語データ生成処理の実行が許可された場合（ユーザによって実行コストの支払いが実行されたと判定された場合又は当該実行コストが限界値内であると判定された場合）に、発話音声生成処理部１０６は、音声言語データ生成処理を、プレーヤが各キャラクタデータに割り当てた音素データに基づいて、各キャラクタの発話音声となる音声言語データを生成する音声言語データ生成処理を実行する。
【0175】
（音声言語データ生成処理の原理）
発話音声生成処理部１０６は、音声言語データ生成処理としては、プレーヤに選択されたキャラクタのテキストにおける解析情報を取得し、又は、当該選択されたキャラクタのテキストに対して自然言語処理（すなわち、形態素解析や構文解析など）などの所定の解析を実行して当該解析情報を取得する。
発話音声生成処理部１０６は、音声言語データ生成処理としては、プレーヤに選択されたキャラクタのテキストにおける解析情報を取得し、又は、当該選択されたキャラクタのテキストに対して自然言語処理（すなわち、形態素解析や構文解析など）などの所定の解析を実行して当該解析情報を取得する。
【0176】
そして、発話音声生成処理部１０６は、選択された音素データに基づきつつ、該当するテキストにおける解析情報に従って、かつ、各テキスト（すなわち、文字列や個々の文字）に沿って、子音・母音・半母音などの分節音素を割り当てつつ、当該分節音素の関係性を示す声調（トーン）・イントネーションを含む音の高さ、強勢やアクセント、方言の種別、言語の種別（日本語や英語）、及び、文字間における子音と母音のつながり（すなわち、連接要素）などを調整し、発話音声言語データを生成する。
【0177】
具体的には、発話音声生成処理部１０６は、音素データをテキストに割り当てることによって発話音（すなわち、音声としての発話される音）を構築して発話音声データを生成する場合に、テキストの解析情報に基づいて、分節音素の割り当て、及び、声調（トーン）・イントネーションを含む音の高さ、強勢やアクセント、及び、連接などの調整を実行する際に、解析情報を含めて機械学習などのＡＩ技術を用いて発話音声言語データを生成する。
【0178】
すなわち、発話音声生成処理部１０６は、文字列や個々の文字への音素（分節音素）の割り当て、及び、音の高さ・強勢やアクセント・連接などの調整を行う際に、自然言語処理における解析情報とともに、音素データの割り当て先のキャラクタの属性、又は、テキストの属性に基づいて予め生成された学習可能な当該音素データのデータモデルから構成される人工知能（ＡＩ：Artificial Intelligent）の技術を用いた音素データのモデル情報を用いる。
【0179】
特に、発話音声生成処理部１０６は、コンテンツ、キャラクタ又はテキストなどの各属性（特に、キャラクタの属性及びテキストの属性）に対応付けて各音素の変化量や変化態様などの特徴量を抽出し、当該抽出した特徴量について機械学習をすることによって生成された音素データのモデル情報を用いる。
【0180】
すなわち、発話音声生成処理部１０６は、自然言語処理における解析情報に基づきつつ、キャラクタの属性、及び、テキストの属性の少なくともいずれか一方の属性に基づいて生成された音素データのデータモデルを示すモデル情報に従って、テキストを発話者の音声にするための音声言語データを生成する音声言語データ生成処理を実行する。
【0181】
例えば、発話音声生成処理部１０６は、既に、評価された発話音声言語データ（すなわち、発話された音）を教師データとして用いるサポートベクターマシンやニューラルネットワーク（例えば、再帰型ニューラルネットワーク）などのディープラーニングを含む機械学習、又は、ＧＡＮ（敵対的生成ネットワーク）やアソシエーション分析などの教師データ無しのディープラーニングを含む機械学習が実行された音素データのモデル情報を用いる。
【0182】
そして、発話音声生成処理部１０６は、このような音素データのモデル情報を用いて発話音声データ生成処理を実行する。
【0183】
一方、発話音声生成処理部１０６は、当該生成した音声言語データに基づいて音素データのモデル情報を学習させる学習処理を実行する。
【0184】
すなわち、発話音声生成処理部１０６は、当該発話音声言語データを生成する毎に、当該モデル情報を学習させて新たなモデル情報を生成して更新し、更新したモデル情報を用いて次回以降の発話音声言語データの生成に用いている。
【0185】
（音素データの割り当てのないキャラクタの取り扱い）
発話音声生成処理部１０６は、割り当て可能な全てのキャラクタに対して音素情報との組み合わせを示す組み合わせ情報を取得できなかった場合（すなわち、ユーザによって音素情報の割り当てを希望しないキャラクタが存在した場合）には、デフォルトとして予め定められた音素データを当該キャラクタに割り当ててもよいし、発話音素情報及びキャラクタ情報に基づいてキャラクタの特徴と音素データの特徴とによってマッチングを実行して特定の音素データを当該キャラクタに割り当ててもよい。
発話音声生成処理部１０６は、割り当て可能な全てのキャラクタに対して音素情報との組み合わせを示す組み合わせ情報を取得できなかった場合（すなわち、ユーザによって音素情報の割り当てを希望しないキャラクタが存在した場合）には、デフォルトとして予め定められた音素データを当該キャラクタに割り当ててもよいし、発話音素情報及びキャラクタ情報に基づいてキャラクタの特徴と音素データの特徴とによってマッチングを実行して特定の音素データを当該キャラクタに割り当ててもよい。
【0186】
すなわち、発話音声生成処理部１０６は、ユーザの指示に基づいて、音素データが割り当てられていないキャラクタを特定キャラクタとして検出した場合には、当該特定キャラクタに、予め定められた音素データを設定してもよい。
【0187】
［４．４］実行コストに基づく実行許可判定処理
［４．４．１］実行コスト算出処理を含む実行コストに基づく実行許可判定処理
次に、図８及び図９を用いて、本実施形態の実行コスト算出処理を含む実行コストに基づく実行許可判定処理について説明する。
［４．４．１］実行コスト算出処理を含む実行コストに基づく実行許可判定処理
次に、図８及び図９を用いて、本実施形態の実行コスト算出処理を含む実行コストに基づく実行許可判定処理について説明する。
【0188】
【0189】
（基本原理）
コスト管理部１０７は、音素データなどのコストパラメータの管理を前提にしつつ、当該音素データなどの実行コスト（アイテムなどの消費量）に対するユーザの支払いの有無に基づいて、発話音声データ生成処理の実行の可否を判定する実行許可判定処理を実行する。
コスト管理部１０７は、音素データなどのコストパラメータの管理を前提にしつつ、当該音素データなどの実行コスト（アイテムなどの消費量）に対するユーザの支払いの有無に基づいて、発話音声データ生成処理の実行の可否を判定する実行許可判定処理を実行する。
【0190】
すなわち、コスト管理部１０７は、ユーザによって実行コストの支払いが無い場合には音声言語データの生成などを実行せず、当該ユーザによって実行コストの支払いがある場合には音声言語データの生成などを実行させるため、このような実行許可判定処理を実行する構成を有している。
【0191】
具体的には、コスト管理部１０７は、生成処理に用いる音素データ、キャラクタデータ及びテキストデータのうち、いずれか１のデータの使用に関するコストが規定されたコストパラメータを管理する。
【0192】
特に、コスト管理部１０７は、コンテンツ情報記憶部１４４に記憶されているコンテンツコスト情報に含まれる各キャラクタのコストパラメータ、及び、各テキスト（コンテンツ全体のテキストやその一部のテキストを含む。）のコストパラメータ（基準値）を管理する。
【0193】
また、コスト管理部１０７は、音素情報記憶部１４６に記憶されている音素コスト情報に含まれる各音素データの使用に関するコストパラメータ（基準値）を管理する。
【0194】
そして、コスト管理部１０７は、上述した音声言語データ生成処理の実行時に、ユーザによって選択された、又は、プログラムによって従って自動的に選択された、音素データ
、キャラクタデータ、テキストデータ、又は、これらの２以上の組み合わせのそれぞれのコストパラメータ（基準値）に基づいて、当該音声言語データ生成処理のトータルのコスト（すなわち、実行コスト）を算出する算出処理（すなわち、実行コスト算出処理）を実行する。
、キャラクタデータ、テキストデータ、又は、これらの２以上の組み合わせのそれぞれのコストパラメータ（基準値）に基づいて、当該音声言語データ生成処理のトータルのコスト（すなわち、実行コスト）を算出する算出処理（すなわち、実行コスト算出処理）を実行する。
【0195】
そして、コンテンツ管理部１０５は、このように算出した実行コストに基づいて、該当するユーザに対して、所定の方法による支払いを要求（以下、「実行コスト支払い要求」ともいう。）し、当該ユーザの支払いの有無に基づいて、音声言語データ生成処理の実行可否を判定する実行許可判定処理を実行する。
【0196】
（実行コスト算出処理）
コスト管理部１０７は、実行コスト算出処理としては、キャラクタ又はテキストに割り当てる音素データがユーザによって又はプログラムによって１以上選択された場合に、当該選択された各音素データに、又は、当該各音素データが割り当てられると想定されるそれぞれのキャラクタデータ若しくはテキストデータに対応付けて管理されているコストパラメータを読み出す。
コスト管理部１０７は、実行コスト算出処理としては、キャラクタ又はテキストに割り当てる音素データがユーザによって又はプログラムによって１以上選択された場合に、当該選択された各音素データに、又は、当該各音素データが割り当てられると想定されるそれぞれのキャラクタデータ若しくはテキストデータに対応付けて管理されているコストパラメータを読み出す。
【0197】
そして、コスト管理部１０７は、読み出した各コストパラメータを合算など所与の演算を実行することによって実行コストを算出する。
【0198】
特に、コスト管理部１０７は、実行コスト算出処理としては、例えば、図８に示すように、ユーザが割り当てを希望する各音素データに規定されているコストパラメータに基づいて所定の演算（例えば、合算）を実行し、その演算結果を実行コストとして算出する処理（以下、「音素データ実行コスト算出処理」という。）を行う。
【0199】
例えば、図８に示すように、ユーザによって音素データＡ（コスト：５０ポイント）、音素データＢ（コスト：５０ポイント）、音素データＣ（コスト：４０ポイント）、音素データＤ（コスト：６０ポイント）及び音素データＥ（コスト：４５ポイント）が使用可能な状態であって、そのうち、音素データＡ、Ｃ及びＥが選択された場合を想定する。
【0200】
この場合には、コスト管理部１０７は、図８に示すように、実行コスト算出処理を実行し、実行コストとして、１３５ポイントを算出する。
【0201】
一方、コスト管理部１０７は、実行コスト算出処理としては、上記に代えて、ユーザが希望する音素データを割り当て先である各キャラクタに規定されているコストに基づいて所定の演算（例えば、合算）を実行し、その演算結果を実行コストとして算出する処理（以下、「キャラクタコスト演算処理」という。）を実行してもよい。
【0202】
例えば、図９に示すように、ユーザによって音素データＡ、音素データＢ、音素データＣ、音素データＤ及び音素データＥが使用可能な状態であって、そのうち、音素データＡ、Ｃ及びＥが選択され、かつ、音素データを割り当てるコンテンツには、それぞれコストが設定されたキャラクタ１（コスト：１００ポイント）、２（コスト：５０ポイント）及び３（コスト：４０ポイント）が登場する場合を想定する。
【0203】
この場合には、コスト管理部１０７は、図９に示すように、キャラクタコスト演算処理を実行し、実行コストとして、１９０ポイントを算出する。
【0204】
なお、本実施形態においては、音素データ又はキャラクタに基づいて実行コストが算出されているが、音素データが割り当てられるテキスト（一部も含む。）に規定されているコストに基づいて、実行コストが算出されてもよいし、音声言語データ生成処理に用いる
音素データ、キャラクタ、又は、テキストの２以上の組み合わせのそれぞれのコストパラメータに基づいて、実行コストが算出されてもよい。
音素データ、キャラクタ、又は、テキストの２以上の組み合わせのそれぞれのコストパラメータに基づいて、実行コストが算出されてもよい。
【0205】
（実行許可判定処理）
コンテンツ管理部１０５は、上述のように実行コストが算出されると、実行コスト支払い要求として、該当するユーザの端末装置２０に、システム内通貨若しくはシステム内で用いるアイテム（例えば、数、又は、種別とその数）に基づいて規定されるコスト、又は、コストに対応する課金額を、提示する。
コンテンツ管理部１０５は、上述のように実行コストが算出されると、実行コスト支払い要求として、該当するユーザの端末装置２０に、システム内通貨若しくはシステム内で用いるアイテム（例えば、数、又は、種別とその数）に基づいて規定されるコスト、又は、コストに対応する課金額を、提示する。
【0206】
具体的には、コンテンツ管理部１０５は、算出したアイテムの消費量又は課金額を示す情報とともに、当該アイテムの消費又は課金額による支払いを促すための実行コスト支払い要求を、情報提供部１１０を介して、該当する端末装置２０に送信する。
【0207】
そして、コンテンツ管理部１０５は、端末装置２０を介して、提示した対価の支払いに関する情報、又は、課金に関する情報を受信すると、当該受信した情報によって当該ユーザの支払いの有無を判定する実行許可判定処理を実行する。
【0208】
このとき、コンテンツ管理部１０５は、例えば、上記の図４に示すように、実行許可判定処理において、実行コストに対する支払いが適正に実行されたことを示す情報を受信した場合には、音声言語データ生成処理の実行を許可し、対価に対する支払いが適正に実行されていないとことを示す情報を受信した場合には、音声言語データの生成処理を中止し、当該中止した旨を示す情報を生成して該当する端末装置２０に提供する中止処理を実行する。
【0209】
【0210】
【0211】
コスト管理部１０７は、上記の実行許可判定処理に代えて、上記の実行コスト算出処理によって算出した実行コストと予め定められているコストの限界値とが所与の関係性条件を具備していると判定した場合には、発話音声データ生成処理の実行を許可する実行許可判定処理を実行してもよい。
【0212】
特に、コンテンツ管理部１０５は、予め設定されたコストの限界値としては、例えば、ユーザが予め支払ったコスト（事前にアイテムを消費させた消費量や課金額）、又は、サブスクリプションなど一定額（月額課金額や年会費など）を支払うと一定のサービスを享受できる場合の限度額（アイテムやポイントの消費量を含む。以下同じ。）、又は、コンテンツ提供者が予め設定した場合の限度額を示す値などの上限値やそれに対応する値であって、コンテンツ毎に対応付けられて設定されている値（例えば、コンテンツ毎に設定された値）であってもよいし、ユーザ毎に対応付けられた値であってもよい。
【0213】
そして、コンテンツ管理部１０５は、所与の関係性条件として、生成処理に用いる音素データのコストが、これらの限界値を超えていない場合などの条件を用いる。
【0214】
すなわち、限界値に基づく実行許可判定処理としては、コンテンツ管理部１０５は、生成処理に用いる音素データのコストが、予め定められたコストの限界値を超えていない場合など所与の関係性条件が具備されていない場合には音声言語データの生成などの実行を
させず、当該限界値を超えている場合など、所与の関係性条件が具備されている場合には、音声言語データの生成などを実行させるため、このような実行許可判定処理を実行する構成を有している。
させず、当該限界値を超えている場合など、所与の関係性条件が具備されている場合には、音声言語データの生成などを実行させるため、このような実行許可判定処理を実行する構成を有している。
【0215】
具体的には、コスト管理部１０７は、上述と同様に、音素情報記憶部１４６に記憶されている音素コスト情報に含まれる各音素データのコストのパラメータ（基準値）を管理する。
【0216】
また、コスト管理部１０７は、上述した音声言語データ生成処理の実行時に、ユーザによって選択された、又は、プログラムによって従って自動的に選択された、音素データのコストパラメータ（基準値）に基づいて、当該音声言語データ生成処理のトータルのコスト（すなわち、実行コスト）を算出する算出処理（すなわち、実行コスト算出処理）を実行する。
【0217】
そして、コンテンツ管理部１０５は、このように算出した実行コストが、例えば、予めユーザが既に支払ったコストに基づく限界値以内か否かを判定する実行許可判定処理を実行する。
【0218】
このとき、コンテンツ管理部１０５は、実行許可判定処理において、実行コストが限界値以内の場合には、発話音声データ生成処理の実行の許可し、実行コストが限界値を超えた場合には、音声言語データの生成処理を中止し、当該中止した旨を示す情報を生成して該当する端末装置２０に提供する中止処理を実行する。
【0219】
例えば、図１０に示すように、ユーザによって音素データＡ（コスト：５０ポイント）、音素データＢ（コスト：５０ポイント）、音素データＣ（コスト：４０ポイント）、音素データＤ（コスト：６０ポイント）及び音素データＥ（コスト：４５ポイント）が使用可能な状態であって、ユーザＡに設定されたコスト上限（既にユーザＡが支払った金額に対応するポイント）が、１５０ｐｔの場合を想定する。
【0220】
この場合には、図１０に示すように、音素データＡ、Ｃ及びＥが選択された場合には、コスト管理部１０７は、実行コストとして、１３５ｐｔを算出し、上限値の１５０ｐｔ以内となるため、音声言語データ生成処理の実行を許可する旨の判定を行う。
【0221】
その一方、上記と同様な場合であても、図１０に示すように、音素データＡ、Ｂ及びＣが選択された場合には、コスト管理部１０７は、実行コストとして、１６０ｐｔを算出し、上限値の１５０ｐｔを超えるため、音声言語データ生成処理の実行を中止する旨の判定をし、中止処理を実行する。
【0222】
なお、限界値は、ユーザ毎に設定されている点に代えて、コンテンツ毎に設定されていてもよい。
【0223】
例えば、この場合には、図１１に示すように、ユーザによって音素データＡ（コスト：５０ポイント）、音素データＢ（コスト：５０ポイント）、音素データＣ（コスト：４０ポイント）、音素データＤ（コスト：６０ポイント）及び音素データＥ（コスト：４５ポイント）が使用可能な状態であって、コンテンツＩＤがＩＤＣ０００１のコンテンツに設定されたコスト上限が、１５０ｐｔの場合を想定する。
【0224】
この場合には、図１１に示すように、音素データＡ、Ｃ及びＥが選択された場合には、コスト管理部１０７は、実行コストとして、１３５ｐｔを算出し、上限値の１５０ｐｔ以内となるため、音声言語データ生成処理の実行を許可する旨の判定を行う。
【0225】
その一方、上記と同様な場合であても、図１１に示すように、音素データＡ、Ｂ及びＣが選択された場合には、コスト管理部１０７は、実行コストとして、１６０ｐｔを算出し、上限値の１５０ｐｔを超えるため、音声言語データ生成処理の実行を中止する旨の判定をし、中止処理を実行する。
【0226】
［４．５］コンテンツ提供制御御処理
次に、本実施形態のコンテンツ提供制御御処理について説明する。
次に、本実施形態のコンテンツ提供制御御処理について説明する。
【0227】
コンテンツ管理部１０５は、情報提供部１１０と連動し、通信制御部１１１を介して、コンテンツのテキストに沿ってキャラクタの音声を再生出力する端末装置２０に、コンテンツ情報とともに、発話音声データ生成処理によって生成した音声言語データを送信（提供）する提供制御処理を実行する。
【0228】
特に、コンテンツ管理部１０５は、提供制御処理としては、発話音声データとともに、テキストに沿って発話音声データに基づく発話させる発話制御、及び、テキストとに従って端末装置２０に画像を表示させるための画像生成制御などの再生制御データを含む、コンテンツ情報（再生制御情報を含む。）を該当する端末装置２０に提供する。
【0229】
一方、本実施形態においては、実行許可判定処理として発話音声データ生成処理の実行の可否が判断されているが、当該発話音声データ生成処理に代えて、又は、加えて、当該実行許可判定処理の判定結果に基づいて、コンテンツ提供制御御処理の実行の可否を判断させてもよい。
【0230】
すなわち、コンテンツ管理部１０５は、最終的な判断としてのコンテンツ提供制御処の判定が理中止処理の場合には、発話音声データ生成処理を中止する代わりに、提供制御処理の実行も中止してもよい。
【0231】
この場合には、音声言語データ生成処理によって発話音声言語データが生成されているものとし、コンテンツ管理部１０５は、実行許可判定処理において、
（Ａ１）実行コスト演算処理によって算出された実行コストに対する支払いが適正に実行されていると判定された場合、又は、
（Ａ２）生成処理に用いる音素データのコストと、所定の限界値と、が上記の関係性条件を具備していると判定された場合には、
音声言語データ生成処理によって生成された発話音声言語データを含めてコンテンツ情報を該当する端末装置２０に提供する提供制御処理を実行する。
（Ａ１）実行コスト演算処理によって算出された実行コストに対する支払いが適正に実行されていると判定された場合、又は、
（Ａ２）生成処理に用いる音素データのコストと、所定の限界値と、が上記の関係性条件を具備していると判定された場合には、
音声言語データ生成処理によって生成された発話音声言語データを含めてコンテンツ情報を該当する端末装置２０に提供する提供制御処理を実行する。
【0232】
また、コンテンツ管理部１０５は、実行許可判定処理において、
（Ｂ１）実行コスト演算処理によって算出された実行コストに対する支払いが適正に実行されていないと判定された場合、又は、
（Ｂ２）生成処理に用いる音素データのコストと、所定の限界値と、が上記の関係性条件を具備していないと判定された場合には、
音声言語データ生成処理によって生成された発話音声言語データを含めコンテンツ情報を該当する端末装置２０に提供する提供制御処理を中止する。
（Ｂ１）実行コスト演算処理によって算出された実行コストに対する支払いが適正に実行されていないと判定された場合、又は、
（Ｂ２）生成処理に用いる音素データのコストと、所定の限界値と、が上記の関係性条件を具備していないと判定された場合には、
音声言語データ生成処理によって生成された発話音声言語データを含めコンテンツ情報を該当する端末装置２０に提供する提供制御処理を中止する。
【0233】
なお、提供制御処理が中止される場合には、発話音声言語データが生成されていなくてもよい。
【0234】
［４．６］変形例
次に、本実施形態のオプション状況検出処理の変形例１（仕様変更処理の変更状況）に
ついて説明する。
次に、本実施形態のオプション状況検出処理の変形例１（仕様変更処理の変更状況）に
ついて説明する。
【0235】
（コストパラメータの変動に伴う実行許可判定処理１／ユーザ状況）
本変形例は、上記の実施形態において、実行コストを算出する際にコストパラメータ（基準値）を用いている点に代えて、該当するユーザのコンテンツに関する状況（すなわち、ユーザ状況）に基づいて基準値から変動させたコストパラメータを用いて実行許可判定処理が実行されてもよい。
本変形例は、上記の実施形態において、実行コストを算出する際にコストパラメータ（基準値）を用いている点に代えて、該当するユーザのコンテンツに関する状況（すなわち、ユーザ状況）に基づいて基準値から変動させたコストパラメータを用いて実行許可判定処理が実行されてもよい。
【0236】
すなわち、本変形例においては、コンテンツ視聴サービスに対するログイン状況などユーザ状況に基づいて、音素データ、キャラクタデータ又はテキストデータにおけるコストパラメータを基準値から変動させて実行コストを変化させ、当該変化させた実行コストによって実行コストに基づく実行許可判定処理又は限界値に基づく実行許可判定処理が実行されてもよい。
【0237】
具体的には、ユーザ管理部１０４は、ユーザのコンテンツに関する所与の状況を検出する。
【0238】
例えば、ユーザ管理部１０４は、ユーザ状況として、
（Ａ１）ユーザの課金額、
（Ａ２）当該コンテンツを聴取や視聴するサービス（すなわち、コンテンツ視聴サービス）に対するログイン状況（ログインの頻度、総ログイン時間、又は、ログインによって獲得した特典）、
（Ａ３）コンテンツの利用時間（聴取時間や視聴時間）又は利用することによって獲得したポイント、及び、
（Ａ４）ユーザのランクやレベルなどの他のユーザからの優位性を示す優位度、
などを検出する。
（Ａ１）ユーザの課金額、
（Ａ２）当該コンテンツを聴取や視聴するサービス（すなわち、コンテンツ視聴サービス）に対するログイン状況（ログインの頻度、総ログイン時間、又は、ログインによって獲得した特典）、
（Ａ３）コンテンツの利用時間（聴取時間や視聴時間）又は利用することによって獲得したポイント、及び、
（Ａ４）ユーザのランクやレベルなどの他のユーザからの優位性を示す優位度、
などを検出する。
【0239】
また、コスト管理部１０７は、検出されたユーザ状況と、各ユーザ状況に対応付けて記憶されているコストパラメータ（基準値）の変動値を有するテーブルデータと、に基づいて、当該検出されたユーザの状況におけるコストパラメータ（音素データ、キャラクタデータ又はテキストデータのコストパラメータ）の変動値を特定する変動制御処理を実行し、特定した変動値に基づいて、上述のように、音素データなどの実行コストを算出する。
【0240】
そして、この場合には、コンテンツ管理部１０５は、変動値に基づいて算出された実行コストを用いて、各種の実行許可判定処理（すなわち、実行コストに基づく実行許可判定処理又は限界値に基づく実行許可判定処理）を実行する。
【0241】
なお、このように、実行コストを変動させることによって、コンテンツ視聴サービスのユーザに対する割引その他のサービスを充実させることができるので、ユーザのコンテンツ利用の満足度を向上させることができるようになっている。
【0242】
（コストパラメータの変動に伴う実行許可判定処理２／コンテンツ関連情報）
本変形例は、上記の実施形態において、実行コストを算出する際にコンテンツの種別やキャラクタの属性などのコンテンツに関する関連情報（以下、「コンテンツ関連情報」という。）又は音素に関する関連情報（以下、「音素データ関連情報」といいう。）に基づいて、基準値から変動させたコストパラメータを用いて実行許可判定処理が実行されてもよい。
本変形例は、上記の実施形態において、実行コストを算出する際にコンテンツの種別やキャラクタの属性などのコンテンツに関する関連情報（以下、「コンテンツ関連情報」という。）又は音素に関する関連情報（以下、「音素データ関連情報」といいう。）に基づいて、基準値から変動させたコストパラメータを用いて実行許可判定処理が実行されてもよい。
【0243】
すなわち、本変形例においては、キャラクタの発話回数や人気度などの関連情報としての属性に応じて、音素データ、キャラクタデータ又はテキストデータにおけるコストパラ
メータを変動させて実行コストを変化させ、当該変化させた実行コストによって実行コストに基づく実行許可判定処理又は限界値に基づく実行許可判定処理が実行されてもよい。
メータを変動させて実行コストを変化させ、当該変化させた実行コストによって実行コストに基づく実行許可判定処理又は限界値に基づく実行許可判定処理が実行されてもよい。
【0244】
具体的には、コスト管理部１０７は、コンテンツ情報記憶部１４４に記憶されているキャラクタやテキストの情報を含む、該当するコンテンツ情報中からコンテンツ関連情報を特定し、又は、音素情報記憶部１４６に記憶されている該当する発話音素情報の中から音素データ関連情報を特定する。
【0245】
特に、コスト管理部１０７は、コンテンツ関連情報としては、コンテンツのジャンル（コメディ、ホラー、恋愛、アクション又はアクション）を示すジャンル情報、テキストデータにおける小説・漫画・ノンフィクション・新聞などの属性を示す属性情報、又は、キャラクタデータにおける、動物・ロボット・人間などの種別、性別や年齢、方言（標準語、関西弁、東北弁又は九州訛りなど）やテキストの言語（他言語）の種別及び人気度などの属性を示す属性情報を特定する。
【0246】
また、コスト管理部１０７は、音素データ関連情報としては、声優やアナウンサーなどの発話者のジャンル、性別、年齢や年代、又は、人気度などの属性情報を特定する。
【0247】
そして、コスト管理部１０７は、これらのコンテンツ関連情報、音素データ関連情報又はその双方と、コンテンツ関連情報、音素データ関連情報又はその双方に対応付けてコストパラメータの変動値を有するテーブルデータと、に基づいて、コンテンツ関連情報や音素データ関連情報に対応するコストパラメータ（音素データ、キャラクタデータ又はテキストデータのコストパラメータ）の変動値を特定する変動制御処理を実行し、特定した変動値に基づいて、上述のように、音素データなどの実行コストを算出する。
【0248】
そして、この場合には、コンテンツ管理部１０５は、上述のように、変動値に基づいて算出された実行コストを用いて、各種の実行許可判定処理（すなわち、実行コストに基づく実行許可判定処理又は限界値に基づく実行許可判定処理）を実行する。
【0249】
なお、このように、実行コストを変動させることによって、コンテンツ視聴サービスのユーザに対する割引その他のサービスを充実させることができるので、ユーザのコンテンツ利用の満足度を向上させることができるようになっている。
【0250】
（コストパラメータの変動に伴う実行許可判定処理３／音素データの組み合わせ）
本変形例は、上記の実施形態において、実行コストを算出する際にコストパラメータ（基準値）を用いている点に代えて、音声言語データ生成処理に用いた（すなわち、キャラクタに割り当てた）音素データの組み合わせに基づいて基準値から変動させたコストパラメータを用いて実行許可判定処理が実行されてもよい。
本変形例は、上記の実施形態において、実行コストを算出する際にコストパラメータ（基準値）を用いている点に代えて、音声言語データ生成処理に用いた（すなわち、キャラクタに割り当てた）音素データの組み合わせに基づいて基準値から変動させたコストパラメータを用いて実行許可判定処理が実行されてもよい。
【0251】
すなわち、本変形例においては、同一の発話者によって採取されたデータであることなど、キャラクタに割り当てた音素データの組み合わせに応じて、音素データにおけるコストパラメータを変動させて実行コストを変化させ、当該変化させた実行コストによって実行コストに基づく実行許可判定処理又は限界値に基づく実行許可判定処理が実行されてもよい。
【0252】
具体的には、コスト管理部１０７は、音声言語データ生成処理が実行されると、キャラクタに割り当てられた各音素データにおける、音素情報記憶部１４６に記憶されている該当する発話音素情報の中から音素データ関連情報を特定する。
【0253】
特に、コスト管理部１０７は、音素データ関連情報としては、割り当てられた各音素デ
ータにおける、声優やアナウンサーなどの発話者のジャンル、性別、年齢や年代、又は、人気度などの属性情報を特定する。
ータにおける、声優やアナウンサーなどの発話者のジャンル、性別、年齢や年代、又は、人気度などの属性情報を特定する。
【0254】
そして、コスト管理部１０７は、特定した音素データ関連情報の組み合わせと、音素データ関連情報の組み合わせに対応付けてコストパラメータの変動値を有するテーブルデータと、に基づいて、当該組み合わせにおけるコストパラメータの変動値を特定する変動制御処理を実行し、特定した変動値に基づいて、上述のように、音素データなどの実行コストを算出する。
【0255】
そして、この場合には、コンテンツ管理部１０５は、上述のように、変動値に基づいて算出された実行コストを用いて、各種の実行許可判定処理（すなわち、実行コストに基づく実行許可判定処理又は限界値に基づく実行許可判定処理）を実行する。
【0256】
なお、このように、実行コストを変動させることによって、コンテンツ視聴サービスのユーザに対する割引その他のサービスを充実させることができるので、ユーザのコンテンツ利用の満足度を向上させることができるようになっている。
【0257】
また、本変形例においては、同一の発話者によって採取されたデータであることなど、キャラクタに割り当てた音素データの組み合わせに応じて、キャラクタデータやテキストデータにおけるコストパラメータを変動させて実行コストを変化させてもよい。
【0258】
（コストパラメータの変動に伴う実行許可判定処理４／モデル情報の学習状況）
本変形例は、上記の実施形態において、実行コストを算出する際にコストパラメータ（基準値）を用いている点に代えて、音声言語データ生成処理が繰り返し実行された際の音素データのデータモデルの学習状況に基づいて基準値から変動させたコストパラメータを用いて実行許可判定処理が実行されてもよい。
本変形例は、上記の実施形態において、実行コストを算出する際にコストパラメータ（基準値）を用いている点に代えて、音声言語データ生成処理が繰り返し実行された際の音素データのデータモデルの学習状況に基づいて基準値から変動させたコストパラメータを用いて実行許可判定処理が実行されてもよい。
【0259】
すなわち、本変形例においては、モデル情報の学習回数、学習進度（所与期間における学習回数）、又は、学習した音声言語データの評価値（例えば、人気度などの利用回数を含む。）などの学習状況に応じて、音素データにおけるコストパラメータを変動させて実行コストを変化させ、当該変化させた実行コストによって実行コストに基づく実行許可判定処理又は限界値に基づく実行許可判定処理が実行されてもよい。
【0260】
具体的には、コスト管理部１０７は、音声言語データ生成処理の実行時に、音素情報記憶部１４６に記憶された音素データのモデル情報とともに、記憶された学習回数や人気度などの学習状況を示す学習状況情報を取得する。
【0261】
そして、コスト管理部１０７は、学習状況情報と、当該学習状況情報に対応付けてコストパラメータの変動値を有するテーブルデータと、に基づいて、生成される発話音声言語データにおけるコストパラメータの変動値を特定する変動制御処理を実行し、特定した変動値に基づいて、上述のように、音素データなどの実行コストを算出する。
【0262】
そして、この場合には、コンテンツ管理部１０５は、上述のように、変動値に基づいて算出された実行コストを用いて、各種の実行許可判定処理（すなわち、実行コストに基づく実行許可判定処理又は限界値に基づく実行許可判定処理）を実行する。
【0263】
なお、このように、実行コストを変動させることによって、コンテンツ視聴サービスのユーザに対する割引その他のサービスを充実させることができるので、ユーザのコンテンツ利用の満足度を向上させることができるようになっている。
【0264】
また、本変形例においては、同一の発話者によって採取されたデータであることなど、キャラクタに割り当てた音素データの組み合わせに応じて、キャラクタデータやテキストデータにおけるコストパラメータを変動させて実行コストを変化させてもよい。
【0265】
（ユーザの音素データ）
上記の実施形態においては、予め発話者によって採取された音素データを用いているが、ユーザ自身の音声から音素データを生成し、当該生成した音素データを用いて音声言語データ生成処理を実行してもよい。
上記の実施形態においては、予め発話者によって採取された音素データを用いているが、ユーザ自身の音声から音素データを生成し、当該生成した音素データを用いて音声言語データ生成処理を実行してもよい。
【0266】
［５］本実施形態における動作
［５．１］実行コストに基づく実行許可判定処理を含むコンテンツ視聴開始処理
次に、図１２を用いて本実施形態のサーバ装置１０によって実行される音声言語データ生成処理、及び、実行コストに基づく実行許可判定処理を含むコンテンツの視聴を開始する際のコンテンツ試聴開始処理の動作について説明する。
［５．１］実行コストに基づく実行許可判定処理を含むコンテンツ視聴開始処理
次に、図１２を用いて本実施形態のサーバ装置１０によって実行される音声言語データ生成処理、及び、実行コストに基づく実行許可判定処理を含むコンテンツの視聴を開始する際のコンテンツ試聴開始処理の動作について説明する。
【0267】
なお、図１２は、本実施形態のサーバ装置１０によって実行される音声言語データ生成処理、及び、実行コストに基づく実行許可判定処理を含むコンテンツの視聴を開始する際のコンテンツ試聴開始処理の動作を示すフローチャートである。
【0268】
本動作は、ユーザの選択によって音素データを、視聴を希望するコンテンツのキャラクタに、割り当てた場合に、当該ユーザのコストの支払いを前提に実行され、当該コンテンツがストリーミングによって端末装置２０に視聴可能に提供される際の動作である。
【0269】
そして、本動作においては、ユーザが希望するコンテンツが既にコンテンツ情報記憶部１４４に記憶されているとともに、割り当てられる各音素データについては既にそのコストを示すコストパラメータを含めて音素情報記憶部１４６に記憶されているものとする。
【0270】
なお、本動作の実行開始前には、ユーザに対して視聴させるコンテンツの選択及び割り当てを希望する音素情報の選択のための情報が提示されているものとする。
【0271】
まず、コンテンツ管理部１０５によって、通信制御部１０１を介して端末装置２０から送信された、ユーザにおけるコンテンツの視聴指示とともに、視聴するコンテンツ、及び、当該コンテンツに登場するキャラクタに割り当てる音素データに関する情報（すなわち、ユーザによって選択された音素データの情報）が受信されると（ステップＳ１０１）、コスト管理部１０７は、割り当てられた音素データの音素コスト情報を音素情報記憶部１４６から読み出し、割り当てられた音素データによって音声言語データを生成する際の実行コストを算出する（ステップＳ１０２）。
【0272】
次いで、情報提供部１１０は、算出された実行コストを該当するユーザに提示するの情報を、通信制御部１０１を介して当該ユーザの端末装置２０に送信し、ユーザの次の指示の受信を待機する（ステップＳ１０３）。
【0273】
なお、コンテンツ管理部１０５は、このように算出した実行コストに基づいて、該当するユーザに対して、所定の方法による支払いを要求（すなわち、実行コスト支払い要求）する。
【0274】
次いで、コンテンツ管理部１０５は、該当するユーザの端末装置２０から提供された実行コストに対する指示とともに、実行コストに対する支払いの有無に関する情報を受信すると（ステップＳ１０４）、受信した情報に基づいて、実行コストの支払いが完了したか否か、すなわち、当該ユーザの支払いの有無を判定することによって音声言語データ生成
処理の実行可否を判定する実行許可判定処理を実行する（ステップＳ１０５）。
処理の実行可否を判定する実行許可判定処理を実行する（ステップＳ１０５）。
【0275】
このとき、コンテンツ管理部１０５は、受信した情報に基づいて、ユーザの実行コストの支払いが実行されたと判定した場合（すなわち、音声言語データ生成処理の実行が許可されなかった場合）には、ステップＳ１０６の処理に移行し、受信した情報に基づいて、ユーザの実行コストの支払いが実行されていないと判定した場合には、本動作を終了させる。
【0276】
次いで、コスト管理部１０７によって、ユーザによって実行コストの支払いが実行されたと判定した場合（すなわち、音声言語データ生成処理の実行が許可された場合）には、発話音声生成処理部１０６は、ユーザによって選択された音素データを当該ユーザが希望するコンテンツのキャラクタに割り当てて、当該キャラクタに属するテキストに対する発話音声となる音声言語データ生成処理を実行する（ステップＳ１０７）。
【0277】
最後に、コンテンツ管理部１０５は、ユーザが希望するコンテンツのコンテンツ情報と、当該生成された発話音声データと、に基づいて、該当する端末装置２０に対してストリーミング再生を実行するための各種のデータの送信を開始し（ステップＳ１０８）、本動作を終了させる。
【0278】
［５．２］限界値に基づく実行許可判定処理を含むコンテンツ視聴開始処理
次に、図１３を用いて本実施形態のサーバ装置１０によって実行される音声言語データ生成処理、及び、限界値に基づく実行許可判定処理を含むコンテンツの視聴を開始する際のコンテンツ試聴開始処理の動作について説明する。
次に、図１３を用いて本実施形態のサーバ装置１０によって実行される音声言語データ生成処理、及び、限界値に基づく実行許可判定処理を含むコンテンツの視聴を開始する際のコンテンツ試聴開始処理の動作について説明する。
【0279】
なお、図１３は、本実施形態のサーバ装置１０によって実行される音声言語データ生成処理、及び、限界値に基づく実行許可判定処理を含むコンテンツの視聴を開始する際のコンテンツ試聴開始処理の動作を示すフローチャートである。
【0280】
本動作は、ユーザの選択によって音素データを、視聴を希望するコンテンツのキャラクタに、割り当てるとともに、音素データの実行コストがコンテンツに予め設定された限界値内の場合に、当該コンテンツがストリーミングによって端末装置２０に視聴可能に提供される場合の動作である。
【0281】
そして、本動作においては、ユーザが希望するコンテンツが既にコンテンツ情報記憶部１４４に記憶されているとともに、割り当てられる各音素データについては既にそのコストを示すコストパラメータを含めて音素情報記憶部１４６に記憶されているものとする。
【0282】
また、本動作においては、視聴可能なコンテンツ毎に、割り当てることが可能な実行コストの上限値となる限界値が設定されているものとする。
【0283】
なお、本動作において上記した実行コストに基づく実行許可判定処理を含むコンテンツ視聴開始処理と同一の処理については同一の符号を付してその説明を省略する。
【0284】
また、本動作の実行開始前には、ユーザに対して視聴させるコンテンツの選択及び割り当てを希望する音素情報の選択のための情報が提示されているものとする。
【0285】
まず、コンテンツ管理部１０５によって、通信制御部１０１を介して端末装置２０から送信された、ユーザにおけるコンテンツの視聴指示とともに、視聴するコンテンツ、及び、当該コンテンツに登場するキャラクタに割り当てる音素データに関する情報（すなわち、ユーザによって選択された音素データの情報）が受信されると（ステップＳ１０１）、
コスト管理部１０７は、割り当てられた音素データの音素コスト情報を音素情報記憶部１４６から読み出し、割り当てられた音素データによって音声言語データを生成する際の実行コストを算出する（ステップＳ１０２）。
コスト管理部１０７は、割り当てられた音素データの音素コスト情報を音素情報記憶部１４６から読み出し、割り当てられた音素データによって音声言語データを生成する際の実行コストを算出する（ステップＳ１０２）。
【0286】
次いで、コスト管理部１０７は、算出した実行コストと、予め設定された割り当て可能なコストの上限値（すなわち、限界値）と、を比較し（ステップＳ２０３）、これらが所与の関係性を有する関係性条件を具備しているか否か（例えば、当該実行コストが上限値以内であるか否か）を判定する実行許可判定処理を実行する（ステップＳ２０４）。
【0287】
このとき、コスト管理部１０７は、算出した実行コストが予め設定された割り当て可能なコストの上限値内であると判定した場合には、ステップＳ１０６の処理に移行し、算出した実行コストが予め設定された割り当て可能なコストの上限値を超えたと判定した場合には本動作を終了させる。
【0288】
なお、本動作が終了した場合には、再度コンテンツと割り当てる音素データの選択を促し、コンテンツと割り当てる音素データが選択されることを前提に本動作を最初から実行してもよい。
【0289】
次いで、発話音声生成処理部１０６は、実行コストが予め設定された割り当て可能なコストの上限値内であると判定された場合には、ユーザによって選択された音素データを当該ユーザが希望するコンテンツのキャラクタに割り当てて、当該キャラクタに属するテキストに対する発話音声となる音声言語データ生成処理を実行する（ステップＳ１０６）。
【0290】
最後に、コンテンツ管理部１０５は、ユーザが希望するコンテンツのコンテンツ情報と、当該生成された発話音声データと、に基づいて、該当する端末装置２０に対してストリーミング再生を実行するための各種のデータの送信を開始し（ステップＳ１０７）、本動作を終了させる。
【0291】
［６］その他
本発明は、上記実施形態で説明したものに限らず、種々の変形実施が可能である。例えば、明細書又は図面中の記載において広義や同義な用語として引用された用語は、明細書又は図面中の他の記載においても広義や同義な用語に置き換えることができる。
本発明は、上記実施形態で説明したものに限らず、種々の変形実施が可能である。例えば、明細書又は図面中の記載において広義や同義な用語として引用された用語は、明細書又は図面中の他の記載においても広義や同義な用語に置き換えることができる。
【0292】
本実施形態は、１のサーバ装置１０によって各コンテンツを端末装置２０に提供してもよいし、複数のサーバ装置１０を連動させてサーバシステムを構築し、各コンテンツを端末装置に提供してもよい。
【0293】
また、本実施形態においては、サーバ装置１０の機能を備えた単一のコンテンツ再生装置、すなわち、サーバ装置と端末装置とにわけることなく、ネットワークを介してコンテンツ情報及び音素情報を取得する装置だけで、上記の各処理及びコンテンツの再生などを実現してもよい。
【0294】
特に、この場合には、コンテンツ再生装置は、内部に再生出力部を有し、当該再生出力部が、音声言語データに基づいてキャラクタによる音声を出力させつつ、当該コンテンツの画像を表示部に表示する構成を有している。
【0295】
そして、このようなコンテンツ端末装置を有線又は無線によって複数連結させ、１のコンテンツ装置がサーバ装置１０として機能して、複数のコンテンツ装置によって実現することも可能である。
【0296】
また、本実施形態においては、ネットワークを通じて端末装置２０と連動して実行するサーバ装置１０に本発明のコンテンツ提供システムを適用しているが、タブレット型情報端末装置やパーソナルコンピュータなどの端末装置としても適用することができる。
【0297】
すなわち、この場合には、端末装置は、上記のサーバ装置１０の各機能とコンテンツデータを再生する再生機能を有し、音素データを割り当てた音声言語データとともにコンテンツデータを再生する構成を有している。
【0298】
本発明は、実施形態で説明した構成と実質的に同一の構成（例えば、機能、方法及び結果が同一の構成、あるいは目的及び効果が同一の構成）を含む。また、本発明は、実施形態で説明した構成の本質的でない部分を置き換えた構成を含む。また、本発明は、実施形態で説明した構成と同一の作用効果を奏する構成又は同一の目的を達成することができる構成を含む。また、本発明は、実施形態で説明した構成に公知技術を付加した構成を含む。
【0299】
上記のように、本発明の実施形態について詳細に説明したが、本発明の新規事項及び効果から実体的に逸脱しない多くの変形が可能であることは当業者には容易に理解できるであろう。したがって、このような変形例はすべて本発明の範囲に含まれるものとする。
【符号の説明】
【0300】
１ ：コンテンツ提供システム
１０ ：サーバ装置
２０ ：端末装置
１００ ：処理部
１０１ ：通信制御部
１０２ ：Ｗｅｂ処理部
１０３ ：ログイン管理部
１０４ ：ユーザ管理部
１０５ ：コンテンツ管理部
１０６ ：発話音声生成処理部
１０７ ：コスト管理部
１０９ ：タイマ管理部
１１０ ：情報提供部
１１１ ：通信制御部
１２０ ：入力部
１３０ ：表示部
１４０ ：記憶部
１４２ ：主記憶部
１４４ ：コンテンツ情報記憶部
１４６ ：音素情報記憶部
１４８ ：ユーザ情報記憶部
１４９ ：アプリケーション情報記憶部
１８０ ：情報記憶媒体
１９６ ：通信部
２００ ：処理部
２１０ ：通信制御部
２１１ ：Ｗｅｂブラウザ
２１２ ：コンテンツ処理部
２１３ ：表示制御部
２２０ ：描画部
２３０ ：音処理部
２６０ ：入力部
２６２ ：検出部
２７０ ：記憶部
２７１ ：主記憶部
２７２ ：画像バッファ
２８０ ：情報記憶媒体
２９０ ：表示部
２９２ ：音出力部
２９６ ：通信部
１０ ：サーバ装置
２０ ：端末装置
１００ ：処理部
１０１ ：通信制御部
１０２ ：Ｗｅｂ処理部
１０３ ：ログイン管理部
１０４ ：ユーザ管理部
１０５ ：コンテンツ管理部
１０６ ：発話音声生成処理部
１０７ ：コスト管理部
１０９ ：タイマ管理部
１１０ ：情報提供部
１１１ ：通信制御部
１２０ ：入力部
１３０ ：表示部
１４０ ：記憶部
１４２ ：主記憶部
１４４ ：コンテンツ情報記憶部
１４６ ：音素情報記憶部
１４８ ：ユーザ情報記憶部
１４９ ：アプリケーション情報記憶部
１８０ ：情報記憶媒体
１９６ ：通信部
２００ ：処理部
２１０ ：通信制御部
２１１ ：Ｗｅｂブラウザ
２１２ ：コンテンツ処理部
２１３ ：表示制御部
２２０ ：描画部
２３０ ：音処理部
２６０ ：入力部
２６２ ：検出部
２７０ ：記憶部
２７１ ：主記憶部
２７２ ：画像バッファ
２８０ ：情報記憶媒体
２９０ ：表示部
２９２ ：音出力部
２９６ ：通信部
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】