特許 6141737 ストレッチチューニングを考慮して歌唱採点を行うカラオケ装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6141737

(24)【登録日】2017年5月12日

(45)【発行日】2017年6月7日

(54)【発明の名称】ストレッチチューニングを考慮して歌唱採点を行うカラオケ装置

(51)【国際特許分類】

   G10K 15/04 20060101AFI20170529BHJP

   G10H 1/00 20060101ALI20170529BHJP

   G10L 25/51 20130101ALI20170529BHJP

【ＦＩ】

   G10K15/04 302D

   G10H1/00 102Z

   G10L25/51 100

【請求項の数】5

【全頁数】14

(21)【出願番号】特願2013-204062(P2013-204062)

(22)【出願日】2013年9月30日

(65)【公開番号】特開2015-69053(P2015-69053A)

(43)【公開日】2015年4月13日

【審査請求日】2016年6月7日

(73)【特許権者】

【識別番号】390004710

【氏名又は名称】株式会社第一興商

(74)【代理人】

【識別番号】110000176

【氏名又は名称】一色国際特許業務法人

(72)【発明者】

【氏名】橘 聡

【審査官】 岩田 淳

(56)【参考文献】

【文献】 特開２００５−１０７２８６（ＪＰ，Ａ）

【文献】 特開平１０−２２２１６７（ＪＰ，Ａ）

【文献】 特開２００５−２８４０７４（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ１０Ｈ １／００−７／１２

Ｇ１０Ｋ １５／００−１５／１２

Ｇ１０Ｌ １３／００−１３／１０

１９／００−９９／００

(57)【特許請求の範囲】

【請求項1】

カラオケ演奏データによりカラオケ演奏音を生成するとともに、歌唱者の歌唱信号が入力されるカラオケ装置であって、
前記カラオケ演奏データにより自動演奏可能な電子楽器音源であって、複数のストレッチチューニング情報と、前記複数のストレッチチューニング情報のいずれかが設定された音色データを複数記憶する電子楽器音源を備え、
前記カラオケ演奏データは歌唱すべき音高情報を示すリファレンスデータと、前記自動演奏で使用される音色の情報と、を含み、
前記自動演奏で使用される音色に対応する音色データに設定されたストレッチチューニング情報を取得する取得手段と、
前記歌唱信号の所定タイミングの音高情報を検出する検出手段と、
前記検出手段により検出された前記歌唱信号の前記所定タイミングの音高情報を、前記リファレンスデータの当該所定タイミングの音高情報と比較し、この比較結果に基づいて歌唱を評価する採点手段とを備え、
前記採点手段は、前記歌唱信号の音高情報を前記リファレンスデータの音高情報と比較する際に、前記取得手段により取得した前記ストレッチチューニング情報に基づき前記比較結果を補正する補正手段を備えることを特徴とするカラオケ装置。

【請求項2】

前記取得手段は、前記音色のうち、所定の条件を満たす音色に対応する音色データに設定されたストレッチチューニング情報を取得することを特徴とする請求項１に記載のカラオケ装置。

【請求項3】

前記所定の条件を満たす音色は、前記自動演奏で使用される音色のうち、その演奏データの音高範囲が前記リファレンスデータの音高範囲を一番多く含む音色であることを特徴とする請求項２に記載のカラオケ装置。

【請求項4】

カラオケ演奏データによりカラオケ演奏音を生成するとともに、歌唱者の歌唱信号が入力されるカラオケ装置であって、
前記カラオケ演奏データにより自動演奏可能な電子楽器音源であって、１または複数のストレッチチューニング情報と、前記１または複数のストレッチチューニング情報のいずれかが設定された音色データを複数記憶する電子楽器音源を備え、
前記カラオケ演奏データは歌唱すべき音高情報を示すリファレンスデータを含み、
前記電子楽器音源が記憶する前記１または複数のストレッチチューニング情報のうち所定のストレッチチューニング情報を取得する取得手段と、
前記歌唱信号の所定タイミングの音高情報を検出する検出手段と、
前記検出手段により検出された前記歌唱信号の前記所定タイミングの音高情報を、前記リファレンスデータの当該所定タイミングの音高情報と比較し、この比較結果に基づいて歌唱を評価する採点手段とを備え、
前記採点手段は、前記歌唱信号の音高情報を前記リファレンスデータの音高情報と比較する際に、前記取得手段により取得した前記ストレッチチューニング情報に基づき前記比較結果を補正する補正手段を備えることを特徴とするカラオケ装置。

【請求項5】

前記所定のストレッチチューニング情報は、ピアノを模擬する音色に設定されたストレッチチューニング情報であることを特徴とする請求項４に記載のカラオケ装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、歌唱者のカラオケ歌唱によって生成された歌唱音声を採点する採点機能を有するカラオケ装置に関し、特にカラオケ伴奏の楽器音のピッチに合わせようとする歌唱に適した採点を行うものに関する。

【背景技術】

【0002】

歌唱者のカラオケ歌唱の巧拙を採点する採点機能を備えた装置が知られている。例えば、特許文献１には、ＭＩＤＩデータに基づく歌唱メロディ情報（リファレンスデータ）と、歌唱者の歌のピッチ、レベル、タイミング情報の差を取り出すことで、メロディ情報に対する歌唱者の歌い方を評価するためのデータを検出するカラオケ採点装置が開示されている。

【0003】

ピアノなどの鍵盤楽器や弦楽器では、一般に低域の鍵盤ほど音高を低めに、高域の鍵盤ほど音高を高めに調律する。そして、特許文献２には、自然楽器の音を電子楽器で模擬する際に、低域の鍵盤ほど音高を低めに、高域の鍵盤ほど音高を高めに設定する技術（ストレッチチューニング）が開示されている。

【0004】

カラオケ装置では、楽曲データを使って電子楽器の音源を自動演奏させるが、この音源は複数の異なる楽器の音色を同時に発音させることができる。すなわち、ピアノと共に多数の自然楽器を模擬した音色が使用される。そして、アンサンブルに違和感が出ないよう、ほとんどの楽器音色には、特許文献２に開示されているようなストレッチチューニングが施されている。

【0005】

ここで、採点機能付のカラオケ装置には、例えば特許文献３に開示されているように、楽曲データに含まれるデチューン情報を読み出し、模範ピッチデータのピッチを修正するものもある。このカラオケ装置では、本来の音程よりややずらして歌う歌唱法や民族音楽について、音程を意図的にずらして味わいを醸し出すことで不当に評価が低くなる不具合を抑制している。

【先行技術文献】

【特許文献】

【0006】

【特許文献1】特開平１０−４９１８３号公報

【特許文献2】特開２００５−９９５７８号公報

【特許文献3】特許４００７２９８号公報

【発明の概要】

【発明が解決しようとする課題】

【0007】

特許文献１，２のように、カラオケ装置では、ストレッチチューニングが施された電子楽器の音源でカラオケ演奏を行っている。一方、歌唱採点に用いられるリファレンスデータはＣ４（ピアノの中央Ｃ）を６０００ｃｅｎｔとしており、電子楽器の音源のようなストレッチチューニングは考慮されていないため、Ｃ５は７２００ｃｅｎｔ、Ｃ６は８４００ｃｅｎｔが正しい歌唱音高の基準とされる。

【0008】

一方、カラオケの歌唱者は、通常カラオケ演奏音（伴奏）を構成する楽音のチューニングに合わせて歌唱する。特に女性音声における高音域の場合、同じ音域でピアノなどの自然楽器やそれらを模擬する電子楽器音が鳴っているため、楽器音の音高に合わせて歌唱すると、ストレッチチューニングに従った音高となる。これにより、リファレンスデータの音高と差を生じ、不当に減点される可能性がある。

【0009】

このような不当減点の影響を低減すべく、特許文献３の技術を適用することが考えられる。しかしながら、当該技術における補正内容は、カラオケ楽曲に対して定められている。ここで、ストレッチチューニングの内容は、カラオケ装置に搭載されている電子楽器の音源によってばらつきがある。例えば、或る機種のピアノ用音源と他の機種のピアノ用音源との間で、ストレッチチューニングの内容は異なっていることが常である。

【0010】

そして、歌唱者は音源の音高にあわせて歌唱することから、特許文献３のデチューン情報を用いて補正を行ったとしても、音源毎のストレッチチューニングの違いについてまで補正することは困難であった。

【0011】

本発明は、このような事情に鑑みてなされたものであり、その目的は、カラオケ伴奏の楽器音のピッチに合わせようとする歌唱に適した採点を行えるようにすることである。

【課題を解決するための手段】

【0012】

前述の目的を達成するため、本発明は、カラオケ演奏データによりカラオケ演奏音を生成するとともに、歌唱者の歌唱信号が入力されるカラオケ装置であって、前記カラオケ演奏データにより自動演奏可能な電子楽器音源であって、複数のストレッチチューニング情報と、前記複数のストレッチチューニング情報のいずれかが設定された音色データを複数記憶する電子楽器音源を備え、前記カラオケ演奏データは歌唱すべき音高情報を示すリファレンスデータと、前記自動演奏で使用される音色の情報と、を含み、前記自動演奏で使用される音色に対応する音色データに設定されたストレッチチューニング情報を取得する取得手段と、前記歌唱信号の所定タイミングの音高情報を検出する検出手段と、前記検出手段により検出された前記歌唱信号の前記所定タイミングの音高情報を、前記リファレンスデータの当該所定タイミングの音高情報と比較し、この比較結果に基づいて歌唱を評価する採点手段とを備え、前記採点手段は、前記歌唱信号の音高情報を前記リファレンスデータの音高情報と比較する際に、前記取得手段により取得した前記ストレッチチューニング情報に基づき前記比較結果を補正する補正手段を備えることを特徴とする。

【0013】

本発明によれば、歌唱信号の音高情報とリファレンスデータの音高情報の比較結果が楽器音色（音源）のストレッチチューニング情報で補正されるので、音源に設定されたストレッチチューニングを加味してカラオケ歌唱を採点することができる。これにより、ストレッチチューニングが施された楽器音色に合わせて歌唱しても、不当に減点される不具合を抑制でき、カラオケ伴奏の楽器音のピッチに合わせようとする歌唱に適した採点を行うことができる。

【0014】

前述のカラオケ装置において、前記取得手段は、前記音色のうち、所定の条件を満たす音色に対応する音色データに設定されたストレッチチューニング情報を取得することが好ましい。

【0015】

前述のカラオケ装置において、前記所定の条件を満たす音色は、前記自動演奏で使用される音色のうち、その演奏データの音高範囲が前記リファレンスデータの音高範囲を一番多く含む音色であることが好ましい。

【0016】

また、本発明は、カラオケ演奏データによりカラオケ演奏音を生成するとともに、歌唱者の歌唱信号が入力されるカラオケ装置であって、前記カラオケ演奏データにより自動演奏可能な電子楽器音源であって、１または複数のストレッチチューニング情報と、前記１または複数のストレッチチューニング情報のいずれかが設定された音色データを複数記憶する電子楽器音源を備え、前記カラオケ演奏データは歌唱すべき音高情報を示すリファレンスデータを含み、前記電子楽器音源が記憶する前記１または複数のストレッチチューニング情報のうち所定のストレッチチューニング情報を取得する取得手段と、前記歌唱信号の所定タイミングの音高情報を検出する検出手段と、前記検出手段により検出された前記歌唱信号の前記所定タイミングの音高情報を、前記リファレンスデータの当該所定タイミングの音高情報と比較し、この比較結果に基づいて歌唱を評価する採点手段とを備え、前記採点手段は、前記歌唱信号の音高情報を前記リファレンスデータの音高情報と比較する際に、前記取得手段により取得した前記ストレッチチューニング情報に基づき前記比較結果を補正する補正手段を備えることを特徴とする。

【0017】

前述のカラオケ装置において、前記所定のストレッチチューニング情報は、ピアノを模擬する音色に設定されたストレッチチューニング情報であることが好ましい。

【発明の効果】

【0018】

本発明によれば、歌唱者のカラオケ歌唱によって生成された歌唱音声を採点するカラオケ装置において、カラオケ伴奏の楽器音のピッチに合わせようとする歌唱に適した採点が行える。

【図面の簡単な説明】

【0019】

【図1】通信カラオケシステムの概略構成を説明する図である。

【図2】カラオケ装置の構成を説明するブロック図である。

【図3】カラオケ本体の構成を説明するブロック図である。

【図4】ストレッチチューニングデータを説明する概念図である。

【図5】記憶されるストレッチチューニングデータの種類を説明する概念図である。

【図6】カラオケ歌唱時の動作を説明するフローチャートである。

【図7】区間採点処理を説明するフローチャートである。

【図8】複数種類のストレッチチューニングデータの中から１つのデータを選択する処理を説明するための図である。

【発明を実施するための形態】

【0020】

以下、本発明の実施形態について説明する。まず、通信カラオケシステムの構成について説明する。図１に示す通信カラオケシステムは、ホスト装置１とカラオケ装置２とを有している。そして、これらが伝送路３を介して通信可能に接続されている。カラオケ装置２は、例えばカラオケ店ＫＢの各カラオケルームＲＭに設置されている。ホスト装置１は、サーバとして機能し、顧客情報などの各種情報を蓄積して管理する。カラオケ装置２は、カラオケ演奏、及び、カラオケ歌唱時の採点処理等を行うものである。

【0021】

図２に示すように、カラオケ装置２は、カラオケ本体２１と、スピーカ２２と、モニタ２３と、歌唱マイク２４と、ビデオカメラ２５と、リモコン装置２６とを有している。

【0022】

カラオケ本体２１は、利用者によって指定されたカラオケ楽曲の演奏制御、歌詞及び背景映像の表示制御、歌唱マイク２４で生成されたマイク信号の処理、カラオケ歌唱の採点、伝送路３を介して行われる信号等の送受信といった、カラオケ歌唱に関する各種の制御を行う部分である。そして、スピーカ２２からリモコン装置２６の各部は、有線或いは無線でカラオケ本体２１に接続されている。なお、このカラオケ本体２１については、後で詳しく説明する。

【0023】

スピーカ２２は、カラオケ本体２１から出力される放音信号に基づいて音を出力する。例えば、歌唱者の音声とカラオケ演奏音の混合音を出力する。モニタ２３は、カラオケ本体２１からの映像信号に基づいて映像を画面に表示する。例えば、歌唱しているカラオケ楽曲の歌詞や背景映像を表示する。歌唱マイク２４は、利用者（歌唱者）の歌唱音を集音し、マイク信号に変換してカラオケ本体２１に入力させる。従って、歌唱マイク２４とカラオケ本体２１の組は、カラオケルームＲＭにおいて歌唱者が歌唱した歌唱音を収音する収音手段に相当する。そして、マイク信号はカラオケ本体２１で適宜調整された後、カラオケ演奏音等と混合され、放音信号としてスピーカ２２に入力される。

【0024】

ビデオカメラ２５は、カラオケルームＲＭを撮影することで映像信号を生成する。生成された映像信号はカラオケ本体２１に入力される。このビデオカメラ２５は、例えば、カラオケ歌唱時の映像を録画する場合に用いられる。リモコン装置２６は、カラオケ本体２１との間で情報を送受信するための双方向通信可能な短距離無線通信部を備えており、カラオケ楽曲の予約時などに操作される。カラオケ楽曲の予約時において、リモコン装置２６からは、演奏対象の楽曲を識別するための楽曲ＩＤを含んだ操作信号が送信される。そして、カラオケ本体２１は、選択されたカラオケ楽曲を待ち行列で管理する。

【0025】

また、このリモコン装置２６は、カラオケルームＲＭを利用するルーム利用者を認証するとき等に用いられる。その際、ルーム利用者による操作に応じた操作情報をホスト装置１に対して送信する。この場合、ホスト装置１に対しては、操作信号が近隣のルーター装置及び伝送路３を介して送信される。

【0026】

次に、カラオケ本体２１について詳細に説明する。図３に示すように、カラオケ本体２１は、本体側制御部３１と、本体側通信部３２と、本体側記憶部３３と、音源部３４と、音響処理部３５と、表示処理部３６と、映像入力部３７と、操作部３８とを有している。そして、これらの各部がバスＢＳを介して通信可能な状態に接続されている。

【0027】

本体側制御部３１は、カラオケ本体２１における制御の中心となる部分であり、ＣＰＵ３１ａやメモリ３１ｂを有している。ＣＰＵ３１ａは、メモリ３１ｂに記憶された動作プログラムに従って各種の制御を実行する。例えば、操作部３８からの操作を受け付ける操作入力処理やシーケンサとして動作するシーケンサ処理を行う。メモリ３１ｂは、ＣＰＵ３１ａに実行されるプログラムを記憶したり、プログラムの実行時に各種情報を一時的に記憶したりする記憶素子である。そして、メモリ３１ｂは、リモコン装置２６で予約されたカラオケ楽曲を、待ち行列で記憶することも行っている。

【0028】

本体側通信部３２は、ルーター装置ＲＴを介してカラオケ本体２１を伝送路３に接続するためのインタフェースを提供する。このため、本体側通信部３２は、ルーター装置ＲＴとの間で情報の送受信を行う。この本体側通信部３２は、本体側制御部３１によって動作が制御される。

【0029】

本体側記憶部３３は、各種のデータを記憶する大容量の記憶装置であり、例えばハードディスクドライブによって構成されている。この本体側記憶部３３には、例えば、楽曲データ記憶領域３３ａ、及び、採点用プログラム記憶領域３３ｂが設けられる。

【0030】

楽曲データ記憶領域３３ａには、リモコン装置２６で指定されたカラオケ楽曲を演奏するための楽曲データが記憶される。楽曲データには、ＭＩＤＩデータと歌詞データとリファレンスデータが含まれる。

【0031】

ＭＩＤＩデータは、電子楽器の音源を自動演奏させるための自動演奏データ（カラオケ演奏データ）であり、時系列のノート情報によって構成される。ノート情報は、例えば発音や消音のタイミング、キーの押圧力、音の高さ、再生ピッチなどを制御する各種の命令によって構成される。本実施形態において、ＭＩＤＩデータのセットアップデータには、演奏パート毎に使用する音色を設定するための情報が含まれている。

【0032】

さらに、設定される音色には、それぞれ複数種類の楽器音色用ストレッチチューニングデータのうちのいずれかが設定されている。複数のストレッチチューニングデータのそれぞれの特性や、各音色で設定されているストレッチチューニングデータの種類は、カラオケ本体２１の音源部３４の仕様として決定されている。したがって、それらの情報は後述する音源部３４に記憶されており自動演奏による楽音生成時に読み出される。本実施形態においては、歌唱者がピッチを合わせようとする音色が選択され、選択された音色に設定されたストレッチチューニングの種類が採用され、採用された種類のストレッチチューニングデータが、歌唱者によるカラオケ歌唱を採点する際に用いられる。

【0033】

なお、歌唱採点用のストレッチチューニングデータとして、歌唱音域（音高範囲）を含む音域を奏でる楽器音色用のものを選択することが好ましい。例えば、ピアノ音やギター音を模擬した音色に用いられるストレッチチューニングデータを選択することが好ましい。

【0034】

ここで、音源部３４について説明する。図３に示す音源部３４は、ＭＩＤＩデータに基づいてカラオケ演奏音信号を生成する部分であり、ＣＰＵ３４ａと、メモリ３４ｂと、波形メモリ３４ｃとを有している。ＣＰＵ３４ａは、メモリ３４ｂに記憶された動作プログラムに従って各種の制御を実行する。メモリ３４ｂは、ＣＰＵ３４ａに実行されるプログラムを記憶したり、プログラムの実行時に各種情報を一時的に記憶したりする記憶素子である。波形メモリ３４ｃは、対象楽器が奏でた様々な音の波形データを読み出し可能に記憶する記憶素子である。この音源部３４は、本体側制御部３１がシーケンサ処理を行うと、ＭＩＤＩデータに応じて波形データを加工し、加工後の楽音信号を音響処理部３５に出力する。

【0035】

さらに、音源部３４は音色メモリ３４ｄ及びストレッチチューニングデータメモリ（ｓｔｄメモリ）３４ｅを有している。音色メモリ３４ｄには、電子楽器音源で楽音を生成するための音色データが複数記憶されており、各音色データには複数のストレッチチューニングデータのいずれかが設定されている。ｓｔｄメモリ３４ｅには、ストレッチチューニングデータが記憶される。このストレッチチューニングデータは、自然楽器の音を電子楽器で模擬する際に用いられるものであり、低域の鍵盤ほど音高を低めに、高域の鍵盤ほど音高を高めに設定するための補正値群によって構成されている。

【0036】

図４は、ストレッチチューニングデータを説明するための概念図であり、横軸が音名、縦軸が周波数である。Ａ４（ピアノの中央「ド」の上にある「ラ」）が４４０Ｈｚである場合、１オクターブ上のＡ５は理論上２倍の８８０Ｈｚとなり、２オクターブ上のＡ６は理論上４倍の１７６０Ｈｚとなる。同様に、１オクターブ下のＡ３は理論上１／２倍の２２０Ｈｚとなり、２オクターブ下のＡ２は理論上１／４倍の１１０Ｈｚとなる。

【0037】

しかしながら、自然楽器（特にピアノ）では、倍音成分を聴きながら楽器全体でより豊かな響きが得られるように調律する。その結果、同図に一点鎖線で示すように、高域の鍵盤ほど音高が理論値よりも高くなり、低域の鍵盤ほど音高が理論値よりも低くなる。ストレッチチューニングデータは、この調律結果を数値化したデータ（ストレッチカーブ）によって構成されている。

【0038】

図５に示すように、本実施形態では、ピアノ音色用のストレッチチューニングデータｓｔｄ５をはじめ複数のストレッチチューニングデータｓｔｄ０〜５が、ｓｔｄメモリ３４ｅに記憶されている。歌唱採点には、これらの複数のストレッチチューニングデータｓｔｄ０〜５の中から選択された１つのデータが用いられる。この選択は、音源部３４すなわち電子楽器音源に設定される音色情報に基づいて行われる。ピアノ用のストレッチチューニングデータｓｔｄ５は、グランド・ピアノの調律を数値化したデータであり、その他のストレッチチューニングデータｓｔｄ０〜４は、ピアノ用ストレッチチューニングデータよりもストレッチが小さい、つまり理論値からの乖離が小さいデータを数種類用意したものである。ピアノ以外の自然楽器を模擬する音色には、これらのストレッチが小さいものを設定することが多い。

【0039】

なお、ストレッチチューニングデータは、カラオケ演奏に用いられる楽器音色の全てに必要なものではない。この場合、ストレッチチューニングが不要な楽器音色については、ストレッチチューニングが設定されていない状態と等価なストレッチチューニングデータが設定されている。本実施形態では、ストレッチチューニングデータｓｔｄ０が、これに該当する。これにより、ストレッチチューニングが必要な楽器音色と不要な楽器音色との間で処理を共通化でき、制御の簡素化が図られている。

【0040】

次に、本体側記憶部３３に記憶された他のデータについて説明する。楽曲データ記憶領域３３ａに記憶された歌詞データは、カラオケ楽曲における歌詞テロップをモニタ２３で表示させるためのデータである。なお、ＭＩＤＩデータと歌詞データは、カラオケ装置２で演奏可能なカラオケ楽曲のそれぞれについて、楽曲ＩＤに対応付けられた状態で記憶されている。

【0041】

リファレンスデータは、歌唱者によるカラオケ歌唱を採点する際に用いられるものであり、ヴォーカルの音高を表す時系列の音高情報によって構成されている。このリファレンスデータは、例えばＭＩＤＩデータに基づいて作成されている。そして、作成時点では再生される音源の種類が不明であるため、音高に対する補正はなされていない。このリファレンスデータもまた、楽曲ＩＤに対応付けられた状態で記憶されている。

【0042】

採点用プログラム記憶領域３３ｂには採点用プログラムが記憶されている。この採点用プログラムは、採点モードの設定に伴って本体側制御部３１に読み出され、適宜実行される。採点プログラムの実行により、カラオケ装置２では採点処理が行われる。その際、歌唱者の歌唱音に対応する歌唱信号とリファレンスデータとが比較される。例えば、同じタイミングにおける歌唱信号の音高情報とリファレンスデータの音高情報とが時系列で順次比較され、音高の差分情報が取得される。そして、音高の差が小さいほど高い採点値が付与される。なお、この採点用プログラムを実行した本体側制御部３１は、歌唱者の歌唱を評価する採点手段に相当する。

【0043】

次に、音響処理部３５から操作部３８までの各部について説明する。音響処理部３５は、カラオケ演奏音信号の処理、及び、歌唱マイク２４で生成されたマイク信号の処理を行う部分である。例えば、カラオケ楽曲の演奏制御において、音響処理部３５は、音源部３４から出力された楽音信号をアナログ変換し、カラオケ演奏音信号を生成する。また、歌唱マイク２４からのマイク信号が入力されると、適宜調整を施して歌唱信号を生成する。この歌唱信号は、カラオケ演奏音信号と混合され、放音信号としてスピーカ２２に出力される。また、カラオケ歌唱を録音する場合、音響処理部３５は、生成した歌唱信号をデジタルの歌唱録音データに変換して本体側記憶部３３に記憶させる。さらに、音響処理部３５は、生成した歌唱信号を所定のサンプリングレートでサンプリングし、図示しないバッファメモリに記憶する。

【0044】

表示処理部３６は、カラオケ演奏時における背景映像の表示等の制御を行う。カラオケ演奏時において、表示処理部３６には背景映像データが入力されており、この背景映像データのデコードが行われる。そして、表示処理部３６は、デコードで生成された背景映像の映像信号に歌詞テロップを合成し、合成後の映像信号をモニタ２３に出力する。その際、表示処理部３６は、本体側制御部３１でのシーケンサ処理で出力される歌詞データに基づき、歌詞テロップを合成する。また、シーケンサ処理で出力される色換え命令に従って、歌詞テロップの表示色を変更する。その結果、モニタ２３には、背景映像に歌詞テロップが重ねられた映像が表示され、かつ、カラオケ楽曲の進行にあわせて歌詞テロップの表示色が変更される。

【0045】

映像入力部３７は、ビデオカメラ２５からの映像信号を取り込む部分であり、例えばインタフェース回路によって構成されている。カラオケ歌唱の映像撮影時において、ビデオカメラ２５からは歌唱中の利用者等を撮影した映像信号が出力される。そして、映像入力部３７は、入力された映像信号を表示処理部３６に出力する。これにより、モニタ２３には、歌唱者の映像が表示される。また、カラオケ歌唱時の歌唱映像を録画する場合、映像入力部３７は、入力された映像信号をデジタルの映像録画データに変換して本体側記憶部３３に記憶させる。

【0046】

操作部３８は、パネルスイッチやリモコン受信回路などからなっており、パネルスイッチやリモコン装置２６の操作に応じた操作信号を本体側制御部３１に対して出力する。本体側制御部３１は、操作入力処理を行うことで操作信号を検出し、対応する処理を実行する。なお、パネルスイッチやリモコン装置２６は、操作を選択するための種々のキースイッチ（図示せず）を備えている。

【0047】

次に、上記構成を有する通信カラオケシステムの動作について説明する。このカラオケシステムは、カラオケ採点に関する処理に特徴を有している。このため、カラオケ歌唱の処理を中心に説明を行う。

【0048】

このカラオケ装置２では、順番の到来により、待ち行列で管理されていたカラオケ楽曲が演奏される。例えば、本体側制御部３１がシーケンサ処理を行うことで、楽曲データ記憶領域３３ａに記憶されたＭＩＤＩデータ等が読み出され、カラオケ演奏音がスピーカから放音される。また、歌唱マイク２４を通じて、歌唱者の歌唱音がマイク信号としてカラオケ本体２１に入力され、歌唱信号が生成される。あわせて、歌唱者の歌唱音がカラオケ演奏音と混合されてスピーカから放音される。

【0049】

また、カラオケルームＲＭの利用者がリモコン装置２６を操作して歌唱採点を選択すると、カラオケ本体２１の本体側制御部３１は、採点プログラムを実行して採点モードに移行する。そして、カラオケ本体２１（本体側制御部３１）は取得手段として機能し、カラオケ演奏音を構成する複数種類の楽器音色の中から１つの楽器音色について、ストレッチチューニングデータを取得する。また、カラオケ本体２１（本体側制御部３１及び音響処理部３５）は検出手段として機能し、歌唱信号における所定タイミングの音高情報を検出する。

【0050】

さらに、カラオケ本体２１（本体側制御部３１）は採点手段としても機能し、歌唱信号の所定タイミングの音高情報をリファレンスデータの当該所定タイミングの音高情報と比較し、この比較結果に基づいて歌唱を評価する。その際、カラオケ本体２１（本体側制御部３１）は補正手段としても機能し、歌唱信号の音高情報をリファレンスデータの音高情報と比較する際、取得したストレッチチューニングデータに基づき比較結果を補正する。

【0051】

このような構成とすることにより、楽器音色のストレッチチューニングデータによって比較結果が補正されるので、音源に設定されたストレッチチューニングを加味してカラオケ歌唱を採点することができる。その結果、ストレッチチューニングデータが設定された楽器音のピッチにあわせて歌唱しても、不当に減点される不具合を抑制できる。

【0052】

以下、上記の制御について詳細に説明する。ここで、図６は、カラオケ歌唱時の動作を説明するフローチャートである。また、図７は、区間採点処理を説明するフローチャートである。

【0053】

まず、カラオケルームＲＭの利用者（歌唱者）はログイン処理を行う（Ｓ１）。このログイン処理では、リモコン装置２６に対する操作により、利用者ＩＤやパスワードが入力される。利用者ＩＤやパスワードはホスト装置１に送信される。そして、ホスト装置１は、受信した利用者ＩＤやパスワードに基づき認証処理を行う。

【0054】

次に、カラオケ本体２１は、予約操作の有無を判断する（Ｓ２）。この楽曲の予約において、利用者は、リモコン装置２６を操作し、歌唱を行うカラオケ楽曲を選択して予約する。予約操作が行われると、選択されたカラオケ楽曲が待ち行列で管理される（Ｓ３）。一方、予約操作がなされていない場合には、ステップＳ６へ移行する。

【0055】

予約されたカラオケ楽曲が待ち行列で管理されると、カラオケ本体２１は、予約されたカラオケ楽曲のＭＩＤＩデータを参照し（Ｓ４）、カラオケ楽曲で使用される複数の音色の中から一つの音色を選択し、この音色に設定されたストレッチチューニングデータを選択する（Ｓ５）。より具体的には、リファレンスデータの音高範囲と、演奏される各音色の音高範囲を比較し、リファレンスデータの音高範囲を一番多く含む音色に設定されたストレッチチューニングデータを採点に用いる。図８に示す例では、ピアノ音色用の演奏データの音高範囲が、リファレンスデータの音高範囲を一番多く内包している。このため、ピアノ音色に設定されたストレッチチューニングデータを、採点用のストレッチチューニングデータとして用いる。各音色の演奏データの音高範囲は、ＭＩＤＩデータのノートデータから容易に知ることができる。このように所定の条件を満たす音色に設定されたストレッチチューニングデータが歌唱採点用として選択される。

【0056】

また、選択された音色に設定されたストレッチチューニングデータの種類は、音源部３４の音色メモリ３４ｄに記憶されている、当該音色に対応する音色データから容易に知ることができる。あるいは各音色と各音色に設定されたストレッチチューニングデータの種類（番号）との対照テーブルを、あらかじめ音源部３４のメモリ３４ｂまたは本体側制御部３１のメモリ３１ｂに記憶しておき、これを参照するような構成にしても良い。

【0057】

次にカラオケ本体２１は、演奏中のカラオケ楽曲の有無を確認する（Ｓ６）。そして、カラオケ楽曲が演奏中であれば、ステップＳ２に戻って新たな予約の有無を確認する。一方、演奏中のカラオケ楽曲がない場合には、ステップＳ７に移行する。そして、このステップＳ７では、最先に予約されたカラオケ楽曲（待ち行列の最初に位置するカラオケ楽曲）について演奏を行う。そして、カラオケ楽曲の歌唱期間に亘って歌唱音のサンプリングが行われる（Ｓ８）。例えば、音響処理部３５は、生成した歌唱信号を所定のサンプリングレートでサンプリングし、サンプリングタイミングの情報と共にバッファメモリ（図示せず）に記憶する。

【0058】

また、カラオケ本体２１は、カラオケ楽曲が演奏されている期間中において採点区間が終了したか否かを監視しており（Ｓ９）、採点区間が終了すると、当該採点区間の歌唱に対する採点処理（区間採点処理）を行う（Ｓ１０）。

【0059】

この区間採点処理では、例えば図７（ａ）に示すように、カラオケ本体２１は、まずリファレンスデータの音高情報を歌唱採点用のストレッチチューニングデータで補正する（Ｓ２１）。次に、補正後のリファレンスデータの音高情報とサンプリングで得られた歌唱信号（歌唱音）の音高情報とを比較して差分情報を取得する（Ｓ２２）。対象区間に亘って差分情報を取得したならば、この差分情報を用いて区間得点を算出する（Ｓ２３）。

【0060】

また、図７（ｂ）に示すように、先にリファレンスデータの音高情報とリファレンスデータの音高情報とを比較して差分情報を取得し（Ｓ２４）、その後、差分情報を歌唱採点用のストレッチチューニングデータで補正し（Ｓ２５）、補正後の差分情報を用いて区間得点を算出してもよい（Ｓ２６）。

【0061】

そして、何れの区間採点処理を採ったとしても、楽器音色のストレッチチューニングデータを用いて、リファレンスデータの音高情報が直接的（図７（ａ））に、或いは、間接的（図７（ｂ））に補正されることから、ストレッチチューニングデータが設定された楽器音色にあわせて歌唱をしても不当に減点されることはない。

【0062】

図６に示すように、区間採点処理が終了したならば、カラオケ本体２１は、カラオケ楽曲の演奏が終了したか否かを判定する（Ｓ１１）。ここで、終了していない場合には、ステップＳ７に移行して次の採点区間に対する一連の処理を繰り返し行う。一方、カラオケ楽曲の演奏が終了した場合には、採点結果を報知する（Ｓ１２）。ここでは、区間採点処理で得られた区間採点の結果を総合して報知する。採点結果を報知したならば、待ち行列で管理されているカラオケ楽曲の有無を判定する（Ｓ１３）。

【0063】

そして、待ち行列にカラオケ楽曲がある場合にはステップＳ６に移行する。この場合、ステップＳ６で演奏中のカラオケ楽曲は無いと判定され、待ち行列における最先のカラオケ楽曲に対し、ステップＳ７以降の処理が行われる。一方、待ち行列にカラオケ楽曲がない場合にはステップＳ２に移行する。この場合、次のカラオケ楽曲が予約されるまで、ステップＳ２とステップＳ６の処理が繰り返しなされる。すなわち、カラオケ楽曲の予約を待機する待機状態になる。そして、次のカラオケ楽曲が予約されることにより、ステップＳ３に移行し、前述した一連の処理が行われる。

【0064】

このように、本実施形態のカラオケ装置２では、ストレッチチューニングデータが設定された楽器音色にあわせて歌唱を行っても不当に減点されることを防止できる。そして、ピアノ音などの、歌唱の音高範囲をカバーする楽器音色に設定されたストレッチチューニングデータを用いることで、採点を適切に行うことができる。

【0065】

以上の実施形態の説明は、本発明の理解を容易にするためのものであり、本発明を限定するものではない。本発明はその趣旨を逸脱することなく、変更、改良され得ると共に本発明にはその等価物が含まれる。例えば、次のように構成してもよい。

【0066】

前述の実施形態では、カラオケ楽曲で使用される複数の音色の中から所定の条件を満たす音色を選択する際に、リファレンスデータとの間で演奏データの音高範囲を比較したが、所定の条件はこれに限定されるものではない。例えば、歌唱区間において発音頻度が一番高い音色や、あるいは歌唱区間において設定音量が一番大きい音色など、演奏上の支配性の強さを条件として音色を選択し、その音色に設定されたストレッチチューニングデータを採用してもよい。あるいは、ピアノ音色に設定されたストレッチチューニングデータに一番近いストレッチチューニングデータが設定されていることを、所定の条件とすることもできる。

【0067】

さらに、前述の実施形態や上記変形例では、採点に使用するストレッチチューニングデータに関し、演奏するカラオケ楽曲毎に複数のストレッチチューニングデータの中から所定の条件を満たすものを選択したが、この構成に限定されるものではない。例えば、常に同じストレッチチューニングデータを用いて歌唱採点を補正してもよい。この場合にはストレッチチューニングデータを選択する処理が省略できるので、カラオケ伴奏の楽器音のピッチに合わせようとする歌唱に適した採点を行うことができるという効果に加え、構成がシンプルになり処理負荷が軽くなるという効果がある。より具体的には、電子楽器音源ではピアノを模擬する音色が全ての音色の中心になっていることが多く、常にピアノ音色に設定されたストレッチチューニングデータを用いて歌唱採点を補正すればよい。

【0068】

また、前述の実施形態では、ストレッチチューニングデータを音源部３４のｓｔｄメモリ３４ｅに記憶させていたが、この構成に限定されるものではない。例えば、ストレッチチューニングデータをＭＩＤＩデータのセットアップデータに含ませてもよい。或いは、リファレンスデータにストレッチチューニングを織り込んでもよい。或いは、ストレッチチューニング選択情報をＭＩＤＩデータのセットアップデータに含ませてもよい。

【符号の説明】

【0069】

１…ホスト装置，２…カラオケ装置，３…伝送路，２１…カラオケ本体，２２…スピーカ，２３…モニタ，２４…歌唱マイク，２５…ビデオカメラ，２６…リモコン装置，３１…本体側制御部，３１ａ…ＣＰＵ，３１ｂ…メモリ，３２…本体側通信部，３３…本体側記憶部，３３ａ…楽曲データ記憶領域，３３ｂ…採点用プログラム記憶領域，３４…音源部，３４ａ…ＣＰＵ，３４ｂ…メモリ，３４ｃ…波形メモリ，３４ｄ…音色メモリ，３４ｅ…ストレッチチューニングデータメモリ（ｓｔｄメモリ），３５…音響処理部，３６…表示処理部，３７…映像入力部，３８…操作部，ＫＢ…カラオケ店，ＲＭ…カラオケルーム，ＢＳ…バス，ＲＴ…ルーター装置

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】