特開 2024-141232 電子機器、音声データ判別方法および音声データ判別プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024141232

(43)【公開日】2024-10-10

(54)【発明の名称】電子機器、音声データ判別方法および音声データ判別プログラム

(51)【国際特許分類】

   G10H 1/18 20060101AFI20241003BHJP

   G10H 1/00 20060101ALI20241003BHJP

【ＦＩ】

G10H1/18 Z

G10H1/00 Z

【審査請求】未請求

【請求項の数】8

【出願形態】ＯＬ

(21)【出願番号】P 2023052758

(22)【出願日】2023-03-29

(71)【出願人】

【識別番号】000116068

【氏名又は名称】ローランド株式会社

(74)【代理人】

【識別番号】110000534

【氏名又は名称】弁理士法人真明センチュリー

(72)【発明者】

【氏名】曽我 尚人

【テーマコード（参考）】

5D478

【Ｆターム（参考）】

5D478HH01

(57)【要約】

【課題】複数の入力手段からＭＩＤＩ変調信号またはオーディオ信号が含まれる音声データを出力する際の処理負荷を低減できる電子機器、音声データ判別方法および音声データ判別プログラムを提供すること。
【解決手段】ディスクドライブ５０、ＰＣ５１及び携帯端末５２（入力元）から入力された音声データにおける、左チャンネル／右チャンネルがそれぞれ入力系統に設定され、入力系統ごとに音声データの判別が順次行われる。複数の入力元の入力系統を順次切り替えて入力される信号を判別することで、全ての入力元および入力系統を同時に判別することなく、各入力元で入力される音声データを判別できる。これにより、複数の入力元から音声データとしてオーディオデータまたはＰＰデータ含まれるものを出力する際の処理負荷を低減できる。
【選択図】図２

【特許請求の範囲】

【請求項1】

左または右チャンネルの一方のチャンネルにＭＩＤＩデータを変調したＭＩＤＩ変調信号が設定され他方のチャンネルにオーディオ信号が設定されたＰＰデータと、オーディオ信号のみで構成されたオーディオデータとのいずれかによって構成される音声データを出力する電子機器であって、
前記音声データを入力する複数の入力手段と、
複数の前記入力手段のうちの対象の入力手段を順次切り替えながら、その対象の入力手段から入力される音声データがＰＰデータ又はオーディオデータのいずれかであるかを判別する順次判別手段と、
前記順次判別手段によって、対象の入力手段から入力される音声データがＰＰデータの場合、前記ＰＰデータにおけるＭＩＤＩ変調信号を復号して出力し、前記ＰＰデータにおけるオーディオ信号を出力するＰＰ出力手段と、
前記順次判別手段によって、対象の入力手段から入力される音声データがオーディオデータの場合、前記オーディオデータにおけるオーディオ信号を出力するオーディオ出力手段と、を備えていることを特徴とする電子機器。

【請求項2】

前記ＰＰ出力手段または前記オーディオ出力手段によって音声データが出力される場合に、前記順次判別手段による判別を停止することを特徴とする請求項１記載の電子機器。

【請求項3】

前記ＰＰ出力手段または前記オーディオ出力手段で出力していた音声データの、前記入力手段からの入力が途絶した場合に、再度、前記順次判別手段による判別を実行することを特徴とする請求項１記載の電子機器。

【請求項4】

前記オーディオ出力手段によるオーディオデータの出力と共に、前記音声データがＰＰデータであるかを判別する出力中判別手段を備え、
前記ＰＰ出力手段は、前記出力中判別手段により音声データがＰＰデータであると判別された場合に、前記オーディオ出力手段によるオーディオデータの出力を停止すると共に、前記ＰＰデータにおけるＭＩＤＩ変調信号を復号して出力し、前記ＰＰデータにおけるオーディオ信号を出力するものであることを特徴とする請求項１記載の電子機器。

【請求項5】

前記ＭＩＤＩ変調信号は、前記ＭＩＤＩデータをパルス変調した信号であり、
前記順次判別手段は、前記音声データから所定幅のパルスが連続して第１所定数検出された場合に、当該音声データがＰＰデータであると判別するものであり、
前記出力中判別手段は、前記音声データから所定幅のパルスが連続して第２所定数検出された場合に、当該音声データがＰＰデータであると判別するものであることを特徴とする請求項４記載の電子機器。

【請求項6】

前記第２所定数には、前記第１所定数よりも大きな値が設定されることを特徴とする請求項５記載の電子機器。

【請求項7】

音声データを入力する複数の入力手段を備え、左または右チャンネルの一方のチャンネルにＭＩＤＩデータを変調したＭＩＤＩ変調信号が設定され他方のチャンネルにオーディオ信号が設定されたＰＰデータと、オーディオ信号のみで構成されたオーディオデータとのいずれかによって構成される音声データを出力する電子機器で実行される音声データ判別方法であって、
複数の前記入力手段のうちの対象の入力手段を順次切り替えながら、その対象の入力手段から入力される音声データがＰＰデータ又はオーディオデータのいずれかであるかを判別する順次判別ステップと、
前記順次判別ステップによって、対象の入力手段から入力される音声データがＰＰデータの場合、前記ＰＰデータにおけるＭＩＤＩ変調信号を復号して出力し、前記ＰＰデータにおけるオーディオ信号を出力するＰＰ出力ステップと、
前記順次判別ステップによって、対象の入力手段から入力される音声データがオーディオデータの場合、前記オーディオデータにおけるオーディオ信号を出力するオーディオ出力ステップと、を備えていることを特徴とする音声データ判別方法。

【請求項8】

音声データを入力する複数の入力部を備え、左または右チャンネルの一方のチャンネルにＭＩＤＩデータを変調したＭＩＤＩ変調信号が設定され他方のチャンネルにオーディオ信号が設定されたＰＰデータと、オーディオ信号のみで構成されたオーディオデータとのいずれかによって構成される音声データを出力するコンピュータで実行される音声データ判別プログラムであって、
複数の前記入力部のうちの対象の入力部を順次切り替えながら、その対象の入力部から入力される音声データがＰＰデータ又はオーディオデータのいずれかであるかを判別する順次判別ステップと、
前記順次判別ステップによって、対象の入力部から入力される音声データがＰＰデータの場合、前記ＰＰデータにおけるＭＩＤＩ変調信号を復号して出力し、前記ＰＰデータにおけるオーディオ信号を出力するＰＰ出力ステップと、
前記順次判別ステップによって、対象の入力部から入力される音声データがオーディオデータの場合、前記オーディオデータにおけるオーディオ信号を出力するオーディオ出力ステップと、を前記コンピュータに実行させることを特徴とする音声データ判別プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、電子機器、音声データ判別方法および音声データ判別プログラムに関するものである。

【背景技術】

【0002】

特許文献１には、左または右チャンネルのうちの一方のチャンネルにＭＩＤＩデータを変調したＭＩＤＩ変調信号を、他方のチャンネルにオーディオ信号をそれぞれ設定した音声データであるプレイヤピアノデータ（以下「ＰＰデータ」と略す）を音楽用ＣＤに記録し、その音楽用ＣＤをオーディオ再生装置３０で再生することが記載されている。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２００２－９４５９３号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

音楽用ＣＤには、音声データとしてＰＰデータが記録されたものの他にも、音声データとして左右のチャンネルにオーディオ信号のみが設定されたものがある。従って、オーディオ再生装置３０において音楽用ＣＤの音声データを正確に再生するためには、音楽用ＣＤから読み取られた音声データを解析し、その音声データがＰＰデータによるものか又はオーディオ信号のみによるものかを判別する必要がある。

【0005】

しかしながら昨今では、音楽用ＣＤに加え、無線通信や有線通信による複数の入力系統によって音声データが入力され、更にそれぞれの入力系統で独立して音声データが入力可能に構成される。よって、オーディオ再生装置３０の入力系統からそれぞれの入力された音声データを正確に再生するには、全入力系統から入力される音声データを常に判別しなければならず、オーディオ再生装置３０の処理負荷が増大するという問題点がある。

【0006】

本発明は、上述した問題点を解決するためになされたものであり、複数の入力手段からＭＩＤＩ変調信号またはオーディオ信号が含まれる音声データを出力する際の処理負荷を低減できる電子機器、音声データ判別方法および音声データ判別プログラムを提供することを目的としている。

【課題を解決するための手段】

【0007】

この目的を達成するために本発明の電子機器は、左または右チャンネルの一方のチャンネルにＭＩＤＩデータを変調したＭＩＤＩ変調信号が設定され他方のチャンネルにオーディオ信号が設定されたＰＰデータと、オーディオ信号のみで構成されたオーディオデータとのいずれかによって構成される音声データを出力するものであり、前記音声データを入力する複数の入力手段と、複数の前記入力手段のうちの対象の入力手段を順次切り替えながら、その対象の入力手段から入力される音声データがＰＰデータ又はオーディオデータのいずれかであるかを判別する順次判別手段と、前記順次判別手段によって、対象の入力手段から入力される音声データがＰＰデータの場合、前記ＰＰデータにおけるＭＩＤＩ変調信号を復号して出力し、前記ＰＰデータにおけるオーディオ信号を出力するＰＰ出力手段と、前記順次判別手段によって、対象の入力手段から入力される音声データがオーディオデータの場合、前記オーディオデータにおけるオーディオ信号を出力するオーディオ出力手段と、を備えている。

【0008】

本発明の音声データ判別方法は、音声データを入力する複数の入力手段を備え、左または右チャンネルの一方のチャンネルにＭＩＤＩデータを変調したＭＩＤＩ変調信号が設定され他方のチャンネルにオーディオ信号が設定されたＰＰデータと、オーディオ信号のみで構成されたオーディオデータとのいずれかによって構成される音声データを出力する電子機器で実行される方法であり、複数の前記入力手段のうちの対象の入力手段を順次切り替えながら、その対象の入力手段から入力される音声データがＰＰデータ又はオーディオデータのいずれかであるかを判別する順次判別ステップと、前記順次判別ステップによって、対象の入力手段から入力される音声データがＰＰデータの場合、前記ＰＰデータにおけるＭＩＤＩ変調信号を復号して出力し、前記ＰＰデータにおけるオーディオ信号を出力するＰＰ出力ステップと、前記順次判別ステップによって、対象の入力手段から入力される音声データがオーディオデータの場合、前記オーディオデータにおけるオーディオ信号を出力するオーディオ出力ステップと、を備えている。

【0009】

また本発明の音声データ判別プログラムは、音声データを入力する複数の入力部を備え、左または右チャンネルの一方のチャンネルにＭＩＤＩデータを変調したＭＩＤＩ変調信号が設定され他方のチャンネルにオーディオ信号が設定されたＰＰデータと、オーディオ信号のみで構成されたオーディオデータとのいずれかによって構成される音声データを出力するコンピュータで実行されるものであり、複数の前記入力部のうちの対象の入力部を順次切り替えながら、その対象の入力部から入力される音声データがＰＰデータ又はオーディオデータのいずれかであるかを判別する順次判別ステップと、前記順次判別ステップによって、対象の入力部から入力される音声データがＰＰデータの場合、前記ＰＰデータにおけるＭＩＤＩ変調信号を復号して出力し、前記ＰＰデータにおけるオーディオ信号を出力するＰＰ出力ステップと、前記順次判別ステップによって、対象の入力部から入力される音声データがオーディオデータの場合、前記オーディオデータにおけるオーディオ信号を出力するオーディオ出力ステップと、を前記コンピュータに実行させるものである。

【図面の簡単な説明】

【0010】

【図1】電子ピアノの外観を表す図である。

【図2】音声データの判別を説明する図である。

【図3】電子ピアノの機能ブロック図である。

【図4】電子ピアノの電気的構成を示すブロック図である。

【図5】メイン処理のフローチャートである。

【図6】順次判別処理のフローチャートである。

【図7】（ａ）は、ＰＰコンテンツ判別処理のフローチャートであり、（ｂ）は、オーディオＰＰコンテンツ判別処理のフローチャートである。

【図8】（ａ）は、ＰＰデコード処理のフローチャートであり、（ｂ）は、オーディオ再生処理のフローチャートである。

【発明を実施するための形態】

【0011】

以下、好ましい実施例について、添付図面を参照して説明する。まず、図１を参照して本実施形態の電子ピアノ１の概要を説明する。図１は、電子ピアノ１の外観を表す図であり、電子ピアノ１は、ユーザＨの演奏に基づいた楽音や、ＭＩＤＩ（Musical Instrument Digital Interface）規格の楽曲データであるＭＩＤＩデータに基づいて楽音や、音声データにおけるオーディオ信号を再生することによる楽音を発音する電子機器である。

【0012】

電子ピアノ１には、鍵盤２と、ユーザＨからの各種設定が入力される設定キー３と、各種設定の設定状態等が表示されるＬＣＤ４とが設けられる。鍵盤２は、ユーザＨの演奏による演奏情報を取得するための入力装置である。鍵盤２には、複数の鍵２ａが配設され、ユーザＨによる鍵２ａの押鍵／離鍵操作に応じたＭＩＤＩ規格の演奏情報が、ＣＰＵ１０（図４参照）へ出力され、楽音として出力される。

【0013】

鍵盤２にはまた、鍵２ａのそれぞれを独立して上下に駆動させるソレノイド２ｂが設けられる。後述のディスクドライブ５０等から入力されたＭＩＤＩデータから演奏情報のうちのノートオンが取得された場合にソレノイド２ｂによって鍵２ａを下方に駆動させることで、鍵２ａの押鍵が実現される。一方で、ＭＩＤＩデータから演奏情報のうちのノートオフが取得された場合に、ソレノイド２ｂによって鍵２ａを上方に駆動させることで鍵２ａの離鍵が実現される。

【0014】

入力されたＭＩＤＩデータに基づくソレノイド２ｂによる鍵２ａの押鍵／離鍵と、当該ＭＩＤＩデータによる楽音の発音とを同期させることで、ユーザＨに電子ピアノ１が自動演奏されているように見せることができる。以下、このようなＭＩＤＩデータに基づきソレノイド２ｂを駆動させ、鍵２ａを動作させることを「鍵２ａの自動操作」という。

【0015】

本実施形態の電子ピアノ１は、鍵盤２による楽音の出力に加え、入力された音声データに基づく楽音が出力できるように構成される。入力される音声データとして、オーディオデータと、プレイヤピアノデータ（PlayerPianoデータ、以下「ＰＰデータ」と略す）とが設けられる。オーディオデータは、左チャンネル及び右チャンネルの両方にオーディオ信号が記録されたものである。音声データとしてオーディオデータが入力された場合は、そのオーディオデータにおけるオーディオ信号が放音される。

【0016】

ＰＰデータは、音声データにおける左チャンネルにＭＩＤＩデータを変調したＭＩＤＩ変調信号が設定され、右チャンネルにオーディオ信号がそれぞれ設定されたものである。本実施形態のＰＰデータのＭＩＤＩ変調信号の変調方式としては、パルス変調が用いられる。変調方式は、ＰＰデータを作成するユーザＨやメーカによって様々なもの（例えば変調に用いられるパルス幅）が適宜採用される。

【0017】

音声データとしてＰＰデータが入力された場合は、ＰＰデータの右チャンネルに含まれるオーディオ信号を放音すると共に、左チャンネルに含まれるＭＩＤＩ変調信号をＭＩＤＩデータに復号されて楽音として出力され、更にそのＭＩＤＩデータを用いて鍵２ａが自動操作される。

【0018】

本実施形態の電子ピアノ１には、上記のようなオーディオデータ又はＰＰデータによって構成された音声データが、複数の入力元から任意のタイミングで入力される。音声データの入力元として、電子ピアノ１に接続された音楽用コンパクトディスク（音楽用ＣＤ）等の光ディスクから音声データを読み取るディスクドライブ５０と、電子ピアノ１に接続されたパーソナルコンピュータ（ＰＣ）５１と、電子ピアノ１に無線通信を介して接続された携帯端末５２とが設けられる。

【0019】

これら複数の入力元から任意のタイミングで入力される音声データを正確に出力するためには、全ての入力元から入力される音声データを常に判別する必要があるが、そうすると電子ピアノの処理負荷が増大し、音声データがレスポンス良く出力されない虞がある。そこで本実施形態では、音声データの判別を、入力元からの音声データの左チャンネル／右チャンネルのチャンネル毎に順次行うことで、音声データの判別にかかる電子ピアノ１の処理負荷を低減させる。図２を参照して、本実施形態における音声データの判別手法を説明する。

【0020】

図２は、音声データの判別を説明する図である。本実施形態では、ディスクドライブ５０、ＰＣ５１及び携帯端末５２から入力された音声データにおける、左チャンネル／右チャンネルがそれぞれ「入力系統」に設定され、入力系統ごとに音声データの判別が順次行われる。

【0021】

具体的に入力系統として、ディスクドライブ５０から入力される音声データの左チャンネルと、ディスクドライブ５０から入力される音声データの右チャンネルと、ＰＣ５１から入力される音声データの左チャンネルと、ＰＣ５１から入力される音声データの右チャンネル、携帯端末５２から入力される音声データの左チャンネルと、携帯端末５２から入力される音声データの右チャンネルとの６つが設けられる。以下、入力系統の「ディスクドライブ５０から入力される音声データの左チャンネル」等を「ディスクドライブ５０・左チャンネル」等と略す。

【0022】

入力される信号の判別を行う入力系統の順番は、ディスクドライブ５０・左チャンネル→ディスクドライブ５０・右チャンネル→ＰＣ５１・左チャンネル→ＰＣ５１・右チャンネル→携帯端末５２・左チャンネル→携帯端末５２・右チャンネル、とされる。

【0023】

入力系統が判別された結果、入力される信号がＰＰデータ又はオーディオデータであると判別された場合は、入力系統を順次切り替えての判別が停止され、判別された入力される信号の出力が行われる。一方で「携帯端末５２・右チャンネル」まで判別を行ったが、ＰＰデータ又はオーディオデータが判別されなかった場合は、再度、最初の「ディスクドライブ５０・左チャンネル」からの入力される信号の判別が繰り返される。以下、入力系統を順次切り替えて入力される信号を判別することを「順次判別」という。

【0024】

入力される信号の具体的な判別は、対象の入力系統において所定の時間ＬＮ間に入力される信号を監視することで行われる。図２中の領域Ｓｃは、判別が行われる入力系統の対象およびその期間をそれぞれ表している。

【0025】

本実施形態において、時間ＬＮには、音声データの５００サンプル分の時間の長さが設定される。例えば音声データのサンプリング周波数が４４．１ｋＨｚの場合は、時間ＬＮは５００／４４１００秒（約１１．３ミリ秒）とされる。なお、時間ＬＮは音声データの５００サンプル分以上でも、５００サンプル分以下でも良い。

【0026】

時間ＬＮ間、対象の入力系統で入力される信号が観測され、その信号において所定のパルス幅（例えば２６０マイクロ秒または３００マイクロ秒）が所定のパルス回数閾値だけ連続して検出されたかが確認される。本実施形態の順次判別におけるパルス回数閾値には、上記の時間ＬＮや所定のパルス幅のそれぞれ長さに応じて「１０」が設定される。

【0027】

なお、順次判別におけるパルス回数閾値は、１０に限られず、１０以上でも１０以下でも良い。順次判別におけるパルス回数閾値に１０以外の値が設定される場合でも、順次判別におけるパルス回数閾値には、時間ＬＮや所定のパルス幅のそれぞれ長さに応じた値が設定されるのが好ましい。

【0028】

そして、所定のパルス幅がパルス回数閾値だけ連続して検出された場合に、その入力系統で入力される信号がＭＩＤＩ変調信号と判別される。更に検出されたパルス幅からＭＩＤＩ変調信号の変調方式が解析される。なお、ＭＩＤＩ変調信号の変調方式の解析は既知の技術が用いられる。

【0029】

一方で、時間ＬＮ間入力される信号において所定のパルス幅がパルス回数閾値だけ連続して検出されない場合は、入力される信号のレベルの絶対値を加算（積分）し、その加算値が所定のレベルを超えているかが確認される。加算値がレベル閾値を超えている場合は、その入力系統で入力される信号がオーディオ信号であると判別される。

【0030】

所定のパルス幅がパルス回数閾値だけ連続して検出されず、かつ、入力される信号のレベルの加算値が所定のレベルを超えない場合は、その入力系統は信号が入力されない無信号であると判別される。

【0031】

このような判別により、左チャンネルに対応する入力系統からの信号がＭＩＤＩ変調信号であるとされた場合、これらの入力系統に該当する入力元から入力される音声データはＰＰデータと判別され、そのＰＰデータの左チャンネルのＭＩＤＩ変調信号が復号されたＭＩＤＩデータによる楽音の出力および鍵２ａの自動操作と、ＰＰデータの右チャンネルのオーディオ信号の出力とが行われる。

【0032】

また、左チャンネルに対応する入力系統からの信号がオーディオ信号であるとされた場合、これらの入力系統に該当する入力元から入力される音声データは、オーディオデータと判別され、そのオーディオデータの左チャンネル及び右チャンネルのオーディオ信号の出力が行われる。

【0033】

左チャンネルに対応する入力系統で無信号と判別されたが、同一の入力元の右チャンネルに該当する入力系統からの信号がオーディオ信号である場合も、これらの入力系統に対応する入力元から入力される音声データは、オーディオデータと判別され、そのオーディオデータの左チャンネル及び右チャンネルのオーディオ信号の出力が行われる。

【0034】

一方で、左チャンネルに対応する入力系統と、同一の入力元の右チャンネルに該当する入力系統とが無信号の場合は、これらの入力系統に該当する入力元から音声データが入力されていないと判別され、その入力系統の判別を終え、次の入力系統で入力される信号の判別が継続される。

【0035】

このように、複数の入力元の入力系統を順次切り替えて入力される信号を判別することで、全ての入力元および入力系統を同時に判別することなく、各入力元で入力される音声データを判別できる。これにより、複数の入力元から音声データとしてオーディオデータまたはＰＰデータ含まれるものを出力する際の処理負荷を低減できる。また、入力系統を順次判別することで、複数の入力元の全て入力系統において音声データの判別が可能となる。これにより、入力元および入力系統によって音声データが判別されない事態を防止できる。

【0036】

上記した通り、入力される信号がオーディオ信号またはＭＩＤＩ変調信号と判別され、入力される信号を出力する際には、順次判別が停止される。これにより、入力される信号の出力、例えばＭＩＤＩ変調信号を復号する処理等に電子ピアノ１の処理能力を集中させることができるので、入力される信号の出力をレスポンス良く行うことができる。

【0037】

また、ユーザＨが音声データの入力元を切り替える等して、これまで音声データが入力されていた入力元からの音声データの供給が途絶した場合は、順次判別が再開される。これにより、ユーザＨが切り替えた後の入力元からの音声データの出力を、ユーザＨが電子ピアノ１を操作することなく行うことができる。

【0038】

ところで、左チャンネルに対応する入力系統で無信号、かつ、同一の入力元の右チャンネルに対応する入力系統からの信号がオーディオ信号である場合に、当該入力元から入力される音声データがオーディオデータと判別され、そのオーディオデータの左チャンネル及び右チャンネルのオーディオ信号の出力が行われる。しかしこの場合、実際には、左チャンネルにＭＩＤＩ変調信号が設定されているが、順次判別が行われたタイミングにおいて一時的に左チャンネルが無信号だった場合も含まれる。

【0039】

また順次判別において、左チャンネルの信号がオーディオ信号であると判別された後に、ユーザＨが当該入力元から入力される音声データをＰＰデータに切り替えると、順次判別後において、左チャンネルの信号がオーディオ信号からＭＩＤＩ変調信号に切り替わってしまう。

【0040】

これらの場合に、左チャンネルのＭＩＤＩ変調信号をオーディオ信号として出力すると、ＭＩＤＩ変調信号のパルス信号がそのまま放音されるので、聴取者が違和感を覚える虞がある。

【0041】

そこで本実施形態では、入力元からの音声データがオーディオデータと判別された場合でも、当該入力元からの音声データがオーディオデータ又はＰＰデータであるかの判別が継続して行われ、音声データがＰＰデータである場合は、オーディオデータの出力からＰＰデータの出力に切り替えられる。このようなオーディオデータの出力中に行われる判別を「出力中判別」という。出力中判別における音声データの判別手法は、上記した順次判別における手法と同様だが、入力された信号がＭＩＤＩ変調信号を否かの判別のために用いられるパルス回数閾値に「１００」が設定される。

【0042】

このような出力中判別により、順次判別においてＰＰデータをオーディオデータとご判別した場合や、該当する入力元からの音声データをオーディオデータからＰＰデータに切り替えた場合でも、ＰＰデータにおけるＭＩＤＩ変調信号がそのまま放音されるのが抑制されるので、聴取者の違和感を抑制することができる。

【0043】

また、出力中判別におけるパルス回数閾値（「１００」）には、順次判別におけるパルス回数閾値（「１０」）よりも大きな値が設定される。即ち出力中判別においては、ＭＩＤＩ変調信号と判別するために観測されるパルスの数を多くなるので、ＭＩＤＩ変調信号の誤検知が抑制され、ＭＩＤＩ変調信号か否かをより正確に判別することができる。

【0044】

一方で順次判別においては、パルス回数閾値に出力中判別よりも小さな値が設定されることで、ＭＩＤＩ変調信号か否かを迅速に判別することができる。これにより、順次判別による入力系統を切り替えながら判別を迅速に行うことができる。

【0045】

なお、出力中判別におけるパルス回数閾値も１００に限られず、１００以上でも１００以下でも良い。出力中判別におけるパルス回数閾値に１００以外の値が設定される場合でも、出力中判別におけるパルス回数閾値には、上記の順次判別におけるパルス回数閾値よりも大きな値が設定されるのが好ましい。

【0046】

次に図３を参照して、電子ピアノ１の機能を説明する。図３は、電子ピアノ１の機能ブロック図である。図３に示すように、電子ピアノ１は、入力手段１００と、順次判別手段１０１と、ＰＰ出力手段１０２と、オーディオ出力手段１０３とを有する。

【0047】

入力手段１００は、音声データを入力する手段であり、図４で後述の外部入出力装置１９及び無線通信装置２０で実現される。入力手段１００は電子ピアノ１に複数設けられる。順次判別手段１０１は、複数の入力手段１００のうちの対象の入力手段１００を順次切り替えながら、その対象の入力手段１００から入力される音声データがＰＰデータ又はオーディオデータのいずれかであるかを判別する手段であり、図４で後述するＣＰＵ１０で実現される。

【0048】

ＰＰ出力手段１０２は、順次判別手段１０１によって、対象の入力手段１００から入力される音声データがＰＰデータの場合、そのＰＰデータにおけるＭＩＤＩ変調信号を復号して出力し、ＰＰデータにおけるオーディオ信号を出力する手段であり、ＣＰＵ１０で実現される。またオーディオ出力手段１０３は、順次判別手段１０１によって、対象の入力手段１００から入力される音声データがオーディオデータの場合、そのオーディオデータにおけるオーディオ信号を出力する手段であり、ＣＰＵ１０で実現される。

【0049】

このように、音声データを判別する入力手段１００を順次切り替えることで、全ての入力手段を同時に判別することなく、各入力手段１００で入力される音声データを判別できる。これにより、複数の入力手段１００からＭＩＤＩ変調信号またはオーディオ信号が含まれる音声データを出力する際の処理負荷を低減できる。また、入力手段１００を順次判別することで、複数の入力手段１００の全てにおいて音声データの判別が可能となる。これにより、入力手段１００によって音声データが判別されない事態を防止できる。

【0050】

次に図４を参照して、電子ピアノ１の電気的構成を説明する。図４は、電子ピアノ１の電気的構成を示すブロック図である。電子ピアノ１は、ＣＰＵ１０と、フラッシュＲＯＭ１１と、ＲＡＭ１２と、上記した鍵盤２、設定キー３及びＬＣＤ４と、音源１３と、Digital Signal Processor１４（以下「ＤＳＰ１４」と称す）と、外部入出力装置１９と、無線通信装置２０とを有し、それぞれバスライン１５を介して接続される。

【0051】

ＣＰＵ１０は、バスライン１５により接続された各部を制御する演算装置である。フラッシュＲＯＭ１１は、ＣＰＵ１０により実行されるプログラムや固定値データ等を格納した書き換え可能な不揮発性の記憶装置であり、制御プログラム１１ａを含む。ＣＰＵ１０によって制御プログラム１１ａが実行されると、図５のメイン処理が実行される。

【0052】

ＲＡＭ１２は、ＣＰＵ１０がプログラムの実行時に各種のワークデータやフラグ等を書き換え可能に記憶するためのメモリであり、上記のパルス回数閾値が記憶されるパルス回数閾値１２ａと、対象の入力系統から入力される信号から所定のパルス幅が連続して検出された回数が記憶されるパルス検出回数１２ｂと、対象の入力系統から入力される信号のレベルの絶対値の加算値が記憶されるレベル加算値１２ｃと、ＭＩＤＩ変調信号が検出されたかどうかが記憶されるＭＩＤＩ検出フラグ１２ｄと、オーディオ信号が検出されたかどうかが記憶されるオーディオ検出フラグ１２ｅと、順次判別において入力系統の観測時間に相当するループ回数が記憶されるループ回数１２ｆとが設けられる。

【0053】

音源１３は、ＣＰＵ１０から入力される演奏情報に基づく波形データを出力する装置である。ＤＳＰ１４は、音源１３から入力された波形データを演算処理するための演算装置である。ＤＳＰ１４には、デジタルアナログコンバータ（ＤＡＣ）１６が接続され、そのＤＡＣ１６にはアンプ１７が接続され、そのアンプ１７にはスピーカ１８が接続される。

【0054】

外部入出力装置１９は、外部の機器からの情報を入出力するための装置である。外部入出力装置１９には、上記したディスクドライブ５０及びＰＣ５１が接続され、これらからの音声データが入力される。無線通信装置２０は、外部の機器と無線通信をするための装置である。無線通信装置２０を介して、上記した携帯端末５２からの音声データが入力される。

【0055】

次に図５～８を参照して、電子ピアノ１のＣＰＵ１０で実行される処理を説明する。図５は、メイン処理のフローチャートである。メイン処理は、電子ピアノ１の電源が投入された場合に実行される処理である。

【0056】

メイン処理はまず、電子ピアノ１の動作モードに「自動検出モード」を設定し、入力系統に「ディスクドライブ５０・左チャンネル」を設定し、パルス回数閾値１２ａに１０を設定し、ＭＩＤＩ検出フラグ１２ｄ及びオーディオ検出フラグ１２ｅに「オフ」を設定し、パルス検出回数１２ｂ、レベル加算値１２ｃ及びループ回数１２ｆにそれぞれ０を設定する（Ｓ１）。電子ピアノ１の動作モードとして、上記した順次判別を行う「自動検出モード」と、ＰＰデータの出力を行う「ＰＰデコードモード」と、オーディオデータの出力を行う「オーディオ再生モード」とが設けられる。

【0057】

Ｓ１の処理の後、入力系統（即ちＳ１の処理で設定された「ディスクドライブ５０・左チャンネル」）からの信号の取得を開始する（Ｓ２）。Ｓ２の処理の後、動作モードを確認する（Ｓ３）。Ｓ３の処理において、動作モードが自動検出モードの場合は（Ｓ３：「自動検出モード」）、Ｓ４の順次判別処理を行い、動作モードがＰＰデコードモードの場合は（Ｓ３：「ＰＰデコードモード」）、Ｓ５のＰＰデコード処理を行い、また、動作モードがオーディオ再生モードの場合は（Ｓ３：「オーディオ再生モード」）、Ｓ６のオーディオ再生処理を行う。図６～８を参照して、Ｓ４の順次判別処理、Ｓ５のＰＰデコード処理およびＳ６のオーディオ再生処理を説明する。

【0058】

図６は、順次判別処理のフローチャートである。順次判別処理はまず、ループ回数１２ｆの値が、上記の時間ＬＮに相当する値以上かを確認する（Ｓ２０）。Ｓ２０の処理の後、入力系統を次の入力系統に変更し（Ｓ２１）、ループ回数１２ｆに０を設定する（Ｓ２２）。

【0059】

即ち対象の入力系統の信号の、後述のＳ２３のＰＰコンテンツ判別処理やＳ２７のオーディオ判別処理による監視および判別が時間ＬＮ継続したため、対象の入力系統が次の入力系統に切り替えられる。判別する入力系統の順番は、上記した通り、ディスクドライブ５０・左チャンネル→ディスクドライブ５０・右チャンネル→ＰＣ５１・左チャンネル→ＰＣ５１・右チャンネル→携帯端末５２・左チャンネル→携帯端末５２・右チャンネルとされる。

【0060】

Ｓ２２の処理の後、又は、ループ回数１２ｆの値が、上記の時間ＬＮに相当する値より小さい場合は（Ｓ２０：Ｎｏ）、Ｓ２３のＰＰコンテンツ判別処理を実行する。ここで図７（ａ）を参照して、ＰＰコンテンツ判別処理を説明する。

【0061】

図７（ａ）は、ＰＰコンテンツ判別処理のフローチャートである。ＰＰコンテンツ判別処理はまず、対象の入力系統から取得された信号から所定のパルス幅（例えば０．２ミリ秒または０．３ミリ秒）が連続して検出されたかを確認する（Ｓ４０）。より具体的に、対象の入力系統から所定のパルス幅が初めて検出されたか、又は、所定のパルス幅が連続して検出されたかが確認される。

【0062】

Ｓ４０の処理において、対象の入力系統から取得された信号から所定のパルス幅が検出された場合は（Ｓ４０：Ｙｅｓ）、パルス検出回数１２ｂに１を加算する（Ｓ４１）。Ｓ４１の処理の後、パルス検出回数１２ｂの値がパルス回数閾値１２ａの値以上かを確認する（Ｓ４２）。Ｓ４２の処理において、パルス検出回数１２ｂの値がパルス回数閾値１２ａの値以上の場合は（Ｓ４２：Ｙｅｓ）、対象の入力系統から取得された信号がＭＩＤＩ変調信号であると判別されるので、ＭＩＤＩ検出フラグ１２ｄにオンを設定する（Ｓ４３）。Ｓ４３の処理の後、レベル加算値１２ｃに０を設定する（Ｓ４４）。

【0063】

Ｓ４０の処理において、対象の入力系統から取得された信号から所定のパルス幅が連続して検出されない場合（Ｓ４０：Ｎｏ）、又は、Ｓ４４の処理の後、パルス検出回数１２ｂに０を設定する（Ｓ４５）。Ｓ４２の処理において、パルス検出回数１２ｂの値がパルス回数閾値１２ａの値より小さい場合、又は、Ｓ４５の処理の後、ＰＰコンテンツ判別処理を終了する。

【0064】

図６に戻る。Ｓ２３のＰＰコンテンツ判別処理の後、ＭＩＤＩ検出フラグ１２ｄがオンかを確認する（Ｓ２４）。Ｓ２４の処理において、ＭＩＤＩ検出フラグ１２ｄがオンの場合は（Ｓ２４：Ｙｅｓ）、動作モードに「ＰＰデコードモード」を設定し（Ｓ２５）、ＭＩＤＩ検出フラグ１２ｄにオフを設定する（Ｓ２６）。これによって、Ｓ２３のＰＰコンテンツ判別処理で、ＭＩＤＩ変調信号、つまりＰＰデータと判別された対象の入力系統に該当する入力元の音声データが、図８（ａ）で後述のＳ５のＰＰデコード処理で出力される。

【0065】

Ｓ２４の処理において、ＭＩＤＩ検出フラグ１２ｄがオフの場合は（Ｓ２４：Ｎｏ）、Ｓ２７のオーディオ判別処理を実行する。ここで図７（ｂ）を参照して、オーディオ判別処理を説明する。

【0066】

図７（ｂ）は、オーディオ判別処理のフローチャートである。オーディオ判別処理はまず、対象の入力系統から取得された信号のレベルの絶対値をレベル加算値１２ｃに加算する（Ｓ５０）。Ｓ５０の処理の後、レベル加算値１２ｃが所定のレベル以上かを確認する（Ｓ５１）。

【0067】

Ｓ５１の処理において、レベル加算値１２ｃが所定のレベル以上の場合は（Ｓ５１：Ｙｅｓ）、オーディオ検出フラグ１２ｅにオンを設定し（Ｓ５２）、レベル加算値１２ｃに０を設定する（Ｓ５３）。Ｓ５１の処理において、レベル加算値１２ｃが所定のレベルより小さい場合（Ｓ５１：Ｎｏ）、又は、Ｓ５３の処理の後、オーディオ判別処理を終了する。

【0068】

図６に戻る。Ｓ２７のオーディオ判別処理の後、オーディオ検出フラグ１２ｅがオンかを確認する（Ｓ２８）。Ｓ２８の処理において、オーディオ検出フラグ１２ｅがオンの場合は（Ｓ２８：Ｙｅｓ）、動作モードに「オーディオ再生モード」を設定し（Ｓ２９）、パルス回数閾値１２ａに１００を設定し（Ｓ３０）、オーディオ検出フラグ１２ｅにオフを設定する（Ｓ３１）。これによって、Ｓ２７のオーディオ判別処理で、オーディオ信号、つまりオーディオデータと判別された対象の入力系統に該当する入力元の音声データが、図８（ｂ）で後述のＳ６のオーディオ再生処理で出力される。

【0069】

Ｓ２６，Ｓ３１の処理の後、パルス検出回数１２ｂ、レベル加算値１２ｃ及びループ回数１２ｆに０を設定する（Ｓ３２）。Ｓ２８の処理において、オーディオ検出フラグ１２ｅがオフの場合は（Ｓ２８：Ｎｏ）、ループ回数１２ｆに１を加算する（Ｓ３３）。Ｓ３２，Ｓ３３の処理の後、順次判別処理を終了する。

【0070】

次に図８（ａ）を参照して、Ｓ５のＰＰデコード処理を説明する。図８（ａ）は、ＰＰデコード処理のフローチャートである。ＰＰデコード処理はまず、対象の入力元、即ちＳ２３のＰＰコンテンツ判別処理により、ＭＩＤＩ変調信号が入力される入力系統に該当する入力元（ディスクドライブ５０、ＰＣ５１又は携帯端末５２）から音声データとしてＰＰデータが検出されているかを確認する（Ｓ６０）。

【0071】

Ｓ６０の処理において、ＰＰデータが検出されている場合は（Ｓ６０：Ｙｅｓ）、検出されたＰＰデータのＭＩＤＩ変調信号を取得し（Ｓ６１）、取得されたＭＩＤＩ変調信号をＭＩＤＩデータに復号して出力する（Ｓ６２）。Ｓ６２の処理においては、復号されたＭＩＤＩデータが楽音として出力され、更にそのＭＩＤＩデータを用いて鍵２ａが自動操作される。Ｓ６２の処理の後、検出されたＰＰデータのオーディオ信号を取得し、取得されたオーディオ信号を放音する（Ｓ６３）。

【0072】

Ｓ６０の処理において、対象の入力元からＰＰデータが検出されない場合（Ｓ６０：Ｎｏ）、例えば、対象の入力元からのＰＰデータの入力が途絶した場合や、前回のＳ６２の処理やＳ６３の処理でＰＰデータから取得されたＭＩＤＩデータやオーディオ信号の出力に失敗した場合は、再度Ｓ４の順次判別処理を行うため、動作モードに「自動検出モード」を設定する（Ｓ６４）。Ｓ６３，Ｓ６４の処理の後、ＰＰデコード処理を終了する。

【0073】

次に図８（ｂ）を参照して、Ｓ６のオーディオ再生処理を説明する。図８（ｂ）は、オーディオ再生処理のフローチャートである。オーディオ再生処理はまず、対象の入力元、即ちＳ２７のオーディオ判別処理により、オーディオ信号が入力される入力系統に該当する入力元から音声データとしてオーディオデータが検出されているかを確認する（Ｓ７０）。

【0074】

Ｓ７０の処理において、オーディオデータが検出されている場合は（Ｓ７０：Ｙｅｓ）、検出されたオーディオデータのオーディオ信号を取得し、取得されたオーディオ信号を出力（放音）する（Ｓ７１）。Ｓ７１の処理の後、Ｓ２３のＰＰコンテンツ判別処理を実行する。

【0075】

Ｓ２３のＰＰコンテンツ判別処理の後、ＭＩＤＩ検出フラグ１２ｄがオンかを確認する（Ｓ７２）。Ｓ７２の処理において、ＭＩＤＩ検出フラグ１２ｄがオンの場合は（Ｓ７２：Ｙｅｓ）、対象の入力元からＰＰデータが入力されている場合なので、Ｓ５のＰＰデコード処理を行うため、動作モードに「ＰＰデコードモード」を設定し（Ｓ７３）、ＭＩＤＩ検出フラグ１２ｄにオフを設定し（Ｓ７４）、パルス検出回数１２ｂ、レベル加算値１２ｃ及びループ回数１２ｆに０を設定する（Ｓ７５）。

【0076】

Ｓ７０の処理において、オーディオデータが検出されない場合（Ｓ７０：Ｎｏ）、例えば、対象の入力元からのオーディオデータの入力が途絶した場合や、前回のＳ７１の処理でオーディオ信号の出力に失敗した場合は、再度Ｓ４の順次判別処理を行うため、動作モードに「自動検出モード」を設定する（Ｓ７６）。

【0077】

Ｓ７５，Ｓ７６の処理の後、次回の自動検出モードによる順次判別に備えるため、パルス回数閾値１２ａに１０を設定する（Ｓ７７）。Ｓ７２の処理において、ＭＩＤＩ検出フラグ１２ｄがオフの場合（Ｓ７２：Ｎｏ）、又は、Ｓ７７の処理の後、オーディオ再生処理を終了する。

【0078】

図５に戻る。Ｓ４～Ｓ６の処理の後、電子ピアノ１のその他の処理を実行し（Ｓ７）、Ｓ３以下の処理を繰り返す。

【0079】

以上、上記実施形態に基づき説明したが、種々の改良変更が可能であることは容易に推察できるものである。

【0080】

上記実施形態では、音声データを入力する入力元を、ディスクドライブ５０、ＰＣ５１及び携帯端末５２としたが、これに限られない。これら以外の入力元（例えばインターネットに接続された音声データの配信サーバ）から音声データを入力しても良い。

【0081】

また、楽音の出力と鍵２ａの自動操作とを、同一のＭＩＤＩデータで行うものに限られず、楽音の出力と鍵２ａの自動操作とを別々のＭＩＤＩデータで行っても良い。この場合、楽音を出力するためのＭＩＤＩデータをディスクドライブ５０から取得し、鍵２ａの自動操作を行うためのＭＩＤＩデータをＰＣ５１から取得する等、楽音を出力するためのＭＩＤＩデータと鍵２ａの自動操作を行うためのＭＩＤＩデータとを別々の入力元から取得しても良い。

【0082】

上記実施形態では、入力元の左チャンネル／右チャンネルのチャンネル毎に入力系統を構成したが、入力系統の構成はこれに限られない。例えば、入力元をまとめて１つの入力系統としても良い。この場合、入力元の左チャンネル／右チャンネルから入力される信号を並行して判別しても良いし、入力元の左チャンネル／右チャンネルを交互に判別しても良い。また、複数の入力元（例えば、ディスクドライブ５０及びＰＣ５１）を１つの入力系統としても良い。

【0083】

上記実施形態では、判別する入力系統の順番を、ディスクドライブ５０・左チャンネル→ディスクドライブ５０・右チャンネル→ＰＣ５１・左チャンネル→ＰＣ５１・右チャンネル→携帯端末５２・左チャンネル→携帯端末５２・右チャンネルとしたが、これに限られず、例えば、判別する入力系統の順番を都度ランダムに異ならせても良い。

【0084】

また、判別された入力系統の回数をそれぞれの入力系統ごとにカウントして記憶しておき、当該回数が多い入力系統の順に判別を行っても良い。これにより、ユーザＨが音声データを入力させる回数が多い入力系統（入力手段）から判別が行われるので、ユーザＨが音声データの入力を開始してから、その音声データが判別されて再生されるまでのタイムラグを短縮することができる。

【0085】

上記実施形態では、ＰＰデータとして、左チャンネルにＭＩＤＩデータを変調したＭＩＤＩ変調信号を設定し、右チャンネルにオーディオ信号を設定したものを用いたが、これに限られない。ＰＰデータを、左チャンネルにオーディオ信号を設定し、右チャンネルにＭＩＤＩ変調信号を設定したものを用いても良い。その場合、判別における入力系統の順番を、右チャンネルを左チャンネルよりも先に（「右チャンネル→左チャンネル」）すれば良い。

【0086】

また上記実施形態では、オーディオデータとして、左チャンネル及び右チャンネルの両方にオーディオ信号を記録したものとしたが、これに限られない。オーディオデータとして、左チャンネル又は右チャンネルのいずれか一方にオーディオ信号を記録したもの（所謂モノラル）としても良いし、左チャンネル及び右チャンネル以外のチャンネルを更に追加し、そのチャンネルにもオーディオ信号を記録しても良い。左チャンネル及び右チャンネル以外のチャンネルを更に追加する場合は、追加したチャンネルも上記の入力系統に追加して判別を行えば良い。

【0087】

上記実施形態では、オーディオデータの出力中に出力中判別を行ったが、これに限られない。ＰＰデータの出力中にも出力中判別を行っても良い。また、オーディオデータの出力中における出力中判別を省略しても良い。

【0088】

上記実施形態では、入力された信号において所定幅のパルスをカウントすることで、入力された信号がＭＩＤＩ変調信号かＰＰデータかを判別したが、これに限られない。例えば、入力された信号がパルスであった場合に、そのパルスを一定期間取得した後に復号し、その復号した結果が有効なＭＩＤＩデータである場合に、その信号はＭＩＤＩ変調信号と判別しても良い。また、ＭＩＤＩ変調信号に対応するパルスの波形を学習データに学習させ、当該学習データを用いたＡＩによって、入力された信号がＭＩＤＩ変調信号かどうかを判別しても良い。

【0089】

上記実施形態では、電子機器として電子ピアノ１を例示したが、これに限られず、シンセサイザや電子吹奏楽器等、他の電子機器に本発明を適用しても良い。また、制御プログラム１１ａを他のパーソナルコンピュータや携帯端末等の情報処理装置で実行できるようにしても良い。

【0090】

上記実施形態では、楽曲データとしてＭＩＤＩデータを例示したが、これに限られず、ＭＩＤＩ規格以外の他の楽曲に関するデータを楽曲データとして用いても良い。

【符号の説明】

【0091】

１ 電子ピアノ（電子機器）
１１ａ 制御プログラム（音声データ判別プログラム）
１９ 外部入出力装置（入力手段、入力部）
２０ 無線通信装置（入力手段、入力部）
Ｓ４ 順次判別手段、順次判別ステップ
Ｓ５ ＰＰ出力手段、ＰＰ出力ステップ
Ｓ６ オーディオ出力手段、オーディオ出力ステップ
Ｓ２３，Ｓ７２，Ｓ７３ 出力中判別手段

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】