特許 6089651 音処理装置、音処理装置の制御方法、プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6089651

(24)【登録日】2017年2月17日

(45)【発行日】2017年3月8日

(54)【発明の名称】音処理装置、音処理装置の制御方法、プログラム

(51)【国際特許分類】

   H04R 3/04 20060101AFI20170227BHJP

   G10H 1/06 20060101ALI20170227BHJP

   G10L 21/0388 20130101ALI20170227BHJP

【ＦＩ】

   H04R3/04

   G10H1/06

   G10L21/0388 100

【請求項の数】9

【全頁数】12

(21)【出願番号】特願2012-267059(P2012-267059)

(22)【出願日】2012年12月6日

(65)【公開番号】特開2014-116657(P2014-116657A)

(43)【公開日】2014年6月26日

【審査請求日】2015年9月11日

(73)【特許権者】

【識別番号】710014351

【氏名又は名称】オンキヨー株式会社

(74)【代理人】

【識別番号】110001623

【氏名又は名称】特許業務法人真菱国際特許事務所

(72)【発明者】

【氏名】大竹 将知

(72)【発明者】

【氏名】吉野 肇

【審査官】 千本 潤介

(56)【参考文献】

【文献】 特開２０１１−０８７１９２（ＪＰ，Ａ）

【文献】 特開２０１１−０２２４８９（ＪＰ，Ａ）

【文献】 特開２０１１−１９７５９８（ＪＰ，Ａ）

【文献】 国際公開第２０１２／１１１０４３（ＷＯ，Ａ１）

【文献】 国際公開第２００９／００４７１８（ＷＯ，Ａ１）

【文献】 特開２００７−１４００００（ＪＰ，Ａ）

【文献】 特開２０１０−０６６６３６（ＪＰ，Ａ）

【文献】 特開２０００−２９３１８８（ＪＰ，Ａ）

【文献】 米国特許出願公開第２０１２／０２５９６２６（ＵＳ，Ａ１）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｈ０４Ｒ ３／０４

Ｇ１０Ｈ １／０６

Ｇ１０Ｌ ２１／０３８８

(57)【特許請求の範囲】

【請求項1】

原音から、聴覚錯覚の対象となる基音に対する倍音を抽出する倍音抽出部と、
抽出された倍音が所定の条件を満たす場合、前記聴覚錯覚の対象となる基音が、倍音成分を持つ楽音の基音であると判定する判定部と、
前記判定部の判定結果に応じて、前記倍音抽出部により抽出された前記倍音の強調処理を行う強調処理部と、
前記強調処理部による強調処理後の倍音と、前記原音と、を加算する加算部と、を備えたことを特徴とする音処理装置。

【請求項2】

前記強調処理部は、前記判定部により、前記聴覚錯覚の対象となる基音が、倍音成分を持つ楽音の基音であると判定された場合、前記倍音の強調処理を行い、
前記加算部は、前記判定部により、前記聴覚錯覚の対象となる基音が、倍音成分を持たない楽音の基音であると判定された場合、抽出された前記倍音と、前記原音と、を加算せず、前記原音のみを出力することを特徴とする請求項１に記載の音処理装置。

【請求項3】

前記倍音抽出部は、前記聴覚錯覚の対象となる基音に対し、次数の異なる複数の倍音を抽出し、
前記判定部は、抽出された前記複数の倍音が所定の条件を満たす場合、前記聴覚錯覚の対象となる基音が、倍音成分を持つ楽音の基音であると判定することを特徴とする請求項２に記載の音処理装置。

【請求項4】

前記所定の条件は、前記複数の倍音の振幅値が、周波数軸上でいずれも極大であることを含むことを特徴とする請求項３に記載の音処理装置。

【請求項5】

前記所定の条件は、抽出されたＮ次倍音（但し、ＮはＮ≧２となる整数）の極大点の振幅値と、（Ｎ＋１）次倍音の極大点の振幅値の差が所定値以下であることを含むことを特徴とする請求項４に記載の音処理装置。

【請求項6】

前記所定の条件は、抽出されたＮ次倍音（但し、ＮはＮ≧２となる整数）の極大点の振幅値が、（Ｎ＋１）次倍音の極大点の振幅値より大きいことを含むことを特徴とする請求項５に記載の音処理装置。

【請求項7】

前記所定の条件は、前記基音と、前記複数の倍音の振幅値の時間推移に相関があることを含むことを特徴とする請求項６に記載の音処理装置。

【請求項8】

原音から、聴覚錯覚の対象となる基音に対する倍音を抽出する倍音抽出ステップと、
抽出された倍音が所定の条件を満たす場合、前記聴覚錯覚の対象となる基音が、倍音成分を持つ楽音の基音であると判定する判定ステップと、
前記判定ステップの判定結果に応じて、前記倍音抽出ステップにより抽出された前記倍音の強調処理を行う強調処理ステップと、
前記強調処理ステップにて強調処理された倍音と、前記原音と、を加算する加算ステップと、を実行することを特徴とする音処理装置の制御方法。

【請求項9】

コンピューターに、請求項８に記載の音処理装置の制御方法における各ステップを実行させるためのプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、低音再生能力が低いスピーカーを用いた場合に、倍音を強調することで、基音を聴覚錯覚させる音処理装置、音処理装置の制御方法、プログラムに関する。

【背景技術】

【0002】

従来、この種の技術として、原音から、所定の音階の楽音の基音レベルを検出する手段と、原音から基音および倍音の周波数成分を抽出する手段と、抽出した周波数成分から、基音以下の周波数成分と、所定の音階の楽音に含まれる倍音以上の周波数成分を除去する手段と、周波数成分を除去した楽音を、検出した基音レベルに応じてレベル調整する手段と、レベル調整後の楽音を増幅し、原音に加算する手段と、を備えた楽音強調装置が知られている（例えば、特許文献１）。当該楽音強調装置は、この構成により、所望の楽音を高調波のバランスを崩すことなく自然な音で強調することが可能である。また、低音再生能力が低いスピーカーであっても、高調波が強調されることにより、楽音が強調されたとユーザーに知覚させることができる。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】ＷＯ２００９／００４７１８号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

ところが、上記特許文献１の発明は、倍音の強調度合いが基音レベルによって制御されるため、バスドラム音のような倍音成分を持たない楽音に対しても、その整数次倍音、つまりバスドラム音を構成している周波数成分以外の成分(別の楽器の成分)が強調され、楽音の音色が崩れてしまう可能性がある。

【0005】

本発明は、上記のような問題点に鑑み、楽音の音色を崩すことなく、低音を強調することができる音処理装置、音処理装置の制御方法、プログラムを提供することを目的とする。

【課題を解決するための手段】

【0006】

本発明の音処理装置は、原音から、聴覚錯覚の対象となる基音に対する倍音を抽出する倍音抽出部と、抽出された倍音が所定の条件を満たす場合、聴覚錯覚の対象となる基音が、倍音成分を持つ楽音の基音であると判定する判定部と、判定部の判定結果に応じて、倍音抽出部により抽出された倍音の強調処理を行う強調処理部と、強調処理部による強調処理後の倍音と、原音と、を加算する加算部と、を備えたことを特徴とする。

【0007】

上記の音処理装置において、強調処理部は、判定部により、聴覚錯覚の対象となる基音が、倍音成分を持つ楽音の基音であると判定された場合、倍音の強調処理を行い、加算部は、判定部により、聴覚錯覚の対象となる基音が、倍音成分を持たない楽音の基音であると判定された場合、抽出された倍音と、原音と、を加算せず、原音のみを出力することを特徴とする。

【0008】

上記の音処理装置において、倍音抽出部は、聴覚錯覚の対象となる基音に対し、次数の異なる複数の倍音を抽出し、判定部は、抽出された複数の倍音が所定の条件を満たす場合、聴覚錯覚の対象となる基音が、倍音成分を持つ楽音の基音であると判定することを特徴とする。

【0009】

上記の音処理装置において、所定の条件は、複数の倍音の振幅値が、周波数軸上でいずれも極大であることを含むことを特徴とする。

【0010】

上記の音処理装置において、所定の条件は、抽出されたＮ次倍音（但し、ＮはＮ≧２となる整数）の極大点の振幅値と、（Ｎ＋１）次倍音の極大点の振幅値の差が所定値以下であることを含むことを特徴とする。

【0011】

上記の音処理装置において、所定の条件は、抽出されたＮ次倍音（但し、ＮはＮ≧２となる整数）の極大点の振幅値が、（Ｎ＋１）次倍音の極大点の振幅値より大きいことを含むことを特徴とする。

【0012】

上記の音処理装置において、所定の条件は、基音と、複数の倍音の振幅値の時間推移に相関があることを含むことを特徴とする。

【0013】

本発明の音処理装置の制御方法は、原音から、聴覚錯覚の対象となる基音に対する倍音を抽出する倍音抽出ステップと、抽出された倍音が所定の条件を満たす場合、聴覚錯覚の対象となる基音が、倍音成分を持つ楽音の基音であると判定する判定ステップと、判定ステップの判定結果に応じて、倍音抽出ステップにより抽出された倍音の強調処理を行う強調処理ステップと、強調処理ステップにて強調処理された倍音と、原音と、を加算する加算ステップと、を実行することを特徴とする。

【0014】

本発明のプログラムは、コンピューターに、上記の音処理装置の制御方法における各ステップを実行させることを特徴とする。

【図面の簡単な説明】

【0015】

【図1】本発明の一実施形態に係る再生装置のブロック図である。

【図2】音声信号処理部の機能構成図である。

【図3】倍音強調処理を行う場合の、倍音抽出結果の一例を示す図である。

【図4】倍音強調処理を行わない場合の、倍音抽出結果の一例を示す図である。

【図5】倍音強調処理を行わない場合の、倍音抽出結果の一例を示す図である。

【図6】倍音強調処理の流れを示すフローチャートである。

【図7】本発明の変形例に係る再生装置のブロック図である。

【図8】本発明の他の変形例に係る再生装置のブロック図である。

【発明を実施するための形態】

【0016】

以下、本発明の一実施形態に係る音処理装置、音処理装置の制御方法、プログラムについて、添付図面を参照しながら詳細に説明する。図１は、本発明の音処理装置を適用した再生装置１０のブロック図である。再生装置１０は、主な構成として、入力インターフェース（以下、「入力Ｉ／Ｆ」と表記する）１１、主制御部１２、内部メモリ１３、操作部１４、音声信号処理部１５、アンプ１６、スピーカー１７を備えている。なお、請求項における「音処理装置」は、音声信号処理部１５に相当する。

【0017】

入力Ｉ／Ｆ１１は、上位装置２０から提供された楽曲データおよび楽曲情報を入力する。上位装置２０としては、パーソナルコンピューター、携帯端末（スマートフォン、携帯電話、ＰＤＡなどを含む）、Ｗｅｂ上のサーバーやＬＡＮネットワーク上のサーバーなどが考えられる。また、上位装置２０は、楽曲解析処理部２１を有している。楽曲解析処理部２１は、楽曲データを解析し、解析データを生成する。解析データとしては、拍位置情報、ＢＰＭ（Beats Per Minute）情報、調（キー）情報、ジャンル情報などの楽曲特徴量を生成する。これらは、再生装置１０において、楽曲の選択（ジャンルや調を指定した楽曲の選択）や、拍位置の同期処理、並びに音声信号処理（倍音強調処理）などに用いられる。

【0018】

上位装置２０は、楽曲データと共に、楽曲解析処理部２１の解析結果である解析データや、楽曲に付随されている付随情報（楽曲のタイトル、アーティスト名、アルバム名などのメタ情報）を、再生装置１０に提供する。なお、以下の説明では、解析データおよび付随情報を楽曲情報と総称する。また、上位装置２０により提供されるデータを、ＵＳＢメモリ等の外部記憶媒体に格納して、再生装置１０に読み取らせる構成としても良い。

【0019】

主制御部１２は、ＣＰＵ（Central Processing Unit）やマイコンにより構成され、再生装置１０内の各部を制御する。内部メモリ１３は、上位装置２０から提供された楽曲データおよび楽曲情報を記憶する。また、内部メモリ１３は、各種制御プログラムおよび制御データの記憶にも用いられる。操作部１４は、再生装置１０本体に設けられた操作キーやリモートコントローラーにより構成され、ユーザーが各種操作および設定を行うために用いる。

【0020】

音声信号処理部１５は、入力Ｉ／Ｆ１１から入力された楽曲データ、または内部メモリ１３から読み出された楽曲データ（楽曲データをデコードした音声信号＝原音）の加工処理を行う。本実施形態では、当該音声信号処理部１５により、主に低音（基音）を聴覚錯覚させるための倍音強調処理を行う。詳細については、後述する。アンプ１６は、音声信号処理部１５による処理後の音声信号を増幅する。また、スピーカー１７は、アンプ１６によって増幅された音声信号を再生する。

【0021】

なお、アンプ１６は、スピーカー１７内に内蔵しても良い。また、音声信号処理部１５は、ＤＳＰ（Digital Signal Processor）などのソフトウェアによって実現しても良いし、アナログ機器によって実現しても良い。また、スピーカー１７に代えて、ヘッドフォンを搭載しても良い。さらに、スピーカー１７は、再生装置１０に設けるのではなく、別体とした構成でも良い。

【0022】

次に、図２を参照し、第１実施形態に係る音声信号処理部１５の詳細について説明する。音声信号処理部１５は、倍音抽出部３１、判定部３２、強調処理部３３および加算部３４を有している。倍音抽出部３１は、音声信号処理部１５に入力された音声信号（原音）中の、所定の基音に対する整数次倍音（以下、単に「倍音」と記載する）を抽出する。

【0023】

本実施形態では、所定の基音として、聴覚錯覚の対象となる低域帯の基音（ベースなどの、低音を再生する楽器の音階に合せた周波数）を抽出する。ここで、聴覚錯覚とは、基本周波数ｆの信号（基音）の高調波である２ｆ、３ｆ、４ｆ・・・の信号（倍音群）から成る音を聞いた場合、基本周波数ｆの成分が含まれていなくても、その周波数ｆの音があたかも再生されているかのように感じるという聴覚心理現象（ミッシングファンダメンタル現象）を指す。つまり、本実施形態の再生装置１０は、この聴覚心理現象を利用し、低音再生能力が低いスピーカー１７で楽曲を再生した場合に、スピーカー１７の再生限界以下の低域をカットして、カットした音（基音）に対応する倍音を強調することで、基音を聴覚錯覚させるものである。但し、バスドラム音のような倍音成分を持たない楽音に対して、その倍音に相当する周波数成分を強調すると、バスドラム音を構成している周波数成分以外の成分(別の楽器の成分)が強調され、楽音の音色が崩れてしまう。そこで、聴覚錯覚の対象となる基音の倍音の状態に応じて、倍音成分を持たない楽音(バスドラム音など)に対しては倍音強調を行わず、倍音成分を持つ楽音(ベース音など)に対してのみ倍音強調を行うことで、楽音の音色を崩さずに低音の増強を行うことが可能である。以下、倍音成分を持つ楽音に対してのみ倍音強調を行う倍音強調処理について、詳述する。

【0024】

判定部３２は、倍音抽出部３１により抽出された倍音が所定の条件を満たす場合、聴覚錯覚の対象となる基音が、倍音成分を持つ楽音の基音であると判定する。本実施形態では、倍音抽出部３１により、２次倍音と３次倍音を抽出するものとする。もちろん、他の次数の倍音を抽出しても良いが、次数の低いものを抽出することが好ましい。また、抽出する倍音の数も任意である。

【0025】

なお、抽出する倍音の数や次数を、操作部１４を用いてユーザーが指定（選択）可能としても良いし、上位装置２０から入力された楽曲情報に基づいて、抽出する倍音の数や次数を決定しても良い。

【0026】

ここで、倍音成分を持つか否かの判定基準となる「所定の条件」について説明する。本実施形態では、３つの条件に基づいて判定を行う。第１の条件は、「原音を周波数変換した周波数スペクトラム上において（周波数軸上で）、抽出された複数の倍音の振幅値がいずれも極大であること」である。具体例を挙げて説明する。図３〜図５は、横軸を周波数、縦軸を振幅値（信号レベル）とした周波数スペクトラムを示している。また、図３において、符号Ｐ０１は、基音（音階Ｄ１）の周波数（および、基音の周波数に相当する周波数スペクトラムの振幅値）を示し、符号Ｐ０２，Ｐ０３は、それぞれ基音（音階Ｄ１）に対する２次倍音，３次倍音の周波数を示している。同図に示すように、２次倍音および３次倍音が、いずれも極大である場合、第１の条件を満たしていると判定する。なお、「極大である」とは、対象となる倍音の振幅値が、周囲の周波数成分の振幅値より大きいことを意味する。

【0027】

これに対し、図４は、第１の条件を満たさない場合を例示している。同図において、符号Ｐ１１は、基音（音階Ｂ１）の周波数を示し、符号Ｐ１２，Ｐ１３は、それぞれ基音（音階Ｂ１）に対する２次倍音，３次倍音の周波数を示している。同図の例では、２次倍音および３次倍音が、いずれも極大でないため、第１の条件を満たしていないと判定する。なお、特に図示しないが、２次倍音と３次倍音のいずれか一方が極大でない場合も、第１の条件を満たしていないと判定する。

【0028】

続いて、第２の条件は、「抽出されたＮ次倍音（但し、ＮはＮ≧２となる整数）の極大点と、（Ｎ＋１）次倍音の極大点の振幅値の差が所定値以下であること」である。ここで、「所定値」とは、予め定められた値（内部メモリ１３に記憶されている所定の値）を意味する。図３の例では、符号Ｐ０２，Ｐ０３で示される２次倍音の極大点と３次倍音の極大点との振幅値の差Ｌ１が小さいため（所定値以下であるため）、第２の条件を満たしていると判定する。これに対し、図５は、第２の条件を満たさない場合を例示している。同図において、符号Ｐ２１は、基音（音階Ｇ１）の周波数を示し、符号Ｐ２２，Ｐ２３は、それぞれ基音（音階Ｇ１）に対する２次倍音，３次倍音の周波数を示している。同図の例では、２次倍音および３次倍音が、いずれも極大であるものの、それらの振幅値の差Ｌ２が大きいため（所定値を超えるため）、第２の条件を満たしていないと判定する。

【0029】

なお、第２の条件の判定閾値となる「所定値」については、上述のように固定値に限らず、ユーザーが指定（選択）した値であっても良い。若しくは、上位装置２０から入力された楽曲情報に基づいて、「所定値」を可変設定しても良い。

【0030】

続いて、第３の条件は、「抽出されたＮ次倍音（但し、ＮはＮ≧２となる整数）の極大点の振幅値が、（Ｎ＋１）次倍音の極大点の振幅値より大きいこと」である。図３の例では、符号Ｐ０２で示される２次倍音の極大点の振幅値が、符号Ｐ０３で示される３次倍音の極大点の振幅値より大きいため、第３の条件を満たしていると判定する。これに対し、図５の例では、符号Ｐ２２で示される２次倍音の極大点の振幅値が、符号Ｐ２３で示される３次倍音の極大点の振幅値より小さいため、第３の条件を満たしていないと判定する。

【0031】

以上のように、判定部３２では、倍音抽出部３１により抽出された複数の倍音が、第１の条件から第３の条件の全てを満たす場合、聴覚錯覚の対象となる基音が、倍音成分を持つ楽音の基音であると判定する。

【0032】

強調処理部３３は、判定部３２により、聴覚錯覚の対象となる基音が、倍音成分を持つ楽音の基音であると判定された場合、倍音抽出部３１により抽出された倍音の強調処理を行うものである。図２に示すように、強調処理部３３は、２次倍音用のレベル調整部４１、３次倍音用のレベル調整部４２、倍音加算部４３およびスイッチ４４から成る。レベル調整部４１，４２は、それぞれ抽出された２次倍音および３次倍音のレベル調整（増幅）を行う。

【0033】

なお、レベル調整量（レベル調整係数）は、各レベル調整部４１，４２で同じ値としても良いし、異なる値としても良い。また、予め定められた値（内部メモリ１３に記憶された所定の値）であっても良いし、ユーザーが指定（選択）した値であっても良い。若しくは、上位装置２０から入力された楽曲情報に基づいて、レベル調整量（レベル調整係数）を可変設定しても良い。

【0034】

倍音加算部４３は、各レベル調整部４１，４２によるレベル調整後の倍音を加算する。また、スイッチ４４は、判定部３２の判定結果に応じて、ＯＮ／ＯＦＦを切り替える。具体的には、判定部３２により、聴覚錯覚の対象となる基音が、倍音成分を持つと判定された場合、ＯＮ状態とし、倍音成分を持たないと判定された場合、ＯＦＦ状態とする。

【0035】

一方、加算部３４は、入力された原音（音声信号）と、強調処理後の倍音とを加算する。以上の構成により、音声信号処理部１５は、判定部３２により、聴覚錯覚の対象となる基音が、倍音成分を持たないと判定された場合、原音のみを出力し、倍音成分を持つと判定された場合、原音と強調処理後の倍音との加算結果を出力する。

【0036】

次に、図６のフローチャートを参照し、再生装置１０の倍音強調処理の流れについて説明する。再生装置１０（音声信号処理部１５）は、上位装置２０から原音（楽曲データ）を取得すると（Ｓ０１）、聴覚錯覚の対象となる基音に対する倍音（２次倍音および３次倍音）を抽出する（Ｓ０２）。そして、２次倍音と３次倍音の振幅値が極大か否か（第１の条件を満たすか否か）を判別する（Ｓ０３）。Ｓ０３：Ｙｅｓの場合は、続いて２次倍音と３次倍音の振幅値の差が所定値以下か否か（第２の条件を満たすか否か）を判別する（Ｓ０４）。さらに、Ｓ０４：Ｙｅｓの場合は、２次倍音の振幅値が３次倍音の振幅値より大きいか否か（第３の条件を満たすか否か）を判別する（Ｓ０５）。Ｓ０５：Ｙｅｓの場合（第１の条件〜第３の条件の全てを満たす場合）は、Ｓ０１で抽出した倍音を強調して（Ｓ０６）、倍音強調処理を終了する。また、Ｓ０３：Ｎｏ，Ｓ０４：Ｎｏ，Ｓ０５：Ｎｏの場合は、Ｓ０１で抽出した倍音を強調せず（Ｓ０７）、倍音強調処理を終了する。

【0037】

以上説明したとおり、本実施形態の再生装置１０は、聴覚錯覚の対象となる基音が、倍音成分を持つか否かを判別し、倍音成分を持つと判定された場合のみ、倍音強調処理を行う。言い換えれば、倍音成分を持たないバスドラム音などの打楽器音の倍音について強調処理を行わない。このため、バスドラム音を含めて無差別に倍音強調処理を行った場合に生じる、バスドラム音を構成している周波数成分以外の成分(別の楽器の成分)が強調され、楽音の音色が崩れてしまうといった課題を解決できる。

【0038】

また、倍音成分を持つか否かの判定を、３つの条件に基づいて行うことで、より高精度な判定結果を得ることができる。また、これにより、小口径スピーカーなど低音再生能力の低いスピーカーを用いた場合でも、ミッシングファンダメンタル現象を利用した高品質な低音再生を、より確実に実現できる。

【0039】

なお、上記の実施形態において判定部３２は、第１の条件から第３の条件をＡＮＤ条件として判定したが、ＯＲ条件として判定しても良い。また、ＡＮＤ条件として判定するかＯＲ条件として判定するかについて、ユーザーが選択可能としても良い。さらに、第１の条件から第３の条件について全て判定するのではなく、一部の条件についてのみ判定を行っても良い。この場合、ユーザーが対象となる条件を選択可能としても良い。

【0040】

また、上位装置２０から入力された楽曲情報に基づいて、第１の条件から第３の条件をＡＮＤ条件として判定するかＯＲ条件として判定するかを可変設定しても良い。若しくは、入力された楽曲情報に基づいて、対象となる条件を可変設定しても良い。

【0041】

また、判定部３２の判定条件として、基音と倍音の振幅値の時間推移の相関があることを、第４の条件として加えても良い。これは、ベース音などの倍音を持つ楽音は、基音と倍音の振幅値の時間推移に相関があり、バスドラム音などの倍音を持たない楽音は、基音と倍音との間に相関が無いことに着目したものである。ここで、「相関がある」とは、例えばベース音が鳴ると、基音と倍音の振幅値が共に大きくなり、楽器が鳴り終わると、共に振幅値が下がることを意味する。したがって、判定部３２は、判定条件として第４の条件が付加された場合、時間経過に伴う周波数スペクトラムの変化を判定する。つまり、複数フレーム分の周波数スペクトラムを不図示のバッファに保存しておき、基音と倍音の時間推移の相関を調べる。そして、例えば第２倍音および第３倍音の振幅値が、いずれも時間経過に伴って下がっていくものについては、「基音と倍音との間に相関がある」と判定する。また、この場合「倍音を持つ楽音である」と看做し、倍音強調処理を行う。なお、第４の条件も、第１〜第３の条件にＡＮＤ条件として加えても良いし、ＯＲ条件として加えても良い。

【0042】

また、上記の実施形態において判定部３２は、２次倍音および３次倍音の両方がいずれも極大である場合、第１の条件を満たすと判定したが、いずれか一方のみが極大である場合、第１の条件を満たすと判定してもよい。

【0043】

また、３つ以上の倍音を抽出して判定を行う場合は、例えば２次倍音と３次倍音の振幅値の差、３次倍音と４次倍音の振幅値の差、のいずれか一方のみが所定値以下の場合、第２の条件を満たすと判定してもよい。さらに、２次倍音の振幅値＞３次倍音の振幅値、３次倍音の振幅値＞４次倍音の振幅値、のいずれか一方のみを満たす場合、第３の条件を満たすと判定してもよい。

【0044】

また、上記の実施形態では、スピーカー１７の再生限界以下の低域をカットして、カットした音（基音）に対応する倍音を強調するものとしたが、基音は、必ずしもカットした音の中に含まれるものでなくても良い。また、必ずしも再生限界以下の低域をカットしなくても良い。

【0045】

また、上記の実施形態では、原音を周波数変換した周波数スペクトラムから、聴覚錯覚の対象となる基音に対する倍音を抽出したが、周波数軸ではなく、時間軸を元に倍音を抽出しても良い。

【0046】

［変形例１］
次に、図７および図８を参照し、本発明の変形例について説明する。図７は、変形例１に係る再生装置１０のブロック図である。変形例１では、第１実施形態の再生装置１０（図１参照）と比較して、楽曲解析処理部１８を追加した構成となっている。楽曲解析処理部１８は、楽曲データの解析処理を行うものであり、第１実施形態の楽曲解析処理部２１と同様の機能を有する。つまり、変形例に係る再生装置１０は、上位装置２０から楽曲データのみを取得すれば良い構成となっている。

【0047】

このように、本発明の変形例１によれば、楽曲解析処理部１８を備えており、再生装置１０自身によって楽曲解析ができるため、上位装置２０からは楽曲データのみを取得すれば良い。

【0048】

［変形例２］
図８は、変形例２に係る再生装置１０のブロック図である。変形例２では、上位装置２０に楽曲解析処理部２１と音声信号処理部２２を有する構成となっている。音声信号処理部２２は、楽曲データをデコードした音声信号の加工処理を行うものであり、第１実施形態の音声信号処理部１５と同様の機能を有する。つまり、変形例２に係る再生装置１０は、上位装置２０から倍音強調処理を行った処理済の楽曲データ（音声信号）を取得する構成となっている。なお、第１実施形態と同様、上位装置２０には楽曲解析処理部２１も備えられているため、再生装置１０は、当該楽曲解析処理部２１による解析データおよび付随情報を含む楽曲情報も取得する。一方、再生装置１０の機能は、楽曲データおよび楽曲情報の送受信機能を行う入力Ｉ／Ｆ１１、主制御部１２、操作部１４を備えており、アンプ１６およびスピーカー１７を別体とした構成となっている。もちろん、再生装置１０に、アンプ１６およびスピーカー１７を内蔵した構成としても良い。

【0049】

このように本発明の変形例２によれば、Ｗｅｂ上のサーバーや、ＬＡＮネットワーク上のサーバーに上位装置２０を備えることができる。つまり、本発明の音処理装置を、クラウドコンピューティングとして利用することも可能である。

【0050】

なお、上記の実施形態および変形例に示した再生装置１０の各構成要素および各処理工程をプログラムとして提供することが可能である。また、そのプログラムを各種記憶媒体（ＣＤ−ＲＯＭ、フラッシュメモリ等）に格納して提供することも可能である。すなわち、再生装置１０の各構成要素または各処理工程を実現するためのプログラム、およびそれを記録した記憶媒体も、本発明の権利範囲に含まれる。

【0051】

また、上記の実施形態および変形例では、本発明の音処理装置を、再生装置１０または上位装置２０に適用した場合を例示したが、再生専用装置や楽曲提供専用装置に限らず、パーソナルコンピューター、タブレット端末、携帯電話またはカーナビゲーション装置など、他の電子機器の一機能として再生装置１０または上位装置２０を実現しても良い。その他、本発明の要旨を逸脱しない範囲で、適宜変更が可能である。

【符号の説明】

【0052】

１０…再生装置 １１…入力インターフェース １２…主制御部 １３…内部メモリ １４…操作部 １５…音声信号処理部 １６…アンプ １７…スピーカー ２０…上位装置 ２１…楽曲解析処理部 ３１…倍音抽出部 ３２…判定部 ３３…強調処理部 ３４…加算部 ４１…２次倍音用レベル調整部 ４２…３次倍音用レベル調整部 ４３…倍音加算部 ４４…スイッチ

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】