特開 2015-95719 音像表示装置、音像表示システム、および音像表示方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】特開2015-95719(P2015-95719A)

(43)【公開日】2015年5月18日

(54)【発明の名称】音像表示装置、音像表示システム、および音像表示方法

(51)【国際特許分類】

   H04S 7/00 20060101AFI20150421BHJP

【ＦＩ】

   H04S7/00 B

【審査請求】未請求

【請求項の数】8

【出願形態】ＯＬ

【全頁数】20

(21)【出願番号】特願2013-233284(P2013-233284)

(22)【出願日】2013年11月11日

(71)【出願人】

【識別番号】000004352

【氏名又は名称】日本放送協会

(71)【出願人】

【識別番号】000101330

【氏名又は名称】アストロデザイン株式会社

(74)【代理人】

【識別番号】100147485

【弁理士】

【氏名又は名称】杉村 憲司

(74)【代理人】

【識別番号】100161148

【弁理士】

【氏名又は名称】福尾 誠

(72)【発明者】

【氏名】岡野 充男

(72)【発明者】

【氏名】海老原 豊

(72)【発明者】

【氏名】眞鍋 吉仁

(57)【要約】

【課題】サラウンド再生のように複数チャンネルで再生される音声の音像を視覚的に表現することができる音像表示装置、音像表示システム、および音像表示方法を提供する。
【解決手段】音像表示装置１は、複数のチャンネルのうち２つのチャンネルの音声データに基づいて、その２つのチャンネル間における音声の逆相成分の比率を算出し、この逆相成分の比率に応じて曲率を変化させた曲線であって逆相成分の比率に応じた色の曲線を描画する描画データを出力する。
【選択図】図１

【特許請求の範囲】

【請求項1】

複数のチャンネルのうち２つのチャンネルの音声データに基づいて、当該２つのチャンネル間における音声の逆相成分の比率を算出し、当該逆相成分の比率に応じて曲率を変化させた曲線であって当該逆相成分の比率に応じた色の曲線を描画する描画データを出力する、音像表示装置。

【請求項2】

前記２つのチャンネルの音声データに基づいて、当該２つのチャンネルそれぞれにおける音声のレベルを検出し、当該音声のレベルおよび前記逆相成分の比率に応じて曲率を変化させた前記曲線を描画する描画データを出力する、請求項１に記載の音像表示装置。

【請求項3】

前記２つのチャンネルの音声データに基づいて、当該２つのチャンネルそれぞれにおける音声レベルを検出し、当該２つのチャンネルそれぞれにおける音声レベルを表す線分の長さに対応する２つの座標を両端の点とし、前記逆相成分の比率に対応する座標を制御点とする２次ベジェ曲線を描画する描画データを出力する、請求項２に記載の音像表示装置。

【請求項4】

前記２つのチャンネル間における音声の逆相成分の比率が所定の閾値以上または所定の閾値以下である時は、所定の色の前記曲線を描画する描画データを出力する、請求項１〜３のいずれかに記載の音像表示装置。

【請求項5】

前記２つのチャンネル間における音声の逆相成分の比率が、完全に同相と完全に逆相との間における第２の範囲内にある時は、前記逆相成分の比率に応じて所定の色の間で徐々に変化する色の前記曲線を描画する描画データを出力する、請求項１〜４のいずれかに記載の音像表示装置。

【請求項6】

前記複数のチャンネルのうち低域効果音用チャンネルの音声データに基づいて、当該低域効果音用チャンネルにおける音声のレベルを検出し、当該音声のレベルに応じて半径および色の少なくとも一方を変化させた円形を描画する描画データをさらに出力する、請求項１〜５のいずれかに記載の音像表示装置。

【請求項7】

複数のチャンネルのうち２つのチャンネルの音声データに基づいて、当該２つのチャンネル間における音声の逆相成分の比率を算出し、当該逆相成分の比率に応じて曲率を変化させた曲線であって当該逆相成分の比率に応じた色の曲線を描画する描画データを出力する制御部と、
前記制御部により出力された描画データに基づく曲線を表示する表示部と、
を備える、音像表示システム。

【請求項8】

複数のチャンネルのうち２つのチャンネルの音声データに基づいて、当該２つのチャンネル間における音声の逆相成分の比率を算出するステップと、
前記逆相成分の比率に応じて曲率を変化させた曲線であって当該逆相成分の比率に応じて変化させた色の曲線を描画する描画データを出力するステップと、
を含む、音像表示装置の音像表示方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、音像表示装置、音像表示システム、および音像表示方法に関するものである。より詳細には、本発明は、複数チャンネルの音声をサラウンド再生する際の音像を視覚的に表示する描画データを出力する音像表示装置、このような音像を表示する音像表示システム、および、そのような音像表示装置の音像表示方法に関するものである。

【背景技術】

【0002】

従来、ステレオ音声の再生においては、オーディオレベルメータ等を使用して、Ｌ／Ｒ信号それぞれに基づく各チャンネルの音声のレベル管理を行っている。また、位相メータを使用してチャンネル間の位相監視を行うことにより、音の広がりを監視したり、音が逆相になっていないか等を判定したりしている。

【0003】

一方、音声のサラウンド再生においては、上述したような各チャンネルの音声のレベル管理、およびチャンネル間の位相監視を行うことに加え、さらに、平面空間への音の広がり（音像）についても管理する必要がある。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２０１２−１８６５２５号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

しかしながら、音声をサラウンド再生する際の多種多様な情報を収集するために、様々なツールを使用して監視しようとすると、複雑な構成の機器類が必要になる。また、このような情報は、音声の再生に伴って、リアルタイムで動的に監視できるようにするのが望ましい。そこで、このような多種多様な情報を集約するのみならず、視覚に訴える表現により直感的に把握することを可能にする計測ツールがあれば、極めて利便性が高い。

【0006】

したがって、本発明の目的は、サラウンド再生のように複数チャンネルで再生される音声の音像を視覚的に表現することができる音像表示装置、音像表示システム、および音像表示方法を提供することにある。

【課題を解決するための手段】

【0007】

上記目的を達成する第１の観点に係る音像表示装置の発明は、
複数のチャンネルのうち２つのチャンネルの音声データに基づいて、当該２つのチャンネル間における音声の逆相成分の比率を算出し、当該逆相成分の比率に応じて曲率を変化させた曲線であって当該逆相成分の比率に応じた色の曲線を描画する描画データを出力することを特徴とする。

【0008】

また、前記２つのチャンネルの音声データに基づいて、当該２つのチャンネルそれぞれにおける音声のレベルを検出し、当該音声のレベルおよび前記逆相成分の比率に応じて曲率を変化させた前記曲線を描画する描画データを出力してもよい。

【0009】

また、前記２つのチャンネルの音声データに基づいて、当該２つのチャンネルそれぞれにおける音声レベルを検出し、当該２つのチャンネルそれぞれにおける音声レベルを表す線分の長さに対応する２つの座標を両端の点とし、前記逆相成分の比率に対応する座標を制御点とする２次ベジェ曲線を描画する描画データを出力してもよい。

【0010】

また、前記２つのチャンネル間における音声の逆相成分の比率が所定の閾値以上または所定の閾値以下である時は、所定の色の前記曲線を描画する描画データを出力してもよい。

【0011】

また、前記２つのチャンネル間における音声の逆相成分の比率が、完全に同相と完全に逆相との間における第２の範囲内にある時は、前記逆相成分の比率に応じて所定の色の間で徐々に変化する色の前記曲線を描画する描画データを出力してもよい。

【0012】

また、前記複数のチャンネルのうち低域効果音用チャンネルの音声データに基づいて、当該低域効果音用チャンネルにおける音声のレベルを検出し、当該音声のレベルに応じて半径および色の少なくとも一方を変化させた円形を描画する描画データをさらに出力してもよい。

【0013】

上記目的を達成する第２の観点に係る音像表示システムの発明は、
複数のチャンネルのうち２つのチャンネルの音声データに基づいて、当該２つのチャンネル間における音声の逆相成分の比率を算出し、当該逆相成分の比率に応じて曲率を変化させた曲線であって当該逆相成分の比率に応じた色の曲線を描画する描画データを出力する制御部と、
前記制御部により出力された描画データに基づく曲線を表示する表示部と、
を備えることを特徴とする。

【0014】

上記目的を達成する第３の観点に係る音像表示装置の音像表示方法の発明は、
複数のチャンネルのうち２つのチャンネルの音声データに基づいて、当該２つのチャンネル間における音声の逆相成分の比率を算出するステップと、
前記逆相成分の比率に応じて曲率を変化させた曲線であって当該逆相成分の比率に応じて変化させた色の曲線を描画する描画データを出力するステップと、
を含むことを特徴とする。

【発明の効果】

【0015】

本発明によれば、サラウンド再生のように複数チャンネルで再生される音声の音像を視覚的に表現することができる音像表示装置、音像表示システム、および音像表示方法を提供することができる。

【図面の簡単な説明】

【0016】

【図1】本発明の実施形態に係る音像表示装置およびシステムの概略構成を説明する機能ブロック図である。

【図2】各チャンネルにおける音声のレベル検出から座標変換までを説明する図である。

【図3】各チャンネルにおける音声のレベル検出から座標変換までの結果を例示する図である。

【図4】各チャンネルにおける音声のレベル検出から座標変換までの結果を合成した図である。

【図5】２つのチャンネルにおける音声の相関検出から描画データ出力までを説明する図である。

【図6】２つのチャンネルにおける音声の相関検出から描画データ出力までの結果を例示する図である。

【図7】２つのチャンネルにおける音声の相関検出から描画データ出力までの結果を合成した図である。

【図8】色データ変換処理を説明する図である。

【図9】２つのチャンネルにおける音声の相関検出および色データ生成に基づく描画の結果を例示する図である。

【図10】２つのチャンネルにおける音声の相関検出および色データ生成に基づく描画の結果を合成した図である。

【発明を実施するための形態】

【0017】

以下、本発明の実施形態について、図面を参照して説明する。

【0018】

図１は、本発明の実施形態に係る音像表示装置およびシステムの概略構成を説明する機能ブロック図である。

【0019】

図１に示すように、本実施形態に係る音像表示装置１は、制御部１０、および記憶部２０を備えている。制御部１０は、複数のチャンネルの音声データが入力されると、当該音声データに対応する描画データを出力する。また、制御部１０から出力された描画データは、表示部３０に表示することができる。

【0020】

以下、制御部１０および記憶部２０を含んで本発明に係る音像表示装置１を構成し、さらに表示部３０を含んで本発明に係る音像表示システムを構成するものとして説明する。しかしながら、本発明はこのような実施形態に限定されるものではなく、例えば音像表示装置１が自ら表示部を有するような構成としてもよい。

【0021】

制御部１０は、例えばプロセッサまたはマイコンなどの任意の処理装置を含んで構成することができる。本実施形態において、制御部１０は、各種のデータの入力に基づいて、当該データを解析したり、各種の演算処理を施したりする。制御部１０は、このような演算処理の結果を、２次元空間上に描画する描画データとして出力することができる。また、制御部１０は、必要に応じて各種の解析結果を記憶部２０に記憶させたり、必要に応じて記憶部２０に記憶された各種情報を読み出したりすることができる。

【0022】

記憶部２０は、任意のメモリ装置を含んで構成することができる。記憶部２０は、制御部１０が上述したようなデータ解析および各種の演算処理などを行う際のアルゴリズム、およびルックアップテーブル（ＬＵＴ）のような各種の参照テーブルなども記憶する。

【0023】

表示部３０は、例えばＬＣＤまたは有機ＥＬディスプレイなどの任意の表示装置により構成することができる。表示部３０は、描画データが入力されると、その表示画面に描画データに基づく表示を行う。この描画データは、表示部３０の仕様に応じて、任意の規格のアナログまたはデジタルの出力とすることができる。本実施形態においては、音像を視覚的に把握容易にするような表示を行うため、表示部３０はカラー表示可能であることが望ましい。しかしながら、例えばグレースケールなど単色を諧調表示することにより、カラー表示の代用とすることもできる。以下の説明においては、表示部３０は、少なくともいくつかの色を用いたカラー表示を行うことができるものとする。

【0024】

本実施形態に係る音像表示装置１は、複数のチャンネルの音声データの入力に基づいて、当該音声データに対応する描画データを出力する。ここで、音像表示装置１が扱う音声データの複数のチャンネル数は特に限定されるものではなく、任意の複数のチャンネルとすることができる。以下の説明においては、例として、一般的に用いられる５．１ｃｈサラウンドの場合について述べる。

【0025】

すなわち、以下の説明で用いる５．１ｃｈの音声データを再生する際には、次のような基本システムを用いて再生することを想定する。
まず、聴く人の位置（リスニングポジション（Ｏ））を中心として、リスニングポジションの前方正面の中央にセンタースピーカ（Ｃ）を配置する。
次に、前方正面から左３０°の位置に左フロントスピーカ（Ｌ）を、また前方正面から右３０°の位置に右フロントスピーカ（Ｒ）を配置する。
さらに、センタースピーカより左１１０°方向に左サラウンドスピーカ（Ｌｓ）を、またセンタースピーカより右１１０°方向に右サラウンドスピーカ（Ｒｓ）を配置する。
これに低音域専用のサブウーファ（ＬＦＥ）を加える。

【0026】

次に、本実施形態に係る音像表示装置１において、音声データの入力に基づいて、描画データを出力する際の処理について説明する。

【0027】

まず、５．１ｃｈの各チャンネルのレベルを検出することにより、各チャンネルのレベルをオーディオレベルバーとして描画する描画データを出力する際の処理について説明する。

【0028】

図２は、各チャンネルにおける音声のレベル検出処理から座標変換処理までを説明する図である。

【0029】

図２に示す処理が開始すると、制御部１０は、音像表示装置１に入力された音声データに基づいて、当該音声データが再生されるチャンネルの音声のレベルを検出する（ステップＳ１１）。ステップＳ１１においては、制御部１０は、入力される音声データのビット深度を２４ｂｉｔの数値として、各チャンネルごとにレベルを検出する。このため、５．１ｃｈの音声データにおいては、上述したＣ，Ｌ，Ｒ，Ｌｓ，Ｒｓ，ＬＦＥの各スピーカによって再生されるそれぞれのチャンネルについて、図２に示す処理を行う。

【0030】

ステップＳ１１では、制御部１０は、例えば、音声サンプリングレートを４８ｋＨｚとし、その音声サンプル数（パラメータＮ）を１６３８４として、以下の式（１）に示すような二乗平均平方根を用いた数値処理を行うものとする。式（１）においては、あるチャンネルの２４ｂｉｔの音声データをｘとして示してある。したがって、ｘ_ｉは、パラメータＮを総数とする各サンプルにおける２４ｂｉｔの値を表す。制御部１０は、このようにしてレベルを検出した結果を、２３ｂｉｔのデータとして出力するものとする。

【0031】

【数1】

【0032】

ステップＳ１１において各チャンネルにおける音声のレベルが検出されたら、制御部１０は、当該レベルをｄＢ値に変換する（ステップＳ１２）。ステップＳ１２においては、制御部１０は、例えば以下の式（２）に基づいて、２３ｂｉｔのデータを０．０〜−８０．０ｄＢの値に変換することができる。なお、式（２）においては、ステップＳ１１において得られた２３ｂｉｔの値をｘとして示してある。
２０＊ｌｏｇ_１０（ｘ／８３８８６０７） （２）

【0033】

ステップＳ１２において音声レベルがｄＢ値に変換されたら、制御部１０は、この値をＸＹ平面において各チャンネルに対応する座標に変換する（ステップＳ１３）。本実施形態においては、各チャンネルにおける音声を再生するスピーカが配置される位置と、当該チャンネルにおける音声のレベルとの対応関係を、一見して把握し易いように表示部３０に表示する。このため、表示部３０に表示されるＸＹ平面と、リスニングポジションをとり囲むスピーカの配置とを対応させる。すなわち、上述したＣ，Ｌ，Ｒ，Ｌｓ，Ｒｓの各スピーカの配置される位置を、表示部３０に表示されるＸＹ平面上の位置に対応させる。この際、例えば、表示部３０に表示されるＸＹ平面上の原点Ｏにリスニングポジションを対応させることができる。

【0034】

このようして、本実施形態においては、各チャンネルにおける音声のレベルが、表示部３０においてスピーカが配置される方向を示すそれぞれの軸の長さが表すようにする。このため、ステップＳ１３において、制御部１０は、ステップＳ１２において算出されたｄＢ値が、表示部３０において対応するスピーカの配置される方向を示す線分の原点からの長さを表すように、線分の終点の座標を算出する。

【0035】

図３は、各チャンネルにおける音声のレベル検出処理から座標変換処理までの結果を例示する図である。

【0036】

図３（Ａ）に示すように、ステップＳ１３において、制御部１０は、センタースピーカが再生する音声のレベル（ｄＢ値）が線分ＯＣの長さに対応するように、座標Ｃを求める。
また、図３（Ｂ）に示すように、制御部１０は、左フロントスピーカが再生する音声のレベルが線分ＯＬの長さに対応するように、座標Ｌを求める。
また、図３（Ｃ）に示すように、制御部１０は、右フロントスピーカが再生する音声のレベルが線分ＯＲの長さに対応するように、座標Ｒを求める。
また、図３（Ｄ）に示すように、制御部１０は、左サラウンドスピーカが再生する音声のレベルが線分ＯＬｓの長さに対応するように、座標Ｌｓを求める。
また、図３（Ｅ）に示すように、制御部１０は、右サラウンドスピーカが再生する音声のレベルが線分ＯＲｓの長さに対応するように、座標Ｒｓを求める。

【0037】

また、低音域専用のサブウーファは無指向性であるため、本実施形態において、サブウーファはが再生する音声のレベルは、表示部３０においてリスニングポジションを中心とする円形の大きさによって表すようにする。このため、図３（Ｆ）に示すように、ステップＳ１３において、制御部１０は、サブウーファが再生する音声のレベルが円形の半径に対応するように、座標ＬＦＥを求める。

【0038】

このように、ステップＳ１３において各チャンネルに対応する座標データ（ＬＦＥの場合は円の半径のデータ）が求まると、制御部１０は、各チャンネルのレベルを表す描画データを生成して出力することができる。このようにして出力された描画データに基づいて、表示部３０は、各チャンネルのレベルを、各チャンネルの音声を再生するスピーカの方向に対応したオーディオレベルメータとして表示することができる。

【0039】

図４は、各チャンネルにおける音声のレベル検出処理から座標変換処理までの結果を合成した図である。図４においては、上述したＣ，Ｌ，Ｒ，Ｌｓ，Ｒｓ，ＬＦＥの各スピーカによって再生されるそれぞれのチャンネルについて図２に示す処理を行った結果を全て合成して示してある。なお、ＬＦＥのレベルを表す円形の図形は、その円周のみを表示するようにしてもよいし、円周の内部も含めて円盤全体として表示してもよい。しかしながら、円盤全体として表示する場合、他のチャンネルのレベル表示などが見にくくなるのを防ぐため、例えば半透明の色で他の表示が透過するように表示するのが好適である。このように各チャンネルにおける音声のレベルを表示することにより、各チャンネルにおける音声を再生するスピーカが配置される位置と、当該チャンネルにおける音声のレベルとの対応関係を、一見して容易に把握することができる。このように各チャンネルにおける音声のレベルを表示することで、例えば各チャンネルのピークレベルと当該チャンネルの音声が出力されるスピーカの位置との対応関係を、視覚的に容易に把握することができる。

【0040】

図４に示すような表示を行う際に、あるチャンネルにおける音声のレベルが所定の閾値以上となるような場合、警告を示唆するような色（例えば赤色）に変化させて表示する描画データを出力してもよい。この場合、例えば図４に示す線分および／またはＬＦＥのレベルを示す円形の図形の一部または全部の色を変化させて表示することができる。

【0041】

このように、本実施形態では、制御部１０は、複数のチャンネルのうち少なくとも１つの音声データに基づいて、当該少なくとも１つのチャンネルにおける音声のレベルを検出し、当該音声のレベルに応じて長さを変化させた線分を描画する描画データを出力する。

【0042】

また、上述のように、制御部１０は、複数のチャンネルのうち低域効果音用チャンネルの音声データに基づいて、当該低域効果音用チャンネルにおける音声のレベルを検出し、当該音声のレベルに応じて半径を変化させた円形を描画する描画データを出力する。この場合、制御部１０は、低域効果音用チャンネルにおける音声のレベルが所定の閾値以上である時は、当該音声のレベルに応じて変化させた色の前記円形を描画する描画データを出力してもよい。

【0043】

次に、５．１ｃｈのうち２つのチャンネルのレベルを検出することにより、２つのチャンネルにおける音声の相関関係に基づく曲線を描画する描画データを出力する際の処理について説明する。

【0044】

図５は、２つのチャンネルにおける音声の相関検出処理から描画データ出力処理までを説明する図である。

【0045】

以下の説明においては、音声の相関検出処理から描画データ出力処理までを行う２つのチャンネルの音声データを、便宜上、「第１音声データ」および「第２音声データ」と記す。そして、例えば「Ｌ−Ｒ」のような表記は、図５に示す処理において、第１音声データをチャンネルＬの音声データとして、また第２音声データをチャンネルＲの音声データとして処理を行うことを意味する。このようにして、Ｌ−Ｒについて図５に示す処理を行うと、これらチャンネルＬおよびチャンネルＲの２つのチャンネル間における音声の逆相成分の比率に応じた曲線を描画する描画データを出力することができる。

【0046】

図５に示す処理が開始すると、制御部１０は、音像表示装置１に入力された音声データに基づいて、複数のチャンネルのうち２つのチャンネルの音声データの相関係数を算出する（ステップＳ２１）。ステップＳ２１においては、ステップＳ１１と同様に、入力される音声データのビット深度を２４ｂｉｔの数値とする。また、ステップＳ２１においては、複数のチャンネルのうち２つのチャンネルの音声データの相関係数を算出する。このため、５．１ｃｈの音声データにおいては、Ｌ−Ｒ，Ｃ−Ｌ，Ｃ−Ｒ，Ｌ−Ｌｓ，Ｒ−Ｒｓ，Ｌｓ−Ｒｓのように、２つのチャンネルについて、それぞれ図５に示す処理を行う。ここで、複数のチャンネルのうち２つのチャンネルとは、スピーカが配置される位置において隣接する２つのチャンネルとするのが好適であるが、例えばＣを無視してＬ−Ｒの相関を求める場合のように、隣接する２つのチャンネルにはならない場合もある。

【0047】

ステップＳ２１では、制御部１０は、例えば、パラメータｎを２０４８として、以下の式（３）に示すような相関計算式を用いた数式処理を行うものとする。式（３）においては、第１音声データ（２４ｂｉｔ）をｘとして示し、第２音声データ（２４ｂｉｔ）をｙとして示してある。したがって、ｘ_ｉ，ｙ_ｉは、それぞれ、パラメータｎを総数とする各サンプルにおける２４ｂｉｔの値を表す。制御部１０は、このようにして算出した結果を、−１〜＋１の範囲の相関係数として出力するものとする。

【0048】

【数2】

【0049】

本実施形態において、制御部１０が出力する描画データが描画する曲線は２次ベジェ曲線（Bezier Curve）とする。そこで、ステップＳ２１において２つのチャンネルにおける相関係数が算出されたら、制御部１０は、以下の式（４）を用いて、当該相関係数から、出力する描画データに基づいて描画される曲線の曲げ係数を算出する（ステップＳ２２）。
１２８×（相関係数＋１）×（補正値） （４）

【0050】

ここで、上記（補正値）とは、例えば、Ｌ−Ｒ，Ｌ−Ｃ，Ｒ−Ｃの変換においては０．８３とし、Ｌ−Ｌｓ，Ｒ−Ｒｓの変換においては０．９０とし、Ｌｓ−Ｒｓの変換においては０．６８とするのが好適である。この補正値を乗じることにより、描画されるベジェ曲線は、ステップＳ２１で算出した相関係数がゼロの時、近似円になる。また、ハードウェアに実装する際に整数化する必要があるため、式（４）に示すように値を１２８倍して８ｂｉｔ化するのが好適である。このようにして、制御部１０は、ステップＳ２２で算出した結果を８ｂｉｔのデータとして出力する。

【0051】

ステップＳ２２において曲げ係数が算出されたら、制御部１０は、当該曲げ係数ならびに第１および第２音声データの座標に基づいて、ベジェ曲線を生成する（ステップＳ２３）。

【0052】

ステップＳ２３においては、制御部１０は、３点の座標に基づいて、２次ベジェ曲線を生成する。ここで、２点の座標として、第１音声データおよび第２音声データから算出した座標データを用いる。この２点の座標データは、図２に示した処理に従って、第１音声データおよび第２音声データから求めたそれぞれの座標データを用いることができる。

【0053】

本実施形態では、これら２点の座標データの他に、上述した曲げ曲線に基づく１点の制御点を用いて、２次ベジェ曲線を生成する。この制御点をＱ（ｘ３，ｙ３）とすると、例えば以下のようにして２次ベジェ曲線を生成することができる。

【0054】

ＸＹ座標平面上に、原点Ｏ（０，０）、第１音声データから求めた座標Ａ（ｘ１，ｙ１）、および第２音声データから求めた座標Ｂ（ｘ２，ｙ２）を規定する。また、Ａ（ｘ１，ｙ１）とＢ（ｘ２，ｙ２）との中点をＭ（Ｘｍ，Ｙｍ）とし、前述の相関係数（−１〜＋１）をｋとする。ここで、ｋ＝０の時に、Ｑを制御点として点Ａ，Ｂを通るベジェ曲線は近似円となり、−１＜ｋ＜０のときベジェ曲線の曲率が大きくなり、０＜ｋ＜＋１のときベジェ曲線の曲率が小さくなり、ｋ＝＋１のときベジェ曲線はＡＢを結ぶ線分となる。

【0055】

制御点Ｑの座標（ｘ３，ｙ３）は、Ｍ（Ｘｍ，Ｙｍ）を基準にして、以下の式（５）のように求めることができる。ただし、（Ｘ＊，Ｙ＊）は、線分ＡＢに垂直な方向ベクトルを意味する。
（ｘ３，ｙ３）＝（Ｘｍ，Ｙｍ）＋ｋ（Ｘ＊，Ｙ＊） （５）

【0056】

式（５）においてｋ＝０とき、（Ｘ＊，Ｙ＊）はＡ，Ｂによって一意に決定する。なお、ｋ＝０のときに描画される近似円の精度は角ＡＯＢに依存して変化する。その整合性をとるため、上述した式（４）においては相関係数に補正値を乗じる。

【0057】

ステップＳ２３においては、以上のようにして、Ａ（ｘ１，ｙ１）、Ｂ（ｘ２，ｙ２）、およびＱ（ｘ３，ｙ３）の３点の座標が算出されたら、制御部１０は、これら３点に基づく２次ベジェ曲線を生成する。この場合、ベジェ曲線の定義に基づいて点と点を結ぶ曲線を生成する。具体的には、値ｔ＝０〜１（ｔは１／１０２４ステップ）として、以下の式（６）および式（７）を用いて、ベジェ曲線を生成する。
ｘ＝ｘ（ｔ）＝ｔ＾２＊ｘ２＋２＊ｔ＊（１−ｔ）＊ｘ３＋（１−ｔ）＾２＊ｘ１ （６）
ｙ＝ｙ（ｔ）＝ｔ＾２＊ｙ２＋２＊ｔ＊（１−ｔ）＊ｙ３＋（１−ｔ）＾２＊ｘ１ （７）

【0058】

ステップ２３においてベジェ曲線が生成されたら、制御部１０は、生成された曲線をＸＹ平面上に表示する描画データを生成して（ステップＳ２４）出力する。ここで、生成された曲線をカラー表示するために、色データとともに描画データを生成して出力することになるが、曲線の着色については後述する。

【0059】

図６は、２つのチャンネルにおける音声の相関検出から描画データ出力までの結果を例示する図である。

【0060】

図６（Ａ）に示すように、ステップＳ２３において、制御部１０は、Ｌ−Ｒの２つのチャンネルについてベジェ曲線ＬＲを生成する。
また、図６（Ｂ）に示すように、制御部１０は、Ｃ−Ｌの２つのチャンネルについてベジェ曲線ＣＬを生成する。
また、図６（Ｃ）に示すように、制御部１０は、Ｃ−Ｒの２つのチャンネルについてベジェ曲線ＣＲを生成する。
また、図６（Ｄ）に示すように、制御部１０は、Ｌ−Ｌｓの２つのチャンネルについてベジェ曲線ＬＬｓを生成する。
また、図６（Ｅ）に示すように、制御部１０は、Ｒ−Ｒｓの２つのチャンネルについてベジェ曲線ＲＲｓを生成する。
また、図６（Ｆ）に示すように、制御部１０は、Ｌｓ−Ｒｓの２つのチャンネルについてベジェ曲線ＬｓＲｓを生成する。

【0061】

図７は、２つのチャンネルにおける音声の相関検出から描画データ出力までの結果を合成した図である。図７においては、図６に示したようにＬ−Ｒ，Ｃ−Ｌ，Ｃ−Ｒ，Ｌ−Ｌｓ，Ｒ−Ｒｓ，Ｌｓ−Ｒｓのそれぞれ２つのチャンネルについて描画したベジェ曲線を全て合成して示してある。

【0062】

図７において、曲線αは、Ｃ−Ｌ，Ｃ−Ｒ，Ｌ−Ｌｓ，Ｒ−Ｒｓ，Ｌｓ−Ｒｓのそれぞれ２つのチャンネルについて描画したベジェ曲線を全て合成して示してある。また、曲線βは、曲線αにおけるＣ−ＬおよびＣ−Ｒの代わりに、Ｌ−Ｒを用いて描画したベジェ曲線を全て合成したものである。例えば音楽を再生する際など、Ｃを含めて音像を表示する場合、Ｃ−ＬおよびＣ−Ｒを主として監視を行うため、曲線αのようなベジェ曲線を表示するのが好適である。一方、例えばドラマにて再生される音声などのように、Ｃには主としてセリフのみが含まれているような場合、Ｃを考慮せずに、Ｌ−Ｒを主として監視できるようにするため、曲線βのようなベジェ曲線を表示するのが好適である。

【0063】

図７に示すように、曲線αと曲線βとを同時に表示すると紛らわしくなることが懸念されるため、制御部１０は、曲線αまたは曲線βのいずれかを選択的に表示可能とする描画データを出力するのが好適である。また、制御部１０は、曲線αおよび曲線βを同時に表示する場合には、互いに曲線の太さ、色、線種、表示態様などを変化させることにより、互いに識別可能にして描画データを出力するのが好適である。

【0064】

このように、本実施形態において、制御部１０は、複数のチャンネルのうち２つのチャンネルの音声データに基づいて、当該２つのチャンネル間における音声の逆相成分の比率を算出する。そして、制御部１０は、当該逆相成分の比率に応じて曲率を変化させた曲線を描画する描画データを出力する。また、上述したように、制御部１０は、前記２つのチャンネルの音声データに基づいて、当該２つのチャンネルそれぞれにおける音声のレベルを検出する。そして、制御部１０は、当該音声のレベルおよび前記逆相成分の比率に応じて曲率を変化させた前記曲線を描画する描画データを出力するのが好適である。この場合、制御部１０は、当該２つのチャンネルそれぞれにおける音声レベルを表す線分の長さに対応する２つの座標を両端の点とし、前記逆相成分の比率に対応する座標を制御点とする２次ベジェ曲線を描画する描画データを出力する。

【0065】

次に、本実施形態に係る音像表示装置１が生成する曲線の着色について説明する。

【0066】

図８は、本実施形態に係る音像表示装置１が行う色データ変換処理を説明する図である。本実施形態においては、図６に示したような各部のベジェ曲線には、それぞれの相関係数に応じた色データを付した状態で、制御部１０から出力するのが好適である。以下、このように、ベジェ曲線に色データを付加する処理を説明する。

【0067】

図５において説明したように、制御部１０は、ステップ２１において２つのチャンネルにおける音声の相関係数を算出した。本実施形態において、制御部１０は、このように算出された相関係数に基づいて色データを生成して（ステップＳ２５）、ステップＳ２３において生成された曲線を、ステップＳ２４において着色した描画データを生成して出力する。

【0068】

図５のステップ２１において説明したように、制御部１０は、−１〜＋１の範囲の相関係数を算出する。そこで、制御部１０は、当該相関係数に基づいて、図８（Ａ）に示すような色のデータを生成する（ステップＳ２５）。このようにステップＳ２５において相関係数に基づいて色データが生成されると、ステップＳ２３で生成された曲線は、当該色データに基づく着色が施されることになる。

【0069】

図８（Ａ）に示す範囲＜Ａ＞のように、相関係数が−１付近となるとき、チャンネル間は完全な逆相に近くなる。この場合、制御部１０は、警告を示唆するような例えば赤色の色データを生成する。実際の音声の再生においては、チャンネル間が完全な逆相になることは想定し難いため、相関係数が−１に極近くなる範囲で曲線を赤色にするのが好適である。

【0070】

また、図８（Ａ）に示す範囲＜Ｄ＞のように、相関係数が＋１付近となるとき、チャンネル間は完全な同相に近くなる。この場合、音の広がりがない状態を意味することになるが、音声表現によっては意図的にこのような音声の再生状態が望まれることもある。このため、相関係数が＋１付近である範囲＜Ｄ＞においては、制御部１０は、注意を促すために例えば青色の色データを生成する。また、この場合、範囲＜Ｄ＞は、上述した範囲＜Ａ＞よりは若干広い範囲とするのが好適である。

【0071】

また、図８（Ａ）に示す範囲＜Ｃ＞のように、相関係数が０付近から＋１付近までとなるとき、チャンネル間の逆相成分の比率は適度になる。したがって、この場合、制御部１０は、他の表示と特に区別のない標準的な色の色データを生成する。ここで、標準的な色とは、例えば黒色の画面においては白色とするなど、他の表示に比べて特に強調されることのないような色とするのが好適である。

【0072】

また、図８（Ａ）に示す範囲＜Ｂ＞のように、相関係数が−１付近から０付近までとなるとき、チャンネル間の逆相成分の比率は比較的高めになる。したがって、この場合、制御部１０は、注意喚起のために、他の表示とは区別可能な色の色データを生成する。

【0073】

範囲＜Ｂ＞においては、チャンネル間の逆相成分の比率および当該比率の変化を容易に視覚的に認識できるようにするため、制御部１０は、０付近から−１付近までの相関係数の値に応じて異なる色の色データを生成する。すなわち、本実施形態において、制御部１０は、相関係数が０付近から−１付近まで変化するにつれて青および赤の成分を減少させて、黄色がかった色から徐々に緑色に変化するような色データを出力する。したがって、本実施形態に係る音像表示装置１によれば、チャンネル間の逆相成分の比率および当該比率の変化を容易に視覚的に認識することを可能にする。図８（Ａ）においては、相関係数が０付近から−１付近まで変化するにつれて出力される色データが徐々に黄色がかった色から徐々に緑色になる様子を概略的に表している。

【0074】

また、このように相関係数が変化するにつれて出力される色データを徐々に変化させる際、当該色の変化をリニアな変化としてしまうと人間の感覚にそぐわないものとなる。したがって、本実施形態では、制御部１０は、後述のように、ガンマカーブを変えることにより当該色の変化を調整する。

【0075】

以上のように相関係数から生成すべき色データを算出するには、以下のように規定したＬＵＴを用いることができる。以下、相関係数から生成すべき色データを算出するためのＬＵＴについて説明する。まず、以下のように規定する。
（１）相関係数＝−１．０のとき、Ｒ（赤）１００％、Ｇ（緑）０％、Ｂ（青）０％で固定する。
（２）相関係数＝−０．９〜０のとき、Ｇ（緑）１００％で固定する。
（３）相関係数＝０〜１．０のとき、Ｂ（青）１００％で固定する。

【0076】

次に、以下のような各値を用意する。すなわち、
（１）閾値Ｇｐは、相関係数＝０〜１．０（０．１ステップ）のどこから緑色を減色させるかを設定する（本例では設定値＝０．９とする）。
（２）閾値Ｒｐは、相関係数＝０〜１．０（０．１ステップ）のどこから赤色を減色させるかを設定する（本例では設定値＝０．９とする）。
（３）設定値Ｇγｐは、上記緑色のガンマカーブ（０．０５ステップ）を設定する（本例では設定値＝３．００とする）。
（４）設定値Ｒγｐは、上記赤色のガンマカーブ（０．０５ステップ）を設定する（本例では設定値＝３．００とする）。
（５）閾値Ｂｎは、相関係数＝０〜−０．９（０．１ステップ）のどこから青色を減色させるかを設定する（本例では設定値＝０．０とする）。
（６）閾値Ｒｎは、相関係数＝０〜−０．９（０．１ステップ）のどこから赤色を減色させるかを設定する。（本例では設定値＝０．０とする）。
（７）設定値Ｂγｎは、上記青色のガンマカーブ（０．０５ステップ）を設定する（本例では設定値＝０．１０とする）。
（８）設定値Ｒγｎは、上記赤色のガンマカーブ（０．０５ステップ）を設定する（本例では設定値＝１．００とする）。

【0077】

次に、上述のような規定に基づいて緑色（Ｇ）を算出する方法の例を説明する。
（１）相関係数＝−１．０〜−０．９のとき、
Ｇ＝２５５×（（１＋相関係数）／（１−０．９））とする。
（２）相関係数＝−０．９〜閾値Ｇｐ（本例では０．９）のとき、
Ｇ＝２５５とする。
（３）相関係数＝閾値Ｇｐ（本例では０．９）〜１．０、かつ、閾値Ｇｐ（本例では０．９）＜１．０のとき、
Ｇ＝２５５×（設定値Ｇγｐ（本例では３．００）を指数として（１−相関係数)／（１−閾値Ｇｐ（本例では０．９））を基数とした累乗）とする。

【0078】

次に、上述のような規定に基づいて青色（Ｂ）を算出する方法の例を説明する。
（１）相関係数＝−１．０のとき、
Ｂ＝０とする。
（２）相関係数＝−０．９〜閾値Ｂｎ（本例では０．０）、かつ、閾値Ｂｎ（本例では０．０）＞−０．９のとき、
Ｂ＝２５５×（設定値Ｂγｎ（本例では０．１０）を指数として（１＋相関係数）／（１＋閾値Ｂｎ（本例では０．０））を基数とした累乗）とする。
（３）相関係数＝閾値Ｂｎ（本例では０．０）〜１．０のとき、
Ｂ＝２５５とする。

【0079】

次に、上述のような規定に基づいて赤色（Ｒ）を算出する方法の例を説明する。
（１）相関係数＝−１．０〜−０．９のとき、
Ｒ＝２５５−２５５×（（１＋相関係数）／（１−０．９））とする。
（２）相関係数＝−０．９〜閾値Ｒｎ（本例では０．０）、かつ、閾値Ｒｎ（本例では０．０）＞−０．９のとき、
Ｒ＝２５５×（設定値Ｒγｎ（本例で１．００）を指数として（１＋相関係数）／（１＋閾値Ｒｎ（本例では０．０））を基数とした累乗）とする。
（３）相関係数＝閾値Ｒｎ（本例では０．０）〜閾値Ｒｐ（本例では０．９）のとき、
Ｒ＝２５５とする。
（４）相関係数＝閾値Ｒｎ（本例では０．０）〜１．０、かつ、閾値Ｒｎ（本例では０．０）＜１．０のとき、
Ｒ＝２５５×（設定値Ｒγｐ（本例では３．００）を指数として（１−相関係数）／（１−閾値Ｒｐ（本例では０．９））を基数とした累乗）とする。

【0080】

以上説明したようなＬＵＴに従うことにより、制御部１０は、図５のステップＳ２５において、例えばＲＧＢ２４ｂｉｔの色データを生成して出力することができる。

【0081】

図８（Ｂ）は、上述のようなＬＵＴに従って、相関係数と当該相関係数に基づいて出力される色データの緑色（Ｇ）成分との対応を示した図である。また、図８（Ｃ）は、上述のようなＬＵＴに従って、相関係数と当該相関係数に基づいて出力される色データの青色（Ｂ）成分との対応を示した図である。また、図８（Ｄ）は、上述のようなＬＵＴに従って、相関係数と当該相関係数に基づいて出力される色データの赤色（Ｒ）成分との対応を示した図である。

【0082】

図９は、２つのチャンネルにおける音声の相関検出および色データ生成に基づく描画の結果を例示する図である。

【0083】

図５において説明したように、制御部１０は、ステップＳ２３において２つのチャンネルについてベジェ曲線を生成した（図６参照）。また、図５において説明したように、制御部１０は、ステップＳ２５において当該２つのチャンネルについてベジェ曲線の色データを生成した（図８参照）。このように、図５におけるステップＳ２３およびステップＳ２５に示した処理の結果、制御部１０は、図９に示すような曲率および色のベジェ曲線の描画データを生成して（ステップＳ２４）出力する。

【0084】

図９は、図６（Ｃ）に示したようにＣ−Ｒの２つのチャンネルについて生成したベジェ曲線ＣＲの曲率および色を変更した例をいくつか示したものである。

【0085】

図９（Ａ）は、図８（Ａ）に示した相関係数が範囲＜Ａ＞のときに生成されるベジェ曲線ＣＲの曲率および色を示している。図９（Ａ）に示すように、相関係数が範囲＜Ａ＞のときには、通常の場合とは異なる色のベジェ曲線が生成されることになり、ユーザに警告を示唆することができる。

【0086】

図９（Ｂ）は、図８（Ａ）に示した相関係数が範囲＜Ｂ＞のときに生成されるベジェ曲線ＣＲの曲率および色を示している。図９（Ｂ）に示すように、相関係数が範囲＜Ｂ＞のときには、２つのチャンネルの逆相成分の比率に対応する音の広がりのイメージに合わせて曲率が変化したベジェ曲線が生成される。また、相関係数が範囲＜Ｂ＞のときには、相関係数に応じて徐々に変化する色のベジェ曲線が生成されることになり、ユーザに注意を促すことができる。

【0087】

図９（Ｃ）は、図８（Ａ）に示した相関係数が範囲＜Ｃ＞のときに生成されるベジェ曲線ＣＲの曲率および色を示している。図９（Ｃ）に示すように、相関係数が範囲＜Ｃ＞のときにも、２つのチャンネルの逆相成分の比率に対応する音の広がりのイメージに合わせて曲率が変化したベジェ曲線が生成される。また、相関係数が範囲＜Ｃ＞のときには、逆相成分の比率は適度であるため、他の表示と比べて格別目立つことのない色のベジェ曲線が生成されることになり、あえてユーザに注意を促さないようにできる。

【0088】

図９（Ｄ）は、図８（Ａ）に示した相関係数が範囲＜Ｄ＞のときに生成されるベジェ曲線ＣＲの曲率および色を示している。図９（Ｄ）に示すように、相関係数が範囲＜Ｄ＞のときには２つのチャンネルがほぼ完全に同相に近くなるため、この場合も通常の場合とは異なる曲率（直線に近い）および色のベジェ曲線が生成されることになり、ユーザに注意を促すことができる。

【0089】

このように、本実施形態において、制御部１０は、複数のチャンネルのうち２つのチャンネルの音声データに基づいて、当該２つのチャンネル間における音声の逆相成分の比率を算出する。そして、制御部１０は、当該逆相成分の比率に応じた色の曲線を描画する描画データを出力する。

【0090】

また、制御部１０は、２つのチャンネル間における音声の逆相成分の比率が第１の閾値以上である時は、警告を示唆する例えば赤などの所定の色の前記曲線を描画する描画データを出力する。また、制御部１０は、２つのチャンネル間における音声の逆相成分の比率が第２の閾値以下である時は、例えば青などの所定の色の前記曲線を描画する描画データを出力する。また、制御部１０は、２つのチャンネル間における音声の逆相成分の比率が、完全に同相と完全に逆相との間における第１の範囲内にある時は、例えば白などの所定の色の前記曲線を描画する描画データを出力する。また、制御部１０は、２つのチャンネル間における音声の逆相成分の比率が、完全に同相と完全に逆相との間における第２の範囲内にある時は、逆相成分の比率に応じて例えば黄色から緑色など所定の色の間で徐々に変化する色の前記曲線を描画する描画データを出力する。

【0091】

図９においては、Ｃ−Ｒの２つのチャンネルについてのみ、曲率および色を設定したベジェ曲線ＣＲを生成したが、本実施形態においては、制御部１０は、同様の処理を、他の２つのチャンネルＬ−Ｒ，Ｃ−Ｌ，Ｌ−Ｌｓ，Ｒ−Ｒｓ，Ｌｓ−Ｒｓについても行う。このようにして、上述した２つのチャンネルそれぞれについて曲率および色が設定されたベジェ曲線が生成されると、図１０に示すような描画を行う描画データが出力される。

【0092】

図１０は、２つのチャンネルにおける音声の相関検出および色データ生成に基づく描画の結果を合成した図である。すなわち、図１０は、本実施形態に係る音像表示装置１による処理を行うことにより、図４、図６、図９に示した結果を全て合成した状態を示す図である。本実施形態に係る音像表示装置１は、上述した処理の一部のみの結果を表示部３０に表示してもよいが、音像など音響に係る種々の情報を一度に把握できるよう、図１０に示すように、上述した処理の全ての結果を同時に表示するのが好適である。

【0093】

図１０において、Ｏはリスニングポジションを表す。また、Ｃはセンタースピーカの位置を表し、Ｌは左フロントスピーカの位置を表し、Ｒは右フロントスピーカの位置を表し、Ｌｓは左サラウンドスピーカの位置を表し、Ｒｓは右サラウンドスピーカの位置を表す。これらの位置は、予め理想的な位置を規定して、固定された表示とするのが好適である。

【0094】

以下、図１０において、各符号が表す意味を記す。
Ｌｖ（Ｃ）：センタースピーカＣから再生される音声のレベル
Ｌｖ（Ｌ）：左フロントスピーカＬから再生される音声のレベル
Ｌｖ（Ｒ）：右フロントスピーカＲから再生される音声のレベル
Ｌｖ（Ｌｓ）：左サラウンドスピーカＬｓから再生される音声のレベル
Ｌｖ（Ｒｓ）：右サラウンドスピーカＲｓから再生される音声のレベル
Ｌｖ（ＬＦＥ）：サブウーファから再生される音声のレベル
Ｂ（ＬＲ）：左フロントスピーカＬから再生される音声および右フロントスピーカＲから再生される音声に基づくベジェ曲線（センタースピーカＣから再生される音声は無視）
Ｂ（ＬＣ）：左フロントスピーカＬから再生される音声およびセンタースピーカＣから再生される音声に基づくベジェ曲線
Ｂ（ＣＲ）：センタースピーカＣから再生される音声および右フロントスピーカＲから再生される音声に基づくベジェ曲線
Ｂ（ＬＬｓ）：左フロントスピーカＬから再生される音声および左サラウンドスピーカＬｓから再生される音声に基づくベジェ曲線
Ｂ（ＲＲｓ）：右フロントスピーカＲから再生される音声および右サラウンドスピーカＲｓから再生される音声に基づくベジェ曲線
Ｂ（ＬｓＲｓ）：左サラウンドスピーカＬｓから再生される音声および右サラウンドスピーカＲｓから再生される音声に基づくベジェ曲線

【0095】

図１０に示すＬＦＥは、図３（Ｆ）で説明したように無指向性であるため、点０を中心としてレベルに応じて半径を増大させた円形として、例えば半透明にして表示する。この場合、通常の番組における音声としては大き過ぎると思われるレベルから徐々にＬＦＥの表示を色変化させることにより、観測者に注意喚起することができる。また、このようにＬＦＥのレベルが変化するにつれて出力される色データを徐々に変化させる際、当該色の変化をリニアな変化としてしまうと人間の感覚にそぐわないものとなる。したがって、本実施形態では、制御部１０は、上述したように、ガンマカーブを変えることにより当該色の変化を調整するのが好適である。

【0096】

このようにして、本実施形態において、ＬＦＥ信号についても同時に監視できるようにしてもよい。ＬＦＥを大音量で再生するとウーファーが歪んで不具合の原因になり得るため、通常ＬＦＥ信号は小さいレベルで運用されることが多い。したがって、ＬＦＥのレベルが大きくなり過ぎる場合は、赤系の色に変化させて注意喚起を促すのが好適である。

【0097】

本発明によれば、複数のスピーカの配置を模した二次元空間上に、ベジェ曲線を用いて音像を表現することができる。本発明においては、このベジェ曲線による図形の大きさが音声全体の大きさを表し、ベジェ曲線による図形の形状が音像の定位感を表す。

【0098】

以上説明したように、本発明によれば、音声をサラウンド再生する際の多種多様な情報を収集する際に、複雑な構成の機器類は必要なくなる。また、このような情報は、本発明によれば、音声の再生に伴って、リアルタイムで動的に監視することができる。さらに、本発明によれば、このような多種多様な情報を集約するのみならず、視覚に訴える表現により一画面で直感的に把握することができ、極めて利便性が高い。

【0099】

以下、本発明による効果について、さらに述べる。

【0100】

本発明によれば、リスニングポジションから各スピーカ配置に向かって各チャンネルのオーディオレベルバーが配置されるため、このレベルバーの振れによって各チャンネルのレベル管理を行うことが可能になる。また、本発明によれば、例えば隣接するような２つのチャンネル間における音声の逆相成分の比率を、ベジェ曲線の曲率および色変化で表現し、各チャンネルのレベル、音像の確認と同時に、位相監視も行うことが可能になる。音響効果として音声にある程度の広がり感を持たせるには逆相成分が必要である。本発明によれば、適正なバランスのサラウンド信号が入力されれば、ベジェ曲線は全体としてほぼ正円のように表示されるため、サラウンド信号全体の適正なバランスをひと目で感覚的に把握することができる。

【0101】

また、本発明によれば、逆相の成分が多くなるにつれて、ベジェ曲線の曲率が高くなるとともに色が変化する。この場合、逆相成分が適正レベルでなくなるまで徐々に色が変化するだけであるが、逆相成分が異常なレベルになると赤い色に変わるため、警告の通知であることを容易に認識することができる。さらに、システムチェックでＯＳＣなどの基準信号によりレベル合わせをする際は、逆相成分がゼロになるはずなので、ベジェ曲線は直線で青色になる。したがって、正しくシステムが構築できたかどうかの判断を容易に下すことができる。

【0102】

本発明を諸図面および実施例に基づき説明してきたが、当業者であれば本開示に基づき種々の変形や修正を行うことが容易であることに注意されたい。したがって、これらの変形および修正は本発明の範囲に含まれることに留意されたい。例えば、各機能部、各手段、各ステップなどに含まれる機能などは論理的に矛盾しないように再配置可能であり、複数の機能部やステップなどを１つに組み合わせたり、あるいは分割したりすることが可能である。また、上述した本発明の実施形態は、それぞれ説明した実施形態に忠実に実施することに限定されるものではなく、適宜、各特徴を組み合わせて実施することもできる。

【0103】

上述した実施形態は、音像表示装置１および音像表示システムの発明として説明した。この場合、本発明による音像表示システムは、上述したような種々の制御を行う制御部１０と、制御部１０により出力された描画データに基づく曲線を表示する表示部２０と、を備えることを特徴とする。

【0104】

また、本発明は、音像表示装置１または音像表示システムにおける音像表示方法とすることもできる。この場合、本発明による音像表示方法は、複数のチャンネルのうち２つのチャンネルの音声データに基づいて、当該２つのチャンネル間における音声の逆相成分の比率を算出するステップと、前記逆相成分の比率に応じて曲率を変化させた曲線であって当該逆相成分の比率に応じて変化させた色の曲線を描画する描画データを出力するステップと、を含むことを特徴とする。

【符号の説明】

【0105】

１ 音像表示装置
１０ 制御部
２０ 記憶部
３０ 表示部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】