特開 2022-125635 音信号処理方法および音信号処理装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2022125635

(43)【公開日】2022-08-29

(54)【発明の名称】音信号処理方法および音信号処理装置

(51)【国際特許分類】

   H04R 3/00 20060101AFI20220822BHJP

   H04S 1/00 20060101ALI20220822BHJP

   H04S 3/00 20060101ALI20220822BHJP

【ＦＩ】

H04R3/00

H04S1/00

H04S3/00

【審査請求】未請求

【請求項の数】16

【出願形態】ＯＬ

(21)【出願番号】P 2021023330

(22)【出願日】2021-02-17

(71)【出願人】

【識別番号】000004075

【氏名又は名称】ヤマハ株式会社

(74)【代理人】

【識別番号】100125254

【弁理士】

【氏名又は名称】別役 重尚

(74)【代理人】

【識別番号】100118278

【弁理士】

【氏名又は名称】村松 聡

(72)【発明者】

【氏名】臼井 篤志

(72)【発明者】

【氏名】伊藤 孝

(72)【発明者】

【氏名】金田 匡史

【テーマコード（参考）】

5D162

5D220

【Ｆターム（参考）】

5D162BA17

5D162CB16

5D220EE11

5D220EE25

5D220EE34

(57)【要約】

【課題】機器接続の複雑化を回避しつつ、音信号ごとに適切な処理を施して適切な出力先へ出力する。
【解決手段】処理部Ａが、音信号Ｓｉに後段処理部Ａ－２による周囲音強調処理を行って音信号Ｓｇを生成すると共に、音信号Ｓｇをミックスバス３４へ出力し、処理部Ｃが、音信号Ｓａに、Ｃ処理を行って音信号Ｓｅを生成すると共に、音信号Ｓｅをミックスバス３４と第１出力先（通信端末装置２８またはＰＣ２９）とに出力し、ミックスバス３４は、音信号Ｓｇと音信号Ｓｅとを混合して音信号Ｓｈを生成すると共に、音信号Ｓｈを第２出力先（ヘッドホン３１またはスピーカ３２）に出力する、音信号処理方法を提供する。
【選択図】図２

【特許請求の範囲】

【請求項1】

第１処理部が、第１音信号に第１処理を行って第２音信号を生成すると共に、前記第２音信号をミックスバスへ出力し、
第２処理部が、第３音信号に第２処理を行って第４音信号を生成すると共に、前記第４音信号を前記ミックスバスと第１出力先とに出力し、
前記ミックスバスは、前記第２音信号と前記第４音信号とを混合して第５音信号を生成すると共に、前記第５音信号を第２出力先に出力する、音信号処理方法。

【請求項2】

前記第１音信号はステレオ信号であり、
前記第１処理部は、
前記ステレオ信号から和信号と差信号とを生成し、
前記和信号に対して中音域の音圧を減少させる処理を行った処理後和信号を生成し、
前記差信号に対して所定の帯域の音圧を増加させる処理を行った処理後差信号を生成し、
前記処理後和信号と前記処理後差信号とをステレオ信号に変換することで前記第２音信号を生成する、請求項１に記載の音信号処理方法。

【請求項3】

前記第１音信号は、３チャンネル以上のチャンネル数の第６音信号をステレオ化する第３処理を第３処理部が施すことによって生成された信号である、請求項１または２に記載の音信号処理方法。

【請求項4】

第４処理部が、第７音信号に第４処理を行って第８音信号を生成すると共に、前記第８音信号を前記ミックスバスへ出力し、
前記ミックスバスは、前記第２音信号と前記第４音信号とに対してさらに前記第８音信号を混合することで前記第５音信号を生成する、請求項１乃至３のいずれか１項に記載の音信号処理方法。

【請求項5】

前記第３音信号は、マイクロフォンから出力された音信号である、請求項１乃至４のいずれか１項に記載の音信号処理方法。

【請求項6】

前記第６音信号は、ゲーム装置から出力された音信号である、請求項３に記載の音信号処理方法。

【請求項7】

前記第７音信号は、アプリケーションを介して出力された音信号である、請求項４に記載の音信号処理方法。

【請求項8】

前記第１出力先はコンピュータであり、
前記第２出力先は音響出力機器である、請求項１乃至７のいずれか１項に記載の音信号処理方法。

【請求項9】

ミックスバスと、
第１音信号に第１処理を行って第２音信号を生成すると共に、前記第２音信号を前記ミックスバスへ出力する第１処理部と、
第３音信号に第２処理を行って第４音信号を生成すると共に、前記第４音信号を前記ミックスバスと第１出力先とに出力する第２処理部と、を有し、
前記ミックスバスは、前記第２音信号と前記第４音信号とを混合して第５音信号を生成すると共に、前記第５音信号を第２出力先に出力する、音信号処理装置。

【請求項10】

前記第１音信号はステレオ信号であり、
前記第１処理部は、
前記ステレオ信号から和信号と差信号とを生成し、
前記和信号に対して中音域の音圧を減少させる処理を行った処理後和信号を生成し、
前記差信号に対して所定の帯域の音圧を増加させる処理を行った処理後差信号を生成し、
前記処理後和信号と前記処理後差信号とをステレオ信号に変換することで前記第２音信号を生成する、請求項９に記載の音信号処理装置。

【請求項11】

前記第１音信号は、３チャンネル以上のチャンネル数の第６音信号をステレオ化する第３処理を第３処理部が施すことによって生成された信号である、請求項９または１０の音信号処理装置。

【請求項12】

第７音信号に第４処理を行って第８音信号を生成すると共に、前記第８音信号を前記ミックスバスへ出力する第４処理部をさらに有し、
前記ミックスバスは、前記第２音信号と前記第４音信号とに対してさらに前記第８音信号を混合することで前記第５音信号を生成する、請求項９乃至１１のいずれか１項の音信号処理装置。

【請求項13】

前記第３音信号は、マイクロフォンから出力された音信号である、請求項９乃至１２のいずれか１項の音信号処理装置。

【請求項14】

前記第６音信号は、ゲーム装置から出力された音信号である、請求項１１の音信号処理装置。

【請求項15】

前記第７音信号は、アプリケーションを介して出力された音信号である、請求項１２の音信号処理装置。

【請求項16】

前記第１出力先はコンピュータであり、
前記第２出力先は音響出力機器である、請求項９乃至１５のいずれか１項の音信号処理装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、音信号処理方法および音信号処理装置に関する。

【背景技術】

【0002】

従来、音響効果を高めるために、音信号に各種処理を施して混合する音信号処理装置が知られている。例えば、特許文献１、２は、ステレオ音響信号を和信号および差信号に変換し、和信号、差信号にそれぞれ音響効果等の処理を施した後、再びステレオ音響信号に変換する。これにより、ステレオ音響信号の音響効果を多様にかつ容易に調整することができる。あるいは、違和感の少ない音を提供することができる。

【先行技術文献】

【特許文献】

【0003】

【特許文献1】特開２０１８－１１６１５３号公報

【特許文献2】特開２０１７－２２０７８９号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

しかしながら、エフェクトなどの施したい処理内容や、音信号を出力したい出力先は、音信号によって異なる。従って、複数の系統から多くの音信号が取得される場合、音信号の各々に適切な処理を施すために変換機器が増えて機器接続が複雑になる場合がある。

【0005】

本発明の一つの目的は、機器接続の複雑化を回避しつつ、音信号ごとに適切な処理を施して適切な出力先へ出力することができる音信号処理方法および音信号処理装置を提供することである。

【課題を解決するための手段】

【0006】

本発明の一形態によれば、第１処理部が、第１音信号に第１処理を行って第２音信号を生成すると共に、前記第２音信号をミックスバスへ出力し、第２処理部が、第３音信号に第２処理を行って第４音信号を生成すると共に、前記第４音信号を前記ミックスバスと第１出力先とに出力し、前記ミックスバスは、前記第２音信号と前記第４音信号とを混合して第５音信号を生成すると共に、前記第５音信号を第２出力先に出力する、音信号処理方法が提供される。

【発明の効果】

【0007】

本発明の一形態によれば、機器接続の複雑化を回避しつつ、音信号ごとに適切な処理を施して適切な出力先へ出力することができる。

【図面の簡単な説明】

【0008】

【図1】音信号処理装置のブロック図である。

【図2】信号処理に関する構成を示すブロック図である。

【図3】処理部の詳細なブロック図である。

【図4】バイノーラル化部における信号の流れを示す図である。

【図5】ＤｅＥｓｓｅｒの詳細構成を示す図である。

【発明を実施するための形態】

【0009】

以下、図面を参照して本発明の実施の形態を説明する。

【0010】

図１は、本発明の一実施の形態に係る音信号処理装置のブロック図である。この音信号処理装置１００は、一例としてミキサ装置として構成される。音信号処理装置１００はＣＰＵ１１を有し、ＣＰＵ１１は、バス１０を介して複数の構成要素と情報をやりとりする。音信号処理装置１００は、ＲＯＭ１２、ＲＡＭ１３、記憶部１４、表示部１５、設定操作部１６を有する。また、音信号処理装置１００は、外部機器を接続するための各種インターフェイスを有し、各種インターフェイスを介して、接続された外部機器とＣＰＵ１１との間で信号が入出力される。各種インターフェイスには、通信部１７、第１のマイク入力端子１８、第２のマイク入力端子１９、ＡＵＸ端子２０、ＵＳＢ端子２１、ＨＤＭＩ（登録商標）入力端子２２、ＨＤＭＩ出力端子２３、ヘッドホン出力端子２４、スピーカ出力端子２５が含まれる。

【0011】

ＣＰＵ１１には不図示のタイマが接続されている。ＣＰＵ１１は、本装置全体を制御する。ＲＯＭ１２は、ＣＰＵ１１が実行する制御プログラムや各種テーブルデータ等を記憶する。ＲＡＭ１３は、各種データを記憶する。記憶部１４は、上記制御プログラムを含む各種アプリケーションプログラムや各種データを記憶する。設定操作部１６は、ユーザからの各種情報の入力を受け付ける。表示部１５は、各種情報を表示する。通信部１７は、ＬＡＮインターフェイスやＭＩＤＩ（Musical Instrument Digital Interface）を含んでもよい。

【0012】

第１のマイク入力端子１８、第２のマイク入力端子１９には、外部マイクが接続可能である。例えば、第１のマイク入力端子１８には第１のマイクロフォン２６が接続され、第２のマイク入力端子１９には、ヘッドホン３１とセットになった第２のマイクロフォン２７が接続される。ＡＵＸ端子２０には、スマートホン等の通信端末装置２８が接続される。ＵＳＢ端子２１には、ＵＳＢ機器、例えばパーソナルコンピュータであるＰＣ２９が接続される。ＨＤＭＩ入力端子２２、ＨＤＭＩ出力端子２３には、ＨＤＭＩ機器が接続可能である。例えば、ＨＤＭＩ入力端子２２にゲーム装置３０が接続され、ＨＤＭＩ出力端子２３に表示モニタ４２が接続される。ヘッドホン出力端子２４には、ヘッドホン３１が接続される。スピーカ出力端子２５には、スピーカ３２が接続される。スピーカ３２は、２チャンネルスピーカに限らず、サラウンドスピーカであってもよく、発音のチャンネル数は例えば８チャンネル（７．１ｃｈ）である。

【0013】

図２は、音信号処理装置１００における信号処理に関する構成を示すブロック図である。音信号処理装置１００は、処理部Ａ、Ｂ、Ｃ、ミックスバス３４、切替部３３、３５などを備える。なお、処理部Ａ、Ｂ、Ｃの機能は、必要なハードウェアに加えて、主としてＣＰＵ１１、ＲＯＭ１２およびＲＡＭ１３の協働により実現される。ミックスバス３４、切替部３３、３５の動作はＣＰＵ１１により制御される。

【0014】

ゲーム装置３０で生成されＨＤＭＩ入力端子２２から入力される信号Ｓｄは、ＨＤＭＩ出力端子２３に出力され、表示モニタ４２に供給される。信号Ｓｄは、映像信号を含み、信号Ｓｄに基づく映像が表示モニタ４２で表示される。なお、信号Ｓｄは、音信号を含んでもよく、ＨＤＭＩ出力端子２３に音響機器が接続された場合は、信号Ｓｄに基づく音響が音響機器から発生する。

【0015】

ゲーム装置３０で生成されＨＤＭＩ入力端子２２から入力される音信号、またはＰＣ２９で生成されＵＳＢ端子２１から入力される音信号が、音信号Ｓｃとして処理部Ａに入力される。音信号Ｓｃは、３チャンネル以上のチャンネル数の音信号であり、本実施の形態では８チャンネルの信号であるとする。処理部Ａは、音信号Ｓｃに対してＡ処理（後述する）を施すことで音信号Ｓｇを生成すると共に、音信号Ｓｇをミックスバス３４へ出力する。

【0016】

通信端末装置２８で生成されＡＵＸ端子２０から入力される音信号、またはＰＣ２９で生成されＵＳＢ端子２１から入力される音信号が、音信号Ｓｂとして処理部Ｂに入力される。音信号Ｓｂとして、例えば、ボイスチャットの音信号が想定される。音信号Ｓｂは、例えば、通信端末装置２８またはＰＣ２９で実行されるアプリケーションソフトにより生成される。処理部Ｂは、音信号Ｓｂに対してＢ処理を施すことで音信号Ｓｆを生成すると共に、生成した音信号Ｓｆをミックスバス３４へ出力する。

【0017】

切替部３３は、第１のマイクロフォン２６で集音され第１のマイク入力端子１８から入力される音信号と、第２のマイクロフォン２７で集音され第２のマイク入力端子１９から入力される音信号とを、排他的に選択する。例えば、マイクロフォンが接続されたマイク入力端子が選択され、双方のマイク入力端子にマイクロフォンが接続された場合は第２のマイク入力端子１９が優先的に選択される。そして切替部３３は、選択したマイク入力端子からの音信号を、音信号Ｓａとして処理部Ｃへ出力する。

【0018】

処理部Ｃは、音信号ＳａにＣ処理を施すことで音信号Ｓｅを生成すると共に、音信号Ｓｅをミックスバス３４へ出力する。Ｃ処理は、例えば、エフェクトやレベル調整などを含む。さらに処理部Ｃは、生成した音信号ＳｅをＡＵＸ端子２０とＵＳＢ端子２１とに出力する。その際、Ｄ／Ａ変換や２チャンネル化等の処理が介在してもよい。従って、ＡＵＸ端子２０、ＵＳＢ端子２１にそれぞれ接続された通信端末装置２８、ＰＣ２９へ音信号Ｓｅが出力される。通信端末装置２８、ＰＣ２９での設定によっては、音信号Ｓｅに応じた音響が発生する。

【0019】

なお、Ａ処理、Ｂ処理、Ｃ処理は、互いに異なる処理である。また、音信号Ｓａはマイクロフォンから入力されるとしたが、音信号Ｓｃの入力系統とは別の系統から入力される信号であればよい。また、ミックスバス３４を介さずに出力される音信号Ｓｅの出力先（ＡＵＸ端子２０またはＵＳＢ端子２１に接続されたもの）は、音信号Ｓｈの出力先（ヘッドホン出力端子２４またはスピーカ出力端子２５に接続されたもの）と異なればよい。

【0020】

ミックスバス３４は、少なくとも音信号Ｓｇと音信号Ｓｅとを混合して音信号Ｓｈを生成する。本実施の形態では、音信号Ｓｇと音信号Ｓｅとに加えて音信号Ｓｆが混合されて音信号Ｓｈが生成される。ミックスバス３４は、切替部３５を介してヘッドホン出力端子２４またはスピーカ出力端子２５に音信号Ｓｈを出力する。ここで、音信号Ｓｈは、ヘッドホン用信号Ｓｈ－１およびスピーカ用信号Ｓｈ－２を含む。切替部３５は、音信号Ｓｈの出力先を排他的に選択する。例えば、ヘッドホン３１がヘッドホン出力端子２４に接続されている場合は、ヘッドホン出力端子２４が出力先として選択され、ヘッドホン３１がヘッドホン出力端子２４に接続されていない場合は、スピーカ出力端子２５が出力先として選択される。ヘッドホン出力端子２４が選択された場合は、ヘッドホン用信号Ｓｈ－１がヘッドホン３１に出力される。スピーカ出力端子２５が選択された場合は、スピーカ用信号Ｓｈ－２がスピーカ３２に出力される。なお、切替部３５が音信号Ｓｈを出力する際、レベル調整やＤ／Ａ変換が施されてもよい。特に、ヘッドホン用信号Ｓｈ－１が出力される場合は、ヘッドホンに合わせた出力特性の調整も施されてもよい。

【0021】

図３は、処理部Ａの詳細なブロック図である。処理部Ａは、前段処理部Ａ－１と後段処理部Ａ－２とからなる。Ａ処理は、前段処理部Ａ－１によるバイノーラル化処理と後段処理部Ａ－２による周囲音強調処理とからなる。前段処理部Ａ－１は、バイノーラル化部３６を含む。後段処理部Ａ－２は、ＭＳ変換部３７、ＤｅＥｓｓｅｒ（ディエッサ）３８、ＰＥＱ３９、ＬＲ変換部４０、ＰＥＱ４１を含む。ＰＥＱ３９、４１はいずれも、一例として４ｂａｎｄのパラメトリックイコライザである。ただし、ＰＥＱ３９、４１は４ｂａｎｄである必要はなく、またＰＥＱでなくてもよく、例えばグラフィックイコライザ（ＧＥＱ）であってもよい。

【0022】

図４は、バイノーラル化部３６における信号の流れを示す図である。音信号Ｓｃは、一例として、７．１ｃｈ（Ｃ：センタ、Ｌ：フロントＬ、Ｒ：フロントＲ、ＳＬ：サラウンドＬ、ＳＲ：サラウンドＲ、ＢＬ：サラウンドバックＬ、ＢＲ：サラウンドバックＲ、ＬＦＥ：サブウーファ）により構成されるオーディオ信号である。

【0023】

頭部伝達関数（ＨＲＴＦ：Head Related Transfer Function）は、ある位置に設置した仮想スピーカからそれぞれ左右の耳に至る音の大きさ、到達時間、および周波数特性の差を表現したインパルス応答である。ＬＦＥ以外の信号には、それぞれの信号に応じたＨＲＴＦおよびリバーブ（Reverb）が適用される。リバーブを適用するのは、音源との距離感を再現するためである。ただし、ＬＦＥは定位を感じにくいので、ＨＲＴＦおよびリバーブを適用しない。８チャンネルの音信号Ｓｃは、バイノーラル化部３６によるバイノーラル化処理を経てステレオ化され、すなわち、ＬとＲの２チャンネルのステレオ信号に変換される。このステレオ信号が音信号Ｓｉとして後段処理部Ａ－２におけるＭＳ変換部３７に入力される。

【0024】

後段処理部Ａ－２（図３）において、ＭＳ変換部３７は、音信号Ｓｉから和信号Ｓｊと差信号Ｓｋとを生成する。音信号Ｓｉの左信号をＬ、右信号をＲで表すと、和信号Ｓｊは、Ｓｊ＝（ＳｉのＬ）／２＋（ＳｉのＲ）／２により算出される。また、差信号Ｓｋは、Ｓｋ＝（ＳｉのＬ）／２－（ＳｉのＲ）／２により算出される。

【0025】

図５は、ＤｅＥｓｓｅｒ３８の詳細構成を示す図である。ＤｅＥｓｓｅｒ３８は、ＨＰＦ（ハイパスフィルタ）、ＬＰＦ（ローパスフィルタ）、ＣＯＭＰ（コンプレッサ）等を備え、和信号Ｓｊに対して中音域の音圧を減少させる処理を行った処理後和信号Ｓｌを生成する。ＰＥＱ３９は、差信号Ｓｋに対して所定の帯域の音圧を増加させる処理を行った処理後差信号Ｓｍを生成する。

【0026】

例えば、シューティングゲームを行っているとき、ＤｅＥｓｓｅｒ３８により、ゲームユーザの操作による銃声音が低減され、やかましさが緩和される。また、ＰＥＱ３９により、サイドの音が強調され、射撃する敵の足音などがわかりやすくなる。従って、所定の帯域は限定されないが、周囲の音を聞きとりやすくするために、主に周囲の音が含まれるような、方向性を感じやすい周波数の帯域であることが望ましい。

【0027】

ＬＲ変換部４０は、処理後和信号Ｓｌと処理後差信号Ｓｍとをステレオ信号に変換することで音信号Ｓｎを生成する。音信号Ｓｎの左信号をＬ、右信号をＲで表すと、音信号ＳｎのＬ信号は、Ｓｌ＋Ｓｍにより算出される。音信号ＳｎのＲ信号は、Ｓｌ－Ｓｍにより算出される。ＰＥＱ４１は、設定に応じて音信号Ｓｎに対して各帯域の音圧を増減する。これにより、全体の音質が調整された音信号Ｓｇが処理部Ａから出力される。なお、ＰＥＱ４１を設けることは必須でない。

【0028】

処理部Ｂ（図２）が音信号Ｓｂに対して施すＢ処理は、一例として、ボイスチャットに対するバイノーラル化処理を含む。例えば、音信号Ｓｂに対して、ＨＲＴＦとリバーブの少なくとも一方が適用されて、ステレオ信号である音信号Ｓｆが生成される。なお、ＣＰＵ１１は、ユーザからの切り替え指示によって、ＨＲＴＦとリバーブのいずれが適用されるかを切り替えてもよい。また、ユーザからの切り替え指示によって、ＨＲＴＦとリバーブのいずれも適用しない場合があってもよい。

【0029】

本実施の形態によれば、処理部Ａ（第１処理部）が、音信号Ｓｉ（第１音信号）に、後段処理部Ａ－２による周囲音強調処理（第１処理）を行って音信号Ｓｇ（第２音信号）を生成すると共に、音信号Ｓｇをミックスバス３４へ出力する。また、処理部Ｃ（第２処理部）が、音信号Ｓａ（第３音信号）に、Ｃ処理（第２処理）を行って音信号Ｓｅ（第４音信号）を生成すると共に、音信号Ｓｅをミックスバス３４と第１出力先（通信端末装置２８またはＰＣ２９）とに出力する。ミックスバス３４は、少なくとも音信号Ｓｇ（第２音信号）と音信号Ｓｅ（第４音信号）とを混合して音信号Ｓｈ（第５音信号）を生成すると共に、音信号Ｓｈを第２出力先（ヘッドホン３１またはスピーカ３２）に出力する。従って、機器接続の複雑化を回避しつつ、音信号ごとに適切な処理を施して適切な出力先へ出力することができる。例えば、複数の系統から多くの音信号が取得される場合でも、音信号の各々に適切な処理を施すために多くの変換機器を接続する必要がなく、接続が複雑になることが回避される。

【0030】

また、音信号Ｓｉは、周囲音強調処理（第１処理）により、和信号Ｓｊ、差信号Ｓｋの生成、および処理後和信号Ｓｌ、処理後差信号Ｓｍの生成を経て、ステレオの音信号Ｓｇに変換されるので、周囲の音を聞きとりやすくすることができる。

【0031】

また、音信号Ｓｉは、８チャンネルの音信号Ｓｃ（第６音信号）に対し、前段処理部Ａ－１でバイノーラル化処理（第３処理）を施すことにより、ステレオ化して生成されたものである。従って、臨場感を再現することができる。なお、この観点からは、音信号Ｓｃは３チャンネル以上のチャンネル数の音信号であればよい。なお、機器接続の複雑化を回避しつつ、音信号ごとに適切な処理を施して適切な出力先へ出力するという効果を求めることに限れば、前段処理部Ａ－１は必須でない。従って、音信号Ｓｉ（第１音信号）は、音信号処理装置１００にステレオ信号として入力された音信号であってもよい。

【0032】

また、処理部Ｂ（第４処理部）が、音信号Ｓｂ（第７音信号）にＢ処理（第４処理）を行って音信号Ｓｆ（第８音信号）を生成すると共に、音信号Ｓｆをミックスバス３４へ出力する。ミックスバス３４は、音信号Ｓｇ（第２音信号）と音信号Ｓｅ（第４音信号）とに対してさらに音信号Ｓｆ（第８音信号）を混合することで音信号Ｓｈ（第５音信号）を生成する。従って、ボイスチャット音声などの音を併せて出力することができる。なお、処理部Ｂを設けることは必須でない。従って、音信号Ｓｈ（第５音信号）は、音信号Ｓｆを含まずに音信号Ｓｇ（第２音信号）と音信号Ｓｅ（第４音信号）とを混合した信号であってもよい。

【0033】

また、音信号Ｓａ（第３音信号）は、マイクロフォン（２６、２７）から出力された音信号であるので、ゲームをするユーザの声などを併せて処理することができる。なお、音信号Ｓａの取得元はマイクロフォンに限定されない。

【0034】

また、音信号Ｓｃ（第６音信号）が、ゲーム装置３０から出力された音信号であれば、ゲーム音などを併せて処理することができる。また、音信号Ｓｂ（第７音信号）が、例えば、アプリケーションを介して出力された音信号であれば、ボイスチャット音声などの音を併せて処理することができる。

【0035】

また、ミックスバス３４を介さずに出力される音信号Ｓｅの出力先は、通信端末装置２８またはＰＣ２９等のコンピュータであれば、コンピュータにはＣ処理を施した音を出力することができる。また、音信号Ｓｈの出力先が、ヘッドホン３１またはスピーカ３２等の音響出力機器であれば、音響出力機器にはＡ、Ｂ、Ｃ処理を施した音を混合して出力できる。なお、ヘッドホン３１は、耳装着型の音出力機器の一例であり、イヤホンであってもよい。

【0036】

以上、本発明をその好適な実施形態に基づいて詳述してきたが、本発明はこれら特定の実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の様々な形態も本発明に含まれる。

【符号の説明】

【0037】

Ａ、Ｂ、Ｃ 処理部、 Ｓｉ、Ｓａ、Ｓｇ、Ｓｅ、Ｓｈ 音信号、 １１ ＣＰＵ、 ２８ 通信端末装置、 ２９ ＰＣ、 ３１ ヘッドホン、 ３２ スピーカ、 ３４ ミックスバス

【図1】

【図2】

【図3】

【図4】

【図5】