特許 7396029 録音再生装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-12-04

(45)【発行日】2023-12-12

(54)【発明の名称】録音再生装置

(51)【国際特許分類】

   H04R 3/00 20060101AFI20231205BHJP

   H04R 1/40 20060101ALN20231205BHJP

【ＦＩ】

H04R3/00 320

H04R3/00 310

H04R1/40 320A

【請求項の数】 7

(21)【出願番号】P 2019231627

(22)【出願日】2019-12-23

(65)【公開番号】P2021100209

(43)【公開日】2021-07-01

【審査請求日】2022-08-31

(73)【特許権者】

【識別番号】000003676

【氏名又は名称】ティアック株式会社

(74)【代理人】

【識別番号】110001210

【氏名又は名称】弁理士法人ＹＫＩ国際特許事務所

(72)【発明者】

【氏名】中村 進

【審査官】大野 弘

(56)【参考文献】

【文献】特開２００７－３００２２０（ＪＰ，Ａ）

【文献】特開２００４－１８０１９７（ＪＰ，Ａ）

【文献】特開２０１１－２１１３３０（ＪＰ，Ａ）

【文献】国際公開第２０１２／１２４４２２（ＷＯ，Ａ１）

【文献】特開２０１０－２３０９９２（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｒ ３／００

Ｈ０４Ｒ １／４０

(57)【特許請求の範囲】

【請求項1】

複数のマイクロホンと、
指向性の方向を指定するための操作手段と、
前記複数のマイクロホンで収音したオーディオ信号に対して、録音時に前記操作手段で指定された第１方向に強調処理する第１指向性制御手段と、
前記第１指向性制御手段で処理された指向性制御処理後オーディオデータ、及び前記指向性制御手段で処理される前の指向性制御処理前オーディオデータをメモリに記録する記録手段と、
前記メモリに記録された前記指向性制御処理後オーディオデータと、前記指向性制御処理前オーディオデータを読み出す読出手段と、
前記指向性制御処理前オーディオデータが読み出された場合に、読み出された指向性制御処理前オーディオデータに対して、再生時に前記操作手段で指定された、前記第１方向とは異なる第２方向に強調処理する第２指向性制御手段と、
読み出された前記指向性制御処理後オーディオデータと、前記第２指向性制御手段で処理されたオーディオデータを選択的に再生する再生手段と、
を備える録音再生装置。

【請求項2】

請求項１に記載の録音再生装置において、
前記指向性制御処理後オーディオデータは、エフェクト処理がなされたオーディオデータであり、
前記指向性制御処理前オーディオデータは、前記エフェクト処理がなされていないオーディオデータである、
録音再生装置。

【請求項3】

請求項２に記載の録音再生装置において、
前記再生手段は、前記第２指向性制御手段で処理されたオーディオデータを、前記指向性制御処理後オーディオデータのエフェクト処理に用いられるパラメータでエフェクト処理する、
録音再生装置。

【請求項4】

請求項１～３のいずれかに記載の録音再生装置において、
前記指向性制御処理前オーディオデータは、アンビソニックのＡ－ＦｏｒｍａｔデータあるいはＢ－Ｆｏｒｍａｔデータである、
録音再生装置。

【請求項5】

請求項１～４のいずれかに記載の録音再生装置において、
前記操作手段は、
円環形状のタッチパネルと、
前記タッチパネルのいずれかの位置がタッチ操作された場合に、放射状に点灯するＬＥＤ群と、
を備える、録音再生装置。

【請求項6】

請求項１～５のいずれかに記載の録音再生装置において、さらに、
前記読出手段と前記第２指向性制御手段との間に、再生音声の音程を維持したまま再生スピードを可変とする可変手段
を備える、録音再生装置。

【請求項7】

複数のマイクロホンと、
指向性の方向を指定するためのタッチパネルと、
前記複数のマイクロホンで収音したオーディオ信号を処理してオーディオデータとしてメモリに記録する録音モジュールと、前記メモリに記録されたオーディオデータを再生して出力する再生モジュールを備えたデジタルシグナルプロセッサと、
を備え、
前記録音モジュールは、前記オーディオ信号に対して前記タッチパネルで指定された第１方向に指向性を制御し、さらにエフェクト処理を施したオーディオデータを指向性制御処理後データとして前記メモリに記録し、かつ、前記指向性を制御せず、さらにエフェクト処理を施していないオーディオデータを指向性制御処理前データとして前記メモリに前記指向性制御処理後データと関連付けて自動的に記録し、
前記再生モジュールは、前記メモリに記録された前記指向性制御処理後データを再生出力し、かつ、ユーザからの切替操作に応じ、前記メモリに記録された前記指向性制御処理前データに対して再生時に前記タッチパネルで指定された、前記第１方向とは異なる第２方向に指向性を制御し、さらにエフェクト処理を施して切替再生出力する、
録音再生装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、録音再生装置に関する。

【背景技術】

【0002】

従来から、会議や講演会用、あるいは語学学習用等に音声を録音して再生する録音再生装置が開発されている。

【0003】

特許文献１には、マイクアレイ装置により収音された音声を用いて所定方向の音声を強調処理した後に音声の音量を調整し、強調処理の前後における音量の大きな差異の発生を抑制し、ユーザへの利便性を向上させる技術が記載されている。

【0004】

特許文献２には、複数のマイクからなるマイクロホンアレイと、マイクロホンアレイを構成する個々のマイクロホンからの入力音響信号を、マイクロホン毎に保持する複数の保持手段と、位置情報を入力する入力手段と、保持された複数チャンネルの音響信号を用いて取得位置方向へ音響的なフォーカスを行うフォーカス手段を備える技術が記載されている。

【先行技術文献】

【特許文献】

【0005】

【文献】特許第６２０２２７７号

【文献】特開２００４－１８０１９７号公報

【発明の概要】

【発明が解決しようとする課題】

【0006】

会議や講演会等で音声を録音する際に、指向性を制御して録音することが望ましいが、指向性を誤って制御してしまう場合や、当初狙った方向とは異なる方向の音声を後から再生したい場合もある。特に、後者の場合では、再生時にユーザが録音時の指向性方向とは別に所望の指向性の方向を選択でき、選択した指向性の方向にフォーカスされた音声を聞きたいと欲する場合が少なくない。

【0007】

本発明の目的は、録音時においてユーザが指向性方向を任意に選択してオーディオデータを録音でき、かつ再生時においてユーザが録音時の指向性方向とは別に所望の指向性の方向を選択してオーディオデータを再生し得る装置を提供することにある。

【課題を解決するための手段】

【0008】

本発明は、複数のマイクロホンと、指向性の方向を指定するための操作手段と、前記複数のマイクロホンで収音したオーディオ信号に対して、録音時に前記操作手段で指定された第１方向に強調処理する第１指向性制御手段と、前記第１指向性制御手段で処理された指向性制御処理後オーディオデータ、及び前記指向性制御手段で処理される前の指向性制御処理前オーディオデータをメモリに記録する記録手段と、前記メモリに記録された前記指向性制御処理後オーディオデータと、前記指向性制御処理前オーディオデータを読み出す読出手段と、前記指向性制御処理前オーディオデータが読み出された場合に、読み出された指向性制御処理前オーディオデータに対して、再生時に前記操作手段で指定された、前記第１方向とは異なる第２方向に強調処理する第２指向性制御手段と、読み出された前記指向性制御処理後オーディオデータと、前記第２指向性制御手段で処理されたオーディオデータを選択的に再生する再生手段とを備える録音再生装置である。

【0009】

本発明の１つの実施形態では、前記指向性制御処理後オーディオデータは、エフェクト処理がなされたオーディオデータであり、前記指向性制御処理前オーディオデータは、前記エフェクト処理がなされていないオーディオデータである。

【0010】

本発明の他の実施形態では、前記再生手段は、前記第２指向性制御手段で処理されたオーディオデータを、前記指向性制御処理後オーディオデータのエフェクト処理に用いられるパラメータでエフェクト処理する。

【0011】

本発明のさらに他の実施形態では、前記指向性制御処理前オーディオデータは、アンビソニックのＡ－ＦｏｒｍａｔデータあるいはＢ－Ｆｏｒｍａｔデータである。

【0012】

本発明のさらに他の実施形態では、前記操作手段は、円環形状のタッチパネルと、前記タッチパネルのいずれかの位置がタッチ操作された場合に、放射状に点灯するＬＥＤ群とを備える。また、前記読出手段と前記第２指向性制御手段との間に、再生音声の音程を維持したまま再生スピードを可変とする可変手段（ＶＳＡ）をさらに備えてもよい。

【0013】

また、本発明は、複数のマイクロホンと、指向性の方向を指定するためのタッチパネルと、前記複数のマイクロホンで収音したオーディオ信号を処理してオーディオデータとしてメモリに記録する録音モジュールと、前記メモリに記録されたオーディオデータを再生して出力する再生モジュールを備えたデジタルシグナルプロセッサと、を備え、前記録音モジュールは、前記オーディオ信号に対して前記タッチパネルで指定された第１方向に指向性を制御し、さらにエフェクト処理を施したオーディオデータを指向性制御処理後データとして前記メモリに記録し、かつ、前記指向性を制御せず、さらにエフェクト処理を施していないオーディオデータを指向性制御処理前データとして前記メモリに前記指向性制御処理後データと関連付けて自動的に記録し、前記再生モジュールは、前記メモリに記録された前記指向性制御処理後データを再生出力し、かつ、ユーザからの切替操作に応じ、前記メモリに記録された前記指向性制御処理前データに対して再生時に前記タッチパネルで指定された、前記第１方向とは異なる第２方向に指向性を制御し、さらにエフェクト処理を施して切替再生出力する録音再生装置である。

【発明の効果】

【0014】

本発明によれば、録音時においてユーザが指向性方向を任意に選択してオーディオデータを録音でき、かつ再生時においてユーザが録音時の指向性方向とは別に所望の指向性の方向を選択してオーディオデータを再生することができる。

【図面の簡単な説明】

【0015】

【図1A】実施形態の録音再生装置のある方向から見た斜視図である。

【図1B】実施形態の録音装置の別の方向から見た斜視図である。

【図2】実施形態の録音再生装置の模式的平面図である。

【図3】実施形態の録音再生装置の機能ブロック図である。

【図4】実施形態の録音再生装置の回路構成図である。

【図5】実施形態の録音時の処理フローチャートである。

【図6】実施形態の再生時の処理フローチャートである。

【図7】他の実施形態の回路構成図である。

【発明を実施するための形態】

【0016】

以下、図面に基づき本発明の実施形態について説明する。

【0017】

＜基本原理＞
まず、本実施形態の基本原理について説明する。

【0018】

本実施形態の録音再生装置は、複数のマイクロホンで収音した音声等のオーディオ信号のデータ（オーディオデータ）をメモリに記録して録音する際に、指向性制御後のオーディオデータと、指向性制御前のオーディオデータをともにメモリに記録する。ここで、指向性制御後のオーディオデータとは、オーディオ信号に対して特定の方向への指向性が形成された状態のオーディオデータを意味する。ユーザは、操作手段を操作することで所望の指向性方向を指定することができる。指向性制御手段は、複数のマイクロホンで収音されたオーディオ信号に対し、ユーザにより指定された指向性の方向を強調処理することで指向性制御後のオーディオデータを出力する。指向性制御自体は公知であり、例えば遅延和方式により特定の方向へ強調処理する。また、指向性制御前のオーディオデータとは、オーディオ信号に対して特定の方向への指向性が形成されていない状態のオーディオデータを意味する。指向性制御前のオーディオデータには、指向性制御処理が全く施されていない「生の（ＲＡＷ）」オーディオデータの他、ある程度の処理は施されているものの特定の方向への指向性までは施されていない中間状態のオーディオデータが含まれる。

【0019】

アンビソニックは３次元空間の３６０度全ての音声を録音再生できる技術で、Ａ－ＦｏｒｍａｔとＢ－Ｆｏｒｍａｔがある。Ａ－Ｆｏｒｍａｔは、複数のマイクロホンが収音する音そのもののオーディオデータフォーマットであり、このオーディオデータに変換処理を施すことでＢ－Ｆｏｒｍａｔのオーディオデータが得られる。Ｂ－Ｆｏｒｍａｔのオーディオデータは、４個の音声トラックから構成される４チャンネルオーディオデータであり、それぞれのチャンネルはＷ，Ｘ，Ｙ，Ｚと呼ばれる。これらＷ，Ｘ，Ｙ，Ｚのチャンネルは、それぞれ以下のデータから構成される。
Ｗチャンネル:無指向成分
Ｘチャンネル:前後の広がり成分
Ｙチャンネル:左右の広がり成分
Ｚチャンネル:上下の広がり成分
本実施形態における指向性制御前のオーディオデータには、Ａ－ＦｏｒｍａｔのオーディオデータとＢ－Ｆｏｒｍａｔのオーディオデータのいずれも含まれ得る。

【0020】

他方、録音したオーディオデータを再生する際に、ユーザは、メモリに記録された指向性制御後のオーディオデータと、指向性制御前のオーディオデータを選択し得る。ユーザが指向性制御後のオーディオデータを選択した場合、当該指向性制御後のオーディオデータがメモリから読み出され、再生されてスピーカ等から音声出力される。再生出力される音声は、録音時にユーザにより指定された方向に強調処理された音声である。ユーザが指向性制御前のオーディオデータを選択した場合、当該指向性制御前のオーディオデータがメモリから読み出され、再生時においてユーザにより指定された指向性の方向を強調処理し、再生されてスピーカ等から音声出力される。再生出力される音声は、録音時とは別に、再生時にユーザにより指定された方向に強調処理された音声である。ユーザは、再生時において、操作手段を操作することで任意の指向性の方向を指定することができる。従って、あるタイミングでは第１の方向を指向性方向に指定して再生し、次のタイミングでは第１の方向と異なる第２の方向を指向性方向に指定して再生し、さらに別のタイミングでは第１、第２の方向と異なる第３の方向を指向性方向に指定して再生することができる。本実施形態では、再生時において録音時とは異なる指向性方向をリアルタイムで指定して再生し、再生音声をモニタすることが可能である。なお、再生時にユーザが指向性制御前のオーディオデータを選択した場合、選択されてから指向性制御前のオーディオデータを読み出すのではなく、指向性制御後のオーディオデータと指向性制御前のオーディオデータを並行して読み出してもよい。

【0021】

具体的には、ある会議での音声を録音するものとする。録音時には、録音再生装置の配置位置を基準として第１の方向に指向性を設定して録音する。このとき、メモリには第１の方向に指向性制御された指向性制御後のオーディオデータと、指向性制御前のオーディオデータがともに記録される。

【0022】

再生時に、ユーザはまず指向性制御後のオーディオデータを選択して再生する。このとき、第１の方向に指向性制御されているので、第１の方向に強調処理された音声が再生される。他方で、ユーザは再生時において第１の方向と異なる方向である第２の方向の音声を再生したいと欲する場合、指向性制御前のオーディオデータを選択し、操作手段を操作して第２の方向を指定する。すると、録音再生装置は、指向性制御前のオーディオデータに対して第２の方向の指向性制御処理を施し、第２の方向に強調処理された音声が再生される。さらに、ユーザは再生時において第１、第２の方向と異なる第３の方向の音声を再生したいと欲する場合、指向性制御前のオーディオデータを選択し、操作手段を操作して第３の方向を指定する。すると、録音再生装置は、指向性制御前のオーディオデータに対して第３の方向の指向性制御処理を施し、第３の方向に強調処理された音声が再生される。

【0023】

なお、本実施形態において、指向性制御前のオーディオデータをメモリに記録するのは、指向性制御後のオーディオデータに対して、新たに指向性制御処理を施すことができないからである。すなわち、本実施形態における指向性制御前のオーディオデータは、単に、指向性制御後のオーディオデータが何らかの理由で破損した場合のバックアップデータとして機能するのではなく、録音時とは別に指向性制御を施すためのベースとなるオーディオデータとしての技術的意義がある。

【0024】

＜構成＞
次に、本実施形態における録音再生装置の構成について説明する。

【0025】

図１Ａ及び図１Ｂは、本実施形態における録音再生装置１０の斜視図を示す。図１Ａは、ある方向から見た斜視図であり、図１Ｂは図１Ａと異なる方向（反対方向）から見た斜視図である。

【0026】

録音再生装置１０は、外観形状が略円柱状をなし、上部にはタッチパネル１２が設けられ、複数のマイクロホン１４（１４ａ、１４ｂ、１４ｃ、１４ｄ）が内蔵される。下部は基台１１として底面が会議室のテーブル面等に載置される。

【0027】

上部のタッチパネル１２は、略円形状をなし、各種の状態が表示される。各種の状態には、ステレオ、３６０度、フォーカス、ボリューム等が含まれる。ここで、３６０度は、無指向性状態を示し、フォーカスは、指向性状態を示す。また、タッチパネル１２の外側円環部には、中心から外側に向けて放射状にＬＥＤ群が配置される。

【0028】

タッチパネル１２は、本実施形態における操作手段として機能する。ユーザは、所望の指向性の方向を指定する際には、外側円環部の任意の位置をタッチする。ユーザによるタッチ操作は、下部の基台に設けられた信号処理部で検出される。より詳細には、タッチパネル１２内に実装されたマイコンでタッチ操作を検出して検出信号を基台１１の信号処理部に出力し、信号処理部で当該検出信号を受信して処理するが、本実施形態では、タッチパネル１２に実装されたマイコンも含めて信号処理部でタッチ操作を検出するものとして説明する。

【0029】

下部の基台１１には、電源スイッチ、録音スイッチ、再生スイッチ、停止スイッチ等の各種操作スイッチ、メニューボタン、エンターボタン等の各種操作ボタンが設けられる。また、ＵＳＢコネクタやイヤホンジャック、メモリスロット等の各種コネクタも設けられる。メモリスロットは、例えばＳＤメモリを装着するスロットであるが、これに限定されず、任意の記録媒体が用いられ得る。さらに、下部の基台には、複数のマイクロホンで収音されたオーディオ信号を処理する信号処理部が設けられる。

【0030】

ユーザは、会議室のテーブル等に録音再生装置１０を載置し、電源スイッチをオンして録音再生装置１０を起動する。そして、録音スイッチをオンして録音を開始する。無指向状態で録音する場合、ユーザはタッチパネル１２の外側円環部にタッチすることなく、デフォルト状態を維持する。録音再生装置１０は、デフォルト状態では複数のマイクロホン１４（１４ａ、１４ｂ、１４ｃ、１４ｄ）で収音したオーディオデータに対し、指向性制御処理を施すことなくメモリに記録する。このとき、無指向状態であることを示す「３６０度」のＬＥＤが点灯する。

【0031】

他方、ユーザが特定の方向の音声を強調したい、例えば会議において特定の方向に位置する話者の音声を強調したいと欲する場合、ユーザは、録音再生装置１０の載置位置を基準とした当該方向に対応するタッチパネル１２の外側円環部をタッチする。信号処理部は、ユーザの当該タッチを検知し、タッチ方向の指向性制御を施してメモリに記録する。ユーザが外側円環部をタッチすると、タッチした位置のＬＥＤ群が点灯することで指向性方向が視認できる。

【0032】

図２は、ユーザがタッチパネル１２の外側円環部をタッチ操作する場合を模式的に示す。複数のマイクロホン１４として、４つのマイクロホン１４ａ，１４ｂ，１４ｃ，１４ｄが録音再生装置１０の上部に内蔵される。４つのマイクロホン１４ａ，１４ｂ，１４ｃ，１４ｄの配置位置は、正三角形の頂点位置及び重心位置であるが、これに限定されない。４つのマイクロホン１４ａ，１４ｂ，１４ｃ，１４ｄのいずれかを高域用、その他を中低域用としてもよい。４つのマイクロホン１４ａ，１４ｂ，１４ｃ，１４ｄは、例えば無指向性のコンデンサマイクロホンで構成されるが、これに限定されない。

【0033】

ユーザが、タッチパネル１２の外側円環部の特定部位を指１００でタッチすると、信号処理部はこのタッチ操作を検知し、タッチ位置に配置された放射線状のＬＥＤ群１３を点灯させる。そして、タッチ方向を指向性の方向として４つのマイクロホン１４ａ，１４ｂ，１４ｃ，１４ｄで収音したオーディオデータの指向性制御処理を施す。ユーザが指１００で別の位置をタッチすると、信号処理部はこのタッチ操作を検知し、タッチ位置に配置された放射線状の別のＬＥＤ群を点灯させる。そして、タッチ方向を指向性の方向として４つのマイクロホン１４ａ，１４ｂ，１４ｃ，１４ｄで収音したオーディオデータの指向性制御処理を施す。放射状に配置されたＬＥＤ群を点灯することで、録音再生装置１０を操作するユーザのみならず、それ以外の会議等の参加者もいまどの方向に指向性が制御されているかを容易に視認し得る。

【0034】

図３は、本実施形態における録音再生装置１０の機能ブロック図を示す。録音再生装置１０は、タッチパネル１２と、４つのマイクロホン１４ａ，１４ｂ，１４ｃ，１４ｄと、信号処理部１６と、記録再生部２２を備える。なお、これ以外にも電源スイッチや録音スイッチ、ＵＳＢコネクタ等の各種スイッチやボタン、コネクタ、インターフェイスが設けられているが、これらについては図示を省略する。

【0035】

信号処理部１６は、録音モジュール１８と再生モジュール２０を備える。録音モジュール１８は、Ａ／Ｄ変換部、ビームフォーミング部、及びエフェクト部を備え、４つのマイクロホン１４ａ，１４ｂ，１４ｃ，１４ｄで収音したオーディオ信号をデジタル化してオーディオデータに変換し、指向性制御処理及びエフェクト処理を実行して記録再生部２２に出力する。指向性制御処理は、ビームフォーミング部で実行され、４つのマイクロホン１４ａ，１４ｂ，１４ｃ，１４ｄからのオーディオデータをＢ－Ｆｏｒｍａｔ、すなわち
Ｗチャンネル:無指向成分
Ｘチャンネル:前後の広がり成分
Ｙチャンネル:左右の広がり成分
Ｚチャンネル:上下の広がり成分
の４チャンネルのオーディオデータに変換し、さらにこれらのオーディオデータに対して指向性を形成する。具体的には、信号処理部１６は、タッチパネル１２でのユーザのタッチ位置を検知し、タッチ位置に応じて指向性の方向を決定する。ビームフォーミング部は、例えば決定された当該指向性の方向に基づいて４つのマイクロホン１４ａ，１４ｂ，１４ｃ，１４ｄにおける到達時間差に対応する遅延時間を付与し、遅延処理されたオーディオデータを加算して指向性を形成する。エフェクト部は、ビームフォーミング部で指向性制御されたオーディオデータに対して、各種のエフェクト処理を施す。エフェクト処理には、リミット処理、フィルタリング処理、イコライジング処理等が含まれる。

【0036】

録音モジュール１８は、指向性制御し、エフェクト処理したオーディオデータを指向性制御処理後データとして記録再生部２２に出力する。

【0037】

また、録音モジュール１８は、上記の指向性制御処理及びエフェクト処理と並行して、指向性制御処理しないオーディオデータ、すなわちＡ－ＦｏｒｍａｔデータあるいはＢ－Ｆｏｒｍａｔデータを指向性制御処理前データとして記録再生部２２に出力する。なお、指向性制御処理前データは、エフェクト処理部でエフェクト処理も施されない。すなわち、録音モジュール１８は、指向性制御処理及びエフェクト処理を実行することなくＡ－ＦｏｒｍａｔデータあるいはＢ－Ｆｏｒｍａｔデータを指向性制御処理前データとして記録再生部２２に出力する。

【0038】

録音モジュール１８における当該並行処理は、ユーザ操作とは独立して自動実行される。従って、録音時には、録音モジュール１８は常に、指向性制御処理前データと指向性制御処理後データを記録再生部２２に出力する。また、録音モジュール１８は、録音時にユーザが無指向状態でのオーディオデータの録音を指定した場合にも、指向性制御処理前データを自動的に記録再生部２２に出力する。このとき、指向性制御前データと指向性制御後データの相違は、エフェクト処理の有無となる。

【0039】

記録再生部２２は、メモリスロット、及び当該メモリスロットに装着されたＳＤメモリ等の記録媒体にデータを書き込む書込回路を備える。書込回路は、録音モジュール１８から出力された指向性制御前データ２４及び指向性制御後データ２６をメモリスロットに装着されたＳＤメモリ等に書き込むことでＳＤメモリに記録する。書込回路は、指向性制御前データ２４と指向性制御後データ２６をメモリに書き込んで記録する際に、これら２つのデータをペアとして書き込む。すなわち、指向性制御前データ２４と指向性制御後データ２６とを互いに関連付けてメモリに書き込む。このように、指向性制御前データ２４と指向性制御後データ２６を互いに関連付けてメモリに書き込んで記録するのは、指向性制御後データ２６の再生がユーザにより操作された場合に、当該指向性制御後データ２６とペアをなす指向性制御前データ２４を容易に識別して読み出すことができるようにするためである。

【0040】

また、記録再生部２２は、メモリに記録されたデータを読み出す読出回路を備える。読出回路は、ユーザによる再生ファイルの選択・決定操作及びこれに続く再生スイッチの操作に応じて、メモリに記録されユーザにより指定されたファイルの指向性制御後データ２６を読み出して再生モジュール２０に出力する。

【0041】

再生モジュール２０は、読出回路で読み出された指向性制御後データ２６を再生してイヤホンジャックやスピーカに出力する。

【0042】

他方、ユーザが指向性制御後データ２６の再生中に、録音時の指向性方向とは別の指向性方向に制御された音声を聞きたいと欲する場合、指向性制御前データ２４の再生に切り替えるとともに、タッチパネル１２をタッチして指向性の方向を指定する。

【0043】

記録再生部２２の読出回路は、ユーザによる当該切替操作に応じ、今までメモリから読み出していた指向性制御後データ２６に関連付けられた指向性制御前データ２４を読み出し、再生モジュール２０に出力する。

【0044】

再生モジュール２０は、読出回路で読み出された指向性制御前データ２４に対して、指向性制御処理及びエフェクト処理を実行し、再生してイヤホンジャックやスピーカに出力する。すなわち、再生モジュール２０は、ビームフォーミング部、エフェクト部、及びＤ／Ａ変換部を備え、指向性制御前データ２４に対して指向性制御処理及びエフェクト処理を実行し、さらにＤ／Ａ変換部でアナログオーディオ信号に変換してスピーカ等に出力する。再生モジュール２０におけるビームフォーミング部は、録音モジュール１８におけるビームフォーミング部と同様に、タッチパネル１２でのユーザのタッチ位置に応じて例えば決定された指向性の方向に基づいて４つのマイクロホン１４ａ，１４ｂ，１４ｃ，１４ｄにおける到達時間差に対応する遅延時間を付与し、遅延処理されたオーディオデータを加算して指向性を形成する。再生モジュール２０におけるエフェクト部は、録音モジュール１８におけるエフェクト部と同様に、ビームフォーミング部で指向性制御されたオーディオデータに対して、各種のエフェクト処理を施す。エフェクト処理には、リミット処理、フィルタリング処理、イコライジング処理等が含まれる。

【0045】

本実施形態における録音モジュール１８及び再生モジュール２０は、それぞれビームフォーミング部及びエフェクト部を備えているが、これらを共通化してもよい。すなわち、録音時には録音モジュール１８が共通化されたビームフォーミング部及びエフェクト部を用いて指向性制御処理及びエフェクト処理を実行して指向性制御後データを生成してメモリに記録し、再生時には再生モジュール２０が共通化されたビームフォーミング部及びエフェクト部を用いて指向性制御処理及びエフェクト処理を実行して指向性制御前データを生成して再生してもよい。

【0046】

また、再生モジュール２０のエフェクト処理部でエフェクト処理を実行する場合、処理対象である指向性制御前データ２４に関連付けられた指向性制御後データ２６のエフェクト処理と同様のエフェクト処理を行うことが望ましい。このため、録音時におけるエフェクト処理の各種パラメータ２５を指向性制御前データ２４及び指向性制御後データ２６と関連付けて記録再生部２２の記録媒体に記録しておき、再生モジュール２０のエフェクト処理部でエフェクト処理を実行する際に記録媒体から当該パラメータ２５を読み出してエフェクト処理を実行してもよい。これにより、指向性制御後データ２６と指向性制御前データ２４の切替時の聴感的な差を軽減し得る。

【0047】

図４は、本実施形態における録音再生装置１０の具体的な回路構成を示す。信号処理部１６は、オーディオコーデック１５及びＤＳＰ（デジタルシグナルプロセッサ）１７から構成される。マイクロホン１４ａ～１４ｄは、オーディオコーデック１５に接続される。

【0048】

オーディオコーデック１５は、マイクロホン１４ａ～１４ｄからのオーディオ信号を入力し、これらのアナログオーディオ信号をデジタル化してオーディオデータに変換し、ＤＳＰ１７に出力する。また、オーディオコーデック１５は、ＤＳＰ１７で再生されたステレオオーディオデータ（ＰＨＯＮＥＬ，Ｒ）をアナログ化してオーディオ信号に変換して出力する。

【0049】

ＤＳＰ１７は、ビームフォーミング部及びエフェクト部を備える。ビームフォーミング部として、ビームフォーミングモジュール１８ａを備える。また、エフェクト部として、エフェクト処理部１８ｂを備える。

【0050】

ビームフォーミングモジュール１８ａ、及びエフェクト処理部１８ｂは互いに直列接続される。

【0051】

ビームフォーミングモジュール１８ａは、遅延器及び加算器を備え、オーディオコーデック１５からのオーディオデータを入力し、これらのオーディオデータ（Ａ－Ｆｏｒｍａｔデータ）を４チャンネルのＢ－Ｆｏｒｍａｔデータに変換する。そして、Ｂ－Ｆｏｒｍａｔデータに対し、例えば遅延器及び加算器を用いて遅延和方式の演算でユーザにより指定された指向性方向への指向性制御処理を行い、２チャンネル（Ｌチャンネル及びＲチャンネル）のオーディオデータをエフェクト処理部１８ｂに出力する。また、ビームフォーミングモジュール１８ａは、４チャンネルのＢ－Ｆｏｒｍａｔデータを、指向性制御処理を施すことなくＢ－Ｆｏｒｍａｔの１－２ｃｈ及びＢ－Ｆｏｒｍａｔの３－４ｃｈとして記録再生部２２に出力する。

【0052】

エフェクト処理部１８ｂは、各種のエフェクト処理、具体的にはリミット処理、イコライジング処理、ディエッサ処理等を実行する。リミット処理では、ビームフォーミングモジュール１８ａで指向性制御されたオーディオデータに対し、その音量レベルが予め設定した閾値を超えた場合に、音量レベルを絞ることで過大な信号レベルとならないように抑制する。イコライジング処理では、リミット処理で音量レベル調整されたオーディオデータに対し、特定の周波数帯域を強調あるいは減衰処理する。イコライジング処理には、ノイズの多い高周波成分をカットするフィルタ処理も含まれる。ディエッサ処理では、イコライジング処理されたオーディオデータに対し、高周波領域に特化して圧縮処理する。

【0053】

ビームフォーミングモジュール１８ａ、及びエフェクト処理部１８ｂにより指向性制御処理され、さらにエフェクト処理された２チャンネルのオーディオデータは、マスター信号（ＭＡＳＴＥＲＬ及びＭＡＳＴＥＲＲ）として記録再生部２２に出力される。

【0054】

記録再生部２２の書込回路は、指向性制御処理後のデータとしてのマスター信号（ＭＡＳＴＥＲ Ｌ及びＭＡＳＴＥＲ Ｒ）、指向性制御処理前のデータとしてのＢ－Ｆｏｒｍａｔ１－２ｃｈ、Ｂ－Ｆｏｒｍａｔ３－４ｃｈをＳＤメモリ等に書き込むことで記録する。

【0055】

なお、エフェクト処理部１８ｂでは、オーディオデータにジェネレータから出力された、位置合わせにおいて基準となるスレートトーンを付加して記録再生部２２に出力してもよい。

【0056】

また、スレートトーンが付加されたマスター信号は、記録再生部２２に出力されるとともに出力信号（ＯＵＴＰＵＴ Ｌ及びＯＵＴＰＵＴ Ｒ）としてＵＳＢコネクタ２３に出力される。

【0057】

他方、再生モジュール２０は、ビームフォーミングモジュール２０ａ、及びエフェクト処理部２０ｂを備える。ビームフォーミングモジュール２０ａ、及びエフェクト処理部２０ｂは互いに直列接続される。

【0058】

ビームフォーミングモジュール２０ａは、記録再生部２２の読出回路でメモリから読み出されたＢ－Ｆoｒｍａｔ１－２ｃｈ及びＢ－Ｆｏｒｍａｔ３－４ｃｈを入力し、ユーザにより指定された指向性方向への指向性制御処理を行い、２チャンネル（Ｌチャンネル及びＲチャンネル）のオーディオデータをエフェクト処理部２０ｂに出力する。

【0059】

エフェクト処理部２０ｂは、各種エフェクト処理、すなわちリミット処理、イコライジング処理、ディエッサ処理等を実行する。

【0060】

エフェクト処理部２０ｂでのエフェクト処理は、基本的にはエフェクト処理部１８ｂでのエフェクト処理と同様であり、エフェクト処理部１８ｂでのエフェクト処理に用いられた各種パラメータ２５を記録再生部２２の記録媒体から読み出して援用する。勿論、エフェクト処理部２０ｂでのエフェクト処理を、エフェクト処理部１８ｂでのエフェクト処理と異なるものとしてもよい。エフェクト処理部２０ｂは、指向性制御処理され、エフェクト処理されたオーディオデータを切替スイッチ２０ｅに出力する。

【0061】

また、記録再生部２２の読出回路でメモリから選択的に読み出されたマスター信号（ＭＡＳＴＥＲ Ｌ及びＭＡＳＴＥＲ Ｒ）は、ビームフォーミングモジュール２０ａ、エフェクト処理部２０ｂを経ることなく切替スイッチ２０ｅに出力される。

【0062】

切替スイッチ２０ｅは、ユーザ操作に応じ、指向性制御処理及びエフェクト処理されたオーディオデータと、マスター信号のいずれかを「録音」と「再生」に切り替えて出力する。「録音」に切り替えた場合、当該オーディオデータとマスター信号のいずれかをＵＳＢコネクタ２３に出力する。また、「再生」に切り替えた場合、当該オーディオデータとマスター信号のいずれかをイヤホンジャック（ＰＨＯＮＥ Ｌ及びＰＨＯＮＥ Ｒ）あるいはスピーカに出力する。

【0063】

＜処理フローチャート＞
図５は、本実施形態の録音再生装置１０における録音時の処理フローチャートを示す。
ユーザが電源スイッチをオンし、録音スイッチをオンすると、４つのマイクロホン１４ａ，１４ｂ，１４ｃ，１４ｄから音声信号を入力して収音し、信号処理部１６に出力する（Ｓ１０１）。

【0064】

信号処理部１６は、４つのマイクロホン１４ａ，１４ｂ，１４ｃ，１４ｄからのアナログオーディオ信号をデジタルオーディオデータに変換し、ユーザがタッチパネル１２の外側円環部をタッチすることで指定した方向の指向性制御処理を実行する（Ｓ１０２）。このとき、信号処理部１６は、
・ユーザによるタッチパネル１２のタッチ位置検出
・タッチ位置に対応する放射状のＬＥＤ群の点灯
・タッチ位置に応じた指向性方向の決定
・決定された指向性方向に応じた強調処理
・指向性制御されていることを示すＬＥＤの点灯
の各処理を実行する。ユーザがタッチパネル１２の外側円環部をタッチしない場合、信号処理部１６は、デフォルト状態である無指向状態（３６０度）の録音を行うため、Ｓ１０２の処理は実行しない。

【0065】

次に、信号処理部１６は、指向性制御処理されたオーディオデータ（あるいはユーザがタッチしないためデフォルト状態の無指向性のオーディオデータ）に対してエフェクト処理を実行する（Ｓ１０３）。指向性制御されエフェクト処理されたオーディオデータは、指向性制御処理後データとして記録再生部２２に出力し、記録再生部２２の書込回路は、当該指向性制御処理後データをメモリに記録する（Ｓ１０４）。

【0066】

また、Ｓ１０２～Ｓ１０４の処理と並行して、信号処理部１６は、指向性制御処理していないオーディオデータ、具体的にはＡ－ＦｏｒｍａｔデータあるいはＢ－Ｆｏｒｍａｔデータを指向性制御処理前データとして記録再生部２２に出力し、記録再生部２２の書込回路は、当該指向性制御処理前データをメモリに記録する（Ｓ１０５）。

【0067】

図６は、本実施形態の録音再生装置１０における再生時の処理フローチャートを示す。

【0068】

ユーザが再生スイッチをオンすると、デフォルト状態では記録再生部２２の読出回路は、メモリから指向性制御処理後データを読み出して信号処理部１６に出力する（Ｓ２０１）。

【0069】

信号処理部１６は、読み出された指向性制御処理後データを再生して出力する（Ｓ２０２）。

【0070】

他方、信号処理部１６は、ユーザからの切替操作があったか否かを判定する（Ｓ２０２）。ユーザからの切替操作がない場合は、指向性制御処理後データの再生出力をそのまま実行し続ける（Ｓ２０３でＮＯ）。

【0071】

ユーザからの切替操作があった場合（Ｓ２０３でＹＥＳ）、記録再生部２２の読出回路は、Ｓ２０１で読み出した指向性制御処理後データと関連付けられて記録された指向性制御処理前データをメモリから読み出して信号処理部１６に出力する（Ｓ２０４）。

【0072】

信号処理部１６は、読み出された指向性制御処理前データに対して指向性制御処理を実行する（Ｓ２０５）。このとき、信号処理部１６は、録音時と同様に、
・ユーザによるタッチパネル１２のタッチ位置検出
・タッチ位置に対応する放射状のＬＥＤ群の点灯
・タッチ位置に応じた指向性方向の決定
・決定された指向性方向に応じた強調処理
・指向性制御されていることを示すＬＥＤの点灯
の各処理を実行する。

【0073】

次に、信号処理部１６は、指向性制御処理されたオーディオデータに対してエフェクト処理を実行する（Ｓ２０６）。指向性制御されエフェクト処理されたオーディオデータは、再生出力される（Ｓ２０７）。

【0074】

以上のようにして、ユーザは、録音時に指向性制御されてメモリに記録されたオーディオデータを再生してその音声を聴くことができるとともに、録音時の指向性方向と異なる指向性方向で聴きたい場合には、再生時に改めてタッチパネル１２を操作して指向性方向を指定することで、所望の指向性制御された音声を聴くことができる。録音再生装置１０を基準として再生時に特定方向に位置する話者の発言を特に強調して再生したい場合等に有効である。

【0075】

＜他の実施形態＞
本実施形態では、ユーザがタッチパネル１２の外側円環部をタッチすることで指向性方向を指定しているが、有線あるいは無線で録音再生装置１０とデータ送受信可能に接続されたＰＣやタブレット端末、あるいはスマートフォン等を用い、これらの情報端末にインストールされたアプリケーションにより、録音再生装置１０を基準とする３次元座標系において所望の位置を３次元座標で指定することで指向性方向を指定してもよい。

【0076】

また、本実施形態において、再生音声の音程を維持したまま再生スピードを可変とするＶＳＡ（Ｖａｒｉａｂｌｅ Ｓｐｅｅｄ Ａｕｄｉｔｉｏｎ）機能を搭載してもよい。

【0077】

図７は、ＶＳＡ機能を搭載した場合の録音再生装置１０の回路構成図である。図４と異なる点は、記録再生部２２と再生モジュール２０との間に、ＶＳＡモジュール２０ｇが設けられている点である。ユーザは、再生コントロール画面が基台に表示されているときに＋ボタンあるいは－ボタンを操作して再生スピードを増減する。ＶＳＡモジュール２０ｇは、当該ユーザ操作に応じて再生速度を増減調整する。

【0078】

なお、ＶＳＡモジュール２０ｇは、記録再生部２２と再生モジュール２０の間ではなく、再生モジュール２０の後段に設けることも可能であるが、この場合には、ＶＳＡモジュール２０ｇの前にオーディオデータを保持しておくための別メモリが必要となるため部品点数が増大する（これに対し、再生モジュール２０の前段に設ける場合にはその必要がない）。従って、部品点数の削減及びコスト削減の観点からは、図７のように再生モジュール２０の前段にＶＳＡモジュール２０ｇを設けるのが望ましい。

【符号の説明】

【0079】

１０ 録音再生装置、１１ 基台、１２ タッチパネル、１３ ＬＥＤ群、１４，１４ａ，１４ｂ，１４ｃ，１４ｄ マイクロホン、１６ 信号処理部、１８ 録音モジュール、２０ 再生モジュール、２２ 記録再生部、２４ 指向性制御処理前データ、２５ エフェクト処理パラメータ、２６ 指向性制御処理後データ。

【図1A】

【図1B】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】