知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024064129
(43)【公開日】2024-05-14
(54)【発明の名称】映像音声同期方法及び再生装置
(51)【国際特許分類】
H04N 21/44 20110101AFI20240507BHJP
H04N 21/436 20110101ALI20240507BHJP
H04N 5/93 20060101ALI20240507BHJP
【ＦＩ】
H04N21/44
H04N21/436
H04N5/93
【審査請求】未請求
【請求項の数】5
【出願形態】ＯＬ
(21)【出願番号】P 2022172491
(22)【出願日】2022-10-27
(71)【出願人】
【識別番号】000001487
【氏名又は名称】フォルシアクラリオン・エレクトロニクス株式会社
(74)【代理人】
【識別番号】110001081
【氏名又は名称】弁理士法人クシブチ国際特許事務所
(72)【発明者】
【氏名】大野 宣浩
【テーマコード（参考）】
5C053
5C164
【Ｆターム（参考）】
5C053HA01
5C053LA06
5C053LA11
5C053LA14
5C164FA16
5C164GA06
5C164MA02S
5C164MB01S
5C164PA41
5C164UB05P
5C164UB10S
5C164UB71P
5C164UD01S
(57)【要約】
【課題】音声出力機器に出力させる音声と、映像との同期の精度を向上させる映像音声同期方法を提供する。
【解決手段】映像及び音声を再生する車載装置１００が、外部のＢｌｕｅｔｏｏｔｈデバイス２００との間で、近距離無線通信によるペアリングを行うステップと、Ｂｌｕｅｔｏｏｔｈデバイス２００に出力する音声の圧縮方式を示すコーデック情報を含むリップシンクの遅延量の取得要求をサーバ装置３００に送信するステップと、音声データに基づく音声をＢｌｕｅｔｏｏｔｈデバイス２００に出力し、サーバ装置３００から受信する遅延量に基づいて映像データに基づく映像の再生タイミングを調整するステップと、を実行する車載制御部１７０を備える。
【選択図】図１
【解決手段】映像及び音声を再生する車載装置１００が、外部のＢｌｕｅｔｏｏｔｈデバイス２００との間で、近距離無線通信によるペアリングを行うステップと、Ｂｌｕｅｔｏｏｔｈデバイス２００に出力する音声の圧縮方式を示すコーデック情報を含むリップシンクの遅延量の取得要求をサーバ装置３００に送信するステップと、音声データに基づく音声をＢｌｕｅｔｏｏｔｈデバイス２００に出力し、サーバ装置３００から受信する遅延量に基づいて映像データに基づく映像の再生タイミングを調整するステップと、を実行する車載制御部１７０を備える。
【選択図】図１
【特許請求の範囲】
【請求項1】
映像及び音声を再生する再生装置が、
外部の音声出力機器との間で、近距離無線通信によるペアリングを行うステップと、
前記音声出力機器に出力する音声の圧縮方式を示すコーデック情報を含むリップシンクの遅延量の取得要求をサーバ装置に送信するステップと、
音声データに基づく音声を前記音声出力機器に出力し、前記サーバ装置から受信する遅延量に基づいて映像データに基づく映像の再生タイミングを調整するステップと、
を実行する、映像音声同期方法。
外部の音声出力機器との間で、近距離無線通信によるペアリングを行うステップと、
前記音声出力機器に出力する音声の圧縮方式を示すコーデック情報を含むリップシンクの遅延量の取得要求をサーバ装置に送信するステップと、
音声データに基づく音声を前記音声出力機器に出力し、前記サーバ装置から受信する遅延量に基づいて映像データに基づく映像の再生タイミングを調整するステップと、
を実行する、映像音声同期方法。
【請求項2】
前記再生装置が、
前記遅延量を変更する操作を受け付けるステップと、
前記操作により変更された遅延量である変更遅延量と、前記コーデック情報と、前記ペアリングした前記音声出力機器を識別する機器識別情報とを、前記サーバ装置に送信するステップと、を実行する、請求項１記載の映像音声同期方法。
前記遅延量を変更する操作を受け付けるステップと、
前記操作により変更された遅延量である変更遅延量と、前記コーデック情報と、前記ペアリングした前記音声出力機器を識別する機器識別情報とを、前記サーバ装置に送信するステップと、を実行する、請求項１記載の映像音声同期方法。
【請求項3】
前記サーバ装置が、
前記再生装置から受信する前記変更遅延量を、前記コーデック情報及び機器識別情報に対応づけて前記サーバ装置が備える記憶部に記憶するステップと、
前記コーデック情報及び機器識別情報に対応づけて記憶する前記変更遅延量の数が予め設定された設定数以上になると、前記変更遅延量に基づいて前記遅延量を補正した補正遅延量を決定するステップと、
決定した前記補正遅延量を、前記コーデック情報及び機器識別情報に対応づけて前記記憶部に記憶させるステップと、
前記再生装置から前記コーデック情報及び前記機器識別情報を含む前記遅延量の取得要求を受信すると、前記コーデック情報及び前記機器識別情報に対応する前記補正遅延量を前記記憶部から取得し、前記補正遅延量を前記再生装置に送信するステップと、
を備える、請求項２記載の映像音声同期方法。
前記再生装置から受信する前記変更遅延量を、前記コーデック情報及び機器識別情報に対応づけて前記サーバ装置が備える記憶部に記憶するステップと、
前記コーデック情報及び機器識別情報に対応づけて記憶する前記変更遅延量の数が予め設定された設定数以上になると、前記変更遅延量に基づいて前記遅延量を補正した補正遅延量を決定するステップと、
決定した前記補正遅延量を、前記コーデック情報及び機器識別情報に対応づけて前記記憶部に記憶させるステップと、
前記再生装置から前記コーデック情報及び前記機器識別情報を含む前記遅延量の取得要求を受信すると、前記コーデック情報及び前記機器識別情報に対応する前記補正遅延量を前記記憶部から取得し、前記補正遅延量を前記再生装置に送信するステップと、
を備える、請求項２記載の映像音声同期方法。
【請求項4】
前記補正遅延量を決定するステップは、
前記再生装置から受信する前記変更遅延量のうち、値が同一の前記変更遅延量の数が最も多い前記変更遅延量を第１補正遅延量として決定するステップと、
値が同一の前記変更遅延量の数が前記第１補正遅延量の次に多い前記変更遅延量を第２補正遅延量として決定するステップと、を含み、
前記補正遅延量を前記再生装置に送信するステップは、
前記再生装置から前記コーデック情報及び前記機器識別情報を含む前記遅延量の取得要求を受信すると、前記コーデック情報及び前記機器識別情報に対応する前記第１補正遅延量及び前記第２補正遅延量を前記再生装置に送信するステップである、請求項３記載の映像音声同期方法。
前記再生装置から受信する前記変更遅延量のうち、値が同一の前記変更遅延量の数が最も多い前記変更遅延量を第１補正遅延量として決定するステップと、
値が同一の前記変更遅延量の数が前記第１補正遅延量の次に多い前記変更遅延量を第２補正遅延量として決定するステップと、を含み、
前記補正遅延量を前記再生装置に送信するステップは、
前記再生装置から前記コーデック情報及び前記機器識別情報を含む前記遅延量の取得要求を受信すると、前記コーデック情報及び前記機器識別情報に対応する前記第１補正遅延量及び前記第２補正遅延量を前記再生装置に送信するステップである、請求項３記載の映像音声同期方法。
【請求項5】
映像及び音声を再生する再生装置であって、
外部の音声出力機器との間で、近距離無線通信によるペアリングを行うペアリング部と、
前記音声出力機器に出力する音声の圧縮方式を示すコーデック情報を含むリップシンクの遅延量の取得要求をサーバ装置に送信する通信制御部と、
音声データに基づく音声を前記音声出力機器に出力し、前記サーバ装置から受信する遅延量に基づいて映像データに基づく映像の再生タイミングを調整する再生制御部と、
を備える、再生装置。
外部の音声出力機器との間で、近距離無線通信によるペアリングを行うペアリング部と、
前記音声出力機器に出力する音声の圧縮方式を示すコーデック情報を含むリップシンクの遅延量の取得要求をサーバ装置に送信する通信制御部と、
音声データに基づく音声を前記音声出力機器に出力し、前記サーバ装置から受信する遅延量に基づいて映像データに基づく映像の再生タイミングを調整する再生制御部と、
を備える、再生装置。
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、映像音声同期方法及び再生装置に関する。
【背景技術】
【0002】
無線音声出力機器が出力する音声と、表示される映像との同期がずれていると、ユーザに不快感を与えるため、精度の高い映像と音声との同期再生方法が求められている。
特許文献１に開示された映像音声出力装置は、遅延時間検出手段と、音声信号遅延手段と、音声信号送信手段と、映像信号出力手段と、を備える。
遅延時間検出手段は、複数の無線音声出力機器に対して無線通信により基準音声信号を送信し、各無線音声出力機器から出力される音声を入力し、各無線音声出力機器の音声出力遅延時間を検出する。
音声信号遅延手段は、各無線音声出力機器の音声出力遅延時間のうちの最大遅延時間と各無線音声出力機器の音声出力遅延時間との差分時間相当だけ各無線音声出力機器へ送信する各音声信号を遅延する。
音声信号送信手段は、音声信号遅延手段により遅延された各音声信号を、無線通信により各無線音声出力機器に送信する。
映像信号出力手段は、音声信号に同期した映像信号を最大遅延時間相当だけ遅延して出力する。
特許文献１に開示された映像音声出力装置は、遅延時間検出手段と、音声信号遅延手段と、音声信号送信手段と、映像信号出力手段と、を備える。
遅延時間検出手段は、複数の無線音声出力機器に対して無線通信により基準音声信号を送信し、各無線音声出力機器から出力される音声を入力し、各無線音声出力機器の音声出力遅延時間を検出する。
音声信号遅延手段は、各無線音声出力機器の音声出力遅延時間のうちの最大遅延時間と各無線音声出力機器の音声出力遅延時間との差分時間相当だけ各無線音声出力機器へ送信する各音声信号を遅延する。
音声信号送信手段は、音声信号遅延手段により遅延された各音声信号を、無線通信により各無線音声出力機器に送信する。
映像信号出力手段は、音声信号に同期した映像信号を最大遅延時間相当だけ遅延して出力する。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特開２０１０－１１２７４号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
しかしながら、特許文献１に開示された技術では、検出された音声出力遅延時間と機器情報とが対応付けられて記憶されるが、初めて接続する無線音声出力機器については、音声出力の遅延時間の検出を省略することができず、ユーザの負担になっていた。
【0005】
本発明は上記事情に鑑みてなされたものであり、ユーザの負担を抑えつつ、無線音声出力機器が出力する音声との同期の精度を向上させる映像音声同期方法を提供することを目的とする。
【課題を解決するための手段】
【0006】
本開示は、映像及び音声を再生する再生装置が、外部の音声出力機器との間で、近距離無線通信によるペアリングを行うステップと、前記音声出力機器に出力する音声の圧縮方式を示すコーデック情報を含むリップシンクの遅延量の取得要求をサーバ装置に送信するステップと、音声データに基づく音声を前記音声出力機器に出力し、前記サーバ装置から受信する遅延量に基づいて映像データに基づく映像の再生タイミングを調整するステップと、を実行する、映像音声同期方法である。
【発明の効果】
【0007】
本発明によれば、ユーザの負担を抑えつつ、音声出力機器に出力させる音声と、再生する映像との同期の精度を向上させることができる。
【図面の簡単な説明】
【0008】
【図1】再生システムのシステム構成を示す図である。
【図2】第１遅延量テーブルの構成を示す図である。
【図3】第２遅延量テーブルの構成を示す図である。
【図4】選択画面の一例を示す図である。
【図5】車載装置の動作を示すフローチャートである。
【図6】車載装置の動作を示すフローチャートである。
【図7】サーバ装置の動作を示すフローチャートである。
【図8】サーバ装置の動作を示すフローチャートである。
【発明を実施するための形態】
【0009】
［１．再生システム１のシステム構成］
以下、図面を参照して本発明の実施形態について説明する。
図１は、再生システム１のシステム構成を示す図である。
再生システム１は、車両に搭載された車載装置１００と、サーバ装置３００とを備える。車載装置１００とサーバ装置３００とは、ネットワーク５０に接続される。車載装置１００は、再生装置に相当する。車載装置１００は、無線通信によりネットワーク５０に接続され、サーバ装置３００は、有線によりネットワーク５０に接続される。
以下、図面を参照して本発明の実施形態について説明する。
図１は、再生システム１のシステム構成を示す図である。
再生システム１は、車両に搭載された車載装置１００と、サーバ装置３００とを備える。車載装置１００とサーバ装置３００とは、ネットワーク５０に接続される。車載装置１００は、再生装置に相当する。車載装置１００は、無線通信によりネットワーク５０に接続され、サーバ装置３００は、有線によりネットワーク５０に接続される。
【0010】
車載装置１００は、操作部１１０、表示部１２０、音声入力部１３０、音声出力部１４０、第１無線通信Ｉ／Ｆ１５０、第２無線通信Ｉ／Ｆ１６０及び車載制御部１７０を備える。
【0011】
操作部１１０は、ユーザの操作入力を受け付け、受け付けた操作に対応した操作信号を車載制御部１７０に出力する。操作部１１０は、例えば、キー、タッチセンサ、タッチパネルなどを含む入力装置によって実現することができる。
【0012】
表示部１２０は、車載制御部１７０の制御に従い、コンテンツ等の映像や、操作画面、通知などの様々な情報を表示する。表示部１２０は、例えば、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）、ＯＬＥＤ（Ｏｒｇａｎｉｃ Ｅｌｅｃｔｒｏ－Ｌｕｍｉｎｅｓｃｅｎｃｅ Ｄｉｓｐｌａｙ）などを含む表示装置である。
【0013】
音声入力部１３０は、ユーザの音声の入力を受け付け、音声信号を車載制御部１７０に出力する。音声入力部１３０は、例えば、マイクロフォンである。
【0014】
音声出力部１４０は、車載制御部１７０の制御に従い、音楽やコンテンツの音声、操作音、通知などを出力する。音声出力部１４０は、例えば、スピーカである。
【0015】
第１無線通信Ｉ／Ｆ１５０は、例えば、Ｂｌｕｅｔｏｏｔｈ（登録商標）等の近距離無線通信の通信規格に対応したインターフェイス回路を備える無線通信デバイスである。
【0016】
第２無線通信Ｉ／Ｆ１６０は、アンテナ及びインターフェイス回路を含む通信モジュールを備え、ネットワーク５０を介してサーバ装置３００と相互にデータ通信を行う。第２無線通信Ｉ／Ｆ１６０の通信方式には、例えば、４Ｇ（Ｇｅｎｅｒａｔｉｏｎ）、５Ｇ、ＬＴＥ（Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）等の移動体通信網を利用した通信規格、又は、Ｗｉ－Ｆｉ（登録商標）等の無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）等の無線通信規格が採用される。
【0017】
車載制御部１７０は、記憶部１８０と、プロセッサ１９０と、を備えるコンピュータ装置であり、車載装置１００の処理動作を統括的に制御する。
【0018】
記憶部１８０は、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）といった揮発性メモリと、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）といった不揮発性メモリと、を備える。この他に、記憶部１８０は、ＳＤカードや、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）メモリ、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）等の補助記憶装置を不揮発性メモリとして備えてもよい。
【0019】
ＲＡＭは、プロセッサ１９０の演算領域として使用される。ＲＯＭは、プロセッサ１９０が実行する制御プログラム１８１や、コンテンツデータ１８３、車載装置１００の各種の設定に関するデータである設定データ１８５を記憶する。コンテンツデータ１８３は、映像データ及び音声データを含むデータである。
【0020】
プロセッサ１９０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）や、ＭＰＵ（Ｍｉｃｒｏ Ｐｒｏｃｅｓｓｏｒ Ｕｎｉｔ）により構成される。プロセッサ１９０は、単一のプロセッサにより構成してもよいし、複数のプロセッサにより構成してもよい。
【0021】
プロセッサ１９１は、機能ブロックとして、ペアリング部１９１、通信制御部１９３、再生制御部１９５を備える。これらの機能ブロックは、プロセッサ１９０が、制御プログラム１８１を実行することで実現される機能である。
【0022】
ペアリング部１９１は、Ｂｌｕｅｔｏｏｔｈデバイス２００とのペアリングを実行する。本実施形態では、ペアリングしたＢｌｕｅｔｏｏｔｈデバイス２００が、Ｂｌｕｅｔｏｏｔｈイヤホン２００Ａである場合について説明するが、Ｂｌｕｅｔｏｏｔｈデバイス２００は、Ｂｌｕｅｔｏｏｔｈによる通信機能を備えるデバイスであればよい。Ｂｌｕｅｔｏｏｔｈイヤホン２００Ａは、音声出力機器に相当する。
【0023】
ペアリング部１９１は、ペアリングしたＢｌｕｅｔｏｏｔｈイヤホン２００Ａから、Ｂｌｕｅｔｏｏｔｈイヤホン２００Ａを識別するデバイス識別情報を取得する。デバイス識別情報には、例えば、型番や、機種名等が用いられる。
【0024】
また、ペアリング部１９１は、Ｂｌｕｅｔｏｏｔｈイヤホン２００Ａに出力する音声を圧縮するコーデックを決定する。コーデックとは、例えば、ＳＢＣや、ＡＡＣ、ａｐｔＸ、ＬＤＡＣ等の音声データの圧縮変換方式を示す。ペアリング部１９１は、Ｂｌｕｅｔｏｏｔｈイヤホン２００Ａが対応可能であり、かつ、車載装置１００が対応可能なコーデックのうち、音質等に基づいて決定した優先順位に従って、コーデックを決定する。
【0025】
通信制御部１９３は、第１無線通信Ｉ／Ｆ１５０を制御して、ペアリングされたＢｌｕｅｔｏｏｔｈイヤホン２００Ａと相互にデータ通信を行う。また、通信制御部１９３は、第２無線通信Ｉ／Ｆ１６０を制御して、ネットワーク５０に接続されたサーバ装置３００と相互にデータ通信を行う。
【0026】
再生制御部１９５は、操作部１１０により選択されたコンテンツデータ１８３を読み出し、読み出したコンテンツデータに含まれる音声データを読み出し、読み出した音声データを、ペアリング部１９１が決定したコーデックに従って圧縮する。再生制御部１９５は、圧縮した音声を、ペアリングされたＢｌｕｅｔｏｏｔｈイヤホン２００Ａに出力する。
【0027】
再生制御部１９５は、また、読み出したコンテンツデータに含まれる映像データを再生する。再生制御部１９５は、再生した映像データに基づく映像を表示部１２０に表示させる。このとき、再生制御部１９５は、サーバ装置３００から受信するリップシンクの遅延量に基づき、音声データに基づく音声がＢｌｕｅｔｏｏｔｈイヤホン２００Ａから出力されるタイミングと、映像データに基づく映像が表示部１２０に表示されるタイミングとを同期させる。
【0028】
次に、車載制御部１７０のペアリング時の動作について説明する。
まず、車載制御部１７０は、ペアリングの実行を指示する操作を操作部１１０により受け付けると、ペアリング可能なＢｌｕｅｔｏｏｔｈデバイス２００を検出し、検出したＢｌｕｅｔｏｏｔｈイヤホン２００Ａとのペアリングを実行する。
まず、車載制御部１７０は、ペアリングの実行を指示する操作を操作部１１０により受け付けると、ペアリング可能なＢｌｕｅｔｏｏｔｈデバイス２００を検出し、検出したＢｌｕｅｔｏｏｔｈイヤホン２００Ａとのペアリングを実行する。
【0029】
次に、車載制御部１７０は、ペアリングしたＢｌｕｅｔｏｏｔｈイヤホン２００Ａから、Ｂｌｕｅｔｏｏｔｈイヤホン２００Ａを識別するデバイス識別情報を取得する。
【0030】
次に、車載制御部１７０は、Ｂｌｕｅｔｏｏｔｈイヤホン２００Ａに音声データを送信するときに使用するコーデックを決定する。車載制御部１７０は、Ｂｌｕｅｔｏｏｔｈイヤホン２００Ａが対応するコーデックと、車載装置１００が対応するコーデックとに共通するコーデックのうち、音質等に基づいて決定した優先順位に従って、コーデックを決定する。
【0031】
次に、車載制御部１７０は、デバイス識別情報、及び、決定したコーデックの情報であるコーデック情報を含む遅延量の取得要求をサーバ装置３００に送信する。遅延量とは、リップシンクの遅延量である。Ｂｌｕｅｔｏｏｔｈイヤホン２００Ａを使用して音声を出力する場合、映像での口の動きと、Ｂｌｕｅｔｏｏｔｈイヤホン２００Ａから出力される音声とにずれが生じる場合がある。遅延量は、車載装置１００が表示部１２０に表示させる映像の表示タイミングを遅延させる時間を示す。車載制御部１７０は、表示部１２０に表示する映像を遅延量に基づいて遅延させることで、Ｂｌｕｅｔｏｏｔｈイヤホン２００Ａから出力される音声と、表示部１２０に表示する映像とを同期させる。
【0032】
車載制御部１７０は、サーバ装置３００から遅延量を受信すると、受信した遅延量をリップシンクの遅延量として設定する。具体的には、車載制御部１７０は、サーバ装置３００から受信した遅延量に基づき、Ｂｌｕｅｔｏｏｔｈイヤホン２００Ａが出力する音声に同期するように映像データの再生タイミングを調整する。
【0033】
次に、サーバ装置３００の構成について説明する。
サーバ装置３００は、有線通信Ｉ／Ｆ３１０と、サーバ制御部３３０と、を備える。
サーバ装置３００は、有線通信Ｉ／Ｆ３１０と、サーバ制御部３３０と、を備える。
【0034】
有線通信Ｉ／Ｆ３１０は、例えば、ＮＩＣ（Ｎｅｔｗｏｒｋ Ｉｎｔｅｒｆａｃｅ Ｃａｒｄ）等のネットワークアダプタを備える。有線通信Ｉ／Ｆ３１０は、ネットワーク５０に接続された車載装置１００と相互にデータ通信を行う。なお、有線通信Ｉ／Ｆ３１０に代えて、Ｗｉ－Ｆｉ規格等のネットワークアダプタを備える無線通信Ｉ／Ｆを用いても良い。
【0035】
サーバ制御部３３０は、記憶部３４０と、プロセッサ３５０とを備えるコンピュータ装置である。
【0036】
記憶部３４０は、ＲＡＭといった揮発性メモリ、ＲＯＭといった不揮発性メモリ、及び補助記憶装置を備える。
補助記憶装置は、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）や、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）により構成される。
ＲＡＭは、プロセッサ３５０の演算領域として使用される。
プロセッサ３５０が実行する制御プログラム３４１は、ＲＯＭ又は補助記憶装置に記憶される。補助記憶装置は、ユーザデータベース３４３、第１遅延量テーブル３４５及び第２遅延量テーブル３４７等を記憶する。以下、データベースをＤＢと略記する。
補助記憶装置は、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）や、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）により構成される。
ＲＡＭは、プロセッサ３５０の演算領域として使用される。
プロセッサ３５０が実行する制御プログラム３４１は、ＲＯＭ又は補助記憶装置に記憶される。補助記憶装置は、ユーザデータベース３４３、第１遅延量テーブル３４５及び第２遅延量テーブル３４７等を記憶する。以下、データベースをＤＢと略記する。
【0037】
ユーザＤＢ３４３は、ユーザ登録したユーザを識別するデータベースである。
ユーザＤＢ３４３には、ユーザを識別するユーザＩＤや、パスワード、使用するデバイスを識別するデバイス識別情報等が登録される。
ユーザＤＢ３４３には、ユーザを識別するユーザＩＤや、パスワード、使用するデバイスを識別するデバイス識別情報等が登録される。
【0038】
図２は、第１遅延量テーブル３４５の構成を示す図である。
第１遅延量テーブル３４５は、コーデックごとのデフォルトの遅延量（以下、デフォルト遅延量という）を登録したデータベースである。第１遅延量テーブル３４５の１レコードには、コーデックの方式を示すコーデック情報と、デフォルト遅延量とが含まれる。
第１遅延量テーブル３４５は、コーデックごとのデフォルトの遅延量（以下、デフォルト遅延量という）を登録したデータベースである。第１遅延量テーブル３４５の１レコードには、コーデックの方式を示すコーデック情報と、デフォルト遅延量とが含まれる。
【0039】
図３は、第２遅延量テーブル３４７の構成を示す図である。第２遅延量テーブル３４７は、補正遅延量を登録したテーブルである。補正遅延量とは、デフォルト遅延量をダウンロードした車載装置１００において、ユーザの操作によって変更された遅延量である。第２遅延量テーブル３４７の１レコードには、デバイス識別情報と、コーデック情報と、第１補正遅延量及び第２補正遅延量とが含まれる。図３には、コーデックａに対応する第２遅延量テーブル３４７を示す図である。第２遅延量テーブル３４７は、コーデックごとに生成される。第１補正遅延量及び第２補正遅延量の詳細については後述する。
【0040】
プロセッサ３５０は、ＣＰＵや、ＭＰＵにより構成される。プロセッサ３５０は、単一のプロセッサにより構成してもよいし、複数のプロセッサにより構成してもよい。
【0041】
サーバ制御部３３０は、車載装置１００からデバイスを識別するデバイス識別情報と、コーデックを示すコーデック情報と、を含む遅延量の取得要求を受信する。
サーバ制御部３３０は、取得要求を受信すると、受信したデバイス識別情報及びコーデック情報に対応する第１補正遅延量及び第２補正遅延量が第２遅延量テーブル３４７に登録されているか否かを判定する。
サーバ制御部３３０は、取得要求を受信すると、受信したデバイス識別情報及びコーデック情報に対応する第１補正遅延量及び第２補正遅延量が第２遅延量テーブル３４７に登録されているか否かを判定する。
【0042】
サーバ制御部３３０は、受信したデバイス識別情報に対応する第１補正遅延量及び第２補正遅延量が第２遅延量テーブル３４７に登録されていない場合、第１遅延量テーブル３４５からデフォルト遅延量を取得する。サーバ制御部３３０は、受信したコーデック情報に対応するデフォルト遅延量を第１遅延量テーブル３４５から取得し、取得したデフォルト遅延量を、取得要求を受信した車載装置１００に送信する。
【0043】
また、サーバ制御部３３０は、受信したデバイス識別情報及びコーデック情報に対応する第１補正遅延量及び第２補正遅延量が第２遅延量テーブル３４７に登録されている場合、第２遅延量テーブル３４７に登録された第１補正遅延量及び第２補正遅延量を取得する。サーバ制御部３３０は、取得した第１補正遅延量及び第２補正遅延量を、取得要求を受信した車載装置１００に送信する。
【0044】
また、サーバ制御部３３０は、デフォルト遅延量をダウンロードした車載装置１００から変更された遅延量を受信する。
車載装置１００は、サーバ装置３００からダウンロードしたデフォルト遅延量がユーザの操作により変更されると、変更後のデフォルト遅延量と、デバイス識別情報及びコーデック情報とをサーバ装置３００にアップロードする。
サーバ制御部３３０は、車載装置１００から遅延量と、デバイス識別情報と、コーデック情報とを受信すると、車載装置１００から受信する遅延量を、コーデック及びデバイス識別情報で区分して記憶部３４０に記憶させる。
車載装置１００は、サーバ装置３００からダウンロードしたデフォルト遅延量がユーザの操作により変更されると、変更後のデフォルト遅延量と、デバイス識別情報及びコーデック情報とをサーバ装置３００にアップロードする。
サーバ制御部３３０は、車載装置１００から遅延量と、デバイス識別情報と、コーデック情報とを受信すると、車載装置１００から受信する遅延量を、コーデック及びデバイス識別情報で区分して記憶部３４０に記憶させる。
【0045】
その後、サーバ装置３００は、コーデック及びデバイス識別情報により分類した各区分での遅延量の数が予め設定された設定値以上になると、この区分での遅延量を決定する。サーバ装置３００は、区分において数が最も多い遅延量を、補正遅延量に決定する。また、サーバ装置３００は、数が最も多い遅延量を第１補正遅延量として決定し、第１補正遅延量の次に数が多い遅延量を第２補正遅延量として決定してもよい。サーバ装置３００は、決定した第１補正遅延量をパターンＡ、第２補正遅延量をパターンＢとして車載装置１００に提供する。この他に、サーバ装置３００は、各区分での遅延時間の平均値を算出し、算出した平均値を、この区分の補正遅延量として決定してもよい。サーバ装置３００は、決定した補正遅延量を第２遅延量テーブル３４７に登録する。
【0046】
そして、サーバ制御部３３０は、第２遅延量テーブル３４７に第１補正遅延量及び第２遅延補正量が登録された区分の遅延量の取得要求を受信すると、この第２遅延量テーブル３４７に登録された第１補正遅延量及び第２遅延補正量を取得する。サーバ制御部３３０は、取得した第１補正遅延量及び第２遅延補正量を車載装置１００に送信する。
【0047】
図４は、第１補正遅延量及び第２遅延補正量を受信した車載装置１００の表示部１２０に表示される選択画面２３０を示す図である。
選択画面２３０には、選択ボタン２３１、選択ボタン２３３、再生ボタン２３５及び決定ボタン２３７が表示される。
選択ボタン２３１は、サーバ装置３００から受信した第１補正遅延量をパターンＡとして選択するボタンである。
選択ボタン２３３は、サーバ装置３００から受信した第２補正遅延量をパターンＢとして選択するボタンである。
再生ボタン２３５は、コンテンツデータに含まれる音声データに基づく音声を再生し、再生した音声をＢｌｕｅｔｏｏｔｈデバイス２００に出力し、コンテンツデータに含まれる映像データに基づく映像を再生し、再生した映像を表示部１２０に表示するボタンである。
決定ボタン２３７は、選択ボタン２３１により選択された第１補正遅延量、又は選択ボタン２３３により選択された第２補正遅延量を、リップシンクの遅延量として決定するボタンである。
選択画面２３０には、選択ボタン２３１、選択ボタン２３３、再生ボタン２３５及び決定ボタン２３７が表示される。
選択ボタン２３１は、サーバ装置３００から受信した第１補正遅延量をパターンＡとして選択するボタンである。
選択ボタン２３３は、サーバ装置３００から受信した第２補正遅延量をパターンＢとして選択するボタンである。
再生ボタン２３５は、コンテンツデータに含まれる音声データに基づく音声を再生し、再生した音声をＢｌｕｅｔｏｏｔｈデバイス２００に出力し、コンテンツデータに含まれる映像データに基づく映像を再生し、再生した映像を表示部１２０に表示するボタンである。
決定ボタン２３７は、選択ボタン２３１により選択された第１補正遅延量、又は選択ボタン２３３により選択された第２補正遅延量を、リップシンクの遅延量として決定するボタンである。
【0048】
車載制御部１７０は、選択ボタン２３１が押下された場合、リップシンクの遅延量として第１補正遅延量を選択する。その後、車載制御部１７０は、再生ボタン２３５が押下されると、記憶部１８０からコンテンツデータ１８３を読み出し、読み出したコンテンツデータに含まれる音声データを再生して音声を生成し、生成した音声を、決定したコーデックにより圧縮してペアリングされたＢｌｕｅｔｏｏｔｈイヤホン２００Ａに出力する。
【0049】
また、再生制御部１９５は、読み出したコンテンツデータに含まれる映像データを再生する。再生制御部１９５は、再生した映像データに基づく映像を表示部１２０に表示させる。このとき、再生制御部１９５は、サーバ装置３００から受信するリップシンクの第１補正遅延量に基づき、音声データに基づく音声がＢｌｕｅｔｏｏｔｈイヤホン２００Ａから出力されるタイミングと、映像データに基づく映像が表示部１２０に表示されるタイミングとを同期させる。
ユーザは、Ｂｌｕｅｔｏｏｔｈイヤホン２００Ａと、表示部１２０に表示される映像とを比較して、映像と音声とに同期が取れていると判定した場合には、決定ボタン２３７を押下する。これにより、車載制御部１７０は、選択ボタン２３１により選択された第１補正遅延量を、リップシンクの遅延量に設定する。
ユーザは、Ｂｌｕｅｔｏｏｔｈイヤホン２００Ａと、表示部１２０に表示される映像とを比較して、映像と音声とに同期が取れていると判定した場合には、決定ボタン２３７を押下する。これにより、車載制御部１７０は、選択ボタン２３１により選択された第１補正遅延量を、リップシンクの遅延量に設定する。
【0050】
また、車載制御部１７０は、選択ボタン２３３が押下された場合、リップシンクの遅延量として第２補正遅延量を選択する。この後の動作は、選択ボタン２３１が押下された場合と同様であるため、省略する。この後、ユーザにより決定ボタン２３７が押下されると、車載制御部１７０は、選択ボタン２３１により選択された第２補正遅延量を、リップシンクの遅延量に設定する。
【0051】
【0052】
まず、車載制御部１７０は、ペアリング実行の操作を受け付けたか否かを判定する（ステップＳ１）。車載制御部１７０は、ペアリング実行の操作を受け付けていない場合（ステップＳ１／ＮＯ）、ペアリング実行の操作を受け付けるまで待機する。
【0053】
車載制御部１７０は、ペアリング実行の操作を受け付けると（ステップＳ１／ＹＥＳ）、Ｂｌｕｅｔｏｏｔｈイヤホン２００Ａとのペアリングを実行する（ステップＳ２）。次に、車載制御部１７０は、ペアリングしたＢｌｕｅｔｏｏｔｈデバイス２００が、遅延量であるデフォルト遅延量、又は、第１補正遅延量及び第２補正遅延量をサーバ装置３００から取得済みのデバイスであるか否かを判定する（ステップＳ３）。
【0054】
車載制御部１７０は、ペアリングしたＢｌｕｅｔｏｏｔｈデバイス２００が、遅延量を取得済みであると判定すると（ステップＳ３／ＹＥＳ）、取得済みの遅延量を記憶部１８０から読み出し、リップシンクを、読み出した遅延量により設定する（ステップＳ９）。
【0055】
また、車載制御部１７０は、ペアリングしたＢｌｕｅｔｏｏｔｈデバイス２００が、遅延量を取得済みではないと判定すると（ステップＳ３／ＮＯ）、遅延量の取得要求をサーバ装置３００に送信する（ステップＳ４）。車載制御部１７０は、Ｂｌｕｅｔｏｏｔｈデバイス２００を識別するデバイス識別情報と、決定したコーデックを示すコーデック情報と、を含む遅延量の取得要求をサーバ装置３００に送信する（ステップＳ４）。
【0056】
次に、車載制御部１７０は、サーバ装置３００から遅延量を受信したか否かを判定する（ステップＳ５）。車載制御部１７０は、サーバ装置３００から遅延量を受信していない場合（ステップＳ５／ＮＯ）、遅延量を受信するまで待機する。車載制御部１７０は、サーバ装置３００から遅延量を受信すると（ステップＳ５／ＹＥＳ）、受信した遅延量が複数であるか否かを判定する（ステップＳ６）。つまり、車載制御部１７０は、サーバ装置３００から受信した遅延量がデフォルト遅延量であるのか、第１補正遅延量及び第２補正遅延量であるのかを判定する。
【0057】
車載制御部１７０は、サーバ装置３００から受信した遅延量が１つであると判定すると（ステップＳ６／ＮＯ）、リップシンクの遅延量を、受信した遅延量に設定する（ステップＳ９）。
また、車載制御部１７０は、サーバ装置３００から受信した遅延量が複数であると判定すると（ステップＳ６／ＹＥＳ）、図４に示す選択画面を表示部１２０に表示させる（ステップＳ７）。
また、車載制御部１７０は、サーバ装置３００から受信した遅延量が複数であると判定すると（ステップＳ６／ＹＥＳ）、図４に示す選択画面を表示部１２０に表示させる（ステップＳ７）。
【0058】
次に、車載制御部１７０は、第１補正遅延量又は第２補正遅延量の選択を受け付けたか否かを判定する（ステップＳ８）。より詳細には、車載制御部１７０は、パターンＡの選択ボタン２３１、又は、パターンＢの選択ボタン２３３が選択され、決定ボタン２３７が押下されたか否かを判定する。
【0059】
車載制御部１７０は、第１補正遅延量又は第２補正遅延量の選択を受け付けていない場合（ステップＳ８／ＮＯ）、選択を受け付けるまで待機する。また、車載制御部１７０は、第１補正遅延量又は第２補正遅延量の選択を受け付けると（ステップＳ８／ＹＥＳ）、リップシンクの遅延量を、選択された第１補正遅延量又は第２補正遅延量に設定する（ステップＳ９）。
【0060】
図６は、遅延量の設定を変更する変更要求が入力された場合の車載制御部１７０の動作を示すフローチャートである。図６に示すフローチャートを参照しながら遅延量の設定を変更する変更要求が入力された場合の車載制御部１７０の動作について説明する。
まず、車載制御部１７０は、リップシンクの設定を変更する操作を受け付けたか否かを判定する（ステップＳ１１）。車載制御部１７０は、リップシンクの設定を変更する操作を受け付けていない場合（ステップＳ１１／ＮＯ）、リップシンクの設定を変更する操作を受け付けるまで待機する。
まず、車載制御部１７０は、リップシンクの設定を変更する操作を受け付けたか否かを判定する（ステップＳ１１）。車載制御部１７０は、リップシンクの設定を変更する操作を受け付けていない場合（ステップＳ１１／ＮＯ）、リップシンクの設定を変更する操作を受け付けるまで待機する。
【0061】
車載制御部１７０は、リップシンクの設定を変更する操作を受け付けると（ステップＳ１１／ＹＥＳ）、遅延量を変更する変更操作と、操作を確定させる確定操作と、を受け付けたか否かを判定する（ステップＳ１２）。車載制御部１７０は、変更操作と、確定操作とを、受け付けていない場合（ステップＳ１２／ＮＯ）、リップシンクの設定変更をキャンセルするキャンセル操作を受け付けたか否かを判定する（ステップＳ１３）。
【0062】
車載制御部１７０は、キャンセル操作を受け付けた場合（ステップＳ１３／ＹＥＳ）、この処理フローを終了する。また、車載制御部１７０は、キャンセル操作を受け付けていない場合（ステップＳ１３／ＮＯ）、ステップＳ１２の判定に戻る。
【0063】
また、車載制御部１７０は、遅延量を変更する変更操作と、操作を確定させる確定操作と、を受け付けると（ステップＳ１２／ＹＥＳ）、リップシンクの遅延量を、変更した遅延量に設定する（ステップＳ１４）。そして、車載制御部１７０は、変更された遅延量の送信要求をサーバ装置３００に送信する（ステップＳ１５）。
【0064】
次に、車載制御部１７０は、許可通知をサーバ装置３００から受信したか否かを判定する（ステップＳ１６）。車載制御部１７０は、許可通知をサーバ装置３００から受信していない場合（ステップＳ１６／ＮＯ）、許可通知を受信するまで待機する。
【0065】
車載制御部１７０は、許可通知をサーバ装置３００から受信すると（ステップＳ１６／ＹＥＳ）、デバイス識別情報と、コーデック情報とを含む遅延量をサーバ装置３００に送信し（ステップＳ１７）、この処理フローを終了させる。
【0066】
［３．サーバ装置３００の動作］
図７は、遅延量の取得要求を車載装置１００から受信した場合のサーバ装置３００の動作を示すフローチャートである。
図７に示すフローチャートを参照しながらサーバ装置３００の動作について説明する。
まず、サーバ制御部３３０は、遅延量の取得要求を車載装置１００から受信したか否かを判定する（ステップＴ１）。サーバ制御部３３０は、遅延量の取得要求を受信していない場合（ステップＴ１／ＮＯ）、遅延量の取得要求を受信するまで待機する。
図７は、遅延量の取得要求を車載装置１００から受信した場合のサーバ装置３００の動作を示すフローチャートである。
図７に示すフローチャートを参照しながらサーバ装置３００の動作について説明する。
まず、サーバ制御部３３０は、遅延量の取得要求を車載装置１００から受信したか否かを判定する（ステップＴ１）。サーバ制御部３３０は、遅延量の取得要求を受信していない場合（ステップＴ１／ＮＯ）、遅延量の取得要求を受信するまで待機する。
【0067】
サーバ制御部３３０は、遅延量の取得要求を受信すると（ステップＴ１／ＹＥＳ）、受信した取得要求に含まれるデバイス識別情報及びコーデック情報を取得する。そして、サーバ制御部３３０は、取得したデバイス識別情報及びコーデック情報に対応する第１補正遅延量及び第２補正遅延量が第２遅延量テーブル３４７に登録されているか否かを判定する（ステップＴ２）。
【0068】
サーバ制御部３３０は、デバイス識別情報及びコーデック情報に対応する第１補正遅延量及び第２補正遅延量が登録されていない場合（ステップＴ２／ＮＯ）、コーデック情報に対応するデフォルト遅延量を第１遅延量テーブル３４５から取得する。そして、サーバ制御部３３０は、取得したデフォルト遅延量を車載装置１００に送信する（ステップＴ３）。
【0069】
また、サーバ制御部３３０は、デバイス識別情報及びコーデック情報に対応する第１補正遅延量及び第２補正遅延量が登録されている場合（ステップＴ２／ＹＥＳ）、この第２遅延量テーブル３４７に登録される第１補正遅延量及び第２補正遅延量を取得する。サーバ制御部３３０は、取得した第１補正遅延量及び第２補正遅延量を車載装置１００に送信する（ステップＴ４）。
【0070】
図８は、遅延量の送信要求を車載装置１００から受信した場合のサーバ装置３００の動作を示すフローチャートである。
図８に示すフローチャートを参照しながらサーバ装置３００の動作について説明する。
まず、サーバ制御部３３０は、遅延量の送信要求を車載装置１００から受信したか否かを判定する（ステップＴ１１）。サーバ制御部３３０は、遅延量の送信要求を車載装置１００から受信していない場合（ステップＴ１１／ＮＯ）、遅延量の送信要求を受信するまで待機する。
図８に示すフローチャートを参照しながらサーバ装置３００の動作について説明する。
まず、サーバ制御部３３０は、遅延量の送信要求を車載装置１００から受信したか否かを判定する（ステップＴ１１）。サーバ制御部３３０は、遅延量の送信要求を車載装置１００から受信していない場合（ステップＴ１１／ＮＯ）、遅延量の送信要求を受信するまで待機する。
【0071】
サーバ制御部３３０は、遅延量の送信要求を車載装置１００から受信すると（ステップＴ１１／ＹＥＳ）、遅延量の送信を許可する許可通知を車載装置１００に送信する（ステップＴ１２）。サーバ制御部３３０は、デバイス識別情報と、コーデック情報とを含む遅延量を受信したか否かを判定する（ステップＴ１３）。サーバ制御部３３０は、車載装置１００から遅延量を受信していない場合（ステップＴ１３／ＮＯ）、遅延量を受信するまで待機する。
【0072】
サーバ制御部３３０は、デバイス識別情報と、コーデック情報とを含む遅延量を車載装置１００から受信すると（ステップＴ１３／ＹＥＳ）、受信した遅延量を、デバイス識別情報と、コーデック情報とに対応づけて記憶部３４０に記憶させる（ステップＴ１４）。
次に、サーバ制御部３３０は、ステップＴ１３で受信したデバイス識別情報及びコーデック情報に対応する第１補正遅延量及び第２補正遅延量が、第２遅延量テーブル３４７に登録されているか否かを判定する（ステップＴ１５）。
次に、サーバ制御部３３０は、ステップＴ１３で受信したデバイス識別情報及びコーデック情報に対応する第１補正遅延量及び第２補正遅延量が、第２遅延量テーブル３４７に登録されているか否かを判定する（ステップＴ１５）。
【0073】
サーバ制御部３３０は、デバイス識別情報及びコーデック情報に対応する第１補正遅延量及び第２補正遅延量が、第２遅延量テーブル３４７に登録されている場合（ステップＴ１５／ＹＥＳ）、第１補正遅延量及び第２補正遅延量を再度、算出する（ステップＴ１６）。そして、サーバ制御部３３０は、算出した第１補正遅延量及び第２補正遅延量と、第２遅延量テーブル３４７に登録された第１補正遅延量及び第２補正遅延量とが異なるか否かを判定し、第１補正遅延量及び第２補正遅延量が更新されたか否かを判定する（ステップＴ１７）。
【0074】
サーバ制御部３３０は、第１補正遅延量及び第２補正遅延量が更新されていない場合（ステップＴ１７／ＮＯ）、第２遅延量テーブル３４７に登録された値を更新することなく、この処理を終了する。
また、サーバ制御部３３０は、第１補正遅延量及び第２補正遅延量が更新されている場合（ステップＴ１７／ＹＥＳ）、ステップＴ１６で算出した第１補正遅延量及び第２補正遅延量を第２遅延量テーブル３４７に登録して第２遅延量テーブル３４７を更新する（ステップＴ１８）。その後、サーバ制御部３３０は、この処理フローを終了する。
また、サーバ制御部３３０は、第１補正遅延量及び第２補正遅延量が更新されている場合（ステップＴ１７／ＹＥＳ）、ステップＴ１６で算出した第１補正遅延量及び第２補正遅延量を第２遅延量テーブル３４７に登録して第２遅延量テーブル３４７を更新する（ステップＴ１８）。その後、サーバ制御部３３０は、この処理フローを終了する。
【0075】
また、サーバ制御部３３０は、第１補正遅延量及び第２補正遅延量が、第２遅延量テーブル３４７に登録されていないと判定した場合（ステップＴ１５／ＮＯ）、記憶部３４０に記憶させた遅延量の数が、予め設定された設定数以上になったか否かを判定する（ステップＴ１９）。より詳細には、サーバ制御部３３０は、同一のデバイス識別情報及びコーデック情報に対応づけて記憶部３４０に記憶した遅延量の数が設定数以上になったか否かを判定する（ステップＴ１９）。
【0076】
サーバ制御部３３０は、同一のデバイス識別情報及びコーデック情報に対応づけて記憶部３４０に記憶した遅延量の数が設定数以上ではない場合（ステップＴ１９／ＮＯ）、この処理フローを終了させる。
また、サーバ制御部３３０は、同一のデバイス識別情報及びコーデック情報で記憶部３４０に記憶した遅延量の数が設定数以上である場合（ステップＴ１９／ＹＥＳ）、第１補正遅延量及び第２補正遅延量を算出する（ステップＴ２０）。
また、サーバ制御部３３０は、同一のデバイス識別情報及びコーデック情報で記憶部３４０に記憶した遅延量の数が設定数以上である場合（ステップＴ１９／ＹＥＳ）、第１補正遅延量及び第２補正遅延量を算出する（ステップＴ２０）。
【0077】
次に、サーバ制御部３３０は、算出した第１補正遅延量及び第２補正遅延量を第２遅延量テーブル３４７に登録する（ステップＴ２１）。サーバ制御部３３０は、算出したデバイス識別情報及びコーデック情報に対応する第２遅延量テーブル３４７のレコードに、第１補正遅延量及び第２補正遅延量を登録する（ステップＴ２１）。サーバ制御部３３０は、第２遅延量テーブル３４７に第１補正遅延量及び第２補正遅延量を登録すると、この処理フローを終了する。
【0078】
［４．本開示のまとめ］
以下、本開示のまとめを記載する。
（構成１）
映像及び音声を再生する再生装置が、
外部の音声出力機器との間で、近距離無線通信によるペアリングを行うステップと、
前記音声出力機器に出力する音声の圧縮方式を示すコーデック情報を含むリップシンクの遅延量の取得要求をサーバ装置に送信するステップと、
音声データに基づく音声を前記音声出力機器に出力し、前記サーバ装置から受信する遅延量に基づいて映像データに基づく映像の再生タイミングを調整するステップと、
を実行する、映像音声同期方法。
以下、本開示のまとめを記載する。
（構成１）
映像及び音声を再生する再生装置が、
外部の音声出力機器との間で、近距離無線通信によるペアリングを行うステップと、
前記音声出力機器に出力する音声の圧縮方式を示すコーデック情報を含むリップシンクの遅延量の取得要求をサーバ装置に送信するステップと、
音声データに基づく音声を前記音声出力機器に出力し、前記サーバ装置から受信する遅延量に基づいて映像データに基づく映像の再生タイミングを調整するステップと、
を実行する、映像音声同期方法。
【0079】
これにより再生装置は、音声データに基づく音声を音声出力機器に出力し、サーバ装置から受信する遅延量に基づいて映像データに基づく映像の再生タイミングを調整する。従って、リップシンクの遅延量として、精度の高い値をサーバ装置に記憶させておくことで、ユーザに調整を行なわせることなく、音声出力機器に出力させる音声と、再生する映像との同期の精度を向上させることができる。
【0080】
（構成２）
前記再生装置が、
前記遅延量を変更する操作を受け付けるステップと、
前記操作により変更された遅延量である変更遅延量と、前記コーデック情報と、前記ペアリングした前記音声出力機器を識別する機器識別情報とを、前記サーバ装置に送信するステップと、を実行する、構成１記載の映像音声同期方法。
前記再生装置が、
前記遅延量を変更する操作を受け付けるステップと、
前記操作により変更された遅延量である変更遅延量と、前記コーデック情報と、前記ペアリングした前記音声出力機器を識別する機器識別情報とを、前記サーバ装置に送信するステップと、を実行する、構成１記載の映像音声同期方法。
【0081】
これにより、ユーザにより遅延量が変更されると、変更された遅延量である変更遅延量と、コーデック情報と、ペアリングした音声出力機器を識別する機器識別情報とをサーバ装置に登録することができる。従って、再生装置から受信する変更遅延量に基づいて、サーバ装置が、再生装置に提供する遅延量を補正することができる。この補正された遅延量は、他の多数のユーザによって利用されることになる。
【0082】
（構成３）
前記サーバ装置が、
前記再生装置から受信する前記変更遅延量を、前記コーデック情報及び機器識別情報に対応づけて前記サーバ装置が備える記憶部に記憶するステップと、
前記コーデック情報及び機器識別情報に対応づけて記憶する前記変更遅延量の数が予め設定された設定数以上になると、前記変更遅延量に基づいて前記遅延量を補正した補正遅延量を決定するステップと、
決定した前記補正遅延量を、前記コーデック情報及び機器識別情報に対応づけて前記記憶部に記憶させるステップと、
前記再生装置から前記コーデック情報及び前記機器識別情報を含む前記遅延量の取得要求を受信すると、前記コーデック情報及び前記機器識別情報に対応する前記補正遅延量を前記記憶部から取得し、前記補正遅延量を前記再生装置に送信するステップと、
を備える、構成２記載の映像音声同期方法。
前記サーバ装置が、
前記再生装置から受信する前記変更遅延量を、前記コーデック情報及び機器識別情報に対応づけて前記サーバ装置が備える記憶部に記憶するステップと、
前記コーデック情報及び機器識別情報に対応づけて記憶する前記変更遅延量の数が予め設定された設定数以上になると、前記変更遅延量に基づいて前記遅延量を補正した補正遅延量を決定するステップと、
決定した前記補正遅延量を、前記コーデック情報及び機器識別情報に対応づけて前記記憶部に記憶させるステップと、
前記再生装置から前記コーデック情報及び前記機器識別情報を含む前記遅延量の取得要求を受信すると、前記コーデック情報及び前記機器識別情報に対応する前記補正遅延量を前記記憶部から取得し、前記補正遅延量を前記再生装置に送信するステップと、
を備える、構成２記載の映像音声同期方法。
【0083】
これにより、同一の機器識別情報の音声出力機器で、同一のコーデックを使用して再生するユーザにより変更された変更遅延量に基づいて、再生装置に提供する補正遅延量を決定することができる。このため、音声出力機器に出力させる音声と、再生する映像との同期の精度をさらに向上させることができる。そして、精度が向上された補正遅延量は、他の多数のユーザによって利用される。
【0084】
（構成４）
前記補正遅延量を決定するステップは、
前記再生装置から受信する前記変更遅延量のうち、値が同一の前記変更遅延量の数が最も多い前記変更遅延量を第１補正遅延量として決定するステップと、
値が同一の前記変更遅延量の数が前記第１補正遅延量の次に多い前記変更遅延量を第２補正遅延量として決定するステップと、を含み、
前記補正遅延量を前記再生装置に送信するステップは、
前記再生装置から前記コーデック情報及び前記機器識別情報を含む前記遅延量の取得要求を受信すると、前記コーデック情報及び前記機器識別情報に対応する前記第１補正遅延量及び前記第２補正遅延量を前記再生装置に送信するステップである、構成３記載の映像音声同期方法。
前記補正遅延量を決定するステップは、
前記再生装置から受信する前記変更遅延量のうち、値が同一の前記変更遅延量の数が最も多い前記変更遅延量を第１補正遅延量として決定するステップと、
値が同一の前記変更遅延量の数が前記第１補正遅延量の次に多い前記変更遅延量を第２補正遅延量として決定するステップと、を含み、
前記補正遅延量を前記再生装置に送信するステップは、
前記再生装置から前記コーデック情報及び前記機器識別情報を含む前記遅延量の取得要求を受信すると、前記コーデック情報及び前記機器識別情報に対応する前記第１補正遅延量及び前記第２補正遅延量を前記再生装置に送信するステップである、構成３記載の映像音声同期方法。
【0085】
これにより、再生装置のユーザは、自分で調整をすることなく、サーバ装置から提供される第１補正遅延量と、第２補正遅延量とのうち、好みの補正遅延量を、リップシンクの遅延量として設定することができる。
【0086】
（構成５）
映像及び音声を再生する再生装置であって、
外部の音声出力機器との間で、近距離無線通信によるペアリングを行うペアリング部と、
前記音声出力機器に出力する音声の圧縮方式を示すコーデック情報を含むリップシンクの遅延量の取得要求をサーバ装置に送信する通信制御部と、
音声データに基づく音声を前記音声出力機器に出力し、前記サーバ装置から受信する遅延量に基づいて映像データに基づく映像の再生タイミングを調整する再生制御部と、
を備える、再生装置。
映像及び音声を再生する再生装置であって、
外部の音声出力機器との間で、近距離無線通信によるペアリングを行うペアリング部と、
前記音声出力機器に出力する音声の圧縮方式を示すコーデック情報を含むリップシンクの遅延量の取得要求をサーバ装置に送信する通信制御部と、
音声データに基づく音声を前記音声出力機器に出力し、前記サーバ装置から受信する遅延量に基づいて映像データに基づく映像の再生タイミングを調整する再生制御部と、
を備える、再生装置。
【0087】
これにより再生装置は、音声データに基づく音声を音声出力機器に出力し、サーバ装置から受信する遅延量に基づいて映像データに基づく映像の再生タイミングを調整する。従って、リップシンクの遅延量として、精度の高い値をサーバ装置に記憶させておくことで、ユーザに調整を行なわせることなく、音声出力機器に出力させる音声と、再生する映像との同期の精度を向上させることができる。
【0088】
［５．他の構成］
上述した実施形態、あくまでも本発明の一態様を示すものであり、本発明の主旨を逸脱しない範囲で任意に変形及び応用が可能である。
例えば、図１は、本願発明を理解容易にするために、表示システム１の機能構成を主な処理内容に応じて分類して示した概略図であり、表示システム１の各々の構成は、処理内容に応じて、さらに多くの構成要素に分類することもできる。また、１つの構成要素が更に多くの処理を実行するように分類することもできる。また、各構成要素の処理は、１つのハードウェアで実行されてもよいし、複数のハードウェアで実行されてもよい。また、各構成要素の処理は、１つのプログラムで実現されてもよいし、複数のプログラムで実現されてもよい。
上述した実施形態、あくまでも本発明の一態様を示すものであり、本発明の主旨を逸脱しない範囲で任意に変形及び応用が可能である。
例えば、図１は、本願発明を理解容易にするために、表示システム１の機能構成を主な処理内容に応じて分類して示した概略図であり、表示システム１の各々の構成は、処理内容に応じて、さらに多くの構成要素に分類することもできる。また、１つの構成要素が更に多くの処理を実行するように分類することもできる。また、各構成要素の処理は、１つのハードウェアで実行されてもよいし、複数のハードウェアで実行されてもよい。また、各構成要素の処理は、１つのプログラムで実現されてもよいし、複数のプログラムで実現されてもよい。
【0089】
また、上述した実施形態では、外部の音声出力機器がＢｌｕｅｔｏｏｔｈデバイス２００である場合について説明したが、再生装置と音声出力機器との接続は、同様にコーデックによる圧縮が行なわれるＨＤＭＩ（登録商標）等の有線ケーブルにより接続された、再生装置と音声出力機器との接続においても有用である。例えば、再生装置がテレビであって、音声出力機器が、ＨＤＭＩケーブルで接続されたサウンドバー等の外部スピーカであってもよい。
【0090】
また、図５及び図６に示したフローチャートの処理単位は、車載制御部１７０の処理を理解容易にするために、主な処理内容に応じて分割したものである。処理単位の分割の仕方や名称によって、本願発明が制限されることはない。車載制御部１７０の処理は、処理内容に応じて、更に多くの処理単位に分割することもできる。また、１つの処理単位がさらに多くの処理を含むように分割することもできる。また、フローチャートの処理順序も、図示した例に限られるものではない。また、図７及び図８に示すサーバ制御部３３０の処理についても同様である。
【符号の説明】
【0091】
１００ 車載装置
１９３ 通信制御部
１９５ 再生制御部
２００ Ｂｌｕｅｔｏｏｔｈイヤホン２００Ａ
３００ サーバ装置
１９３ 通信制御部
１９５ 再生制御部
２００ Ｂｌｕｅｔｏｏｔｈイヤホン２００Ａ
３００ サーバ装置
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7】
【図8】