特開 2015-103984 付加情報表示システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】特開2015-103984(P2015-103984A)

(43)【公開日】2015年6月4日

(54)【発明の名称】付加情報表示システム

(51)【国際特許分類】

   H04N 21/435 20110101AFI20150508BHJP

   H04N 21/414 20110101ALI20150508BHJP

【ＦＩ】

   H04N21/435

   H04N21/414

【審査請求】未請求

【請求項の数】5

【出願形態】ＯＬ

【全頁数】14

(21)【出願番号】特願2013-243608(P2013-243608)

(22)【出願日】2013年11月26日

(71)【出願人】

【識別番号】512107813

【氏名又は名称】Ｚｉｍａｋｕプラス株式会社

(74)【代理人】

【識別番号】100092679

【弁理士】

【氏名又は名称】樋口 盛之助

(72)【発明者】

【氏名】奥出 昌次

【テーマコード（参考）】

5C164

【Ｆターム（参考）】

5C164MA06S

5C164SB41S

5C164SB51P

5C164TA06S

5C164TB03S

5C164UA01S

5C164UA04S

5C164UA43S

5C164UB10P

5C164UB41S

5C164YA11

(57)【要約】

【課題】各観客が欲する情報のみを大型の装置を用いずに表示する付加情報表示システムを提供する。
【解決手段】オペレータの指示によって、複数種類の字幕の表示を指示する指示サーバと、当該指示を受けて、利用者が選択した種類の字幕を表示するヘッドマウント・ディスプレイを備えた表示クライアント端末によって付加情報表示システムを構成する。
【選択図】 図１

【特許請求の範囲】

【請求項1】

オペレータの指示にもとづいて所定の付加情報の表示を指示する指示サーバと、前記指示に基づいて付加情報を表示する表示クライアント端末からなる付加情報表示システムであって、
前記指示サーバは、
任意のタイミングで表示クライアント端末に表示させる付加情報を格納する記録手段と、
前記オペレータが任意のタイミングで前記付加情報の表示を指示するための、指示手段と、
前記指示情報を前記複数の表示クライアント端末に一斉送信する、送信手段を備え、
前記複数の表示クライアント端末は、前記付加情報を表示する表示装置として、利用者の頭部に装着するヘッドマウント・ディスプレイを有し、
前記利用者が前記ヘッドマウント・ディスプレイに表示する付加情報の種類を選択する、表示選択手段と、
前記送信手段によって一斉送信された指示情報を受信する、受信手段と、
前記受信手段が受信した指示情報と、前記表示選択手段によって選択された付加情報の種類から、表示する付加情報を取得する、表示情報取得手段と、
前記取得した付加情報を前記ヘッドマウント・ディスプレイに表示する、表示手段を備え、
前記ヘッドマウント・ディスプレイは、該ヘッドマウント・ディスプレイの前方に光が漏えいすることを防止するための遮光手段を備えた
ことを特徴とする、付加情報表示システム。

【請求項2】

前記ヘッドマウント・ディスプレイは、前記利用者の頭部に装着するフレーム部と、該フレーム部に設けられた映像投影部及び投影レンズ部と、を備え、
前記投影レンズ部が、前記映像投影部から投影された映像光を後方のみに反射することにより、前記遮光部として機能する
ことを特徴とする、請求項１記載の付加情報表示システム。

【請求項3】

前記表示クライアント端末は、さらに、操作ボタン及び／又はタッチパネルを備えた制御装置を備え、
前記制御装置が、前記表示選択手段と、前記受信手段と、前記表示情報取得手段と、を備えた
ことを特徴とする、請求項２記載の付加情報表示システム。

【請求項4】

前記表示クライアント端末は、さらに前記記録手段から格納された付加情報を取得する、付加情報取得手段を備え、
前記指示情報は、前記オペレータが指示した付加情報を一意に識別するインデックスからなり、
前記表示情報取得手段は、前記インデックスと、前記表示選択手段によって選択された付加情報の種類に基づいて、前記付加情報取得手段が取得した付加情報から表示する付加情報を取得する
ことを特徴とする、請求項１〜３のいずれかに記載の付加情報表示システム。

【請求項5】

前記付加情報は字幕であり、前記付加情報の種類は字幕の言語であることを特徴とする、請求項１〜４のいずれかに記載の付加情報表示システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は付加情報表示システムに関し、詳しくは、舞台や演説等における字幕等の付加的な情報を、任意のタイミングで利用者に対して表示する付加情報表示システムに関する。

【背景技術】

【0002】

従来から、動画等のコンテンツに対してコメント等付加的な情報を同期表示させるシステムとして、例えば特許文献１のコメント配信システムが知られている。
特許文献１のシステムは、動画の再生開始時点からの経過時間と表示するコメントを対応させて記録させ、動画の再生にともなって、経過時間毎に対応させたコメントを画面に表示させるものである。

【0003】

上記システム他、動画や映画等、再生時間及び進行タイミングが予め固定されているコンテンツについては、上記の様なシステムによって所定のタイミングで字幕やコメント等の付加的な情報を表示することは可能である。しかし、舞台や演説等、人がリアルタイムで進行させるコンテンツについては、上記の様なシステムによって付加的な情報を同期させることはできず、もっぱら特許文献２のような表示装置が用いられている。

【0004】

特許文献２の装置は舞台横等に設置される大型の表示装置を含んでおり、コンテンツの進行にあわせてオペレータが指示を行うことにより、任意のタイミングで字幕等の付加的な情報を当該装置に表示するものである。

【先行技術文献】

【特許文献】

【0005】

【特許文献1】特開２００８−１７２７４５号公報

【特許文献2】特開２００２−２３６９８号公報

【発明の概要】

【発明が解決しようとする課題】

【0006】

しかし、上記のような表示装置を用いる際に、会場が大きい場合には舞台・演壇等から遠い位置からも字幕等を視認できる必要があることから、当該表示装置も必然的に大型化させなければならないが、あまりに大型な装置では舞台等近くの観客からはかえって見づらく、また、舞台の横に大きな装置を設置すると観覧の邪魔にもなる。
また、近年は例えば多国語の字幕を表示する舞台も増加しており、これらに対応するには、各言語用の表示装置を言語の数だけ設置するか、複数の言語の字幕を同時に表示できる大型の表示装置を設置する必要がある。しかし、この様な場合に、各観客が見たい字幕は一の言語のものだけであり、当該観客にとって、他の言語による字幕は煩わしいと感じるものであった。

【0007】

本発明は前述の状況に着目し、観客等の利用者が欲する情報のみを大型の装置を用いずに表示する付加情報表示システムを提供することを、その課題とするものである。

【課題を解決するための手段】

【0008】

上記課題を解決することを目的としてなされた本発明は、オペレータの指示にもとづいて所定の付加情報の表示を指示する指示サーバと、前記指示に基づいて付加情報を表示する表示クライアント端末からなる付加情報表示システムであって、前記指示サーバは、任意のタイミングで表示クライアント端末に表示させる付加情報を格納する記録手段と、前記オペレータが任意のタイミングで前記付加情報の表示を指示するための、指示手段と、前記指示情報を前記複数の表示クライアント端末に一斉送信する、送信手段を備え、前記複数の表示クライアント端末は、前記付加情報を表示する表示装置として、利用者の頭部に装着するヘッドマウント・ディスプレイを有し、前記利用者が前記ヘッドマウント・ディスプレイに表示する付加情報の種類を選択する、表示選択手段と、前記送信手段によって一斉送信された指示情報を受信する、受信手段と、前記受信手段が受信した指示情報と、前記表示選択手段によって選択された付加情報の種類から、表示する付加情報を取得する、表示情報取得手段と、前記取得した付加情報を前記ヘッドマウント・ディスプレイに表示する、表示手段を備え、 前記ヘッドマウント・ディスプレイは、該ヘッドマウント・ディスプレイの前方に光が漏えいすることを防止するための遮光手段を備えたことを特徴としている。

【0009】

本発明に係る付加情報表示システムは、前記ヘッドマウント・ディスプレイを、前記利用者の頭部に装着するフレーム部と、該フレーム部に設けられた映像投影部及び投影レンズ部と、を備え、前記投影レンズ部が、前記映像投影部から投影された映像光を後方のみに反射することにより、前記遮光部として機能するようにすると好適である。

【0010】

また、前記表示クライアント端末は、さらに、操作ボタン及び／又はタッチパネルを備えた制御装置を備え、前記制御装置が、前記表示選択手段と、前記受信手段と、前記表示情報取得手段と、を備えることが望ましい。

【0011】

また、前記表示クライアント端末は、さらに前記記録手段から格納された付加情報を取得する、付加情報取得手段を備え、前記指示情報は、前記オペレータが指示した付加情報を一意に識別するインデックスからなり、前記表示情報取得手段は、前記インデックスと、前記表示選択手段によって選択された付加情報の種類に基づいて、前記付加情報取得手段が取得した付加情報から表示する付加情報を取得するようにしてもよい。また、前記付加情報を字幕とし、前記付加情報の種類は字幕の言語であるようにしてもよい。

【発明の効果】

【0012】

本発明によれば、オペレータの指示によって表示される付加情報は、利用者が有する表示クライアント端末のヘッドマウント・ディスプレイに表示されるとともに、利用者が所望する付加情報の種類を選択することができるので、利用者が欲する情報のみを大型の装置を用いずに表示することができる。

【0013】

このとき、付加情報はヘッドマウント・ディスプレイに表示されるので、利用者は視線の移動を伴わずに付加情報を閲覧することができるので舞台等の鑑賞を邪魔することが無く、また、ヘッドマウント・ディスプレイが遮光手段を備えることにより付加情報を表示する際に光を前方に漏えいしないので、舞台等照明を落とした状態でコンテンツが提供される場合でも、演者や他の観客の邪魔をすることなく、付加情報を閲覧することができる。

【図面の簡単な説明】

【0014】

【図1】本発明に係る実施形態の一例における全体構成を示す図である。

【図2】同実施例における指示サーバの構成を示す図である。

【図3】同実施例における表示クライアント端末の構成を示す図である。

【図4】同実施例における処理の流れを示すフロー図である。

【図5】同実施例における表示装置を示す図である。

【発明を実施するための形態】

【0015】

以下、本発明の実施形態の一例について、図面を参照して説明する。
図１は本発明の実施例に係る付加情報表示システム１の構成を示す図である。付加情報システム１は、指示サーバ２と、複数の表示クライアント端末３を配信ネットワーク４によって通信可能に接続したものである。
なお、本実施例の付加情報表示システム１は、舞台の進行にあわせて複数言語の字幕を付加情報として表示させるシステムである。字幕の内容は、台詞の内容であってもよいし、解説文であってもよい。

【0016】

指示サーバ２は図２で示すように、オペレータの指示により字幕を表示クライアント端末３に表示させるものであり、指示端末２１と、送信装置２２から構成されている。

【0017】

指示端末２１は、オペレータからの指示を受けて表示クライアント端末２に字幕を表示させる情報を一斉送信するための端末であり、一般的なコンピュータ、すなわち、ＣＰＵ、目メモリ、記憶装置、入出力装置等がバスによって繋がれた構成の電子計算機である。
指示端末２１は、表示させる字幕情報を保持するための記録手段５１、オペレータから指示を受けるための指示手段５２を備えている。

【0018】

記録手段５１は、本実施例によってコンテンツの進行にあわせて表示する付加情報、すなわち字幕を記録するものであり、本実施例においては指示端末２１が備える二次記憶装置上のファイルシステムである。

【0019】

記録手段５１に記録される字幕は、一のタイミングで表示される複数言語の字幕を一の行とするＣＶＳ形式のファイルである。
各行の先頭フィールドには、各行を一意に認識するためのインデックスが配置されており、２番目以降のフィールドに、言語毎の字幕が配置されている。また、当該ファイルはＣＶＳ形式のデータであるために、２番目以降のフィールドに配置する付加情報、すなわち字幕は、全行に渡って同じ順番で同じ言語のデータが配置されている必要がある。

【0020】

指示手段５２は、オペレータからの指示を受付け、当該指示を表示クライアント端末２に配信するためのものである。
指示手段５２は指示端末２１によって実行され、記録手段５１から字幕を取得して、指示端末２１が備える又はこれに接続されたディスプレイ等の表示装置に一覧表示する。
この状態でオペレータが一覧表示された字幕から任意の字幕を任意のタイミングで選択すると、指示手段５２は当該選択された字幕を表示クライアント端末３に表示させるための指示情報を作成する。
本実施例では、この指示情報として上記インデックスを使用する。指示情報をインデックスのみとすることで、送信データ量を最小限にするとともに、後述する一斉送信時の転送遅延を防ぐことができる。
ただし、十分な転送データ量及び速度を担保できる場合には、配信情報に字幕そのものを含めてもよい。なお、この場合は後述する付加情報取得手段６１を制御装置２２が提供する必要はない。

【0021】

なお、本実施例の付加情報表示システムを、従来型の字幕表示装置と併用する場合には、指示手段５２に、当該字幕表示装置に字幕を送出する機能を追加してもよい。

【0022】

送信装置２２は、指示情報を表示クライアント端末３に一斉送信するための送信手段５３を備える装置であり、後述する受信装置３１に指示情報を一斉送信可能な無線送信装置である。オペレータが表示クライアント端末２に表示させる字幕を選択し、指示手段５２によって指示情報が作成されるたびに、当該指示情報は指示端末２２によって送信装置２２に送出され、送信手段５３によって後述する受信装置３１に一斉送信される。
なお、本実施例では指示サーバ２と表示クライアント端末３を無線通信による配信ネットワーク４でつないでいるが、通信の形式は無線でなく有線でもよい。通信に使用するプロトコルも特定のものに限られず、専用のプロトコルを用いてもよいし、周知の一般的なプロトコルを用いてもよい。
また、一斉送信の具体的な手法については、ブロードキャストやマルチキャスト等、必要に応じて周知の手法を用いることができる。

【0023】

また、本実施例では、指示サーバ２の構成として指示端末２１と送信装置２２が分離している。送信手段５３を指示端末２１に内包して送信装置２２を省略し、指示サーバ２を一のハードウェアによって実現してもよいが、上記分離した構成とすることにより、指示サーバ２と表示クライアント端末３の通信形式やプロトコルを状況に応じて変更することが容易となる。例えば、様々な電波が混在し、無線通信では混信する恐れがある場合は有線ネットワークを用い、或いは、通信ケーブルを設置することが困難な会場等の場合には無線ネットワークを用いることができる。どの様な通信形式が望ましいかは会場等の設置対象により適宜設計されるが、本構成によって、どの様な設計においても最小限の構成変更でこれに対応することができる。
また、前述のとおり、本実施例の指示端末２１には一般的な構成のコンピュータを使用しているが、一般的なコンピュータであれば、当該コンピュータの構成に有線ネットワーク用の通信デバイスが組み込まれていることが通常である。この時、有線ネットワークを用いて通信する場合には、当該通信デバイスによって送信手段５３を構成し、送信装置２２を省いてもよい。

【0024】

表示クライアント端末３は、指示サーバ２の指示により字幕を表示するものであり、図３で示すように、付加情報取得手段６１、選択手段６２、受信手段６３、表示情報作成手段６４を備えた制御装置３２と、表示手段６５を備えた表示装置３３から構成されている。

【0025】

制御装置３２は、付加情報取得手段６１、選択手段６２、受信手段６３、表示情報作成手段６４を備える端末である。本実施形態における制御装置３２は指示端末２１と同様に一般的なコンピュータの構成を備えた端末であるが、図５で示すように、制御装置３２の正面には操作用のタッチパネル３２１と、ボタン３２２を備えた携帯端末であり、後述する表示装置３３と通信ケーブル３３４によって接続されている。

【0026】

受信手段６３は、指示サーバ２から一斉送信された指示情報を受信する手段であり、具体的には、送信装置２２と通信可能な無線受信装置、及び、当該無線受信装置を制御するソフトウェア群から構成される。

【0027】

付加情報取得手段６１は、指示サーバ２に記録された字幕を事前に制御装置３２に記録するものである。
制御装置３２によって付加情報取得手段６１が実行されると、端末３２から指示サーバ２に通信を行い、字幕を取得して端末３２内の二次記憶装置に保存する。
本実施例における付加情報は複数言語の字幕情報であるために、言語の種類が多いほどデータ量が増加する。これを逐次的にリアルタイムで送信するには高速なネットワーク環境が必須となる。本実施例の構成では、事前に字幕を制御装置内に記録することで、後述の配信ネットワーク４の通信負荷を低減し、帯域の狭いネットワークであってもオペレータが指示するタイミングで字幕を表示することができる。

【0028】

選択手段６２は、表示する字幕の言語を選択するためのインタフェースを観客に提供する。制御装置３２によって選択手段６２が実行されると、後述する表示装置３３に選択可能な言語を表示する。観客が制御装置３２のタッチパネル３２１又はボタン３２２を操作して表示された言語から任意の言語を選択すると、選択手段６２は当該選択された言語を制御装置３２の一次記憶装置に保存する。

【0029】

表示情報作成手段６４は、後述の表示手段６５で表示するための情報を作成する。
受信手段６３が指示サーバ２からの指示情報を受信するたびに制御装置３２は表示情報作成手段６４を実行し、配信情報及び選択手段６２によって選択された付加情報の種類にもとづいて、付加情報取得手段６１が取得した字幕から、表示する字幕を取得する。

【0030】

表示装置３３は表示情報作成手段６４が取得した字幕を表示するための表示手段６５として機能する装置であり、具体的には、図５で示すように、フレーム部３３１と、映像投影部３３２と、投影レンズ部３３３と、前述の制御装置３２と通信するための通信ケーブル３３４を備えたヘッドマウント・ディスプレイである。

【0031】

フレーム部３３１は、表示装置３３を観客の頭部に装着するためのメガネ形状の部材であり、映像投影部３３２、投影レンズ部３３３、通信ケーブル３３４は当該フレーム部３３１に設けられている。

【0032】

映像投影部３３２は、フレーム３３１の左右両側面側それぞれに設けられており、通信ケーブル３３４を介して制御装置３２から送信された情報を後述する投影レンズ部３３３に向けて投影する。

【0033】

投影レンズ部３３３はハーフミラーであり、投影レンズ３３３の左右両端側から映像投影部３３２によって投影された映像を後方側、すなわち観客の眼の方向に反射して投影する。一方、投影レンズ部３３３の前方側には当該映像は反射されず、映像投影部３３２からの映像光が前方側に漏れることを防ぐ遮光手段として機能する。

【0034】

表示クライアント端末３は、前述のように制御装置３２と表示装置３３から構成されており、指示サーバ２から送信された指示情報を制御装置３２の受信手段６３で受信し、表示情報作成手段６４により取得した字幕を表示装置３３に送信し、当該表示装置３３であるヘッドマウント・ディスプレイの投影レンズ部３３３に字幕を映像として表示する。

【0035】

このとき、最終的に映像レンズ部３３３に表示される字幕は、字幕すなわち文字情報を映像レンズ部３３３の画像表示領域に表示した画像情報である。表示手段６５すなわちヘッドマウント・ディスプレイは制御装置３２から送信された画像を送信されたタイミングで出力するのみで足りるので、ヘッドマウント・ディスプレイは単なる表示デバイスとして機能すればよく、観客の頭部に装着する装置を小型・軽量なものとすることができる。なお、本実施形態では文字情報から画像情報の生成は制御装置３２の表示情報作成手段６４において行われているが、本実施形態における字幕情報を最初から画像情報として記録しておいても良い。

【0036】

本実施例における表示装置３３は、観客の視界の前方に投影レンズ部３３３が位置しており、該投影レンズ部３３３に字幕を表示することにより、観客は自身の視線を移動させることなく表示された字幕を閲覧することができる。このとき、投影レンズ部３３３がハーフミラーであり、字幕を後方側すなわち観客側にのみ表示する一方で、前方側すなわち舞台側には投影光を漏らさない遮光手段として機能する。演劇等の上演時には、会場全体を暗くすることが通常であり、観客の頭部付近から光が漏れていると舞台上の演者等にとっても邪魔なものとなるが、本実施例の構成であれば、演者等にとっても通常の会場と同様に舞台を進行させることができる。

【0037】

また、本実施形態の制御装置３２は、制御装置３２それ自身が表示装置を備えず、選択手段６２等所定の情報を表示する場合にはヘッドマウント・ディスプレイである表示装置３３を用いて上記表示を行う。制御装置３２は前述のとおり携帯端末であるため、制御装置３２を稼働させるためのバッテリー等蓄電装置を内蔵していることが望ましいが、上記のように制御装置３２自身が表示装置を備えない構成であることにより、小容量の蓄電装置でも長時間稼働することができる。

【0038】

次に、図４を用いて本実施例の付加情報表示システムのフローを説明する。
本実施例の付加情報システムにおいて、各表示クライアント端末３は、舞台上のコンテンツが開始する前の段階で、まずステップＳ０１によって表示する字幕を事前にダウンロードする。次いで、ステップＳ０２により、各観客が表示したい字幕の言語を選択すると、ステップＳ０３により指示サーバからの指示を待機する状態となる。
なお、ステップＳ０２は開始前だけでなく、コンテンツの進行中に任意で実行できるようにしてもよい。

【0039】

舞台の進行中に、任意のタイミングで、オペレータが指示サーバ２を操作して表示させたい字幕をステップＳ０４によって指示すると、当該指示に従ってステップＳ０５により字幕のインデックスからなる指示情報が作成される。
次いで、当該指示情報はステップＳ０６により、表示クライアント端末３に一斉送信される。
表示クライアント端末３は、上記一斉送信された指示情報をステップＳ０７により受信すると、ステップＳ０８により、当該配信情報が有するインデックスと、ステップＳ０２で選択した言語から表示する字幕を作成する。
作成した字幕はステップＳ０９により表示装置３３のディスプレイ３３７に表示される。
上記ステップＳ０４〜Ｓ０６までは、舞台が終了する、或いは表示すべき字幕の表示が全て完了するまで繰り返される。この繰り返し処理に対応する表示クライアント端末側のステップＳ０３〜Ｓ０９までの処理は、図４においては明確に終了条件が設けられていないが、指示サーバ側における繰り返しの終了時に、表示クライアント端末側の処理を停止する指示を送るようにしてもよいし、制御装置３２を操作することによって停止させるようにしてもよい。

【0040】

本実施例では、記録手段５１は指示端末２１が備えた二次記憶装置上のファイルシステムであるが、記録手段５１を指示端末２１とは別のコンピュータ等が備える構成とし、当該コンピュータと指示端末２１をネットワーク等により通信可能としてもよい。
この時、上記コンピュータ等、記録手段５１をインターネット上のクラウドサービスとして提供し、表示クライアント端末３の付加情報取得手段６１はインターネットを介して字幕をダウンロードする構成とすれば、送信端末２２と受信端末３１、および両者の通信経路となる通信ネットワーク４は単に指示情報のみを送受信できればよく、通信の遅延等を最小にすべく単純な通信形式を選択することが可能となる。

【0041】

本実施例の説明は以上であるが、本実施例の構成によれば、字幕を各観客の頭部に装着したヘッドマウント・ディスプレイ型の表示装置３３に表示することにより、舞台横に大型の表示装置を設ける必要がなく、また、選択手段６２によって表示する字幕の言語、すなわち付加情報の種類を選択することができるので、各観客が各自所望する情報のみを得ることができる。

【0042】

なお、本発明の構成は上記実施形態に限られるものではない。例えば、本実施例では付加情報である字幕をＣＶＳ形式のファイルとして記録しているが、記録形式はこれに限られない。同様にテキストファイルを用いる場合はＴＳＶ形式やＸＭＬ形式でもよく、ファイルシステムの代わりにリレーショナル・データベース・マネージメントシステム（ＲＤＢＭＳ）を用いてもよい。

【0043】

また、表示クライアント端末３の利用者は観客に限定されるものではない。例えば、舞台上の演者等が装着し、任意のタイミングで台詞等を表示することにより、本発明の付加情報表示システムをプロンプタとして使用しても良い。
表示する付加情報についても、字幕のような文字情報には限られず、画像等を表示するようにしてもよい。
その他の具体的構成についても、本実施形態に限られるものではなく、本発明の趣旨を逸脱しない範囲でさまざまな変更が可能である。

【符号の説明】

【0044】

１ 付加情報表示システム
２ 指示サーバ
２１ 指示端末
２２ 送信装置
３ 表示クライアント端末
３２ 制御装置
３３ 表示装置
４ 配信ネットワーク
５１ 記録手段
５２ 指示手段
５３ 送信手段
６１ 付加情報取得手段
６２ 選択手段
６３ 受信手段
６４ 表示情報取得手段
６５ 表示手段

【図1】

【図2】

【図3】

【図4】

【図5】