特許 7423928 映像処理システム、映像処理方法、映像処理装置及び映像処理プログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-01-22

(45)【発行日】2024-01-30

(54)【発明の名称】映像処理システム、映像処理方法、映像処理装置及び映像処理プログラム

(51)【国際特許分類】

   H04N 5/92 20060101AFI20240123BHJP

   H04N 5/765 20060101ALI20240123BHJP

   H04N 21/431 20110101ALI20240123BHJP

   H04N 21/435 20110101ALI20240123BHJP

   H04N 21/854 20110101ALI20240123BHJP

   H04N 23/60 20230101ALI20240123BHJP

【ＦＩ】

H04N5/92 010

H04N5/765

H04N21/431

H04N21/435

H04N21/854

H04N23/60 300

H04N23/60 500

【請求項の数】 9

(21)【出願番号】P 2019140705

(22)【出願日】2019-07-31

(65)【公開番号】P2021027376

(43)【公開日】2021-02-22

【審査請求日】2022-04-28

(73)【特許権者】

【識別番号】308036402

【氏名又は名称】株式会社ＪＶＣケンウッド

(74)【代理人】

【識別番号】100103894

【弁理士】

【氏名又は名称】家入 健

(72)【発明者】

【氏名】小野寺 毅

【審査官】鈴木 順三

(56)【参考文献】

【文献】特開２０１５－１３６０８９（ＪＰ，Ａ）

【文献】特開２０１４－２１２４５９（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ５／７６ － ５／９５６

Ｈ０４Ｎ ２１／００ － ２１／８５８

Ｈ０４Ｎ ２３／４０ － ２３／７６

(57)【特許請求の範囲】

【請求項1】

付帯情報タグ表示装置と、映像処理装置と、を備える映像処理システムであって、
前記付帯情報タグ表示装置は、
付加情報ファイルの付帯情報が含まれている付帯情報タグをビデオカメラが撮影可能で
あるように表示する表示部を備え、
前記映像処理装置は、
前記ビデオカメラが撮影したビデオ映像を取得する映像取得部と、
前記映像取得部が取得した前記ビデオ映像中に記録されている前記付帯情報タグを検出
して、前記付加情報ファイルの前記付帯情報を読み込む付帯情報読込部と、
前記付帯情報読込部が読み込んだ前記付帯情報に基づいて前記付加情報ファイルを取得
する付加情報ファイル取得部と、
前記付加情報ファイル取得部が取得した前記付加情報ファイルから付加情報を生成する
付加情報生成部と、を備え、
前記ビデオカメラで前記ビデオ映像を撮影する際に、前記表示部に表示された前記付帯
情報タグを撮影することによって、前記ビデオ映像に前記付帯情報タグを記録する、
映像処理システム。

【請求項2】

前記付加情報生成部が生成した前記付加情報を前記映像取得部が取得した前記ビデオ映
像に重畳して付加情報付き映像を生成する映像生成部をさらに備える、
請求項１に記載の映像処理システム。

【請求項3】

前記映像生成部が生成した前記付加情報付き映像を再生する映像再生部をさらに備える
、
請求項２に記載の映像処理システム。

【請求項4】

前記映像生成部が生成した前記付加情報付き映像を外部に出力する映像出力部をさらに
備える、
請求項２又は３に記載の映像処理システム。

【請求項5】

前記付加情報ファイル取得部は、
前記付加情報ファイルが保存されている付加情報ファイル生成サーバに接続可能であり
、
前記付加情報ファイルの前記付帯情報に基づいて前記付加情報ファイル生成サーバに保
存されている前記付加情報ファイルを取得する、
請求項１～４のいずれか一項に記載の映像処理システム。

【請求項6】

前記付加情報ファイル取得部は、
前記付加情報ファイルが保存されている記録デバイスに接続可能であり、
前記付加情報ファイルの前記付帯情報に基づいて前記記録デバイスに保存されている前
記付加情報ファイルを取得する、
請求項１～４のいずれか一項に記載の映像処理システム。

【請求項7】

付加情報ファイルの付帯情報が含まれている付帯情報タグをビデオカメラが撮影可能で
あるように表示する表示ステップと、
前記ビデオカメラが撮影したビデオ映像を取得する映像取得ステップと、
取得した前記ビデオ映像中に記録されている前記付帯情報タグを検出して、前記付加情
報ファイルの前記付帯情報を読み込む付帯情報読込ステップと、
読み込んだ前記付帯情報に基づいて前記付加情報ファイルを取得する付加情報ファイル
取得ステップと、
取得した前記付加情報ファイルから付加情報を生成する付加情報生成ステップと、
前記ビデオカメラで前記ビデオ映像を撮影する際に、表示された前記付帯情報タグを撮
影することによって、前記ビデオ映像に前記付帯情報タグを記録するステップと、
を含む映像処理方法。

【請求項8】

映像に情報を付加する映像処理装置であって、
付帯情報タグ表示装置が表示した付加情報ファイルの付帯情報が含まれている付帯情報
タグを含み、かつ、ビデオカメラによって撮影された、ビデオ映像を取得する映像取得部
と、
前記映像取得部が取得した前記ビデオ映像中に記録されている前記付帯情報タグを検出
して、前記付加情報ファイルの前記付帯情報を読み込む付帯情報読込部と、
前記付帯情報読込部が読み込んだ前記付帯情報に基づいて前記付加情報ファイルを取得
する付加情報ファイル取得部と、
前記付加情報ファイル取得部が取得した前記付加情報ファイルから付加情報を生成する
付加情報生成部と、を備え、
前記付帯情報タグ表示装置は、前記付加情報ファイルの前記付帯情報が含まれている前
記付帯情報タグを前記ビデオカメラが撮影可能であるように表示する表示部を備えること
を特徴とする映像処理装置。

【請求項9】

映像に情報を付加する映像処理プログラムであって、
付帯情報タグ表示装置が表示した付加情報ファイルの付帯情報が含まれている付帯情報
タグを含み、かつ、ビデオカメラによって撮影された、ビデオ映像を取得する映像取得ス
テップと、
前記映像取得ステップが取得した前記ビデオ映像中に記録されている前記付帯情報タグ
を検出して、前記付加情報ファイルの前記付帯情報を読み込む付帯情報読込ステップと、
前記付帯情報読込ステップが読み込んだ前記付帯情報に基づいて前記付加情報ファイル
を取得する付加情報ファイル取得ステップと、
前記付加情報ファイル取得ステップが取得した前記付加情報ファイルから付加情報を生
成する付加情報生成ステップと、をコンピュータに実行させることを特徴とする映像処理
プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、映像処理装置、映像処理方法、プログラム、及び映像処理システムに関する。

【背景技術】

【0002】

近年、ビデオカメラを用いて撮影したビデオ映像に付加情報を重畳する需要が高まっている。例えば、特許文献１には、付加情報をコード化したバーコードをビデオ映像に重畳し、当該バーコードを読み込むことによって付加情報を当該ビデオ映像上に表示する技術が開示されている。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２０１５－０７０４２３号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

上述のように、特許文献１に開示されている技術では、付加情報をコード化したバーコードをビデオ映像に重畳している。しかしながら、バーコード中に記録可能な情報量は、限られている。そのため、ビデオ映像上に表示可能な付加情報の情報量は、限られている。

【0005】

本発明は、このような問題点に鑑みなされたものであり、より情報量が多い付加情報をビデオ映像に重畳可能な映像処理装置、映像処理方法、プログラム、及び映像処理システムを提供することを目的とする。

【課題を解決するための手段】

【0006】

本発明の一態様に係る映像処理装置は、
ビデオカメラが撮影したビデオ映像を取得する映像取得部と、
前記映像取得部が取得した前記ビデオ映像中に記録されている付帯情報タグを検出して付加情報ファイルの付帯情報を読み込む付帯情報読込部と、
前記付帯情報読込部が読み込んだ前記付帯情報に基づいて前記付加情報ファイルを取得する付加情報ファイル取得部と、
前記付加情報ファイル取得部が取得した前記付加情報ファイルから付加情報を生成する付加情報生成部と、を備える。

【0007】

本発明の一態様に係る映像処理方法は、
ビデオカメラが撮影したビデオ映像を取得するステップと、
取得した前記ビデオ映像中に記録されている付帯情報タグを検出して付加情報ファイルの付帯情報を読み込むステップと、
読み込んだ前記付帯情報に基づいて前記付加情報ファイルを取得するステップと、
取得した前記付加情報ファイルから付加情報を生成するステップと、を備える。

【0008】

本発明の一態様に係るプログラムは、
ビデオカメラが撮影したビデオ映像を取得するステップと、
取得した前記ビデオ映像中に記録されている付帯情報タグを検出して付加情報ファイルの付帯情報を読み込むステップと、
読み込んだ前記付帯情報に基づいて前記付加情報ファイルを取得するステップと、
取得した前記付加情報ファイルから付加情報を生成するステップと、をコンピュータに実行させる。

【0009】

本発明の一態様に係る映像処理システムは、
付帯情報タグ表示装置と、映像処理装置と、を備える映像処理システムであって、
前記付帯情報タグ表示装置は、
付加情報ファイルの付帯情報が含まれている付帯情報タグをビデオカメラが撮影可能であるように表示する表示部を備え、
前記映像処理装置は、
前記ビデオカメラが撮影したビデオ映像を取得する映像取得部と、
前記映像取得部が取得した前記ビデオ映像中に記録されている前記付帯情報タグを検出して、前記付加情報ファイルの前記付帯情報を読み込む付帯情報読込部と、
前記付帯情報読込部が読み込んだ前記付帯情報に基づいて前記付加情報ファイルを取得する付加情報ファイル取得部と、
前記付加情報ファイル取得部が取得した前記付加情報ファイルから付加情報を生成する付加情報生成部と、を備え、
前記ビデオカメラで前記撮影影像を撮影する際に、前記表示部に表示された前記付帯情報タグを撮影することによって、前記ビデオ映像に前記付帯情報タグを記録する。

【発明の効果】

【0010】

本発明によれば、より情報量が多い付加情報をビデオ映像に重畳可能な映像処理装置、映像処理方法、プログラム、及び映像処理システムを提供することができる。

【図面の簡単な説明】

【0011】

【図1】第１の実施形態に係る映像処理システムの構成を示す全体図である。

【図2】第１の実施形態に係る映像処理装置及びその周辺の構成を示すブロック図である。

【図3】第１の実施形態に係る映像処理システムの映像撮影時における一動作例を示すシーケンスチャートである。

【図4】第１の実施形態に係る映像処理システムの映像再生時における一動作例を示すシーケンスチャートである。

【図5】第２の実施形態に係る映像処理装置及びその周辺の構成を示すブロック図である。

【図6】第２の実施形態に係る映像処理システムの映像出力時における一動作例を示すシーケンスチャートである。

【図7】第３の実施形態に係る映像処理システムの構成を示す全体図である。

【図8】第３の実施形態に係る付帯情報タグ表示装置及びその周辺の構成を示すブロック図である。

【図9】第３の実施形態に係る映像処理装置及びその周辺の構成を示すブロック図である。

【図10】第３の実施形態に係る映像処理システムの映像撮影時における一動作例を示すシーケンスチャートである。

【図11】第３の実施形態に係る映像処理システムの映像再生時における一動作例を示すシーケンスチャートである。

【発明を実施するための形態】

【0012】

以下、図面を参照して本発明の実施の形態について説明する。なお、以下の記載及び図面は、説明の明確化のため、適宜、省略及び簡略化がなされている。また、以下の各図面において、同一の要素には同一の符号が付されており、必要に応じて重複説明は省略されている。また、以下で示す具体的な数値等は、発明の理解を容易とするための例示にすぎず、これに限定されるものではない。

【0013】

（第１の実施形態）
まず、図１を参照して、第１の実施形態に係る映像処理システムの構成について説明を行う。図１は、第１の実施形態に係る映像処理システムの構成を示す全体図である。図１に示すように、映像処理システム１は、映像処理装置１１、付帯情報タグ表示装置１２、ビデオカメラ１３、付加情報データサーバ１４、及び付加情報ファイル生成サーバ１５を備える。付帯情報タグ表示装置１２は、表示部１２ａ、及びトリガ１２ｂを備える。

【0014】

映像処理システム１は、ビデオカメラ１３を用いて撮影されたビデオ映像に付加情報を重畳して生成された付加情報付き映像を再生することが可能なシステムである。付加情報は、ユーザーが視認可能な情報である。付加情報は、例えば、字幕である。付加情報は、ＨＴＭＬ（HyperText Markup Language）等のマークアップ言語を用いて視覚表現や文章構造を規定する情報であってもよい。付加情報としてＨＴＭＬ等のマークアップ言語を使用する場合、字幕を使用する場合に比較して、より表現力の高い付加情報付き映像を生成することができる。

【0015】

付加情報ファイル生成サーバ１５は、付帯情報タグ表示装置１２の指示に基づいて付加情報ファイルを生成する。具体的には、図示しないユーザーがトリガ１２ｂを操作されると、付加情報ファイル生成サーバ１５は、付加情報ファイルの生成を開始する。付加情報ファイルは、付加情報を含むファイルである。付加情報ファイル生成サーバ１５は、付加情報データサーバ１４に接続して付加情報データを受信可能である。付加情報ファイル生成サーバ１５は、受信した付加情報データに基づいて付加情報ファイルを生成して保存する。付加情報ファイル生成サーバ１５は、付加情報ファイルの付帯情報から付帯情報タグを生成して、付帯情報タグ表示装置１２に送信する。

【0016】

付帯情報は、付加情報ファイルに付帯する情報である。付帯情報は、具体的には、例えば、付加情報ファイルの存在場所、付加情報ファイルの名称、及び付加情報ファイルのファイル形式である。付帯情報タグは、付帯情報をコード化又は信号化したものである。付帯情報タグは、例えば、付加情報ファイルのＵＲＬ（Uniform Resource Locator）をコード化又は信号化したものである。付帯情報タグは、付加情報ファイルへのアクセス方法に関する情報をさらに含んでいてもよい。付加情報ファイルへのアクセス方法に関する情報は、例えば、付加情報ファイル生成サーバ１５へのアクセス方法、ログイン名、及びパスワードである。

【0017】

付加情報ファイル生成サーバ１５から送信された付帯情報タグは、付帯情報タグ表示装置１２が備える表示部１２ａに、ビデオカメラ１３が撮影可能であるように表示される。付帯情報タグは、ビデオカメラ１３が撮影可能であるものであれば、どのような形式のものであってもよい。付帯情報タグは、例えば、２次元コード、バーコード、及び文字列等の映像である。付帯情報タグが映像である場合、表示部１２ａは、例えば、映像を表示可能なディスプレイである。

【0018】

付帯情報タグは、ＤＴＭＦ（Dual-Tone Multi-Frequency）や音響透かし等の音声信号であってもよい。付帯情報タグが音声信号である場合、表示部１２ａは、例えば、音声信号を出力可能なスピーカーである。付帯情報タグは、可視光又は赤外光を使用した光信号であってもよい。付帯情報タグが光信号である場合、表示部１２ａは、例えば、光信号を出力可能な発光ダイオードである。

【0019】

ビデオカメラ１３は、映像を撮影する際に表示部１２ａに表示された付帯情報タグを撮影することによって、ビデオ映像に付帯情報タグを記録する。映像処理装置１１は、ビデオカメラ１３が撮影したビデオ映像ファイルを取り込み、付加情報を当該ビデオ映像ファイルに重畳して付加情報付き映像ファイルを生成する。

【0020】

図２を参照して、映像処理装置１１の構成について説明する。図２は、第１の実施形態に係る映像処理装置及びその周辺の構成を示すブロック図である。図２に示すように、映像処理装置１１は、映像取得部１１ａ、付帯情報読込部１１ｂ、付加情報ファイル取得部１１ｃ、付加情報生成部１１ｄ、映像生成部１１ｅ、及び映像再生部１１ｆを備える。図２には、映像処理装置１１に加えて、ビデオカメラ１３、及び付加情報ファイル生成サーバ１５を図示している。

【0021】

映像処理装置１１は、コンピュータとしての機能を備える。映像処理装置１１は、例えば、パソコン、スマートフォン、及びタブレット端末等の通信機器である。映像処理装置１１は、内部又は外部の記録装置（図示略）からプログラムを供給される。映像処理装置１１は、記録装置に記録されたプログラムを実行し、各種処理を行うことができる。映像処理装置１１は、記録装置に記録されたプログラムを実行することによって、映像取得部１１ａ、付帯情報読込部１１ｂ、付加情報ファイル取得部１１ｃ、付加情報生成部１１ｄ、映像生成部１１ｅ、及び映像再生部１１ｆとして機能する。映像処理装置１１は、例えば、映像取得部１１ａ、付帯情報読込部１１ｂ、付加情報ファイル取得部１１ｃ、付加情報生成部１１ｄ、映像生成部１１ｅ、及び映像再生部１１ｆとして映像処理装置１１を機能させるプログラムを含むアプリケーションが搭載されたパソコンである。

【0022】

映像取得部１１ａは、ビデオカメラ１３が撮影したビデオ映像ファイルを取得する。付帯情報読込部１１ｂは、映像取得部１１ａが取得したビデオ映像ファイル中に記録されている付帯情報タグを検出して付帯情報を読み込む。付加情報ファイル取得部１１ｃは、付帯情報読込部１１ｂが読み込んだ付帯情報に基づいて付加情報ファイルを取得する。具体的には、付加情報ファイル取得部１１ｃは、付帯情報読込部１１ｂが読み込んだ付帯情報に基づいて付加情報ファイル生成サーバ１５に保存されている付加情報ファイルを取得する。

【0023】

付加情報生成部１１ｄは、付加情報ファイル取得部１１ｃが取得した付加情報ファイルから付加情報を生成する。映像生成部１１ｅは、付加情報生成部１１ｄが生成した付加情報を映像取得部１１ａが取得したビデオ映像ファイルに重畳して付加情報付き映像ファイルを生成する。映像再生部１１ｆは、映像生成部１１ｅが生成した付加情報付き映像ファイルを再生する。

【0024】

（一動作例）
次に、図３及び図４を参照して、映像処理システム１の一動作例について説明を行う。映像処理システム１は、ビデオカメラ１３を用いてビデオ映像を撮影した後に、映像処理装置１１を用いて当該ビデオ映像に付加情報を合成して再生する。図３は、第１の実施形態に係る映像処理システムの映像撮影時における一動作例を示すシーケンスチャートである。図４は、第１の実施形態に係る映像処理システムの映像再生時における一動作例を示すシーケンスチャートである。

【0025】

ビデオ映像を撮影する際には、ユーザーは、まず、ビデオカメラ１３を操作してビデオ映像の撮影を開始する（ステップＳ１０１）。ユーザーは、ステップＳ１０１を行うと同時に付帯情報タグ表示装置１２が備えるトリガ１２ｂを操作する（ステップＳ１０２）。付帯情報タグ表示装置１２は、トリガ１２ｂが操作されると、付加情報ファイル生成サーバ１５に付加情報ファイルの生成開始を指示する（ステップＳ１０３）。

【0026】

付加情報ファイル生成サーバ１５は、付加情報ファイル生成開始の指示を受けると、付加情報データサーバ１４に接続する（ステップＳ１０４）。付加情報データサーバ１４は、付加情報データを付加情報ファイル生成サーバ１５に送信する（ステップＳ１０５）。付加情報ファイル生成サーバ１５は、付加情報データサーバ１４から受信した付加情報データに基づいて付加情報ファイルの生成を開始し、当該付加情報ファイルの付帯情報から付帯情報タグを生成する（ステップＳ１０６）。付加情報ファイル生成サーバ１５は、生成した付帯情報タグを付帯情報タグ表示装置１２に送信する（ステップＳ１０７）。

【0027】

付加情報データサーバ１４は、図３に示す例では、付加情報ファイル生成サーバ１５に接続されている間に、付加情報データを複数回送信する。なお、付加情報データサーバ１４が付加情報データを送信する回数は、特に限定されず、複数回であってもよいし、１回であってもよい。付加情報データサーバ１４が複数回付加情報データを送信する場合、付加情報ファイル生成サーバ１５は、送信された複数の付加情報データを１つの付加情報ファイルとして生成する。

【0028】

付加情報ファイル生成サーバ１５が送信した付帯情報タグは、付帯情報タグ表示装置１２が備える表示部１２ａに表示される（ステップＳ１０８）。ユーザーは、ビデオカメラ１３を用いて、表示部１２ａに表示された付帯情報タグを撮影する（ステップＳ１０９）。そして、ユーザーは、ビデオカメラを用いて、撮影対象物を撮影する（ステップＳ１１０）。撮影対象物は、特に限定されず、ユーザーが適宜選択可能である。

【0029】

図３に示す例では、ステップＳ１０９を行った後にステップＳ１１０を行っている。しかしながら、ステップＳ１０９及びステップＳ１１０を行う順序は特に限定されず、ステップＳ１１０を行った後にステップＳ１０９を行ってもよい。また、ステップＳ１１０を行っている途中でステップＳ１０９を行い、再度ステップＳ１１０を行ってもよい。

【0030】

ユーザーは、撮影対象物を撮影した後に、ビデオカメラを操作して撮影を終了する（ステップＳ１１２）。ユーザーは、ステップＳ１１２を行った後に付帯情報タグ表示装置１２が備えるトリガ１２ｂを操作する（ステップＳ１１２）。付帯情報タグ表示装置１２は、ステップＳ１１２においてトリガ１２ｂが操作されると、付加情報ファイル生成サーバ１５に付加情報ファイルの生成終了を指示する（ステップＳ１１３）。付加情報ファイル生成サーバ１５は、付加情報ファイル生成終了の指示を受けると、付加情報データサーバ１４との接続を切断し（ステップＳ１１４）、付加情報ファイルの生成を終了する（ステップＳ１１５）。生成された付加情報ファイルは、付加情報ファイル生成サーバに保管される。

【0031】

このように、映像処理システム１は、ビデオカメラ１３を用いてビデオ映像を撮影する際に、付帯情報タグをビデオ映像ファイルに記録することができる。したがって、ビデオ映像を撮影した後に、ビデオ映像ファイルに付帯情報タグを付与する処理を行う必要がない。また、ビデオカメラ１３に、付帯情報タグをビデオ映像ファイルに埋め込むための構成を設ける必要がない。そのため、ビデオカメラ１３は、ビデオ機能を備えるビデオカメラであればどのようなものであってもよい。

【0032】

図４は、第１の実施形態に係る映像処理システムの映像再生時における一動作例を示すシーケンスチャートである。映像を再生する際には、まず、ユーザーは、ビデオカメラ１３からビデオ映像ファイルを取り出す（ステップＳ２０１）。ユーザーは、ビデオ映像ファイルの再生を開始するために、映像処理装置１１を操作してビデオカメラ１３から取り出したビデオ映像ファイルを映像取得部１１ａに読み込ませる（ステップＳ２０２）。映像取得部１１ａは、ステップＳ２０２におけるユーザーの操作によってビデオ映像ファイルを取得する。

【0033】

次に、付帯情報読込部１１ｂは、映像取得部１１ａが取得したビデオ映像中に記録されている付帯情報タグを検出し（ステップＳ２０３）、付帯情報タグを読み込んで付帯情報を取得する（ステップＳ２０４）。付加情報ファイル取得部１１ｃは、付帯情報読込部１１ｂが取得した付帯情報に基づいて、付加情報ファイル生成サーバ１５から付加情報ファイルを取得する（ステップＳ２０５）。次に、付加情報生成部１１ｄが付加情報ファイルから付加情報を生成し、映像生成部１１ｅがビデオ映像ファイルに付加情報を重畳して付加情報付き映像ファイルを生成する（ステップＳ２０６）。映像再生部１１ｆは、映像生成部１１ｅが生成した付加情報付き映像ファイルを再生する（ステップＳ２０７）。

【0034】

このように、映像処理装置１１は、ビデオ映像中に記録された付帯情報タグから付加情報ファイルを取得して、ビデオ映像ファイルに付加情報を重畳することができる。付帯情報タグは、ビデオ映像中に記録されるものであるため、含むことができる情報量が限られている。一方、付加情報ファイルは、付加情報ファイル生成サーバ１５上に保存されるものであるため、付帯情報タグに比較して情報量が多いものであってもよい。したがって、映像処理装置１１を用いた映像処理方法では、例えば、付加情報をコード化したバーコードをビデオ映像に記録する方法に比較して、より情報量の多い付加情報をビデオ映像に重畳させることができる。このように、映像処理システム１では、映像再生時に映像処理装置１１を付帯情報タグ表示装置１２に接続する必要がない。

【0035】

（一変形例）
図３に示す例では、ユーザーが、ステップＳ１０１とステップＳ１０２とを同時に行うことによって、付加情報をビデオ映像に表示させるタイミングを合わせている。しかしながら、付帯情報タグに付加情報生成開始からの経過時間を入れ込む場合、ステップＳ１０１とステップＳ１０２とを同時に行わずに、付加情報をビデオ映像に表示させるタイミングを合わせることができる。具体的には、付帯情報タグを周期的に変更、すなわち付帯情報タグを単位時間毎に変更して付帯情報タグに付加情報生成開始からの経過時間を入れ込む。当該単位時間は、特に限定されず適宜設定される。当該単位時間は、例えば１秒及び１００ミリ秒等である。映像処理装置１１は、付帯情報タグに入れ込まれた経過時間から付加情報生成開始時間を算出し、付加情報をビデオ映像に表示させるタイミングを合わせる。

【0036】

なお、第１の実施形態において説明した変形例は、以降の実施形態においても同様に行うことができる。

【0037】

（第２の実施形態）
次に、図５を参照して、第２の実施形態に係る映像処理システム及び映像処理装置の構成について説明を行う。図５は、第２の実施形態に係る映像処理装置及びその周辺の構成を示すブロック図である。第２の実施形態に係る映像処理システムは、図１に示す映像処理装置１１に代えて、図５に示す映像処理装置２１を備える。映像処理装置２１は、図２に示す映像処理装置１１が備える映像再生部１１ｆに代えて映像出力部２１ｇを備える。映像出力部２１ｇは、映像生成部１１ｅが生成した付加情報付き映像ファイルを外部に出力する。その他の構成については、第１の実施形態において説明したものと同様であるため、重複した説明は適宜省略する。

【0038】

（一動作例）
図６を参照して、第２の実施形態に係る映像処理システムの一動作例について説明を行う。第２の実施形態に係る映像処理システムは、ビデオカメラ１３を用いてビデオ映像を撮影した後に、映像処理装置２１を用いて当該ビデオ映像に付加情報を合成して出力する。第２の実施形態に係る映像処理システムの映像撮影時における動作は、第１の実施形態に係る映像処理システムの映像撮影時における動作と同様であるため、説明を省略する。図６は、第２の実施形態に係る映像処理システムの映像出力時における一動作例を示すシーケンスチャートである。

【0039】

映像を出力する際には、まず、ユーザーは、ビデオカメラ１３からビデオ映像ファイルを取り出す（ステップＳ３０１）。ユーザーは、ビデオ映像ファイルの出力を行うために、映像処理装置２１を操作してビデオカメラ１３から取り出したビデオ映像ファイルを映像取得部１１ａに読み込ませる（ステップＳ３０２）。映像取得部１１ａは、ステップＳ３０２におけるユーザーの操作によってビデオ映像ファイルを取得する。

【0040】

次に、付帯情報読込部１１ｂは、映像取得部１１ａが取得したビデオ映像中に記録されている付帯情報タグを検出し（ステップＳ３０３）、付帯情報タグを読み込んで付帯情報を取得する（ステップＳ３０４）。付加情報ファイル取得部１１ｃは、付帯情報読込部１１ｂが取得した付帯情報に基づいて、付加情報ファイル生成サーバ１５から付加情報ファイルを取得する（ステップＳ３０５）。

【0041】

次に、付加情報生成部１１ｄが付加情報ファイルから付加情報を生成し、映像生成部１１ｅがビデオ映像ファイルに付加情報を重畳して付加情報付き映像ファイルを生成する（ステップＳ３０６）。映像出力部２１ｇは、映像生成部１１ｅが生成した付加情報付き映像ファイルを出力する。ユーザーは、映像出力部２１ｇが出力した付加情報付き映像ファイルを取得する（ステップＳ３０７）。このように、映像処理装置２１は、ビデオ映像中に記録された付帯情報タグから付加情報ファイルを取得して、ビデオ映像ファイルに付加情報を重畳することができる。

【0042】

（第３の実施形態）
次に、図７～９を参照して、第３の実施形態に係る映像処理システムの構成について説明を行う。図７は、第３の実施形態に係る映像処理システムの構成を示す全体図である。図８は、第３の実施形態に係る付帯情報タグ表示装置及びその周辺の構成を示すブロック図である。図９は、第３の実施形態に係る映像処理装置及びその周辺の構成を示すブロック図である。

【0043】

図７に示すように、映像処理システム３は、映像処理装置３１、付帯情報タグ表示装置３２、ビデオカメラ１３、及び付加情報データサーバ１４を備える。映像処理システム３は、図１に示す映像処理装置１１に代えて、映像処理装置３１を備える。映像処理システム３は、図１に示す付帯情報タグ表示装置１２に代えて、付帯情報タグ表示装置３２を備える。なお、映像処理システム３は、図１に示した付加情報ファイル生成サーバ１５を備えない。その他の構成については、第１の実施形態において説明したものと同様であるため、重複した説明は適宜省略する。

【0044】

図７に示すように、付帯情報タグ表示装置３２は、表示部１２ａ及びトリガ１２ｂに加えて、記録デバイス３２ｅ、及びインターフェース３２ｆを備える。付帯情報タグ表示装置３２は、図８に示すように、図７に示した構成に加えて、付加情報ファイル生成部３２ｃ、及び付帯情報タグ生成部３２ｄを備える。付加情報ファイル生成部３２ｃは、付加情報データサーバ１４から付加情報データを受信して、付加情報ファイルを生成することができる。

【0045】

付帯情報タグ生成部３２ｄは、付加情報ファイル生成部３２ｃが生成した付加情報ファイルの付帯情報から付帯情報タグを生成する。表示部１２ａは、付帯情報タグ生成部３２ｄが生成した付帯情報タグをビデオカメラ１３が撮影可能であるように表示する。記録デバイス３２ｅは、付加情報ファイル生成部３２ｃが生成した付加情報ファイルを保存する。インターフェース３２ｆは、記録デバイス３２ｅと映像処理装置３１とを接続する。

【0046】

図９に示すように、映像処理装置３１は、映像取得部１１ａ、付帯情報読込部１１ｂ、付加情報ファイル取得部３１ｃ、付加情報生成部１１ｄ、映像生成部１１ｅ、及び映像再生部１１ｆを備える。映像処理装置３１は、映像処理装置１１が備える付加情報ファイル取得部１１ｃに代えて、付加情報ファイル取得部３１ｃを備える。付加情報ファイル取得部３１ｃは、付帯情報読込部１１ｂが読み込んだ付帯情報に基づいて付加情報ファイルを取得する。具体的には、付加情報ファイル取得部３１ｃは、付帯情報読込部１１ｂが読み込んだ付帯情報に基づいて記録デバイス３２ｅに保存されている付加情報ファイルを取得する。

【0047】

（一動作例）
次に、図１０及び図１１を参照して、映像処理システム３の一動作例について説明を行う。映像処理システム３は、ビデオカメラ１３を用いてビデオ映像を撮影した後に、映像処理装置３１を用いて当該ビデオ映像に付加情報を合成して再生する。図１０は、第３の実施形態に係る映像処理システムの映像撮影時における一動作例を示すシーケンスチャートである。図１１は、第３の実施形態に係る映像処理システムの映像再生時における一動作例を示すシーケンスチャートである。

【0048】

ビデオ映像を撮影する際には、ユーザーは、まず、ビデオカメラ１３を操作してビデオ映像の撮影を開始する（ステップＳ４０１）。ユーザーは、ステップＳ４０１を行うと同時に付帯情報タグ表示装置３２が備えるトリガ１２ｂを操作する（ステップＳ４０２）。付帯情報タグ表示装置３２が備える付加情報ファイル生成部３２ｃは、トリガ１２ｂが操作されると、付加情報データサーバ１４に接続する（ステップＳ４０３）。

【0049】

付加情報データサーバ１４は、付加情報データを付加情報ファイル生成部３２ｃに送信する（ステップＳ４０４）。付加情報ファイル生成部３２ｃは、付加情報データサーバ１４から受信した付加情報データに基づいて付加情報ファイルの生成を開始する。付帯情報タグ生成部３２ｄは、当該付加情報ファイルの付帯情報から付帯情報タグを生成する。付帯情報タグ生成部３２ｄが生成した付帯情報タグは、表示部１２ａに表示される（ステップＳ４０５）。ユーザーは、ビデオカメラ１３を用いて、表示部１２ａに表示された付帯情報タグを撮影する（ステップＳ４０６）。そして、ユーザーは、ビデオカメラを用いて、撮影対象物を撮影する（ステップＳ４０７）。

【0050】

ユーザーは、撮影対象物を撮影した後に、ビデオカメラを操作して撮影を終了する（ステップＳ４０８）。ユーザーは、ステップＳ４０８を行った後に付帯情報タグ表示装置３２が備えるトリガ１２ｂを操作する（ステップＳ４０９）。付帯情報タグ表示装置１２は、ステップＳ４０９においてトリガ１２ｂが操作されると、付加情報データサーバ１４との接続を切断し（ステップＳ４１０）、付加情報ファイルの生成を終了する（ステップＳ４１１）。生成された付加情報ファイルは、記録デバイス３２ｅに保管される。このように、映像処理システム３は、ビデオカメラ１３を用いてビデオ映像を撮影する際に、付帯情報タグをビデオ映像ファイルに記録することができる。

【0051】

図１１は、第３の実施形態に係る映像処理システムの映像再生時における一動作例を示すシーケンスチャートである。映像を再生する際には、まず、ユーザーは、ビデオカメラ１３からビデオ映像ファイルを取り出す（ステップＳ５０１）。ユーザーは、ビデオ映像ファイルの再生を開始するために、映像処理装置３１を操作してビデオカメラ１３から取り出したビデオ映像ファイルを映像取得部１１ａに読み込ませる（ステップＳ５０２）。映像取得部１１ａは、ステップＳ５０２におけるユーザーの操作によってビデオ映像ファイルを取得する。

【0052】

次に、付帯情報読込部１１ｂは、映像取得部１１ａが取得したビデオ映像中に記録されている付帯情報タグを検出し（ステップＳ５０３）、付帯情報タグを読み込んで付帯情報を取得する（ステップＳ５０４）。付加情報ファイル取得部３１ｃは、付帯情報読込部１１ｂが取得した付帯情報に基づいて、記録デバイス３２ｅから付加情報ファイルを取得する（ステップＳ５０５）。

【0053】

次に、付加情報生成部１１ｄが付加情報ファイルから付加情報を生成し、映像生成部１１ｅがビデオ映像ファイルに付加情報を重畳して付加情報付き映像ファイルを生成する（ステップＳ５０６）。映像再生部１１ｆは、映像生成部１１ｅが生成した付加情報付き映像ファイルを再生する（ステップＳ５０７）。このように、映像処理装置１１は、ビデオ映像中に記録された付帯情報タグから付加情報ファイルを取得して、ビデオ映像ファイルに付加情報を重畳することができる。

【0054】

以上で説明した本実施の形態に係る発明により、より情報量の多い付加情報をビデオ映像に重畳可能な映像処理装置、映像処理方法、プログラム、及び映像処理システムを提供することができる。

【0055】

なお、本発明は、上述の実施形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。例えば、上述の実施形態１，２，３は、別々の実施の形態として説明したが、これら実施形態１，２，３は、適宜組み合わせられて実施されてもよい。

【0056】

例えば、上述の実施の形態において、様々な処理を行う機能ブロックとして図面に記載される各要素は、ハードウェア的には、ＣＰＵ（Central Processing Unit）、メモリ、その他の回路で構成することができ、ソフトウェア的には、メモリにロードされたプログラム等によって実現される。したがって、これらの機能ブロックがハードウェアのみ、ソフトウェアのみ、又はそれらの組合せによっていろいろな形で実現できることは当業者には理解されるところであり、いずれかに限定されるものではない。

【0057】

上述したプログラムは、様々なタイプの非一時的なコンピュータ可読媒体（non-transitory computer readable medium）を用いて格納され、コンピュータ（情報通知装置を含むコンピュータ）に供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（tangible storage medium）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）を含む。さらに、この例は、ＣＤ－ＲＯＭ（Read Only Memory）、ＣＤ－Ｒ、ＣＤ－Ｒ／Ｗを含む。さらに、この例は、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Programmable ROM）、ＥＰＲＯＭ（Erasable PROM）、フラッシュＲＯＭ、ＲＡＭ（Random Access Memory））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（transitory computer readable medium）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。

【符号の説明】

【0058】

１、３ 映像処理システム
１１、２１、３１ 映像処理装置
１１ａ 映像取得部
１１ｂ 付帯情報読込部
１１ｃ、３１ｃ 付加情報ファイル取得部
１１ｄ 付加情報生成部
１１ｅ 映像生成部
１１ｆ 映像再生部
２１ｇ 映像出力部
１２、３２ 付帯情報タグ表示装置
１２ａ 表示部
１２ｂ トリガ
３２ｃ 付加情報ファイル生成部
３２ｄ 付帯情報タグ生成部
３２ｅ 記録デバイス
３２ｆ インターフェース
１３ ビデオカメラ
１４ 付加情報データサーバ
１５ 付加情報ファイル生成サーバ

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】