特許 7229296 関連情報提供方法及びシステム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2023-02-16

(45)【発行日】2023-02-27

(54)【発明の名称】関連情報提供方法及びシステム

(51)【国際特許分類】

   H04N 21/4725 20110101AFI20230217BHJP

   H04N 21/488 20110101ALI20230217BHJP

【ＦＩ】

H04N21/4725

H04N21/488

【請求項の数】 17

(21)【出願番号】P 2021074133

(22)【出願日】2021-04-26

(65)【公開番号】P2022051500

(43)【公開日】2022-03-31

【審査請求日】2021-04-26

(31)【優先権主張番号】10-2020-0120470

(32)【優先日】2020-09-18

(33)【優先権主張国・地域又は機関】KR

(73)【特許権者】

【識別番号】505205812

【氏名又は名称】ネイバー コーポレーション

【氏名又は名称原語表記】ＮＡＶＥＲ Ｃｏｒｐｏｒａｔｉｏｎ

(73)【特許権者】

【識別番号】321003371

【氏名又は名称】ＬＩＮＥ株式会社

(74)【代理人】

【識別番号】100107766

【弁理士】

【氏名又は名称】伊東 忠重

(74)【代理人】

【識別番号】100070150

【弁理士】

【氏名又は名称】伊東 忠彦

(74)【代理人】

【識別番号】100135079

【弁理士】

【氏名又は名称】宮崎 修

(72)【発明者】

【氏名】アン ヘリュン

(72)【発明者】

【氏名】キム ラクヨン

(72)【発明者】

【氏名】パク ユジン

【審査官】鈴木 順三

(56)【参考文献】

【文献】特開２０１８－１１２６８１（ＪＰ，Ａ）

【文献】特開２０１３－１６８９２７（ＪＰ，Ａ）

【文献】特開２００７－０６５９２８（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ２１／００ － ２１／８５８

(57)【特許請求の範囲】

【請求項1】

字幕を含む動画像コンテンツをディスプレイ部の第１領域で再生するステップと、
前記字幕を構成するテキストの一部分を含むグラフィックオブジェクトを前記ディスプレイ部の第２領域に出力するステップと、
前記グラフィックオブジェクトに対する選択信号に基づいて、前記一部分のテキストに関する関連情報を提供するステップとを含み、
前記字幕において、前記一部分のテキストは、他の部分のテキストと区別されるように、ハイライト処理されて表示され、
前記ディスプレイ部には、前記動画像コンテンツが再生される第１領域及び前記グラフィックオブジェクトが表示される第２領域を含む第１ページが出力され、
前記ディスプレイ部に出力された前記第１ページは、
前記グラフィックオブジェクトに対する前記選択信号に基づいて、前記第１ページとは異なる第２ページに切り替えられる、関連情報提供方法。

【請求項2】

前記字幕を生成するステップをさらに含み、
前記字幕を生成するステップにおいては、
前記字幕を構成するテキスト中に、特定のデータベースに既に登録されたキーワードに対応する部分が存在するか否かを検索し、
前記字幕を構成するテキスト中に、前記既に登録されたキーワードに対応する部分をハイライト処理する、請求項１に記載の関連情報提供方法。

【請求項3】

前記一部分のテキストは、前記特定のデータベースに既に登録された特定のキーワードに対応し、
前記字幕において、前記一部分のテキストは、前記他の部分のテキストとは異なる色で表示される、請求項２に記載の関連情報提供方法。

【請求項4】

前記特定のデータベースには、
前記一部分のテキストに対応する前記特定のキーワードに関する関連情報が、前記特定のキーワードにマッチして保存される、請求項３に記載の関連情報提供方法。

【請求項5】

前記ディスプレイ部に前記第２ページが出力された場合、
前記第２ページの一領域には、前記第１ページの前記第１領域で再生されていた動画像コンテンツの制御に関するＧＵＩオブジェクトが出力される、請求項１～４のいずれか１項に記載の関連情報提供方法。

【請求項6】

前記ディスプレイ部に前記第２ページが出力されても、前記第１領域で再生されていた動画像コンテンツが継続して再生される、請求項５に記載の関連情報提供方法。

【請求項7】

前記ＧＵＩオブジェクトは、
前記ＧＵＩオブジェクトへのユーザ入力に基づいて、前記第２ページにおける出力位置及び出力サイズの少なくとも一方が変更される、請求項６に記載の関連情報提供方法。

【請求項8】

前記ディスプレイ部に出力された前記第２ページは、
前記ＧＵＩオブジェクトへの予め設定された方式のユーザ入力に基づいて、前記第１ページに切り替えられる、請求項７に記載の関連情報提供方法。

【請求項9】

前記グラフィックオブジェクトに対する前記選択信号は、第１選択信号及び第２選択信号を含み、
前記グラフィックオブジェクトに対する前記第１選択信号が入力されると、前記第２領域に前記一部分のテキストに関する第１関連情報が出力され、
前記グラフィックオブジェクトに対する前記第２選択信号が入力されると、前記一部分のテキストに関する第２関連情報を含む前記第２ページが出力される、請求項１～４のいずれか１項に記載の関連情報提供方法。

【請求項10】

前記第１関連情報は、前記第２関連情報の一部を含む、請求項９に記載の関連情報提供方法。

【請求項11】

前記第１領域には、前記動画像コンテンツの再生の程度を示すプログレスバーが表示され、
前記プログレスバーは、前記ハイライト処理された前記一部分のテキストが出力される再生地点を示すインジケータを含む、請求項１～１０のいずれか１項に記載の関連情報提供方法。

【請求項12】

前記インジケータを選択する前記選択信号が受信されると、前記ハイライト処理された前記一部分のテキストが前記字幕として含まれる地点から再生されるように、前記動画像コンテンツの再生を制御するステップをさらに含む、請求項１１に記載の関連情報提供方法。

【請求項13】

前記第１領域へのユーザ入力に基づいて、前記第１領域で再生されていた第１動画像コンテンツを前記第１動画像コンテンツとは異なる第２動画像コンテンツに切り替えるステップをさらに含む、請求項１～１２のいずれか１項に記載の関連情報提供方法。

【請求項14】

前記ユーザ入力に基づいて前記第１領域で再生される前記第２動画像コンテンツは、前記第１動画像コンテンツのテーマとは異なるテーマを有する、請求項１３に記載の関連情報提供方法。

【請求項15】

前記第１領域で再生される前記動画像コンテンツの字幕が変更されることにより、ハイライト処理される部分が変更された場合、前記第２領域に変更された前記ハイライト処理される部分に対応するグラフィックオブジェクトが出力されるように、前記第２領域に出力される情報が変更される、請求項１に記載の関連情報提供方法。

【請求項16】

通信部と、
第１領域及び第２領域に分けられる表示領域を含むディスプレイ部と、
前記第１領域で字幕を含む動画像コンテンツを再生し、前記第２領域に前記字幕を構成するテキストの一部分を含むグラフィックオブジェクトを出力するように、前記ディスプレイ部を制御する制御部とを含み、
前記制御部は、
前記グラフィックオブジェクトに対する選択信号に基づいて、前記一部分のテキストに関する関連情報を出力するように、前記ディスプレイ部を制御し、
前記字幕において、前記一部分のテキストは、他の部分のテキストと区別されるように、ハイライト処理されて表示され、
前記制御部は、さらに、
前記ディスプレイ部を、前記動画像コンテンツが再生される第１領域及び前記グラフィックオブジェクトが表示される第２領域を含む第１ページが出力されるように制御し、
前記ディスプレイ部に出力された前記第１ページは、
前記グラフィックオブジェクトに対する前記選択信号に基づいて、前記第１ページとは異なる第２ページに切り替えられる、関連情報提供システム。

【請求項17】

電子機器で１つ以上のプロセスにより実行され、コンピュータ可読媒体に格納可能なプログラムであって、
前記プログラムは、前記１つ以上のプロセスが実行されるとき。前記電子機器に、請求項１～１５のいずれか１項に記載の方法を実行させる、コンピュータ可読媒体に格納可能なプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、動画像を活用した関連情報提供方法及びシステムに関する。

【背景技術】

【0002】

技術が発展するにつれて、デジタルデバイスの活用度が高まっている。特に、電子機器（例えば、スマートフォン、タブレットＰＣなど）は、電話やテキストメッセージなどの通信機能はもとより、インターネットを活用したネットサーフィン、音楽鑑賞、映像コンテンツの視聴などの様々な機能を備えている。

【0003】

このような電子機器の大衆化に伴い、マルチメディアからなるコンテンツの消費が急増しており、特に動画像（又は動画像コンテンツ）の消費が次第に増加している。

【0004】

また、電子機器を活用したコンテンツの発達により、ユーザは、テキストのみからなるコンテンツよりは、動画像のようなより視覚化されたコンテンツを好む傾向がある。

【0005】

よって、このような趨勢に伴い、動画像フォーマットを活用してユーザに有用な情報を提供する方法に関するサービスの開発が盛んに行われている。

【発明の概要】

【発明が解決しようとする課題】

【0006】

本発明は、動画像フォーマットを活用してユーザに有用な情報を提供することのできる関連情報提供方法及びシステムを提供するためのものである。

【0007】

また、本発明は、動画像からなるコンテンツに関する関連情報を提供できるユーザ環境を構築するための関連情報提供方法及びシステムを提供するためのものである。

【0008】

さらに、本発明は、動画像からなるコンテンツと連携してさらに深い情報をより直感的かつ有機的に提供することのできる関連情報提供方法及びシステムを提供するためのものである。

【課題を解決するための手段】

【0009】

上記課題を解決するために、本発明による関連情報提供方法は、字幕を含む動画像コンテンツをディスプレイ部の第１領域で再生するステップと、前記字幕を構成するテキストの一部分を含むグラフィックオブジェクトを前記ディスプレイ部の第２領域に出力するステップと、前記グラフィックオブジェクトに対する選択信号に基づいて、前記一部分のテキストに関する関連情報を提供するステップとを含み、前記字幕において、前記一部分のテキストは、他の部分のテキストと区別されるように、ハイライト処理されて表示されることを特徴とする。

【0010】

また、本発明による関連情報提供システムは、通信部と、第１領域及び第２領域に分けられる表示領域を含むディスプレイ部と、前記第１領域で字幕を含む動画像コンテンツを再生し、前記第２領域に前記字幕を構成するテキストの一部分を含むグラフィックオブジェクトを出力するように、前記ディスプレイ部を制御する制御部とを含み、前記制御部は、前記グラフィックオブジェクトに対する選択信号に基づいて、前記一部分のテキストに関する関連情報を出力するように、前記ディスプレイ部を制御し、前記字幕において、前記一部分のテキストは、他の部分のテキストと区別されるように、ハイライト処理されて表示されることを特徴とする。

【0011】

さらに、本発明によるコンピュータ可読媒体に格納可能なプログラムは、電子機器で１つ以上のプロセスにより実行され、字幕を含む動画像コンテンツをディスプレイ部の第１領域で再生するステップ、前記字幕を構成するテキストの一部分を含むグラフィックオブジェクトを前記ディスプレイ部の第２領域に出力するステップ、及び前記グラフィックオブジェクトに対する選択信号に基づいて、前記一部分のテキストに関する関連情報を提供するステップを実行させるコマンドを含み、前記字幕において、前記一部分のテキストは、他の部分のテキストと区別されるように、ハイライト処理されて表示されることを特徴とする。

【発明の効果】

【0012】

前述したように、本発明による関連情報提供方法においては、ディスプレイ部の表示領域を複数に分割し、いずれか１つの領域では動画像コンテンツを、他の領域では動画像コンテンツが提供する情報の関連情報を提供することができる。よって、ユーザは、動画像コンテンツを利用している状態でいつでも動画像コンテンツが提供する情報の関連情報をより直感的に用いることができる。その結果、ユーザは、関連情報を検索するために別の機能に移行して情報を検索する煩雑さを避けることができる。

【図面の簡単な説明】

【0013】

【図1】本発明による関連情報提供システムを説明するための概念図である。

【図2】本発明による関連情報提供方法を説明するためのフローチャートである。

【図3】本発明による関連情報提供方法及びシステムにおける機能に移行する方法を説明するための概念図である。

【図4a】本発明による関連情報提供方法及びシステムにおける関連情報を提供する方法を説明するための概念図である。

【図4b】本発明による関連情報提供方法及びシステムにおける関連情報を提供する方法を説明するための概念図である。

【図4c】本発明による関連情報提供方法及びシステムにおける関連情報を提供する方法を説明するための概念図である。

【図4d】本発明による関連情報提供方法及びシステムにおける関連情報を提供する方法を説明するための概念図である。

【図4e】本発明による関連情報提供方法及びシステムにおける関連情報を提供する方法を説明するための概念図である。

【図4f】本発明による関連情報提供方法及びシステムにおける関連情報を提供する方法を説明するための概念図である。

【図5a】本発明による関連情報提供方法及びシステムにおける動画像コンテンツ再生機能を説明するための概念図である。

【図5b】本発明による関連情報提供方法及びシステムにおける動画像コンテンツ再生機能を説明するための概念図である。

【図5c】本発明による関連情報提供方法及びシステムにおける動画像コンテンツ再生機能を説明するための概念図である。

【図6a】本発明による関連情報提供方法及びシステムにおける動画像コンテンツ再生機能を説明するための概念図である。

【図6b】本発明による関連情報提供方法及びシステムにおける動画像コンテンツ再生機能を説明するための概念図である。

【発明を実施するための形態】

【0014】

以下、添付図面を参照して本発明の実施形態について詳細に説明するが、図面番号に関係なく同一又は類似の構成要素には同一の符号を付し、それについての重複する説明は省略する。以下の説明で用いられる構成要素の接尾辞である「モジュール」や「部」は、明細書の作成を容易にするために付与又は混用されるものであり、それ自体が有意性や有用性を有するものではない。また、本発明の実施形態について説明するにあたり、関連する公知技術についての具体的な説明が本発明の実施形態の要旨を不明にすると判断される場合は、その詳細な説明を省略する。さらに、添付図面は本発明の実施形態の理解を助けるためのものにすぎず、添付図面により本発明の技術的思想が限定されるものではなく、本発明の思想及び技術範囲に含まれるあらゆる変更、均等物乃至代替物を含むものと理解すべきである。

【0015】

「第１」、「第２」などのように序数を含む用語は様々な構成要素を説明するために用いられるが、上記構成要素は上記用語により限定されるものではない。上記用語は１つの構成要素を他の構成要素と区別する目的でのみ用いられる。

【0016】

ある構成要素が他の構成要素に「連結」又は「接続」されていると言及された場合は、他の構成要素に直接連結又は接続されていてもよく、中間にさらに他の構成要素が存在してもよいものと解すべきである。それに対して、ある構成要素が他の構成要素に「直接連結」又は「直接接続」されていると言及された場合は、中間にさらに他の構成要素が存在しないものと解すべきである。

【0017】

単数の表現には、特に断らない限り複数の表現が含まれる。

【0018】

本明細書において、「含む」や「有する」などの用語は、本明細書に記載された特徴、数字、段階、動作、構成要素、部品又はそれらの組み合わせが存在することを指定しようとするもので、１つ又はそれ以上の他の特徴、数字、段階、動作、構成要素、部品又はそれらの組み合わせの存在や付加可能性を予め排除するものではないと理解すべきである。

【0019】

本発明は、動画像フォーマットを活用してユーザに有用な情報を提供することのできる関連情報提供方法及びシステムを提供するためのものである。特に、本発明は、動画像と共に動画像により提供されるコンテンツに関する関連情報を提供できるユーザ環境を構築するための関連情報提供方法及びシステムを提供するためのものである。

【0020】

以下、添付図面を参照して本発明について具体的に説明する。図１は本発明による関連情報提供システムを説明するための概念図である。

【0021】

図１に示すように、本発明による関連情報提供システム１００は、通信部１１０、保存部１２０及び制御部１３０の少なくとも１つを含むようにしてもよい。ここで、本発明による関連情報提供システム１００は、上記構成要素に限定されるものではなく、本明細書において説明される機能と同一又は類似の役割を果たす構成要素をさらに含むようにしてもよい。

【0022】

なお、本発明による関連情報提供システム１００は、電子機器１０と連動して動作するようにしてもよい。ここで、電子機器１０は、スマートフォン、携帯電話、タブレットＰＣ、キオスク、コンピュータ、ノートブックコンピュータ、デジタル放送用端末、ＰＤＡ（Personal Digital Assistants）及びＰＭＰ（Portable Multimedia Player）の少なくとも１つを含むようにしてもよい。

【0023】

また、本発明による関連情報提供システム１００は、アプリケーション又はソフトウェアで実現してもよい。ここで、関連情報提供システム１００のアプリケーション又はソフトウェアは、電子機器１０にインストールされ、以下に説明される関連情報提供方法によるプロセスを行うようにしてもよい。

【0024】

例えば、本発明による関連情報提供システム１００の通信部１１０、保存部１２０及び制御部１３０は、電子機器１０のハードウェア構成を用いて、関連情報の提供のための一連の機能を実行するようにしてもよい。例えば、通信部１１０は、電子機器１０の通信部に備えられた通信モジュール（例えば、移動通信モジュール、近距離通信モジュール、無線インターネットモジュール、位置情報モジュール、放送受信モジュールなど）の構成を用いて、少なくとも１つの外部サーバ１４０（例えば、データベースサーバ（ＤＢサーバ）やクラウドサーバなど）とデータを送受信するようにしてもよい。

【0025】

保存部１２０は、電子機器１０に備えられた（又は挿入された）メモリ又は外部サーバ１４０（例えば、データベースサーバやクラウドサーバなど）を用いて、本発明による動画像コンテンツ及び動画像コンテンツの関連情報を保存するようにしてもよい。

【0026】

保存部１２０の少なくとも一部は、外部サーバ（クラウドサーバ及びデータベース(ＤＢ)の少なくとも一方）であり得る。すなわち、保存部１２０は、本発明による関連情報の提供に必要な情報を保存できる空間であれば十分であり、物理的な空間の制約はない。よって、以下では、保存部１２０及び外部サーバ１４０の構成を区分せず、クラウドサーバ及びデータベースを別に区分せず、全てを保存部１２０と表現する。ここで、クラウドサーバは、「クラウドストレージ」であり得る。一方、外部サーバへのアクセスは、通信部１１０により行われるようにしてもよい。

【0027】

制御部１３０は、電子機器１０に備えられたＣＰＵ及びクラウドサーバの少なくとも１つを用いて、各構成の制御及び本発明に係る全般的な制御を行うようにしてもよい。また、制御部１３０は、本発明を実現するために、電子機器１０の少なくとも１つの構成要素の制御権限を有するようにしてもよい。さらに、制御部１３０は、電子機器１０のディスプレイ部１１を制御して、本発明において提供される動画像コンテンツ及びその関連情報をディスプレイ部１１に出力するようにしてもよい。ここで、制御部１３０は、ディスプレイ部１１を直接的に制御するようにしてもよく、ディスプレイ部１１を制御する電子機器１０の制御部に制御命令を送信することによりディスプレイ部１１を間接的に制御するようにしてもよい。

【0028】

このように、本発明においては、動画像コンテンツと共に、動画像コンテンツに関する関連情報を提供することができる。

【0029】

本発明において、動画像コンテンツは、動画像（moving picture, video）形式を有するコンテンツであり、動画像コンテンツを構成する内容は非常に多様である。例えば、本発明による動画像コンテンツは、ニュース記事、新聞記事、雑誌記事又は本の本文だけでなく、特定のテーマに関する内容で構成されてもよい。

【0030】

また、本発明による動画像コンテンツは、インターネットを介してアクセス可能なサイト（例えば、ブログ、動画像コンテンツ提供サイト、その他のウェブページなど）に掲示（又はポスティング）された掲示物に含まれる内容で構成されてもよい。この場合、掲示物の種類には制限がなく、掲示物には、画像、サウンド、テキスト及び動画像の少なくとも１つが含まれていてもよい。ここで、画像は、静的な画像及び動的な画像の少なくとも一方であってもよい。

【0031】

なお、本発明による動画像コンテンツは、画像データ、音声データ及び字幕データを含むように構成されてもよい。ここで、画像データは、静的な画像及び動的な画像の少なくとも一方で構成されてもよい。

【0032】

例えば、動画像コンテンツが静的な画像に対応する画像データ及び字幕データを含む場合、本発明による動画像コンテンツは、静的な画像に対応する静止画像に字幕データに対応するテキストがオーバーラップしたコンテンツであってもよい。

【0033】

なお、本発明による動画像コンテンツが電子機器１０で再生される場合、画像、音声及び字幕の少なくとも２つが組み合わせられて共に出力されるようにしてもよい。

【0034】

本発明による動画像コンテンツは、本発明による制御部１３０により生成されるものであってもよく、第３の主体（例えば、映像製作者、コンテンツ製作者）により生成されるものであってもよい。

【0035】

本発明による動画像コンテンツを生成する方法の一例として、制御部１３０は、ＴＴＳ（Text to Speech）技術に基づいて、テキストを音声に変換することにより、動画像コンテンツを生成するようにしてもよい。ここで、変換された音声は、動画像コンテンツの音声データになり、変換の対象であるテキストは、動画像コンテンツの字幕データになる。この場合、制御部１３０は、変換の対象であるテキストを含む文書に含まれるか、又は変換の対象であるテキストに関する内容を有する静的な画像もしくは動的な画像を、動画像コンテンツの画像データとして用いてもよい。また、制御部１３０は、動画像コンテンツを生成する際に使用するように予め設定された任意の画像を、動画像コンテンツの画像データとして用いてもよい。

【0036】

一方、制御部１３０は、字幕データと音声データとのシンク（sync）を制御して、電子機器１０で音声データが出力される場合、それに関連する字幕データが出力されるように、動画像コンテンツを生成するようにしてもよい。

【0037】

このようにＴＴＳ技術に基づいて動画像コンテンツが生成される場合において、変換の対象であるテキストは、ニュース記事、新聞記事、雑誌記事、本の本文などのように、特定のテーマに関する情報を提供するために作成された文書に含まれるテキストであってもよい。

【0038】

本発明による動画像コンテンツを生成する方法の他の例として、制御部１３０は、既に存在する動画像ファイルの音声データに関連する字幕データを生成することにより、動画像コンテンツを生成するようにしてもよい。

【0039】

ここで、制御部１３０は、ＳＴＴ（Speech to Text）技術に基づいて、動画像ファイルに含まれる音声データをテキストに変換し、変換されたテキストを用いて字幕データを生成するようにしてもよい。そして、生成された字幕データを動画像ファイルに挿入することにより、本発明による動画像コンテンツを生成するようにしてもよい。

【0040】

ここで、動画像ファイルは、様々なテーマの動画像ファイルであり得る。

【0041】

このように、本発明による動画像コンテンツは、字幕データを含む画像であり、本発明においては、説明の便宜上、字幕データと字幕を統一して「字幕（subtitles, caption）」という。字幕は、文字、数字及び記号の少なくとも１つからなり、動画像コンテンツが提供する音声データとのシンクが一致又は対応するように構成されてもよい。

【0042】

また、前述したように、本発明による動画像コンテンツに含まれる字幕は、様々な方式で生成又は挿入される。

【0043】

一方、以下では、前述した動画像コンテンツの生成方式を区分せず、字幕を含む動画像コンテンツが存在するという仮定の下で説明する。

【0044】

なお、本発明による制御部１３０は、字幕に含まれる一部分のテキストに関連又は連関する情報を提供する。本発明においては、説明の便宜上、これを「関連情報」という。関連情報は、字幕に含まれる一部分のテキストに関する内容であり得る。

【0045】

ここで、前記一部分のテキストは、字幕に含まれる単語（word）に対応するものであり得る。単語とは、分離して自立的に使える言葉やこれに準ずる言葉をいい、テキストを語節単位で分けたとき、助詞を除く部分に該当する。

【0046】

なお、本発明において、前記一部分のテキストは、予め設定されたデータベースに保存（又は登録）されたキーワードに一致又は対応するテキストであり得る。ここで、前記予め設定されたデータベースは、キーワードに関する情報（又はコンテンツ）が保存されたデータベースであり、その種類に制限はない。

【0047】

前記予め設定されたデータベースには、前記一部分のテキストに対応するキーワードに関する関連情報が、前記キーワードにマッチして保存されるようにしてもよい。前記予め設定されたデータベースに保存された情報は、キーワード単位で分けられるようにしてもよい。ここで、キーワードは、タグ、代表語などともいえる。

【0048】

一方、前記予め設定されたデータベース（以下、「ＤＢ」という）は、語学辞典ＤＢ、知識百科事典ＤＢ、音楽情報ＤＢ、人物情報ＤＢなどから構成されてもよい。

【0049】

このような予め設定されたＤＢに基づいて提供される関連情報の例としては、一部分のテキストに対応する人物情報、辞書の定義、百科事典の定義、予め設定された検索エンジンでの検索情報、イシュー情報、ニュース情報、新聞情報、記事情報などが挙げられる。

【0050】

一方、予め設定されたＤＢを構成する情報（例えば、個別コンテンツ）は、少なくとも１つのキーワードにマッチするようにしてもよい。個別コンテンツのそれぞれは、複数のキーワードにマッチするようにしてもよい。

【0051】

また、同じキーワードが異なる個別コンテンツのそれぞれにマッチするようにしてもよい。例えば、「ホン・ギルドン」という人物情報に対応するキーワードは、第１個別コンテンツ（例えば、人物情報コンテンツ）及び第２個別コンテンツ（例えば、「ホン・ギルドン」という商号の商店に関するレビューコンテンツ）にそれぞれマッチするようにしてもよい。

【0052】

制御部１３０は、字幕に含まれるテキストに、予め設定されたＤＢに登録されたキーワードと同一又は類似のテキストが存在するか否かを判断するようにしてもよい。

【0053】

制御部１３０は、字幕を構成するテキストを語節単位で分け、分けられた語節から助詞を取り除き、意味を有する単語を抽出するようにしてもよい。また、単語に対応する関連情報が存在するか否かを予め設定されたＤＢから検索するようにしてもよい。

【0054】

一方、前述したように、前記キーワードに連携したコンテンツ（又は関連情報）が複数の場合、制御部１３０は、予め設定された加重値と関連するアルゴリズムに基づいて、動画像コンテンツとの関連性が高いコンテンツを関連情報として検索するようにしてもよい。

【0055】

このように、制御部１３０は、予め設定されたＤＢに、前記一部分のテキストに対応する関連情報が存在するか否かを検索することができる。制御部１３０は、前記一部分のテキストを検索語（又はキーワード）として、予め設定されたＤＢに関連情報が存在するか否かを検索することができる。ここで、前記一部分のテキストは、字幕に含まれる単語と理解してもよい。

【0056】

例えば、前記一部分のテキストが「拘束令状」であり、知識百科事典ＤＢに「拘束令状」をキーワードとする関連情報（例えば、「拘束令状」という単語の定義）が存在する場合、制御部１３０は、前記一部分のテキストに対応する関連情報が存在すると判断する。

【0057】

また、制御部１３０は、予め設定されたＤＢに登録されたキーワードと、字幕に含まれる一部分のテキストとが対応する場合、前記一部分のテキストを前記字幕の他の部分のテキストと区別して表示するようにしてもよい。本発明においては、一部分のテキストを他の部分のテキストと区別して表示することを、一部分のテキストを「ハイライト」処理するという。

【0058】

前記一部分のテキストをハイライト処理する方式は様々であり、制御部１３０は、前記一部分のテキストの視覚的な外観が前記他の部分のテキストの視覚的な外観と区別されるように表示することができる。

【0059】

ハイライト処理とは、ｉ）強調する部分を明滅させるか、ｉｉ）太線で表示するか、ｉｉｉ）コントラストを強くするか、ｉｖ）スクリーンの白黒部分を反転させるか（逆ビデオ）、ｖ）下線をひくか、ｖｉｉ）他の色で表示するなどのソフトウェア的な処理を意味する。

【0060】

すなわち、制御部１３０は、前記一部分のテキストの色、大きさ、太さ及びフォントの種類の少なくとも１つが前記他の部分のテキストと異なるように表示することにより、前記一部分のテキストに関する関連情報が存在することをユーザに認知させてもよい。

【0061】

また、制御部１３０は、前記字幕のうち、前記一部分のテキストが配置された部分にグラフィックオブジェクトを表示することにより、前記一部分のテキストに対するハイライト処理を行ってもよい。

【0062】

こうすることにより、上記例示における「拘束令状」に該当する単語は、他の部分のテキストとは異なる視覚的な外観を有するように表示される。

【0063】

このように、制御部１３０は、字幕の一部分のテキストに関する関連情報を提供し、ユーザが直感的に当該関連情報にアクセスできるように、一部分のテキストに関する関連情報が存在することを様々な方式でユーザに通知することができる。

【0064】

なお、本発明において、制御部１３０は、動画像コンテンツに関する関連情報を提供するために、異なる特性を有する複数のページ間の切り替えを用いて、動画像コンテンツ及びその関連情報を有機的に提供することもできる。

【0065】

以下、添付図面を参照して本発明による関連情報提供方法について具体的に説明する。図２は本発明による関連情報提供方法を説明するためのフローチャートであり、図３は本発明による関連情報提供方法及びシステムにおける機能に移行する方法を説明するための概念図である。また、図４ａ、図４ｂ、図４ｃ、図４ｄ、図４ｅ及び図４ｆは本発明による関連情報提供方法及びシステムにおける関連情報を提供する方法を説明するための概念図である。さらに、図５ａ、図５ｂ、図５ｃ、図６ａ及び図６ｂは本発明による関連情報提供方法及びシステムにおける動画像コンテンツ再生機能を説明するための概念図である。

【0066】

本発明による関連情報提供方法においては、まず、図２に示すように、字幕を含む動画像（又は動画像コンテンツ）を第１領域で再生する過程を行う（Ｓ２１０）。

【0067】

まず、本発明において、動画像コンテンツ再生機能への移行は様々な経路で行われる。

【0068】

制御部１３０は、電子機器１０への様々な方式のユーザ入力に基づいて、動画像コンテンツを再生する。

【0069】

一例として、制御部１３０は、図３の（ａ）に示すように、ユーザの音声が入力されることに基づいて、動画像コンテンツを再生するようにしてもよい。制御部１３０は、動画像コンテンツの再生にマッチする発話語（命令語、始動語又は起動語）に基づいて、電子機器１０を制御して、動画像コンテンツが再生されるようにしてもよい。例えば、発話語として「ニュースを聞かせて」３０１が設定された場合、制御部１３０は、ユーザが前記設定された発話語に対応する音声を発話することに基づいて、動画像コンテンツを再生するようにしてもよい。

【0070】

一方、電子機器１０は、本発明による関連情報提供方法によるアプリケーション又はプログラムが実行された状態であり得る。

【0071】

他の例として、制御部１３０は、図３の（ｂ）及び（ｃ）に示すように、電子機器１０に出力された所定のアイコン３０２、３０４が選択されることに基づいて、動画像コンテンツを再生するようにしてもよい。ここで、所定のアイコン３０２、３０４は、図３の（ｂ）に示すように、特定のアプリケーションの移行ページ上に出力されてもよく、図３の（ｃ）に示すように、特定のアプリケーションのメインページ（例えば、機能提供ページ、情報提供ページなど）上に出力されてもよい。

【0072】

ここで、制御部１３０は、図３の（ｂ）及び（ｃ）に示すように、動画像コンテンツの提供が可能であることを通知する案内情報３０３、３０５をディスプレイ部１１に出力するようにしてもよい。よって、ユーザは、動画像コンテンツの再生が可能であることを認知し、動画像コンテンツ提供機能に直ちにアクセスすることができる。

【0073】

なお、本発明において、制御部１３０は、図４ａの（ａ）及び（ｂ）に示すように、第１領域ａ及び第２領域ｂを含むページ（以下、「第１ページ」という）で動画像コンテンツを再生するようにしてもよい。

【0074】

図４ａの（ａ）及び（ｂ）に示すように、第１領域ａは、動画像コンテンツが再生される領域であり、第２領域ｂは、動画像コンテンツに関する関連情報が提供される領域であってもよい。第２領域ｂには、前述したように、動画像コンテンツに含まれる字幕の一部分のテキスト４０１、４０２に関する関連情報が提供されるようにしてもよい。

【0075】

一方、図４ａの（ａ）及び（ｂ）に示すように、第１領域ａで再生される動画像コンテンツは、字幕を含むように構成され、字幕のうち、予め設定されたＤＢに関連情報が存在する一部分のテキスト（又は単語）（例えば、強制醜行４０１、ホン・ギルドン４０２）は、ハイライト処理されて表示されるようにしてもよい。

【0076】

また、図４ｂの（ａ）に示すように、第１領域ａには、第１領域ａで再生される動画像（又は動画像コンテンツ）の再生の程度を示すプログレスバー（又はタイムライン）４１０がさらに含まれるようにしてもよい。

【0077】

プログレスバー４１０は、再生中の動画像コンテンツの総再生時間に対する現在時点の再生進捗度に関する情報を提供するようにしてもよい。

【0078】

なお、本発明において、プログレスバー４１０は、少なくとも１つのインジケータ４１０ａ、４１０ｂを含むように構成されてもよい。制御部１３０は、プログレスバー４１０において、関連情報が存在する一部分のテキストの出力地点（又は、再生地点、再生時点）に対応する位置を特定し、特定された位置にインジケータ４１０ａ、４１０ｂを含めるようにしてもよい。制御部１３０は、インジケータ４１０ａ、４１０ｂと一部分のテキスト（又は単語）をそれぞれマッチするようにしてもよい。よって、制御部１３０は、インジケータ４１０ａ、４１０ｂを選択する選択信号を受信すると、選択されたインジケータにマッチする一部分のテキストが字幕として含まれる部分が再生されるように、動画像コンテンツの再生を制御するようにしてもよい。制御部１３０は、インジケータが選択されることに基づいて、選択されたインジケータにマッチし、かつハイライトされた一部分のテキストが字幕として含まれる地点から動画像コンテンツが再生されるように、ディスプレイ部１１を制御するようにしてもよい。

【0079】

一方、制御部１３０は、第１ページがディスプレイ部１１に出力されているか、又は動画像コンテンツの再生中止に関する別途の制御命令を受信していない場合、第１領域ａで動画像コンテンツが継続して再生されるように、ディスプレイ部１１を制御するようにしてもよい。制御部１３０は、第１領域ａで所定の再生時間を有する動画像コンテンツを連続して再生するようにしてもよい。

【0080】

ここで、第１領域ａで再生される動画像コンテンツの種類又はテーマは非常に多様である。制御部１３０は、ユーザの選択、ユーザの好み、状況情報、及び制御部の制御により、第１領域ａで再生される動画像コンテンツの種類又はテーマを選択するようにしてもよい。

【0081】

一例として、制御部１３０は、ユーザヒストリ情報に基づいて、ユーザの関心テーマ（例えば、時事、経済など）に関する動画像コンテンツを再生するようにしてもよい。この場合、制御部１３０は、ユーザの関心テーマに関する異なる動画像コンテンツを第１領域ａで再生するようにしてもよい。なお、ユーザヒストリ情報は、ユーザアカウント情報にマッチして存在するようにしてもよい。

【0082】

他の例として、制御部１３０は、ユーザから入力された種類又はテーマに関する動画像コンテンツを提供するようにしてもよい。ユーザから動画像コンテンツの種類又はテーマが入力される方式は非常に多様であり、図３の（ａ）に示すように、音声認識方式により、ユーザから再生対象の動画像コンテンツの種類又はテーマが入力されるようにしてもよい。

【0083】

また、制御部１３０は、ユーザから動画像コンテンツの種類又はテーマに関する情報が入力されると、入力された情報に対応する動画像コンテンツを選択するようにしてもよい。

【0084】

制御部１３０は、予め設定された基準に基づいて、第１領域ａで提供する動画像コンテンツを特定するようにしてもよい。ここで、予め設定された基準は、非常に多様に設定することができる。

【0085】

一例として、制御部１３０は、ユーザから、特定のキーワードが入力されると共に、ニュースの提供が要求されると、特定のキーワードに関連する予め設定された数（例えば、１０個）のニュースに対応する動画像コンテンツを特定するようにしてもよい。この場合、制御部１３０は、アクセス数、上位表示数、人気度などの指標に基づいて、予め設定された数の動画像コンテンツを特定するようにしてもよい。

【0086】

他の例として、制御部１３０は、ユーザから、ニュースの提供が要求されると、ニュースを構成する様々なカテゴリ（例えば、政治、経済、社会、ＩＴ、生活、世界などのカテゴリ）別に、予め設定された数の動画像コンテンツをそれぞれ特定するようにしてもよい。

【0087】

さらに他の例として、制御部１３０は、ユーザから、カテゴリ別の人気ニュースの提供が要求されると、カテゴリ別に、最も多くアクセスされた（又は最も多く上位に表示された）ニュースに対応する予め設定された数の動画像コンテンツを特定するようにしてもよい。

【0088】

さらに他の例として、制御部１３０は、ユーザから、リアルタイム人気検索語（又はキーワード）に関するニュースの提供が要求されると、リアルタイム人気検索語に関するニュースの動画像コンテンツを特定するようにしてもよい。

【0089】

さらに他の例として、制御部１３０は、ユーザから、最新ニュースの提供が要求されると、最新にアップロードされたニュースを基準に動画像コンテンツを特定するようにしてもよい。

【0090】

さらに他の例として、制御部１３０は、ユーザから、特定のマスコミのニュースの提供が要求されると、特定のマスコミが提供するニュースの動画像コンテンツを特定するようにしてもよい。

【0091】

さらに他の例として、制御部１３０は、状況情報に基づいて、提供される動画像コンテンツの種類又はテーマを選択するようにしてもよい。

【0092】

ここで、状況情報の種類は非常に多様である。例えば、状況情報には、時間情報（又は時間帯情報）、場所情報、デバイス接続情報、天気情報などが含まれる。

【0093】

このような状況情報は、動画像コンテンツが提供される時点、動画像コンテンツが提供される電子機器がある場所、動画像コンテンツが提供される電子機器に接続されるデバイス（例えば、無線通信（例えば、ブルートゥース（登録商標））を介して接続されるデバイス（例えば、スピーカなど）のように、動画像コンテンツの提供又は動画像コンテンツが提供されるデバイスに関する状況情報であってもよい。

【0094】

一例として、制御部１３０は、動画像コンテンツが提供される時間帯（例えば、ユーザが動画像コンテンツの提供を要求した時間帯）によって、異なる種類の動画像コンテンツを提供するようにしてもよい。制御部１３０は、異なる時間帯毎に異なる種類又はテーマの動画像コンテンツを特定するようにしてもよい。例えば、制御部１３０は、第１時間帯（例えば、午前時間帯）には、天気、交通状況、紙媒体新聞の一面記事、夜の間に多く読まれたニュースなどに関するテーマの動画像コンテンツを、電子機器１０に提供するコンテンツとして特定するようにしてもよい。この場合、制御部１３０は、当該テーマの動画像コンテンツを電子機器１０に連続して提供するようにしてもよい。

【0095】

また、制御部１３０は、第２時間帯（例えば、夕方時間帯）には、料理、今日最も多く読まれたニュースなどに関するテーマの動画像コンテンツを、電子機器１０に提供するコンテンツとして特定するようにしてもよい。

【0096】

他の例として、制御部１３０は、電子機器１０が自動車に含まれるデバイス（例えば、車両スピーカなど）と通信を行う場合、交通情報に関するテーマの動画像コンテンツを、電子機器１０に提供するコンテンツとして特定するようにしてもよい。

【0097】

さらに他の例として、制御部１３０は、電子機器１０で出力されていた画面情報、電子機器１０で直近に実行された機能、又は電子機器１０で直近に出力された画面情報に関する種類又はテーマの動画像コンテンツを、電子機器１０に提供するコンテンツとして特定するようにしてもよい。

【0098】

よって、ユーザは、電子機器１０に対して動画像コンテンツの提供のための同じユーザ入力を行っても、現在の状況に適した異なる種類又はテーマの動画像コンテンツの提供を受けることができる。

【0099】

一方、制御部１３０は、ユーザの要求の他にも、制御部１３０自体で、前述した様々な例における基準に基づいて動画像コンテンツを特定し、特定された動画像コンテンツを第１領域ａで提供するようにしてもよい。

【0100】

次に、本発明においては、字幕に含まれる一部のテキストに対応するグラフィックオブジェクトを第２領域ｂに表示する過程を行う（Ｓ２２０）。

【0101】

ここで、一部のテキスト（又は一部分のテキスト４０１、４０２）とは、第１領域ａで再生される動画像コンテンツに含まれる字幕のうちハイライトされた部分をいう。

【0102】

図４ａの（ａ）に示すように、グラフィックオブジェクト４０４、４０７は、ハイライトされた一部分のテキスト（４０１、４０２）を含むように構成されてもよい。よって、ユーザはどの部分に関する関連情報が存在するかを認知することができる。

【0103】

制御部１３０は、字幕に含まれる一部分のテキスト及び付加テキストの少なくとも一方がグラフィックオブジェクト４０４、４０７に含まれるようにしてもよい。

【0104】

ここで、付加テキストは、一部分のテキストへのユーザの関心を引き出すための誘導情報であり、図４ａに示すように、質問形式のテキスト（例えば、「＊＊の人物情報をお知らせしましょうか？」、「＊＊の正確な意味は？」など）であってもよい。

【0105】

制御部１３０は、一部分のテキストに関する関連情報の種類、テーマ又はカテゴリ（以下、「属性」と通称する）によって、付加テキストを生成するようにしてもよい。一例として、関連情報が人物情報である場合、図４ａの（ａ）に示すように、制御部１３０は、関連情報に対応するキーワード（人物情報）を含む付加テキスト（＊＊の人物情報をお知らせしましょうか？）を生成するようにしてもよい。他の例として、関連情報が辞書の定義に対応する情報である場合、図４ａの（ａ）に示すように、制御部１３０は、関連情報に対応するキーワード（意味）を含む付加テキスト（＊＊の正確な意味は？）を生成するようにしてもよい。

【0106】

このように、制御部１３０は、関連情報の属性によって、関連情報の属性に対応するキーワードを含む付加テキスト（又は質問）を生成し、それを字幕に含まれる一部分のテキストと共に第２領域ｂに提供することができる。よって、ユーザは気になる情報や関心のある情報に直ちにアクセスすることができる。

【0107】

一方、第２領域ｂに出力されるグラフィックオブジェクト４０４、４０７は、文字、記号、数字及び画像の少なくとも１つを含むように構成されてもよい。

【0108】

また、図４ａの（ａ）に示すように、字幕においてハイライトされた一部分のテキストが複数の場合（４０１、４０２）、第２領域ｂには複数の一部分のテキストにそれぞれ対応するグラフィックオブジェクト４０４、４０７が出力されるようにしてもよい。

【0109】

一方、第２領域ｂには、字幕に含まれる一部分のテキストを含むグラフィックオブジェクトだけでなく、第１領域ａに出力された動画像コンテンツの関連情報を含むグラフィックオブジェクトが含まれてもよい。ここで、動画像コンテンツの関連情報は、質問又は命令形式の情報であってもよい。制御部１３０は、第１領域ａに出力された動画像コンテンツの内容に基づいて、質問又は命令形式の情報を生成し、それを第２領域ｂに出力するようにしてもよい。ここで、質問又は命令形式の情報は、第１領域ａに出力された動画像コンテンツに関連する他のコンテンツ（例えば、ニュース記事、ＳＮＳ(Social Network Service)掲示物、ブログ掲示物など）の出力を誘導するための情報であってもよい。

【0110】

制御部１３０は、第１領域ａに出力された動画像コンテンツに関連する他のコンテンツが存在する場合、第２領域ｂに質問又は命令形式の情報を提供するようにしてもよい。

【0111】

例えば、第２領域ｂに出力される情報は、「この事件の背景について教えて」、「議論となる点はどの部分なの？」、「この事件の判決はどうなったの？」のように、他のコンテンツへのアクセスを誘導する情報から構成されてもよい。

【0112】

ここで、制御部１３０は、所定のアルゴリズムに基づいて、第１領域ａに出力された動画像コンテンツの内容を分析し、分析した内容に基づいて、適切な質問又は命令形式の情報を生成するようにしてもよい。

【0113】

また、制御部１３０は、第１領域ａに出力された動画像コンテンツに関連する他のコンテンツに含まれる内容に基づいて、適切な質問又は命令形式の情報を生成するようにしてもよい。例えば、他のコンテンツとして、第１領域ａに出力された動画像コンテンツの背景事件に関するコンテンツが存在する場合、制御部１３０は、「この事件の背景について教えて」という命令形式の情報を生成し、それを第２領域ｂに出力するようにしてもよい。

【0114】

制御部１３０は、ディープラーニング又は人工知能ベースのアルゴリズムに基づいて、第１領域ａに出力された動画像コンテンツに関連する質問又は命令形式の情報を生成するようにしてもよい。

【0115】

一方、制御部１３０は、前記質問又は命令形式の情報を含むグラフィックオブジェクトが選択されることに基づいて、前記他のコンテンツを電子機器１０に提供するようにしてもよい。これは、ステップＳ２３０と共に後述する「字幕に含まれる一部分のテキストを含むグラフィックオブジェクトが選択されることに基づいて情報（又はコンテンツ）を出力する」実施形態と同様に構成できるので、具体的な説明は省略する。

【0116】

また、第２領域ｂには、字幕に関する情報の他に、様々な情報が含まれる。図４ａの（ａ）及び図４ｆの（ａ）に示すように、第２領域ｂには、第１領域ａで再生中の動画像コンテンツに関するユーザの嗜好情報の入力を受けるためのグラフィックオブジェクト４０３、４６０、４６１、４６２が含まれてもよい。

【0117】

制御部１３０は、図４ａの（ａ）及び図４ｆの（ａ）に示すグラフィックオブジェクト４０３、４６０、４６１、４６２によりユーザの入力を受信した場合、ユーザのヒストリ情報をアップデートするようにしてもよい。

【0118】

制御部１３０は、再生中の動画像コンテンツに関する属性（例えば、種類、テーマ、カテゴリなど）に関するユーザの嗜好情報がユーザのヒストリ情報に反映されるように、ユーザのヒストリ情報をアップデートするようにしてもよい。

【0119】

また、制御部１３０は、ユーザの嗜好情報を含むユーザのヒストリ情報を用いて、第１領域ａで再生する動画像コンテンツを選択（又は特定）するようにしてもよい。

【0120】

例えば、第２領域ｂで「関心ある」というグラフィックオブジェクト４６１が選択されると、制御部１３０は、再生中の動画像コンテンツに関する属性をユーザの嗜好情報（又は関心事情報）として設定するようにしてもよい。この場合、制御部１３０は、現在再生中の動画像コンテンツの再生が終了して次の動画像コンテンツを再生する際に、現在再生中の動画像コンテンツの属性に関連する動画像コンテンツを再生するようにしてもよい。

【0121】

それに対して、第２領域ｂで「関心ない」というグラフィックオブジェクト４６２が選択されると、制御部１３０は、再生中の動画像コンテンツに関する属性をユーザの非嗜好情報（又は非関心事情報）として設定するようにしてもよい。この場合、制御部１３０は、現在再生中の動画像コンテンツの再生が終了して次の動画像コンテンツを再生する際に、現在再生中の動画像コンテンツの属性とは異なる属性を有する動画像コンテンツを再生するようにしてもよい。

【0122】

さらに、制御部１３０は、図４ｆの（ｂ）に示すように、ユーザが関心を有するテーマに関する情報を第２領域ｂに提供するようにしてもよい。制御部１３０は、ユーザが関心を有するテーマに関する関心度情報（又は嗜好情報）の入力回数をカウントするようにしてもよい。また、そのカウント情報をユーザに提供することにより、制御部１３０がユーザの関心度を正確に認知してモニタしていることを通知するようにしてもよい。

【0123】

その他にも、第２領域ｂには、第１領域ａで提供される動画像コンテンツに関する様々な情報が含まれるように構成することができる。

【0124】

一方、第２領域ｂに出力されるグラフィックオブジェクトは、第１領域ａで出力される動画像コンテンツの字幕が変更されることに基づいて連動して変更されてもよく、動画像コンテンツが変更されることに基づいて連動して変更されてもよい。すなわち、第１領域ａで字幕が変更されることによりハイライトされたテキストが変更された場合、第２領域ｂには、それに連動して、変更されたテキストに対応するグラフィックオブジェクトが出力されるようにしてもよい。制御部１３０は、動画像コンテンツが再生されることにより字幕が変更された場合、それに連動して、第２領域ｂに出力される情報を変更することができる。

【0125】

次に、本発明においては、第２領域ｂに出力されたグラフィックオブジェクトが選択されることに基づいて、字幕に含まれる一部分のテキストに関する関連情報を表示する過程を行う（Ｓ２３０）。

【0126】

制御部１３０は、字幕に含まれる一部分のテキストに関するグラフィックオブジェクトに対する選択信号に基づいて、前記一部分のテキストに関する関連情報をディスプレイ部１１に出力するようにしてもよい。

【0127】

前述したように、関連情報は、予め設定されたＤＢに保存された情報であり、ハイライトされた一部分のテキストに関する内容を含む。

【0128】

制御部１３０は、図４ａの（ｂ）及び図４ｂの（ｂ）に示すように、第２領域ｂに関連情報４０９、４１４を提供することもでき、図４ｂの（ｃ）に示すように、新しいページ４１５に関連情報を提供することもできる。

【0129】

本発明において、新しいページ４１５は、第１領域ａ及び第２領域ｂを含む第１ページとは異なるページであり、「第２ページ」という。

【0130】

制御部１３０は、一部分のテキストに関する関連情報を提供するために、第１ページを第２ページ４１５に切り替えるようにしてもよい。制御部１３０は、グラフィックオブジェクトに対する選択信号に基づいて、第２ページ４１５が出力されるように、ディスプレイ部１１を制御するようにしてもよい。第２ページ４１５には、一部分のテキストに関する関連情報が含まれるようにしてもよい。

【0131】

一方、第２領域ｂに出力される関連情報は、第２ページ４１５に出力される関連情報の少なくとも一部であってもよい。制御部１３０は、グラフィックオブジェクトに対する選択信号に基づいて、第２領域ｂに関連情報の少なくとも一部を提供し、さらなる選択信号に基づいて、第２ページ４１５に関連情報を提供するようにしてもよい。

【0132】

説明の便宜上、第２領域ｂに提供される関連情報を「第１関連情報」といい、第２ページ４１５に提供される関連情報を「第２関連情報」という。

【0133】

制御部１３０は、順次入力される選択信号に基づいて、第１関連情報及び第２関連情報を順次出力するようにしてもよい。ここで、選択信号は、ディスプレイ部１１へのユーザ入力（例えば、タッチ入力など）であってもよい。この場合、第１関連情報は、第２関連情報の少なくとも一部分であってもよい。

【0134】

本発明において、字幕のうちハイライトされた一部分のテキストに対応するグラフィックオブジェクトに対する選択信号は、第１選択信号及び第２選択信号を含んでもよい。

【0135】

ここで、第１選択信号は、図４ａの（ａ）及び図４ｂの（ａ）に示すように、一部分のテキスト（例えば、ホン・ギルドン、拘束令状）に関する関連情報が出力される前に、グラフィックオブジェクト４０４、４０６、４１１、４１３を選択する選択信号であってもよい。制御部１３０は、このような第１選択信号に基づいて、図４ａの（ｂ）及び図４ｂの（ｂ）に示すように、前記一部分のテキスト（例えば、ホン・ギルドン、拘束令状）に関する第１関連情報４０９、４１４を第１ページの第２領域ｂに出力するようにしてもよい。第１関連情報は、ユーザの要求又は制御部１３０の制御により、音声情報としても出力されてもよい。

【0136】

また、第２選択信号は、図４ｂの（ｂ）に示すように、第１関連情報４１４が出力された状態で、グラフィックオブジェクト４１２を選択する選択信号であってもよい。第２選択信号は、グラフィックオブジェクト４１２及び第１関連情報４１４のいずれかへのユーザ入力（例えば、タッチ入力など）であってもよい。制御部１３０は、グラフィックオブジェクト４１２に対する前記第２選択信号が入力されると、図４ｂの（ｃ）に示すように、一部分のテキスト（例えば、拘束令状）に関する第２関連情報を含む第２ページ４１５をディスプレイ部１１に出力するようにしてもよい。

【0137】

すなわち、制御部１３０は、第２選択信号に基づいて、ディスプレイ部１１に出力された第１ページを第２ページに切り替えることができる。このように、制御部１３０は、第１選択信号及び第２選択信号に基づいて、第１関連情報及び第２関連情報を順次表示することができる。このとき、ユーザは、第１関連情報に関する内容についてより詳細に知りたい場合、第２選択信号を入力することにより、第２関連情報の提供を受けることができる。

【0138】

一方、図４ｃの（ａ）及び（ｂ）に示すように、第２ページ４２２は、一部分のテキストに関するグラフィックオブジェクトに対する選択信号だけでなく、予め設定された機能アイコン４２１の選択に基づいて出力されるようにしてもよい。この場合、制御部１３０は、第２ページ４２２に、一部分のテキストに関するグラフィックオブジェクトに関する関連情報又は動画像コンテンツに関する関連情報（例えば、ニュース記事など）を出力するようにしてもよい。

【0139】

一方、図４ｂ及び図４ｃで説明したように、ディスプレイ部１１に第２ページ４１５、４２２が出力された場合、第１ページの第１領域ａで再生されていた動画像コンテンツは継続して再生されるようにしてもよい。すなわち、制御部１３０は、ディスプレイ部１１に第２ページ４１５、４２２が出力されても、第１領域ａで再生されていた動画像コンテンツの再生が維持されるように、電子機器１０を制御するようにしてもよい。この場合、電子機器１０では、動画像コンテンツの再生機能と第２ページ４１５、４２２の出力機能をマルチタスク方式で処理するようにしてもよい。この場合、電子機器１０のディスプレイ部１１には第２ページ４１５、４２２が出力され、電子機器１０の音響出力部からは動画像コンテンツの音声データに対応するサウンドが出力される。

【0140】

一方、ディスプレイ部１１に出力されていた第１ページが第２ページ４１５、４２２に切り替えられると、制御部１３０は、ディスプレイ部１１の一領域に、動画像コンテンツの制御に関する画像（又はグラフィックオブジェクト、ＧＵＩオブジェクト４１６、４２３）を出力するようにしてもよい。ＧＵＩオブジェクト４１６、４２３は、フローティング（floating）オブジェクト又はフローティングアイコンともいえる。

【0141】

図４ｂの（ｃ）及び図４ｃの（ｂ）に示すように、第２ページ４１５、４２２の一領域には、第１ページの第１領域ａで再生されていた動画像コンテンツの制御に関するＧＵＩオブジェクト４１６、４２３が出力されるようにしてもよい。

【0142】

ＧＵＩオブジェクト４１６、４２３は、ＧＵＩオブジェクト４１６、４２３へのユーザ入力（例えば、タッチ入力）に基づいて、第２ページ４１５、４２２における出力位置及び出力サイズの少なくとも一方が変更されるようにしてもよい。

【0143】

ＧＵＩオブジェクト４１６、４２３は、動画像コンテンツが再生されている第１ページとの媒体の役割を果たすものであり、制御部１３０は、ＧＵＩオブジェクト４１６、４２３へのユーザ入力（例えば、予め設定された方式のユーザ入力（又はタッチ入力））に基づいて、第１ページをディスプレイ部１１に出力するようにしてもよい。この場合、ディスプレイ部１１に出力されていた第２ページ４１５、４２２は、前記予め設定された方式のユーザ入力に基づいて、第１ページに切り替えられるようにしてもよい。

【0144】

一方、制御部１３０は、図５ａの（ａ）に示すように、ＧＵＩオブジェクト５１０を用いて、動画像コンテンツに関する関連情報を提供するようにしてもよい。制御部１３０は、動画像コンテンツが再生されることにより、動画像コンテンツの字幕が変更され、関連情報が存在する一部のテキスト（又は単語）が存在する場合、図５ａの（ａ）に示すように、ＧＵＩオブジェクト５１０に又はＧＵＩオブジェクト５１０の周辺に、関連情報が存在する一部のテキストに対応するグラフィックオブジェクト５１１を出力するようにしてもよい。制御部１３０は、現在再生されている部分の動画像コンテンツに関する関連情報が存在する場合、グラフィックオブジェクト５１１をディスプレイ部１１に出力するようにしてもよい。

【0145】

ここで、グラフィックオブジェクト５１１は、字幕に含まれる少なくとも一部分のテキスト（例えば、大法院）を含んでもよい。

【0146】

また、制御部１３０は、グラフィックオブジェクト５１１に対する選択信号に基づいて、図５ａの（ｂ）に示すように、グラフィックオブジェクト５１１に関連する一部分のテキスト（例えば、大法院）に関する関連情報をディスプレイ部１１に出力するようにしてもよい。制御部１３０は、既に第２ページに出力されていた関連情報を変更するか、又は新しい第３ページ５０２により、グラフィックオブジェクト５１１に関連する一部分のテキスト（例えば、大法院）に関する関連情報を提供するようにしてもよい。

【0147】

さらに、制御部１３０は、ＧＵＩオブジェクト５１０を、第１領域ａで再生される動画像コンテンツに対する制御命令の入力を受ける制御画面として用いてもよい。

【0148】

例えば、図５ｂに示すように、ＧＵＩオブジェクト５１０は、第１領域ａで再生される動画像コンテンツの属性（例えば、テーマ）の選択を受けるためのメニュー画面５２０、５２１を含んでもよい。メニュー画面５２０、５２１で特定のテーマが選択されると、制御部１３０は、選択された特定のテーマの動画像コンテンツが再生されるように、電子機器１０を制御するようにしてもよい。

【0149】

また、図５ｃに示すように、ＧＵＩオブジェクト５１０は、第１領域ａで再生される動画像コンテンツの再生を制御（例えば、一時停止、再生再開、ボリューム調整、次の動画像コンテンツの選択、前の動画像コンテンツの選択など）するための制御メニュー画面５３１、５３２、５３３、５３４を含んでもよい。

【0150】

このようなメニュー画面は、グラフィックオブジェクト５１０への予め設定された方式のユーザ入力（例えば、ロングタッチ入力など）に基づいて、図示のように、グラフィックオブジェクト５１０の周辺に出力されるようにしてもよい。また、このようなメニュー画面は、グラフィックオブジェクト５１０に含まれるファンクションキーとして提供されるようにしてもよい。

【0151】

このように、本発明においては、動画像コンテンツの再生を維持すると共に、動画像コンテンツに関する関連情報を有機的に提供することにより、ユーザがより直感的に必要な情報にアクセスできるようにすることができる。

【0152】

以上、本発明による動画像コンテンツを制御部１３０により生成できることを説明した。制御部１３０は、ＴＴＳ技術に基づいて、テキストを音声に変換することにより、動画像コンテンツを生成するようにしてもよい。ここで、変換された音声は、動画像コンテンツの音声データになり、変換の対象であるテキストは、動画像コンテンツの字幕データになる。この場合、制御部１３０は、変換の対象であるテキストを含む文書に含まれるか、又は変換の対象であるテキストに関する内容を有する静的な画像もしくは動的な画像を、動画像コンテンツの画像データとして用いてもよい。また、制御部１３０は、動画像コンテンツを生成する際に使用するように予め設定された任意の画像（図４ｄ参照）を、動画像コンテンツの画像データとして用いてもよい。

【0153】

図示のように、予め設定された画像は、人の顔を含む画像であってもよい。図示のように、予め設定された画像は、実際の人の顔又はアバター、キャラクタ形式の画像であってもよい。このように人の顔に対応する画像が出力された場合、ユーザはアナウンサー又はアンカーが動画像コンテンツに対応する音声データを発話したかのように感じる。

【0154】

この場合、音声データは、ＴＴＳ方式で生成され、音声データを発話する音声の属性は、ユーザの選択に基づいて変更されるようにしてもよい。図４ｅに示すように、制御部１３０は、音声の属性（例えば、音声が与える雰囲気、音声を発話する仮想の人物の性別、声など）の選択を受けるための制御領域４５２を提供するようにしてもよい。制御部１３０は、ユーザが制御領域４５２により、異なる音声の属性にマッチするグラフィックオブジェクトのうち、いずれかのグラフィックオブジェクト４５３を選択すると、選択されたいずれかのグラフィックオブジェクト４５３にマッチする音声の属性（例えば、真剣で専門的な感じ）に対応する音声データを電子機器１０に提供するようにしてもよい。

【0155】

また、制御部１３０は、音声の属性が選択されることに基づいて、第１領域ａに出力される画像データを変更するようにしてもよい。制御部１３０は、画像データとして、選択された音声の属性にマッチする顔画像（又はアバター、キャラクタ）を、第１領域ａに提供するようにしてもよい。ここで、第１領域ａに出力される画像データは、静的な画像及び動的な画像の少なくとも一方を含む。

【0156】

なお、本発明においては、第１領域ａを、動画像コンテンツを提供する出力領域として活用するだけでなく、制御命令入力領域として活用することもできる。制御部１３０は、第１領域ａへのユーザ入力（例えば、タッチ入力）に基づいて、動画像コンテンツに関する制御を行うようにしてもよい。

【0157】

ここで、ユーザ入力は、第１領域ａへの予め設定された方式のタッチ入力であってもよい。本発明においては、異なる予め設定された方式のタッチ入力毎に異なる制御命令がマッチするようにしてもよい。制御部１３０は、第１領域ａに入力されるタッチ入力の方式に基づいて、動画像コンテンツの再生に関する様々な制御を行うことができる。

【0158】

一例として、図６ａの（ａ）に示すように、制御部１３０は、予め設定された一方向（例えば、右から左）のドラッグタッチ入力に基づいて、図６ａの（ｂ）に示すように、第１領域ａで提供されていた動画像コンテンツを変更するようにしてもよい。前記ドラッグタッチ入力に基づいて、制御部１３０は、図６ａの（ａ）に示すように第１領域ａで再生されていた第１動画像コンテンツ６１０の再生を終了し、図６ａの（ｂ）に示すように、第２動画像コンテンツ６２０を第１領域ａに再生するようにしてもよい。

【0159】

ここで、第２動画像コンテンツ６２０のテーマは、第１動画像コンテンツ６１０のテーマに関連するものであってもよく、関連しないものであってもよい。

【0160】

一例として、制御部１３０は、図６ｂの（ａ）に示すように、第１動画像コンテンツ６４１に対してユーザから入力された嗜好情報に基づいて、第２動画像コンテンツ６４２のテーマを選択するようにしてもよい。前記嗜好情報は、第１動画像コンテンツ６４１の再生中に電子機器１０を介して入力されるようにしてもよい。

【0161】

制御部１３０は、第１動画像コンテンツ６４１に対してユーザが関心を有するという嗜好情報が入力されると、第１動画像コンテンツ６４１のテーマ又は内容との関連性のある動画像コンテンツを、第２動画像コンテンツ６４２として特定するようにしてもよい。

【0162】

それとは異なり、制御部１３０は、第１動画像コンテンツ６４１に対してユーザが関心を有しないという非嗜好情報が入力されると、第１動画像コンテンツ６４１のテーマ又は内容との関連性のない動画像コンテンツを、第２動画像コンテンツ６４２として特定するようにしてもよい。

【0163】

また、第１領域ａへの異なる予め設定された方式のタッチ入力は、ｉ）動画像コンテンツの再生中止、ｉｉ）以前に再生された動画像コンテンツの再生、ｉｉｉ）音声データを発話する声の種類の変更などのように、動画像コンテンツに対する様々な制御命令にそれぞれマッチするようにしてもよい。

【0164】

一方、制御部１３０は、ユーザから入力されるタッチ入力に対応する制御命令の入力を音声命令で受けることができる場合、図６ｂの（ｂ）に示すように、「次からは「次の記事」と言ってみてください！」などのガイド情報を出力するようにしてもよい。よって、本発明は、ユーザがより簡単に動画像コンテンツを制御できるようにすることができる。

【0165】

前述したように、本発明による関連情報提供方法及びシステムにおいては、ディスプレイ部の表示領域を複数に分割し、いずれか１つの領域では動画像を、他の領域では動画像が提供する情報の関連情報を提供することができる。よって、ユーザは、動画像を利用している状態でいつでも動画像が提供する情報の関連情報をより直感的に用いることができる。その結果、ユーザは、関連情報を検索するために別の機能に移行して情報を検索する煩雑さを避けることができる。

【0166】

また、本発明による関連情報提供方法及びシステムにおいては、動画像が提供する情報を字幕として提供し、字幕に含まれるテキストに関する情報を提供することができる。すなわち、本発明においては、字幕を用いてユーザに提供可能な関連情報を視覚的に提供することにより、ユーザがより容易に関連情報にアクセスできるようにすることができる。

【0167】

さらに、本発明による関連情報提供方法及びシステムにおいては、動画像が再生されている状態で、関連情報を提供するためにページ切り替えを行うユーザ環境を提供することができる。よって、本発明においては、関連情報を表示領域全体で提供することができ、その場合、動画像の再生を制御するためのＧＵＩを提供することができる。よって、ユーザは、関連情報の提供を受けると共に、動画像が提供するサウンド情報を継続して用いることができ、様々な情報の複合的な提供を受けることができる。

【0168】

一方、コンピュータ可読媒体は、コンピュータシステムにより読み取り可能なデータが記録されるあらゆる種類の記録装置を含む。コンピュータ可読媒体の例としては、ＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Disk）、ＳＤＤ（Silicon Disk Drive）、ＲＯＭ、ＲＡＭ、ＣＤ－ＲＯＭ、磁気テープ、フロッピーディスク、光データ記憶装置などが挙げられる。

【0169】

また、コンピュータ可読媒体は、ストレージを含み、電子機器が通信によりアクセスできるサーバ又はクラウドストレージであり得る。この場合、コンピュータは、有線又は無線通信により、サーバ又はクラウドストレージから本発明によるプログラムをダウンロードすることができる。

【0170】

さらに、本発明において、前述したコンピュータは、プロセッサ、すなわち中央処理装置（Central Processing Unit, CPU）が搭載された電子機器であり、その種類は特に限定されない。

【0171】

一方、本発明の詳細な説明は例示的なものであり、あらゆる面で限定的に解釈されてはならない。本発明の範囲は添付の特許請求の範囲の合理的解釈により定められるべきであり、本発明の均等の範囲内でのあらゆる変更が本発明の範囲に含まれる。

【図1】

【図2】

【図3】

【図4a】

【図4b】

【図4c】

【図4d】

【図4e】

【図4f】

【図5a】

【図5b】

【図5c】

【図6a】

【図6b】