特許 7126282 情報提供装置、情報提供方法及びプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B1)

(11)【特許番号】

(24)【登録日】2022-08-18

(45)【発行日】2022-08-26

(54)【発明の名称】情報提供装置、情報提供方法及びプログラム

(51)【国際特許分類】

   G06F 40/58 20200101AFI20220819BHJP

【ＦＩ】

G06F40/58

【請求項の数】 7

(21)【出願番号】P 2021107991

(22)【出願日】2021-06-29

【審査請求日】2021-07-27

【早期審査対象出願】

(73)【特許権者】

【識別番号】515148929

【氏名又は名称】クェスタ株式会社

(74)【代理人】

【識別番号】100108006

【弁理士】

【氏名又は名称】松下 昌弘

(72)【発明者】

【氏名】大石 守

【審査官】成瀬 博之

(56)【参考文献】

【文献】特開平１０－０２１２４２（ＪＰ，Ａ）

【文献】特開昭５９－０９５６４１（ＪＰ，Ａ）

【文献】特開平０８－０４４７４７（ＪＰ，Ａ）

【文献】特開２０１９－１７９３９４（ＪＰ，Ａ）

【文献】特開２０１８－０４５６７５（ＪＰ，Ａ）

【文献】特開２０１７－０９７４８８（ＪＰ，Ａ）

【文献】特開２０１９－０５７１３７（ＪＰ，Ａ）

【文献】国際公開第２０１８／１４３４３５（ＷＯ，Ａ１）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｆ ４０／２０－４０／５８

(57)【特許請求の範囲】

【請求項1】

翻訳された言葉に関連する情報を表示する情報表示装置に情報を提供する情報提供装置であって、
処理部と、
前記処理部において実行可能な命令を記憶する記憶部とを有し、
前記処理部は、１以上のデータベースにアクセス可能であり、
各前記データベースは、１つの言語体系の語又は文と、当該語又は文について他の言語体系の聴取者に向けた説明を与える１以上の説明情報とを関連付けて記憶しており、
前記処理部が前記記憶部の前記命令に応じて実行する処理は、
音声情報を取得する第１工程と、
前記音声情報から第１言語体系の言葉を第１言語情報として取得する第２工程と、
前記第１言語情報から翻訳された第２言語体系の言葉を第２言語情報として取得する第３工程と、
前記第３工程で取得した前記第２言語情報を前記情報表示装置に提供する第４工程と、
前記第２言語情報を提供した前記情報表示装置から、前記第２言語情報中の語又は文について前記説明情報の提供を求める提供要求を受信した場合、前記第２言語情報中の語又は文に対応する前記第１言語情報の語又は文に関連付けられた前記説明情報を前記データベースから取得する第５工程と、
前記第５工程で取得した前記説明情報が前記第１言語体系の言葉を含んでいる場合に、当該第１言語体系の言葉を翻訳サーバで第２言語体系に翻訳させ、当該第２言語体系に翻訳された前記説明情報を取得する第６工程と、
前記第６工程で取得した前記第２言語体系に翻訳された前記説明情報を前記提供要求の要求元の前記情報表示装置に提供する第７工程と、
第２の言語体系に翻訳された前記説明情報を前記情報表示装置が表示中に当該情報表示装置から当該説明情報の登録を求める登録要求を受信した場合に、当該登録要求に関わる前記第２言語体系の聴取者向けの前記説明情報と、当該説明情報によって説明される前記第１言語情報中の語又は文とを関連付けて前記データベースに登録する第８工程と、を含む
情報提供装置。

【請求項2】

前記説明情報は、テキスト情報、画像情報、動画情報、音声情報及びアドレス情報の少なくとも１つを含み、
前記アドレス情報は、前記テキスト情報、前記画像情報、前記動画情報及び前記音声情報の少なくとも１つを提供するネットワーク上のサーバのアドレスに関する情報を含む、
請求項１に記載の情報提供装置。

【請求項3】

前記データベースは、１つの言語体系の語又は文と、当該語又は文について他の言語体系の聴取者に向けた説明を与える１以上の前記説明情報と、当該１以上の前記説明情報それぞれに対する評価を示す１以上の評価値とを関連付けて記憶しており、
前記第５工程は、前記第１言語情報中の語又は文に関連付けられた複数の前記説明情報を前記データベースから取得する場合に、当該複数の前記説明情報それぞれの前記評価値を前記データベースから取得することを含み、
前記第７工程は、前記第１言語情報中の語又は文に関連付けられた複数の前記説明情報を前記情報表示装置に提供する場合に、各前記説明情報の前記評価値に応じた優先順位で当該複数の前記説明情報を表示させるための情報を前記情報表示装置に提供することを含む、
請求項１に記載の情報提供装置。

【請求項4】

前記処理部が前記記憶部の前記命令に応じて実行する処理は、１つの前記説明情報に対するユーザの評価を示す評価情報を前記情報表示装置から受信した場合に、当該１つの前記説明情報に関連付けて前記データベースに記憶された前記評価値を、受信した前記評価情報に応じて更新する工程を含む、
請求項３に記載の情報提供装置。

【請求項5】

前記第３工程は、前記第１言語情報から翻訳された異なる複数の前記第２言語体系の言葉を複数の前記第２言語情報として取得することを含み、
前記第４工程は、前記第１言語情報から翻訳された複数の前記第２言語情報を１以上の前記情報表示装置に提供することを含む、
請求項１に記載の情報提供装置。

【請求項6】

翻訳された言葉に関連する情報を表示する情報表示装置にコンピュータが情報を提供する情報提供方法であって、
前記コンピュータは、１以上のデータベースにアクセス可能であり、
各前記データベースは、１つの言語体系の語又は文と、当該語又は文について他の言語体系の聴取者に向けた説明を与える１以上の説明情報とを関連付けて記憶しており、
音声情報を取得する第１工程と、
前記音声情報から第１言語体系の言葉を第１言語情報として取得する第２工程と、
前記第１言語情報から翻訳された第２言語体系の言葉を第２言語情報として取得する第３工程と、
前記第３工程で取得した前記第２言語情報を前記情報表示装置に提供する第４工程と、
前記第２言語情報を提供した前記情報表示装置から、前記第２言語情報中の語又は文について前記説明情報の提供を求める提供要求を受信した場合、前記第２言語情報中の語又は文に対応する前記第１言語情報の語又は文に関連付けられた前記説明情報を前記データベースから取得する第５工程と、
前記第５工程で取得した前記説明情報が前記第１言語体系の言葉を含んでいる場合に、当該第１言語体系の言葉を翻訳サーバで第２言語体系に翻訳させ、当該第２言語体系に翻訳された前記説明情報を取得する第６工程と、
前記第６工程で取得した前記第２言語体系に翻訳された前記説明情報を前記提供要求の要求元の前記情報表示装置に提供する第７工程と、
第２の言語体系に翻訳された前記説明情報を前記情報表示装置が表示中に当該情報表示装置から当該説明情報の登録を求める登録要求を受信した場合に、当該登録要求に関わる前記第２言語体系の聴取者向けの前記説明情報と、当該説明情報によって説明される前記第１言語情報中の語又は文とを関連付けて前記データベースに登録する第８工程とを有する
情報提供方法。

【請求項7】

翻訳された言葉に関連する情報を表示する情報表示装置と通信可能なコンピュータに処理を実行させるプログラムであって、
前記コンピュータは、１以上のデータベースにアクセス可能であり、
各前記データベースは、１つの言語体系の語又は文と、当該語又は文について他の言語体系の聴取者に向けた説明を与える１以上の説明情報とを関連付けて記憶しており、
前記プログラムに従って前記コンピュータが実行する処理は、
音声情報を取得する第１工程と、
前記音声情報から第１言語体系の言葉を第１言語情報として取得する第２工程と、
前記第１言語情報から翻訳された第２言語体系の言葉を第２言語情報として取得する第３工程と、
前記第３工程で取得した前記第２言語情報を前記情報表示装置に提供する第４工程と、
前記第２言語情報を提供した前記情報表示装置から、前記第２言語情報中の語又は文について前記説明情報の提供を求める提供要求を受信した場合、前記第２言語情報中の語又は文に対応する前記第１言語情報の語又は文に関連付けられた前記説明情報を前記データベースから取得する第５工程と、
前記第５工程で取得した前記説明情報が前記第１言語体系の言葉を含んでいる場合に、当該第１言語体系の言葉を翻訳サーバで第２言語体系に翻訳させ、当該第２言語体系に翻訳された前記説明情報を取得する第６工程と、
前記第６工程で取得した前記第２言語体系に翻訳された前記説明情報を前記提供要求の要求元の前記情報表示装置に提供する第７工程と、
第２の言語体系に翻訳された前記説明情報を前記情報表示装置が表示中に当該情報表示装置から当該説明情報の登録を求める登録要求を受信した場合に、当該登録要求に関わる前記第２言語体系の聴取者向けの前記説明情報と、当該説明情報によって説明される前記第１言語情報中の語又は文とを関連付けて前記データベースに登録する第８工程と、を有する
プログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、翻訳された言葉に関する情報を提供する情報提供装置、情報提供方法及びプログラムに関するものである。

【背景技術】

【0002】

音声に基づいて自動的に翻訳を行うシステムが一般的に知られている。例えば、動画サイトなどで再生される動画の音声を自動的に翻訳するサービスを提供するインターネット上の翻訳システムや、マイクで入力された音をその場で自動的に翻訳する携帯型の翻訳機が知られている。

【発明の概要】

【発明が解決しようとする課題】

【0003】

専ら特定の国や地域で使用されている用語や表現は、他の国や地域の言葉に翻訳し難い場合がある。他方、近年のグローバル化の進展に伴って、建設や介護などの様々な現場で言語体系の異なる者同士が協働する機会が増えてきている。そのため、今までは外国人に対してあまり使用されていなかった用語や表現を使って外国人と意思疎通を図らなければならない場面が多くなってきている。そのような用語や表現は、従来の翻訳システムや翻訳機ではカバーされていないことが多いため、なかなか思うように意味を伝えることができず、円滑なコミュニケーションが難しいという問題がある。

【0004】

本発明はかかる事情に鑑みてなされたものであり、その目的は、翻訳が難しい語や文の意味を伝え易くすることができる情報提供装置、情報提供方法及びプログラムを提供することにある。

【課題を解決するための手段】

【0005】

本発明の第１の観点は、翻訳された言葉に関連する情報を表示する情報表示装置に情報を提供する情報提供装置であって、処理部と、前記処理部において実行可能な命令を記憶する記憶部とを有し、前記処理部は、１以上のデータベースにアクセス可能であり、各前記データベースは、１つの言語体系の語又は文と、当該語又は文について他の言語体系の聴取者に向けた説明を与える１以上の説明情報とを関連付けて記憶しており、前記処理部が前記記憶部の前記命令に応じて実行する処理は、音声情報を取得する第１工程と、前記音声情報から第１言語体系の言葉を第１言語情報として取得する第２工程と、前記第１言語情報から翻訳された第２言語体系の言葉を第２言語情報として取得する第３工程と、前記第３工程で取得した前記第２言語情報を前記情報表示装置に提供する第４工程と、前記第２言語情報を提供した前記情報表示装置から、前記第２言語情報中の語又は文について前記説明情報の提供を求める提供要求を受信した場合、前記第２言語情報中の語又は文に対応する前記第１言語情報の語又は文に関連付けられた前記説明情報を前記データベースから取得する第５工程と、前記第５工程で取得した前記説明情報が前記第１言語体系の言葉を含んでいる場合に、当該第１言語体系の言葉を翻訳サーバで第２言語体系に翻訳させ、当該第２言語体系に翻訳された前記説明情報を取得する第６工程と、前記第６工程で取得した前記第２言語体系に翻訳された前記説明情報を前記提供要求の要求元の前記情報表示装置に提供する第７工程と、第２の言語体系に翻訳された前記説明情報を前記情報表示装置が表示中に当該情報表示装置から当該説明情報の登録を求める登録要求を受信した場合に、当該登録要求に関わる前記第２言語体系の聴取者向けの前記説明情報と、当該説明情報によって説明される前記第１言語情報中の語又は文とを関連付けて前記データベースに登録する第８工程と、を含む。

【0006】

好適に、前記説明情報は、テキスト情報、画像情報、動画情報、音声情報及びアドレス情報の少なくとも１つを含み、前記アドレス情報は、前記テキスト情報、前記画像情報、前記動画情報及び前記音声情報の少なくとも１つを提供するネットワーク上のサーバのアドレスに関する情報を含む。

【0008】

好適に、前記処理部が前記記憶部の前記命令に応じて実行する処理は、前記第２言語情報を提供した前記情報表示装置から前記説明情報の登録を求める登録要求を受信した場合に、当該登録要求に関わる前記第２言語体系の聴取者向けの前記説明情報と、当該説明情報によって説明される前記第１言語情報中の語又は文とを関連付けて前記データベースに登録する工程を含む。

【0009】

好適に、前記データベースは、１つの言語体系の語又は文と、当該語又は文について他の言語体系の聴取者に向けた説明を与える１以上の前記説明情報と、当該１以上の前記説明情報それぞれに対する評価を示す１以上の評価値とを関連付けて記憶しており、前記説明情報を取得する工程は、前記第１言語情報中の語又は文に関連付けられた複数の前記説明情報を前記データベースから取得する場合に、当該複数の前記説明情報それぞれの前記評価値を前記データベースから取得することを含み、前記説明情報を前記情報表示装置に提供する工程は、前記第１言語情報中の語又は文に関連付けられた複数の前記説明情報を前記情報表示装置に提供する場合に、各前記説明情報の前記評価値に応じた優先順位で当該複数の前記説明情報を表示させるための情報を前記情報表示装置に提供することを含む。

【0010】

好適に、前記処理部が前記記憶部の前記命令に応じて実行する処理は、１つの前記説明情報に対するユーザの評価を示す評価情報を前記情報表示装置から受信した場合に、当該１つの前記説明情報に関連付けて前記データベースに記憶された前記評価値を、受信した前記評価情報に応じて更新する工程を含む。

【0011】

好適に、前記第２言語情報を取得する工程は、前記第１言語情報から翻訳された異なる複数の前記第２言語体系の言葉を複数の前記第２言語情報として取得することを含み、前記第２言語情報を前記情報表示装置に提供する工程は、前記第１言語情報から翻訳された複数の前記第２言語情報を１以上の前記情報表示装置に提供することを含む。

【0012】

第２の観点は、翻訳された言葉に関連する情報を表示する情報表示装置にコンピュータが情報を提供する情報提供方法であって、前記コンピュータは、１以上のデータベースにアクセス可能であり、各前記データベースは、１つの言語体系の語又は文と、当該語又は文について他の言語体系の聴取者に向けた説明を与える１以上の説明情報とを関連付けて記憶しており、音声情報を取得する第１工程と、前記音声情報から第１言語体系の言葉を第１言語情報として取得する第２工程と、前記第１言語情報から翻訳された第２言語体系の言葉を第２言語情報として取得する第３工程と、前記第３工程で取得した前記第２言語情報を前記情報表示装置に提供する第４工程と、前記第２言語情報を提供した前記情報表示装置から、前記第２言語情報中の語又は文について前記説明情報の提供を求める提供要求を受信した場合、前記第２言語情報中の語又は文に対応する前記第１言語情報の語又は文に関連付けられた前記説明情報を前記データベースから取得する第５工程と、前記第５工程で取得した前記説明情報が前記第１言語体系の言葉を含んでいる場合に、当該第１言語体系の言葉を翻訳サーバで第２言語体系に翻訳させ、当該第２言語体系に翻訳された前記説明情報を取得する第６工程と、前記第６工程で取得した前記第２言語体系に翻訳された前記説明情報を前記提供要求の要求元の前記情報表示装置に提供する第７工程と、第２の言語体系に翻訳された前記説明情報を前記情報表示装置が表示中に当該情報表示装置から当該説明情報の登録を求める登録要求を受信した場合に、当該登録要求に関わる前記第２言語体系の聴取者向けの前記説明情報と、当該説明情報によって説明される前記第１言語情報中の語又は文とを関連付けて前記データベースに登録する第８工程とを有する。

【0013】

第３の観点は、翻訳された言葉に関連する情報を表示する情報表示装置と通信可能なコンピュータに処理を実行させるプログラムであって、前記コンピュータは、１以上のデータベースにアクセス可能であり、各前記データベースは、１つの言語体系の語又は文と、当該語又は文について他の言語体系の聴取者に向けた説明を与える１以上の説明情報とを関連付けて記憶しており、前記プログラムに従って前記コンピュータが実行する処理は、音声情報を取得する第１工程と、前記音声情報から第１言語体系の言葉を第１言語情報として取得する第２工程と、前記第１言語情報から翻訳された第２言語体系の言葉を第２言語情報として取得する第３工程と、前記第３工程で取得した前記第２言語情報を前記情報表示装置に提供する第４工程と、前記第２言語情報を提供した前記情報表示装置から、前記第２言語情報中の語又は文について前記説明情報の提供を求める提供要求を受信した場合、前記第２言語情報中の語又は文に対応する前記第１言語情報の語又は文に関連付けられた前記説明情報を前記データベースから取得する第５工程と、前記第５工程で取得した前記説明情報が前記第１言語体系の言葉を含んでいる場合に、当該第１言語体系の言葉を翻訳サーバで第２言語体系に翻訳させ、当該第２言語体系に翻訳された前記説明情報を取得する第６工程と、前記第６工程で取得した前記第２言語体系に翻訳された前記説明情報を前記提供要求の要求元の前記情報表示装置に提供する第７工程と、第２の言語体系に翻訳された前記説明情報を前記情報表示装置が表示中に当該情報表示装置から当該説明情報の登録を求める登録要求を受信した場合に、当該登録要求に関わる前記第２言語体系の聴取者向けの前記説明情報と、当該説明情報によって説明される前記第１言語情報中の語又は文とを関連付けて前記データベースに登録する第８工程と、を有する。

【発明の効果】

【0014】

本発明によれば、翻訳が難しい語や文の意味を伝え易くすることができる情報提供装置、情報提供方法及びプログラムを提供できる。

【図面の簡単な説明】

【0015】

【図1】図１は、本実施形態に係る情報提供装置を含んだシステムの一例を示す図である。

【図2】図２は、翻訳されたコンテンツを情報表示装置に提供する処理の一例を説明するためのフロー図である。

【図3】図３は、情報表示装置においてコンテンツを表示する画面の一例を示す図である。

【図4】図４は、情報表示装置において表示する設定画面の一例を示す図である。

【図5】図５は、説明情報を翻訳して情報表示装置に提供する処理の一例を説明するためのフロー図である。

【図6】図６は、説明情報をデータベースに登録する処理の一例を説明するためのフロー図である。

【図7】図７は、評価情報に応じて評価値を更新する処理の一例を説明するためのフロー図である。

【図8】図８は、コンテンツに付属する補足情報を情報表示装置に提供する処理の一例を説明するためのフロー図である。

【図9】図９は、コンテンツに付属する補足情報の案内を表示した画面の例を示す図である。

【発明を実施するための形態】

【0016】

以下、本発明の実施形態に係る入力装置について図面を参照しながら説明する。
図１は、本実施形態に係る情報提供装置を含んだシステムの一例を示す図である。図１に示すシステムは、インターネットなどの通信ネットワーク９を介して互いに通信可能な情報表示装置１と情報提供装置２を有する。

【0017】

情報表示装置１は、翻訳されたコンテンツを視聴するユーザによって操作される装置である。例えば、情報表示装置１は、スマートフォン、携帯電話機、タブレットＰＣ、ノート型ＰＣ、デスクトップ型ＰＣなどの情報機器や、複数人で視聴可能な電子看板装置（デジタルサイネージ）であってもよい。情報提供装置２は、情報表示装置１からの要求に応じて、翻訳されたコンテンツ（動画、静止画、音声、テキストなど）を１以上の情報表示装置１に提供する処理を行う。翻訳サーバ４は、通信ネットワーク９上で翻訳サービスを提供する装置であり、音声情報から特定の言語体系の言葉を認識して、これを別の言語体系の言葉に翻訳する処理を行う。
［情報表示装置１］
情報表示装置１は、図１の例において、通信部１１と、操作部１２と、表示部１３と、音入出力部１４と、撮像部１５と、記憶部１６と、処理部１７を有する。

【0018】

通信部１１は、通信ネットワーク９を介して他の装置（情報表示装置１、翻訳サーバ４など）と通信を行うための装置であり、例えば所定の通信規格（無線ＬＡＮ、イーサネット（登録商標）など）に準拠して通信を行う通信機器（ネットワークインターフェースカードなど）を含む。

【0019】

操作部１２は、ユーザの操作に応じた指示やその他の情報を処理部１７に入力する。例えば、操作部１２は、タッチパネル、タッチパッド、キーボード、マウス、ボタン、スイッチなどの入力機能を備えた機器を少なくとも１つ含む。

【0020】

表示部１３は、処理部１７において生成される映像信号に応じた映像を表示する装置であり、例えば液晶ディスプレイ、有機ＥＬディスプレイ、プロジェクタなどの表示機器を含む。

【0021】

音入出力部１４は、音声の入力及び出力を行う装置であり、例えばマイク、スピーカ、オーディオアンプ、オーディオ信号処理回路などを含む。

【0022】

撮像部１５は、画像を撮像する装置であり、例えばＣＭＯＳセンサやＣＣＤセンサなどの撮像素子、光学系、画像信号処理回路などを含む。

【0023】

記憶部１６は、処理部１７において実行されるプログラムＰＧ１の命令や、処理部１７による処理の過程で一時的に保存されるデータ、処理部１７の処理に利用されるデータ、処理部１７の処理の結果として得られたデータなどを記憶する。記憶部１６は、例えば、主記憶装置（ＲＯＭ、ＲＡＭなど）と補助記憶装置（フラッシュメモリ、ＳＳＤ、ハードディスク、メモリカード、光ディスクなど）を含んでよい。記憶部１６は、１つの記憶装置から構成されてもよいし、複数の記憶装置から構成されてもよい。記憶部１６を構成する各記憶装置は、コンピュータのバスや他の任意の情報伝送手段を介して処理部１７と接続される。

【0024】

プログラムＰＧ１は、コンピュータ読み取り可能な記録媒体（ＵＳＢメモリ、メモリカード、光ディスク、その他の非一時的な有形の媒体）に記録されたものを図示しない読み取り装置から入力して記憶部１６に記憶させてもよいし、通信部１１において他の装置から受信したものを記憶部１６に記憶させてもよい。

【0025】

処理部１７は、情報表示装置１の全体的な動作を統括的に司り、所定の情報処理を実行する。処理部１７は、例えば、記憶部１６に格納された１以上のプログラムＰＧ１の命令に従って処理を実行する１以上のプロセッサ（ＣＰＵ、ＭＰＵ、ＤＳＰなど）を含む。処理部１７は、記憶部１６に格納されたプログラムＰＧ１の命令を１以上のプロセッサが実行することにより、コンピュータとして動作する。

【0026】

処理部１７は、特定の機能を実現するように構成された１以上の専用のハードウェア（ＡＳＩＣ、ＦＰＧＡなど）を含んでもよい。この場合、処理部１７は、全ての処理をコンピュータにおいて実行してもよいし、少なくとも一部の処理を専用のハードウェアにおいて実行してもよい。

【0027】

［情報提供装置２］
情報提供装置２は、図２の例において、通信部２１と、記憶部２６と、処理部２７と、データベース部３を有する。

【0028】

通信部２１は、通信ネットワーク９を介して他の装置（情報表示装置１など）と通信を行うための装置であり、例えば所定の通信規格（無線ＬＡＮ、イーサネット（登録商標）など）に準拠して通信を行う通信機器（ネットワークインターフェースカードなど）を含む。

【0029】

記憶部２６は、処理部２７において実行されるプログラムＰＧ２の命令や、処理部２７による処理の過程で一時的に保存されるデータ、処理部２７の処理に利用されるデータ、処理部２７の処理の結果として得られたデータなどを記憶する。記憶部２６は、例えば、主記憶装置（ＲＯＭ、ＲＡＭなど）と補助記憶装置（フラッシュメモリ、ＳＳＤ、ハードディスク、メモリカード、光ディスクなど）を含んでよい。記憶部２６は、１つの記憶装置から構成されてもよいし、複数の記憶装置から構成されてもよい。記憶部２６を構成する各記憶装置は、コンピュータのバスや他の任意の情報伝送手段を介して処理部２７と接続される。

【0030】

プログラムＰＧ２は、コンピュータ読み取り可能な記録媒体（ＵＳＢメモリ、メモリカード、光ディスク、その他の非一時的な有形の媒体）に記録されたものを図示しない読み取り装置から入力して記憶部２６に記憶させてもよいし、通信部２１において他の装置から受信したものを記憶部２６に記憶させてもよい。

【0031】

処理部２７は、情報表示装置１の全体的な動作を統括的に司り、所定の情報処理を実行する。処理部２７は、例えば、記憶部２６に格納された１以上のプログラムＰＧ２の命令に従って処理を実行する１以上のプロセッサ（ＣＰＵ、ＭＰＵ、ＤＳＰなど）を含む。処理部２７は、記憶部２６に格納されたプログラムＰＧ２の命令を１以上のプロセッサが実行することにより、コンピュータとして動作する。情報提供装置２は、このような複数のコンピュータを含んでもよく、これらのコンピュータが任意の通信ネットワークを介して通信を行うことにより連携して処理を実行してもよい。

【0032】

処理部２７は、特定の機能を実現するように構成された１以上の専用のハードウェア（ＡＳＩＣ、ＦＰＧＡなど）を含んでもよい。この場合、処理部２７は、全ての処理をコンピュータにおいて実行してもよいし、少なくとも一部の処理を専用のハードウェアにおいて実行してもよい。

【0033】

データベース部３は、それぞれ処理部２７がアクセス可能な複数のデータベース３１を有する。各データベース３１は、例えば、ハードディスクやＳＳＤ、光ディスクなどの記憶装置を含んで構成される。

【0034】

１つのデータベース３１は、１つの言語体系（例えば日本語）の語又は文と、この語又は文について他の言語体系（例えばベトナム語）の聴取者に向けた説明を与える１以上の説明情報とを関連付けて記憶する。
説明情報は、例えば、テキスト情報、画像情報、動画情報、音声情報及びアドレス情報の少なくとも１つを含む。アドレス情報は、テキスト情報、画像情報、動画情報及び音声情報の少なくとも１つを提供するネットワーク上のサーバ（ウェブサーバなど）のアドレスに関する情報を含む。
例えば、日本語のコンテンツを５つの言語体系の聴取者に向けて提供する場合、データベース部３は、この５つの言語体系に対応した５つのデータベース３１を有する。

【0035】

また、データベース３１は、１つの言語体系の語又は文と、他の言語体系の聴取者に向けた１以上の説明情報とに関連付けて、この１以上の説明情報それぞれに対する評価を示す１以上の評価値を更に記憶していてもよい。この評価値は、例えば、情報表示装置１において１つの語又は文の説明用に複数の説明情報を表示させる場合において、各説明情報の優先順位を決定するために用いられる。また、評価値は、情報表示装置１において入力されるユーザの評価に応じて更新される。

【0036】

次に、所定の言語体系の言葉に翻訳されたコンテンツを情報提供装置２が情報表示装置１に提供する処理の一例について、図２のフロー図を参照して説明する。

【0037】

情報表示装置１の処理部１７は、情報提供装置２において提供可能な特定の言語体系（仮に第１言語体系と呼ぶ）のコンテンツを選択し、そのコンテンツを他の１以上の言語体系（仮に第２言語体系と呼ぶ）に翻訳して再生するように求めるユーザの指示を操作部１２において入力する（ＳＴ１００）。情報表示装置１の処理部１７は、この指示を入力すると、第１言語体系のコンテンツを１以上の第２言語体系に翻訳して再生することを求める再生要求を情報提供装置２に送信する（ＳＴ１０５）。この再生要求では、第１言語体系のコンテンツを複数の第２言語体系に翻訳して再生することを要求してもよい。

【0038】

情報表示装置１から再生要求を受信した情報提供装置２の処理部２７は、再生要求に係るコンテンツを取得する（ＳＴ１１０）。処理部２７は、例えば、記憶部２６に格納されたコンテンツを取得してもよいし、通信ネットワーク９に接続される他の装置（動画サイト、ウェブサーバなど）からコンテンツを取得してもよい。処理部２７が取得するコンテンツは、例えば動画、静止画、音声、テキストの少なくとも１つを含む。

【0039】

情報提供装置２の処理部２７は、ステップＳＴ１１０で取得したコンテンツに含まれる第１言語体系の音声情報やテキスト情報を、ステップＳＴ１０５の再生要求によって指定された１以上の第２言語体系の言葉へ翻訳するように求める翻訳要求を翻訳サーバ４に送信する（ＳＴ１１５）。翻訳サーバ４は、この翻訳要求に応じて、情報提供装置２から取得した音声情報を音声認識することにより、コンテンツに含まれた音声情報から第１言語体系の言葉（以下、「第１言語情報」と記す場合がある。）を抽出する。また翻訳サーバ４は、抽出した第１言語情報を１以上の第２言語体系の言葉（以下、「第２言語情報」と記す場合がある。）に翻訳する（ＳＴ１２０）。翻訳サーバ４は、翻訳結果の情報（第１言語情報、１以上の第２言語情報）を情報提供装置２に送信する（ＳＴ１２５）。なお、翻訳サーバ４は、ステップＳＴ１１５の翻訳要求が第１言語体系のテキスト情報のみを含む場合、このテキスト情報を１以上の第２言語体系に翻訳することによって得られた１以上の第２言語情報を情報提供装置２に送信する。

【0040】

情報提供装置２の処理部２７は、翻訳サーバ４から翻訳結果（ＳＴ１２５）として送信された第１言語情報及び第２言語情報を取得し、記憶部２６に格納する（ＳＴ１３０）。コンテンツがテキスト情報のみ含む場合、処理部２７は、このテキスト情報を第１言語情報として取得する。そして処理部２７は、再生要求（ＳＴ１０５）に係るコンテンツの再生用データと、ステップＳＴ１３０で取得した第１言語情報及び第２言語情報とを、要求元の情報表示装置１へ送信する（ＳＴ１３５）。

【0041】

情報表示装置１の処理部１７は、ステップＳＴ１３５において受信した再生用データに基づいてコンテンツを再生する。また処理部１７は、コンテンツの再生用データとともに受信した１以上の第２言語情報（コンテンツの第１言語情報から翻訳された第２言語体系の言葉）を表示部１３において表示する（ＳＴ１４０）。第１言語体系のコンテンツを複数の第２言語体系に翻訳して再生することを情報提供装置２に要求した場合、第１表示装置１の処理部１７は、操作部１２において入力されるユーザの指示に応じて、翻訳結果として得られた複数の第２言語体系のコンテンツから１以上の第２言語体系のコンテンツを選択し、表示部１３において表示してもよい。

【0042】

再生するコンテンツの時間が長い場合、情報表示装置１及び情報提供装置２は、コンテンツの再生が終了するまで上述したステップＳＴ１１０～ＳＴ１３５の処理を反復する。

【0043】

情報表示装置１の処理部１７は、表示部１３においてコンテンツと第２言語情報を表示しているときに、第２言語情報中の語又は文を指定してその説明情報を表示するように求めるユーザの指示を操作部１２において入力する（ＳＴ１４５）。情報表示装置１の処理部１７は、このユーザの指示を入力すると、指示において指定された第２言語情報中の語又は文について説明情報の提供を求める提供要求を情報提供装置２に送信する（ＳＴ１５０）。また処理部１７は、情報提供装置２へ説明情報の提供要求を送信した場合、コンテンツの再生を一時的に停止する（ＳＴ１５５）。

【0044】

情報提供装置２の処理部２７は、情報表示装置１から説明情報の提供要求を受信した場合、この提供要求において指定された第２言語情報中の語又は文に対応する第１言語情報の語又は文に関連付けられた説明情報を、データベース３１から取得する（ＳＴ１６０）。また、処理部２７は、第１言語情報中の語又は文に関連付けられた複数の説明情報をデータベース３１から取得する場合には、複数の説明情報それぞれの評価値もデータベース３１から取得する。そして処理部２７は、この取得した説明情報と評価値とを、提供要求の要求元の情報表示装置１へ送信する（ＳＴ１６５）。このとき、処理部２７は、各説明情報の評価値に応じた優先順位で各説明情報を表示させるための情報も、情報表示装置１へ送信する。例えば、処理部２７は、各説明情報の評価値をそのまま情報表示装置１へ送信してもよいし、各説明情報の評価値に基づいて決定した各説明情報の優先順位の情報を情報表示装置１へ送信してもよい。

【0045】

情報表示装置１の処理部１７は、提供要求に応じた説明情報を情報提供装置２から受信すると、受信した説明情報を表示する（ＳＴ１７０）。説明情報がテキスト情報、画像情報、動画情報、音声情報などである場合、情報表示装置１の処理部１７は、これらの受信した情報を表示部１３のディスプレイや音声入出力部１４のスピーカにおいて出力する。説明情報がアドレス情報である場合、情報表示装置１の処理部１７は、アドレス情報が示すネットワーク上のサーバにアクセスし、テキスト情報、画像情報、動画情報、音声情報などをサーバから取得して、表示部１３のディスプレイや音声入出力部１４のスピーカにおいて出力する。
情報提供装置２から複数の説明情報を受信した場合、情報表示装置１の処理部１７は、情報提供装置２から提供される優先順位の情報（各説明情報の評価値など）に応じて、優先順位が高い説明情報ほど表示部１３において優先的に表示する。例えば処理部１７は、優先順位に応じた順番で各説明情報を順次に表示してもよいし、優先順位に応じた順番で各説明情報を表示部１３の画面に並べて表示してもよい。

【0046】

図３は、情報表示装置１においてコンテンツを表示する画面の一例を示す図である。図３に示す画面Ａにおいて、領域Ａ５には、情報提供装置２から提供されたコンテンツが表示される。コンテンツが動画の場合、領域Ａ５の下側に配置されたボタンＡ６～Ａ９によって動画の再生が制御される。すなわち、ボタンＡ６の押下により再生が開始され、ボタンＡ７及びＡ８の押下により再生時間が前後にスキップされ、ボタンＡ９の押下により再生が停止される。

【0047】

図３の画面Ａの左側において縦に並んだ５つの領域Ａ３のうち、最上部の領域Ａ３には、情報提供装置２から提供された第１言語情報が表示され、最上部から２番目～５番目の領域Ａ３には、情報提供装置２から提供された１以上の第２言語情報がそれぞれ表示される。最上部の領域Ａ３に隣接する領域Ａ１（点線の枠で囲まれた領域）は、コンテンツの翻訳前の言語体系（第１言語体系）を表す記号（国旗等）が表示される。最上部から２番目～５番目の領域Ａ３に隣接する領域Ａ２（実線の枠で囲まれた領域）は、それぞれ右側の領域Ａ２に表示される第２言語情報の言語体系（第２言語体系）を表す記号（国旗等）が表示される。

【0048】

５つの領域Ａ３の右側には、それぞれ図４に示す設定用の画面Ｂを表示させるためのボタンＡ４が配置される。画面ＢのボタンＢ１が押下されると、コンテンツの再生スピードを設定するための図示しない画面が表示される。画面ＢのボタンＢ２が押下されると、コンテンツの音声の出力がオン又はオフする。画面ＢのボタンＢ３が押下されると、ボタンＡ４の左側の領域Ａ３に表示させる第２言語情報の言語体系（第２言語体系）を設定するための図示しない画面が表示される。画面Ｂの領域Ｂ４が押下されると、情報表示装置１の表示態様をスマートフォン用またはデジタルサイネージ用に切り替える。画面ＢのボタンＢ５～Ｂ７が押下されると、後述する説明情報の登録処理（ＳＴ３００～ＳＴ３２０：図６）が実行される。

【0049】

図３に示す画面Ａの領域Ａ５においてコンテンツを表示させているときに、領域Ａ３の第２言語情報に含まれる語又は文（点線枠Ａ１１）が操作部１２の操作（タッチパネルにおけるタッチ操作など）によって指定されると、領域Ａ５におけるコンテンツの再生が一時停止されて、点線枠Ａ１１の語又は文を第２言語体系（図３の例ではベトナム語）の聴取者向けに説明する説明情報（テキスト、動画、静止画などの情報）が領域Ａ５に表示される。なお、説明情報が音声情報を含む場合は、音入出力部１４のスピーカにおいて点線枠Ａ１１の語又は文を説明する音声が出力される。

【0050】

領域Ａ５の下側には、点線枠Ａ１１の語又は文に対する複数の説明情報を領域Ａ５において択一的に表示させるためのボタン群Ａ１２が設けられている。ボタン群Ａ１２における各ボタンの数値は、各説明情報の表示の優先順位を表しており、この数値が小さいほど優先順位が高い。左側に最も優先順の高い説明情報用のボタンが配置されており、右側に位置するボタンほど優先順位が低くなっている。これにより、優先順位の高いものから順番に説明情報を参照することが可能となる。

【0051】

以上説明したように、本実施形態によれば、第１言語情報から翻訳された第２言語情報に含まれる語又は文を第２言語体系の聴取者向けに説明する説明情報が、情報表示装置１に対して提供される。これにより、説明情報を参照して語や文の意味を把握できるため、翻訳が難しい語や文の意味を第２言語体系の聴取者に対して分かり易く伝えることができる。

【0052】

図５は、説明情報を翻訳して情報表示装置１に提供する処理の一例を説明するためのフロー図である。図５のフロー図におけるステップＳＴ１４０～ＳＴ１６０は、図３において説明した同一符号の処理と同じである。

【0053】

情報提供装置２の処理部２７は、ステップＳＴ１６０でデータベース３１から取得した説明情報が第１言語体系の言葉を含んでいる場合、既に説明したステップＳＴ１１５～ＳＴ１２５と同様なステップＳＴ２００～ＳＴ２１５の処理によって、第２言語体系の聴取者向けに翻訳された説明情報を翻訳サーバ４から取得する。
すなわち、情報提供装置２の処理部２７は、ステップＳＴ１６０で取得した説明情報に含まれる第１言語体系の音声情報やテキスト情報を、ステップＳＴ１５０の提供要求によって指定された第２言語体系の言葉へ翻訳するように求める翻訳要求を翻訳サーバ４に送信する（ＳＴ２００）。翻訳サーバ４は、この翻訳要求に応じて、情報提供装置２から取得した音声情報を音声認識することにより、コンテンツに含まれた音声情報から第１言語情報を抽出する。また翻訳サーバ４は、抽出した第１言語情報を、翻訳要求において指定された第２言語体系の言葉（第２言語情報）に翻訳する（ＳＴ２０５）。翻訳サーバ４は、翻訳結果の情報（第１言語情報、第２言語情報）を情報提供装置２に送信する（ＳＴ２１０）。ステップＳＴ２００の翻訳要求が第１言語体系のテキスト情報のみを含む場合、翻訳サーバ４は、このテキスト情報を第２言語体系に翻訳することによって得られた第２言語情報を情報提供装置２に送信する。情報提供装置２の処理部２７は、翻訳サーバ４から翻訳結果（ＳＴ２１０）として送信された第１言語情報及び第２言語情報を取得し、記憶部２６に格納する（ＳＴ２１５）。説明情報が第１言語体系のテキスト情報のみ含む場合、処理部２７は、このテキスト情報を第１言語情報として取得する。情報提供装置２の処理部２７は、提供要求（ＳＴ１５０）に係るコンテンツの再生用データと、ステップＳＴ２１５で取得した第２言語情報を、第２言語体系に翻訳された説明情報として要求元の情報表示装置１に送信する（ＳＴ２２０）。
情報表示装置１の処理部１７は、提供要求に応じた説明情報を情報提供装置２から受信すると、受信した説明情報を表示部１３において表示する（ＳＴ２２５）。

【0054】

このように、データベース３１に登録された説明情報が第１言語体系の言葉で作成されていても、これを第２言語体系の聴取者向けに翻訳して情報表示装置１に提供するため、説明情報を第１言語体系の言葉で作成することが可能となる。従って、第１言語体系を扱う者（コンテンツの制作者等）にとって説明情報の作成が簡単になる。

【0055】

図６は、説明情報をデータベース３１に登録する処理の一例を説明するためのフロー図である。図６のフロー図におけるステップＳＴ１００～ＳＴ１４０は、図３において説明した同一符号の処理と同じである。

【0056】

情報表示装置１の処理部１７は、情報提供装置２から提供された第２言語情報を表示しているときに（ＳＴ１４０）、この第２言語情報に含まれる語又は文の説明情報を新たに登録するように求めるユーザの指示を操作部１２において入力する（ＳＴ３００）。この指示は、第２言語情報（図３の画面Ａにおける最上部から２番目～５番目の領域Ａ３に表示される第２言語情報）に含まれた語又は文を指定するものでもよいし、第２言語情報の翻訳前の第１言語情報（図３の画面Ａにおける最上部の領域Ａ３に表示される第１言語情報）に含まれた語又は文を指定するものでもよい。ステップＳＴ３００の指示の入力は、例えば、第１言語情報又は第２言語情報の語又は文を指定した状態で、画面Ｂ（図４）のボタンＢ５～Ｂ７のいずれかが押下されることに対応する。情報表示装置１の処理部１７は、ボタンＢ５が押下された場合にユーザが指定した動画や写真を説明情報として入力し、ボタンＢ６が押下された場合にユーザが指定した単語を説明情報として入力し、ボタンＢ７が押下された場合にユーザが指定した文章を説明情報として入力する。情報表示装置１の処理部１７は、ユーザの指示に応じて説明情報を入力すると、この説明情報の登録を求める登録要求を情報提供装置２に送信する（ＳＴ３１０）。

【0057】

情報提供装置２の処理部２７は、情報表示装置１から説明情報の登録要求（ＳＴ３１０）を受信すると、登録要求に関わる説明情報（第２言語体系の聴取者向けの説明情報）と、この説明情報によって説明される第１言語情報中の語又は文とを関連付けてデータベース３１に登録する（ＳＴ３１５）。処理部２７は、データベース３１への説明情報の登録が完了すると、登録要求の要求元の情報表示装置１に対して登録が完了した旨を通知する（ＳＴ３２０）。

【0058】

このように、情報表示装置１のユーザが自ら説明情報を登録できるため、運用の過程で各ユーザが説明情報を充実させていくことにより、翻訳が難しい語や文の意味をより適切に伝えることが可能となる。

【0059】

図７は、評価情報に応じて評価値を更新する処理の一例を説明するためのフロー図である。図７のフロー図におけるステップＳＴ１７０は、図３において説明した同一符号の処理と同じである。

【0060】

情報表示装置１の処理部１７は、ステップＳＴ１７０において説明情報を表示しているときに、この説明情報に対する評価を与えるユーザの指示を操作部１２において入力する（ＳＴ４００）。例えば、情報表示装置１の処理部１７は、画面Ａ（図３）のボタンＡ１０が押下された場合、表示中の説明情報に対して良好な評価を与える指示が入力されたと判定する。情報表示装置１の処理部１７は、この指示を入力すると、表示中の１つの説明情報に対してユーザが与えた評価を示す評価情報を情報提供装置２に送信する（ＳＴ４０５）。情報提供装置２の処理部２７は、１つの説明情報に対する評価情報を情報表示装置１から受信した場合、この１つの説明情報に関連付けてデータベース３１に記憶された評価値を、受信した評価情報に応じて更新する（ＳＴ４１０）。
このように、ユーザが与えた説明情報に対する評価に応じて説明情報の評価値が更新され、情報表示装置１における説明情報の表示の優先順位が変わる。これにより、ユーザの評価の高い説明情報を情報表示装置１において優先的に表示させることが可能となる。従って、より適切な説明情報を表示させて、翻訳が難しい語や文の意味を伝え易くすることができる。

【0061】

図８は、コンテンツに付属する補足情報を情報表示装置１に提供する処理の一例を説明するためのフロー図である。図７のフロー図におけるステップＳＴ１４０は、図３において説明した同一符号の処理と同じである。

【0062】

情報表示装置１の処理部１７は、ステップＳＴ１４０においてコンテンツを表示しているときに、この付属した補足情報があることを表示部１３において案内する（ＳＴ５００）。図９は、コンテンツに付属する補足情報の案内を表示した画面Ａの例を示す図である。「このようにして」という言葉を囲う一点鎖線の枠Ａ１３は、「このようにして」に対応した補足情報があることを案内している。情報表示装置１の処理部１７は、この案内に応じて補足情報を表示するように求める指示（例えば枠Ａ１３に対するタッチ操作など）を入力すると、補足情報の提供要求を情報提供装置２に送信する（ＳＴ５１０）。また、情報表示装置１の処理部１７は、コンテンツの再生を一時的に停止する（ＳＴ５１５）。補足情報の提供要求を受信した情報提供装置２の処理部２７は、コンテンツに付属する補足情報を記憶部２６などから取得して（ＳＴ５２０）、情報表示装置１に送信する（ＳＴ５２５）。情報表示装置１の処理部１７は、情報提供装置２から受信した補足情報を表示部１３の画面（例えば図３の画面Ａの領域Ａ５）に表示する。

【0063】

このように、コンテンツの付属情報を適宜表示させることができるため、コンテンツの内容をより容易に理解することが可能となる。

【0064】

なお、本発明は上述した実施形態にのみ限定されるものではなく、種々のバリエーションを含んでいる。

【0065】

情報表示装置１において翻訳前の言語体系や翻訳後の言語体系を指定する方法は、ユーザの手動の操作により指定する方法でもよいし、ユーザが発話した言葉を認識した結果に基づいて指定する方法でもよいし、顔画像などからユーザを識別した結果に基づいて指定する方法でもよい。例えば、情報提供装置２の処理部２７は、情報表示装置１が備える音入出力部１４のマイクにおいて入力されたユーザの発話音声の情報に基づいて、ユーザが発話した言葉の言語体系を判定してもよい。あるいは、情報提供装置２の処理部２７は、情報表示装置１が備える撮像部１５において撮像されたユーザの顔の画像から、撮像されたユーザを識別し、識別したユーザに対して予め対応付けられた言語体系を判定してもよい。ユーザを識別する方法は、顔画像を用いる方法に限らず、他の生体情報（指紋、静脈、虹彩など）を用いる方法でもよい。

【0066】

上述した実施形態の説明では、既に作成されたコンテンツの音声情報の言語を翻訳する例が挙げられているが、本発明はこの例に限定されない。本発明の他の実施形態では、複数の情報表示装置１を用いて行われるユーザ同士の会話の音声やチャットのテキストをリアルタイムに翻訳してもよい。この場合、図３に示す画面Ａにおいて、領域Ａ１～Ａ２のタッチ操作などによって、発言者と聴取者とを交替してもよい。

【0067】

また、翻訳時の用語の説明（説明情報）を掲載したウェブサイトを別に設けてもよい。翻訳時の用語の説明（説明情報）を掲載するウェブページ（写真等）については、ユーザが評価してポイントを付けてもよい。

【0068】

スピーカから入力した発話者の音声に含まれる言葉をリアルタイムで翻訳する場合には、発話者のしゃべるスピードが速くて翻訳処理が追いつけないことや、発話者の活舌が悪いこと等を音声情報に基づいて判定し、スピーカなどから発話者に通知する機能を設けてもよい。

【符号の説明】

【0069】

１…情報表示装置、１１…通信部、１２…操作部、１３…表示部、１４…音入出力部、１５…撮像部、１６…記憶部、１７…処理部、２…情報提供装置、２１…通信部、２６…記憶部、２７…処理部、３…データベース部、３１…データベース、４…翻訳サーバ、９…通信ネットワーク

【要約】

【課題】翻訳が難しい語や文の意味を伝え易くすることができる情報提供装置、情報提供方法及びプログラムを提供する。
【解決手段】処理部２７が記憶部２６の命令に応じて実行する処理は、音声情報を取得する工程と、音声情報から第１言語体系の言葉を第１言語情報として取得する工程と、第１言語情報から翻訳された第２言語体系の言葉を第２言語情報として取得する工程と、取得した第２言語情報を情報表示装置１に提供する工程と、第２言語情報を提供した情報表示装置１から、当該前記第２言語情報中の語又は文について説明情報の提供を求める提供要求を受信した場合、当該前記第２言語情報中の語又は文に対応する第１言語情報の語又は文に関連付けられた第２言語体系の聴取者向けの説明情報をデータベース３１から取得する工程と、取得した説明情報を要求元の情報表示装置１に提供する工程とを含む。
【選択図】図１

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】