知財求人 - 知財ポータルサイト「IP Force」
(19)【発行国】日本国特許庁(JP)
(12)【公報種別】公開特許公報(A)
(11)【公開番号】P2024093743
(43)【公開日】2024-07-09
(54)【発明の名称】翻訳エンジン評価システム及び翻訳エンジン評価方法
(51)【国際特許分類】
G06F 40/51 20200101AFI20240702BHJP
【ＦＩ】
G06F40/51
【審査請求】未請求
【請求項の数】8
【出願形態】ＯＬ
(21)【出願番号】P 2022210307
(22)【出願日】2022-12-27
(71)【出願人】
【識別番号】522120576
【氏名又は名称】ポケトーク株式会社
(74)【代理人】
【識別番号】110000154
【氏名又は名称】弁理士法人はるか国際特許事務所
(72)【発明者】
【氏名】川竹 一
【テーマコード（参考）】
5B091
【Ｆターム（参考）】
5B091CD11
(57)【要約】
【課題】翻訳に用いられている翻訳エンジンがユーザの好みに合っているか否かを把握できる翻訳エンジン評価システム及び翻訳エンジン評価方法を提供する。
【解決手段】翻訳エンジン評価システム１は、翻訳前テキストと翻訳後テキストとが対応付けられた対訳のリストを端末１００に表示させる対訳リスト表示制御部と、リストに含まれる複数の対訳のうちからの選択を受け付ける対訳リスト選択受付部と、選択される対訳に含まれる翻訳前テキストを第２の言語に翻訳した比較翻訳後テキストを代替翻訳エンジンに生成させる比較翻訳部と、比較翻訳後テキストを端末１００に表示させる比較翻訳リスト表示制御部と、端末１００のユーザによる比較翻訳後テキストに対する評価を表す個別評価情報を取得する個別評価情報取得部と、を含む。
【選択図】図１
【解決手段】翻訳エンジン評価システム１は、翻訳前テキストと翻訳後テキストとが対応付けられた対訳のリストを端末１００に表示させる対訳リスト表示制御部と、リストに含まれる複数の対訳のうちからの選択を受け付ける対訳リスト選択受付部と、選択される対訳に含まれる翻訳前テキストを第２の言語に翻訳した比較翻訳後テキストを代替翻訳エンジンに生成させる比較翻訳部と、比較翻訳後テキストを端末１００に表示させる比較翻訳リスト表示制御部と、端末１００のユーザによる比較翻訳後テキストに対する評価を表す個別評価情報を取得する個別評価情報取得部と、を含む。
【選択図】図１
【特許請求の範囲】
【請求項1】
端末に入力される第１の言語の音声を表す翻訳前テキストを第２の言語に翻訳した翻訳後テキストをデフォルト翻訳エンジンに生成させるデフォルト翻訳手段と、
前記翻訳後テキストを前記端末に表示させる翻訳後テキスト表示制御手段と、
前記翻訳前テキストと前記翻訳後テキストとが対応付けられた対訳のリストを前記端末に表示させる対訳リスト表示制御手段と、
前記リストに含まれる複数の前記対訳のうちからの選択を受け付ける選択受付手段と、
選択される前記対訳に含まれる前記翻訳前テキストを前記第２の言語に翻訳した比較翻訳後テキストを代替翻訳エンジンに生成させる比較翻訳手段と、
前記比較翻訳後テキストを前記端末に表示させる比較翻訳後テキスト表示制御手段と、
前記端末のユーザによる前記比較翻訳後テキストに対する評価を表す個別評価情報を取得する個別評価情報取得手段と、
を含むことを特徴とする翻訳エンジン評価システム。
前記翻訳後テキストを前記端末に表示させる翻訳後テキスト表示制御手段と、
前記翻訳前テキストと前記翻訳後テキストとが対応付けられた対訳のリストを前記端末に表示させる対訳リスト表示制御手段と、
前記リストに含まれる複数の前記対訳のうちからの選択を受け付ける選択受付手段と、
選択される前記対訳に含まれる前記翻訳前テキストを前記第２の言語に翻訳した比較翻訳後テキストを代替翻訳エンジンに生成させる比較翻訳手段と、
前記比較翻訳後テキストを前記端末に表示させる比較翻訳後テキスト表示制御手段と、
前記端末のユーザによる前記比較翻訳後テキストに対する評価を表す個別評価情報を取得する個別評価情報取得手段と、
を含むことを特徴とする翻訳エンジン評価システム。
【請求項2】
前記比較翻訳手段は、前記選択の受付に応じて前記代替翻訳エンジンに前記比較翻訳後テキストを生成させる、
ことを特徴とする請求項１に記載の翻訳エンジン評価システム。
ことを特徴とする請求項１に記載の翻訳エンジン評価システム。
【請求項3】
前記比較翻訳手段は、複数の前記代替翻訳エンジンのそれぞれに前記比較翻訳後テキストを生成させ、
前記比較翻訳後テキスト表示制御手段は、前記複数の前記代替翻訳エンジンによってそれぞれ生成される複数の前記比較翻訳後テキストがランダムに配置されたリストを前記端末に表示させる、
ことを特徴とする請求項１に記載の翻訳エンジン評価システム。
前記比較翻訳後テキスト表示制御手段は、前記複数の前記代替翻訳エンジンによってそれぞれ生成される複数の前記比較翻訳後テキストがランダムに配置されたリストを前記端末に表示させる、
ことを特徴とする請求項１に記載の翻訳エンジン評価システム。
【請求項4】
前記比較翻訳手段は、複数の前記代替翻訳エンジンのうちからランダムに選択される前記代替翻訳エンジンに前記比較翻訳後テキストを生成させる、
ことを特徴とする請求項１に記載の翻訳エンジン評価システム。
ことを特徴とする請求項１に記載の翻訳エンジン評価システム。
【請求項5】
前記デフォルト翻訳エンジンは、複数の前記端末のいずれについても、当該端末に入力される前記第１の言語の音声を表す前記翻訳前テキストを前記第２の言語に翻訳した前記翻訳後テキストを生成する翻訳エンジンであり、
前記デフォルト翻訳エンジンを変更するデフォルト翻訳エンジン変更手段、をさらに含む、
ことを特徴とする請求項１に記載の翻訳エンジン評価システム。
前記デフォルト翻訳エンジンを変更するデフォルト翻訳エンジン変更手段、をさらに含む、
ことを特徴とする請求項１に記載の翻訳エンジン評価システム。
【請求項6】
前記代替翻訳エンジンの追加、変更、又は、削除のうちの少なくとも１つを実行する代替翻訳エンジン設定手段、をさらに含む、
ことを特徴とする請求項１に記載の翻訳エンジン評価システム。
ことを特徴とする請求項１に記載の翻訳エンジン評価システム。
【請求項7】
複数の前記端末のそれぞれに係る前記個別評価情報に基づいて、総合評価情報を生成する総合評価情報生成手段、をさらに含む、
ことを特徴とする請求項１に記載の翻訳エンジン評価システム。
ことを特徴とする請求項１に記載の翻訳エンジン評価システム。
【請求項8】
端末に入力される第１の言語の音声を表す翻訳前テキストを第２の言語に翻訳した翻訳後テキストをデフォルト翻訳エンジンに生成させることと、
前記翻訳後テキストを前記端末に表示させることと、
前記翻訳前テキストと前記翻訳後テキストとが対応付けられた対訳のリストを前記端末に表示させることと、
前記リストに含まれる複数の前記対訳のうちからの選択を受け付けることと、
選択される前記対訳に含まれる前記翻訳前テキストを前記第２の言語に翻訳した比較翻訳後テキストを代替翻訳エンジンに生成させることと、
前記比較翻訳後テキストを、前記端末に表示させることと、
前記端末のユーザによる前記比較翻訳後テキストに対する評価を表す個別評価情報を取得することと、
を含むことを特徴とする翻訳エンジン評価方法。
前記翻訳後テキストを前記端末に表示させることと、
前記翻訳前テキストと前記翻訳後テキストとが対応付けられた対訳のリストを前記端末に表示させることと、
前記リストに含まれる複数の前記対訳のうちからの選択を受け付けることと、
選択される前記対訳に含まれる前記翻訳前テキストを前記第２の言語に翻訳した比較翻訳後テキストを代替翻訳エンジンに生成させることと、
前記比較翻訳後テキストを、前記端末に表示させることと、
前記端末のユーザによる前記比較翻訳後テキストに対する評価を表す個別評価情報を取得することと、
を含むことを特徴とする翻訳エンジン評価方法。
【発明の詳細な説明】
【技術分野】
【0001】
本開示は、翻訳エンジン評価システム及び翻訳エンジン評価方法に関する。
【背景技術】
【0002】
特許文献１には、端末から音声データを受け付けて、当該音声データが表す音声の音声認識結果であるテキストを他の言語のテキストに翻訳し、その翻訳結果を表すテキスト、及び、当該テキストが表す音声を当該端末に送信するサーバが記載されている。
【先行技術文献】
【特許文献】
【0003】
【特許文献1】特表２０１７－５６３６２８号公報
【発明の概要】
【発明が解決しようとする課題】
【0004】
特許文献１に記載のサーバで特定の翻訳エンジンを用いた翻訳が行われている状況において、この翻訳エンジンによる翻訳結果がユーザの好みに合っていないことがある。例えば、新たに開発された翻訳エンジンによる翻訳結果の方がユーザの好みに合っていることがある。
【0005】
しかし、特許文献１に記載の技術では、翻訳に用いられている翻訳エンジンがユーザの好みに合っているかどうかを把握することができなかった。
【0006】
本発明は上記課題に鑑みてなされたものであって、その目的の１つは、翻訳に用いられている翻訳エンジンがユーザの好みに合っているか否かを把握できる翻訳エンジン評価システム及び翻訳エンジン評価方法を提供することにある。
【課題を解決するための手段】
【0007】
上記課題を解決するために、本発明に係る翻訳エンジン評価システムは、端末に入力される第１の言語の音声を表す翻訳前テキストを第２の言語に翻訳した翻訳後テキストをデフォルト翻訳エンジンに生成させるデフォルト翻訳手段と、前記翻訳後テキストを前記端末に表示させる翻訳後テキスト表示制御手段と、前記翻訳前テキストと前記翻訳後テキストとが対応付けられた対訳のリストを前記端末に表示させる対訳リスト表示制御手段と、前記リストに含まれる複数の前記対訳のうちからの選択を受け付ける選択受付手段と、選択される前記対訳に含まれる前記翻訳前テキストを前記第２の言語に翻訳した比較翻訳後テキストを代替翻訳エンジンに生成させる比較翻訳手段と、前記比較翻訳後テキストを前記端末に表示させる比較翻訳後テキスト表示制御手段と、前記端末のユーザによる前記比較翻訳後テキストに対する評価を表す個別評価情報を取得する個別評価情報取得手段と、を含む。
【0008】
本発明の一態様では、前記比較翻訳手段は、前記選択の受付に応じて前記代替翻訳エンジンに前記比較翻訳後テキストを生成させる。
【0009】
本発明の一態様では、前記比較翻訳手段は、複数の前記代替翻訳エンジンのそれぞれに前記比較翻訳後テキストを生成させ、前記比較翻訳後テキスト表示制御手段は、前記複数の前記代替翻訳エンジンによってそれぞれ生成される複数の前記比較翻訳後テキストがランダムに配置されたリストを前記端末に表示させる。
【0010】
本発明の一態様では、前記比較翻訳手段は、複数の前記代替翻訳エンジンのうちからランダムに選択される前記代替翻訳エンジンに前記比較翻訳後テキストを生成させる。
【0011】
本発明の一態様では、前記デフォルト翻訳エンジンは、複数の前記端末のいずれについても、当該端末に入力される前記第１の言語の音声を表す前記翻訳前テキストを前記第２の言語に翻訳した前記翻訳後テキストを生成する翻訳エンジンであり、前記デフォルト翻訳エンジンを変更するデフォルト翻訳エンジン変更手段、をさらに含む。
【0012】
本発明の一態様では、前記代替翻訳エンジンの追加、変更、又は、削除のうちの少なくとも１つを実行する代替翻訳エンジン設定手段、をさらに含む。
【0013】
本発明の一態様では、複数の前記端末のそれぞれに係る前記個別評価情報に基づいて総合評価情報を生成する総合評価情報生成手段、をさらに含む。
【0014】
また、本発明に係る翻訳エンジン評価方法は、端末に入力される第１の言語の音声を表す翻訳前テキストを第２の言語に翻訳した翻訳後テキストをデフォルト翻訳エンジンに生成させることと、前記翻訳後テキストを前記端末に表示させることと、前記翻訳前テキストと前記翻訳後テキストとが対応付けられた対訳のリストを前記端末に表示させることと、前記リストに含まれる複数の前記対訳のうちからの選択を受け付けることと、選択される前記対訳に含まれる前記翻訳前テキストを前記第２の言語に翻訳した比較翻訳後テキストを代替翻訳エンジンに生成させることと、前記比較翻訳後テキストを、前記端末に表示させることと、前記端末のユーザによる前記比較翻訳後テキストに対する評価を表す個別評価情報を取得する。
【図面の簡単な説明】
【0015】
【図1】本発明の一実施形態に係る翻訳エンジン評価システムの全体構成図である。
【図2】本発明の一実施形態に係る端末の外観の一例を示す図である。
【図3】対訳リスト表示画面の一例を示す図である。
【図4】対訳確認画面の一例を示す図である。
【図5】比較翻訳リスト表示画面の一例を示す図である。
【図6】総合評価情報表示画面の一例を示す図である。
【図7A】本発明の一実施形態に係る端末のハードウェア構成の一例を示す図である。
【図7B】本発明の一実施形態に係る翻訳ポータルのハードウェア構成の一例を示す図である。
【図8】本発明の実施形態に係る翻訳エンジン評価システムの機能ブロック図である。
【図9】本発明の実施形態に係る端末の通常動作に係る詳細機能ブロック図である。
【図10】対訳リストデータの一例を示す図である。
【図11】本発明の実施形態に係る翻訳ポータルの通常動作に係る詳細機能ブロック図である。
【図12】本発明の実施形態に係る音声処理システムの詳細機能ブロック図である。
【図13】本発明の実施形態に係る端末の評価動作に係る詳細機能ブロック図である。
【図14】本発明の実施形態に係る翻訳ポータルの評価動作に係る詳細機能ブロック図である。
【図15】総合評価情報データの一例を示す図である。
【図16】翻訳エンジン評価システムの対訳リスト生成処理を示すフロー図である。
【図17】翻訳エンジン評価システムの比較翻訳リスト生成処理を示すフロー図である。
【図18】翻訳エンジン評価システムの総合評価情報生成処理を示すフロー図である。
【図19】比較翻訳リスト表示画面の変形例である比較翻訳後テキスト表示画面を示す図である。
【発明を実施するための形態】
【0016】
以下、本発明の一実施形態について、図面を参照しながら説明する。
【0017】
図１は、本実施形態に係る翻訳エンジン評価システム１の全体構成の一例を示す図である。
【0018】
図１に示すように、本実施形態に係る翻訳エンジン評価システム１には、複数の端末１００、翻訳ポータル２００、音声処理システム３００、複数の翻訳エンジン４００（４００ａ、４００ｂ、４００ｃ、４００ｄ、・・・）が含まれている。端末１００、翻訳ポータル２００、音声処理システム３００、翻訳エンジン４００は、インターネット等のコンピュータネットワーク５００に接続されている。端末１００、翻訳ポータル２００、音声処理システム３００、翻訳エンジン４００は互いに、コンピュータネットワーク５００を介して通信可能となっている。複数の端末１００は、別々のユーザが使っていてもよい。
【0019】
以下、翻訳エンジン４００ａは翻訳エンジンＡとも呼び、その識別子は「０００１」とする。また、翻訳エンジン４００ｂは翻訳エンジンＢとも呼び、その識別子は「０００２」とする。また、翻訳エンジン４００ｃは翻訳エンジンＣとも呼び、その識別子は「０００３」とする。また、翻訳エンジン４００ｄは翻訳エンジンＤとも呼び、その識別子は「０００４」とする。
【0020】
図２は、本発明の一実施形態に係る端末の正面の外観の一例を示す図である。本実施形態に係る端末１００は、翻訳機である。図２には、翻訳対象の音声を入力する際に押下される翻訳ボタン１００ｄａ、電源のオンやオフを行うための電源ボタン１００ｄｂ、同図には示されていないスピーカ１００ｇ（図７Ａ参照）から出力される音声の音量調整を行うための音量調整部１００ｄｃが示されている。翻訳ボタン１００ｄａは、端末１００の前面に設けられているタッチパネル１００ｅの下側に配置されている。電源ボタン１００ｄｂ、及び、音量調整部１００ｄｃは端末１００の右側面に配置されている。ユーザによって端末１００に設定操作が行われることで、端末１００に入力される音声の言語である翻訳前言語と、当該音声が翻訳される言語である翻訳後言語と、が設定されている。以下の説明では、翻訳前言語として日本語が設定され、翻訳後言語として英語が設定されていることとする。
【0021】
ユーザが端末１００に日本語の音声を入力すると、図２に示すように、音声認識結果である翻訳前の日本語テキスト及び日本語テキストを英語に翻訳した翻訳後の英語テキストがタッチパネル１００ｅに表示され、英語テキストの内容を表す英語の音声が出力される。この一連の動作を通常動作と呼ぶ。通常動作で使用される翻訳エンジンは、翻訳エンジン評価システム１に含まれる複数の端末で共通であり、当該翻訳エンジンをデフォルト翻訳エンジンと呼ぶ。本実施形態では、デフォルト翻訳エンジンは、複数の端末１００のいずれについても、入力される日本語の音声を表す日本語テキストを英語に翻訳した英語テキストを生成する翻訳エンジンであるとする。デフォルト翻訳エンジンは変更することができ、以下で説明する評価動作によってどの翻訳エンジンに変更するか決定することができる。なお、以下の説明では、翻訳エンジンＡをデフォルト翻訳エンジンとする。
【0022】
図３は、評価動作で表示される対訳リスト表示画面の一例を示す図である。通常動作により、日本語テキストと日本語テキストを翻訳した英語テキストが対応付けられ、対訳として端末１００に記憶される。端末１００は、記憶された対訳に基づいて対訳リスト表示画面１０を生成する。対訳リスト表示画面１０は対訳表示領域１０ａ～１０ｂを含む。端末１０は、図３の対訳リスト表示画面１０をタッチパネル１００ｅに表示する。評価動作は、通常動作によって生成された対訳リストを用いて行われる。
【0023】
ユーザは、端末１００に所定の操作を行うことで表示される対訳リストから、１つの対訳を選択することで、翻訳エンジンの評価に参加することができる。ユーザが対訳を選択すると、次に説明する図４の画面がタッチパネル１００ｅに表示される。
【0024】
図４は、評価動作で表示される対訳確認画面の一例を示す図である。対訳確認画面１２は、ユーザが図３の画面で選択した対訳及び他の翻訳を試すかどうか選択する対訳確認受付ボタン１２ａを含む。ユーザは対訳確認受付ボタン１２ａを選択することで、選択した対訳に係る日本語テキストを、デフォルト翻訳エンジン以外の翻訳エンジンによって翻訳した英語テキストを確認することができる。
【0025】
図５は、評価動作で表示される比較翻訳リスト表示画面の一例を示す図である。
比較翻訳リスト表示画面１４は、ユーザが図４の画面で選択した日本語テキストを、デフォルト翻訳エンジンで翻訳した英語テキストと、複数の他の翻訳エンジンで翻訳した英語テキストを含む。ここで、比較翻訳リスト表示画面１４に表示されている英語テキストを比較翻訳テキスト１４ａ～１４ｄと呼ぶ。なお、比較翻訳テキスト１４ａは、日本語テキストを翻訳エンジンＡで翻訳したテキストである。また、比較翻訳テキスト１４ｂは、日本語テキストを翻訳エンジンＢで翻訳したテキストである。また、比較翻訳テキスト１４ｃは、日本語テキストを翻訳エンジンＣで翻訳したテキストである。また、比較翻訳テキスト１４ｄは、日本語テキストを翻訳エンジンＤで翻訳したテキストである。比較翻訳リスト表示画面１４は、比較翻訳テキスト１４ａ～１４ｄが上からランダムに配置されている。例えば、図５では、比較翻訳テキスト１４ｄ、１４ｂ、１４ｃ、１４ａの順に配置されている。翻訳エンジンはそれぞれ、異なる事業者から提供されているため、翻訳のアルゴリズムも異なっており、同じ日本語テキストを翻訳しても、少しずつ異なる英語テキストに翻訳される。
比較翻訳リスト表示画面１４は、ユーザが図４の画面で選択した日本語テキストを、デフォルト翻訳エンジンで翻訳した英語テキストと、複数の他の翻訳エンジンで翻訳した英語テキストを含む。ここで、比較翻訳リスト表示画面１４に表示されている英語テキストを比較翻訳テキスト１４ａ～１４ｄと呼ぶ。なお、比較翻訳テキスト１４ａは、日本語テキストを翻訳エンジンＡで翻訳したテキストである。また、比較翻訳テキスト１４ｂは、日本語テキストを翻訳エンジンＢで翻訳したテキストである。また、比較翻訳テキスト１４ｃは、日本語テキストを翻訳エンジンＣで翻訳したテキストである。また、比較翻訳テキスト１４ｄは、日本語テキストを翻訳エンジンＤで翻訳したテキストである。比較翻訳リスト表示画面１４は、比較翻訳テキスト１４ａ～１４ｄが上からランダムに配置されている。例えば、図５では、比較翻訳テキスト１４ｄ、１４ｂ、１４ｃ、１４ａの順に配置されている。翻訳エンジンはそれぞれ、異なる事業者から提供されているため、翻訳のアルゴリズムも異なっており、同じ日本語テキストを翻訳しても、少しずつ異なる英語テキストに翻訳される。
【0026】
ここで、デフォルト翻訳エンジン以外の翻訳エンジンを代替翻訳エンジンと呼ぶ。つまり、翻訳エンジンＢ、翻訳エンジンＣ、及び翻訳エンジンＤは代替翻訳エンジンである。
【0027】
ユーザは、比較翻訳リストの中から、好みに合った翻訳結果である英語テキストを１つ選択することができる。ユーザは比較翻訳テキスト１４ａ～１４ｄに対するタップ等の選択操作により、比較翻訳リストから１つを選択し、比較翻訳テキスト選択受付ボタン１４ｅをタップ等の操作を行う。すると、端末１００はユーザの選択結果を個別評価情報として生成し、翻訳ポータル２００に送信する。翻訳ポータルは、翻訳エンジン評価システム１に含まれる複数の端末１００から個別評価情報を取得し、総合評価情報を生成する。このようにすることで、ユーザの好みを反映した翻訳エンジンの総合評価情報を生成することができる。
【0028】
図６は、システム管理者が確認する総合評価情報表示画面の一例を示す図である。上記の評価動作により取得した個別評価情報に基づいて、翻訳ポータル２００は、デフォルト翻訳エンジン及び代替翻訳エンジンの総合評価情報を生成する。図６は、日本語から英語に翻訳する翻訳エンジンの総合評価情報管理画面２０の一例である。翻訳エンジンごとにＩＤ、ユーザ選択回数、端末表示回数、デフォルト、及び、表示対象候補の情報が関連付けられて表示される。翻訳エンジン評価システム１の管理者は、翻訳ポータル２００が生成した総合評価情報管理画面２０を見ることで、デフォルト翻訳エンジン及び代替翻訳エンジンの評価状況を確認することができ、デフォルト翻訳エンジンを変更するかどうかを決定できる。
【0029】
このようにして、本実施形態によれば、管理者は通常動作の翻訳に用いられているデフォルト翻訳エンジンがユーザの好みに合っているか否かを把握することができる。また、管理者は、デフォルト翻訳エンジンを変更するか否か、どの代替翻訳エンジンをデフォルト翻訳エンジンに変更するかを決定することができる。
【0030】
以下に、上記の翻訳エンジン評価システム１を実現するためのハードウェア構成について説明する。
【0031】
図７Ａは、本発明の一実施形態に係る端末１００のハードウェア構成の一例を示す図である。本実施形態に係る端末１００は、図７Ａに示すようなコンピュータである。コンピュータにインストールされたソフトウェアによって、入力された日本語の音声を表す日本語テキスト及び当該日本語テキストを翻訳した英語テキストを表示するとともに、当該英語テキストを音声合成した音声を出力する翻訳機能を実現している。本実施形態の端末１００の一例を図７Ａに示すように、例えば、プロセッサ１００ａ、記憶部１００ｂ、通信部１００ｃ、操作部１００ｄ、タッチパネル１００ｅ、マイク１００ｆ、スピーカ１００ｇが含まれる。
【0032】
プロセッサ１００ａは、例えば端末１００にインストールされるプログラムに従って動作するマイクロプロセッサ等のプログラム制御デバイスである。
【0033】
記憶部１００ｂは、例えばＲＯＭやＲＡＭ等の記憶素子などである。記憶部１００ｂには、プロセッサ１００ａによって実行されるプログラムなどが記憶される。
【0034】
通信部１００ｃは、例えばコンピュータネットワーク５００を介して音声処理システム３００との間でデータを授受するための通信インタフェースである。ここで通信部１００ｃに、基地局を含む携帯電話回線を経由してインターネット等のコンピュータネットワーク５００と通信を行う無線通信モジュールが含まれていてもよい。また通信部１００ｃに、Ｗｉ－Ｆｉ（登録商標）ルータ等を経由してインターネット等のコンピュータネットワーク５００と通信を行う無線ＬＡＮモジュールが含まれていてもよい。
【0035】
操作部１００ｄは、例えばユーザが行った操作の内容をプロセッサ１００ａに出力するボタンやタッチセンサ等の操作部材である。
【0036】
タッチパネル１００ｅは、例えばタッチセンサと液晶ディスプレイや有機ＥＬディスプレイ等のディスプレイとが一体となったものである。タッチパネル１００ｅは、端末１００の前面に設けられており、プロセッサ１００ａが生成する画面などを表示させる。
【0037】
マイク１００ｆは、例えば受け付ける音声を電気信号に変換する音声入力デバイスである。ここでマイク１００ｆが、端末１００に内蔵されている、人混みでも人の声が認識しやすいノイズキャンセリング機能を備えたデュアルマイクであってもよい。
【0038】
スピーカ１００ｇは、例えば音声を出力する音声出力デバイスである。ここでスピーカ１００ｇが、端末１００に内蔵されている、騒がしい場所でも使えるダイナミックスピーカーであってもよい。
【0039】
本実施形態に係る翻訳ポータル２００は、図７Ｂに示すように、例えば、プロセッサ２００ａ、記憶部２００ｂ、通信部２００ｃが含まれる。翻訳ポータル２００は、本実施形態では例えば、端末１００に入力される音声を表す音声データ、当該音声の音声認識結果を表す翻訳前テキスト（日本語テキスト）、当該音声の翻訳結果を表す翻訳後テキスト(英語テキスト)、翻訳後テキストを音声合成した英語の音声データなどを中継するサーバコンピュータ等のコンピュータシステムである。
【0040】
プロセッサ２００ａは、例えば翻訳ポータル２００にインストールされるプログラムに従って動作するＣＰＵ等のプログラム制御デバイスである。
【0041】
記憶部２００ｂは、例えばＲＯＭやＲＡＭ等の記憶素子やソリッドステートドライブやハードディスクドライブなどである。記憶部２００ｂには、プロセッサ２００ａによって実行されるプログラムなどが記憶される。
【0042】
通信部２００ｃは、例えばネットワークボードなどの通信インタフェースなどである。通信部２００ｃは、例えばコンピュータネットワーク５００を介して端末１００、音声処理システム３００、及び、翻訳エンジン４００との間でデータを授受する。
【0043】
音声処理システム３００は、例えば、端末が受け付ける音声データが表す音声の音声認識や、翻訳後テキストの音声合成等の音声処理を実行するサーバコンピュータ等のコンピュータシステムである。なお、音声処理システム３００が、１台のコンピュータから構成されていてもよいし、複数台のコンピュータから構成されてもよい。
【0044】
翻訳エンジン４００は、第１の言語のテキストを第２の言語のテキストに翻訳する処理を実行するサーバコンピュータ等のコンピュータシステムである。例えば、本実施形態では、例えば、第１の言語である日本語のテキストを第２の言語である英語のテキストに翻訳する。なお、翻訳エンジン４００が、１台のコンピュータから構成されていてもよいし、複数台のコンピュータから構成されてもよい。なお、翻訳エンジンＡ、翻訳エンジンＢ、翻訳エンジンＣ、及び、翻訳エンジンＤはそれぞれ別の事業者から提供されていてよい。
【0045】
図８は、本発明の実施形態に係る翻訳エンジン評価システム１の機能ブロック図である。翻訳エンジン評価システム１は、主に通常動作及び評価動作を行う。
【0046】
図８に示すように、端末１００は端末通常動作部１００Ａ及び端末評価動作部１００Ｂを含み、翻訳ポータル２００はポータル通常動作部２００Ａ及びポータル評価動作部２００Ｂを含んでいる。
【0047】
通常動作は、端末通常動作部１００Ａ、ポータル通常動作部２００Ａ、音声処理システム３００、及び、デフォルトである翻訳エンジンＡによって実行される。以下に、通常動作の処理について説明する。
【0048】
ユーザが、端末通常動作部１００Ａに日本語の音声を入力すると、日本語の音声データがポータル通常動作部２００Ａに送信される。ポータル通常動作部２００Ａは、受信した日本語の音声データを音声処理システム３００に送信する。
【0049】
音声処理システム３００は、受信した音声データを音声認識し、音声認識結果である日本語のテキスト（翻訳前テキスト）を生成する。そして、音声処理システム３００は、日本語テキストをポータル通常動作部２００Ａに送信する。
【0050】
そして、ポータル通常動作部２００Ａは、受信した日本語テキストをデフォルト翻訳エンジンである翻訳エンジンＡに送信する。翻訳エンジンＡは、受信した日本語テキストを翻訳し、英語テキストを生成する。翻訳エンジンＡは、英語テキストをポータル通常動作部２００Ａに送信する。ポータル通常動作部２００Ａは、英語テキストを音声処理システム３００に送信する。
【0051】
音声処理システム３００は、英語テキストを音声合成し、英語テキストの内容を表す英語音声を生成する。また、音声処理システム３００は、英語音声をポータル通常動作部２００Ａに送信する。
【0052】
そして、ポータル通常動作部２００Ａは、日本語テキスト、英語テキスト、及び、英語音声データを端末通常動作部１００Ａに送信する。
【0053】
端末通常動作部１００Ａは、図２に示すように、日本語テキスト及び英語テキストを表示し、英語音声を出力する。また、端末通常動作部１００Ａは、日本語テキスト及び英語テキストを対応付けた対訳として記憶する。
【0054】
次に、評価動作は、端末評価動作部１００Ｂ、ポータル評価動作部２００Ｂ、翻訳エンジンＢ、翻訳エンジンＣ、及び、翻訳エンジンＤによって実行される。以下に、評価動作の処理について説明する。
【0055】
通常動作により、端末通常動作部１００Ａには日本語テキスト及び英語テキストが対訳として保存されている。
【0056】
ユーザが所定の操作を行うと、端末評価動作部１００Ｂは、図３に示すように、対訳リストを表示する。対訳リスト表示画面１０は、対訳表示領域１０ａ及び１０ｂに、別々の対訳を配置することで生成される。
【0057】
ユーザは、端末評価動作部１００Ｂに表示される対訳リストの内から１つを選択する。すると端末評価動作部１００Ｂは、図４に示すように、ユーザが選択した対訳及び対訳確認受付ボタン１２ａが配置された対訳確認画面１２を表示する。ユーザが対訳確認受付ボタン１２ａを選択すると、端末評価動作部１００Ｂは対訳に係る日本語テキストをポータル評価動作部２００Ｂに送信する。
【0058】
次に、ポータル評価動作部２００Ｂは、代替翻訳エンジンである翻訳エンジンＢ、翻訳エンジンＣ、及び、翻訳エンジンＤに日本語テキストを送信する。代替翻訳エンジン４０２～４０４は、日本語テキストを英語に翻訳した比較翻訳後テキストをポータル評価動作部２００Ｂに送信する。
【0059】
ポータル評価動作部２００Ｂは、受信した複数の比較翻訳後テキストを端末評価動作部１００Ｂに送信する。
【0060】
端末評価動作部１００Ｂは、受信した複数の比較翻訳後テキスト(英語テキスト)及び翻訳前テキスト（日本語テキスト）を比較翻訳テキスト表示領域１４ａ～ｄに配置することで、図５に示すように、比較翻訳リスト表示画面１４を表示する。
【0061】
そして、ユーザが好みに合った翻訳結果である英語テキストを１つ選択し、比較翻訳テキスト選択受付ボタン１４ｅを選択すると、端末評価動作部１００Ｂはユーザの選択結果を個別評価情報として生成する。例えば、表示された翻訳エンジンのＩＤと選択された翻訳エンジンのＩＤを個別評価情報としてよい。そして、端末評価動作部１００Ｂは、個別評価情報をポータル評価動作部２００Ｂに送信する。
【0062】
ポータル評価動作部２００Ｂは、翻訳エンジン評価システム１に含まれる複数の端末評価動作部１００Ｂから個別評価情報を取得し、デフォルト翻訳エンジン及び代替翻訳エンジンの総合評価情報を生成し、記憶する。
【0063】
ポータル評価動作部２００Ｂは、図６に示すように、翻訳エンジン評価システム１の管理者が確認する総合評価情報表示画面を表示する。管理者は、総合評価情報表示画面を見て、デフォルト翻訳エンジンである翻訳エンジンＡや代替翻訳エンジンである翻訳エンジンＣ、及び、翻訳エンジンＤの評価状況を確認することができる。
【0064】
このようにして、本実施形態によれば、管理者は通常動作の翻訳に用いられているデフォルト翻訳エンジンが、ユーザの好みに合っているかを把握することができる。また、管理者は、デフォルト翻訳エンジンを変更するか否か、どの代替翻訳エンジンをデフォルト翻訳エンジンに変更するかを決定することができる。
【0065】
次に、図８に示した、端末通常動作部１００Ａ、端末評価動作部１００Ｂ、ポータル通常動作部２００Ａ、ポータル評価動作部２００Ｂ、及び、音声処理システム３００について、詳細に説明する。
【0066】
図９は、本実施形態に係る端末通常動作部１００Ａの詳細機能ブロック図である。
【0067】
同図に示すように、本実施形態に係る端末通常動作部１００Ａには、機能的には例えば、ボタン操作入力受付部１０２、音声入力受付部１０４、入力送信部１０６、テキスト受信部１０８、対訳リストデータ生成部１１２、音声データ受信部１１４、音声出力部１１６、及び、対訳リストデータ記憶部１１８が含まれる。ボタン操作入力受付部１０２は、プロセッサ１００ａ、操作部１００ｄ、及び、タッチパネル１００ｅを主として実装される。音声入力受付部１０４は、プロセッサ１００ａ、及び、マイク１００ｆを主として実装される。入力送信部１０６、テキスト受信部１０８及び音声データ受信部１１４は、通信部１００ｃを主として実装される。対訳リストデータ生成部１１２は、プロセッサ１００ａ、及び、タッチパネル１００ｅを主として実装される。対訳リストデータ記憶部１１８は、記憶部１００ｂを主として実装される。
【0068】
以上の機能は、コンピュータである端末１００にインストールされた、以上の機能に対応する指令を含むプログラムをプロセッサ１００ａで実行することにより実装される。このプログラムは、例えば、光ディスク、磁気ディスク、磁気テープ、光磁気ディスク、フラッシュメモリ等のコンピュータ読み取り可能な情報記憶媒体を介して、あるいは、インターネットなどを介して端末１００に供給される。
【0069】
ボタン操作入力受付部１０２は、本実施形態では例えば、ユーザが翻訳ボタン１００ｄａを指で押下する操作や翻訳ボタン１００ｄａから指を離す操作などといった端末通常動作部１００Ａに対する操作入力を受け付ける。
【0070】
音声入力受付部１０４は、本実施形態では例えば、ボタン操作入力受付部１０２の翻訳ボタン１００ｄａが押されている間、マイク１００ｆを介してユーザにより入力される音声を受け付ける。
【0071】
入力送信部１０６は、本実施形態では例えば、音声入力受付部１０４に入力される音声を表す音声データを後述するポータル通常動作部２００Ａのデフォルト翻訳部２０２に送信する。
【0072】
テキスト受信部１０８は、後述するポータル通常動作部２００Ａのデフォルト翻訳部２０２から受信した日本語テキスト及び英語テキストを翻訳後テキスト表示制御部１１０に送信する。
【0073】
翻訳後テキスト表示制御部１１０は、図２に示すように、翻訳前テキストである日本語テキスト及び翻訳後テキストである英語テキストを端末１００のタッチパネル１００ｅに表示させる。
【0074】
対訳リストデータ生成部１１２は、テキスト受信部１０８が受信した日本語テキスト及び英語テキストに基づいて、対訳リストデータを生成し、対訳リストデータ記憶部１１８に記憶させる。
【0075】
対訳リストデータは、図１０に示すように、日本語テキスト及び英語テキストの対訳を蓄積したデータである。通常動作が行われる度に、新たな対訳が追記され、対訳リストデータは更新される。
【0076】
音声データ受信部１１４は、後述するポータル通常動作部２００Ａの音声データ中継部２０８から受信する。
【0077】
音声出力部１１６は、音声データ受信部１１４が受信した翻訳後音声データが表す音声をスピーカ１００ｇから音声出力させる。
【0078】
対訳リストデータ記憶部１１８は、対訳リストデータ生成部１１２が生成した対訳リストデータを記憶する。
【0079】
【0080】
同図に示すように、本実施形態に係るポータル通常動作部２００Ａには、機能的には例えば、デフォルト翻訳部２０２、デフォルト翻訳エンジン設定記憶部２０４、及び、音声データ中継部２０８が含まれる。デフォルト翻訳部２０２、及び、音声データ中継部２０８は、通信部２００ｃを主として実装される。デフォルト翻訳エンジン設定記憶部２０４は記憶部２００ｂを主として実装される。
【0081】
以上の機能は、コンピュータである翻訳ポータル２００にインストールされた、以上の機能に対応する指令を含むプログラムをプロセッサ２００ａで実行することにより実装される。このプログラムは、例えば、光ディスク、磁気ディスク、磁気テープ、光磁気ディスク、フラッシュメモリ等のコンピュータ読み取り可能な情報記憶媒体を介して、あるいは、インターネットなどを介して翻訳ポータル２００に供給される。
【0082】
デフォルト翻訳エンジン設定記憶部２０４は、通常動作で使用されるデフォルト翻訳エンジンの設定を記憶する。
【0083】
デフォルト翻訳部２０２は、本実施形態では例えば、端末通常動作部１００Ａの入力送信部１０６から送信される音声データを受け付ける。そして、デフォルト翻訳部２０２は、受け付けた音声データを、後述する音声処理システム３００の音声認識部３０２に送信する。例えば、デフォルト翻訳部２０２は、入力送信部１０６からストリーム送信される音声データのパケットを受信して、当該パケットを音声処理システム３００の音声認識部３０２に送信する。
【0084】
また、デフォルト翻訳部２０２は、本実施形態では例えば、デフォルト翻訳エンジン設定記憶部２０４に記憶されているデフォルト翻訳エンジン設定に基づいて、受信した日本語テキストを翻訳エンジンＡに送信する。つまり、デフォルト翻訳部２０２は、端末１００に入力される日本語の音声を表す日本語テキストを英語に翻訳してなる英語テキストを、デフォルト翻訳エンジンである翻訳エンジンＡに生成させる。
【0085】
デフォルト翻訳部２０２は、本実施形態では例えば、翻訳エンジンＡから受信した英語テキストを、後述する音声処理システム３００の音声合成部３０４に送信する。
【0086】
また、デフォルト翻訳部２０２は、翻訳前テキストである日本語テキスト及び翻訳後テキストである英語テキストを端末通常動作部１００Ａのテキスト受信部１０８に送信する。
【0087】
音声データ中継２０８は、後述の音声処理システム３００の音声合成部３０４から受信した翻訳後音声データを端末通常動作部１００Ａの音声データ受信部１１４に送信する。
【0088】
次に、図１２は、本実施形態に係る音声処理システム３００の詳細機能ブロック図である。
【0089】
また、同図に示すように、本実施形態に係る音声処理システム３００には、機能的には例えば、音声認識部３０２及び音声合成部３０４が含まれる。
【0090】
音声処理システム３００の音声認識部３０２は、本実施形態では例えば、ポータル通常動作部２００Ａのデフォルト翻訳部２０２から送信される音声データのパケットを受信する。
【0091】
そして、音声処理システム３００の音声認識部３０２は、本実施形態では例えば、受信する音声データが表す音声に対して音声認識処理を実行して、当該音声の音声認識結果を表す音声認識結果テキストを生成する。当該音声認識結果テキストは、翻訳前の音声を表すテキストであり、本実施形態の例では、日本語テキストである。
【0092】
音声合成部３０４は、本実施形態では例えば、音声合成処理を実行し、受信した英語テキストを表す音声である翻訳後音声を合成してもよい。
【0093】
また、音声合成部３０４は、ポータル通常動作部２００Ａの音声データ中継部２０８に翻訳後音声データを送信してもよい。
【0094】
次に、通常動作で記憶した対訳リストデータを用いる評価動作について、説明する。
【0095】
評価動作は、端末評価動作部１００Ｂ、ポータル評価動作部２００Ｂ、並びに、代替翻訳エンジンである翻訳エンジンＢ、翻訳エンジンＣ、及び、翻訳エンジンＤによって実行される。
【0096】
図１３は、本実施形態に係る端末評価動作部１００Ｂの詳細機能ブロック図である。
【0097】
また、同図に示すように、本実施形態に係る端末評価動作部１００Ｂには、機能的には例えば、対訳リスト表示制御部１２０、対訳リスト選択受付部１２２、翻訳前テキスト送信部１２４、テキスト受信部１２６、比較翻訳リスト生成部１２８、比較翻訳リスト表示制御部１３０、比較翻訳テキスト選択受付部１３２、個別評価情報生成部１３４、及び、個別評価情報送信部１３６、が含まれる。対訳リスト表示制御部１２０、対訳リスト選択受付部１２２、比較翻訳リスト表示制御部１３０、及び、比較翻訳テキスト選択受付部１３２は、プロセッサ１００ａ及びタッチパネル１００ｅを主として実装される。翻訳前テキスト送信部１２４、テキスト受信部１２６、及び、個別評価情報送信部１３６は、通信部１００ｃを主として実装される。比較翻訳リスト生成部１２８及び個別評価情報生成部１３４は、プロセッサ１００ａを主として実装される。
【0098】
以上の機能は、コンピュータである端末１００にインストールされた、以上の機能に対応する指令を含むプログラムをプロセッサ１００ａで実行することにより実装される。このプログラムは、例えば、光ディスク、磁気ディスク、磁気テープ、光磁気ディスク、フラッシュメモリ等のコンピュータ読み取り可能な情報記憶媒体を介して、あるいは、インターネットなどを介して端末１００に供給される。
【0099】
対訳リスト表示制御部１２０は、本実施形態では例えば、通常動作によって生成された対訳リストデータを、対訳リストデータ記憶部１１８より取得する。対訳リスト表示制御部１２０は、対訳リストデータに基づいて、翻訳前の日本語テキストと翻訳後の英語テキストとが対応付けられた対訳のリストを生成し、端末１００に表示する。
【0100】
また、対訳リスト表示制御部１２０は、図３に示すように、対訳リストに基づいて、日本語テキストとそれに対応する英語テキストの両方を対訳表示領域１０ａ及び１０ｂに配置し、対訳リスト表示画面１０を生成する。
【0101】
対訳リスト表示制御部１２０は、タッチパネル１００ｅに対訳リスト表示画面１０を表示させる。
【0102】
対訳リスト選択受付部１２２は、リストに含まれる複数の対訳のうちからの選択を受け付ける。対訳リスト選択受付部１２２は、タッチパネル１００ｅに表示された対訳リスト表示画面１０について、ユーザによる対訳表示領域１０に対するタップ等の選択操作により対訳の選択を受け付ける。
【0103】
そして、対訳リスト表示制御部１２０は、図４に示すように、ユーザが選択した対訳及び対訳確認受付ボタン１２ａを配置した対訳確認画面１２を生成し、タッチパネル１００ｅに表示させる。
【0104】
対訳リスト選択受付部１２２は、対訳確認画面１２の対訳確認受付ボタン１２ａの選択を受け付ける。
【0105】
【0106】
翻訳前テキスト送信部１２４は、対訳リスト選択受付部１２２の選択受付に応じて、翻訳前テキストである日本語テキストを、後述するポータル評価動作部２００Ｂの比較翻訳部２１８に送信すると共に、翻訳後テキストである英語テキストを比較翻訳リスト生成部１２８に送信する。
【0107】
テキスト受信部１２６は、代替翻訳エンジンである翻訳エンジンＢ、翻訳エンジンＣ、及び、翻訳エンジンＤで翻訳された英語の比較翻訳後テキストを、後述のポータル評価動作部２００Ｂの比較翻訳部２１８より受信する。
【0108】
そして、テキスト受信部１２６は、受信した英語の比較翻訳後テキストを比較翻訳リスト生成部１２８に送信する。
【0109】
比較翻訳リスト生成部１２８は、翻訳前テキスト送信部１２４から受信した翻訳後テキスト及びテキスト受信部１２６から受信した比較翻訳後テキストに基づいて、比較翻訳リストを生成する。そして、比較翻訳リスト生成部１２８は、そして、比較翻訳リストを比較翻訳リスト表示制御部１３０に送信する。
【0110】
比較翻訳リスト表示制御部１３０は、比較翻訳後テキストを端末１００に表示させる。本実施形態では例えば、比較翻訳リスト表示制御部１３０は、図５に示す比較翻訳リスト表示画面１４を生成し、タッチパネル１００ｅに表示させる。比較翻訳リスト表示画面１４は、ユーザが図４の画面で選択した日本語テキストを、翻訳エンジンＡに翻訳させた翻訳後テキスト並びに、翻訳エンジンＢ、翻訳エンジンＣ及び翻訳エンジンＤに翻訳させた比較翻訳後テキストを含む。本実施形態では、図５に示すように、比較翻訳リスト表示画面１４には、上から比較翻訳テキスト１４ｄ、１４ｂ、１４ｃ、１４ａとランダムに配置されている。
【0111】
比較翻訳リスト表示制御部１３０は、複数の代替翻訳エンジンによってそれぞれ生成される複数の比較翻訳後テキストがランダムに配置されたリストを端末１００に表示させてもよい。このようにすると、リストの上部に表示されたテキストが選ばれやすい傾向があるとして、常に上部に配置される翻訳エンジンがあるとすると、その翻訳エンジンの評価が翻訳結果の内容にかかわらず、高くなってしまう。そういった配置場所に依存した評価の傾向による翻訳エンジンの評価の偏りを防ぐことができる。
【0112】
比較翻訳テキスト選択受付部１３２は、比較翻訳リスト表示画面１４のうちから、１つの比較翻訳テキストの選択を受け付ける。ユーザはタップ等の選択操作によって、１つの比較翻訳テキストを選択し、比較翻訳テキスト選択受付ボタン１４ｅで選択を決定する。
【0113】
個別評価情報生成部１３４は、比較翻訳リスト表示画面１４での選択に応じて、個別評価情報を生成する。個別評価情報には、複数の表示ＩＤ及び選択ＩＤが含まれてもよい。表示ＩＤとは、評価動作における比較翻訳リスト表示画面１４に表示される比較翻訳後テキストを翻訳した翻訳エンジンの識別子のことである。また、選択ＩＤとは、比較翻訳リスト表示画面１４に表示される比較翻訳後テキストの中からユーザに選択された翻訳後テキストを翻訳した翻訳エンジンの識別子のことである。
【0114】
図５において、翻訳後テキスト１４ｄが選択された場合を例として説明する。図５に示すように、比較翻訳リスト表示画面１４には、翻訳エンジンＡ～Ｄが翻訳した比較翻訳後テキストが表示されているため、表示ＩＤは「０００１」～「０００４」となる。翻訳後テキスト１４ｄが選択された場合、翻訳後テキスト１４ｄは翻訳エンジンＤによって翻訳されているため、選択ＩＤは「０００４」となる。したがって、表示ＩＤである「０００１」～「０００４」及び選択ＩＤである「０００４」が個別評価情報として生成される。
【0115】
個別評価情報送信部１３６は、生成した個別評価情報を後述のポータル評価動作部２００Ｂの個別評価情報取得部２１０に送信する。
【0116】
図１４は、本実施形態に係るポータル評価動作部２００Ｂの詳細機能ブロック図である。
【0117】
同図に示すように、本実施形態に係るポータル評価動作部２００Ｂには、機能的には例えば、個別評価情報取得部２１０、総合評価情報生成部２１２、総合評価情報記憶部２１４、総合評価情報管理部２１６、及び、比較翻訳部２１８、が含まれる。個別評価情報取得部２１０及び比較翻訳部２１８は、通信部２００ｃを主として実装される。総合評価情報記憶部２１４は記憶部２００ｂを主として実装される。総合評価情報生成部２１２及び総合評価情報管理部２１６は、プロセッサ２００ａを主として実装される。
【0118】
以上の機能は、コンピュータである翻訳ポータル２００にインストールされた、以上の機能に対応する指令を含むプログラムをプロセッサ２００ａで実行することにより実装される。このプログラムは、例えば、光ディスク、磁気ディスク、磁気テープ、光磁気ディスク、フラッシュメモリ等のコンピュータ読み取り可能な情報記憶媒体を介して、あるいは、インターネットなどを介して翻訳ポータル２００に供給される。
【0119】
個別評価情報取得部２１０は、端末１００のユーザによる比較翻訳後テキストに対する評価を表す個別評価情報を端末評価動作部１００Ｂより受信し、総合評価情報生成部２１２に送信する。
【0120】
総合評価情報生成部２１２は、端末１００のそれぞれに係る個別評価情報に基づいて、総合評価情報を生成する。具体的には、総合評価情報生成部２１２は、翻訳エンジン評価システム１内の複数の端末から個別評価情報を集計して、図１５に示す総合評価情報を生成する。
【0121】
個別評価情報取得部２１０から送信された個別評価情報が、表示ＩＤが「０００１」～「０００４」で、選択ＩＤが「０００４」であったとする。この場合は、表示ＩＤである「０００１」～「０００４」の識別子を持つ翻訳エンジンＡ～Ｄの端末表示回数を１増やす。そして、選択ＩＤである「０００４」の識別子を持つ翻訳エンジンＤのユーザ選択回数の値を１増やす。すなわち、端末表示回数とは、評価動作において、当該翻訳エンジンが翻訳したテキストが端末１００で表示されたのべ回数のことである。また、ユーザ選択回数とは、評価動作において、当該翻訳エンジンによって翻訳された比較翻訳後テキストが端末１００に表示されたときに、ユーザに選択されたのべ回数のことである。このように個別評価情報を集計し、図１５に示すような、総合評価情報を生成する。総合評価情報を生成することで、それぞれの翻訳エンジンの人気を把握することができる。
【0122】
そして、総合評価情報記憶部２１４は、生成された総合評価情報を記憶する。
【0123】
総合評価情報管理部２１６は、総合評価情報記憶部２１４に記憶された総合評価情報の管理を行う。特に総合評価情報管理部２１６は、デフォルト翻訳エンジン設定部２１６ａと代替翻訳エンジン設定部２１６ｂを含む。デフォルト翻訳エンジン設定部２１６ａは、総合評価情報に基づいて、通常動作に係るデフォルト翻訳エンジンを変更する。代替翻訳エンジン設定部２１６ｂは、代替翻訳エンジンの追加、変更、又は、削除の少なくとも１つを行う。総合評価情報管理部２１６は、図６に示すような総合評価情報管理画面２０を表示する。
【0124】
総合評価情報管理画面２０では、翻訳エンジンごとに、ＩＤ、ユーザ選択回数、端末表示回数、デフォルト、及び、表示対象候補という項目が管理されていてもよい。例えば、図１５に示すように、翻訳エンジンＡのＩＤは「０００１」であり、ユーザ選択回数は７回であり、端末表示回数は１０回であり、デフォルト及び表示対象候補が１であることが紐づけられて記録されている。
【0125】
図６に示す総合評価情報管理画面２０のデフォルトの列は、どの翻訳エンジンがデフォルト翻訳エンジンであるかを表している。例えば、図６に示す例では、デフォルトの値が１である翻訳エンジンＡがデフォルト翻訳エンジンであることを示している。
【0126】
また、図６に示す総合評価情報管理画面２０の表示対象候補の列は、評価動作時に比較翻訳後テキストを翻訳するための代替翻訳エンジンに選ばれるかどうかを示している。この欄の値が１である翻訳エンジンを、比較翻訳後テキストを翻訳するための代替翻訳エンジンとして選択する。図６に示す例では、翻訳エンジンＡ、翻訳エンジンＢ、翻訳エンジンＣ、翻訳エンジンＤは表示対象候補となっている。
【0127】
デフォルト翻訳エンジン設定部２１６ａは、デフォルト翻訳エンジンを変更する。例えば管理者の所定の操作によって、デフォルト翻訳エンジンを変更してもよい。本実施形態では、例えば、図６の表のデフォルトの行の値を書き換えることによって、デフォルト翻訳エンジンを変更してもよい。デフォルト翻訳エンジンが変更されると、デフォルト翻訳エンジン設定部２１６ａは、ポータル通常動作部２００Ａに係るデフォルト翻訳エンジン設定記憶部２０４のデフォルト翻訳エンジン設定を変更する。
【0128】
このようにすれば、翻訳エンジン評価システム１に含まれる複数の端末１００に係る通常動作時に係るデフォルト翻訳エンジンを変更することができる。
【0129】
代替翻訳エンジン設定部２１６ｂは、代替翻訳エンジンの追加、変更、又は、削除のうちの少なくとも１つを実行する。代替翻訳エンジン設定部２１６ｂは、例えば管理者の所定の操作により、総合評価情報管理画面２０から翻訳エンジンの変更又は削除を実行してもよい。代替翻訳エンジンの変更とは、例えば、翻訳エンジンＤが表示対象候補でなかった場合に、表示対象候補へと変更することである。具体的には、表示対象候補の値を「０」から「１」に書き換えることで、翻訳エンジンＤを代替翻訳エンジンの候補に変更することができる。
【0130】
次に、代替翻訳エンジンの削除とは、例えば、表示対象候補である翻訳エンジンＤを代替翻訳エンジンの候補から削除することである。具体的には、翻訳エンジンＤの表示対象候補の値を「１」から「０」に書き換えることで、代替翻訳エンジンを削除することができる。
【0131】
また、代替翻訳エンジン設定部２１６ｂは、例えば、総合評価情報管理画面２０の表中の空白行に設けられた翻訳エンジン追加ボタン２０ａの選択操作によって、新たな翻訳エンジンを追加してもよい。新たな翻訳エンジンを追加すると、表中の行が一行増えてもよい。新たな翻訳エンジンの名称が表示され、ユーザ選択回数、端末表示回数及びデフォルトの値は「０」、表示対象候補の値は「１」と設定されてもよい。
【0132】
このようにすれば、新しい翻訳エンジンが登場したときや、ユーザの好みに合わない翻訳エンジンを削除したいときに、管理者が適宜使用する翻訳エンジンを変更することができる。
【0133】
比較翻訳部２１８は、選択される対訳に含まれる翻訳前の日本語テキストを英語に翻訳した比較翻訳後テキストを代替翻訳エンジンに生成させる。
【0134】
比較翻訳部２１８は、総合評価情報記憶部２１４の総合評価情報に基づいて、表示対象候補となっている翻訳エンジンの中から代替翻訳エンジンを決定する。例えば、図６に示すように、表示対象候補の値が１となっている翻訳エンジンの中から代替翻訳エンジンを決定する。
【0135】
比較翻訳部２１８は、複数の代替翻訳エンジンのそれぞれに比較翻訳後テキストを生成させる。本実施形態では例えば、比較翻訳部２１８は、表示対象候補の値が１となっている翻訳エンジンＢ、翻訳エンジンＣ、及び、翻訳エンジンＤを代替翻訳エンジンと決定している。
【0136】
比較翻訳部２１８は、決定した代替翻訳エンジンである翻訳エンジンＢ、翻訳エンジンＣ、及び、翻訳エンジンＤに、端末評価動作部１００Ｂに係る翻訳前テキスト送信部１２４から受信した日本語の翻訳前テキストを送信する。
【0137】
なお、比較翻訳部２１８は、対訳リスト選択受付部１２２の選択の受付に応じて、代替翻訳エンジンに比較翻訳後テキストを生成させる。このため、常に翻訳前テキストを複数の代替翻訳エンジンに翻訳させるのと比較して、システムの処理負荷を軽減することができる。
【0138】
そして、比較翻訳部２１８は、翻訳エンジンＢ、翻訳エンジンＣ、及び、翻訳エンジンＤから受信した比較翻訳後テキストである英語テキストを、端末評価動作部１００Ｂに係るテキスト受信部１２６に送信する。
【0139】
なお、比較翻訳部２１８は、複数の代替翻訳エンジンのうちからランダムに代替翻訳エンジンを選択し、選択された代替翻訳エンジンに比較翻訳後テキストを生成させる。具体的には、比較翻訳部２１８は、総合評価情報管理画面２０に係る表示対象候補の値が１である翻訳エンジンの中から、ランダムに代替翻訳エンジンを決定してもよい。このように、代替翻訳エンジンをランダムに決定することによって、複数の翻訳エンジンを満遍なく妥当に評価することができる。
【0140】
ここで、端末通常動作部１００Ａ及びポータル通常動作部２００Ａで実行される通常動作の対訳リストデータ生成処理の流れの一例を図１６に示すフロー図を参照しながら説明する。なお、ここでは一実施形態として、端末１００で入力される音声を一括でデフォルト翻訳部２０２へ送信する場合について記載しているが、音声を逐次送信してもよい。
【0141】
本処理例では、端末通常動作部１００Ａの音声入力受付部１０４が音声入力を受け付ける（Ｓ１０１）。音声入力受付部１０４が音声入力を受け付けると、入力送信部１０６が音声データをポータル通常動作部２００Ａに係るデフォルト翻訳部２０２に送信する（Ｓ１０２）。
【0142】
ポータル通常動作部２００Ａのデフォルト翻訳部２０２は、音声データを受信する（Ｓ２０１）。デフォルト翻訳部２０２は音声処理システム３００の音声認識部３０２に音声データを送信する（Ｓ２０２）。
【0143】
そして、デフォルト翻訳部２０２は、音声認識部３０２からＳ２０２の処理で送信した音声データの音声認識結果である翻訳前テキストを受信する（Ｓ２０３）。
【0144】
デフォルト翻訳部２０２は、音声認識部３０２から翻訳前テキストを受信すると、当該テキストをデフォルト翻訳エンジンである翻訳エンジンＡ及び端末通常動作部１００Ａのテキスト受信部１０８に送信する（Ｓ２０４）。
【0145】
端末通常動作部１００Ａのテキスト受信部１０８は、翻訳前テキストを受信する（Ｓ１０３）。
【0146】
ポータル通常動作部２００Ａのデフォルト翻訳部２０２は、Ｓ２０４の処理で送信した翻訳前テキストを翻訳エンジンＡが翻訳した翻訳後テキストを受信する（Ｓ２０５）。
【0147】
ポータル通常動作部２００Ａのデフォルト翻訳部２０２は、翻訳エンジンＡから翻訳後テキストを受信すると、Ｓ２０５の処理で受信した翻訳後テキストを音声処理システム３００の音声合成部３０４に送信する（Ｓ２０６）。
【0148】
ポータル通常動作部２００Ａの音声データ中継部２０８は音声合成データを受信する（Ｓ２０７）。そして、端末通常動作部１００Ａの音声データ受信部１１４に音声データを送信し、デフォルト翻訳部２０２は端末通常動作部１００Ａのテキスト受信部１０８に翻訳後テキストを送信する（Ｓ２０８）。
【0149】
端末通常動作部１００Ａのテキスト受信部１０８及び音声データ受信部１１４は、それぞれ、翻訳後テキスト及び音声合成データを受信する（Ｓ１０４）。翻訳後テキスト表示制御部１１０は、翻訳前テキスト及び翻訳後テキストをタッチパネル１００ｅに表示する（Ｓ１０５）。音声出力部１１６は、音声合成データの受信後、音声を出力する（Ｓ１０６）。
【0150】
対訳リストデータ生成部１１２は、Ｓ１０３及びＳ１０４の処理で受信した翻訳前テキスト及び翻訳後テキストに基づいて、対訳リストデータを生成する（Ｓ１０７）。
【0151】
対訳リストデータ記憶部１１８は、対訳リストデータ生成部１１２がＳ１０７の処理で生成した対訳リストデータを記憶し（Ｓ１０８）、本処理例に示す処理は終了される。
【0152】
次に、端末評価動作部１００Ｂ及びポータル評価動作部２００Ｂで実行される評価動作の比較翻訳リスト生成処理の流れの一例を図１７に示すフロー図を参照しながら説明する。本処理は、Ｓ１０８の処理で記憶された対訳リストデータに基づいて生成された対訳リスト表示画面１０が端末１００のタッチパネル１００ｅに表示されたところから開始する。
【0153】
対訳リスト選択受付部１２２は、ユーザが対訳リスト表示画面１０で対訳の１つを選択するのを受け付ける（Ｓ３０１）。
【0154】
対訳の１つを選択するのを受け付けた後、翻訳前テキスト送信部１２４は、翻訳前テキストを比較翻訳部２１８に送信する（Ｓ３０２）。
【0155】
翻訳ポータルの比較翻訳部２１８は、翻訳前テキストを受信する（Ｓ４０１）。
【0156】
翻訳ポータルの比較翻訳部２１８は、翻訳前テキストを受信すると、総合評価情報記憶部２１４の総合評価情報に基づいて決められた代替翻訳エンジンに翻訳前テキストを送信する（Ｓ４０２）。
【0157】
比較翻訳部２１８は、代替翻訳エンジンから比較翻訳後テキストを受信する（Ｓ４０３）。また、比較翻訳部２１８は、受信した比較翻訳後テキストを端末評価動作部１００Ｂのテキスト受信部１２６で送信する（Ｓ４０４）。
【0158】
端末評価動作部１００Ｂのテキスト受信部１２６は、比較翻訳部２１８から比較翻訳後テキストを受信する（Ｓ３０３）。
【0159】
比較翻訳リスト生成部１２８は、翻訳前テキスト送信部１２４から受信した翻訳後テキスト及びテキスト受信部１２６から受信した比較翻訳後テキストに基づいて、比較翻訳リストを生成する（Ｓ３０４）。
【0160】
比較翻訳リスト表示制御部１３０は、比較翻訳リスト生成部１２８が生成した比較翻訳リストを端末１００のタッチパネル１００ｅに表示して（Ｓ３０５）、本処理例に示す処理は終了される。
【0161】
次に、端末評価動作部１００Ｂ及びポータル評価動作部２００Ｂで実行される評価動作の総合評価情報生成処理の流れの一例を図１８に示すフロー図を参照しながら説明する。
【0162】
端末評価動作部１００Ｂの比較翻訳リスト表示制御部１３０が、Ｓ３０４の処理で生成された比較翻訳リストに基づいて、比較翻訳リスト表示画面１４を生成し、端末１００のタッチパネル１００ｅに表示する（Ｓ５０１）。
【0163】
比較翻訳テキスト選択受付部１３２は、比較翻訳リストのいずれかの比較翻訳テキストが選択されるのを受け付ける（Ｓ５０２）。
【0164】
そして、個別評価情報生成部１３４が、比較翻訳テキスト選択受付部１３２の選択に応じて、個別評価情報を生成する（Ｓ５０３）。
【0165】
個別評価情報送信部１３６は、個別評価情報生成部１３４がＳ５０３の処理で生成した個別評価情報をポータル評価動作部２００Ｂの個別評価情報取得部２１０に送信する（Ｓ５０４）。
【0166】
そして、ポータル評価動作部２００Ｂの個別評価情報取得部２１０は、個別評価情報送信部１３６から個別評価情報を受信する（Ｓ６０１）。
【0167】
そして、総合評価情報生成部２１２は、受信した個別評価情報に基づいて総合評価情報を生成する（Ｓ６０２）。
【0168】
そして、総合評価情報記憶部２１４が、総合評価情報を記憶して（Ｓ６０３）、本処理例に示す処理は終了される。
【0169】
本実施形態において、図５の比較翻訳リスト表示画面１４の変形例として、図１９の比較翻訳後テキスト表示画面１６を示す。比較翻訳後テキスト表示画面１６は、１つの代替翻訳エンジンにより日本語テキストを翻訳させた英語テキスト１６ａ及び比較翻訳後テキスト選択受付ボタン１６ｂ～１６ｃを含む。ユーザが、比較翻訳後テキスト選択受付ボタン１６ｂ～１６ｃのいずれかを選択すると、端末評価動作部１００Ｂに係る個別評価情報生成部１３４により個別評価情報が生成される。
【0170】
比較翻訳後テキスト表示画面１６を表示した場合には、比較翻訳後テキスト１６ａを翻訳した代替翻訳エンジンのＩＤ及び比較翻訳後テキスト選択受付ボタン１６ｂ～１６ｃのいずれかが選択されたかを個別評価情報としてもよい。
【0171】
なお、本発明は上述の実施形態に限定されるものではない。本実施形態においては、日本語を英語に翻訳する翻訳エンジンを例に説明したが、その他の言語対に関しても、同様に翻訳エンジンを評価することができる。
【0172】
例えば、端末１００、翻訳ポータル２００、音声処理システム３００、及び、翻訳エンジン４００の役割分担は、以上で説明したものには限定されない。例えば、音声認識結果テキスト（翻訳前テキスト）が翻訳ポータル２００を経由することなく、当該音声認識結果テキストに対する翻訳処理が音声処理システム３００において実行されてもよい。
【0173】
例えば、端末１００の機能は専用端末以外のコンピュータ等に実装されていてもよい。
【0174】
また、上記の具体的なテキストや数値及び図面中の具体的なテキストや数値は例示であり、これらのテキストや数値には限定されない。
【符号の説明】
【0175】
１ 翻訳エンジン評価システム、１０ 対訳リスト表示画面、１０ａ～ｂ 対訳表示領域、１２ 対訳確認画面、１２ａ 対訳確認受付ボタン、１４ 比較翻訳リスト表示画面、１４ａ～１４ｄ 比較翻訳テキスト、１４ｅ 比較翻訳テキスト選択受付ボタン、１６ 比較翻訳後テキスト表示画面、１６ａ 比較翻訳後テキスト、１６ｂ～１６ｃ 比較翻訳後テキスト選択受付ボタン、２０ 総合評価情報管理画面、２０ａ 翻訳エンジン追加ボタン、１００ 端末、１００ａ プロセッサ、１００ｂ 記憶部、１００ｃ 通信部、１００ｄ 操作部、１００ｄａ 翻訳ボタン、１００ｄｂ 電源ボタン、１００ｄｃ 音量調整部、１００ｅ タッチパネル、１００ｆ マイク、１００ｇ スピーカ、１００Ａ 端末通常動作部、１００Ｂ 端末評価動作部、１０２ ボタン操作入力受付部、１０４ 音声入力受付部、１０６ 入力送信部、１０８ テキスト受信部、１１０ 翻訳後テキスト表示制御部、１１２ 対訳リストデータ生成部、１１４ 音声データ受信部、１１６ 音声出力部、１１８ 対訳リストデータ記憶部、１２０ 対訳リスト表示制御部、１２２ 対訳リスト選択受付部、１２４ 翻訳前テキスト送信部、１２６ テキスト受信部、１２８ 比較翻訳リスト生成部、１３０ 比較翻訳リスト表示制御部、１３２ 比較翻訳テキスト選択受付部、１３４ 個別評価情報生成部、１３６ 個別評価情報送信部、２００ 翻訳ポータル、２００ａ プロセッサ、２００ｂ 記憶部、２００ｃ 通信部、２００Ａ ポータル通常動作部、２００Ｂ ポータル評価動作部、２０２ デフォルト翻訳部、２０４ デフォルト翻訳エンジン設定記憶部、２０８ 音声データ中継部、２１０ 個別評価情報取得部、２１２ 総合評価情報生成部、２１４ 総合評価情報記憶部、２１６ 総合評価情報管理部、２１６ａ デフォルト翻訳エンジン設定部、２１６ｂ 代替翻訳エンジン設定部、２１８ 比較翻訳部、３００ 音声処理システム、３０２ 音声認識部、３０４ 音声合成部、４００ａ 翻訳エンジンＡ、４００ｂ 翻訳エンジンＢ、４００ｃ 翻訳エンジンＣ、４００ｄ 翻訳エンジンＤ、５００ コンピュータネットワーク。
【図1】
【図2】
【図3】
【図4】
【図5】
【図6】
【図7A】
【図7B】
【図8】
【図9】
【図10】
【図11】
【図12】
【図13】
【図14】
【図15】
【図16】
【図17】
【図18】
【図19】
【手続補正書】
【提出日】2023-07-21
【手続補正1】
【補正対象書類名】明細書
【補正対象項目名】０００３
【補正方法】変更
【補正の内容】
【0003】
【特許文献1】国際公開第２０１９／１１１３４６号