特開 2024-110834 表示制御プログラム、表示制御装置、及び表示制御方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2024110834

(43)【公開日】2024-08-16

(54)【発明の名称】表示制御プログラム、表示制御装置、及び表示制御方法

(51)【国際特許分類】

   G10L 15/28 20130101AFI20240808BHJP

   G06F 3/16 20060101ALI20240808BHJP

   G06F 3/14 20060101ALI20240808BHJP

   G10L 15/22 20060101ALI20240808BHJP

   G06F 40/157 20200101ALI20240808BHJP

   G09G 5/37 20060101ALI20240808BHJP

   G09G 5/00 20060101ALI20240808BHJP

   G09G 5/02 20060101ALI20240808BHJP

【ＦＩ】

G10L15/28 230K

G06F3/16 650

G06F3/14 350B

G10L15/22 460Z

G06F40/157

G09G5/37 600

G09G5/00 530D

G09G5/00 550C

G09G5/00 550B

G09G5/00 555G

G09G5/00 555D

G09G5/02 B

【審査請求】未請求

【請求項の数】14

【出願形態】ＯＬ

(21)【出願番号】P 2023015680

(22)【出願日】2023-02-03

(71)【出願人】

【識別番号】000006633

【氏名又は名称】京セラ株式会社

(74)【代理人】

【識別番号】100147485

【弁理士】

【氏名又は名称】杉村 憲司

(74)【代理人】

【識別番号】230118913

【弁護士】

【氏名又は名称】杉村 光嗣

(74)【代理人】

【識別番号】100132045

【弁理士】

【氏名又は名称】坪内 伸

(74)【代理人】

【識別番号】100147692

【弁理士】

【氏名又は名称】下地 健一

(72)【発明者】

【氏名】福繁 竜也

【テーマコード（参考）】

5B069

5B109

5C182

【Ｆターム（参考）】

5B069BA04

5B069CA13

5B069DB05

5B069KA02

5B109RB31

5B109TA11

5C182AA04

5C182AA22

5C182AC02

5C182AC03

5C182AC43

5C182BA01

5C182BA03

5C182BA04

5C182BA06

5C182BA35

5C182BA66

5C182BC01

5C182BC22

5C182BC25

5C182BC26

5C182CA01

5C182CA32

5C182CB12

5C182CB34

5C182CB47

5C182CB52

5C182DA63

5C182DA65

(57)【要約】

【課題】音声認識を用いた対話システムにおいて表示された誤りを、他のユーザにわかり易く高い正確性で非表示にできるようにする。
【解決手段】表示制御プログラムは、複数のユーザの間に配置される表示部と、前記複数のユーザに含まれる少なくとも第１ユーザの音声が音声認識によって変換された文字情報を取得して前記表示部に表示させる表示制御装置とを備える表示システムを制御する表示制御プログラムであって、前記第１ユーザの入力に応じて、前記表示部に表示されている表示物の少なくとも一部を表示されないようにし、少なくとも前記表示物の前記少なくとも一部を表示されないようにする処理中、前記第１ユーザの音声が変換された文字情報を取得しないようにする処理を、前記表示制御装置の制御部に実行させる。
【選択図】図１０

【特許請求の範囲】

【請求項1】

複数のユーザの間に配置される表示部と、前記複数のユーザに含まれる少なくとも第１ユーザの音声が音声認識によって変換された文字情報を取得して前記表示部に表示させる表示制御装置とを備える表示システムを制御する表示制御プログラムであって、
前記第１ユーザの入力に応じて、前記表示部に表示されている表示物の少なくとも一部を表示されないようにし、少なくとも前記表示物の前記少なくとも一部を表示されないようにする処理中、前記第１ユーザの音声が変換された前記文字情報を取得しないようにする処理を、前記表示制御装置の制御部に実行させる表示制御プログラム。

【請求項2】

前記第１ユーザの前記入力から、所定の時間が経過するまで前記文字情報を取得しないようにする処理を前記制御部に実行させる、請求項１に記載の表示制御プログラム。

【請求項3】

前記表示部は、前記文字情報を表示する領域として、前記複数のユーザの全てに対して前記文字情報が見えるように表示する第１表示領域と、前記第１ユーザに対して前記文字情報を表示し、前記複数のユーザに含まれる前記第１ユーザとは異なる第２ユーザに対して前記文字情報を表示しない第２表示領域とを含み、
前記第１ユーザの前記入力の一つである第１入力を受けたとき、前記第１表示領域に表示されている前記表示物を表示されないようにする処理を前記制御部に実行させる、請求項１に記載の表示制御プログラム。

【請求項4】

前記文字情報が特定の単語を含むとき、前記表示部に前記特定の単語に対応する図解を表示させ、前記第１ユーザの前記入力の一つである第２入力を受けたとき、前記図解の表示を削除する処理を前記制御部に実行させる、請求項１に記載の表示制御プログラム。

【請求項5】

前記表示制御装置は前記文字情報を表示用文字情報として記憶する記憶部を備え、
前記記憶部に記憶されている前記表示用文字情報を前記表示部に表示させるようにし、前記第１ユーザの前記入力の一つである第３入力を受けたとき、前記記憶部に記憶されている前記表示用文字情報の一部を伏字に変更することにより、前記表示部に表示されている前記表示物の一部を表示されないようにする処理を前記制御部に実行させる、請求項１に記載の表示制御プログラム。

【請求項6】

前記音声認識によって変換された前記文字情報を解析し、前記第１ユーザの前記第３入力があった時点の単語から、該第３入力の直前の句読点までの前記表示用文字情報の前記一部を伏字に変更する処理を前記制御部に実行させる、請求項５に記載の表示制御プログラム。

【請求項7】

前記第１ユーザの前記入力は、前記第１ユーザからの音声による指示に基づく第４入力を含む、請求項１に記載の表示制御プログラム。

【請求項8】

前記第１ユーザの前記入力を受けたとき、前記表示部の電源を切ることにより、前記表示物の前記全てを表示されないようにする処理を前記制御部に実行させる、請求項１に記載の表示制御プログラム。

【請求項9】

前記表示部は、プロジェクタと、前記プロジェクタの表示用スクリーンとを含み、前記第１ユーザの前記入力を受けたとき、前記プロジェクタの光軸の向き及び焦点距離の少なくとも何れかを変更することにより、前記表示物の前記全てを表示されないようにする処理を前記制御部に実行させる、請求項１に記載の表示制御プログラム。

【請求項10】

前記表示制御装置は前記文字情報を表示用文字情報として記憶する記憶部を備え、
前記記憶部に記憶されている前記表示用文字情報を前記表示部に表示させるように構成され、前記第１ユーザの前記入力を受けたとき、前記表示用文字情報を消去することにより、前記表示物の前記一部又は前記全てを表示されないようにする処理を前記制御部に実行させる、請求項１に記載の表示制御プログラム。

【請求項11】

前記第１ユーザの前記入力を受けたとき、前記表示部と前記表示制御装置との間の通信を切断することにより、前記表示物の前記全てを表示されないようにする処理を前記制御部に実行させる、請求項１に記載の表示制御プログラム。

【請求項12】

前記第１ユーザの前記入力を受けたとき、前記表示部に表示されている表示物の色を変更することにより、前記表示物の前記一部又は前記全てを表示されないようにする処理を前記制御部に実行させる、請求項１に記載の表示制御プログラム。

【請求項13】

請求項１に記載のプログラムを記憶する記憶部と、
前記プログラムを実行する制御部と
を備える表示制御装置。

【請求項14】

複数のユーザの間に配置される表示部と、前記複数のユーザに含まれる少なくとも第１ユーザの音声が音声認識によって変換された文字情報を取得して前記表示部に表示させる表示制御装置とを備える表示システムを制御する表示制御方法であって、
前記表示制御装置の制御部が、前記第１ユーザの入力に応じて、前記表示部に表示されている表示物の少なくとも一部を表示されないようにし、少なくとも前記表示物の前記少なくとも一部を表示されないようにする処理中、前記第１ユーザの音声が変換された前記文字情報を取得しないようにする、表示制御方法。

【発明の詳細な説明】

【技術分野】

【0001】

本開示は、表示制御プログラム、表示制御装置、及び表示制御方法に関する。

【背景技術】

【0002】

二人のユーザが対話するとき、ユーザの発話をテキスト化して画面に表示するシステムであって、ユーザの動作に基づいてテキストの表示量を制御するシステムが提案されている（例えば、特許文献１参照）。

【0003】

特許文献１によれば、システムが、一方のユーザの発話を音声認識によりテキスト化し、聴覚に不安がある他のユーザ用の表示部に表示している。さらに、引用文献１によれば、システムが他のユーザの動作、例えば、うなずき等に基づいて発話テキストの表示量を制御している。また、引用文献１には、表示されているテキストに対して、ユーザが編集操作を行うことができることも記載されている。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】国際公開第２０１８／１０５３７３号明細書

【発明の概要】

【発明が解決しようとする課題】

【0005】

しかしながら、発話中のユーザにより表示中のテキストが中途半端に削除されたり、発話内容のテキスト化が進行中にその一部が削除されたりすると、聞き手のユーザに違和感又は混乱が生じることが懸念される。音声認識技術を用いてユーザの対話を支援するシステムは、使いやすさ及び直感的な理解しやすさの点で、改善すべき点がある。

【0006】

したがって、本開示の目的は、音声認識を用いた対話システムにおいて表示された誤りを、他のユーザにわかり易く高い正確性で削除できるようにすることである。

【課題を解決するための手段】

【0007】

一実施形態において、（１）表示制御プログラムは、複数のユーザの間に配置される表示部と、前記複数のユーザに含まれる少なくとも第１ユーザの音声が音声認識によって変換された文字情報を取得して前記表示部に表示させる表示制御装置とを備える表示システムを制御する表示制御プログラムであって、前記第１ユーザの入力に応じて、前記表示部に表示されている表示物の少なくとも一部を表示されないようにし、少なくとも前記表示物の前記少なくとも一部を表示されないようにする処理中、前記第１ユーザの音声が変換された前記文字情報を取得しないようにする処理を、前記表示制御装置の制御部に実行させる。

【0008】

（２）上記（１）の表示制御プログラムは、前記第１ユーザの前記入力から、所定の時間が経過するまで前記文字情報を取得しないようにする処理を前記制御部に実行させることができる。

【0009】

（３）上記（１）又は（２）の表示制御プログラムにおいて、前記表示部は、前記文字情報を表示する領域として、前記複数のユーザの全てに対して前記文字情報が見えるように表示する第１表示領域と、前記第１ユーザに対して前記文字情報を表示し、前記複数のユーザに含まれる前記第１ユーザとは異なる第２ユーザに対して前記文字情報を表示しない第２表示領域とを含み、前記表示制御プログラムは、前記第１ユーザの前記入力の一つである第１入力を受けたとき、前記第１表示領域に表示されている前記表示物を表示されないようにする処理を前記制御部に実行させることができる。

【0010】

（４）上記（１）から（３）の何れかの表示制御プログラムは、前記文字情報が特定の単語を含むとき、前記表示部に前記特定の単語に対応する図解を表示させ、前記第１ユーザの前記入力の一つである第２入力を受けたとき、前記図解の表示を削除する処理を前記制御部に実行させることができる。

【0011】

（５）上記（１）から（４）の何れかの表示制御プログラムにおいて、前記表示制御装置は前記文字情報を表示用文字情報として記憶する記憶部を備え、前記表示制御プログラムは、前記記憶部に記憶されている前記表示用文字情報を前記表示部に表示させるようにし、前記第１ユーザの前記入力の一つである第３入力を受けたとき、前記記憶部に記憶されている前記表示用文字情報の一部を伏字に変更することにより、前記表示部に表示されている前記表示物の一部を表示されないようにする処理を前記制御部に実行させることができる。

【0012】

（６）上記（５）の表示制御プログラムは、前記音声認識によって変換された前記文字情報を解析し、前記第１ユーザの前記第３入力があった時点の単語から、該第３入力の直前の句読点までの前記表示用文字情報の前記一部を伏字に変更する処理を前記制御部に実行させることができる。

【0013】

（７）上記（１）から（６）の何れかの表示制御プログラムにおいて、前記第１ユーザの前記入力は、前記第１ユーザからの音声による指示に基づく第４入力を含むことができる。

【0014】

（８）上記（１）から（７）の何れかの表示制御プログラムは、前記第１ユーザの前記入力を受けたとき、前記表示部の電源を切ることにより、前記表示物の前記全てを表示されないようにする処理を前記制御部に実行させることができる。

【0015】

（９）上記（１）から（８）の何れかの表示制御プログラムにおいて、前記表示部は、プロジェクタと、前記プロジェクタの表示用スクリーンとを含み、前記第１ユーザの前記入力を受けたとき、前記表示制御プログラムは、前記プロジェクタの光軸の向き及び焦点距離の少なくとも何れかを変更することにより、前記表示物の前記全てを表示されないようにする処理を前記制御部に実行させることができる。

【0016】

（１０）上記（１）から（９）の何れかの表示制御プログラムにおいて、前記表示制御装置は前記文字情報を表示用文字情報として記憶する記憶部を備え、前記表示制御プログラムは、前記記憶部に記憶されている前記表示用文字情報を前記表示部に表示させるように構成され、前記第１ユーザの前記入力を受けたとき、前記表示用文字情報を消去することにより、前記表示物の前記一部又は前記全てを表示されないようにする処理を前記制御部に実行させることができる。

【0017】

（１１）上記（１）から（１０）の何れかの表示制御プログラムは、前記第１ユーザの前記入力を受けたとき、前記表示部と前記表示制御装置との間の通信を切断することにより、前記表示物の前記全てを表示されないようにする処理を前記制御部に実行させることができる。

【0018】

（１２）上記（１）から（１１）の何れかの表示制御プログラムは、前記第１ユーザの前記入力を受けたとき、前記表示部に表示されている表示物の色を変更することにより、前記表示物の前記一部又は前記全てを表示されないようにする処理を前記制御部に実行させることができる。

【0019】

一実施形態において、（１３）表示制御装置は、上記（１）に記載のプログラムを記憶する記憶部と、前記プログラムを実行する制御部とを備える。

【0020】

一実施形態において、（１４）表示制御方法は、複数のユーザの間に配置される表示部と、前記複数のユーザに含まれる少なくとも第１ユーザの音声が音声認識によって変換された文字情報を取得して前記表示部に表示させる表示制御装置とを備える表示システムを制御する表示制御方法であって、前記表示制御装置の制御部が、前記第１ユーザの入力に応じて、前記表示部に表示されている表示物の少なくとも一部を表示されないようにし、少なくとも前記表示物の前記少なくとも一部を表示されないようにする処理中、前記第１ユーザの音声が変換された前記文字情報を取得しないようにする。

【発明の効果】

【0021】

本開示の実施形態によれば、音声認識を用いた対話システムにおいて表示された誤りを、他のユーザにわかり易く高い正確性で非表示にするすることができる。

【図面の簡単な説明】

【0022】

【図1】一実施形態に係る表示システムの利用シーンを説明する斜視図である。

【図2】図１の表示システムを上から見た図である。

【図3】図１の表示システムの概略構成を示すブロック図である。

【図4】第１ユーザの側から見た透明スクリーンの表示の一例を示す図である。

【図5】第２ユーザの側から見た透明スクリーンの表示の一例を示す図である。

【図6】第１ユーザの側から見た透明スクリーンの表示の他の一例であって、図解表示を含む表示を示す図である。

【図7】表示制御装置の記憶部に含まれるサブ記憶部の構成を示す図である。

【図8】表示制御装置のサブ記憶部間のデータの流れを示す図である。

【図9】表示制御装置の制御部が実行する表示制御処理の一例を示すフロー図である。

【図10】図９の表示物非表示処理の一例を説明するフロー図である。

【図11】第１ユーザの側から見た透明スクリーンの表示の他の一例であって、文字情報の一部を非表示にした図である。

【図12】図９の表示物非表示処理のより詳細な一例を示すフロー図である。

【図13】ユーザの動作とともにサブ記憶部に記憶される文字情報の一例を示す図である。

【発明を実施するための形態】

【0023】

以下、本開示の実施形態について、図面を参照して説明する。以下の説明で用いられる図は模式的なものである。図面上の寸法及び比率等は現実のものとは必ずしも一致していない。

【0024】

（表示システムの構成）
一実施形態に係る表示システム１は、図１及び図２に示すように、第１ユーザＵ１と第２ユーザＵ２との間の対話を支援するシステムである。一例として、第１ユーザＵ１は、政府、自治体、又は、公的機関の窓口を担当する職員である。第２ユーザＵ２は、例えば、政府、自治体、又は、公的機関に訪れた聴覚障害者である。表示システム１が使用される場面は、上述のものに限られない。表示システム１は、金融機関、医療機関及び公共交通機関等の窓口、民間事業者の営業店舗、ならびに、オフィス内の会議室等においても使用されうる。

【0025】

近年、感染症の流行により、顧客と接する場面で窓口担当者と顧客との間に、飛沫対策のためのアクリル板又はビニールカーテン等が設置されることがある。表示システム１では、これらのアクリル板又はビニールカーテン等を基材１０とし、この基材１０に透明スクリーン５を配置する。透明スクリーン５は、表示用スクリーンである。この、透明スクリーン５に対して、プロジェクタ３０から第１ユーザＵ１の発話内容が投影される。これにより、透明スクリーン５を挟んで第１ユーザＵ１に対向して位置する第２ユーザＵ２は、第１ユーザＵ１の発話内容を聞き取ることができない場合であっても、第１ユーザＵ１の発話内容を目視して確認することができる。

【0026】

透明スクリーン５は、基材１０の任意の場所に配置することができる。透明スクリーン５は、第１ユーザＵ１と第２ユーザＵ２とが互いの顔を目視することを妨げない位置に配置されてよい。例えば、透明スクリーン５は、第１ユーザＵ１及び第２ユーザＵ２が、視線を水平方向から下側に下げた位置に配置されてよい。

【0027】

表示システム１は、図３に示すように、透明スクリーン５と、表示制御装置２０と、プロジェクタ３０と、マイク４０とを含む。透明スクリーン５及びプロジェクタ３０は、表示部を構成する。表示制御装置２０と、プロジェクタ３０及びマイク４０のそれぞれとは、無線又は有線で通信可能に接続される。表示制御装置２０には、外付けの部分として操作部２５が接続されてよい。表示制御装置２０は、通信回線を介して音声認識処理を提供する外部のクラウドサーバ６０と通信可能に構成される。

【0028】

透明スクリーン５は、基材１０に配置されたスクリーン部１１と遮光部１２とを含む。

【0029】

スクリーン部１１は、基材１０に張付けることが可能なプロジェクタ投影用のフィルム状、シート状又は板状の部材等とすることができる。一般に、スクリーン部１１自体が、「透明スクリーン」と呼ばれることがある。スクリーン部１１は、プロジェクタ３０から入射した光の一部を、入射側及び出射側に拡散させる。第１ユーザＵ１及び第２ユーザＵ２は、スクリーン部１１により拡散された光が視界に入ることにより、プロジェクタ３０から投影された画像を認識することができる。スクリーン部１１の形状は、例えば、長方形とすることができるが、これに限られない。スクリーン部１１は、種々の形状にすることができる。

【0030】

遮光部１２は、プロジェクタ３０から射出される光の透過を少なくとも部分的に遮ることができる光学要素である。遮光部１２は、例えば、特定の波長の光を抑制するダイクロイックフィルムである。遮光部１２は、例えば、赤色を通さないダイクロイックフィルムを使用することができる。遮光部１２は、スクリーン部１１の一部に重ねて配置することができる。例えば、遮光部１２は、スクリーン部１１の表面に重ねて配置される。遮光部１２の形状は、例えば、長方形とすることができるが、これに限られない。遮光部１２は、種々の形状にすることができる。

【0031】

マイク４０は、第１ユーザＵ１の側に配置される。例えば、マイク４０は、第１ユーザＵ１の前の机の上に配置されてよい。また、マイク４０は、第１ユーザＵ１の装着するヘッドセットに取り付けられていてよい。マイク４０は、第１ユーザＵ１の発する音声を電気信号（以下、「音声信号」とも呼ぶ）に変換して、表示制御装置２０に出力する。

【0032】

表示制御装置２０は、マイク４０から音声信号を取得して、クラウドサーバ６０に送信する。表示制御装置２０は、クラウドサーバ６０で音声信号を音声認識処理により変換した文字情報を取得する。表示制御装置２０は、取得した文字情報に基づく画像信号をプロジェクタ３０に送信し、透明スクリーン５に文字情報に対応した文字列を投影して表示させる。表示制御装置２０は、例えば、携帯電話（スマートフォン）及びパソコン等の汎用の機器、又は、専用機器を使用することができる。表示制御装置２０は、通信部２１、制御部２２、記憶部２３、入力部２４、及び操作部２５を含んで構成される。

【0033】

通信部２１は、無線又は有線の通信手段により、表示制御装置２０の外部の機器と通信を行う。外部の機器には、マイク４０、プロジェクタ３０及びクラウドサーバ６０が含まれる。通信部２１は、例えば、シリアル通信規格、有線ＬＡＮ（local area network）規格、Ｗｉｆｉ等の無線ＬＡＮ規格、並びに、４Ｇ（4th Generation）及び５Ｇ（5th Generation）等の移動体通信規格等の種々の通信方式による通信に対応してよい。通信部２１は、クラウドサーバ６０に対する音声信号の送信、及び、音声信号が変換された文字情報の受信を行うことができる。

【0034】

制御部２２は、一つ又は複数のプロセッサを含む。プロセッサには、特定のプログラムを読み込ませて特定の機能を実行する汎用のプロセッサ、及び、特定の処理に特化した専用のプロセッサが含まれる。専用のプロセッサには、特定用途向けＩＣ（ＡＳＩＣ；Application Specific Integrated Circuit）が含まれる。プロセッサには、プログラマブルロジックデバイス（ＰＬＤ；Programmable Logic Device）が含まれる。ＰＬＤには、ＦＰＧＡ（Field-Programmable Gate Array）が含まれる。制御部２２は、一つ又は複数のプロセッサが協働するＳｏＣ（System-on-a-Chip）、及びＳｉＰ（System In a Package）のいずれかであってよい。

【0035】

制御部２２は、表示制御装置２０全体を制御するとともに、マイク４０により取得される音声信号を、通信部２１を介してクラウドサーバ６０に送信するように構成される。制御部２２は、通信部２１を介して、クラウドサーバ６０により音声信号から変換された文字情報を取得するように構成される。制御部２２は、取得した文字情報を表示物としてプロジェクタ３０に表示させる。本開示において「表示物」とは、プロジェクタ３０により透明スクリーン５上に表示される対象となる文字列及び画像を意味する。「表示物」は、透明スクリーン５上に画像要素として投影される。

【0036】

制御部２２は、クラウドサーバ６０から取得した第１ユーザＵ１の発話内容の文字情報を、表示物としてプロジェクタ３０に対して表示させる。制御部２２は、透明スクリーン５上での表示物の表示位置及び表示態様を制御することができる。制御部２２は、後述するように、第１ユーザＵ１の発話内容の文字情報に基づく文字列を、第１表示物ＤＯ１及び第１表示物ＤＯ１を左右反転した第２表示物ＤＯ２としてプロジェクタ３０に投影させることができる。このため、制御部２２は、通信部２１を介して、第１表示物ＤＯ１と第２表示物ＤＯ２とを適宜の位置に表示させる画像信号をプロジェクタ３０に送信する。

【0037】

制御部２２は、第１ユーザＵ１から特定の入力を受けて、プロジェクタ３０に表示させている表示物の少なくとも一部を表示させないようにすることができる。制御部２２は、入力部２４、操作部２５又はマイク４０からそのような特定の入力を受けることができる。表示物を表示させないようにすることは、表示物そのものを削除することと、表示物を見えなくすることとを含む。

【0038】

制御部２２は、表示物の少なくとも一部を表示させないようにする処理中、第１ユーザＵ１の音声が変換された文字情報を取得しないようにする。文字情報を取得しない方法には、第１ユーザＵ１の音声信号そのものを取得しないこと、音声信号を処理しないこと、及び、音声信号をクラウドサーバ６０に送信しないことが含まれる。制御部２２は、所定の時間が経過するまで第１ユーザＵ１の音声を取得しないようにしてよい。所定の時間は、例えば、１秒以上５秒以内の範囲から選択されてよい。そのようにすることにより、表示物の削除後に、中途半端な入力が表示されることを防ぐことができる。また、このように所定の時間を空けることにより、第１ユーザは意図したように表示物が表示されない状態になったことを確認することができる。したがって、第１ユーザＵ１は、高い正確性で表示物を表示されないようにすることができる。

【0039】

記憶部２３は、制御部２２が実行するプログラム、制御部２２が実行する処理に必要な情報、及び、制御部２２が実行した結果得られた情報を記憶するように構成される。記憶部２３は、複数の種類のデータを個別に記憶及び管理している。本願では、この個別に記録及び管理されるデータを格納する部分をサブ記憶部と呼ぶ。サブ記憶部については後述する。

【0040】

記憶部２３は、半導体記憶装置、磁気記憶装置、光記憶装置の少なくとも何れかを含んでよい。半導体記憶装置は、ＤＲＡＭ（Dynamic Random Access Memory）及びＳＲＡＭ（Static Random Access Memory）等の揮発性メモリ、ならびに、ＲＯＭ（Read Only Memory）及びフラシュメモリ等の不揮発性メモリを含んでよい。半導体記憶装置には、フラッシュメモリを用いたＳＳＤ（Solid State Drive）が含まれる。磁気記憶装置は、磁気テープ、フロッピー（登録商標）ディスク、ハードディスク等が含まれる。光記憶装置は、例えばＣＤ（Compact Disc）、ＤＶＤ（Digital Versatile Disc）、及びブルーレイ（Blu-ray（登録商標））等が含まれる。

【0041】

入力部２４は、表示制御装置２０に対する第１ユーザＵ１の操作を受け付ける装置である。入力部２４は、例えば、タッチパネル、キーボード、マウス、及び、ペン入力デバイスを含む。入力部２４は、表示制御装置２０に内蔵されていてよい。

【0042】

入力部２４は、表示制御装置２０に外付けされた操作部２５を含んでよい。一例として、操作部２５は、１つ以上のスイッチＳｗ１～Ｓｗ３を含んでよい。スイッチＳｗ１～Ｓｗ３は、例えば、押しボタンスイッチである。第１ユーザＵ１は、スイッチＳｗ１～Ｓｗ３を操作することにより、表示制御装置２０に対してプロジェクタ３０により表示されている表示物を表示されないようにすることを指示することができる。

【0043】

プロジェクタ３０は、第１ユーザＵ１の側に配置され、表示制御装置２０から受信した画像信号に基づいて、透明スクリーン５に対して表示物を投影する。プロジェクタ３０は、文字列からなる表示物に加え、静止画像及び動画像等を透明スクリーン５の所定の位置に投影してよい。

【0044】

クラウドサーバ６０は、インターネット等のネットワークを介してアクセスできるサーバである。本実施形態のクラウドサーバ６０は、音声認識サービスを提供する音声認識サーバである。クラウドサーバ６０は、音声信号を受信すると受信した音声信号に対して音声認識処理を実行する。クラウドサーバ６０は、音声認識の結果得られた文字情報を音声信号の送信元へ送信する。クラウドサーバ６０は音声認識処理を有料又は無料のサービスとして提供する。

【0045】

（表示システムの表示例）
次に、表示制御装置２０からの画像信号に基づいて、プロジェクタ３０が透明スクリーン５に表示する画像について説明する。透明スクリーン５において、スクリーン部１１上の領域は、第１表示領域Ａ１、第２表示領域Ａ２及び第３表示領域Ａ３に分けて使用される。第１表示領域Ａ１は、スクリーン部１１と遮光部１２とが重ならない領域であって、文字情報が表示される領域である。第２表示領域Ａ２は、スクリーン部１１と遮光部１２とが重なる領域である。第３表示領域Ａ３は、スクリーン部１１と遮光部１２とが重ならない領域であって、静止画像及び／又は動画像が表示される領域である。第３表示領域Ａ３を図解表示領域ともいう。

【0046】

第１表示領域Ａ１は、第１ユーザＵ１の発話内容を文字情報にして第２ユーザＵ２に対して表示するために使用される。プロジェクタ３０が第１表示領域Ａ１に表示する表示物を第１表示物ＤＯ１と呼ぶ。第２表示領域Ａ２は、第２ユーザＵ２に対して表示される第１表示物ＤＯ１の内容を、第１ユーザＵ１が確認するために、第１ユーザＵ１に対して表示する領域である。プロジェクタ３０が第２表示領域Ａ２に表示する表示物を第２表示物ＤＯ２と呼ぶ。第２表示物ＤＯ２は、第１表示物ＤＯ１を左右反転した表示物である。

【0047】

図４に示すように、透明スクリーン５は、第１ユーザＵ１から見たとき、第１表示領域Ａ１に第１表示物ＤＯ１が表示される。また、第２表示領域Ａ２には、第２表示物ＤＯ２が表示される。第１ユーザＵ１に対して、第１表示物ＤＯ１は鏡文字として表示される。第２表示物ＤＯ２は正文字として表示される。「鏡文字」とは、正常な文字の左右を反転させた文字である。「正文字」とは、通常の態様で表示された文字である。

【0048】

一方、プロジェクタ３０が透明スクリーン５に投影する画像と同じ画像を、第２ユーザＵ２側から見ると、図５に示すように、第１表示物ＤＯ１は正文字として表示される。第２表示物ＤＯ２は、遮光部１２が無ければ鏡文字として表示される。第２表示物ＤＯ２は、第２ユーザＵ２に対して表示する必要のない不要な文字であり、鏡文字であるため第２ユーザＵ２には紛らわしく感じられうる。スクリーン部１１の第２表示領域Ａ２に遮光部１２が重ねて配置されることにより、第２表示物ＤＯ２は、第２ユーザＵ２に対して表示されない。

【0049】

例えば、遮光部１２が、特定の波長（例えば、赤色の波長）の光の透過を妨げるダイクロイックフィルムである場合、プロジェクタ３０は、第２表示物ＤＯ２を同じ特定の波長の光で投影する。これにより、第２表示物ＤＯ２を透明スクリーン５に向けて投影する投影光は、遮光部１２で反射され第１ユーザＵ１に視認される。一方、同じ投影光は、遮光部１２を透過しにくいので、第２ユーザＵ２の眼には入りにくくなる。これによって、第２ユーザＵ２は、鏡文字である第２表示物ＤＯ２を視認しづらくなる。そのため、第２ユーザＵ２は、第２表示物ＤＯ２に煩わされにくいというメリットがある。

【0050】

一実施形態において、遮光部１２としては、ダイクロイックフィルムではなく、透過した光の伝搬する角度を限定するフィルム又は部材を用いることができる。透過した光の伝搬方向を制御するフィルムには、視野角制御フィルムが含まれる。また、他の方法として、遮光部１２として偏光フィルムを用いることもできる。プロジェクタ３０から第２表示領域Ａ２に照射する光の偏光方向を、遮光部１２の偏光フィルムの偏光方向と直交させることにより、第２ユーザＵ２から第２表示物ＤＯ２を視認できないようにすることができる。

【0051】

図６に例示するように、第３表示領域Ａ３には、第１表示領域Ａ１及び第２表示領域Ａ２に表示されている文字列に関連する静止画像又は動画像が表示される。例えば、第３表示領域Ａ３には、第１表示領域Ａ１及び第２表示領域Ａ２に表示されている文字列から抽出された特定の単語に対する図解が表示される。特定の単語は、解説用の静止画像及び／又は動画像を表示可能な単語として、記憶部２３に図解単語として予め登録される。また、記憶部２３には、図解単語に紐づけられた、静止画像及び／又は動画像データが、図解表示用データとして記憶される。図６に図示する例では、文字列の中に、登録された単語である「身体障害者手帳」が含まれるので、制御部２２は、記憶部２３から「身体障害者手帳」に紐づけられた図解表示用のデータを読み出して、プロジェクタ３０に第３表示領域Ａ３に表示させる。

【0052】

図４から図６に示す図は、第１表示領域Ａ１、第２表示領域Ａ２及び第３表示領域Ａ３の配置の一例に過ぎない。第１表示領域Ａ１、第２表示領域Ａ２及び第３表示領域Ａ３の位置、大きさ及び形状等は適宜設定されてよい。

【0053】

（記憶部の構成例）
表示制御装置２０の記憶部２３は、図７に示すように、ＲＡＭ等の揮発性メモリ２３１と、ＲＯＭ、フラッシュメモリ及び磁気記憶装置等の不揮発性記憶装置２３２とを含む。揮発性メモリ２３１は、サブ記憶部として音声データ一時記憶部２３ａ、文字変換データ一時記憶部２３ｂ、表示用文字データ記憶部２３ｃ、ログ保存用文字データ記憶部２３ｄ、及び、図解表示データ記憶部２３ｅを含む。不揮発性記憶装置２３２は、サブ記憶部として、音声データ保管部２３ｆ、強調単語記憶部２３ｇ、図解単語記憶部２３ｈ、図解表示データ記憶部２３ｉ、及び、文字データ保管部２３ｊを含む。

【0054】

それぞれのサブ記憶部の機能を、図８を使用して説明する。各サブ記憶部は、制御部２２の制御のもとで、情報の記憶、消去及び転送等を実行する。

【0055】

まず、音声データ一時記憶部２３ａは、マイク４０で取得された音声データを一時的に記憶する。音声データ一時記憶部２３ａは、小容量のメモリであって、マイク４０から音声データの入力を受ける度に、順次内容が更新される。音声データ一時記憶部２３ａは、取得した音声データを、順次音声認識処理を行うクラウドサーバ６０と、音声データ保管部２３ｆに転送する。音声データ保管部２３ｆは、マイク４０から入力された音声を音声データとして保管する。

【0056】

文字変換データ一時記憶部２３ｂは、クラウドサーバ６０で音声データから変換された文字情報を一時的に記憶する。文字変換データ一時記憶部２３ｂは、小容量のメモリであって、クラウドから変換された文字情報の入力を受ける度に順次内容が更新される。文字変換データ一時記憶部２３ｂは、取得した文字情報を、順次表示用文字データ記憶部２３ｃ及びログ保存用文字データ記憶部２３ｄに送信する。

【0057】

ログ保存用文字データ記憶部２３ｄは、文字変換データ一時記憶部２３ｂから取得した文字情報を順次時系列で蓄積する。ログ保存用文字データ記憶部２３ｄは、所定のタイミングで蓄積した文字情報を文字データ保管部２３ｊに転送する。所定のタイミングは、マイク４０がＯＦＦにされたとき、表示制御装置２０が電源オフなどにより終了処理を行うとき、及び、ログ保存用文字データ記憶部２３ｄに蓄積される文字情報が蓄積可能な上限値に近い所定の容量を上回ったとき等の何れかを含んでよい。文字データ保管部２３ｊは、変換された文字情報を保管する。これにより、表示制御装置２０は、第１ユーザＵ１の発話内容を記録することができる。

【0058】

表示用文字データ記憶部２３ｃは、第１表示領域Ａ１及び第２表示領域Ａ２に第１表示物ＤＯ１及び第２表示物ＤＯ２として表示される文字列に対応する文字情報を表示用文字情報として記憶する。表示用文字データ記憶部２３ｃに記憶される表示用文字情報は、制御部２２が行う以下の表示処理により第１表示物ＤＯ２及び第２表示物ＤＯ２としてプロジェクタ３０により透明スクリーン５に投影される。

【0059】

強調単語記憶部２３ｇは、表示物として表示する際に強調表示すべき単語を強調単語として記憶する。会話の中で重要となるキーワードは、予め強調単語として強調単語記憶部２３ｇに記憶される。強調単語は、表示システム１が使用される分野ごとに異なる単語のセットが登録されてよい。制御部２２は、表示用文字データ記憶部２３ｃに記憶される表示用文字情報中に強調単語が含まれているか探索し、含まれている場合は表示処理で強調単語の強調処理を行う。

【0060】

図解単語記憶部２３ｈは、解説用の静止画像及び／又は動画像を表示可能な特定の単語である図解単語を記憶する。図解単語に対応する静止画像及び／又は動画像のデータは、図解表示データとして図解表示データ記憶部２３ｉに記憶される。制御部２２は、表示用文字データ記憶部２３ｃに記憶される表示用文字情報中に図解単語が含まれているか探索する。表示用文字情報中に図解単語が含まれていた場合、制御部２２は、図解単語に対応して図解表示データ記憶部２３ｉに記憶される静止画像及び／又は動画像のデータを、図解表示データ記憶部２３ｅにコピーする。

【0061】

図解表示データ記憶部ｅは、第３表示領域Ａ３（図解表示領域）に第３表示物ＤＯ３として表示される静止画像及び／又は動画像を記憶する。制御部２２は、表示処理において図解表示データ記憶部２３ｉから対応する静止画像及び／又は動画像のデータを読み出して、第３表示領域Ａ３に表示する。図解表示データ記憶部２３ｅに記憶される静止画像及び／又は動画像は、制御部２２が行う以下の表示処理により第３表示物ＤＯ３としてプロジェクタ３０により透明スクリーン５に投影される。

【0062】

制御部２２は、プロジェクタ３０に送信する画像信号を図８の表示処理で生成する。制御部２２は、表示用文字データ記憶部２３ｃから表示用文字情報を取得し、第１表示物ＤＯ１である文字列及び第２表示物ＤＯ２である文字列を含む画像信号を生成する。制御部２２は、表示用文字情報に強調単語が含まれる場合、その単語に対応する文字列の色を、例えば黄色などの目立つ色に変更する。制御部２２は、表示用文字情報に図解単語が含まれる場合、第３表示領域Ａ３に、図解表示データ記憶部２３ｅに記憶される静止画像及び／又は動画像が表示されるように、プロジェクタ３０に送信する画像信号を生成する。

【0063】

このようにして、プロジェクタ３０から透明スクリーン５に対して、図６に示したような画像が投影される。

【0064】

（制御部の実行する表示制御装置の表示制御方法）
以下に、図９を参照して表示制御装置２０の制御部２２が実行する表示制御方法について説明する。表示制御装置２０は、以下に説明する制御部２２が行う処理を、非一時的なコンピュータ可読媒体に記録された表示制御プログラムを読み込んで実装するように構成されてよい。非一時的なコンピュータ可読媒体は、磁気記憶媒体、光学記憶媒体、光磁気記憶媒体、半導体記憶媒体を含むがこれらに限られない。磁気記憶媒体は、磁気ディスク、ハードディスク、磁気テープを含む。光学記憶媒体は、ＣＤ（Compact Disc）、ＤＶＤ、ブルーレイディスク（Blu-ray（登録商標） Disc）等の光ディスクを含む。半導体記憶媒体は、ＲＯＭ（Read Only Memory）、ＥＥＰＲＯＭ（Electrically Erasable Programmable Read-Only Memory）、フラッシュメモリ等を含む。

【0065】

まず、第１ユーザＵ１が表示システム１を起動すると、制御部２２は、マイク４０から通信部２１を介して音声信号の取得を開始する（ステップＳ１０１）。本実施形態において、マイク４０は、第１ユーザＵ１の近くに配置されるので、第１ユーザＵ１の発話した音声を取得する。制御部２２は、マイク４０から取得した音声信号から、雑音を低減し人の音声の信号を選択的に取得するように構成されてよい。

【0066】

制御部２２は、通信部２１を介して、クラウドサーバ６０へステップＳ１０１で取得した音声信号の送信を開始する（ステップＳ１０２）。クラウドサーバ６０に送信された音声信号は、クラウドサーバ６０により音声認識処理を受ける。クラウドサーバ６０は、音声信号から人の声を抽出し自然言語処理により発話内容を示す文字情報に変換する。

【0067】

クラウドサーバ６０は、生成した文字情報を表示制御装置２０に対して送信する。音声信号に、人の声が含まれない場合、クラウドサーバ６０は文字情報を表示制御装置２０に送信しなくてよい。これにより、表示制御装置２０の制御部２２は、通信部２１を介してステップＳ１０２で送信した音声信号から変換された文字情報を取得する（ステップＳ１０３）。

【0068】

制御部２２は、取得した文字情報に基づく表示物をプロジェクタ３０及び透明スクリーン５により表示する（ステップＳ１０４）。

【0069】

制御部２２は、文字情報に強調対象の単語である強調単語が含まれているか確認する（ステップＳ１０５）。文字情報に強調単語が含まれている場合（ステップＳ１０５：Ｙｅｓ）、制御部２２は、強調単語を強調表示に表示変更した文字列である第１表示物ＤＯ１及び第２表示物ＤＯ２を生成する（ステップＳ１０６）。強調表示は、例えば表示物の強調単語の色を黄色等の目立つ色に変えることを含むが、これに限られない。強調表示は、表示物の強調単語の大きさ及び／又は輝度を変える表示を含んでよい。ステップＳ１０６の後、及び、表示対象の文字情報が強調単語を含まないとき（ステップＳ１０５：Ｎｏ）、制御部２２はステップＳ１０７に進む。

【0070】

ステップＳ１０７において、制御部２２は、文字情報に図解対象の単語（図解単語）が含まれるか確認する（ステップＳ１０７）。文字情報に図解単語が含まれている場合（ステップＳ１０７：Ｙｅｓ）、制御部２２は、図解単語に対応する静止画像及び／又は動画像を第３表示領域Ａ３（図解表示領域）に表示する（ステップＳ１０８）。ステップＳ１０８の後、及び、文字情報に図解単語が含まれていない場合（ステップＳ１０７：Ｎｏ）、制御部２２はステップＳ１０９に進む。

【0071】

ステップＳ１０９において、制御部２２は、第１ユーザＵ１の入力に応じて、プロジェクタ３０により透明スクリーン５に表示されている表示物の少なくとも一部を表示されないようにする処理を行う。表示物を非表示にする処理の一例を、図１０のフロー図に基づいて説明する。

【0072】

まず、制御部２２は、表示物を非表示にする第１ユーザＵ１の指示が検出できるか判定する（ステップＳ２０１）。表示物を非表示にする指示は、以下の表示物を非表示にする処理のトリガとなる指示であって、第１ユーザＵ１による入力部２４への入力、操作部２５の操作、及び、第１ユーザＵ１によりマイク４０から入力された音声による指示を含む。本実施形態において、操作部２５の操作は、第１～第３入力である。音声による指示は第４入力である。

【0073】

入力部２４への入力は、第１ユーザＵ１が表示制御装置２０のタッチパネルを操作して実行する処理を含む。例えば、表示制御装置２０のタッチパネルには、マイク４０からの音声取得を停止させるボタン、プロジェクタ３０との通信を停止するボタン、及び／又は、プロジェクタ３０を停止させるボタンが表示されてよい。これらのボタンがタッチパネル上で操作されたことを検知して、制御部２２は以下のステップの表示物を非表示にする処理を実行してよい。

【0074】

操作部２５の操作は、操作部２５に含まれるスイッチＳｗ１～Ｓｗ３の操作を含む。例えば、制御部２２は、操作部２５のスイッチＳｗ１～Ｓｗ３が操作されたとき、以下のステップでそれぞれのスイッチＳｗ１～Ｓｗ３に割り当てられた態様で、表示物を非表示にする処理を行ってよい。

【0075】

また、音声による指示は、クラウドサーバ６０で変換された文字情報から検出されてよい。例えば、制御部２２は、クラウドサーバ６０で変換された文字情報に、表示物を非表示にすることを示す所定の語句が含まれる場合、以下のステップでその語句に従った態様で、表示物を非表示にする処理を行ってよい。所定の語句には、例えば、「全消去」、「単語消去」、「図解消去」等の異なる種別の指示を示す語句が含まれる。制御部２２は、クラウドサーバ６０で変換された文字情報ではなく、マイク４０から取得した音声信号を認識して直接所定の語句を抽出してもよい。

【0076】

ステップＳ２０１で、表示物を非表示にする指示を検出した場合（ステップＳ２０１：Ｙｅｓ）、制御部２２は、マイク４０からの音声の取得を停止するとともに、音声の取得を停止している時間の計測を開始する（ステップＳ２０２）。音声の取得を停止する手段には、マイク４０の停止、マイク４０からの音声信号の取得停止、及び、クラウドサーバ６０への音声信号の送信停止が含まれる。

【0077】

次に、制御部２２は、ステップＳ２０１で検出した表示物を非表示にする指示の種別に基づいて、表示物を非表示にする範囲を決定する（ステップＳ２０３）。表示物を非表示にする指示の種別は、上述の操作部２５のスイッチＳｗ１～Ｓｗ３の種別、及び、音声による指示の種別を含む。表示物を非表示にする範囲は、第１表示領域Ａ１及び第２表示領域Ａ２に表示される文字列、並びに、第３表示領域Ａ３に含まれる図解の何れか一方、又は、双方から選択されうる。また、第１表示領域Ａ１及び第２表示領域Ａ２に含まれる文字列は、全部、又は、表示物を非表示にする指示を受けた直前の一部の文字列のみが非表示にされる範囲として設定されてよい。さらに、制御部２２は、第２表示領域に表示される文字列は非表示とせず、第１表示領域Ａ１に表示される文字列のみを非表示にする範囲として設定してもよい。

【0078】

制御部２２は、表示物を非表示にする指示を受けた直前の一部の文字列のみを非表示にする場合、一例として、以下の処理を実行してよい。制御部２２は、クラウドサーバ６０で変換された文字情報を品詞分解する。品詞分解された結果得られる単語が非表示にする最小単位となる。これにより、単語の途中で文字列が非表示になることを防ぐことができる。制御部２２は、クラウドサーバ６０により変換された文字情報を解析し、表示物を非表示にする指示を受けた直前の単語から遡って、一番近い句読点の位置までを非表示にする範囲とする。

【0079】

ステップＳ２０４に続いて、制御部２２は、プロジェクタ３０により表示される表示物を非表示にする処理を実行する（ステップＳ２０４）。表示物を非表示にする方法は、複数の方法が含まれる。以下に、いくつかの方法について説明する。

【0080】

（１）表示用文字データ記憶部２３ｃに記憶される文字情報の消去又は書き換え
表示用文字データ記憶部２３ｃに記憶される文字情報は、第１表示領域Ａ１及び第２表示領域Ａ２に表示される第１表示物ＤＯ１及び第２表示物ＤＯ２に反映される。制御部２２は、表示用文字データ記憶部２３ｃに記憶される文字情報を削除することにより、第１表示物ＤＯ１及び第２表示物ＤＯ２として表示される文字列を削除することができる。制御部２２は、プロジェクタ３０により表示されている全ての文字列を削除する場合、表示用文字データ記憶部２３ｃに記憶される文字情報の全てを削除する。表示用文字データ記憶部２３ｃに記憶される文字情報の一部がプロジェクタ３０により表示されているような場合、制御部２２は、表示されている部分に対応する文字情報のみを削除してよい。また、制御部２２は、表示用文字データ記憶部２３ｃに記憶される文字情報の一部を伏字に置き換えることにより、図１１に示すように第１表示領域Ａ１及び第２表示領域Ａ２に表示される文字情報の一部の単語又は語句を消去することができる。図１１では、一部の単語又は語句中の文字を「＊」により置き換えている。このような表示をすることにより、第２ユーザＵ２は、第１ユーザＵ１の発話内容の一部が非表示になっていることを認識することができる。

【0081】

（２）図解表示データ記憶部２３ｅに記憶される図解の削除
図解表示データ記憶部２３ｅに記憶される静止画像及び／又は動画像は、第３表示領域Ａ３に表示される第３表示物ＤＯ３に反映される。制御部２２は、図解表示データ記憶部２３ｅに記憶される静止画像及び／又は動画像のデータを削除することにより、第３表示物ＤＯ３として表示される図解を削除することができる。

【0082】

（３）表示色の変更
制御部２２は、プロジェクタ３０に送信する文字情報及び図解に含まれる文字列及び画像の全部又は一部の表示色を黒色にすることにより、透明スクリーン５に投影される文字及び画像の全部又は一部を見えないようにする。この方法を用いる場合、表示領域Ａ１～Ａ３ごとに、表示又は非表示を設定できる。例えば、制御部２２は、第２ユーザＵ２用に表示される第１表示領域Ａ１の第１表示物ＤＯ１のみを非表示にすることができる。

【0083】

（４）プロジェクタの制御
制御部２２は、プロジェクタ３０を制御して透明スクリーン５に投影される表示物全体を非表示にすることができる。例えば、制御部２２は、プロジェクタ３０の電源を切る、プロジェクタ３０の光量を低下させる、焦点距離を変更して透明スクリーン５上に結像しないようにする、プロジェクタ３０の光軸を移動させる、等の動作をプロジェクタ３０に実行させる。この方法の場合、制御部２２は、全ての表示物を非表示にすることができるが、表示物の一部のみを非表示にすることはできない。

【0084】

（５）画像送信の停止
制御部２２は、通信部２１のプロジェクタ３０との間の通信を切断させることにより、透明スクリーン５に投影される表示物全体を非表示にすることができる。表示制御装置２０とプロジェクタ３０との間は、例えば、無線ＬＡＮ上でＭｉｒａｃａｓｔ（登録商標）等の機能を利用して接続することができる。制御部２２は、Ｍｉｒａｃａｓｔによる接続を切断させることができる。この方法の場合、制御部２２は、全ての表示物を非表示にすることができるが、表示物の一部のみを非表示にすることはできない。

【0085】

ステップＳ２０４で、表示物を非表示にする処理を実行した後、制御部２２は、所定の時間が経過するのを待つ（ステップＳ２０５）。所定の時間は、前述のように、例えば、１秒間以上５秒間以内の範囲から選択されてよい。これにより、所定の時間が経過するまで、ステップＳ２０２の音声取得の停止が継続された状態にある。少なくとも、制御部２２が表示物を非表示にする処理を完了するまで、音声の取得は停止される。これにより、表示物を非表示にする指示の入力を受けた後、プロジェクタ３０による新たな表示物の表示が停止するので、第２ユーザＵ２は透明スクリーン５を見て、一部又は全部の表示物が削除されたことを容易に認識することができる。また、第１ユーザＵ１は、透明スクリーン５を見て、意図した表示物の削除がなされたことを高い正確性で確認することができる。

【0086】

ステップＳ２０５で所定時間の経過後、制御部２２は、音声の取得を再開する（ステップＳ２０６）。ステップＳ２０６の後、制御部２２は、図９のフローチャートの処理に戻り、ステップＳ１１０に進む。

【0087】

ステップＳ１１０で、制御部２２は処理を終了させる指示を受けない限り（ステップＳ１１０：Ｎｏ）、ステップＳ１０３からステップＳ１１０の処理を繰り返す。制御部２２は、第１ユーザＵ１が表示制御装置２０に処理を終了させる入力を行った等の場合（ステップＳ１１０：Ｙｅｓ）、表示制御装置２０の処理を終了させる。

【0088】

図１２は、図１０に示した表示物を非表示にする処理の更に具体的な例を示すフロー図である。
この場合、第１ユーザＵ１は、３つの押しボタン型の第１スイッチＳｗ１～第３スイッチＳｗ３を有する操作部２５を操作することにより、表示物を非表示にする処理を行う。

【0089】

以下に各スイッチＳｗ１～Ｓｗ３の機能を説明する。
（１）第１スイッチＳｗ１の押下
第１表示領域Ａ１及び第２表示領域Ａ２に表示される文字列を全て消去する。
（２）第２スイッチＳｗ２の押下
第３表示領域Ａ３に表示される静止画像及び／又は動画像の図解を消去する。
（３）第３スイッチＳｗ３の押下（短押し）
第１表示領域Ａ１及び第２表示領域Ａ２に表示される文字列のうち、最新の単語又は単語群を消去する。
（４）第３スイッチＳｗ３の押下（長押し）
第１表示領域Ａ１及び第２表示領域Ａ２に表示される文字情報のうち、最新の一文を消去する。

【0090】

まず、制御部２２は、第１スイッチＳｗ１の操作の有無を検出する（ステップＳ３０１）。第１スイッチＳｗ１の操作は、第１入力である。第１スイッチＳｗ１が操作されている場合（ステップＳ３０１：Ｙｅｓ）、制御部２２は、マイク４０からの音声の取得を停止する（ステップＳ３０２）。制御部２２は、表示用文字データ記憶部２３ｃに記憶されている文字情報を消去する（ステップＳ３０３）。これにより、第１表示領域Ａ１及び第２表示領域Ａ２に表示される表示物である文字列は表示されないようになる。ステップＳ３０３の後、制御部２２は、ステップＳ３１３に進む。ステップＳ３０１で第１スイッチＳｗ１が操作されていない場合、制御部２２はステップＳ３０４に進む。

【0091】

ステップＳ３０４で、制御部２２は、第２スイッチＳｗ２の操作の有無を検出する。第２スイッチＳｗ２の操作は、第２入力である。第２スイッチＳｗ２が操作されている場合（ステップＳ３０４：Ｙｅｓ）、制御部２２は、マイク４０からの音声の取得を停止する（ステップＳ３０５）。制御部２２は、図解表示データ記憶部２３ｅに記憶されている図解表示データを消去する（ステップＳ３０６）。これにより、第３表示領域Ａ３に表示される図解の静止画像及び／又は動画像は削除される。ステップＳ３０６の後、制御部２２は、ステップＳ３１３に進む。ステップＳ３０４で第２スイッチＳｗ２が操作されていない場合、制御部２２はステップＳ３０７に進む。

【0092】

ステップＳ３０７で、制御部２２は、第３スイッチＳｗ３の短押し操作の有無を検出する。第３スイッチＳｗ３の操作は、第３入力である。第３スイッチＳｗ３が短押し操作されている場合（ステップＳ３０７：Ｙｅｓ）、制御部２２は、マイク４０からの音声の取得を停止する（ステップＳ３０８）。制御部２２は、表示用文字データ記憶部２３ｃに記憶されている表示用文字情報の最新の単語（直近で記憶された単語）を判別し、これを消去する（ステップＳ３０９）。単語の消去は、単語に含まれる文字を伏字で置き換えることにより行われてよい。これにより、第１表示領域Ａ１及び第２表示領域Ａ２に表示される対応する単語が削除される。制御部２２は、クラウドサーバ６０により変換された文字情報を解析し、第３スイッチＳｗ３の押下された時点の単語からその直前の句読点までの表示用文字情報を単語単位で伏字に変更してよい。これによって、第３スイッチＳｗが操作された時点から遡って意味的に纏まりのある複数の単語が非表示となる。ステップＳ３０９の後、制御部２２は、ステップＳ３１３に進む。ステップＳ３０７で第３スイッチＳｗ３が操作されていない場合、制御部２２はステップＳ３１０に進む。

【0093】

ステップＳ３１０で、制御部２２は、第３スイッチＳｗ１の長押し操作の有無を検出する。第３スイッチＳｗ３が長押し操作されている場合（ステップＳ３１０：Ｙｅｓ）、制御部２２は、マイク４０からの音声の取得を停止する（ステップＳ３１１）。制御部２２は、表示用文字データ記憶部２３ｃに記憶されている表示用文字情報の最新の一文（直近で記憶された一文）を判別し、これを消去する（ステップＳ３１２）。一文の消去は、文章に含まれる文字を伏字で置き換えることにより行われてよい。これにより、第１表示領域Ａ１及び第２表示領域Ａ２に表示される対応する一文が削除される。ステップＳ３１２の後、制御部２２は、ステップＳ３１３に進む。ステップＳ３１０で第３スイッチＳｗ３が操作されていない場合（ステップＳ３１０：Ｎｏ）、制御部２２は、図９のフローチャートに戻る。

【0094】

ステップＳ３１３において、制御部２２は所定時間の経過を待って、ステップＳ３１４に進む。ステップＳ３１４で、制御部２２は音声取得を再開して、図９のフローチャートに戻る。

【0095】

以上説明したように、本実施形態によれば、複数種類の指示に対応する入力を設けることにより、第１ユーザＵ１は、種々の態様で表示物である文字列及び／又は図解表示の一部又は全部を、所望の方法で非表示にすることができる。

【0096】

（記憶部に記憶されるデータの変化）
第１ユーザＵ１の動作よる、記憶部２３の文字変換データ一時記憶部２３ｂ、表示用文字データ記憶部２３ｃ及びログ保存用文字データ記憶部２３ｄの各部に記憶されるデータの変化を、図１３を参照して説明する。

【0097】

マイク４０がＯＮになった後、第１ユーザＵ１が「おはようございます」と発話したとする。この発話内容は、最初に文字変換データ一時記憶部２３ｂに一時記憶され、表示用文字データ記憶部２３ｃ及びログ保存用文字データ記憶部２３ｄにコピーされる。それに伴い、文字変換データ一時記憶部２３ｂに記憶されていた発話内容の文字情報はクリアされる。

【0098】

次に、第１ユーザＵ１が「本日は晴天ですね」と発話すると、この発話内容は、表示用文字データ記憶部２３ｃ及びログ保存用文字データ記憶部２３ｄの先に記憶された「おはようございます」の文字情報の後にコピーされる。文字変換データ一時記憶部２３ｂの文字情報はクリアされる。

【0099】

次に、第１ユーザＵ１が第１スイッチＳｗ１を操作すると、表示用文字データ記憶部２３ｃに記憶されていた文字情報が削除される。これにより、プロジェクタ３０により透明スクリーン５に表示される表示物の文字列も削除される。一方、ログ保存用文字データ記憶部２３ｄには、第１スイッチＳｗ１が押されたことが記録される。

【0100】

さらに、第１ユーザが、「こんにちは」と発話すると、発話内容が、表示用文字データ記憶部２３ｃにコピーされる。これにより、プロジェクタ３０からは、後から発話された「こんにちは」のみが表示される。ログ保存用文字データ記憶部２３ｄでは、先に記憶されている文字列及び第１スイッチＳｗが押されたことの記録の後に、「こんにちは」の文字列が付加される。

【0101】

最後に、第１ユーザＵ１がマイク４０をＯＦＦにする等により表示システム１を終了させる動作を行うと、ログ保存用文字データ記憶部２３ｄに記録されていたデータが、文字データ保管部２３ｊにコピーされ保管される。

【0102】

このように、表示制御装置２０によれば、第１ユーザＵ１は、発話中に表示される表示物を表示されないようにできることに加え、非表示にされた内容も含む第１ユーザＵ１の発話内容の文字情報を記録として残すことが可能になる。さらに、この記録は、第１ユーザによる発話中に表示物を非表示にする動作の記録も含むことができる。

【0103】

以上説明したように、音声認識を用いた対話システムである表示システム１では、第１ユーザＵ１側から、第１ユーザＵ１用の第１表示物ＤＯ１及び第２ユーザＵ２用の第２表示物ＤＯ２の双方が視界に入る。そのため、第１ユーザＵ１は、誤認識及び言い間違い等を、即座に且つ直感的に把握することができる。また、第１ユーザＵ１は、操作部２５の操作又は音声による指示を含む簡易な操作で容易に表示を非表示にすることができる。さらに、本実施形態によれば、表示物を非表示にすることを指示する入力の後、所定の時間が経過するまで第１ユーザＵ１の音声を変換した文字情報を取得しないので、表示された誤りを第１ユーザが削除したことを第２ユーザＵ２に容易且つ確実に認識させることができる。同時に、第１ユーザは、意図した箇所の表示物が非表示になったことを高い正確性で確認することができる。

【0104】

本開示に係る実施形態について、諸図面及び実施例に基づき説明してきたが、当業者であれば本開示に基づき種々の変形又は修正を行うことが容易であることに注意されたい。従って、これらの変形又は修正は本開示の範囲に含まれることに留意されたい。例えば、各構成部に含まれる機能などは論理的に矛盾しないように再配置可能であり、複数の構成部を１つに組み合わせたり、或いは分割したりすることが可能である。

【0105】

本開示において「第１」及び「第２」等の記載は、当該構成を区別するための識別子である。本開示における「第１」及び「第２」等の記載で区別された構成は、当該構成における番号を交換することができる。例えば、第１表示物ＤＯ１は、第２表示物ＤＯ２と識別子である「第１」と「第２」とを交換することができる。識別子の交換は同時に行われる。識別子の交換後も当該構成は区別される。識別子は削除してよい。識別子を削除した構成は、符号で区別される。本開示における「第１」及び「第２」等の識別子の記載のみに基づいて、当該構成の順序の解釈、小さい番号の識別子が存在することの根拠に利用してはならない。

【0106】

本開示の各実施形態に含まれる構成要素及び機能ブロックは、適宜同一のハードウェア又は異なるハードウェアに配置することができる。本開示の各実施形態のマイク４０は、表示制御装置２０又はプロジェクタ３０と同じハードウェアに含まれてよい。本開示の実施形態の通信部２１、制御部２２、記憶部２３、及び、入力部２４の一部、或いは全部は、プロジェクタ３０に含まれてもよい。

【0107】

本発明の表示部は、透明スクリーン５及びプロジェクタ３０を含む構成に限定されない。表示部は、例えば、透明基板内に発光素子が配列された透明有機ＥＬディスプレイ（ＯＬＥＤ：Organic Light Emitting Diode）を含むものであってもよい。また、本発明は、実施例のように複数のユーザが表示部を挟んで向かい合って対話するものに限られない。表示部は、液晶ディスプレイ及び有機ＥＬディスプレイ等の一般的な表示装置であってよい。表示部としては、タブレット端末のディスプレイを使用することもできる。その場合、タブレット本体を表示制御装置２０とし、タブレット端末のプロセッサを制御部２２としうる。

【0108】

上記実施形態において、音声認識処理はクラウドに置かれた音声認識サーバにより行うものとしたが、本発明はこれに限られない。音声認識処理は、表示制御装置２０の近くに配置されたサーバ、又は、表示制御装置２０自身で行ってもよい。

【符号の説明】

【0109】

１ 表示システム
５ 透明スクリーン（表示部／表示用スクリーン）
１０ 基材
１１ スクリーン部
１２ 遮光部
２０ 表示制御装置
２１ 通信部
２２ 制御部
２３ 記憶部
２３ａ 音声データ一時記憶部
２３ｂ 文字変換データ一時記憶部
２３ｃ 表示用文字データ記憶部
２３ｄ ログ保存用文字データ記憶部
２３ｅ 図解表示データ記憶部
２３ｆ 音声データ保管部
２３ｇ 強調単語記憶部
２３ｈ 図解単語記憶部
２３ｉ 図解表示データ記憶部
２３ｊ 文字データ保管部
２４ 入力部
２５ 操作部
３０ プロジェクタ（表示部）
４０ マイク
６０ クラウドサーバ
２３１ 揮発性メモリ
２３２ 不揮発性記憶装置
Ａ１ 第１表示領域
Ａ２ 第２表示領域
Ａ３ 第３表示領域
Ｓｗ１ 第１スイッチ
Ｓｗ２ 第２スイッチ
Ｓｗ３ 第３スイッチ

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】