特許 7532839 表示装置の制御方法、情報処理装置および表示システム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-08-05

(45)【発行日】2024-08-14

(54)【発明の名称】表示装置の制御方法、情報処理装置および表示システム

(51)【国際特許分類】

   H04N 5/74 20060101AFI20240806BHJP

   G09G 5/00 20060101ALI20240806BHJP

   G09G 5/37 20060101ALI20240806BHJP

   G06F 3/0488 20220101ALI20240806BHJP

【ＦＩ】

H04N5/74 Z

G09G5/00 510H

G09G5/37 600

G06F3/0488

【請求項の数】 25

(21)【出願番号】P 2020052206

(22)【出願日】2020-03-24

(65)【公開番号】P2021153219

(43)【公開日】2021-09-30

【審査請求日】2023-02-03

(73)【特許権者】

【識別番号】000002369

【氏名又は名称】セイコーエプソン株式会社

(74)【代理人】

【識別番号】100179475

【弁理士】

【氏名又は名称】仲井 智至

(74)【代理人】

【識別番号】100216253

【弁理士】

【氏名又は名称】松岡 宏紀

(74)【代理人】

【識別番号】100225901

【弁理士】

【氏名又は名称】今村 真之

(72)【発明者】

【氏名】板花 京亮

(72)【発明者】

【氏名】上原 隆広

【審査官】秦野 孝一郎

(56)【参考文献】

【文献】特開２０１３－０３７０９４（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｎ ５／７４

Ｇ０９Ｇ ５／００－５／４２

Ｇ０６Ｆ ３／０１－３／０４８９５

(57)【特許請求の範囲】

【請求項1】

指示体の位置に応じて生成される画像情報に基づく画像を表示する表示装置の制御方法であって、
前記指示体の位置に応じて前記画像情報を生成するシステムの負荷に関する負荷値を監視し、
前記負荷値が閾値未満である場合、編集処理可能な第１画像オブジェクト情報を前記指示体の位置に応じて生成し、前記第１画像オブジェクト情報を用いて前記画像情報を生成する第１モードを実行し、
前記負荷値が前記閾値以上である場合、前記第１画像オブジェクト情報よりも前記システムに与える負荷の小さい形式の第２画像オブジェクト情報を前記指示体の位置に応じて生成し、前記第２画像オブジェクト情報を用いて前記画像情報を生成する第２モードを実行する、
表示装置の制御方法。

【請求項2】

前記第１画像オブジェクト情報は、ベクター形式の情報であり、
前記第２画像オブジェクト情報は、ラスター形式の情報である、
請求項１に記載の表示装置の制御方法。

【請求項3】

前記ベクター形式の情報は、前記第１画像オブジェクト情報をオブジェクト単位で表す情報である、
請求項２に記載の表示装置の制御方法。

【請求項4】

前記システムは、プロセッサーを含んでおり、
前記プロセッサーの使用率が設定値以上である場合、前記負荷値が前記閾値以上であると判断する、
請求項１から３のいずれか１項に記載の表示装置の制御方法。

【請求項5】

前記第１画像オブジェクト情報に基づく画像オブジェクトの数が設定値以上である場合、前記負荷値が前記閾値以上であると判断する、
請求項１から４のいずれか１項に記載の表示装置の制御方法。

【請求項6】

前記指示体の数が設定値以上である場合、前記負荷値が前記閾値以上であると判断する、
請求項１から５のいずれか１項に記載の表示装置の制御方法。

【請求項7】

前記負荷値が前記閾値以上である場合、前記第１モードから前記第２モードに切り替えるか否かを問い合わせる問合画像を前記表示装置に表示させる、
請求項１から６のいずれか１項に記載の表示装置の制御方法。

【請求項8】

前記第２モードを実行する場合、前記画像情報に対する編集を制限する、
請求項１から７のいずれか１項に記載の表示装置の制御方法。

【請求項9】

指示体の位置に応じて生成される画像情報に基づく画像を表示装置に表示させる情報処理装置であって、
前記指示体の位置に応じて前記画像情報を生成する生成部と、
前記生成部に用いるシステムの負荷に関する負荷値を監視する監視部と、
前記画像情報を編集処理する編集部と、を有し、
前記生成部は、
前記負荷値が閾値未満である場合、前記指示体の位置に応じて第１画像オブジェクト情報を生成し、前記第１画像オブジェクト情報を用いて前記画像情報を生成する第１モードを実行し、
前記負荷値が前記閾値以上である場合、前記指示体の位置に応じて第２画像オブジェクト情報を生成し、前記第２画像オブジェクト情報を用いて前記画像情報を生成する第２モードを実行し、
前記第１画像オブジェクト情報は、前記編集部で編集処理可能な情報であり、
前記第２画像オブジェクト情報は、前記第１画像オブジェクト情報よりも前記システムに与える負荷の小さい形式の情報である、
情報処理装置。

【請求項10】

指示体の位置に応じて画像情報を生成する生成部と、
前記生成部に用いるシステムの負荷に関する負荷値を監視する監視部と、
前記画像情報を編集処理する編集部と、
前記画像情報に基づく画像を表示する表示部と、を有し、
前記生成部は、
前記負荷値が閾値未満である場合、前記指示体の位置に応じて第１画像オブジェクト情報を生成し、前記第１画像オブジェクト情報を用いて前記画像情報を生成する第１モードを実行し、
前記負荷値が前記閾値以上である場合、前記指示体の位置に応じて第２画像オブジェクト情報を生成し、前記第２画像オブジェクト情報を用いて前記画像情報を生成する第２モードを実行し、
前記第１画像オブジェクト情報は、前記編集部で編集処理可能な情報であり、
前記第２画像オブジェクト情報は、前記第１画像オブジェクト情報よりも前記システムに与える負荷の小さい形式の情報である、
表示システム。

【請求項11】

指示体の位置に応じて生成される画像情報に基づく画像を表示する表示装置の制御方法であって、
前記指示体の位置に応じて前記画像情報を生成するシステムの負荷に関する負荷値を監視し、
前記負荷値が閾値未満である場合、編集処理可能な第１画像オブジェクト情報を前記指示体の位置に応じて生成し、前記第１画像オブジェクト情報を用いて前記画像情報を生成する第１モードを実行し、
前記負荷値が前記閾値以上である場合、前記第１画像オブジェクト情報よりも前記システムに与える負荷の小さい形式の第２画像オブジェクト情報を前記指示体の位置に応じて生成し、前記第２画像オブジェクト情報を用いて前記画像情報を生成する第２モードを実行し、
前記第１画像オブジェクト情報に基づく画像オブジェクトの数が設定値以上である場合、前記負荷値が前記閾値以上であると判断する、
表示装置の制御方法。

【請求項12】

指示体の位置に応じて生成される画像情報に基づく画像を表示する表示装置の制御方法であって、
前記指示体の位置に応じて前記画像情報を生成するシステムの負荷に関する負荷値を監視し、
前記負荷値が閾値未満である場合、編集処理可能な第１画像オブジェクト情報を前記指示体の位置に応じて生成し、前記第１画像オブジェクト情報を用いて前記画像情報を生成する第１モードを実行し、
前記負荷値が前記閾値以上である場合、前記第１画像オブジェクト情報よりも前記システムに与える負荷の小さい形式の第２画像オブジェクト情報を前記指示体の位置に応じて生成し、前記第２画像オブジェクト情報を用いて前記画像情報を生成する第２モードを実行し、
前記指示体の数が設定値以上である場合、前記負荷値が前記閾値以上であると判断する、
表示装置の制御方法。

【請求項13】

指示体の位置に応じて生成される画像情報に基づく画像を表示する表示装置の制御方法であって、
前記指示体の位置に応じて前記画像情報を生成するシステムの負荷に関する負荷値を監視し、
前記負荷値が閾値未満である場合、編集処理可能な第１画像オブジェクト情報を前記指示体の位置に応じて生成し、前記第１画像オブジェクト情報を用いて前記画像情報を生成する第１モードを実行し、
前記負荷値が前記閾値以上である場合、前記第１画像オブジェクト情報よりも前記システムに与える負荷の小さい形式の第２画像オブジェクト情報を前記指示体の位置に応じて生成し、前記第２画像オブジェクト情報を用いて前記画像情報を生成する第２モードを実行し、
前記負荷値が前記閾値以上である場合、前記第１モードから前記第２モードに切り替えるか否かを問い合わせる問合画像を前記表示装置に表示させる、
表示装置の制御方法。

【請求項14】

指示体の位置に応じて生成される画像情報に基づく画像を表示する表示装置の制御方法であって、
前記指示体の位置に応じて前記画像情報を生成するシステムの負荷に関する負荷値を監視し、
前記負荷値が閾値未満である場合、編集処理可能な第１画像オブジェクト情報を前記指示体の位置に応じて生成し、前記第１画像オブジェクト情報を用いて前記画像情報を生成する第１モードを実行し、
前記負荷値が前記閾値以上である場合、前記第１画像オブジェクト情報よりも前記システムに与える負荷の小さい形式の第２画像オブジェクト情報を前記指示体の位置に応じて生成し、前記第２画像オブジェクト情報を用いて前記画像情報を生成する第２モードを実行し、
前記第２モードを実行する場合、前記画像情報に対する編集を制限する、
表示装置の制御方法。

【請求項15】

前記第１画像オブジェクト情報は、ベクター形式の情報であり、
前記第２画像オブジェクト情報は、ラスター形式の情報である、
請求項１１から１４のいずれか１項に記載の表示装置の制御方法。

【請求項16】

前記ベクター形式の情報は、前記第１画像オブジェクト情報をオブジェクト単位で表す情報である、
請求項１５に記載の表示装置の制御方法。

【請求項17】

前記システムは、プロセッサーを含んでおり、
前記プロセッサーの使用率が設定値以上である場合、前記負荷値が前記閾値以上であると判断する、
請求項１１から１６のいずれか１項に記載の表示装置の制御方法。

【請求項18】

指示体の位置に応じて生成される画像情報に基づく画像を表示装置に表示させる情報処理装置であって、
前記指示体の位置に応じて前記画像情報を生成する生成部と、
前記生成部に用いるシステムの負荷に関する負荷値を監視する監視部と、
前記画像情報を編集処理する編集部と、を有し、
前記生成部は、
前記負荷値が閾値未満である場合、前記指示体の位置に応じて第１画像オブジェクト情報を生成し、前記第１画像オブジェクト情報を用いて前記画像情報を生成する第１モードを実行し、
前記負荷値が前記閾値以上である場合、前記指示体の位置に応じて第２画像オブジェクト情報を生成し、前記第２画像オブジェクト情報を用いて前記画像情報を生成する第２モードを実行し、
前記第１画像オブジェクト情報に基づく画像オブジェクトの数が設定値以上である場合、前記負荷値が前記閾値以上であると判断し、
前記第１画像オブジェクト情報は、前記編集部で編集処理可能な情報であり、
前記第２画像オブジェクト情報は、前記第１画像オブジェクト情報よりも前記システムに与える負荷の小さい形式の情報である、
情報処理装置。

【請求項19】

指示体の位置に応じて生成される画像情報に基づく画像を表示装置に表示させる情報処理装置であって、
前記指示体の位置に応じて前記画像情報を生成する生成部と、
前記生成部に用いるシステムの負荷に関する負荷値を監視する監視部と、
前記画像情報を編集処理する編集部と、を有し、
前記生成部は、
前記負荷値が閾値未満である場合、前記指示体の位置に応じて第１画像オブジェクト情報を生成し、前記第１画像オブジェクト情報を用いて前記画像情報を生成する第１モードを実行し、
前記負荷値が前記閾値以上である場合、前記指示体の位置に応じて第２画像オブジェクト情報を生成し、前記第２画像オブジェクト情報を用いて前記画像情報を生成する第２モードを実行し、
前記指示体の数が設定値以上である場合、前記負荷値が前記閾値以上であると判断し、
前記第１画像オブジェクト情報は、前記編集部で編集処理可能な情報であり、
前記第２画像オブジェクト情報は、前記第１画像オブジェクト情報よりも前記システムに与える負荷の小さい形式の情報である、
情報処理装置。

【請求項20】

指示体の位置に応じて生成される画像情報に基づく画像を表示装置に表示させる情報処理装置であって、
前記指示体の位置に応じて前記画像情報を生成する生成部と、
前記生成部に用いるシステムの負荷に関する負荷値を監視する監視部と、
前記画像情報を編集処理する編集部と、を有し、
前記生成部は、
前記負荷値が閾値未満である場合、前記指示体の位置に応じて第１画像オブジェクト情報を生成し、前記第１画像オブジェクト情報を用いて前記画像情報を生成する第１モードを実行し、
前記負荷値が前記閾値以上である場合、前記指示体の位置に応じて第２画像オブジェクト情報を生成し、前記第２画像オブジェクト情報を用いて前記画像情報を生成する第２モードを実行し、
前記負荷値が前記閾値以上である場合、前記第１モードから前記第２モードに切り替えるか否かを問い合わせる問合画像を前記表示装置に表示させ、
前記第１画像オブジェクト情報は、前記編集部で編集処理可能な情報であり、
前記第２画像オブジェクト情報は、前記第１画像オブジェクト情報よりも前記システムに与える負荷の小さい形式の情報である、
情報処理装置。

【請求項21】

指示体の位置に応じて生成される画像情報に基づく画像を表示装置に表示させる情報処理装置であって、
前記指示体の位置に応じて前記画像情報を生成する生成部と、
前記生成部に用いるシステムの負荷に関する負荷値を監視する監視部と、
前記画像情報を編集処理する編集部と、を有し、
前記生成部は、
前記負荷値が閾値未満である場合、前記指示体の位置に応じて第１画像オブジェクト情報を生成し、前記第１画像オブジェクト情報を用いて前記画像情報を生成する第１モードを実行し、
前記負荷値が前記閾値以上である場合、前記指示体の位置に応じて第２画像オブジェクト情報を生成し、前記第２画像オブジェクト情報を用いて前記画像情報を生成する第２モードを実行し、
前記第２モードを実行する場合、前記画像情報に対する編集を制限し、
前記第１画像オブジェクト情報は、前記編集部で編集処理可能な情報であり、
前記第２画像オブジェクト情報は、前記第１画像オブジェクト情報よりも前記システムに与える負荷の小さい形式の情報である、
情報処理装置。

【請求項22】

指示体の位置に応じて画像情報を生成する生成部と、
前記生成部に用いるシステムの負荷に関する負荷値を監視する監視部と、
前記画像情報を編集処理する編集部と、
前記画像情報に基づく画像を表示する表示部と、を有し、
前記生成部は、
前記負荷値が閾値未満である場合、前記指示体の位置に応じて第１画像オブジェクト情報を生成し、前記第１画像オブジェクト情報を用いて前記画像情報を生成する第１モードを実行し、
前記負荷値が前記閾値以上である場合、前記指示体の位置に応じて第２画像オブジェクト情報を生成し、前記第２画像オブジェクト情報を用いて前記画像情報を生成する第２モードを実行し、
前記第１画像オブジェクト情報に基づく画像オブジェクトの数が設定値以上である場合、前記負荷値が前記閾値以上であると判断し、
前記第１画像オブジェクト情報は、前記編集部で編集処理可能な情報であり、
前記第２画像オブジェクト情報は、前記第１画像オブジェクト情報よりも前記システムに与える負荷の小さい形式の情報である、
表示システム。

【請求項23】

指示体の位置に応じて画像情報を生成する生成部と、
前記生成部に用いるシステムの負荷に関する負荷値を監視する監視部と、
前記画像情報を編集処理する編集部と、
前記画像情報に基づく画像を表示する表示部と、を有し、
前記生成部は、
前記負荷値が閾値未満である場合、前記指示体の位置に応じて第１画像オブジェクト情報を生成し、前記第１画像オブジェクト情報を用いて前記画像情報を生成する第１モードを実行し、
前記負荷値が前記閾値以上である場合、前記指示体の位置に応じて第２画像オブジェクト情報を生成し、前記第２画像オブジェクト情報を用いて前記画像情報を生成する第２モードを実行し、
前記指示体の数が設定値以上である場合、前記負荷値が前記閾値以上であると判断し、
前記第１画像オブジェクト情報は、前記編集部で編集処理可能な情報であり、
前記第２画像オブジェクト情報は、前記第１画像オブジェクト情報よりも前記システムに与える負荷の小さい形式の情報である、
表示システム。

【請求項24】

指示体の位置に応じて画像情報を生成する生成部と、
前記生成部に用いるシステムの負荷に関する負荷値を監視する監視部と、
前記画像情報を編集処理する編集部と、
前記画像情報に基づく画像を表示する表示部と、を有し、
前記生成部は、
前記負荷値が閾値未満である場合、前記指示体の位置に応じて第１画像オブジェクト情報を生成し、前記第１画像オブジェクト情報を用いて前記画像情報を生成する第１モードを実行し、
前記負荷値が前記閾値以上である場合、前記指示体の位置に応じて第２画像オブジェクト情報を生成し、前記第２画像オブジェクト情報を用いて前記画像情報を生成する第２モードを実行し、
前記負荷値が前記閾値以上である場合、前記第１モードから前記第２モードに切り替えるか否かを問い合わせる問合画像を前記表示部に表示させ、
前記第１画像オブジェクト情報は、前記編集部で編集処理可能な情報であり、
前記第２画像オブジェクト情報は、前記第１画像オブジェクト情報よりも前記システムに与える負荷の小さい形式の情報である、
表示システム。

【請求項25】

指示体の位置に応じて画像情報を生成する生成部と、
前記生成部に用いるシステムの負荷に関する負荷値を監視する監視部と、
前記画像情報を編集処理する編集部と、
前記画像情報に基づく画像を表示する表示部と、を有し、
前記生成部は、
前記負荷値が閾値未満である場合、前記指示体の位置に応じて第１画像オブジェクト情報を生成し、前記第１画像オブジェクト情報を用いて前記画像情報を生成する第１モードを実行し、
前記負荷値が前記閾値以上である場合、前記指示体の位置に応じて第２画像オブジェクト情報を生成し、前記第２画像オブジェクト情報を用いて前記画像情報を生成する第２モードを実行し、
前記第２モードを実行する場合、前記画像情報に対する編集を制限し、
前記第１画像オブジェクト情報は、前記編集部で編集処理可能な情報であり、
前記第２画像オブジェクト情報は、前記第１画像オブジェクト情報よりも前記システムに与える負荷の小さい形式の情報である、
表示システム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、表示装置の制御方法、情報処理装置および表示システムに関する。

【背景技術】

【0002】

ペンツールまたは指等の指示体の位置に応じて描画される画像オブジェクトを表示するプロジェクター等の表示装置が知られている。例えば、特許文献１に記載の装置は、指示体の位置に応じて画像データを生成し、当該画像データの示す画像を表示する。特許文献１には、編集処理可能なベクターデータを当該画像データとして画像オブジェクトごとに生成することが開示される。

【先行技術文献】

【特許文献】

【0003】

【文献】特開２０１９－１６９０３７号公報

【発明の概要】

【発明が解決しようとする課題】

【0004】

特許文献１に記載の装置は、画像データとしてベクターデータを用いる場合、画像データを生成するシステムの負荷の大小または処理能力の高低によらず、指示体の描画動作に応じてベクターデータを生成する。このため、特許文献１に記載の装置では、使用状況によっては、指示体の描画動作とそれに基づく画像オブジェクトの表示との間のタイムラグが際立ってしまい、この結果、使い勝手が悪くなるという課題がある。

【課題を解決するための手段】

【0005】

以上の課題を解決するため、本発明に係る表示装置の制御方法の一態様は、指示体の位置に応じて生成される画像情報に基づく画像を表示する表示装置の制御方法であって、前記指示体の位置に応じて前記画像情報を生成するシステムの負荷に関する負荷値を監視し、前記負荷値が閾値未満である場合、編集処理可能な第１画像オブジェクト情報を前記指示体の位置に応じて生成し、前記第１画像オブジェクト情報を用いて前記画像情報を生成する第１モードを実行し、前記負荷値が前記閾値以上である場合、前記第１画像オブジェクト情報よりも前記システムに与える負荷の小さい形式の第２画像オブジェクト情報を前記指示体の位置に応じて生成し、前記第２画像オブジェクト情報を用いて前記画像情報を生成する第２モードを実行する。

【0006】

本発明に係る情報処理装置の一態様は、指示体の位置に応じて生成される画像情報に基づく画像を表示装置に表示させる情報処理装置であって、前記指示体の位置に応じて前記画像情報を生成する生成部と、前記生成部に用いるシステムの負荷に関する負荷値を監視する監視部と、前記画像情報を編集処理する編集部と、を有し、前記生成部は、前記負荷値が閾値未満である場合、前記指示体の位置に応じて第１画像オブジェクト情報を生成し、前記第１画像オブジェクト情報を用いて前記画像情報を生成する第１モードを実行し、前記負荷値が前記閾値以上である場合、前記指示体の位置に応じて第２画像オブジェクト情報を生成し、前記第２画像オブジェクト情報を用いて前記画像情報を生成する第２モードを実行し、前記第１画像オブジェクト情報は、前記編集部で編集処理可能な情報であり、前記第２画像オブジェクト情報は、前記第１画像オブジェクト情報よりも前記システムに与える負荷の小さい形式の情報である。

【0007】

本発明に係る表示システムの一態様は、指示体の位置に応じて画像情報を生成する生成部と、前記生成部に用いるシステムの負荷に関する負荷値を監視する監視部と、前記画像情報を編集処理する編集部と、前記画像情報に基づく画像を表示する表示部と、を有し、前記生成部は、前記負荷値が閾値未満である場合、前記指示体の位置に応じて第１画像オブジェクト情報を生成し、前記第１画像オブジェクト情報を用いて前記画像情報を生成する第１モードを実行し、前記負荷値が前記閾値以上である場合、前記指示体の位置に応じて第２画像オブジェクト情報を生成し、前記第２画像オブジェクト情報を用いて前記画像情報を生成する第２モードを実行し、前記第１画像オブジェクト情報は、前記編集部で編集処理可能な情報であり、前記第２画像オブジェクト情報は、前記第１画像オブジェクト情報よりも前記システムに与える負荷の小さい形式の情報である。

【図面の簡単な説明】

【0008】

【図1】実施形態に係る表示システムを示す模式図である。

【図2】表示装置の構成を示すブロック図である。

【図3】情報処理装置の構成を示すブロック図である。

【図4】画像オブジェクトの移動の一例を示す図である。

【図5】画像オブジェクトの拡大の一例を示す図である。

【図6】複数の画像オブジェクトを表示した状態の一例を示す図である。

【図7】負荷値の経時的変化の一例を示す図である。

【図8】第１モードから第２モードへの切り替えの可否を問い合わせる表示の一例を示す図である。

【図9】第１モードと第２モードとの切り替えの流れを示すフローチャートである。

【発明を実施するための形態】

【0009】

以下、添付図面を参照しながら本発明に係る好適な実施形態を説明する。なお、図面において各部の寸法または縮尺は実際と適宜に異なり、理解を容易にするために模式的に示す部分もある。また、本発明の範囲は、以下の説明において特に本発明を限定する旨の記載がない限り、これらの形態に限られない。

【0010】

１．表示システムの概要
図１は、実施形態に係る表示システム１０を示す模式図である。表示システム１０は、指示体３００の描画動作に応じた画像オブジェクトＧＤを含む画像Ｇを表示可能なインタラクティブ機能を有するプロジェクションシステムである。図１に示すように、表示システム１０は、表示装置２００と指示体３００と情報処理装置１００とを含む。

【0011】

表示装置２００は、情報処理装置１００に有線または無線により通信可能に接続される。表示装置２００には、情報処理装置１００から画像情報ＤＳが入力される。

【0012】

表示装置２００は、情報処理装置１００からの画像情報ＤＳに基づく画像ＧをスクリーンＳＣに表示する。なお、スクリーンＳＣの設置箇所は、特に限定されないが、例えば、壁、床またはテーブル等である。また、表示装置２００の設置箇所は、特に限定されないが、例えば、天井、壁、床、テーブル、専用設置台等である。

【0013】

本実施形態では、表示装置２００は、指示体３００の指示により表示装置２００に各種の機能を実行させるためのＧＵＩ（Graphical User Interface）用の画像であるツールバーＧＴを画像Ｇに重ねて表示する。図１に示す例では、ツールバーＧＴは、取消ボタンＵＤＢ、ポインターボタンＰＴＢ、ペンボタンＰＥＢ、消しゴムボタンＥＲＢおよび色選択ボタンＣＣＢを含む。取消ボタンＵＤＢは、１つ前の操作を取り消して元に戻すボタンである。ポインターボタンＰＴＢは、画像等の選択に用いるマウスポインターを表示させるためのボタンである。ペンボタンＰＥＢは、画像オブジェクトＧＤの描画に用いるペンの種類を選択するためのボタンである。消しゴムボタンＥＲＢは、描画済みの画像オブジェクトＧＤを消去する消しゴムツールを選択するためのボタンである。色選択ボタンＣＣＢは、画像オブジェクトＧＤの描画に用いるペンの色を選択するためのボタンである。

【0014】

なお、以下では、図１に示す形態のツールバーＧＴを用いる場合を例に説明するが、ツールバーＧＴの形態は、図１に示す例に限定されない。また、表示装置２００に対する操作は、ツールバーＧＴを用いる場合のほか、表示装置２００本体に配置される操作パネル２４１、および図１中不図示のリモコンを用いてもよい。

【0015】

画像Ｇに含まれる画像オブジェクトＧＤは、描画動作に伴う指示体３００の位置の軌跡により描かれる描画画像である。なお、指示体３００の位置は、指示体３００の先端等の所定部位の位置であるともいえるし、指示体３００が指示するスクリーンＳＣ上の位置であるともいえる。

【0016】

本実施形態では、表示装置２００は、指示体３００の位置を検出し、その検出位置を示す位置情報を情報処理装置１００に送信する。情報処理装置１００は、表示装置２００からの位置情報に応じた画像オブジェクト情報を生成し、この画像オブジェクト情報を用いて画像情報ＤＳを生成する。当該画像オブジェクト情報は、後述の第１画像オブジェクト情報Ｄ１または第２画像オブジェクト情報Ｄ２である。なお、以下では、第１画像オブジェクト情報Ｄ１および第２画像オブジェクト情報Ｄ２を総称して単に「画像オブジェクト情報」という場合がある。

【0017】

指示体３００は、ペン型のデバイスである。指示体３００は、軸部３１０と、軸部３１０の先端に配置される先端ボタン３２０と、を備える。先端ボタン３２０は、スクリーンＳＣに押し付けられることでオンになるスイッチである。指示体３００の内部には、図示しない赤外線発光部が設けられており、当該赤外線発光部は、先端ボタン３２０がオンとなることにより駆動する。当該赤外線発光部は、例えば、赤外ＬＥＤ（Light Emitting Diode）等の発光素子、発光制御回路、および電源を含んで構成される。当該赤外線発光部は、例えば、ＩｒＤＡ（Infrared Data Association）規格に準拠した方式により、周期的に赤外線を発光する。この発光は、表示装置２００で検出される。表示装置２００は、指示体３００の発光位置に基づいて、指示体３００が指示するスクリーンＳＣ上の位置を検出する。なお、指示体３００の形状は、ペン型に限定されない。また、指示体３００は、人間の指等であってもよい。

【0018】

画像情報ＤＳが示す画像Ｇは、例えば、情報処理装置１００に表示されるデスクトップ画面等の画像に画像オブジェクトＧＤを重畳した画像である。したがって、画像情報ＤＳの生成には、表示装置２００からの前述の位置情報に応じた画像オブジェクト情報のほか、例えば、情報処理装置１００に表示される画像の情報が用いられる。

【0019】

情報処理装置１００は、画像情報ＤＳを生成する際、前述の画像オブジェクト情報の生成を担うシステムの負荷の状況に応じて、画像オブジェクト情報のデータ形式を変更する。具体的には、後に詳述するように、当該システムの負荷に関する負荷値が閾値未満である場合、情報処理装置１００は、編集処理可能な形式の第１画像オブジェクト情報Ｄ１を生成する。このため、編集可能な画像オブジェクトＧＤを表示することができる。一方、当該システムの負荷に関する負荷値が閾値以上である場合、情報処理装置１００は、第１画像オブジェクト情報Ｄ１よりも当該システムに与える負荷の小さい形式の第２画像オブジェクト情報Ｄ２を生成する。このため、指示体３００の描画動作とそれに基づく画像オブジェクトＧＤの表示との間のタイムラグの発生を低減することができる。

【0020】

２．表示装置の構成
図２は、実施形態に係る表示装置２００の構成を示すブロック図である。表示装置２００は、図２に示すように、通信部２１０、画像処理部２２０、表示部２３０、操作部２４０、メモリー２５０、検出部２６０およびプロセッサー２７０を有する。これらは、互いに通信可能に接続される。

【0021】

通信部２１０は、情報処理装置１００と通信可能に接続されるインターフェイスである。例えば、通信部２１０は、無線または有線のＬＡＮ（Local Area Network）、ＵＳＢ（Universal Serial Bus）、ＨＤＭＩ（High Definition Multimedia Interface）等のインターフェイスである。ＵＳＢおよびＨＤＭＩは、それぞれ、登録商標である。なお、通信部２１０は、インターネット等の他のネットワークを介して情報処理装置１００に接続されてもよい。通信部２１０は、無線または有線のインターフェイスを介して受信した信号を電気的に処理するインターフェイス回路を備える。

【0022】

通信部２１０は、情報処理装置１００から各種情報を受信する機能と、情報処理装置１００へ各種情報を送信する機能と、を有する。ここで、通信部２１０は、画像情報ＤＳを含む各種情報を情報処理装置１００から受信する。また、通信部２１０は、後述する検出部２６０からの位置情報ＰＳと制御部２７１からの操作情報ＳＳとを含む各種情報を情報処理装置１００に送信する。なお、図２では、通信部２１０に接続される情報処理装置１００の数が1つである場合が図示されるが、通信部２１０に接続される情報処理装置１００の数は、２以上でもよい。

【0023】

画像処理部２２０は、通信部２１０からの画像情報ＤＳを用いて、表示部２３０を駆動するための画像信号を生成する回路である。具体的には、画像処理部２２０は、フレームメモリー２２１を有し、画像情報ＤＳをフレームメモリー２２１に展開して、解像度変換処理、リサイズ処理、歪み補正処理等の各種処理を適宜実行することにより、画像信号を生成する。ここで、画像処理部２２０は、必要に応じて、ツールバーＧＴ等を表示部２３０に表示させるための処理等を実行する。画像処理部２２０で生成した画像信号は、表示部２３０に入力される。画像処理部２２０は、例えば、集積回路により構成される。集積回路には、ＬＳＩ、ＡＳＩＣ（Application Specific Integrated Circuit）、ＰＬＤ（Programmable Logic Device）、ＦＰＧＡ（Field-Programmable Gate Array）、ＳｏＣ（System-on-a-Chip）等が含まれる。また、集積回路の構成の一部にアナログ回路が含まれていてもよい。

【0024】

表示部２３０は、画像処理部２２０からの画像信号に基づいて、画像Ｇを表示する機構である。本実施形態の表示部２３０は、スクリーンＳＣに画像Ｇを投射により表示する投射機構である。具体的には、表示部２３０は、光源２３１と光変調装置２３２と投射光学系２３３とを有する。

【0025】

光源２３１は、例えば、ハロゲンランプ、キセノンランプ、超高圧水銀ランプ、ＬＥＤ（Light Emitting Diode）またはレーザー光源等を含む。光源２３１は、例えば、赤色、緑色および青色の光をそれぞれ出射するか、または、白色の光を出射する。光源２３１が白色の光を出射する場合、光源２３１から出射される光は、図示しないインテグレーター光学系によって輝度分布のばらつきが低減され、その後、図示しない色分離光学系によって赤色、緑色および青色の光に分離されて光変調装置２３２に入射する。

【0026】

光変調装置２３２は、当該赤色、緑色および青色に対応して設けられる光変調素子２３２Ｒ、２３２Ｇおよび２３２Ｂを含む。光変調素子２３２Ｒ、２３２Ｇおよび２３２Ｂは、それぞれ、例えば、透過型の液晶パネル、反射型の液晶パネルまたはＤＭＤ（デジタルミラーデバイス）等を含む。光変調素子２３２Ｒ、２３２Ｇおよび２３２Ｂは、画像処理部２２０からの画像信号に基づいて、当該赤色、緑色および青色の光をそれぞれ変調して各色の画像光を生成する。光変調装置２３２で生成される各色の画像光は、図示しない色合成光学系によって合成され、フルカラーの画像光となる。

【0027】

投射光学系２３３は、当該フルカラーの画像光をスクリーンＳＣ上に結像させて投射させる。投射光学系２３３は、少なくとも１つの投射レンズを含む光学系であり、ズームレンズまたはフォーカスレンズ等を含んでもよい。

【0028】

操作部２４０は、ユーザーからの操作を受け付ける入力装置である。操作部２４０は、操作パネル２４１およびリモコン受光部２４２を有する。操作パネル２４１は、表示装置２００の外装筐体に設けられ、ユーザーからの操作を受け付け可能に構成される。操作パネル２４１は、ユーザーからの操作に基づく信号を出力する。リモコン受光部２４２は、図示しないリモコンからの赤外線信号を受光し、当該赤外線信号をデコードして、当該リモコンの操作に基づく信号を出力する。

【0029】

メモリー２５０は、プロセッサー２７０が実行する制御プログラムＰ、およびプロセッサー２７０が処理する各種情報を記憶する記憶装置である。メモリー２５０は、例えば、ハードディスクドライブまたは半導体メモリーで構成される。なお、メモリー２５０は、表示装置２００の外部の記憶装置あるいはサーバー等に設けてもよい。

【0030】

検出部２６０は、指示体３００の位置を検出し、当該位置を示す位置情報ＰＳを生成する。検出部２６０は、撮像部２６１および位置情報生成部２６２を有する。撮像部２６１は、スクリーンＳＣを撮像する。撮像部２６１は、例えば、ＣＣＤ（Charge Coupled Device）イメージセンサーまたはＣＭＯＳ（Complementary MOS）イメージセンサー等の撮像素子を含む。位置情報生成部２６２は、撮像部２６１の出力信号に基づいて、指示体３００の位置に関する位置情報ＰＳを生成する。指示体３００の位置は、例えば、スクリーンＳＣ上に設定される座標系の座標で表され、位置情報ＰＳは、当該座標を示す情報を含む。なお、検出部２６０は、指示体３００の位置を検出することができればよく、前述のような撮像素子を用いる構成に限定されず、例えば、レーザー光源および受光素子を用いる構成でもよい。

【0031】

プロセッサー２７０は、表示装置２００の各部を制御する機能、および各種データを処理する機能を有する処理装置である。プロセッサー２７０は、例えば、ＣＰＵ（Central Processing Unit）等を含む。プロセッサー２７０は、メモリー２５０に記憶される制御プログラムＰを実行することによって、表示装置２００の各部を制御する制御部２７１として機能する。なお、プロセッサー２７０は、単一のプロセッサーで構成されてもよいし、複数のプロセッサーで構成されてもよい。また、プロセッサー２７０の機能の一部または全部を、ＤＳＰ（Digital Signal Processor）、ＡＳＩＣ（Application Specific Integrated Circuit）、ＰＬＤ（Programmable Logic Device）、ＦＰＧＡ（Field Programmable Gate Array）等のハードウェアで実現してもよい。

【0032】

制御部２７１は、表示装置２００の各部を制御したり、各種データを処理したりする。ここで、制御部２７１は、画像情報ＤＳに基づく画像Ｇを表示部２３０に表示させる。また、制御部２７１は、前述のツールバーＧＴに対する操作に応じて、その操作内容を示す操作情報ＳＳを生成する。

【0033】

３．情報処理装置の構成
図３は、情報処理装置１００の構成を示すブロック図である。情報処理装置１００は、表示装置２００からの位置情報ＰＳに基づいて画像情報ＤＳを生成し、画像情報ＤＳに基づく画像Ｇを表示装置２００に表示させるコンピューターである。なお、情報処理装置１００は、前述の図１に示す例ではノート型ＰＣ（Personal Computer）であるが、これに限定されず、例えば、スマートフォン、タブレット端末または携帯型ゲーム機等の他の可搬型の情報端末、あるいは、デスクトップ型ＰＣ等の固定型の情報端末でもよい。

【0034】

図３に示すように、情報処理装置１００は、通信部１１０、表示部１２０、操作部１３０、メモリー１４０およびプロセッサー１５０を有する。これらは、互いに通信可能に接続される。

【0035】

通信部１１０は、前述の表示装置２００の通信部２１０と通信可能に接続されるインターフェイスである。例えば、通信部１１０は、通信部２１０と同様に構成される。通信部１１０は、画像情報ＤＳを含む各種情報を表示装置２００に送信する。また、通信部１１０は、位置情報ＰＳおよび操作情報ＳＳを含む各種情報を表示装置２００から受信する。

【0036】

表示部１２０は、プロセッサー１５０による制御のもとで各種の画像を表示する。表示部１２０は、例えば、液晶表示パネル、有機ＥＬ（electro-luminescence）表示パネル等の各種の表示パネルを含む。

【0037】

操作部１３０は、ユーザーからの操作を受け付ける入力機器である。例えば、操作部１３０は、タッチパッド、タッチパネルまたはマウス等のポインティングデバイスを含んで構成される。ここで、操作部１３０は、タッチパネルを含んで構成される場合、表示部１２０を兼ねてもよい。

【0038】

メモリー１４０は、プロセッサー１５０が実行する制御プログラムＰ１、オペレーティングシステムおよびアプリケーションプログラム等の各種プログラム、およびプロセッサー１５０が処理する第１画像オブジェクト情報Ｄ１および第２画像オブジェクト情報Ｄ２等の各種データを記憶する記憶装置である。メモリー１４０は、例えば、ハードディスクドライブまたは半導体メモリーを含んで構成される。なお、メモリー１４０は、情報処理装置１００の外部の記憶装置あるいはサーバー等に設けてもよい。また、メモリー１４０は、生成部１５１または編集部１５３での処理に用いるフレームメモリーを含んでもよい。

【0039】

プロセッサー１５０は、情報処理装置１００の各部を制御する機能、および各種データを処理する機能を有する処理装置である。プロセッサー１５０は、例えば、ＣＰＵ（Central Processing Unit）等のプロセッサーを含む。プロセッサー１５０は、メモリー１４０に記憶される制御プログラムＰ１を実行することによって、生成部１５１、監視部１５２および編集部１５３として機能する。

【0040】

なお、プロセッサー１５０は、単一のプロセッサーで構成されてもよいし、複数のプロセッサーで構成されてもよい。また、プロセッサー１５０の機能の一部または全部を、ＤＳＰ（Digital Signal Processor）、ＡＳＩＣ（Application Specific Integrated Circuit）、ＰＬＤ（Programmable Logic Device）、ＦＰＧＡ（Field Programmable Gate Array）等のハードウェアで実現してもよい。また、プロセッサー１５０は、フレームメモリーを有する画像処理回路を含んでもよい。

【0041】

生成部１５１は、指示体３００の位置に応じた画像情報ＤＳを生成する。具体的には、生成部１５１は、通信部１１０からの位置情報ＰＳに基づいて、指示体３００の位置に応じた第１画像オブジェクト情報Ｄ１または第２画像オブジェクト情報Ｄ２を生成し、第１画像オブジェクト情報Ｄ１または第２画像オブジェクト情報Ｄ２を用いて画像情報ＤＳを生成する。

【0042】

ここで、生成部１５１は、監視部１５２の監視結果に応じて、互いに異なる形式の第１画像オブジェクト情報Ｄ１および第２画像オブジェクト情報Ｄ２のうちのいずれかを生成する。また、生成部１５１は、生成した第１画像オブジェクト情報Ｄ１または第２画像オブジェクト情報Ｄ２をメモリー１４０に記憶した後、メモリー１４０に記憶された第１画像オブジェクト情報Ｄ１または第２画像オブジェクト情報Ｄ２を用いて画像情報ＤＳを生成する。さらに、生成部１５１は、メモリー１４０に記憶された第１画像オブジェクト情報Ｄ１または第２画像オブジェクト情報Ｄ２が後述するように編集部１５３により編集処理された場合、編集処理後の第１画像オブジェクト情報Ｄ１または第２画像オブジェクト情報Ｄ２を用いて画像情報ＤＳを生成する。なお、第１画像オブジェクト情報Ｄ１、第２画像オブジェクト情報Ｄ２および画像情報ＤＳの生成については、後に詳述する。

【0043】

監視部１５２は、生成部１５１に用いるシステムの負荷に関する負荷値を監視する。当該システムは、メモリー１４０およびプロセッサー１５０を含むコンピューターシステムである。したがって、当該システムの負荷は、情報処理装置１００の負荷であるともいえる。当該システムの負荷は、メモリー１４０またはプロセッサー１５０の使用率が高くなるほど大きい。メモリー１４０またはプロセッサー１５０の使用率は、当該システムが扱う情報の量が多くなるほど高くなる。ここで、当該システムが扱う情報には、第１画像オブジェクト情報Ｄ１および第２画像オブジェクト情報Ｄ２だけでなく、情報処理装置１００で扱う各種情報が含まれる。

【0044】

なお、以下では、メモリー１４０およびプロセッサー１５０を含むコンピューターシステムを単に「システム」ともいう。また、当該システムの負荷に関する負荷値を単に「負荷値」ともいう。

【0045】

本実施形態の監視部１５２は、プロセッサー１５０の使用率、表示される画像オブジェクトＧＤの数、および、指示体３００の数を監視対象として監視する。なお、監視部１５２の監視対象は、システムの負荷値に応じて変化するものであればよく、前述の監視対象に限定されず、例えば、メモリー１４０の使用率等でもよい。

【0046】

編集部１５３は、画像情報ＤＳを編集処理する。具体的には、編集部１５３は、ツールバーＧＴに対してポインターボタンＰＴＢを選択する操作が行われた場合、指示体３００の位置に応じて、画像情報ＤＳを編集処理する。このとき、編集部１５３は、編集後の画像オブジェクトＧＤを含む画像Ｇを示す画像情報ＤＳを生成する。ここで、編集部１５３は、通信部１１０からの位置情報ＰＳに基づいて、指示体３００の位置を特定する。また、編集部１５３は、通信部１１０からの操作情報ＳＳに基づいて、ツールバーＧＴに対してポインターボタンＰＴＢを選択する操作が行われたか否かを判断する。

【0047】

編集部１５３における編集処理としては、例えば、画像オブジェクトＧＤを移動するための移動処理、画像オブジェクトＧＤを回転させるための回転処理、画像オブジェクトＧＤを拡大するための拡大処理、画像オブジェクトＧＤを変形するための変形処理、画像オブジェクトＧＤの一部または全部を消去する消去処理等が挙げられる。以下、これらの編集処理のうち移動処理および拡大処理の具体例について代表的に説明する。なお、以下の画像オブジェクトＧＤの移動または拡大は、一例であり、これに限定されない。

【0048】

図４は、画像オブジェクトＧＤの移動の一例を示す図である。図５は、画像オブジェクトＧＤの拡大の一例を示す図である。

【0049】

例えば、図４および図５に示すように、ポインターボタンＰＴＢが選択されると、ポインターＧＰＴが表示される。図４および図５では、ポインターボタンＰＴＢが選択される状態が太線を用いて示される。ポインターＧＰＴは、指示体３００の位置に応じて画像Ｇ内を移動する。

【0050】

例えば、ポインターＧＰＴが画像オブジェクトＧＤに重なる位置で指示体３００がスクリーンＳＣに押し当てられることで、画像オブジェクトＧＤが選択される。すると、例えば、図４および図５に示すように、画像オブジェクトＧＤが選択されていることを示す枠ＧＦが表示される。

【0051】

図４および図５に示す例では、枠ＧＦは、矩形をなしており、枠ＧＦの各角および各辺の中点には、ドットが配置される。なお、枠ＧＦの形態は、図４および図５に示す例に限定されない。また、枠ＧＦとは異なる表示により、画像オブジェクトＧＤの選択が示されてもよい。

【0052】

ポインターＧＰＴが枠ＧＦのいずれか１つの辺のドット以外の部分に重なる状態で指示体３００がスクリーンＳＣに押し当てられた後、指示体３００がスクリーンＳＣに押し当てられたまま移動されることで、図４中の二点鎖線で示すように、画像オブジェクトＧＤが移動する。

【0053】

ポインターＧＰＴが枠ＧＦのいずれか１つの角のドットに重なる状態で指示体３００がスクリーンＳＣに押し当てられた後、指示体３００がスクリーンＳＣに押し当てられたまま枠ＧＦの外側に向かう方向へ移動されることで、図５中の二点鎖線で示すように、画像オブジェクトＧＤが拡大する。

【0054】

なお、ポインターＧＰＴが枠ＧＦのいずれか１つの角のドットに重なる状態で指示体３００がスクリーンＳＣに押し当てられた後、指示体３００がスクリーンＳＣに押し当てられたまま枠ＧＦの内側に向かう方向へ移動されることで、画像オブジェクトＧＤが縮小する。また、ポインターＧＰＴが枠ＧＦのいずれか１つの辺のドットに重なる状態で指示体３００がスクリーンＳＣに押し当てられた後、指示体３００がスクリーンＳＣに押し当てられたまま枠ＧＦの辺に交差する方向へ移動されることで、画像オブジェクトＧＤの縦横の長さ比が変化する。

【0055】

図６は、複数の画像オブジェクトＧＤを表示した状態の一例を示す図である。図６では、複数の画像オブジェクトＧＤのそれぞれがアルファベット文字を表示する場合が例示される。表示される画像オブジェクトＧＤの数が多くなるほど、システムの負荷が増大する。システムの負荷が大きくなりすぎると、生成部１５１における処理速度が低下する。生成部１５１における処理速度の低下は、指示体３００の描画動作とそれに基づく画像オブジェクトＧＤの表示との間のライムラグの増大を招く原因の１つである。

【0056】

そこで、生成部１５１は、前述の監視部１５２で監視される負荷値が閾値以上であるか否かに応じて、画像オブジェクト情報のデータ形式を変更する。ここで、生成部１５１は、前述の監視部１５２の監視対象のうちの少なくとも１つが設定値を超える場合、負荷値が閾値以上であると判断する。

【0057】

当該設定値は、監視対象の種類またはシステムの処理能力に応じて決められる。プロセッサー１５０の使用率に関する当該設定値は、システムの処理能力に応じて決められ、特に限定されないが、例えば、７０％以上１００％以下であることが好ましく、８０％以上９０％以下であることがより好ましい。画像オブジェクトＧＤの数に関する当該設定値は、システムの処理能力に応じて決められ、特に限定されないが、例えば、１０以上１００以下であることが好ましく、３０以上５０以下であることがより好ましい。指示体３００の数に関する当該設定値は、システムの処理能力に応じて決められ、特に限定されないが、例えば、２以上５以下であることが好ましく、２または３であることがより好ましい。

【0058】

図７は、負荷値の経時的変化の一例を示す図である。生成部１５１は、図７に示すように、負荷値が閾値未満である場合、第１モードを実行し、一方、負荷値が閾値以上である場合、第２モードを実行する。

【0059】

第１モードにおいて、生成部１５１は、指示体３００の位置に応じて第１画像オブジェクト情報Ｄ１を生成し、第１画像オブジェクト情報Ｄ１を用いて画像情報ＤＳを生成する。

【0060】

第１画像オブジェクト情報Ｄ１は、編集部１５３で編集処理可能な情報である。生成部１５１で生成された第１画像オブジェクト情報Ｄ１は、メモリー１４０に記憶され、その後、必要に応じて、編集部１５３での編集処理に用いられる。

【0061】

第１画像オブジェクト情報Ｄ１は、編集部１５３で編集処理可能な形式であればよいが、ベクター形式の情報であることが好ましい。ベクター形式は、円または直線等の解析幾何的な図形の集まりとして画像を表現する形式である。このため、ベクター形式の情報に基づく画像オブジェクトＧＤでは、拡大、縮小または変形等の編集が容易であるとともに、編集による画質の劣化が生じない。したがって、第１画像オブジェクト情報Ｄ１がベクター形式の情報であることにより、第１画像オブジェクト情報Ｄ１に基づく画像オブジェクトＧＤを好適に編集することができる。

【0062】

また、第１画像オブジェクト情報Ｄ１に用いるベクター形式の情報は、第１画像オブジェクト情報Ｄ１をオブジェクト単位で表す情報であることが好ましい。この場合、画像オブジェクトＧＤをオブジェクト単位で編集を行うことができる。ここで、オブジェクト単位とは、直線、曲線、文字または図形等の要素を単位とすることを意味する。

【0063】

一方、第２モードにおいて、生成部１５１は、指示体３００の位置に応じて第２画像オブジェクト情報Ｄ２を生成し、第２画像オブジェクト情報Ｄ２を用いて画像情報ＤＳを生成する。

【0064】

第２画像オブジェクト情報Ｄ２は、第１画像オブジェクト情報Ｄ１よりもシステムに与える負荷の小さい形式の情報である。生成部１５１で生成された第２画像オブジェクト情報Ｄ２は、メモリー１４０に記憶され、その後、必要に応じて、編集部１５３での編集処理に用いられる。

【0065】

第２画像オブジェクト情報Ｄ２は、第１画像オブジェクト情報Ｄ１よりもシステムに与える負荷の小さい形式であればよいが、ラスター形式の情報であることが好ましい。ラスター形式は、色情報等を有する画素の集合として画像を表現する形式である。一般に、ラスター形式の情報を生成する処理の負荷は、ベクター形式の情報を生成する処理の負荷に比べて小さい。したがって、第２画像オブジェクト情報Ｄ２がラスター形式の情報であることにより、第２モードの実行時における指示体３００の描画動作とそれに基づく画像オブジェクトＧＤの表示との間のタイムラグの発生を好適に低減することができる。また、ラスター形式は、表示装置２００の表示形式と同様であるため、画像情報ＤＳを生成する際に、ベクター形式を用いる場合のようなラスタライズ処理が不要である。このため、この点でも、第２モードの実行時における指示体３００の描画動作とそれに基づく画像オブジェクトＧＤの表示との間のタイムラグの発生を好適に低減することができる。

【0066】

図８は、第１モードから第２モードへの切り替えの可否を問い合わせる表示の一例を示す図である。生成部１５１は、監視部１５２で監視される負荷値が閾値未満から閾値以上に変化したとき、図８に示すように、第１モードから第２モードへの切り替えの可否を問い合わせる問合画像ＧＱを表示部２３０に表示させる。図８に示す例では、問合画像ＧＱには、「描画方式を変更しますか？」および「描画速度が速くなります」の文字と、指示体３００による操作を受け付けるボタンＢＹおよびＢＮとが表示される。なお、問合画像ＧＱの表示内容は、第１モードから第２モードへの切り替えの可否を問い合わせる内容であればよく、図８に示す例に限定されず、任意である。

【0067】

ボタンＢＹは、第１モードから第２モードへの切り替えを許可するためのボタンである。生成部１５１は、ボタンＢＹへの操作が行われると、第１モードから第２モードに切り替える。ボタンＢＮは、第１モードから第２モードへの切り替えを拒否するためのボタンである。生成部１５１は、ボタンＢＮへの操作が行われると、第１モードから第２モードに切り替えずに第１モードを維持する。なお、第１モードから第２モードへの切り替えを許可するか否かの操作は、問合画像ＧＱ以外の手段、例えば操作部１３０により行ってもよい。

【0068】

第１モードから第２モードに切り替えられた場合、すでに生成された第１画像オブジェクト情報Ｄ１は、メモリー１４０に記憶されたままでもよいし、メモリー１４０から削除してもよい。第１画像オブジェクト情報Ｄ１がメモリー１４０に記憶されたままである場合、第１モードから第２モードに切り替えられた後も、メモリー１４０に記憶された第１画像オブジェクト情報Ｄ１に基づく画像オブジェクトＧＤを編集することができる。一方、第１画像オブジェクト情報Ｄ１がメモリー１４０から削除される場合、第１画像オブジェクト情報Ｄ１がメモリー１４０に記憶されたままである場合に比べて、システムの負荷を低減することができ、この結果、生成部１５１での画像情報ＤＳの生成速度を高めることができる。

【0069】

第１画像オブジェクト情報Ｄ１をメモリー１４０から削除する場合、例えば、第１画像オブジェクト情報Ｄ１をベクター形式からラスター形式にラスタライズし、ラスタライズ後のオブジェクト情報をメモリーに記憶してもよい。ただし、ラスタライズ処理は、システムへの負荷の増大を招くため、描画動作が行われていない期間に行われることが好ましい。

【0070】

４．表示システムの動作
図９は、第１モードと第２モードとの切り替えの流れを示すフローチャートである。情報処理装置１００では、まず、図９に示すように、ステップＳ１１０において、生成部１５１が第１モードに設定する。このとき、監視部１５２は、システムの負荷に関する負荷値を監視する。

【0071】

次に、生成部１５１は、ステップＳ１２０において、プロセッサー１５０の使用率が設定値を超えたか否かを判断する。

【0072】

プロセッサー１５０の使用率が設定値を超えていない場合、ステップＳ１３０において、生成部１５１は、表示される画像オブジェクトＧＤの数が設定値を超えたか否かを判断する。

【0073】

表示される画像オブジェクトＧＤの数が設定値を超えていない場合、ステップＳ１４０において、生成部１５１は、アクティブ状態の指示体３００の数が設定値を超えたか否かを判断する。例えば、検出部２６０で検出した指示体３００の数に関する情報を、制御部２７１が通信部２１０により通信部１１０へ送信させ、通信部１１０は検出部２６０で検出した指示体３００の数に関する情報をプロセッサー１５０に送信し、プロセッサー１５０の監視部１５２が指示体３００の数に関する情報を監視し、監視部１５２が指示体３００の数が設定値を超えたと判断した時に生成部１５１に監視部１５２から通知がされることで、生成部１５１はアクティブ状態の指示体３００の数が設定値を超えたと判断する。

【0074】

プロセッサー１５０の使用率が設定値を超えず、表示される画像オブジェクトＧＤの数が設定値を超えず、かつ、アクティブ状態の指示体３００の数が設定値を超えない場合、生成部１５１は、前述のステップＳ１２０に戻る。

【0075】

これに対し、プロセッサー１５０の使用率が設定値を超えた場合、表示される画像オブジェクトＧＤの数が設定値を超えた場合、または、アクティブ状態の指示体３００の数が設定値を超えた場合、ステップＳ１５０において、生成部１５１は、問合画像ＧＱを表示部２３０に表示させる。

【0076】

問合画像ＧＱの表示後、ステップＳ１６０において、生成部１５１は、第１モードから第２モードへの切り替えの指示があるか否かを判断する。ここで、生成部１５１は、問合画像ＧＱのボタンＢＹへ操作が行われた場合、第１モードから第２モードへの切り替えの指示があると判断し、一方、問合画像ＧＱのボタンＢＮへ操作が行われた場合、第１モードから第２モードへの切り替えの指示がないと判断する。

【0077】

第１モードから第２モードへの切り替えの指示がある場合、ステップＳ１７０において、生成部１５１は、第１モードから第２モードに切り替えた後、ステップＳ１８０に移行する。一方、第１モードから第２モードへの切り替えの指示がない場合、生成部１５１は、第１モードから第２モードに切り替えずに、ステップＳ１８０に移行する。

【0078】

ステップＳ１８０において、生成部１５１は、終了指示があるか否かを判断し、ある場合、終了し、一方、ない場合、前述のステップＳ１２０に戻る。

【0079】

以上のように、表示装置２００の制御方法は、指示体３００の位置に応じて生成される画像情報ＤＳに基づく画像Ｇを表示する。この制御方法は、表示システム１０において実行される。表示システム１０は、表示装置２００と情報処理装置１００とを有する。情報処理装置１００は、指示体３００の位置に応じて生成される画像情報ＤＳに基づく画像Ｇを表示装置２００に表示させる。

【0080】

表示装置２００は、画像情報ＤＳに基づく画像Ｇを表示する表示部２３０を有する。情報処理装置１００は、生成部１５１と監視部１５２と編集部１５３とを有する。生成部１５１は、指示体３００の位置に応じて画像情報ＤＳを生成する。監視部１５２は、生成部１５１に用いるシステムの負荷に関する負荷値を監視する。編集部１５３は、画像情報ＤＳを編集処理する。

【0081】

ここで、生成部１５１は、負荷値が閾値未満である場合、第１モードを実行し、負荷値が閾値以上である場合、第２モードを実行する。第１モードは、指示体３００の位置に応じて第１画像オブジェクト情報Ｄ１を生成し、第１画像オブジェクト情報Ｄ１を用いて画像情報ＤＳを生成する。第１画像オブジェクト情報Ｄ１は、編集部１５３で編集処理可能な情報である。これに対し、第２モードは、指示体３００の位置に応じて第２画像オブジェクト情報Ｄ２を生成し、第２画像オブジェクト情報Ｄ２を用いて画像情報ＤＳを生成する。第２画像オブジェクト情報Ｄ２は、第１画像オブジェクト情報Ｄ１よりもシステムに与える負荷の小さい形式の情報である。

【0082】

以上の表示装置２００の制御方法、情報処理装置１００および表示システム１０において、第１モードでは、編集処理可能な第１画像オブジェクト情報Ｄ１を生成する。このため、第１画像オブジェクト情報Ｄ１に基づく画像オブジェクトＧＤを編集することができる。

【0083】

これに対し、第２モードでは、第１画像オブジェクト情報Ｄ１よりも処理負荷の小さい形式の第２画像オブジェクト情報Ｄ２を生成する。このため、第１モードを実行する場合に比べて、システムの処理負荷が軽減されることにより、画像情報ＤＳの生成速度を高めることができる。この結果、第２モードでは、第１モードを実行する場合に比べて、指示体３００の描画動作とそれに基づく画像オブジェクトＧＤの表示との間のタイムラグの発生を低減することができる。

【0084】

ここで、負荷値が閾値以上であるか否かにより第１モードおよび第２モードを切り替えるので、画像オブジェクトＧＤの編集が必要以上に制限されずに、前述の第１モードおよび第２モードによる効果が得られる。

【0085】

第１画像オブジェクト情報Ｄ１は、ベクター形式の情報であることが好ましい。この場合、第１画像オブジェクト情報Ｄ１に基づく画像オブジェクトＧＤを好適に編集することができる。これに対し、第２画像オブジェクト情報Ｄ２は、ラスター形式の情報であることが好ましい。この場合、第２モードの実行時における指示体３００の描画動作とそれに基づく画像オブジェクトＧＤの表示との間のタイムラグの発生を好適に低減することができる。

【0086】

第１画像オブジェクト情報Ｄ１に用いるベクター形式の情報は、第１画像オブジェクト情報Ｄ１をオブジェクト単位で表す情報であることが好ましい。この場合、画像オブジェクトＧＤ単位で編集を行うことができる。

【0087】

生成部１５１は、システムに含まれるプロセッサー１５０の使用率が設定値以上である場合、負荷値が閾値以上であると判断する。プロセッサー１５０の使用率が高いほど、システムの負荷に関する負荷値が大きい。したがって、プロセッサー１５０の使用率が設定値以上である場合、負荷値が閾値以上であると判断することができる。

【0088】

また、生成部１５１は、第１画像オブジェクト情報Ｄ１に基づく画像オブジェクトＧＤの数が設定値以上である場合、負荷値が閾値以上であると判断する。画像オブジェクトＧＤの数が多いほど、システムの負荷に関する負荷値が大きい。したがって、画像オブジェクトＧＤの数が設定値以上である場合、負荷値が閾値以上であると判断することができる。

【0089】

さらに、生成部１５１は、指示体３００の数が設定値以上である場合、負荷値が閾値以上であると判断する。指示体３００の数が多いほど、システムの負荷に関する負荷値が大きい。したがって、指示体３００の数が設定値以上である場合、負荷値が閾値以上であると判断することができる。

【0090】

また、生成部１５１は、負荷値が閾値以上である場合、第１モードから第２モードに切り替えるか否かを問い合わせる問合画像ＧＱを表示装置２００に表示させる。このため、負荷値が閾値以上である場合であっても、ユーザーの意思によらず、第１モードから第２モードに切り替わることを防止することができる。

【0091】

さらに、生成部１５１は、第２モードを実行する場合、画像情報ＤＳに対する編集を制限することが好ましい。この場合、第２モード時に編集を行う場合に比べて、システムの負荷を低減することができる。

【0092】

５．変形例
以上に例示した各形態は多様に変形され得る。前述の各形態に適用され得る具体的な変形の態様を以下に例示する。以下の例示から任意に選択された２以上の態様は、相互に矛盾しない範囲で適宜に併合され得る。

【0093】

前述の形態では、生成部１５１、監視部１５２および編集部１５３のすべてが情報処理装置１００の構成要素である場合が例示されるが、この例示に限定されず、生成部１５１、監視部１５２および編集部１５３のうちの一部または全部が表示装置２００の構成要素でもよい。また、生成部１５１の一部、監視部１５２の一部または編集部１５３の一部が表示装置２００の構成要素でもよい。

【0094】

また、前述の形態では、表示装置２００がプロジェクターである場合が例示されるが、本発明の表示装置は、プロジェクターに限定されず、例えば、液晶ディスプレイ、プラズマディスプレイまたは有機ＥＬ（electro-luminescence）ディスプレイ等の表示装置であってもよい。

【0095】

また、前述の形態では、表示装置２００および情報処理装置１００が別体である構成が例示されるが、この構成に限定されず、表示装置２００および情報処理装置１００が一体でもよい。すなわち、生成部１５１、監視部１５２、編集部１５３および表示部２３０のすべてが、ＰＣ等の情報処理装置の構成要素でもよいし、プロジェクター、液晶ディスプレイ、プラズマディスプレイまたは有機ＥＬ（electro-luminescence）ディスプレイ等の表示装置の構成要素でもよい。

【0096】

また、前述の形態では、監視部１５２の監視対象がプロセッサー１５０の使用率、画像オブジェクトＧＤの数、および指示体３００の数である場合が例示されるが、この例示に限定されず、例えば、監視部１５２の監視対象が前述の監視対象のうちの少なくとも１つを含んでいればよい。

【0097】

また、前述の形態では、監視部１５２で監視される負荷値が閾値未満から閾値以上となったとき、問合画像ＧＱを表示させる形態が例示されるが、この形態に限定されない。例えば、監視部１５２で監視される負荷値が閾値未満から閾値以上となったとき、問合画像ＧＱを表示せずに、第１モードから第２モードに切り替えてもよい。

【0098】

また、前述の形態では、表示装置２００がツールバーＧＴを画像Ｇに重ねて表示し、制御部２７１がツールバーＧＴに対する操作に応じて、その操作内容を示す操作情報ＳＳを生成する形態が例示されるが、この形態に限定されない。例えば、画像情報ＤＳにツールバーＧＴと同様な画像を表示させる情報が含まれており、画像ＧにツールバーＧＴを含めてもよい。また、このとき、プロセッサー１５０で通信部１１０を介して位置情報ＰＳを受信し、位置情報ＰＳに基づいてプロセッサー１５０が操作情報ＳＳを生成してもよい。

【符号の説明】

【0099】

１０…表示システム、１００…情報処理装置、１５０…プロセッサー、１５１…生成部、１５２…監視部、１５３…編集部、２００…表示装置、２３０…表示部、３００…指示体、Ｄ１…第１画像オブジェクト情報、Ｄ２…第２画像オブジェクト情報、ＤＳ…画像情報、Ｇ…画像、ＧＤ…画像オブジェクト、ＧＱ…問合画像。

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】