特許 7529357 アノテーション表示プログラムおよびアノテーション表示方法

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-07-29

(45)【発行日】2024-08-06

(54)【発明の名称】アノテーション表示プログラムおよびアノテーション表示方法

(51)【国際特許分類】

   H04L 67/00 20220101AFI20240730BHJP

   G06F 3/0481 20220101ALI20240730BHJP

【ＦＩ】

H04L67/00

G06F3/0481

【請求項の数】 6

(21)【出願番号】P 2020120218

(22)【出願日】2020-07-13

(65)【公開番号】P2022017114

(43)【公開日】2022-01-25

【審査請求日】2023-04-07

(73)【特許権者】

【識別番号】000005223

【氏名又は名称】富士通株式会社

(74)【代理人】

【識別番号】100104190

【弁理士】

【氏名又は名称】酒井 昭徳

(72)【発明者】

【氏名】畑田 晃希

(72)【発明者】

【氏名】岡林 桂樹

【審査官】岩田 玲彦

(56)【参考文献】

【文献】特開２０１３－１３７７３５（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｈ０４Ｌ ６７／００

Ｇ０６Ｆ ３／０４８１

(57)【特許請求の範囲】

【請求項1】

表示する画像データの切り替わりを検出したことに応じて、切り替わり前の第一の画像データにアノテーションが付されているか否かを判定し、
前記第一の画像データにアノテーションが付されていると判定した場合に、前記第一の画像データと対応付けて前記アノテーションを記憶部に記憶し、
切り替わり後の第二の画像データと類似する画像データが前記記憶部に存在するか否かを判定し、
前記類似する画像データが存在すると判定した場合、前記類似する画像データと対応付けて前記記憶部に記憶されているアノテーションを、前記第二の画像データに重畳して表示させる、
処理をコンピュータに実行させ、
前記記憶部は、表示された複数の画像データのそれぞれの画像データと対応付けて、当該画像データが最後に表示された時刻を記憶しており、
前記類似する画像データが存在するか否かを判定する処理は、
前記第二の画像データへ切り替わる前の前記第一の画像データへの切り替わりを検出した際に、前記第一の画像データに類似する画像データが前記記憶部に存在しなかった場合、前記記憶部を参照して、前記複数の画像データのうち最後に表示された時刻が新しい画像データから優先して、前記第二の画像データと類似するか否かを判定する、
ことを特徴とするアノテーション表示プログラム。

【請求項2】

前記記憶部は、表示された複数の画像データのそれぞれの画像データと対応付けて、当該画像データが最初に表示された時刻を記憶しており、
前記類似する画像データが存在するか否かを判定する処理は、
前記第二の画像データへ切り替わる前の前記第一の画像データへの切り替わりを検出した際に、前記第一の画像データに類似する画像データが前記記憶部に存在した場合、前記記憶部を参照して、前記複数の画像データのうち最初に表示された時刻が、前記第一の画像データに類似する画像データと近い画像データから優先して、前記第二の画像データと類似するか否かを判定する、ことを特徴とする請求項１に記載のアノテーション表示プログラム。

【請求項3】

前記第一の画像データにアノテーションが付されていると判定した場合、前記アノテーションを非表示にさせる、
処理を前記コンピュータに実行させることを特徴とする請求項１または２に記載のアノテーション表示プログラム。

【請求項4】

前記表示する画像データは、第一の装置から第二の装置に送信されて前記第二の装置に表示される画像データである、ことを特徴とする請求項１～３のいずれか一つに記載のアノテーション表示プログラム。

【請求項5】

表示する画像データの切り替わりを検出したことに応じて、切り替わり前の第一の画像データにアノテーションが付されているか否かを判定し、
前記第一の画像データにアノテーションが付されていると判定した場合に、前記第一の画像データと対応付けて前記アノテーションを記憶部に記憶し、
切り替わり後の第二の画像データと類似する画像データが前記記憶部に存在するか否かを判定し、
前記類似する画像データが存在すると判定した場合、前記類似する画像データと対応付けて前記記憶部に記憶されているアノテーションを、前記第二の画像データに重畳して表示させる、
処理をコンピュータに実行させ、
前記記憶部は、表示された複数の画像データのそれぞれの画像データと対応付けて、当該画像データが最初に表示された時刻を記憶しており、
前記類似する画像データが存在するか否かを判定する処理は、
前記第二の画像データへ切り替わる前の前記第一の画像データへの切り替わりを検出した際に、前記第一の画像データに類似する画像データが前記記憶部に存在した場合、前記記憶部を参照して、前記複数の画像データのうち最初に表示された時刻が、前記第一の画像データに類似する画像データと近い画像データから優先して、前記第二の画像データと類似するか否かを判定する、
ことを特徴とするアノテーション表示プログラム。

【請求項6】

表示する画像データの切り替わりを検出したことに応じて、切り替わり前の第一の画像データにアノテーションが付されているか否かを判定し、
前記第一の画像データにアノテーションが付されていると判定した場合に、前記第一の画像データと対応付けて前記アノテーションを記憶部に記憶し、
切り替わり後の第二の画像データと類似する画像データが前記記憶部に存在するか否かを判定し、
前記類似する画像データが存在すると判定した場合、前記類似する画像データと対応付けて前記記憶部に記憶されているアノテーションを、前記第二の画像データに重畳して表示させる、
処理をコンピュータが実行し、
前記記憶部は、表示された複数の画像データのそれぞれの画像データと対応付けて、当該画像データが最後に表示された時刻を記憶しており、
前記類似する画像データが存在するか否かを判定する処理は、
前記第二の画像データへ切り替わる前の前記第一の画像データへの切り替わりを検出した際に、前記第一の画像データに類似する画像データが前記記憶部に存在しなかった場合、前記記憶部を参照して、前記複数の画像データのうち最後に表示された時刻が新しい画像データから優先して、前記第二の画像データと類似するか否かを判定する、
ことを特徴とするアノテーション表示方法。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、アノテーション表示プログラムおよびアノテーション表示方法に関する。

【背景技術】

【0002】

従来、端末の画面をキャプチャし、キャプチャした画面を大画面ディスプレイに転送して映像を表示するシステムがある。例えば、ユーザは、大画面ディスプレイに表示された映像上で、手書きのストロークや付箋メモなどをアノテーションとして付与することができる。

【0003】

先行技術としては、例えば、操作に応じて切り替わる複数のコンテンツを含んで構成されるコンテンツデータと、コンテンツに対する視聴者のコメントを示すコメントデータとに基づいて、コンテンツの切り替わりに応じて、当該コンテンツに対するコメントの表示を制御するものがある。

【先行技術文献】

【特許文献】

【0004】

【文献】特開２０１７－５４１９２号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

しかしながら、従来技術では、端末に表示された画像を転送して他の端末に表示する場合に、表示する画像が切り替わると、切り替わり後の画像に対して、その画像に過去に付されたアノテーションを表示することができないという問題がある。

【0006】

一つの側面では、本発明は、画像データを表示する際に、その画像データに過去に付されたアノテーションを再表示可能にすることを目的とする。

【課題を解決するための手段】

【0007】

１つの実施態様では、表示する画像データの切り替わりを検出したことに応じて、切り替わり前の第一の画像データにアノテーションが付されているか否かを判定し、前記第一の画像データにアノテーションが付されていると判定した場合に、前記第一の画像データと対応付けて前記アノテーションを記憶部に記憶し、切り替わり後の第二の画像データと類似する画像データが前記記憶部に存在するか否かを判定し、前記類似する画像データが存在すると判定した場合、前記類似する画像データと対応付けて前記記憶部に記憶されているアノテーションを、前記第二の画像データに重畳して表示させる、アノテーション表示プログラムが提供される。

【発明の効果】

【0008】

本発明の一側面によれば、画像データを表示する際に、その画像データに過去に付されたアノテーションを再表示可能にすることができるという効果を奏する。

【図面の簡単な説明】

【0009】

【図1】図１は、実施の形態１にかかるアノテーション表示方法の一実施例を示す説明図である。

【図2】図２は、表示システム２００のシステム構成例を示す説明図である。

【図3】図３は、第一の情報処理端末２０１等のハードウェア構成例を示すブロック図である。

【図4】図４は、画像テーブル２２０の記憶内容の一例を示す説明図である。

【図5】図５は、アノテーションテーブル２３０の記憶内容の一例を示す説明図である。

【図6】図６は、ストロークテーブル６００の記憶内容の一例を示す説明図である。

【図7】図７は、実施の形態１にかかる第一の情報処理端末２０１の機能的構成例を示すブロック図である。

【図8】図８は、類似する画像データの検索順序を示す説明図（その１）である。

【図9】図９は、類似する画像データの検索順序を示す説明図（その２）である。

【図10】図１０は、実施の形態１にかかる第一の情報処理端末２０１のアノテーション表示処理手順の一例を示すフローチャート（その１）である。

【図11】図１１は、実施の形態１にかかる第一の情報処理端末２０１のアノテーション表示処理手順の一例を示すフローチャート（その２）である。

【図12】図１２は、実施の形態２にかかる第一の情報処理端末２０１および第二の情報処理端末２０２の機能的構成例を示すブロック図である。

【図13】図１３は、実施の形態２にかかる表示システム２００の動作例を示す説明図である。

【図14】図１４は、実施の形態２にかかる第一の情報処理端末２０１のアノテーション表示処理手順の一例を示すフローチャートである。

【図15】図１５は、実施の形態２にかかる第二の情報処理端末２０２のアノテーション表示処理手順の一例を示すフローチャートである。

【図16】図１６は、実施の形態３にかかる表示システム２００の動作例を示す説明図である。

【図17】図１７は、実施の形態４にかかる表示システム２００の動作例を示す説明図である。

【図18】図１８は、アノテーションテーブル１８００の記憶内容の一例を示す説明図である。

【発明を実施するための形態】

【0010】

以下に図面を参照して、本発明にかかるアノテーション表示プログラムおよびアノテーション表示方法の実施の形態を詳細に説明する。

【0011】

（実施の形態１）
図１は、実施の形態１にかかるアノテーション表示方法の一実施例を示す説明図である。図１において、第一の装置１０１は、表示する画像データを送信するコンピュータである。第二の装置１０２は、第一の装置１０１から受信した画像データを表示するコンピュータである。表示する画像データは、例えば、第一の装置１０１に表示された映像をキャプチャして得られる画像データである。

【0012】

第一の装置１０１は、例えば、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）、タブレット端末、スマートフォンなどのモバイル機器である。第二の装置１０２は、例えば、大画面ディスプレイを有する表示装置や、スクリーンなどに画像を表示（投影）する投影装置などである。

【0013】

第二の装置１０２において、ユーザは、第一の装置１０１の画面を複数人で共有しながらコミュニケーションをとることができる。また、第二の装置１０２において、ユーザは、ペン入力やジェスチャーインターフェースなどにより、表示された画像データ上にアノテーションを付すことができる。

【0014】

アノテーションとは、画像データに重畳して表示されるオブジェクトである。アノテーションは、例えば、画像データ上の注目すべき箇所を示したり、画像データ上の情報同士の関連を示したり、画像データに情報を補足したりする場合に付される。アノテーションとしては、画像データに合わせてユーザが作成する手書きのストローク、付箋メモ、スタンプ画像などが挙げられる。

【0015】

ここで、ある端末に表示された画像データを転送して他の端末に表示する場合、表示する画像データが切り替わって、画像データとアノテーションとの対応関係がなくなると、切り替わり後の画像データに対して、過去に当該画像データに付されたアノテーションを自動で表示することができない。

【0016】

一方で、表示する画像データの切り替え時に、ユーザが手動で、切り替わり前の画像データに付されたアノテーションを消したり、切り替わり後の画像データにもう一度アノテーションを付したりすることになると、手間や時間がかかり作業効率の低下を招くおそれがある。

【0017】

そこで、実施の形態１では、画像データを表示する際に、その画像データに過去に付されたアノテーションを再表示可能にするアノテーション表示方法について説明する。以下、第一の装置１０１の処理例について説明する。

【0018】

（１）第一の装置１０１は、表示する画像データの切り替わりを検出したことに応じて、切り替わり前の第一の画像データにアノテーションが付されているか否かを判定する。第一の装置１０１は、第一の画像データにアノテーションが付されていると判定した場合に、第一の画像データと対応付けてアノテーションを記憶部１１０に記憶する。

【0019】

図１の例では、第一の装置１０１に表示された画像データ１２１が、第一の装置１０１から第二の装置１０２に転送され、第二の装置１０２に表示された場合を想定する。画像データ１２１は、第一の装置１０１の画面をキャプチャした情報である。第二の装置１０２では、例えば、第一の装置１０１の画面（画像データ１２１）を複数人で共有しながらコミュニケーションをとることができる。また、第二の装置１０２では、表示された画像データ１２１上にアノテーションを付すことができる。

【0020】

ここでは、第二の装置１０２に表示された画像データ１２１上にアノテーション１３１が付された場合を想定する。アノテーション１３１は、画像データ１２１上の注目すべき箇所を示すストロークである。また、画像データ１２１上にアノテーション１３１が付された後、画像データ１２１から画像データ１２２に切り替わった場合を想定する。

【0021】

この場合、第一の装置１０１は、切り替わり前の画像データ１２１にアノテーションが付されているか否かを判定する。例えば、第一の装置１０１は、画像データ１２１に付されたアノテーション１３１を第二の装置１０２から取得した場合に、画像データ１２１にアノテーション１３１が付されていると判定してもよい。ここでは、第一の装置１０１は、第一の画像データ１２１にアノテーション１３１が付されていると判定し、第一の画像データ１２１と対応付けて、アノテーション１３１を記憶部１１０に記憶する。

【0022】

（２）第一の装置１０１は、切り替わり後の第二の画像データと類似する画像データが記憶部１１０に存在するか否かを判定する。第一の装置１０１は、類似する画像データが存在すると判定した場合、類似する画像データと対応付けて記憶部１１０に記憶されているアノテーションを、第二の画像データに重畳して表示させる。

【0023】

例えば、第一の装置１０１は、記憶部１１０に記憶されている画像データの中から、切り替わり後の画像データ１２２に類似する画像データを検索する。具体的には、例えば、第一の装置１０１は、切り替わり後の画像データ１２２と記憶部１１０に記憶された画像データとを比較して、画像データ同士の類似度を算出する。そして、第一の装置１０１は、算出した類似度が閾値以上の画像データが検索された場合に、類似する画像データが存在すると判定する。

【0024】

なお、類似する画像データを検索する技術としては、既存のいかなる技術を用いることにしてもよい。例えば、第一の装置１０１は、画像データの特徴量をもとに類似する画像データを検索することにしてもよい。

【0025】

ここでは、切り替わり後の画像データ１２２に類似する画像データ１２３が検索された場合を想定する。また、画像データ１２３と対応付けて、アノテーション１３２が記憶部１１０に記憶されている場合を想定する。この場合、第一の装置１０１は、画像データ１２３と対応付けて記憶部１１０に記憶されているアノテーション１３２を、画像データ１２２に重畳して表示させる。具体的には、例えば、第一の装置１０１は、アノテーション１３２を第二の装置１０２に転送して、第二の装置１０２に表示されている画像データ１２２に重畳してアノテーション１３２を表示させる。

【0026】

このように、第一の装置１０１によれば、画像データを表示する際に、その画像データに過去に付されたアノテーションを再表示することが可能となる。このため、表示する画像データの切り替え時に、ユーザが手動で、切り替わり後の画像データにもう一度アノテーションを付すという面倒な作業が不要となり、作業効率の向上を図ることができる。

【0027】

図１の例では、画像データ１２１から画像データ１２２に切り替わった際に、画像データ１２２（画像データ１２２に類似する画像データ１２３）に過去に付されたアノテーション１３２を再表示することができる。このため、ユーザが手動で、切り替わり後の画像データ１２２にもう一度アノテーションを付すという面倒な作業が不要となる。

【0028】

（表示システム２００のシステム構成例）
つぎに、実施の形態１にかかる表示システム２００のシステム構成例について説明する。表示システム２００は、例えば、ＰＣ等に表示された画像データを転送して大画面ディスプレイに表示することで、複数人で情報を共有可能にして共同作業を支援するコンピュータシステムに適用される。

【0029】

図２は、表示システム２００のシステム構成例を示す説明図である。図２において、表示システム２００は、第一の情報処理端末２０１と、第二の情報処理端末２０２と、情報管理サーバ２０３と、を含む。表示システム２００において、第一の情報処理端末２０１、第二の情報処理端末２０２および情報管理サーバ２０３は、有線または無線のネットワーク２１０を介して接続される。ネットワーク２１０は、例えば、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、ＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）、インターネットなどである。

【0030】

ここで、第一の情報処理端末２０１は、画像テーブル２２０およびアノテーションテーブル２３０を有する。第一の情報処理端末２０１は、例えば、個人が使用するＰＣやタブレットＰＣである。画像テーブル２２０およびアノテーションテーブル２３０の記憶内容については、図４および図５を用いて後述する。図１に示した第一の装置１０１は、例えば、第一の情報処理端末２０１に相当する。また、図１に示した記憶部１１０は、例えば、画像テーブル２２０およびアノテーションテーブル２３０に相当する。

【0031】

第二の情報処理端末２０２は、例えば、大画面ディスプレイを有する表示装置である。図１に示した第二の装置１０２は、例えば、第二の情報処理端末２０２に相当する。

【0032】

情報管理サーバ２０３は、各種情報を管理するコンピュータである。具体的には、例えば、情報管理サーバ２０３は、第一の情報処理端末２０１および第二の情報処理端末２０２で使用するアプリケーションや、第一の情報処理端末２０１および第二の情報処理端末２０２で表示する情報などを管理する。

【0033】

なお、図２の例では、第一の情報処理端末２０１および第二の情報処理端末２０２をそれぞれ１台のみ表示したが、これに限らない。例えば、表示システム２００には、複数の第一の情報処理端末２０１が含まれていてもよく、また、複数の第二の情報処理端末２０２が含まれていてもよい。また、表示システム２００には、情報管理サーバ２０３が含まれていなくてもよい。

【0034】

（第一の情報処理端末２０１および第二の情報処理端末２０２のハードウェア構成例）
つぎに、第一の情報処理端末２０１および第二の情報処理端末２０２のハードウェア構成例について説明する。ここでは、第一の情報処理端末２０１および第二の情報処理端末２０２を「第一の情報処理端末２０１等」と表記する。

【0035】

図３は、第一の情報処理端末２０１等のハードウェア構成例を示すブロック図である。図３において、第一の情報処理端末２０１等は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）３０１と、メモリ３０２と、ディスクドライブ３０３と、ディスク３０４と、通信Ｉ／Ｆ（Ｉｎｔｅｒｆａｃｅ）３０５と、ディスプレイ３０６と、入力装置３０７と、可搬型記録媒体Ｉ／Ｆ３０８と、可搬型記録媒体３０９と、を有する。また、各構成部は、バス３００によってそれぞれ接続される。

【0036】

ここで、ＣＰＵ３０１は、第一の情報処理端末２０１等の全体の制御を司る。ＣＰＵ３０１は、複数のコアを有していてもよい。メモリ３０２は、例えば、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）およびフラッシュＲＯＭなどを有する。具体的には、例えば、フラッシュＲＯＭがＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）のプログラムを記憶し、ＲＯＭがアプリケーションプログラムを記憶し、ＲＡＭがＣＰＵ３０１のワークエリアとして使用される。メモリ３０２に記憶されるプログラムは、ＣＰＵ３０１にロードされることで、コーディングされている処理をＣＰＵ３０１に実行させる。

【0037】

ディスクドライブ３０３は、ＣＰＵ３０１の制御に従ってディスク３０４に対するデータのリード／ライトを制御する。ディスク３０４は、ディスクドライブ３０３の制御で書き込まれたデータを記憶する。ディスク３０４としては、例えば、磁気ディスク、光ディスクなどが挙げられる。

【0038】

通信Ｉ／Ｆ３０５は、通信回線を通じてネットワーク２１０に接続され、ネットワーク２１０を介して外部のコンピュータ（例えば、図２に示した情報管理サーバ２０３）に接続される。そして、通信Ｉ／Ｆ３０５は、ネットワーク２１０と装置内部とのインターフェースを司り、外部のコンピュータからのデータの入出力を制御する。通信Ｉ／Ｆ３０５には、例えば、モデムやＬＡＮアダプタなどを採用することができる。

【0039】

ディスプレイ３０６は、カーソル、アイコンあるいはツールボックスをはじめ、文書、画像、機能情報などのデータを表示する表示装置である。ディスプレイ３０６としては、例えば、液晶ディスプレイや有機ＥＬ（Ｅｌｅｃｔｒｏｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイなどを採用することができる。

【0040】

入力装置３０７は、文字、数字、各種指示などの入力のためのキーを有し、データの入力を行う。入力装置３０７は、キーボードやマウスなどであってもよく、また、タッチパネル式の入力パッド、入力ペンおよびテンキーなどであってもよく、また、ジェスチャーインターフェースであってもよい。

【0041】

可搬型記録媒体Ｉ／Ｆ３０８は、ＣＰＵ３０１の制御に従って可搬型記録媒体３０９に対するデータのリード／ライトを制御する。可搬型記録媒体３０９は、可搬型記録媒体Ｉ／Ｆ３０８の制御で書き込まれたデータを記憶する。可搬型記録媒体３０９としては、例えば、ＣＤ（Ｃｏｍｐａｃｔ Ｄｉｓｃ）－ＲＯＭ、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ）、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）メモリなどが挙げられる。

【0042】

なお、第一の情報処理端末２０１等は、上述した構成部のうち、例えば、ディスクドライブ３０３、ディスク３０４、可搬型記録媒体Ｉ／Ｆ３０８、可搬型記録媒体３０９を有していなくてもよい。また、第一の情報処理端末２０１等は、上述した構成部のほかに、例えば、カメラ、スピーカ、マイクロフォンなどを有していてもよい。また、図２に示した情報管理サーバ２０３についても、第一の情報処理端末２０１等と同様のハードウェア構成により実現することができる。ただし、情報管理サーバ２０３は、上述した構成部のうち、例えば、ディスプレイ３０６、入力装置３０７を有していなくてもよい。

【0043】

（画像テーブル２２０の記憶内容）
つぎに、図４を用いて、第一の情報処理端末２０１が有する画像テーブル２２０の記憶内容について説明する。画像テーブル２２０は、例えば、図３に示したメモリ３０２、ディスク３０４などの記憶装置により実現される。

【0044】

図４は、画像テーブル２２０の記憶内容の一例を示す説明図である。図４において、画像テーブル２２０は、画像ＩＤ、画像データ、登録時刻および更新時刻のフィールドを有し、各フィールドに情報を設定することで、画像管理情報（例えば、画像管理情報４００－１～４００－３）をレコードとして記憶する。

【0045】

ここで、画像ＩＤは、画像データを一意に識別する識別子である。画像ＩＤは、例えば、画像データが最初に表示された際に採番される。画像データは、表示された画像データである。登録時刻は、画像データが最初に表示された日時を示す。更新時刻は、画像データが最後に表示された日時を示す。

【0046】

例えば、画像管理情報４００－１は、画像ＩＤ「１」の画像データＰＤ１の登録時刻「２０２０／０４／２８ １０：１０：００」および更新時刻「２０２０／０４／２８ １０：１０：００」を示す。ここでは、画像ＩＤ「１」の画像データＰＤ１は一度しか表示されていないため、登録時刻および更新時刻が同時刻となっている。

【0047】

（アノテーションテーブル２３０の記憶内容）
つぎに、図５を用いて、第一の情報処理端末２０１が有するアノテーションテーブル２３０の記憶内容について説明する。アノテーションテーブル２３０は、例えば、図３に示したメモリ３０２、ディスク３０４などの記憶装置により実現される。

【0048】

図５は、アノテーションテーブル２３０の記憶内容の一例を示す説明図である。図５において、アノテーションテーブル２３０は、画像ＩＤ、アノテーションＩＤおよび更新時刻のフィールドを有し、各フィールドに情報を設定することで、アノテーション管理情報（例えば、アノテーション管理情報５００－１～５００－３）をレコードとして記憶する。

【0049】

ここで、画像ＩＤは、アノテーションが付された画像データの画像ＩＤを示す。アノテーションＩＤは、アノテーションを一意に識別する識別子である。アノテーションＩＤは、例えば、アノテーション管理情報が作成された際に採番される。更新時刻は、アノテーションが作成または更新された日時を示す。

【0050】

例えば、アノテーション管理情報５００－１は、画像ＩＤ「１」、アノテーションＩＤ「１」および更新時刻「２０２０／０４／２８ １０：１０：２０」を示す。

【0051】

アノテーションの実体は、例えば、後述の図６に示すようなストロークテーブル６００に記憶される。ストロークテーブル６００は、例えば、アノテーションテーブル２３０に含まれる。ここで、アノテーションが手書きのストロークである場合を例に挙げて、ストロークテーブル６００の記憶内容について説明する。

【0052】

図６は、ストロークテーブル６００の記憶内容の一例を示す説明図である。図６において、ストロークテーブル６００は、アノテーションＩＤ、座標列、色および更新時刻のフィールドを有し、各フィールドに情報を設定することで、ストローク情報（例えば、ストローク情報６００－１～６００－３）をレコードとして記憶する。

【0053】

ここで、アノテーションＩＤは、アノテーションを一意に識別する識別子である。座標列は、アノテーションを構成するストロークを形成する座標の配列を示す。座標列は、例えば、画像データ（または、画面）上でのストロークの位置を特定する情報であり、ストロークを形成する各座標（ｘ，ｙ）を「ｘ₀，ｙ₀，ｘ₁，ｙ₁，ｘ₂，ｙ₂，…，ｘ_n，ｙ_n」と並べたものである。色は、ストロークの色を示す。更新時刻は、ストロークが作成または更新された日時を示す。

【0054】

例えば、ストローク情報６００－１～６００－３は、アノテーションＩＤ「１」のアノテーションを構成する３つのストロークそれぞれの座標列、色および更新時刻を示す。

【0055】

（第一の情報処理端末２０１の機能的構成例）
つぎに、図７を用いて、実施の形態１にかかる第一の情報処理端末２０１の機能的構成例について説明する。

【0056】

図７は、実施の形態１にかかる第一の情報処理端末２０１の機能的構成例を示すブロック図である。図７において、第一の情報処理端末２０１は、映像表示部７０１と、画像取得部７０２と、検出部７０３と、保存部７０４と、アノテーション表示部７０５と、記憶部７１０と、を含む。具体的には、例えば、映像表示部７０１～アノテーション表示部７０５は、図３に示した第一の情報処理端末２０１のメモリ３０２、ディスク３０４、可搬型記録媒体３０９などの記憶装置に記憶されたプログラムをＣＰＵ３０１に実行させることにより、または、通信Ｉ／Ｆ３０５により、その機能を実現する。各機能部の処理結果は、例えば、メモリ３０２、ディスク３０４などの記憶装置に記憶される。記憶部７１０は、例えば、メモリ３０２、ディスク３０４などの記憶装置により実現される。具体的には、例えば、記憶部７１０は、図４に示した画像テーブル２２０、図５に示したアノテーションテーブル２３０および図６に示したストロークテーブル６００を記憶する。

【0057】

映像表示部７０１は、映像データを表示する。ここで、映像データは、画像データの集合である。映像データは、例えば、プレゼンテーションソフトにより作成される文書やグラフなどのコンテンツをスライド形式で表示可能な情報である。映像データは、例えば、第一の情報処理端末２０１において作成されてもよく、また、図２に示した情報管理サーバ２０３から取得されてもよい。

【0058】

具体的には、例えば、映像表示部７０１は、自端末のディスプレイ３０６（図３参照）に映像データを表示する。また、映像表示部７０１は、自端末のディスプレイ３０６に表示された内容（画面）をキャプチャして得られる画像データを、図２に示した第二の情報処理端末２０２に送信する。画像データの送信は、例えば、１／３０秒程度の間隔で行われる。

【0059】

これにより、第一の情報処理端末２０１に表示された映像と同じ映像を第二の情報処理端末２０２に表示することができる。なお、映像表示部７０１は、例えば、第二の情報処理端末２０２に画像データを送信するにあたり、前回の画像データとの差分画像だけを送信して転送量を削減する転送方式を採用することにしてもよい。また、各種テーブル２２０，２３０等は、例えば、映像データごとに、当該映像データの表示が開始すると作成される。

【0060】

画像取得部７０２は、表示する画像データを取得する。ここで、表示する画像データは、例えば、第二の情報処理端末２０２に表示する画像データである。具体的には、例えば、画像取得部７０２は、映像表示部７０１によって自端末のディスプレイ３０６に表示された内容（画面）をキャプチャして画像データを取得する。

【0061】

なお、画像取得部７０２による取得処理は、例えば、一定時間ごとに行われる。一定時間は、任意に設定可能である。一定時間は、例えば、１～３秒程度の時間に設定されてもよく、また、第二の情報処理端末２０２への画像データの送信間隔と同程度の時間に設定されてもよい。

【0062】

以下の説明では、表示する画像データを「画像データＰＤ」と表記する場合がある。

【0063】

検出部７０３は、表示する画像データＰＤの切り替わりを検出する。具体的には、例えば、検出部７０３は、一定時間ごとに、画像取得部７０２によって取得された最新の画像データＰＤと、画像取得部７０２によって取得された直前の画像データＰＤとを比較して、画像データ同士の類似度を算出する。

【0064】

画像データ同士の類似度は、各画像データのＰＤの特徴量に基づいて算出される。なお、画像データ同士の類似度を算出する技術としては、既存のいかなる技術を用いることにしてもよい。例えば、検出部７０３は、深層学習などの機械学習に基づく技術を用いて、画像データ同士の類似度を算出することにしてもよい。

【0065】

そして、検出部７０３は、算出した類似度が閾値Ｔｈ１未満の場合に、表示する画像データＰＤの切り替わりを検出する。一方、検出部７０３は、算出した類似度が閾値Ｔｈ１以上の場合には、表示する画像データＰＤの切り替わりを検出しない。閾値Ｔｈ１は、任意に設定可能である。閾値Ｔｈ１は、例えば、プレゼンテーションソフトにより作成される情報のページの切り替わりが検出できる程度の値に設定される。

【0066】

また、検出部７０３は、例えば、自端末の入力装置３０７を用いたユーザの操作入力により、プレゼンテーションソフトにより作成される情報等のページの切り替えが行われた場合に、表示する画像データＰＤの切り替わりを検出することにしてもよい。

【0067】

保存部７０４は、表示する画像データＰＤの切り替わりが検出されたことに応じて、切り替わり前の第一の画像データＰＤにアノテーションが付されているか否かを判定する。ここで、アノテーションは、画像データＰＤに重畳して表示されるオブジェクトであり、例えば、手書きのストローク、付箋メモ、スタンプ画像などである。切り替わり前の第一の画像データＰＤは、検出部７０３によって切り替わりが検出された画像データＰＤの直前に画像取得部７０２によって取得された画像データＰＤである。

【0068】

具体的には、例えば、保存部７０４は、表示する画像データＰＤの切り替わりが検出されたことに応じて、第二の情報処理端末２０２に対して、表示中のアノテーションを送信するよう要求することにしてもよい。この場合、保存部７０４は、要求に応じて第二の情報処理端末２０２からアノテーションを受信した場合に、切り替わり前の第一の画像データＰＤにアノテーションが付されていると判定する。一方、第二の情報処理端末２０２からアノテーションを受信しなかった場合、保存部７０４は、切り替わり前の第一の画像データＰＤにアノテーションが付されていないと判定する。なお、アノテーションには、例えば、アノテーションの作成時刻を示す情報が付与されていてもよい。

【0069】

また、第二の情報処理端末２０２が、第一の情報処理端末２０１から送信された画像データを表示中にアノテーションが付された際に、そのアノテーションを第一の情報処理端末２０１に送信することにしてもよい。この場合、保存部７０４は、例えば、切り替わり直前の期間に、第二の情報処理端末２０２からアノテーションを受信（取得）した場合に、切り替わり前の第一の画像データＰＤにアノテーションが付されていると判定する。一方、保存部７０４は、切り替わり直前の期間に、第二の情報処理端末２０２からアノテーションを受信していない場合には、切り替わり前の第一の画像データＰＤにアノテーションが付されていないと判定する。

【0070】

切り替わり直前の期間は、検出部７０３によって画像データＰＤの切り替わりが検出された前回の検出時点から、検出部７０３によって画像データＰＤの切り替わりが検出された今回の検出時点までの期間である。ただし、初回の切り替わり時の場合、前回の検出時点は、例えば、映像表示部７０１によって映像データの表示が開始された時点である。

【0071】

また、画像データに付されたアノテーションの一部または全部が、削除または更新される場合がある。この場合、第二の情報処理端末２０２は、例えば、削除または更新後のアノテーションを、第一の情報処理端末２０１に送信することにしてもよい。これにより、第一の情報処理端末２０１は、アノテーションの一部または全部が削除や更新されても、画像データに付された最新のアノテーションを取得することができる。また、アノテーションの全部が削除された場合は、第一の情報処理端末２０１は、画像データにアノテーションが付されていないと判断することができる。

【0072】

保存部７０４は、第一の画像データＰＤにアノテーションが付されていると判定した場合に、第一の画像データＰＤと対応付けてアノテーションを記憶部７１０に記憶する。具体的には、例えば、保存部７０４は、第一の画像データＰＤにアノテーションが付されていると判定した場合、第一の画像データＰＤの画像ＩＤと対応付けて、アノテーションテーブル２３０に当該アノテーションを記憶する。

【0073】

ここで、画像ＩＤは、第一の画像データＰＤを一意に識別する識別子である。画像ＩＤは、例えば、画像テーブル２２０に画像データＰＤが新規登録される際に付与される。アノテーションの実体は、例えば、アノテーションＩＤと対応付けて、図６に示したようなストロークテーブル６００に記憶される。アノテーションの実体とは、アノテーションの形状、色、位置などを表す情報である。例えば、アノテーションが手書きのストロークの場合、保存部７０４は、アノテーションＩＤと対応付けて、座標列、色および更新時刻を、ストロークテーブル６００に記憶する。

【0074】

より詳細に説明すると、例えば、保存部７０４は、アノテーションテーブル２３０を参照して、切り替わり前の第一の画像データＰＤの画像ＩＤに対応するアノテーション管理情報を特定する。なお、各画像データＰＤの画像ＩＤに対応するアノテーション管理情報は、例えば、各画像データＰＤが最初に表示された際に作成される。アノテーションＩＤは、例えば、アノテーション管理情報を新規登録する際に採番される。

【0075】

そして、保存部７０４は、特定したアノテーション管理情報の更新時刻に現在時刻を設定する。また、保存部７０４は、特定したアノテーション管理情報のアノテーションＩＤと対応付けて、切り替わり前の第一の画像データＰＤに付されているアノテーションの実体を、図６に示したようなストロークテーブル６００に記憶する。例えば、アノテーションが手書きのストロークである場合、保存部７０４は、アノテーションＩＤと対応付けて、座標列、色および更新時刻を、ストロークテーブル６００に記憶する。

【0076】

また、保存部７０４は、切り替わり後の第二の画像データＰＤと類似する画像データが記憶部７１０に存在するか否かを判定する。切り替わり後の第二の画像データＰＤは、検出部７０３によって切り替わりが検出された画像データＰＤである。具体的には、例えば、保存部７０４は、第一の画像データＰＤにアノテーションが付されていると判定した場合に、画像テーブル２２０から、第二の画像データＰＤと類似する画像データを検索する。

【0077】

より詳細に説明すると、例えば、保存部７０４は、第二の画像データＰＤと、画像テーブル２２０に記憶された画像データとを比較して、画像データ同士の類似度を算出する。そして、保存部７０４は、算出した類似度が閾値Ｔｈ２以上の画像データを検索する。閾値Ｔｈ２は、任意に設定可能である。閾値Ｔｈ２は、例えば、類似度が閾値Ｔｈ２以上であれば、画像データ同士が同じ画像データであると判断できる程度の値に設定される。

【0078】

ここで、類似度が閾値Ｔｈ２以上の画像データが検索された場合、保存部７０４は、第二の画像データＰＤと類似する画像データが存在すると判定する。類似する画像データは、類似度が閾値Ｔｈ２以上の画像データである。この際、保存部７０４は、検索された類似する画像データに対応する更新時刻を更新する。例えば、保存部７０４は、更新時刻を現在時刻に更新する。一方、類似度が閾値Ｔｈ２以上の画像データが検索されなかった場合、保存部７０４は、第二の画像データＰＤと類似する画像データが存在しないと判定する。

【0079】

保存部７０４は、第二の画像データＰＤと類似する画像データが存在しないと判定した場合、第二の画像データＰＤを記憶部７１０に記憶する。具体的には、例えば、保存部７０４は、第二の画像データＰＤと類似する画像データが存在しないと判定した場合、第二の画像データＰＤに画像ＩＤを付与する。そして、保存部７０４は、付与した画像ＩＤと対応付けて、第二の画像データＰＤ、登録時刻および更新時刻を画像テーブル２２０に新規登録する。ここでの登録時刻および更新時刻は、例えば、第二の画像データＰＤの登録時の日時である。

【0080】

アノテーション表示部７０５は、第一の画像データＰＤにアノテーションが付されていると判定された場合に、第一の画像データＰＤに付されているアノテーションを非表示にさせる。具体的には、例えば、アノテーション表示部７０５は、アノテーション非表示制御メッセージを、第二の情報処理端末２０２に送信する。

【0081】

アノテーション非表示制御メッセージは、表示中の画像データに重畳して表示されているアノテーションを非表示にするよう指示するメッセージである。第二の情報処理端末２０２は、アノテーション非表示制御メッセージを受信すると、自端末のディスプレイ３０６に表示された画像データに重畳して表示中のアノテーションを非表示にする。

【0082】

また、アノテーション表示部７０５は、第二の画像データＰＤと類似する画像データが存在すると判定された場合、類似する画像データと対応付けて記憶部７１０に記憶されているアノテーションを、第二の画像データＰＤに重畳して表示させる。

【0083】

具体的には、例えば、アノテーション表示部７０５は、画像テーブル２２０から検索された第二の画像データＰＤと類似する画像データと対応付けてアノテーションテーブル２３０に記憶されているアノテーションを特定する。そして、アノテーション表示部７０５は、特定したアノテーションを第二の情報処理端末２０２に送信することにより、第二の画像データＰＤに重畳してアノテーションを表示させる。

【0084】

例えば、画像テーブル２２０から検索された第二の画像データＰＤと類似する画像データの画像ＩＤを「１」とする。また、アノテーションが手書きのストロークである場合を想定する。この場合、アノテーション表示部７０５は、アノテーションテーブル２３０を参照して、画像ＩＤ「１」に対応するアノテーションＩＤ「１」を特定する。

【0085】

つぎに、アノテーション表示部７０５は、ストロークテーブル６００を参照して、アノテーションＩＤ「１」に対応するストローク情報６００－１～６００－３を特定する。そして、アノテーション表示部７０５は、特定したストローク情報６００－１～６００－３を含むアノテーション表示制御メッセージを、第二の情報処理端末２０２に送信する。

【0086】

アノテーション表示制御メッセージは、表示中の画像データに重畳してアノテーションを表示するよう指示するメッセージである。第二の情報処理端末２０２は、アノテーション表示制御メッセージを受信すると、アノテーション表示制御メッセージに含まれるストローク情報６００－１～６００－３に基づいて、自端末のディスプレイ３０６に表示中の画像データに重畳して、アノテーション（手書きのストローク）を表示する。

【0087】

また、保存部７０４は、第二の画像データＰＤと類似する画像データが記憶部７１０に存在するか否かを判定するにあたり、前回の画像切り替わり時に、類似する画像データが記憶部７１０に存在したか否かを判断することにしてもよい。前回の画像切り替わり時とは、第二の画像データＰＤへ切り替わる前の第一の画像データＰＤへの切り替わりが検出されたときである。

【0088】

すなわち、保存部７０４は、第二の画像データＰＤへ切り替わる前の第一の画像データＰＤへの切り替わりが検出された際に、第一の画像データＰＤに類似する画像データが記憶部７１０（例えば、画像テーブル２２０）に存在したか否かを判断することにしてもよい。

【0089】

ここで、第一の画像データＰＤに類似する画像データが記憶部７１０に存在しなかった場合、保存部７０４は、記憶部７１０を参照して、複数の画像データのうち最後に表示された時刻が新しい画像データから優先して、第二の画像データＰＤと類似するか否かを判定することにしてもよい。

【0090】

一方、第一の画像データＰＤに類似する画像データが記憶部７１０に存在した場合、保存部７０４は、記憶部７１０を参照して、複数の画像データのうち最初に表示された時刻が、第一の画像データＰＤに類似する画像データと近い画像データから優先して、第二の画像データＰＤと類似するか否かを判定することにしてもよい。

【0091】

第二の画像データＰＤと類似する画像データが存在するか否かを判定する際の処理内容については、図８および図９を用いて後述する。

【0092】

なお、上述した第一の情報処理端末２０１の機能部うちの映像表示部７０１については、例えば、本アノテーション表示プログラムとは異なる既存の画像転送アプリケーションにより実現されることにしてもよい。

【0093】

また、上述した説明では、第二の情報処理端末２０２に表示された画像データに重畳してアノテーションを表示させる場合を例に挙げて説明したが、これに限らない。例えば、本アノテーション表示プログラムは、第一の情報処理端末２０１に表示される画像データに重畳してアノテーションを表示させる場合に適用することにしてもよい。

【0094】

また、上述した第一の情報処理端末２０１の各機能部は、表示システム２００内の他のコンピュータ、例えば、第二の情報処理端末２０２により実現されることにしてもよい。この場合、画像テーブル２２０およびアノテーションテーブル２３０は、第二の情報処理端末２０２が有する。

【0095】

（類似する画像データが存在するか否かの判定処理）
つぎに、図８および図９を用いて、第二の画像データＰＤと類似する画像データが存在するか否かを判定する際の処理内容の一例について説明する。ここでは、画像テーブル２２０から、第二の画像データＰＤと類似する画像データを検索する場合を想定する。画像テーブル２２０には、第二の画像データＰＤと類似する画像データが検索されなかった場合に、第二の画像データＰＤが新規登録される。

【0096】

図８および図９は、類似する画像データの検索順序を示す説明図である。保存部７０４は、第二の画像データＰＤと類似する画像データが画像テーブル２２０に存在するか否かを判定するにあたり、前回の画像切り替わり時に、類似する画像データが画像テーブル２２０に存在したか否かを判断する。

【0097】

なお、前回の画像切り替わり時とは、第二の画像データＰＤへ切り替わる前の第一の画像データＰＤへの切り替わりが検出されたときである。

【0098】

まず、第一の画像データＰＤに類似する画像データが画像テーブル２２０に存在しなかった場合を想定する。前回の画像切り替わり時に類似する画像データが検索されなかったということは、例えば、スライド番号に従って、新しいスライド（ページ）を順次閲覧しているような使用シーンが想定される。

【0099】

この場合、表示されるスライドのスライド番号は、「１⇒２⇒１００」のように大きくジャンプするように変化するのではなく、「１⇒２⇒３⇒２⇒３」といった感じで変化することが多い。このため、保存部７０４は、例えば、画像テーブル２２０に記憶された複数の画像データのうち最後に表示された時刻が新しい画像データから優先して、第二の画像データＰＤと類似するか否かを判定する。

【0100】

最後に表示された時刻は、画像テーブル２２０内の更新時刻に相当する。すなわち、保存部７０４は、画像テーブル２２０を参照して、更新時刻が最新の画像データから優先して、第二の画像データＰＤとの類似度を算出することにより、第二の画像データＰＤと類似する画像データを検索する。

【0101】

図８の例では、保存部７０４は、画像テーブル２２０内の更新時刻を参照して、画像データ「ＰＤ５⇒ＰＤ４⇒ＰＤ３⇒ＰＤ２⇒ＰＤ１」の順に、第二の画像データＰＤとの類似度を算出する（図８中、矢印８００参照）。これにより、画像テーブル２２０の中から、第二の画像データＰＤと類似する画像データを効率的に検索することができる。

【0102】

つぎに、第一の画像データＰＤに類似する画像データが画像テーブル２２０に存在した場合を想定する。前回の画像切り替わり時に類似する画像データが検索されたということは、例えば、閲覧済みの前のページに戻って議論をやり直しているような使用シーンが想定される。

【0103】

例えば、「１⇒２⇒３⇒…⇒９８⇒９９⇒１００」のようにスライド番号順にページを閲覧した後、スライド番号が「３」のページにジャンプした場合、その後はスライド番号が「３」に近いページを閲覧する可能性が高いといえる。このため、保存部７０４は、例えば、画像テーブル２２０に記憶された複数の画像データのうち最初に表示された時刻が、第一の画像データＰＤに類似する画像データと近い画像データから優先して、第二の画像データＰＤと類似するか否かを判定する。

【0104】

最初に表示された時刻は、画像テーブル２２０内の登録時刻に相当する。すなわち、保存部７０４は、画像テーブル２２０を参照して、登録時刻が、第一の画像データＰＤに類似する画像データと近い画像データから優先して、第二の画像データＰＤとの類似度を算出することにより、第二の画像データＰＤと類似する画像データを検索する。

【0105】

図９の例では、第一の画像データＰＤと類似する画像データを「画像データＰＤ３」とする。この場合、保存部７０４は、画像テーブル２２０内の登録時刻を参照して、画像データＰＤ３と登録時刻が近い画像データ「ＰＤ４⇒ＰＤ２⇒ＰＤ１⇒ＰＤ５」の順に、第二の画像データＰＤとの類似度を算出する（図９中、矢印９００参照）。これにより、画像テーブル２２０の中から、第二の画像データＰＤと類似する画像データを効率的に検索することができる。

【0106】

なお、図９に示した画像データＰＤ２，ＰＤ４のように、第一の画像データＰＤと類似する画像データの登録時刻との時間差が同じ画像データが複数存在する場合は、それらの画像データをどの順番で類似度を算出するかは、任意に設定可能である。

【0107】

（第一の情報処理端末２０１のアノテーション表示処理手順）
つぎに、実施の形態１にかかる第一の情報処理端末２０１のアノテーション表示処理手順について説明する。ここでは、第一の情報処理端末２０１から第二の情報処理端末２０２に映像データを送信する場合を想定する。また、第一の情報処理端末２０１から第二の情報処理端末２０２への映像データの送信は開始されている場合を想定する。

【0108】

図１０および図１１は、実施の形態１にかかる第一の情報処理端末２０１のアノテーション表示処理手順の一例を示すフローチャートである。図１０のフローチャートにおいて、まず、第一の情報処理端末２０１は、表示する画像データＰＤの切り替わりを検出したか否かを判断する（ステップＳ１００１）。

【0109】

ここで、第一の情報処理端末２０１は、表示する画像データＰＤの切り替わりを検出するのを待つ（ステップＳ１００１：Ｎｏ）。第一の情報処理端末２０１は、表示する画像データＰＤの切り替わりを検出した場合（ステップＳ１００１：Ｙｅｓ）、切り替わり前の第一の画像データＰＤにアノテーションが付されているか否かを判定する（ステップＳ１００２）。

【0110】

ここで、アノテーションが付されていない場合（ステップＳ１００２：Ｎｏ）、第一の情報処理端末２０１は、ステップＳ１００５に移行する。一方、アノテーションが付されている場合（ステップＳ１００２：Ｙｅｓ）、第一の情報処理端末２０１は、切り替わり前の第一の画像データＰＤと対応付けて、第一の画像データＰＤに付されているアノテーションを、アノテーションテーブル２３０に記憶する（ステップＳ１００３）。

【0111】

そして、第一の情報処理端末２０１は、第一の画像データＰＤに付されているアノテーションを非表示にさせる（ステップＳ１００４）。具体的には、例えば、第一の情報処理端末２０１は、アノテーション非表示制御メッセージを、第二の情報処理端末２０２に送信する。なお、ステップＳ１００２において、第一の情報処理端末２０１は、切り替わり後の画面データＰＤが最初の画像データＰＤの場合、ステップＳ１００５に移行する。

【0112】

つぎに、第一の情報処理端末２０１は、切り替わり後の第二の画像データＰＤを取得する（ステップＳ１００５）。そして、第一の情報処理端末２０１は、画像テーブル２２０から、取得した第二の画像データＰＤと類似する画像データを検索する（ステップＳ１００６）。

【0113】

つぎに、第一の情報処理端末２０１は、類似する画像データが検索されたか否かを判断する（ステップＳ１００７）。ここで、類似する画像データが検索された場合（ステップＳ１００７：Ｙｅｓ）、第一の情報処理端末２０１は、ステップＳ１００９に移行して、検索された類似する画像データの画像ＩＤを取得して（ステップＳ１００９）、図１１に示すステップＳ１１０１に移行する。

【0114】

一方、類似する画像データが検索されなかった場合（ステップＳ１００７：Ｎｏ）、第一の情報処理端末２０１は、切り替わり後の第二の画像データＰＤを画像テーブル２２０に新規登録する（ステップＳ１００８）。この際、第一の情報処理端末２０１は、切り替わり後の第二の画像データＰＤに画像ＩＤを採番する。そして、第一の情報処理端末２０１は、切り替わり後の第二の画像データＰＤの画像ＩＤを取得して（ステップＳ１００９）、図１１に示すステップＳ１１０１に移行する。

【0115】

図１１のフローチャートにおいて、まず、第一の情報処理端末２０１は、アノテーションテーブル２３０から、取得した画像ＩＤに対応するアノテーション管理情報を検索する（ステップＳ１１０１）。そして、第一の情報処理端末２０１は、アノテーション管理情報が検索されたか否かを判断する（ステップＳ１１０２）。

【0116】

ここで、アノテーション管理情報が検索されなかった場合（ステップＳ１１０２：Ｎｏ）、第一の情報処理端末２０１は、アノテーションテーブル２３０に、取得した画像ＩＤに対応するアノテーション管理情報を新規作成して（ステップＳ１１０３）、本フローチャートによる一連の処理を終了する。

【0117】

一方、アノテーション管理情報が検索された場合（ステップＳ１１０２：Ｙｅｓ）、第一の情報処理端末２０１は、検索したアノテーション管理情報を参照して、取得した画像ＩＤに対応付けて記憶されているアノテーションを特定する（ステップＳ１１０４）。そして、第一の情報処理端末２０１は、特定したアノテーションを、切り替わり後の第二の画像データＰＤに重畳して表示させて（ステップＳ１１０５）、本フローチャートによる一連の処理を終了する。

【0118】

これにより、第一の情報処理端末２０１から第二の情報処理端末２０２に画像データを転送して表示する際に、その画像データに過去に付されたアノテーションを再表示することが可能となる。なお、ステップＳ１１０４において、取得した画像ＩＤに対応付けて記憶されているアノテーションがストロークテーブル６００等から特定されなかった場合、切り替わり後の第二の画像データＰＤにアノテーションは表示されない。

【0119】

以上説明したように、実施の形態１にかかる表示システム２００によれば、第一の情報処理端末２０１は、表示する画像データＰＤの切り替わりを検出したことに応じて、切り替わり前の第一の画像データＰＤにアノテーションが付されているか否かを判定し、第一の画像データＰＤにアノテーションが付されていると判定した場合に、第一の画像データＰＤと対応付けて当該アノテーションを記憶部７１０に記憶することができる。また、第一の情報処理端末２０１は、切り替わり後の第二の画像データＰＤと類似する画像データが記憶部７１０に存在するか否かを判定し、類似する画像データが存在すると判定した場合、類似する画像データと対応付けて記憶部７１０に記憶されているアノテーションを、第二の画像データＰＤに重畳して表示させることができる。表示する画像データＰＤは、例えば、第一の情報処理端末２０１から第二の情報処理端末２０２に送信されて第二の情報処理端末２０２に表示される画像データである。

【0120】

これにより、画像データを表示する際に、その画像データに過去に付されたアノテーションを再表示することが可能となる。このため、表示する画像データの切り替え時に、ユーザが手動で、切り替わり後の画像データにもう一度アノテーションを付すという面倒な作業が不要となる。

【0121】

また、実施の形態１にかかる表示システム２００によれば、第一の情報処理端末２０１は、切り替わり後の第二の画像データＰＤと類似する画像データが存在するか否かを判定するにあたり、前回の画像切り替わり時に、類似する画像データが記憶部７１０に存在したか否かを判断することにしてもよい。前回の画像切り替わり時とは、第二の画像データＰＤへ切り替わる前の第一の画像データＰＤへの切り替わりが検出されたときである。そして、第一の情報処理端末２０１は、前回の画像切り替わり時に類似する画像データが存在しなかった場合、記憶部７１０を参照して、複数の画像データのうち最後に表示された時刻が新しい画像データから優先して、第二の画像データＰＤと類似するか否かを判定することができる。

【0122】

これにより、例えば、スライド番号に従って、新しいスライド（ページ）を順次閲覧しているような使用シーンにおいて、第二の画像データＰＤと類似する画像データを効率的に検索することができる。

【0123】

また、実施の形態１にかかる表示システム２００によれば、第一の情報処理端末２０１は、前回の画像切り替わり時に類似する画像データが存在した場合、記憶部７１０を参照して、複数の画像データのうち最初に表示された時刻が、第一の画像データＰＤに類似する画像データと近い画像データから優先して、第二の画像データＰＤと類似するか否かを判定することができる。

【0124】

これにより、例えば、閲覧済みの前のページに戻って議論をやり直しているような使用シーンにおいて、第二の画像データＰＤと類似する画像データを効率的に検索することができる。

【0125】

また、実施の形態１にかかる表示システム２００によれば、第一の情報処理端末２０１は、第一の画像データＰＤにアノテーションが付されていると判定した場合、当該アノテーションを非表示にさせることができる。

【0126】

これにより、ユーザが手動で、切り替わり前の画像データに付されたアノテーションを消すという面倒な作業が不要となる。

【0127】

これらのことから、実施の形態１にかかる表示システム２００によれば、表示する画像データの切り替え時に、ユーザが手動で、切り替わり前の画像データに付されたアノテーションを消したり、切り替わり後の画像データにもう一度アノテーションを付したりする作業が不要となり、作業効率の向上を図ることができる。また、表示する画像データに対応付けてアノテーションを保存するため、文書やグラフなどのコンテンツを作成するアプリケーション（例えば、プレゼンテーションソフト）自体にアノテーションを保存する機能を追加しなくてもよい。また、プレゼンテーションソフトなどでコンテンツ作成時に各スライド（ページ）を一意に識別するスライドＩＤなどが予め付与されていなくても、画像データ同士の類似度合いから画像データを識別して、その画像データに過去に付されたアノテーションを再表示することができる。

【0128】

（実施の形態２）
つぎに、実施の形態２にかかるアノテーション表示方法について説明する。実施の形態２では、実施の形態１にかかる第一の情報処理端末２０１が有する機能を、表示システム２００内の複数のコンピュータにより実現する場合について説明する。なお、実施の形態１で説明した箇所と同様の箇所については、図示および説明を省略する。

【0129】

（表示システム２００の機能的構成例）
つぎに、図１２を用いて、実施の形態２にかかる表示システム２００の機能的構成例について説明する。ここでは、実施の形態２では、実施の形態１にかかる第一の情報処理端末２０１が有する機能を、表示システム２００内の第一の情報処理端末２０１および第二の情報処理端末２０２により実現する場合について説明する。

【0130】

図１２は、実施の形態２にかかる第一の情報処理端末２０１および第二の情報処理端末２０２の機能的構成例を示すブロック図である。まず、実施の形態２にかかる第一の情報処理端末２０１の機能的構成例について説明する。

【0131】

図１２において、第一の情報処理端末２０１は、第一の映像表示部１２１１と、画像取得部１２１２と、検出部１２１３と、第一の保存部１２１４と、第一の記憶部１２１５と、を含む。具体的には、例えば、第一の映像表示部１２１１～第一の保存部１２１４は、図３に示した第一の情報処理端末２０１のメモリ３０２、ディスク３０４、可搬型記録媒体３０９などの記憶装置に記憶されたプログラムをＣＰＵ３０１に実行させることにより、または、通信Ｉ／Ｆ３０５により、その機能を実現する。各機能部の処理結果は、例えば、第一の情報処理端末２０１のメモリ３０２、ディスク３０４などの記憶装置に記憶される。また、第一の記憶部１２１５は、例えば、第一の情報処理端末２０１のメモリ３０２、ディスク３０４などの記憶装置により実現される。具体的には、例えば、第一の記憶部１２１５は、図４に示した画像テーブル２２０を記憶する。

【0132】

第一の映像表示部１２１１は、映像データを表示する。具体的には、例えば、第一の映像表示部１２１１は、自端末のディスプレイ３０６に映像データを表示する。また、第一の映像表示部１２１１は、自端末のディスプレイ３０６に表示された内容（画面）をキャプチャして得られる画像データを、第二の情報処理端末２０２に送信する。

【0133】

画像取得部１２１２は、表示する画像データＰＤを取得する。具体的には、例えば、画像取得部１２１２は、第一の映像表示部１２１１によって自端末のディスプレイ３０６に表示された内容（画面）をキャプチャして画像データを取得する。なお、画像取得部１２１２による取得処理は、例えば、一定時間ごとに行われる。

【0134】

検出部１２１３は、表示する画像データＰＤの切り替わりを検出する。具体的には、例えば、検出部１２１３は、一定時間ごとに、画像取得部１２１２によって取得された最新の画像データＰＤと、画像取得部１２１２によって取得された直前の画像データＰＤとを比較して、画像データ同士の類似度を算出する。

【0135】

そして、検出部１２１３は、算出した類似度が閾値Ｔｈ１未満の場合に、表示する画像データＰＤの切り替わりを検出する。一方、検出部１２１３は、算出した類似度が閾値Ｔｈ１以上の場合には、表示する画像データＰＤの切り替わりを検出しない。また、検出部１２１３は、例えば、自端末の入力装置３０７を用いたユーザの操作入力により、プレゼンテーションソフトにより作成される情報等のページの切り替えが行われた場合に、表示する画像データＰＤの切り替わりを検出することにしてもよい。

【0136】

第一の保存部１２１４は、表示する画像データＰＤの切り替わりが検出されたことに応じて、アノテーション非表示制御メッセージを、第二の情報処理端末２０２に送信する。アノテーション非表示制御メッセージは、表示中の画像データに重畳して表示されているアノテーションを非表示にするよう指示するメッセージである。

【0137】

なお、アノテーション非表示制御メッセージには、切り替わり前の第一の画像データＰＤを識別する識別子、例えば、第一の画像データＰＤの画像ＩＤが含まれていてもよい。

【0138】

また、第一の保存部１２１４は、切り替わり後の第二の画像データＰＤと類似する画像データが第一の記憶部１２１５に存在するか否かを判定する。具体的には、例えば、第一の保存部１２１４は、画像テーブル２２０から、第二の画像データＰＤと類似する画像データを検索する。

【0139】

より詳細に説明すると、例えば、第一の保存部１２１４は、第二の画像データＰＤと、画像テーブル２２０に記憶された画像データとを比較して、画像データ同士の類似度を算出する。そして、第一の保存部１２１４は、算出した類似度が閾値Ｔｈ２以上の画像データを検索する。ここで、類似度が閾値Ｔｈ２以上の画像データが検索された場合、第一の保存部１２１４は、第二の画像データＰＤと類似する画像データが存在すると判定する。一方、類似度が閾値Ｔｈ２以上の画像データが検索されなかった場合、第一の保存部１２１４は、第二の画像データＰＤと類似する画像データが存在しないと判定する。

【0140】

第一の保存部１２１４は、第二の画像データＰＤと類似する画像データが存在しないと判定した場合、第二の画像データＰＤを第一の記憶部１２１５に記憶する。具体的には、例えば、第一の保存部１２１４は、第二の画像データＰＤと類似する画像データが存在しないと判定した場合、第二の画像データＰＤに画像ＩＤを付与する。そして、第一の保存部１２１４は、付与した画像ＩＤと対応付けて、第二の画像データＰＤ、登録時刻および更新時刻を画像テーブル２２０に新規登録する。ここでの登録時刻および更新時刻は、例えば、第二の画像データＰＤの登録時の日時である。

【0141】

また、第一の保存部１２１４は、第二の画像データＰＤと類似する画像データが存在すると判定された場合、アノテーション表示制御メッセージを、第二の情報処理端末２０２に送信する。アノテーション表示制御メッセージは、表示中の画像データにアノテーションを重畳して表示するよう指示するメッセージである。アノテーション表示制御メッセージは、第二の画像データＰＤと類似する画像データを識別する識別子、例えば、画像ＩＤを含む。

【0142】

つぎに、実施の形態２にかかる第二の情報処理端末２０２の機能的構成例について説明する。

【0143】

図１２において、第二の情報処理端末２０２は、第二の映像表示部１２２１と、第二の保存部１２２２と、アノテーション表示部１２２３と、第二の記憶部１２２４と、を含む。具体的には、例えば、第二の映像表示部１２２１～アノテーション表示部１２２３は、図３に示した第二の情報処理端末２０２のメモリ３０２、ディスク３０４、可搬型記録媒体３０９などの記憶装置に記憶されたプログラムをＣＰＵ３０１に実行させることにより、または、通信Ｉ／Ｆ３０５により、その機能を実現する。各機能部の処理結果は、例えば、第二の情報処理端末２０２のメモリ３０２、ディスク３０４などの記憶装置に記憶される。第二の記憶部１２２４は、例えば、第二の情報処理端末２０２のメモリ３０２、ディスク３０４などの記憶装置により実現される。具体的には、例えば、第二の記憶部１２２４は、図５に示したアノテーションテーブル２３０および図６に示したストロークテーブル６００を記憶する。

【0144】

第二の映像表示部１２２１は、映像データを表示する。具体的には、例えば、第二の映像表示部１２２１は、第一の情報処理端末２０１から受信した画像データを、自端末のディスプレイ３０６に表示する。画像データは、例えば、１／３０秒程度の間隔で第一の情報処理端末２０１から第二の情報処理端末２０２に送信される。

【0145】

第二の保存部１２２２は、アノテーション非表示制御メッセージを受信した場合、切り替わり前の第一の画像データＰＤにアノテーションが付されているか否かを判定する。具体的には、例えば、第二の保存部１２２２は、自端末のディスプレイ３０６に表示された画像データに重畳して表示中のアノテーションがあるか否かを判断する。

【0146】

ここで、表示中のアノテーションがある場合、第二の保存部１２２２は、切り替わり前の第一の画像データＰＤにアノテーションが付されていると判定する。一方、表示中のアノテーションがない場合、第二の保存部１２２２は、切り替わり前の第一の画像データＰＤにアノテーションが付されていないと判定する。

【0147】

また、第二の保存部１２２２は、切り替わり前の第一の画像データＰＤにアノテーションが付されていると判定した場合、第一の画像データＰＤを識別する識別子と対応付けて、当該アノテーションを第二の記憶部１２２４に記憶する。第一の画像データＰＤを識別する識別子は、例えば、第一の画像データＰＤの画像ＩＤである。

【0148】

第一の画像データＰＤの画像ＩＤは、例えば、アノテーション非表示制御メッセージに含まれていてもよい。また、第一の画像データＰＤの画像ＩＤとして、アノテーション非表示制御メッセージの直前に第一の情報処理端末２０１から受信されたアノテーション表示制御メッセージに含まれる画像ＩＤを用いることにしてもよい。

【0149】

具体的には、例えば、第二の保存部１２２２は、切り替わり前の第一の画像データＰＤにアノテーションが付されていると判定した場合、第一の画像データＰＤの画像ＩＤと対応付けて、表示中のアノテーションを、アノテーションテーブル２３０に記憶する。表示中のアノテーションは、自端末のディスプレイ３０６に表示された画像データに重畳して表示中のアノテーションである。

【0150】

表示中のアノテーションは、切り替わり前の第一の画像データＰＤにアノテーションが付されているアノテーションに相当する。アノテーションの実体は、例えば、アノテーションＩＤと対応付けて、図６に示したようなストロークテーブル６００に記憶される。

【0151】

より詳細に説明すると、例えば、第二の保存部１２２２は、アノテーションテーブル２３０を参照して、切り替わり前の第一の画像データＰＤの画像ＩＤに対応するアノテーション管理情報を特定する。そして、第二の保存部１２２２は、特定したアノテーション管理情報の更新時刻に現在時刻を設定する。また、第二の保存部１２２２は、特定したアノテーション管理情報のアノテーションＩＤと対応付けて、表示中のアノテーションの実体を、図６に示したようなストロークテーブル６００に記憶する。

【0152】

アノテーション表示部１２２３は、切り替わり前の第一の画像データＰＤにアノテーションが付されていると判定された場合、当該アノテーションを非表示にする。具体的には、例えば、アノテーション表示部１２２３は、自端末のディスプレイ３０６に表示された画像データに重畳して表示中のアノテーションを非表示にする。

【0153】

また、アノテーション表示部１２２３は、アノテーション表示制御メッセージを受信した場合、第二の記憶部１２２４を参照して、切り替わり後の第二の画像データＰＤに類似する画像データを識別する識別子と対応付けて第二の記憶部１２２４に記憶されているアノテーションを、第二の画像データに重畳して表示する。

【0154】

具体的には、例えば、アノテーション表示部１２２３は、アノテーション表示制御メッセージに含まれる画像ＩＤと対応付けてアノテーションテーブル２３０に記憶されているアノテーションを特定する。そして、アノテーション表示部１２２３は、特定したアノテーションを、自端末のディスプレイ３０６に表示された画像データ（切り替わり後の第二の画像データＰＤ）に重畳して表示する。

【0155】

例えば、アノテーション表示制御メッセージに含まれる画像ＩＤを「１」とする。また、アノテーションが手書きのストロークである場合を想定する。この場合、アノテーション表示部１２２３は、アノテーションテーブル２３０を参照して、画像ＩＤ「１」に対応するアノテーションＩＤ「１」を特定する。

【0156】

つぎに、アノテーション表示部１２２３は、ストロークテーブル６００を参照して、アノテーションＩＤ「１」に対応するストローク情報６００－１～６００－３を特定する。そして、アノテーション表示部１２２３は、特定したストローク情報６００－１～６００－３に基づいて、自端末のディスプレイ３０６に表示中の画像データに重畳して、アノテーション（手書きのストローク）を表示する。

【0157】

なお、第一の情報処理端末２０１の第一の映像表示部１２１１および第二の情報処理端末２０２の第二の映像表示部１２２１は、例えば、図７に示した映像表示部７０１に対応する。第一の情報処理端末２０１の画像取得部１２１２は、例えば、図７に示した画像取得部７０２に対応する。第一の情報処理端末２０１の検出部１２１３は、例えば、図７に示した検出部７０３に対応する。第一の情報処理端末２０１の第一の保存部１２１４および第二の情報処理端末２０２の第二の保存部１２２２は、例えば、図７に示した保存部７０４に対応する。第二の情報処理端末２０２のアノテーション表示部１２２３は、例えば、図７に示したアノテーション表示部７０５に対応する。

【0158】

（表示システム２００の動作例）
つぎに、実施の形態２にかかる表示システム２００の動作例について説明する。

【0159】

図１３は、実施の形態２にかかる表示システム２００の動作例を示す説明図である。図１３において、第一の情報処理端末２０１は、表示する画像データＰＤの切り替わりを検出したことに応じて、アノテーション非表示制御メッセージｍ１を第二の情報処理端末２０２に送信する。

【0160】

第二の情報処理端末２０２は、アノテーション非表示制御メッセージｍ１を受信した場合、切り替わり前の第一の画像データにアノテーションが付されているか否かを判定する。具体的には、例えば、第二の情報処理端末２０２は、自端末のディスプレイ３０６に表示された画像データに重畳して表示中のアノテーションがあるか否かを判断する。

【0161】

第二の情報処理端末２０２は、アノテーションが付されていると判定した場合、当該アノテーションを非表示にするとともに、切り替わり前の第一の画像データの画像ＩＤと対応付けて当該アノテーションをアノテーションテーブル２３０に記憶する。

【0162】

なお、切り替わり前の第一の画像データの画像ＩＤは、例えば、アノテーション非表示制御メッセージｍ１に含まれていてもよい。また、第二の情報処理端末２０２は、アノテーション非表示制御メッセージｍ１の直前に受信されたアノテーション表示制御メッセージ（不図示）に含まれる画像ＩＤを、切り替わり前の第一の画像データの画像ＩＤとしてもよい。

【0163】

第一の情報処理端末２０１は、切り替わり後の第二の画像データと類似する画像データが画像テーブル２２０に存在するか否かを判定する。第一の情報処理端末２０１は、類似する画像データが存在すると判定した場合、類似する画像データの画像ＩＤを含むアノテーション表示制御メッセージｍ２を第二の情報処理端末２０２に送信する。

【0164】

ここでは、切り替わり後の画像データ１３００と類似する画像データとして、画像ＩＤ「ｘｘｘ」の画像データが検索された場合を想定する。この場合、画像ＩＤ「ｘｘｘ」を含むアノテーション表示制御メッセージｍ２が第二の情報処理端末２０２に送信される。

【0165】

第二の情報処理端末２０２は、アノテーション表示制御メッセージｍ２を受信した場合、アノテーションテーブル２３０を参照して、アノテーション表示制御メッセージｍ２に含まれる画像ＩＤと対応付けて記憶されているアノテーションを、切り替わり後の第二の画像データに重畳して表示する。

【0166】

ここでは、アノテーション表示制御メッセージｍ２に含まれる画像ＩＤ「ｘｘｘ」と対応付けて、アノテーション１３０１～１３０３がアノテーションテーブル２３０に記憶されている場合を想定する。アノテーション１３０１～１３０３は、手書きのストロークを示す。この場合、アノテーション１３０１～１３０３が、切り替わり後の画像データ１３００に重畳して表示される。

【0167】

これにより、画像データが切り替わった際に、切り替わり後の画像データ１３００（画像データ１３００に類似する画像ＩＤ「ｘｘｘ」の画像データ）に過去に付されたアノテーション１３０１～１３０３を再表示することができる。

【0168】

（第一の情報処理端末２０１のアノテーション表示処理手順）
つぎに、実施の形態２にかかる第一の情報処理端末２０１のアノテーション表示処理手順について説明する。ここでは、第一の情報処理端末２０１から第二の情報処理端末２０２への映像データの送信は開始されている場合を想定する。

【0169】

図１４は、実施の形態２にかかる第一の情報処理端末２０１のアノテーション表示処理手順の一例を示すフローチャートである。図１４のフローチャートにおいて、まず、第一の情報処理端末２０１は、表示する画像データＰＤの切り替わりを検出したか否かを判断する（ステップＳ１４０１）。

【0170】

ここで、第一の情報処理端末２０１は、表示する画像データＰＤの切り替わりを検出するのを待つ（ステップＳ１４０１：Ｎｏ）。そして、第一の情報処理端末２０１は、表示する画像データＰＤの切り替わりを検出した場合（ステップＳ１４０１：Ｙｅｓ）、アノテーション非表示制御メッセージを、第二の情報処理端末２０２に送信する（ステップＳ１４０２）。

【0171】

つぎに、第一の情報処理端末２０１は、切り替わり後の第二の画像データＰＤを取得する（ステップＳ１４０３）。そして、第一の情報処理端末２０１は、画像テーブル２２０から、取得した第二の画像データＰＤと類似する画像データを検索する（ステップＳ１４０４）。

【0172】

つぎに、第一の情報処理端末２０１は、類似する画像データが検索されたか否かを判断する（ステップＳ１４０５）。ここで、類似する画像データが検索された場合（ステップＳ１４０５：Ｙｅｓ）、第一の情報処理端末２０１は、ステップＳ１４０７に移行して、検索された類似する画像データの画像ＩＤを取得する（ステップＳ１４０７）。

【0173】

一方、類似する画像データが検索されなかった場合（ステップＳ１４０５：Ｎｏ）、第一の情報処理端末２０１は、切り替わり後の第二の画像データＰＤを画像テーブル２２０に新規登録する（ステップＳ１４０６）。この際、第一の情報処理端末２０１は、切り替わり後の第二の画像データＰＤに画像ＩＤを採番する。

【0174】

つぎに、第一の情報処理端末２０１は、切り替わり後の第二の画像データＰＤの画像ＩＤを取得する（ステップＳ１４０７）。そして、第一の情報処理端末２０１は、取得した画像ＩＤを含むアノテーション表示制御メッセージを、第二の情報処理端末２０２に送信して（ステップＳ１４０８）、本フローチャートによる一連の処理を終了する。

【0175】

これにより、表示する画像データＰＤの切り替わりに応じて、第二の情報処理端末２０２にアノテーション非表示制御メッセージを送信することができる。また、画像テーブル２２０から、切り替わり後の第二の画像データＰＤと類似する画像データが検索された場合、類似する画像データの画像ＩＤを含むアノテーション表示制御メッセージを第二の情報処理端末２０２に送信することができる。

【0176】

（第二の情報処理端末２０２のアノテーション表示処理手順）
つぎに、実施の形態２にかかる第二の情報処理端末２０２のアノテーション表示処理手順について説明する。ここでは、第一の情報処理端末２０１から第二の情報処理端末２０２への映像データの送信は開始されている場合を想定する。

【0177】

図１５は、実施の形態２にかかる第二の情報処理端末２０２のアノテーション表示処理手順の一例を示すフローチャートである。図１５のフローチャートにおいて、まず、第二の情報処理端末２０２は、第一の情報処理端末２０１からメッセージを受信したか否かを判断する（ステップＳ１５０１）。

【0178】

ここで、第二の情報処理端末２０２は、第一の情報処理端末２０１からメッセージを受信するのを待つ（ステップＳ１５０１：Ｎｏ）。そして、第二の情報処理端末２０２は、第一の情報処理端末２０１からメッセージを受信した場合（ステップＳ１５０１：Ｙｅｓ）、受信したメッセージが、アノテーション非表示制御メッセージであるか否かを判断する（ステップＳ１５０２）。

【0179】

ここで、アノテーション非表示制御メッセージの場合（ステップＳ１５０２：Ｙｅｓ）、第二の情報処理端末２０２は、自端末のディスプレイ３０６に表示された画像データに重畳して表示中のアノテーションがあるか否かを判断する（ステップＳ１５０３）。

【0180】

ここで、表示中のアノテーションがない場合（ステップＳ１５０３：Ｎｏ）、第二の情報処理端末２０２は、本フローチャートによる一連の処理を終了する。

【0181】

一方、表示中のアノテーションがある場合（ステップＳ１５０３：Ｙｅｓ）、第二の情報処理端末２０２は、切り替わり前の第一の画像データＰＤと対応付けて、表示中のアノテーションを、アノテーションテーブル２３０に記憶する（ステップＳ１５０４）。そして、第一の情報処理端末２０１は、表示中のアノテーションを非表示にして（ステップＳ１５０５）、本フローチャートによる一連の処理を終了する。

【0182】

また、ステップＳ１５０２において、アノテーション非表示制御メッセージではない場合（ステップＳ１５０２：Ｎｏ）、第二の情報処理端末２０２は、受信したメッセージが、アノテーション表示制御メッセージであるか否かを判断する（ステップＳ１５０６）。

【0183】

ここで、アノテーション表示制御メッセージではない場合（ステップＳ１５０６：Ｎｏ）、第二の情報処理端末２０２は、本フローチャートによる一連の処理を終了する。

【0184】

一方、アノテーション表示制御メッセージの場合（ステップＳ１５０６：Ｙｅｓ）、第二の情報処理端末２０２は、アノテーションテーブル２３０から、受信したアノテーション表示制御メッセージに含まれる画像ＩＤに対応するアノテーション管理情報を検索する（ステップＳ１５０７）。そして、第二の情報処理端末２０２は、アノテーション管理情報が検索されたか否かを判断する（ステップＳ１５０８）。

【0185】

ここで、アノテーション管理情報が検索されなかった場合（ステップＳ１５０８：Ｎｏ）、第二の情報処理端末２０２は、アノテーションテーブル２３０に、アノテーション表示制御メッセージに含まれる画像ＩＤに対応するアノテーション管理情報を新規作成して（ステップＳ１５０９）、本フローチャートによる一連の処理を終了する。

【0186】

一方、アノテーション管理情報が検索された場合（ステップＳ１５０８：Ｙｅｓ）、第二の情報処理端末２０２は、検索したアノテーション管理情報を参照して、アノテーション表示制御メッセージに含まれる画像ＩＤに対応付けて記憶されているアノテーションを特定する（ステップＳ１５１０）。そして、第一の情報処理端末２０１は、自端末のディスプレイ３０６に表示中の画像データ（切り替わり後の第二の画像データＰＤ）に、特定したアノテーションを重畳して表示して（ステップＳ１５１１）、本フローチャートによる一連の処理を終了する。

【0187】

これにより、アノテーション非表示制御メッセージに応じて、表示中のアノテーションを非表示にすることができる。また、アノテーション表示制御メッセージに応じて、表示中の画像データ（切り替わり後の第二の画像データＰＤ）に、その画像データに過去に付されたアノテーションを重畳して表示することができる。

【0188】

以上説明したように、実施の形態２にかかる表示システム２００によれば、送信側端末（第一の情報処理端末２０１）と受信側端末（第二の情報処理端末２０２）とが連動して、画像データを表示する際に、その画像データに過去に付されたアノテーションを再表示することが可能となる。

【0189】

（実施の形態３）
つぎに、実施の形態３にかかるアノテーション表示方法について説明する。実施の形態３では、図２に示した情報管理サーバ２０３を利用してアノテーションを共有することにより、複数の第二の情報処理端末２０２で同じアノテーションを表示する場合について説明する。なお、実施の形態１，２で説明した箇所と同様の箇所については、図示および説明を省略する。

【0190】

ここでは、複数の第二の情報処理端末２０２を「第二の情報処理端末２０２－１～２０２－ｎ」と表記する場合がある（ｎ：２以上の自然数）。また、アノテーションテーブル２３０は、情報管理サーバ２０３が有するものとする。

【0191】

図１６は、実施の形態３にかかる表示システム２００の動作例を示す説明図である。図１６において、第一の情報処理端末２０１は、表示する画像データＰＤの切り替わりを検出したことに応じて、アノテーション非表示制御メッセージを第二の情報処理端末２０２－１～２０２－ｎに送信する。

【0192】

各第二の情報処理端末２０２－１～２０２－ｎは、アノテーション非表示制御を受信した場合、切り替わり前の第一の画像データにアノテーションが付されているか否かを判定する。具体的には、例えば、各第二の情報処理端末２０２－１～２０２－ｎは、自端末のディスプレイ３０６に表示された画像データに重畳して表示中のアノテーションがあるか否かを判断する。

【0193】

各第二の情報処理端末２０２－１～２０２－ｎは、アノテーションが付されていると判定した場合、当該アノテーションを非表示にする。また、各第二の情報処理端末２０２－１～２０２－ｎは、切り替わり前の第一の画像データの画像ＩＤと対応付けて、当該アノテーションを情報管理サーバ２０３に送信する。

【0194】

情報管理サーバ２０３は、各第二の情報処理端末２０２－１～２０２－ｎから取得した画像ＩＤとアノテーションとを対応付けてアノテーションテーブル２３０に記憶する。ただし、情報管理サーバ２０３は、例えば、第二の情報処理端末２０２－１～２０２－ｎから取得したアノテーションのうち更新時刻が最新のアノテーションのみを記憶する。

【0195】

また、各第二の情報処理端末２０２－１～２０２－ｎは、アノテーションが作成または更新されると、その都度、作成または更新されたアノテーションを情報管理サーバ２０３に送信することにしてもよい。この場合、情報管理サーバ２０３は、作成または更新されたアノテーションを取得すると、そのアノテーションを他の第二の情報処理端末２０２に送信する。

【0196】

他の第二の情報処理端末２０２は、作成または更新されたアノテーションを受信すると、表示中のアノテーションに換えて、受信したアノテーションを画像データに重畳して表示する。これにより、第二の情報処理端末２０２－１～２０２－ｎで同じアノテーションを表示することが可能となる。

【0197】

第一の情報処理端末２０１は、切り替わり後の第二の画像データと類似する画像データが画像テーブル２２０に存在するか否かを判定する。第一の情報処理端末２０１は、類似する画像データが存在すると判定した場合、類似する画像データの画像ＩＤを含むアノテーション表示制御メッセージを第二の情報処理端末２０２－１～２０２－ｎに送信する。

【0198】

各第二の情報処理端末２０２－１～２０２－ｎは、アノテーション表示制御メッセージを受信した場合、情報管理サーバ２０３から、アノテーション表示制御メッセージに含まれる画像ＩＤと対応付けて記憶されているアノテーションを取得する。具体的には、例えば、各第二の情報処理端末２０２－１～２０２－ｎは、アノテーション表示制御メッセージに含まれる画像ＩＤを情報管理サーバ２０３に送信する。

【0199】

情報管理サーバ２０３は、画像ＩＤを受信すると、アノテーションテーブル２３０を参照して、受信した画像ＩＤと対応付けて記憶されているアノテーションを特定する。そして、情報管理サーバ２０３は、特定したアノテーションを各第二の情報処理端末２０２－１～２０２－ｎに送信する。各第二の情報処理端末２０２－１～２０２－ｎは、情報管理サーバ２０３から取得したアノテーションを、切り替わり後の第二の画像データに重畳して表示する。

【0200】

以上説明したように、実施の形態３にかかる表示システム２００によれば、情報管理サーバ２０３を利用してアノテーションを共有することにより、第二の情報処理端末２０２－１～２０２－ｎで同じアノテーションを表示することが可能となる。

【0201】

なお、第一の情報処理端末２０１は、切り替わり後の第二の画像データと類似する画像データが存在すると判定した場合、類似する画像データの画像ＩＤを情報管理サーバ２０３に送信することにしてもよい。この場合、第一の情報処理端末２０１は、送信した画像ＩＤと対応付けて記憶されているアノテーションを情報管理サーバ２０３から取得する。そして、第一の情報処理端末２０１は、情報管理サーバ２０３から取得したアノテーションを、切り替わり後の第二の画像データに重畳して表示する。これにより、第一の情報処理端末２０１でも、第二の情報処理端末２０２－１～２０２－ｎとアノテーションを表示することが可能となる。

【0202】

（実施の形態４）
つぎに、実施の形態４にかかるアノテーション表示方法について説明する。実施の形態４では、第一の情報処理端末２０１から第二の情報処理端末２０２に切り替わり後の画像データＰＤの画像ＩＤを送信する際に、当該画像ＩＤに対応する画像データをあわせて送信する場合について説明する。なお、実施の形態１～３で説明した箇所と同様の箇所については、図示および説明を省略する。

【0203】

図１７は、実施の形態４にかかる表示システム２００の動作例を示す説明図である。図１７において、第一の情報処理端末２０１は、表示する画像データＰＤの切り替わりを検出したことに応じて、アノテーション非表示制御メッセージを第二の情報処理端末２０２に送信する。

【0204】

第二の情報処理端末２０２は、アノテーション非表示制御を受信した場合、切り替わり前の第一の画像データにアノテーションが付されているか否かを判定する。具体的には、例えば、第二の情報処理端末２０２は、自端末のディスプレイ３０６に表示された画像データに重畳して表示中のアノテーションがあるか否かを判断する。

【0205】

第二の情報処理端末２０２は、アノテーションが付されていると判定した場合、当該アノテーションを非表示にするとともに、切り替わり前の第一の画像データの画像ＩＤと対応付けて当該アノテーションを、図１８に示すようなアノテーションテーブル１８００に記憶する。

【0206】

第一の情報処理端末２０１は、切り替わり後の第二の画像データと類似する画像データが画像テーブル２２０に存在するか否かを判定する。第一の情報処理端末２０１は、類似する画像データが存在すると判定した場合、類似する画像データの画像ＩＤと、類似する画像データ（または、切り替わり後の第二の画像データ）を含むアノテーション表示制御メッセージを第二の情報処理端末２０２に送信する。

【0207】

第二の情報処理端末２０２は、アノテーション表示制御メッセージを受信した場合、アノテーションテーブル１８００を参照して、アノテーション表示制御メッセージに含まれる画像ＩＤと対応付けて記憶されているアノテーションを、切り替わり後の第二の画像データに重畳して表示する。

【0208】

ここでは、切り替わり後の画像データ１７００に、アノテーション１７０１～１７０３が重畳して表示された場合を想定する。

【0209】

また、第二の情報処理端末２０２は、アノテーション表示制御メッセージに含まれる画像ＩＤと対応付けて、アノテーション表示制御メッセージに含まれる画像データを、アノテーションテーブル１８００に記憶する。ここで、アノテーションテーブル１８００の記憶内容について説明する。

【0210】

図１８は、アノテーションテーブル１８００の記憶内容の一例を示す説明図である。図１８において、画像ＩＤ、画像データ、アノテーションＩＤおよび更新時刻のフィールドを有し、各フィールドに情報を設定することで、アノテーション管理情報（例えば、アノテーション管理情報１８００－１～１８００－３）をレコードとして記憶する。

【0211】

ここで、画像ＩＤは、アノテーションが付された画像データの画像ＩＤを示す。画像データは、アノテーションが付された画像データである。アノテーションＩＤは、アノテーションを一意に識別する識別子である。更新時刻は、アノテーションが作成または更新された日時を示す。

【0212】

例えば、アノテーション管理情報１８００－１は、画像ＩＤ「１」、画像データＰＤ１、アノテーションＩＤ「１」および更新時刻「２０２０／０４／２８ １０：１０：２０」を示す。なお、アノテーションテーブル１８００は、例えば、図６に示したようなストロークテーブル６００を含む。

【0213】

これにより、第二の情報処理端末２０２は、例えば、自端末の入力装置３０７を用いたユーザの操作入力により、デジタル付箋の作成指示を受け付けた場合に、アノテーションテーブル１８００を参照して、デジタル付箋を作成することが可能となる。デジタル付箋は、画像データ上にアノテーションを重畳して表示した情報である。

【0214】

例えば、第二の情報処理端末２０２は、アノテーションテーブル１８００を参照して、画像データＰＤ１上に、アノテーションＩＤ「１」のアノテーションを重畳して表示したデジタル付箋１７１０を作成することができる。また、第二の情報処理端末２０２は、アノテーションテーブル１８００を参照して、画像データＰＤ２上に、アノテーションＩＤ「２」のアノテーションを重畳して表示したデジタル付箋１７２０を作成することができる。また、第二の情報処理端末２０２は、アノテーションテーブル１８００を参照して、画像データＰＤ３上に、アノテーションＩＤ「３」のアノテーションを重畳したデジタル付箋１７３０を作成することができる。

【0215】

また、第二の情報処理端末２０２は、例えば、作成したデジタル付箋１７１０，１７２０，１７３０を表示することができる。図１７の例では、第一の情報処理端末２０１から送信された画像データ１７００（アノテーション１７０１～１７０３を含む）とともに、デジタル付箋１７１０，１７２０，１７３０が一括表示されている。

【0216】

以上説明したように、実施の形態４にかかる表示システム２００によれば、第二の情報処理端末２０２は、アノテーションを対応する画像データ上に重畳したデジタル付箋を作成することができる。また、第二の情報処理端末２０２側で画像ＩＤに対応する画像データを保持しておくことで、アノテーションを適切な画像データ上に重畳したデジタル付箋を作成することができる。

【0217】

なお、本実施の形態で説明したアノテーション表示方法は、予め用意されたプログラムをパーソナル・コンピュータやワークステーション等のコンピュータで実行することにより実現することができる。本アノテーション表示プログラムは、ハードディスク、フレキシブルディスク、ＣＤ－ＲＯＭ、ＤＶＤ、ＵＳＢメモリ等のコンピュータで読み取り可能な記録媒体に記録され、コンピュータによって記録媒体から読み出されることによって実行される。また、本アノテーション表示プログラムは、インターネット等のネットワークを介して配布してもよい。

【0218】

上述した実施の形態に関し、さらに以下の付記を開示する。

【0219】

（付記１）表示する画像データの切り替わりを検出したことに応じて、切り替わり前の第一の画像データにアノテーションが付されているか否かを判定し、
前記第一の画像データにアノテーションが付されていると判定した場合に、前記第一の画像データと対応付けて前記アノテーションを記憶部に記憶し、
切り替わり後の第二の画像データと類似する画像データが前記記憶部に存在するか否かを判定し、
前記類似する画像データが存在すると判定した場合、前記類似する画像データと対応付けて前記記憶部に記憶されているアノテーションを、前記第二の画像データに重畳して表示させる、
処理をコンピュータに実行させることを特徴とするアノテーション表示プログラム。

【0220】

（付記２）前記記憶部は、表示された複数の画像データのそれぞれの画像データと対応付けて、当該画像データが最後に表示された時刻を記憶しており、
前記類似する画像データが存在するか否かを判定する処理は、
前記第二の画像データへ切り替わる前の前記第一の画像データへの切り替わりを検出した際に、前記第一の画像データに類似する画像データが前記記憶部に存在しなかった場合、前記記憶部を参照して、前記複数の画像データのうち最後に表示された時刻が新しい画像データから優先して、前記第二の画像データと類似するか否かを判定する、ことを特徴とする付記１に記載のアノテーション表示プログラム。

【0221】

（付記３）前記記憶部は、表示された複数の画像データのそれぞれの画像データと対応付けて、当該画像データが最初に表示された時刻を記憶しており、
前記類似する画像データが存在するか否かを判定する処理は、
前記第二の画像データへ切り替わる前の前記第一の画像データへの切り替わりを検出した際に、前記第一の画像データに類似する画像データが前記記憶部に存在した場合、前記記憶部を参照して、前記複数の画像データのうち最初に表示された時刻が、前記第一の画像データに類似する画像データと近い画像データから優先して、前記第二の画像データと類似するか否かを判定する、ことを特徴とする付記１または２に記載のアノテーション表示プログラム。

【0222】

（付記４）前記第一の画像データにアノテーションが付されていると判定した場合、前記アノテーションを非表示にさせる、
処理を前記コンピュータに実行させることを特徴とする付記１～３のいずれか一つに記載のアノテーション表示プログラム。

【0223】

（付記５）前記表示する画像データは、第一の装置から第二の装置に送信されて前記第二の装置に表示される画像データである、ことを特徴とする付記１～４のいずれか一つに記載のアノテーション表示プログラム。

【0224】

（付記６）前記類似する画像データが存在するか否かを判定する処理は、
前記第二の画像データと前記記憶部に記憶された画像データとを比較して、画像データ同士の類似度を算出し、
算出した前記類似度が閾値以上の画像データが検索された場合に、前記類似する画像データが存在すると判定する、ことを特徴とする付記１～５のいずれか一つに記載のアノテーション表示プログラム。

【0225】

（付記７）表示する画像データの切り替わりを検出したことに応じて、切り替わり前の第一の画像データにアノテーションが付されているか否かを判定し、
前記第一の画像データにアノテーションが付されていると判定した場合に、前記第一の画像データと対応付けて前記アノテーションを記憶部に記憶し、
切り替わり後の第二の画像データと類似する画像データが前記記憶部に存在するか否かを判定し、
前記類似する画像データが存在すると判定した場合、前記類似する画像データと対応付けて前記記憶部に記憶されているアノテーションを、前記第二の画像データに重畳して表示させる、
処理をコンピュータが実行することを特徴とするアノテーション表示方法。

【0226】

（付記８）第一の装置と第二の装置とを含み、前記第一の装置に表示される画像データを、前記第一の装置から前記第二の装置に転送して前記第二の装置に表示するシステムにおいて、
前記第一の装置が、
表示する画像データの切り替わりを検出したことに応じて、アノテーション非表示制御メッセージを前記第二の装置に送信し、
表示された画像データを記憶する第一の記憶部を参照して、切り替わり後の第二の画像データと類似する画像データが前記第一の記憶部に存在するか否かを判定し、
前記類似する画像データが存在すると判定した場合、前記類似する画像データを識別する識別子を含む、アノテーション表示制御メッセージを前記第二の装置に送信し、
前記第二の装置が、
前記アノテーション非表示制御メッセージを受信した場合、前記第一の画像データにアノテーションが付されているか否かを判定し、
前記第一の画像データにアノテーションが付されていると判定した場合に、前記アノテーションを非表示にするとともに、前記第一の画像データを識別する識別子と対応付けて前記アノテーションを第二の記憶部に記憶し、
前記アノテーション表示制御メッセージを受信した場合、前記アノテーション表示制御メッセージに含まれる識別子と対応付けて前記第二の記憶部に記憶されているアノテーションを、前記第二の画像データに重畳して表示する、
ことを特徴とするアノテーション表示方法。

【0227】

（付記９）前記第一の装置が、
前記類似する画像データが存在すると判定した場合、前記類似する画像データを識別する識別子と、前記類似する画像データとを含む、アノテーション表示制御メッセージを前記第二の装置に送信し、
前記第二の装置が、
前記アノテーション表示制御メッセージを受信した場合、前記類似する画像データを識別する識別子と対応付けて、前記類似する画像データを前記第二の記憶部に記憶し、
前記第二の記憶部を参照して、前記類似する画像データを識別する識別子と対応付けて記憶されている前記類似する画像データに、前記類似する画像データを識別する識別子と対応付けて記憶されているアノテーションを重畳した画像データを作成する、
ことを特徴とする付記８に記載のアノテーション表示方法。

【符号の説明】

【0228】

１０１ 第一の装置
１０２ 第二の装置
１１０，７１０ 記憶部
２００ 表示システム
２０１ 第一の情報処理端末
２０２ 第二の情報処理端末
２０３ 情報管理サーバ
２１０ ネットワーク
２２０ 画像テーブル
２３０，１８００ アノテーションテーブル
３００ バス
３０１ ＣＰＵ
３０２ メモリ
３０３ ディスクドライブ
３０４ ディスク
３０５ 通信Ｉ／Ｆ
３０６ ディスプレイ
３０７ 入力装置
３０８ 可搬型記録媒体Ｉ／Ｆ
３０９ 可搬型記録媒体
６００ ストロークテーブル
７０１ 映像表示部
７０２，１２１２ 画像取得部
７０３，１２１３ 検出部
７０４ 保存部
７０５，１２２３ アノテーション表示部
１２１１ 第一の映像表示部
１２１４ 第一の保存部
１２１５ 第一の記憶部
１２２１ 第二の映像表示部
１２２２ 第二の保存部
１２２４ 第二の記憶部

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】