特許 6376241 情報処理装置、情報処理方法、およびプログラム

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】6376241

(24)【登録日】2018年8月3日

(45)【発行日】2018年8月22日

(54)【発明の名称】情報処理装置、情報処理方法、およびプログラム

(51)【国際特許分類】

   G06F 3/0484 20130101AFI20180813BHJP

   G06F 3/041 20060101ALI20180813BHJP

   G06F 3/044 20060101ALI20180813BHJP

   G06F 3/046 20060101ALI20180813BHJP

   G06F 3/0488 20130101ALI20180813BHJP

   G06F 17/30 20060101ALI20180813BHJP

【ＦＩ】

   G06F3/0484 120

   G06F3/041 560

   G06F3/041 620

   G06F3/044 120

   G06F3/046 A

   G06F3/0488

   G06F17/30 210C

【請求項の数】11

【全頁数】25

(21)【出願番号】特願2017-82529(P2017-82529)

(22)【出願日】2017年4月19日

(62)【分割の表示】特願2017-53949(P2017-53949)の分割

【原出願日】2013年3月21日

(65)【公開番号】特開2017-134860(P2017-134860A)

(43)【公開日】2017年8月3日

【審査請求日】2017年5月17日

(73)【特許権者】

【識別番号】000001443

【氏名又は名称】カシオ計算機株式会社

(72)【発明者】

【氏名】磯村 邦彦

(72)【発明者】

【氏名】市川 達司

【審査官】 原 秀人

(56)【参考文献】

【文献】 特開平０７−１４６８６３（ＪＰ，Ａ）

【文献】 特開平０５−２９８００３（ＪＰ，Ａ）

【文献】 特開２０００−３１１０４０（ＪＰ，Ａ）

【文献】 特開２０１２−０８８８０７（ＪＰ，Ａ）

【文献】 特開平１０−１２４２３９（ＪＰ，Ａ）

(58)【調査した分野】（Int.Cl.，ＤＢ名）

Ｇ０６Ｆ ３／０４８

Ｇ０６Ｆ ３／０４１

Ｇ０６Ｆ ３／０４４

Ｇ０６Ｆ ３／０４６

Ｇ０６Ｆ １７／３０

(57)【特許請求の範囲】

【請求項1】

表示手段で表示される表示情報内でユーザによる任意の位置指示操作で指示された表示位置を検出する検出手段と、
前記検出手段で検出される表示位置を基準にした表示エリア内から抽出対象の範囲を特定し、当該範囲内における抽出対象情報を抽出する抽出手段と、
前記抽出手段で抽出された抽出対象情報を、新規入力用の登録情報として記憶手段に複写して記憶させる記憶制御手段と、
前記記憶手段に複写して記憶された登録情報を前記表示手段で表示する表示制御手段と、
前記表示手段で表示される登録情報の選択により、当該登録情報を前記記憶手段から読み出して新規の入力情報として貼付入力させる入力制御手段と、
を具備し、
前記検出手段は、前記位置指示操作が複数の操作種の内の何れの操作種による位置指示操作かを区別して検出し、
前記記憶制御手段は、前記抽出手段で抽出された抽出対象情報を、前記検出手段で検出された操作種に応じて区別して前記記憶手段に記憶させ、
前記表示制御手段は、前記記憶手段に前記操作種に応じて区別して記憶された登録情報を、前記操作種に応じて区別して前記表示手段で表示させる、
ことを特徴とする情報処理装置。

【請求項2】

前記表示制御手段は、前記記憶手段に複数の登録情報が複写されて記憶されている場合には、当該複数の登録情報を一覧表示し、
前記入力制御手段は、前記一覧表示される複数の登録情報の内で、任意の登録情報を選択することで、当該登録情報を読み出して新規の入力情報として貼付入力させる、
ことを特徴とする請求項１に記載の情報処理装置。

【請求項3】

前記表示制御手段は、前記記憶手段に記憶された登録情報を、入力用の第１表示エリアとは別の第２表示エリアにし、
前記入力制御手段は、前記第２表示エリアに表示される登録情報の選択により、当該登録情報を読み出して前記第１表示エリアに新規の入力情報として貼付入力して表示させる、
ことを特徴とする請求項２に記載の情報処理装置。

【請求項4】

表示手段で表示される表示情報内でユーザによる任意の位置指示操作で指示された表示位置を検出する検出手段と、
前記位置指示操作時における指示操作内容の操作種を判別する判別手段と、
前記表示情報の内で、前記検出手段で検出される表示位置を表示される情報を特定し、当該特定の情報を前記判別手段で判別された操作種別に分類して抽出する抽出手段と、
を具備したことを特徴とする情報処理装置。

【請求項5】

前記抽出手段で前記操作種別に分類して抽出された抽出情報を、当該操作種別に区分して前記表示手段で表示する表示制御手段と、
前記表示手段で区分して表示される抽出情報の選択により、当該抽出情報を前記記憶手段から読み出して新規の入力情報として貼付入力させる入力制御手段と、
を更に具備したことを特徴とする請求項４に記載の情報処理装置。

【請求項6】

前記表示制御手段は、前記各区分において複数の抽出情報が抽出されている場合には、複数の抽出情報を一覧表示し、
前記入力制御手段は、前記一覧表示される複数の抽出情報の内で、任意の抽出情報を選択することで、当該抽出情報を読み出して新規の入力情報として貼付入力させる、
ことを特徴とする請求項５に記載の情報処理装置。

【請求項7】

前記表示制御手段は、前記抽出手段で抽出された抽出情報を、入力用の第１表示エリアとは別の第２表示エリアにし、
前記入力制御手段は、前記第２表示エリアに表示される抽出情報の選択により、当該抽出情報を読み出して前記第１表示エリアに新規の入力情報として貼付入力して表示させる、
ことを特徴とする請求項５又は６に記載の情報処理装置。

【請求項8】

情報処理装置で表示される表示情報を処理する情報処理方法であって、
表示される表示情報内でユーザによる任意の位置指示操作で指示された表示位置を検出する検出ステップと、
前記検出ステップで検出される表示位置を基準にした表示エリア内から抽出対象の範囲を特定し、当該範囲内における抽出対象情報を抽出する抽出ステップと、
前記抽出ステップで抽出された抽出対象情報を、新規入力用の登録情報として記憶手段に複写して記憶させる記憶制御ステップと、
前記記憶手段に複写して記憶された登録情報を表示手段で表示する表示制御ステップと、
前記表示手段で表示される登録情報の選択により、当該登録情報を前記記憶手段から読み出して新規の入力情報として貼付入力させる入力制御ステップと、
を含み、
前記検出ステップは、前記位置指示操作が複数の操作種の内の何れの操作種による位置指示操作かを区別して検出し、
前記記憶制御ステップは、前記抽出ステップで抽出された抽出対象情報を、前記検出ステップで検出された操作種に応じて区別して前記記憶手段に記憶させ、
前記表示制御ステップは、前記記憶手段に前記操作種に応じて区別して記憶された登録情報を、前記操作種に応じて区別して前記表示手段で表示させる、
ことを特徴とする情報処理方法。

【請求項9】

情報処理装置で表示される表示情報を処理する情報処理方法であって、
表示される表示情報内でユーザによる任意の位置指示操作で指示された表示位置を検出する検出ステップと、
前記位置指示操作時における指示操作内容の操作種を判別する判別ステップと、
前記表示情報の内で、前記検出ステップで検出される表示位置を表示される情報を特定し、当該特定の情報を前記判別ステップで判別された操作種別に分類して抽出する抽出ステップと、
を含むことを特徴とする情報処理方法。

【請求項10】

表示情報を表示させる情報処理装置のコンピュータを制御するためのプログラムであって、
前記コンピュータを、
表示手段で表示される表示情報内でユーザによる任意の位置指示操作で指示された表示位置を検出する検出手段、
前記検出手段で検出される表示位置を基準にした表示エリア内から抽出対象の範囲を特定し、当該範囲内における抽出対象情報を抽出する抽出手段、
前記抽出手段で抽出された抽出対象情報を、新規入力用の登録情報として記憶手段に複写して記憶させる記憶制御手段、
前記記憶手段に複写して記憶された登録情報を表示手段で表示する表示制御手段、
前記表示手段で表示される登録情報の選択により、当該登録情報を前記記憶手段から読み出して新規の入力情報として貼付入力させる入力制御手段、
として機能させ、
前記検出手段は、前記位置指示操作が複数の操作種の内の何れの操作種による位置指示操作かを区別して検出し、
前記記憶制御手段は、前記抽出手段で抽出された抽出対象情報を、前記検出手段で検出された操作種に応じて区別して前記記憶手段に記憶させ、
前記表示制御手段は、前記記憶手段に前記操作種に応じて区別して記憶された登録情報を、前記操作種に応じて区別して前記表示手段で表示させる、
ことを特徴とするプログラム。

【請求項11】

表示情報を表示させる情報処理装置のコンピュータを制御するためのプログラムであって、
前記コンピュータを、
表示手段で表示される表示情報内でユーザによる任意の位置指示操作で指示された表示位置を検出する検出手段、
前記位置指示操作時における指示操作内容の操作種を判別する判別手段、
前記表示情報の内で、前記検出手段で検出される表示位置を表示される情報を特定し、当該特定の情報を前記判別手段で判別された操作種別に分類して抽出する抽出手段、
として機能させるようにしたプログラム。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、情報処理装置、情報処理方法、およびその制御プログラムに関する。

【背景技術】

【0002】

従来、商品説明などのプレゼンテーション（以下、プレゼンと称す）の場において、そのプレゼンに使用した資料の中で実際に何処を主要にプレゼンしたかやクライアントが何処に注目したか等の情報は、プレゼンをした者がそのときの状況を解析し記録していた。

【0003】

プレゼンテーションなどで要点になった内容を簡単に参加者などが確認できるものとして、プロジェクタによってスクリーンに表示された資料に対し指されたポインタおよびその位置を検知し、検知されたポインタの位置を選択するための選択肢をタッチパネルに表示させる。そして、このタッチパネルにおいて選択肢が選択される毎に当該選択肢に係るポインタの位置に対応した資料をタッチパネルに表示させる画像処理装置が考えられている（例えば、特許文献１参照。）。

【0004】

データ検索装置であって、表示部に表示されたオブジェクトを当該オブジェクトの表示位置の情報と関連付けて保持しておくことで、この後、タッチパネルにおいてユーザが検索領域をタッチして描画すると、この検索領域の表示位置と関連付けられたオブジェクトを検索して表示部に表示させるものがある（例えば、特許文献２参照。）。

【先行技術文献】

【特許文献】

【0005】

【特許文献1】特開２０１０−２６１９８９号公報

【特許文献2】特開２０１２−００８９１７号公報

【発明の概要】

【発明が解決しようとする課題】

【0006】

従来、何らかの情報が表示された画面を対象とし、ユーザ操作に応じて指定された画面上の位置とその位置に表示されていた情報の内容とを関連付けて記憶することで、その後、ユーザ操作に応じた画面上の位置に対応した内容の情報を表示させることが考えられている。

【0007】

しかしながら、このような従来の技術では、過去に表示させた情報の内容のうち、ユーザが注目した内容の情報が表示されていた位置に基づいて、その注目した内容の情報を単にそのまま再表示させるだけである。

【0008】

このため、過去に表示された情報の中で注目された内容が何であったかの情報を知ることができない。

【0009】

本発明は、表示された表示情報において注目された対象を活用可能にすることを目的とする。

【課題を解決するための手段】

【0010】

本発明に係る情報処理装置は、表示手段で表示される表示情報内でユーザによる任意の位置指示操作で指示された表示位置を検出する検出手段と、前記検出手段で検出される表示位置を基準にした表示エリア内から抽出対象の範囲を特定し、当該範囲内における抽出対象情報を抽出する抽出手段と、前記抽出手段で抽出された抽出対象情報を、新規入力用の登録情報として記憶手段に複写して記憶させる記憶制御手段と、前記記憶手段に複写して記憶された登録情報を前記表示手段で表示する表示制御手段と、前記表示手段で表示される登録情報の選択により、当該登録情報を前記記憶手段から読み出して新規の入力情報として貼付入力させる入力制御手段と、を具備し、前記検出手段は、前記位置指示操作が複数の操作種の内の何れの操作種による位置指示操作かを区別して検出し、前記記憶制御手段は、前記抽出手段で抽出された抽出対象情報を、前記検出手段で検出された操作種に応じて区別して前記記憶手段に記憶させ、前記表示制御手段は、前記記憶手段に前記操作種に応じて区別して記憶された登録情報を、前記操作種に応じて区別して前記表示手段で表示させる、ことを特徴とする。
また、本発明に係る他の態様の情報処理装置は、表示手段で表示される表示情報内でユーザによる任意の位置指示操作で指示された表示位置を検出する検出手段と、前記位置指示操作時における指示操作内容の操作種を判別する判別手段と、前記表示情報の内で、前記検出手段で検出される表示位置を表示される情報を特定し、当該特定の情報を前記判別手段で判別された操作種別に分類して抽出する抽出手段と、を具備したことを特徴とする。

【0011】

また、本発明に係る情報処理方法は、情報処理装置で表示される表示情報を処理する情報処理方法であって、表示される表示情報内でユーザによる任意の位置指示操作で指示された表示位置を検出する検出ステップと、前記検出ステップで検出される表示位置を基準にした表示エリア内から抽出対象の範囲を特定し、当該範囲内における抽出対象情報を抽出する抽出ステップと、前記抽出ステップで抽出された抽出対象情報を、新規入力用の登録情報として記憶手段に複写して記憶させる記憶制御ステップと、前記記憶手段に複写して記憶された登録情報を表示手段で表示する表示制御ステップと、前記表示手段で表示される登録情報の選択により、当該登録情報を前記記憶手段から読み出して新規の入力情報として貼付入力させる入力制御ステップと、を含み、前記検出ステップは、前記位置指示操作が複数の操作種の内の何れの操作種による位置指示操作かを区別して検出し、前記記憶制御ステップは、前記抽出ステップで抽出された抽出対象情報を、前記検出ステップで検出された操作種に応じて区別して前記記憶手段に記憶させ、前記表示制御ステップは、前記記憶手段に前記操作種に応じて区別して記憶された登録情報を、前記操作種に応じて区別して前記表示手段で表示させる、ことを特徴とする。
また、本発明に係る他の態様の情報処理方法は、情報処理装置で表示される表示情報を処理する情報処理方法であって、表示される表示情報内でユーザによる任意の位置指示操作で指示された表示位置を検出する検出ステップと、前記位置指示操作時における指示操作内容の操作種を判別する判別ステップと、前記表示情報の内で、前記検出ステップで検出される表示位置を表示される情報を特定し、当該特定の情報を前記判別ステップで判別された操作種別に分類して抽出する抽出ステップと、を含むことを特徴とする。
また、本発明に係るプログラムは、表示情報を表示させる情報処理装置のコンピュータを制御するためのプログラムであって、前記コンピュータを、表示手段で表示される表示情報内でユーザによる任意の位置指示操作で指示された表示位置を検出する検出手段、前記検出手段で検出される表示位置を基準にした表示エリア内から抽出対象の範囲を特定し、当該範囲内における抽出対象情報を抽出する抽出手段、前記抽出手段で抽出された抽出対象情報を、新規入力用の登録情報として記憶手段に複写して記憶させる記憶制御手段、前記記憶手段に複写して記憶された登録情報を表示手段で表示する表示制御手段、前記表示手段で表示される登録情報の選択により、当該登録情報を前記記憶手段から読み出して新規の入力情報として貼付入力させる入力制御手段、として機能させ、前記検出手段は、前記位置指示操作が複数の操作種の内の何れの操作種による位置指示操作かを区別して検出し、前記記憶制御手段は、前記抽出手段で抽出された抽出対象情報を、前記検出手段で検出された操作種に応じて区別して前記記憶手段に記憶させ、前記表示制御手段は、前記記憶手段に前記操作種に応じて区別して記憶された登録情報を、前記操作種に応じて区別して前記表示手段で表示させる、ことを特徴とする。
また、本発明に係る他の態様のプログラムは、表示情報を表示させる情報処理装置のコンピュータを制御するためのプログラムであって、前記コンピュータを、表示手段で表示される表示情報内でユーザによる任意の位置指示操作で指示された表示位置を検出する検出手段、前記位置指示操作時における指示操作内容の操作種を判別する判別手段、前記表示情報の内で、前記検出手段で検出される表示位置を表示される情報を特定し、当該特定の情報を前記判別手段で判別された操作種別に分類して抽出する抽出手段、として機能させることを特徴とする。

【発明の効果】

【0013】

本発明によれば、表示された表示情報において注目された対象を活用することが可能となる。

【図面の簡単な説明】

【0014】

【図1】本発明の情報処理装置の実施形態に係るキーワード抽出装置１０の構成を示 す機能ブロック図。

【図2】前記キーワード抽出装置１０のプレゼン資料記憶部１４に記憶されるプレゼ ン画面１４ｇの一例を示す図。

【図3】前記キーワード抽出装置１０の操作情報記憶部１５に記憶されるユーザ操作 情報を示す図。

【図4】前記キーワード抽出装置１０のタッチ操作領域データ記憶部１６に記憶され るタッチ操作領域データを示す図。

【図5】前記キーワード抽出装置１０のキーワードデータ記憶部１９に記憶されるキ ーワードデータを示す図。

【図6】前記キーワード抽出装置１０のキーワード抽出処理プログラムＰＲ１に従い 実行されるキーワード抽出処理（その１）を示すフローチャート。

【図7】前記キーワード抽出装置１０のキーワード抽出処理プログラムＰＲ１に従い 実行されるキーワード抽出処理（その２）を示すフローチャート。

【図8】前記キーワード抽出装置１０のキーワード抽出処理プログラムＰＲ１に従い 実行されるキーワード抽出処理（その３）を示すフローチャート。

【図9】前記キーワード抽出装置１０のキーワード抽出処理に伴うプレゼン画面１４ ｇの具体的表示動作を示す図であり、同図（Ａ）は表示装置１２に表示されたプレゼ ン画面１４ｇ上での指によるタッチ操作位置Ｔ１〜Ｔ３とペンによるタッチ操作位置 Ｐ１と拡大操作領域Ｚ１とを示す図、同図（Ｂ）は前記拡大操作領域Ｚ１の拡大表示 画面１４ｇＺを示す図。

【図10】前記キーワード抽出装置１０のキーワード抽出処理に伴う図９におけるプ レゼン画面１４ｇ上での各タッチ操作情報の具体例を示す図。

【図11】前記キーワード抽出装置１０のキーワード抽出処理に伴い図１０における 各タッチ操作情報に対応して作成された各タッチ操作領域情報と当該各領域が重なっ た場合の拡張領域情報との具体例を示す図。

【図12】前記キーワード抽出装置１０のキーワード抽出処理に伴いプレゼン画面１ ４ｇ上でのタッチ操作領域１６Ｔｎに対応して抽出されたタッチ領域画像ＧＴの具体 例を示す図。

【図13】前記キーワード抽出装置１０のキーワード抽出処理に伴いプレゼン画面１ ４ｇ上での拡大操作領域１６Ｚｎに対応して抽出された拡大領域画像ＧＺの具体例を 示す図。

【図14】前記キーワード抽出装置１０のキーワード抽出処理に伴いプレゼン画面１ ４ｇ上の各操作領域から抽出されてキーワードデータ記憶部１９に登録された各キー ワードの具体例を示す図。

【図15】前記キーワード抽出装置１０のキーワード抽出処理によりキーワードデー タ記憶部１９に登録されたキーワードを編集して記録するためのキーワード記録処理 を示すフローチャート。

【図16】前記キーワード抽出装置１０のキーワード記録処理において使用されるキ ーワード記録フォームＦｋを示す図。

【図17】前記キーワード抽出装置１０のキーワード記録処理により記録されたキー ワード記録フォームＦｋに基づき新たなプレゼン資料を作成するためのプレゼン資料 作成処理を示すフローチャート。

【図18】前記キーワード抽出装置１０のプレゼン資料作成処理において使用される プレゼン資料作成フォームＦｐを示す図。

【図19】前記キーワード抽出装置１０の他の実施形態に伴うプレゼン画面１４ｇの 表示動作を示す図。

【発明を実施するための形態】

【0015】

以下図面により本発明の実施の形態について説明する。

【0016】

図１は、本発明の情報処理装置の実施形態に係るキーワード抽出装置１０の構成を示す機能ブロック図である。

【0017】

このキーワード抽出装置１０は、以下に説明するタブレット型のＰＤＡ、ＰＣ、あるいはユーザによる画面上の指定位置を検出可能なプロジェクタシステム等の情報機器により実現される。

【0018】

本実施形態のキーワード抽出装置１０は、タブレット型のＰＤＡにより構成され、このキーワード抽出装置１０には、コンピュータ（ＣＰＵ）からなる全体制御部１１、タッチ領域制御部２０、ペン領域制御部２１、拡大領域制御部２２、文字認識制御部２３が備えられる。

【0019】

前記各制御部１１，２０，２１，２２，２３は、図示しないハードディスクやＲＯＭなどのメモリに記憶された装置制御プログラムＰＲに従い各部の動作を制御するもので、当該装置制御プログラムＰＲは、例えばバックライト付きカラー液晶表示装置１２の画面上に重ねて設けた透明タッチパネルの入力装置１３からの入力信号に応じて起動される。

【0020】

入力装置１３は、第１のタッチパネルとしての電磁誘導方式タッチパネルと、第２のタッチパネルとしての静電容量方式タッチパネルと、が表示部１２の表示画面上に重畳されて形成された２層式のタッチパネルである。

【0021】

電磁誘導方式タッチパネルは、電磁誘導方式により、磁界を発生する専用ペンによる表示部１２の表示画面上の操作を検出する。

【0022】

静電容量方式タッチパネルは、静電容量方式により指等による表示部１４の表示画面上の操作を検出する。

【0023】

前記装置制御プログラムＰＲとしては、装置全体を制御するシステムプログラムの他に、表示装置１２に表示されたプレゼン画面（画像）上での指によるタッチ操作、ペンによるタッチ操作、拡大のタッチ操作に応じて指定された領域からキーワードを抽出するためのキーワード抽出処理プログラムＰＲ１、前記抽出されたキーワードを所定のキーワード記録フォームＦｋに編集して記録するためのキーワード記録処理プログラムＰＲ２、前記記録されたキーワードに基づいて新たなプレゼン資料を作成するためのプレゼン資料作成処理プログラムＰＲ３等が記憶される。

【0024】

そして、このキーワード抽出装置１０には、図示しないハードディスクやＲＡＭなどのメモリに記憶領域が確保されたプレゼン資料記憶部１４、操作情報記憶部１５、タッチ操作領域データ記憶部１６、ペン操作領域データ記憶部１７、拡大操作領域データ記憶部１８、キーワードデータ記憶部１９が備えられる。

【0025】

前記プレゼン資料記憶部１４には、予め作成された、あるいは前記プレゼン資料作成処理プログラムＰＲ３に従い作成されたプレゼン資料の画面（プレゼン画面）１４ｇが記憶される。

【0026】

図２は、前記キーワード抽出装置１０のプレゼン資料記憶部１４に記憶されるプレゼン画面１４ｇの一例を示す図である。

【0027】

前記操作情報記憶部１５には、前記入力装置（タッチパネル）１３におけるユーザのタッチ操作に応じたプレゼン画面１４ｇ上での位置や領域の情報が全体制御部１１による制御に従い記憶される。

【0028】

図３は、前記キーワード抽出装置１０の操作情報記憶部１５に記憶されるユーザ操作情報を示す図である。

【0029】

この操作情報記憶部１５には、タッチ操作情報アドレス１５Ｔと、拡大操作情報アドレス１５Ｚと、ペン操作情報アドレス１５Ｐとが確保される。

【0030】

前記タッチ操作情報アドレス１５Ｔには、前記プレゼン画面１４ｇ上で、ユーザが指でタッチ操作したタッチ位置１，２，…の座標（Ｘ，Ｙ）１５Ｔ１，１５Ｔ２，…が記憶される。また、前記拡大操作情報アドレス１５Ｚには、同プレゼン画面１４ｇ上で、ユーザが指でマルチタッチ操作して拡大した拡大領域１，２，…の座標（Ｘ，Ｙ，ＳＸ，ＳＹ）１５Ｚ１，１５Ｚ２，…が記憶される。また、前記ペン操作情報アドレス１５Ｐには、同プレゼン画面１４ｇ上で、ユーザがペンでタッチ操作したペンタッチ位置１，２，…の座標（Ｘ，Ｙ）１５Ｐ１，１５Ｐ２，…が記憶される。

【0031】

入力装置（タッチパネル）１３において、指によるタッチ操作は、静電容量方式タッチパネルにより検出し、ペンによるタッチ操作は、電磁誘導方式タッチパネルにより検出する。

【0032】

なお、入力装置（タッチパネル）１３が静電容量方式タッチパネルの一層の場合、指によるタッチ操作の検出とペンによるタッチ操作の検出を、タッチ位置の中心（Ｘ，Ｙ）が閾値以上に広がりを持って検出されるか、そうでないか（ピンポイントで検出されるか）により判断してもよい。

【0033】

図４は、前記キーワード抽出装置１０のタッチ操作領域データ記憶部１６に記憶されるタッチ操作領域データを示す図である。

【0034】

このタッチ操作領域データ記憶部１６には、前記全体制御部１１およびタッチ領域制御部２０による制御に従い前記ユーザが指でタッチ操作した位置１，２，…の座標（Ｘ，Ｙ）１５Ｔ１，１５Ｔ２，…に対応させて予め設定された矩形サイズの領域１，２，…を示す座標（Ｘ，Ｙ，ＳＸ，ＳＹ）１６Ｔ１，１６Ｔ２，…が記憶される。

【0035】

前記ペン操作領域データ記憶部１７には、前記全体制御部１１およびペン領域制御部２１による制御に従い前記ユーザがペンでタッチ操作した位置１，２，…の座標（Ｘ，Ｙ）１５Ｐ１，１５Ｐ２，…に対応させて予め設定された矩形サイズの領域１，２，…を示す座標（Ｘ，Ｙ，ＳＸ，ＳＹ）…が、前記タッチ操作領域データ（１６）と同様に記憶される。

【0036】

前記拡大操作領域データ記憶部１８には、前記全体制御部１１および拡大領域制御部２２による制御に従い前記ユーザがマルチタッチ操作して拡大した拡大領域１，２，…の座標（Ｘ，Ｙ，ＳＸ，ＳＹ）１５Ｚ１，１５Ｚ２，…が、前記拡大操作情報アドレス１５Ｚ（図３参照）に記憶された内容のまま転送されて記憶される。

【0037】

前記キーワードデータ記憶部１９には、前記タッチ操作領域データ記憶部１６に記憶されたタッチ操作の領域１，２，…の座標（Ｘ，Ｙ，ＳＸ，ＳＹ）１６Ｔ１，１６Ｔ２，…、あるいは前記ペン操作領域データ記憶部１７に記憶されたペンタッチ操作の領域１，２，…の座標（Ｘ，Ｙ，ＳＸ，ＳＹ）…、あるいは前記拡大操作領域データ記憶部１８に記憶された拡大領域１，２，…の座標（Ｘ，Ｙ，ＳＸ，ＳＹ）１５Ｚ１，１５Ｚ２，…に応じて、前記プレゼン画面１４ｇから切り出された画像内の文字が文字認識制御部２３による制御に従い文字認識され、当該文字認識された文字列がキーワードとして記憶される。

【0038】

この際、本実施形態では、表示装置１２に表示されたプレゼン画面１４ｇを指でタッチ操作したり拡大操作したりするユーザをプレゼンする側のユーザ（例えば「店員」）とし、ペンでタッチ操作するユーザをプレゼンされる側のユーザ（例えば「お客様」）として仮定する。

【0039】

このため、前記キーワードデータ記憶部１９では、例えば図５に示すように、前記指によるタッチ操作の領域１，２，…の座標（Ｘ，Ｙ，ＳＸ，ＳＹ）１６Ｔ１，１６Ｔ２，…に応じて前記プレゼン画面１４ｇから切り出された画像の文字認識結果、および前記拡大領域１，２，…の座標（Ｘ，Ｙ，ＳＸ，ＳＹ）１５Ｚ１，１５Ｚ２，…に応じて前記プレゼン画面１４ｇから切り出された画像の文字認識結果を、プレゼンする側（店員）のキーワード１９Ｓ１，１９Ｓ２，…として記憶し、また、前記ペンによるタッチ操作の領域１，２，…の座標（Ｘ，Ｙ，ＳＸ，ＳＹ）に応じて前記プレゼン画面１４ｇから切り出された画像の文字認識結果を、プレゼンされる側（お客様）のキーワード１９Ｃ１，１９Ｃ２，…として記憶する。

【0040】

図５は、前記キーワード抽出装置１０のキーワードデータ記憶部１９に記憶されるキーワードデータを示す図である。

【0041】

このように構成されたキーワード抽出装置１０は、各制御部（ＣＰＵ）１１，２０，２１，２２，２３が前記各プログラムＰＲ１，ＰＲ２，ＰＲ３に記述された命令に従い各部の動作を制御し、ソフトウエアとハードウエアとが協働して動作することにより、以下の動作説明で述べる機能を実現する。

【0042】

次に、前記構成によるキーワード抽出装置１０の動作について説明する。

【0043】

（キーワード抽出機能）
図６は、前記キーワード抽出装置１０のキーワード抽出処理プログラムＰＲ１に従い実行されるキーワード抽出処理（その１）を示すフローチャートである。

【0044】

図７は、前記キーワード抽出装置１０のキーワード抽出処理プログラムＰＲ１に従い実行されるキーワード抽出処理（その２）を示すフローチャートである。

【0045】

図８は、前記キーワード抽出装置１０のキーワード抽出処理プログラムＰＲ１に従い実行されるキーワード抽出処理（その３）を示すフローチャートである。

【0046】

例えば、プレゼン側のユーザによる入力装置（タッチパネル）１３のタッチ操作に応じて、プレゼンテーションの動作モードに設定されると、操作情報記録処理（キーワード抽出処理）が開始される（ステップＳ１）。

【0047】

ユーザ操作に応じて、プレゼン資料記憶部１４に記憶されている所望のプレゼン画面１４ｇが選択されると、選択されたプレゼン画面１４ｇは表示装置１３に表示される（ステップＳ２）。

【0048】

この表示装置１３に表示されたプレゼン画面１４ｇにおいて、ユーザにより入力装置１３がタッチ操作された際に、指によるタッチ操作であると判断されると（ステップＳ４（タッチ））、当該タッチ操作の判断毎に、そのタッチ位置の座標（Ｘ，Ｙ）１５Ｔ１，１５Ｔ２，…が操作情報記憶部１５のタッチ操作情報アドレス１５Ｔに記録される（ステップＳ５Ｔ）。

【0049】

また、ペンによるタッチ操作であると判断されると（ステップＳ４（ペン））、当該タッチ操作の判断毎に、そのタッチ位置の座標（Ｘ，Ｙ）１５Ｐ１，１５Ｐ２，…が操作情記憶部１５のペン操作情報アドレス１５Ｐに記録される（ステップＳ５Ｐ）。

【0050】

また、マルチタッチによる拡大操作であると判断されると（ステップＳ４（拡大））、当該拡大操作の判断毎に、その拡大領域の座標（Ｘ，Ｙ，ＳＸ，ＳＹ）１５Ｚ１，１５Ｚ２，…が操作情報記憶部１５の拡大操作情報アドレス１５Ｚに記録される（ステップＳ５Ｚ）。

【0051】

このように、表示装置１２に表示されたプレゼン画面１４ｇ上での入力装置（タッチパネル）１３によるタッチ操作に応じて、プレゼンする側である指でタッチ操作された各座標（Ｘ，Ｙ）１５Ｔ１，１５Ｔ２，…と拡大操作された領域の各座標（Ｘ，Ｙ，ＳＸ，ＳＹ）１５Ｚ１，１５Ｚ２，…とがそれぞれ操作情報記憶部１５のタッチ操作情報アドレス１５Ｔと拡大操作情報アドレス１５Ｚとに記録され、また、プレゼンされる側であるペンでタッチ操作された各座標（Ｘ，Ｙ）１５Ｐ１，１５Ｐ２，…が同操作情報記憶部１５のペン操作情報アドレス１５Ｐに記録されて行く。

【0052】

この後、当該プレゼンを終了する操作が為されたと判断されると（ステップＳ３（Ｙｅｓ））、前記操作情報記憶部１５のタッチ操作情報アドレス１５Ｔに指のタッチ操作情報が記録されているか否か判断される（ステップＳ６）。

【0053】

ここで、前記操作情報記憶部１５のタッチ操作情報アドレス１５Ｔに指のタッチ操作情報が記録されていると判断されると（ステップＳ６（Ｙｅｓ））、当該指のタッチ操作情報である各座標（Ｘ，Ｙ）１５Ｔ１，１５Ｔ２，…が取得される（ステップＳ７）。

【0054】

そして、前記タッチ操作情報アドレス１５Ｔから取得された各座標（Ｘ，Ｙ）１５Ｔ１，１５Ｔ２，…毎に、当該座標（Ｘ，Ｙ）からＸ方向およびＹ方向共に±５０ドットの矩形サイズにより囲まれる領域が、タッチ操作の領域１，２，…を示す座標（Ｘ，Ｙ，ＳＸ，ＳＹ）１６Ｔ１，１６Ｔ２，…として作成され、タッチ操作領域データ記憶部１６に記憶される（ステップＳ８〜Ｓ１１）。

【0055】

この際、前記タッチ操作領域データ記憶部１６に既に記憶された同じプレゼン画面１４ｇ上でのタッチ操作の領域（１６Ｔｍ）に対して、今回作成されたタッチ操作の領域（１６Ｔｎ）との間に重なる領域があるか否か判断される（ステップＳ９）。

【0056】

そして、重なる領域がないと判断された場合には（ステップＳ９（Ｎｏ））、前記今回作成されたタッチ操作の領域１，２，…の座標（Ｘ，Ｙ，ＳＸ，ＳＹ）１６Ｔｎが前記タッチ操作領域データ記憶部１６に追加で記憶される（ステップＳ１０）。

【0057】

一方、重なる領域があると判断された場合には（ステップＳ９（Ｙｅｓ））、当該重なる領域があると判断され既に記憶されているタッチ操作の領域（１６Ｔｍ）に、前記今回作成されたタッチ操作の領域（１６Ｔｎ）を加えた拡張領域の座標（１６Ｔｍ＋Ｔｎ）が前記タッチ操作領域データ記憶部１６に更新されて記憶される（ステップＳ１１）。

【0058】

そして、前記操作情報記憶部１５のタッチ操作情報アドレス１５Ｔに次のタッチ操作情報（１５Ｔｎ）が記録されていると判断される場合は、前記同様のタッチ操作の領域情報（１６Ｔｎ）としての作成、記憶処理が繰り返される（ステップＳ６〜Ｓ１１）。

【0059】

すると次に、前記操作情報記憶部１５のペン操作情報アドレス１５Ｐにペンのタッチ操作情報が記録されているか否か判断される（ステップＳ１２）。

【0060】

ここで、前記操作情報記憶部１５のペン操作情報アドレス１５Ｐにペンのタッチ操作情報が記録されていると判断されると（ステップＳ１２（Ｙｅｓ））、当該ペンのタッチ操作情報である各座標（Ｘ，Ｙ）１５Ｐ１，１５Ｐ２，…が取得される（ステップＳ１３）。

【0061】

そして、前記ペン操作情報アドレス１５Ｐから取得された各座標（Ｘ，Ｙ）１５Ｐ１，１５Ｐ２，…毎に、当該座標（Ｘ，Ｙ）からＸ方向およびＹ方向共に±５０ドットの矩形サイズにより囲まれる領域が、ペン操作の領域１，２，…を示す座標（Ｘ，Ｙ，ＳＸ，ＳＹ），…として作成され、ペン操作領域データ記憶部１７に記憶される（ステップＳ１４〜Ｓ１７）。

【0062】

この際、前記ペン操作領域データ記憶部１７に既に記憶された同じプレゼン画面１４ｇ上でのペン操作の領域に対して、今回作成されたペン操作の領域との間に重なる領域があるか否か判断される（ステップＳ１５）。

【0063】

そして、重なる領域がないと判断された場合には（ステップＳ１５（Ｎｏ））、前記今回作成されたペン操作の領域１，２，…の座標（Ｘ，Ｙ，ＳＸ，ＳＹ）が前記ペン操作領域データ記憶部１７に追加で記憶される（ステップＳ１６）。

【0064】

一方、重なる領域があると判断された場合には（ステップＳ１５（Ｙｅｓ））、当該重なる領域があると判断され既に記憶されているペン操作の領域に、前記今回作成されたペン操作の領域を加えた拡張領域の座標が前記ペン操作領域データ記憶部１７に更新されて記憶される（ステップＳ１７）。

【0065】

そして、前記操作情報記憶部１５のペン操作情報アドレス１５Ｐに次のペン操作情報が記録されていると判断される場合は、前記同様のペン操作の領域情報としての作成、記憶処理が繰り返される（ステップＳ１２〜Ｓ１７）。

【0066】

すると次に、前記タッチ操作領域データ記憶部１６にタッチ操作の領域情報が記憶されているか否か判断される（ステップＳ１８）。

【0067】

ここで、前記タッチ操作領域データ記憶部１６にタッチ操作の領域情報が記録されていると判断されると（ステップＳ１８（Ｙｅｓ））、当該タッチ操作の領域情報である各座標（Ｘ，Ｙ，ＳＸ，ＳＹ）１６Ｔ１，１６Ｔ２，…が取得される（ステップＳ１９）。

【0068】

すると、前記取得されたタッチ操作の領域の各座標（Ｘ，Ｙ，ＳＸ，ＳＹ）１６Ｔ１，１６Ｔ２，…毎に、当該領域の座標（Ｘ，Ｙ，ＳＸ，ＳＹ）に対応して前記プレゼン画面１４ｇから切り出された画像が、文字認識制御部２３により文字認識される（ステップＳ２０）。

【0069】

そして、前記文字認識された文字列がプレゼンする側のキーワード１９Ｓ１，１９Ｓ２，…としてキーワードデータ記憶部１９（図５参照）に登録される（ステップＳ２１）。

【0070】

また次に、前記ペン操作領域データ記憶部１７にペン操作の領域情報が記憶されているか否か判断される（ステップＳ２２）。

【0071】

ここで、前記ペン操作領域データ記憶部１７にペン操作の領域情報が記録されていると判断されると（ステップＳ２２（Ｙｅｓ））、当該ペン操作の領域情報である各座標（Ｘ，Ｙ，ＳＸ，ＳＹ），…が取得される（ステップＳ２３）。

【0072】

すると、前記取得されたペン操作の領域の各座標（Ｘ，Ｙ，ＳＸ，ＳＹ），…毎に、当該領域の座標（Ｘ，Ｙ，ＳＸ，ＳＹ）に対応して前記プレゼン画面１４ｇから切り出された画像が、文字認識制御部２３により文字認識される（ステップＳ２４）。

【0073】

そして、前記文字認識された文字列がプレゼンされる側（お客様）のキーワード１９Ｃ１，１９Ｃ２，…としてキーワードデータ記憶部１９（図５参照）に登録される（ステップＳ２５）。

【0074】

また次に、前記拡大操作領域データ記憶部１８に拡大操作の領域情報が記憶されているか否か判断される（ステップＳ２６）。

【0075】

ここで、前記拡大操作領域データ記憶部１８に拡大操作の領域情報が記録されていると判断されると（ステップＳ２６（Ｙｅｓ））、当該拡大操作の領域情報である各座標（Ｘ，Ｙ，ＳＸ，ＳＹ），…が取得される（ステップＳ２７）。

【0076】

すると、前記取得された拡大操作の領域の各座標（Ｘ，Ｙ，ＳＸ，ＳＹ），…毎に、当該領域の座標（Ｘ，Ｙ，ＳＸ，ＳＹ）に対応して前記プレゼン画面１４ｇから切り出された画像が、文字認識制御部２３により文字認識される（ステップＳ２８）。

【0077】

そして、前記文字認識された文字列がプレゼンする側のキーワード１９Ｓ１，１９Ｓ２，…としてキーワードデータ記憶部１９（図５参照）に登録される（ステップＳ２９）。

【0078】

（キーワード抽出機能［実施例］）
図９は、前記キーワード抽出装置１０のキーワード抽出処理に伴うプレゼン画面１４ｇの具体的表示動作を示す図であり、同図（Ａ）は表示装置１２に表示されたプレゼン画面１４ｇ上での指によるタッチ操作位置Ｔ１〜Ｔ３とペンによるタッチ操作位置Ｐ１と拡大操作領域Ｚ１とを示す図、同図（Ｂ）は前記拡大操作領域Ｚ１の拡大表示画面１４ｇＺを示す図である。

【0079】

図１０は、前記キーワード抽出装置１０のキーワード抽出処理に伴う図９におけるプレゼン画面１４ｇ上での各タッチ操作情報の具体例を示す図である。

【0080】

図１１は、前記キーワード抽出装置１０のキーワード抽出処理に伴い図１０における各タッチ操作情報に対応して作成された各タッチ操作領域情報と当該各領域が重なった場合の拡張領域情報との具体例を示す図である。

【0081】

図９（Ａ）に示すように、表示装置１２に表示されたプレゼン画面１４ｇにおいて（ステップＳ１，Ｓ２）、プレゼンする側が指により例えば所望の３点Ｔ１〜Ｔ３をタッチすると、図１０に示すように、操作情報記憶部１５のタッチ操作情報アドレス１５Ｔには、当該タッチ操作位置Ｔ１に対応するＸＹ座標（Ｘ＝５０，Ｙ＝２００）１５Ｔ１、タッチ操作位置Ｔ２に対応するＸＹ座標（Ｘ＝１００，Ｙ＝２２０）１５Ｔ２、タッチ操作位置Ｔ３に対応するＸＹ座標（Ｘ＝８０，Ｙ＝１７０）１５Ｔ３が記録される（ステップＳ４，Ｓ５Ｔ）。

【0082】

また、プレゼンする側が例えば拡大したい領域Ｚ１をタッチすると、図１０に示すように、操作情報記憶部１５の拡大操作情報アドレス１５Ｚには、当該拡大操作領域Ｚ１の左上およびそこからＸ方向とＹ方向の範囲に対応する座標（Ｘ＝２００，Ｙ＝２５０，ＳＸ＝１５０，ＳＹ＝１００）１５Ｚ１が記録される（ステップＳ４，Ｓ５Ｚ）。

【0083】

さらに、プレゼンされる側（お客様）がペンにより例えば所望の１点Ｐ１をタッチすると、図１０に示すように、操作情報記憶部１５のペン操作情報アドレス１５Ｐには、当該ペン操作位置Ｐ１に対応するＸＹ座標（Ｘ＝２００，Ｙ＝２２０）１５Ｐ１が記録される（ステップＳ４，Ｓ５Ｐ）。

【0084】

この後、プレゼンを終了する操作が為されると（ステップＳ３（Ｙｅｓ））、まず、前記操作情報記憶部１５のタッチ操作情報アドレス１５Ｔから１点目のタッチ操作位置Ｔ１に対応する座標（Ｘ＝５０，Ｙ＝２００）１５Ｔ１が取得され、図１１（Ａ）に示すように、Ｘ方向およびＹ方向共に±５０ドットの矩形サイズにより囲まれるタッチ操作領域の座標（Ｘ＝０，Ｙ＝１５０，ＳＸ＝１００，ＳＹ＝１００）１６Ｔ１が作成される（ステップＳ６〜Ｓ８）。

【0085】

この場合、前記１点目のタッチ操作領域（Ｘ＝０，Ｙ＝１５０，ＳＸ＝１００，ＳＹ＝１００）１６Ｔ１に重なる他のタッチ操作領域は無いので、当該タッチ操作領域１６Ｔ１はそのままタッチ操作領域データ記憶部１６に記憶される（ステップＳ９，Ｓ１０）。

【0086】

すると次に、前記操作情報記憶部１５のタッチ操作情報アドレス１５Ｔから２点目のタッチ操作位置Ｔ２に対応する座標（Ｘ＝１００，Ｙ＝２２０）１５Ｔ２が取得され、図１１（Ｂ）に示すように、Ｘ方向およびＹ方向共に±５０ドットの矩形サイズにより囲まれるタッチ操作領域の座標（Ｘ＝５０，Ｙ＝１７０，ＳＸ＝１００，ＳＹ＝１００）１６Ｔ２が作成される（ステップＳ６〜Ｓ８）。

【0087】

この場合、今回作成された前記２点目のタッチ操作領域（Ｘ＝５０，Ｙ＝１７０，ＳＸ＝１００，ＳＹ＝１００）１６Ｔ２と重なる領域が、前記タッチ操作領域データ記憶部１６に既に記憶された前記１点目のタッチ操作領域（Ｘ＝０，Ｙ＝１５０，ＳＸ＝１００，ＳＹ＝１００）１６Ｔ１としてあるので、当該既存で重なるタッチ操作領域１６Ｔ１に２点目のタッチ操作領域１６Ｔ２を加えて拡張されたタッチ操作領域の座標（０，１５０，１５０，１２０）１６Ｔ１＋Ｔ２が、前記タッチ操作領域データ記憶部１６に更新されて記憶される（ステップＳ１１）。

【0088】

すると次に、前記操作情報記憶部１５のタッチ操作情報アドレス１５Ｔから３点目のタッチ操作位置Ｔ３に対応する座標（Ｘ＝８０，Ｙ＝１７０）１５Ｔ３が取得され、図１１（Ｃ）に示すように、Ｘ方向およびＹ方向共に±５０ドットの矩形サイズにより囲まれるタッチ操作領域の座標（Ｘ＝３０，Ｙ＝１２０，ＳＸ＝１００，ＳＹ＝１００）１６Ｔ３が作成される（ステップＳ６〜Ｓ８）。

【0089】

この場合、今回作成された前記３点目のタッチ操作領域（Ｘ＝３０，Ｙ＝１２０，ＳＸ＝１００，ＳＹ＝１００）１６Ｔ３と重なる領域が、前記タッチ操作領域データ記憶部１６に既に記憶された拡張されたタッチ操作領域（０，１５０，１５０，１２０）１６Ｔ１＋Ｔ２としてあるので、当該既存で重なるタッチ操作領域１６Ｔ１＋Ｔ２に３点目のタッチ操作領域１６Ｔ３を加えて拡張されたタッチ操作領域の座標（０，１２０，１５０，１５０）１６Ｔ１＋Ｔ２＋Ｔ３が、前記タッチ操作領域データ記憶部１６に更新されて記憶される（ステップＳ１１）。

【0090】

そして、前記操作情報記憶部１５のペン操作情報アドレス１５Ｐに記憶されたペン操作位置Ｐ１に対応する座標（２００，２２０）１５Ｐ１（図１０参照）についても、前記タッチ操作位置１５Ｔｎに応じたタッチ操作領域１６Ｔｎを作成して記憶する処理（ステップＳ６〜Ｓ１１）と同様に、当該ペン操作位置Ｐ１に応じたペン操作領域が作成され、ペン操作領域データ記憶部１７に記憶される（ステップＳ１２〜Ｓ１７）。

【0091】

図１２は、前記キーワード抽出装置１０のキーワード抽出処理に伴いプレゼン画面１４ｇ上でのタッチ操作領域１６Ｔｎに対応して抽出されたタッチ領域画像ＧＴの具体例を示す図である。

【0092】

図１３は、前記キーワード抽出装置１０のキーワード抽出処理に伴いプレゼン画面１４ｇ上での拡大操作領域１６Ｚｎに対応して抽出された拡大領域画像ＧＺの具体例を示す図である。

【0093】

図１４は、前記キーワード抽出装置１０のキーワード抽出処理に伴いプレゼン画面１４ｇ上の各操作領域から抽出されてキーワードデータ記憶部１９に登録された各キーワードの具体例を示す図である。

【0094】

前記図１１で示したように、前記タッチ操作領域データ記憶部１６に記憶されたタッチ操作領域の座標（０，１２０，１５０，１５０）１６Ｔ１＋Ｔ２＋Ｔ３が取得されると（ステップＳ１８，Ｓ１９）、前記プレゼン画面１４ｇ（図９（Ａ）参照）から、図１２に示すように、当該タッチ操作領域１６Ｔ１＋Ｔ２＋Ｔ３に対応するタッチ領域画像ＧＴが切り出され、文字認識制御部２３により文字認識される（ステップＳ２０）。

【0095】

すると、前記タッチ領域画像ＧＴから文字認識された文字列「ＡＢＣ・ＤＥＦでより多くのお客様獲得」が、図１４に示すように、プレゼンする側（Ｔ）のキーワード１９Ｓ１としてキーワードデータ記憶部１９に登録される（ステップＳ２１）。

【0096】

また、前記ペン操作領域データ記憶部１７に記憶されたペン操作領域が取得されると（ステップＳ２２，Ｓ２３）、前記プレゼン画面１４ｇから、当該ペン操作領域に対応するペン領域画像が切り出され、文字認識制御部２３により文字認識される（ステップＳ２４）。

【0097】

すると、前記ペン領域画像から文字認識された文字列が、プレゼンされる側（お客様）（Ｐ）のキーワード１９Ｃ１としてキーワードデータ記憶部１９に登録される（ステップＳ２５）。

【0098】

また、前記拡大操作領域データ記憶部１８に記憶された拡大操作領域の座標（２００，２５０，１５０，１００）１５Ｚ１が取得されると（ステップＳ２６，Ｓ２７）、前記プレゼン画面１４ｇ（図９（Ａ）（Ｂ）参照）から、図１３に示すように、当該拡大操作領域１５Ｚ１に対応する拡大領域画像ＧＺが切り出され、文字認識制御部２３により文字認識される（ステップＳ２８）。

【0099】

すると、前記拡大領域画像ＧＺから文字認識された文字列「様々な電子マネーに対応」が、図１４に示すように、プレゼンする側（Ｚ）のキーワード１９Ｓ２としてキーワードデータ記憶部１９に登録される（ステップＳ２９）。

【0100】

（キーワード記録機能）
図１５は、前記キーワード抽出装置１０のキーワード抽出処理によりキーワードデータ記憶部１９に登録されたキーワードを編集して記録するためのキーワード記録処理を示すフローチャートである。

【0101】

図１６は、前記キーワード抽出装置１０のキーワード記録処理において使用されるキーワード記録フォームＦｋを示す図である。

【0102】

前記キーワード抽出処理（図６〜図１４参照）に従い、プレゼン画面１４ｇ上におけるユーザ（プレゼンする側（店員）／プレゼンされる側（お客様））の各操作領域に応じたキーワードが抽出されてキーワードデータ記憶部１９に登録されると、図１５におけるキーワード記録処理が実行される。

【0103】

このキーワード記録処理が起動されると、キーワードデータ記憶部１９に記憶された今回のプレゼンテーションに応じたキーワード記録フォーマットＦｋ（図１６参照）が読み込まれ（ステップＡ１）、同キーワードデータ記憶部１９（図１４参照）にプレゼンされる側（お客様）のキーワード（Ｐ）が登録されているか否か判断される（ステップＡ２）。

【0104】

ここで、プレゼンされる側（お客様）のキーワード（Ｐ）１９Ｃｎ…が登録されていると判断されると（ステップＡ２（Ｙｅｓ））、当該キーワード（Ｐ）１９Ｃｎ…が順次取得され（ステップＡ３）、前記キーワード記録フォーマットＦｋにおけるお客様キーワード領域Ｋｃに順次追加で記録される（ステップＡ４）。

【0105】

そして、前記キーワードデータ記憶部１９から取得すべきプレゼンされる側（お客様）のキーワード（Ｐ）が無くなったと判断されると（ステップＡ２（Ｎｏ））、次に、同キーワードデータ記憶部１９（図１４参照）にプレゼンする側（店員）のキーワード（Ｔ）（Ｚ）が登録されているか否か判断される（ステップＡ５）。

【0106】

ここで、プレゼンする側（店員）のキーワード（Ｔ）１９Ｓ１，（Ｚ）１９Ｓ２が登録されていると判断されると（ステップＡ５（Ｙｅｓ））、当該キーワード（Ｔ）１９Ｓ１，（Ｚ）１９Ｓ２が順次取得され（ステップＡ６）、前記キーワード記録フォーマットＦｋにおける店員キーワード領域Ｋｓに順次追加で記録される（ステップＡ７）。

【0107】

そして、前記キーワードデータ記憶部１９から取得すべきプレゼンする側（店員）のキーワード（Ｔ）（Ｚ）が無くなったと判断されると（ステップＡ５（Ｎｏ））、前記プレゼンされる側（お客様）のキーワード（Ｐ）１９Ｃ１がお客様キーワード領域Ｋｃに分類され、また前記プレゼンする側（店員）のキーワード（Ｔ）１９Ｓ１，（Ｚ）１９Ｓ２が店員キーワード領域Ｋｓに分類されて記録されたキーワード記録フォームＦｋが、キーワードデータ記憶部１９に登録される。

【0108】

（プレゼン資料作成機能）
図１７は、前記キーワード抽出装置１０のキーワード記録処理により記録されたキーワード記録フォームＦｋに基づき新たなプレゼン資料を作成するためのプレゼン資料作成処理を示すフローチャートである。

【0109】

図１８は、前記キーワード抽出装置１０のプレゼン資料作成処理において使用されるプレゼン資料作成フォームＦｐを示す図である。

【0110】

前記キーワード記録処理（図１５，図１６）に従い、プレゼンされる側（お客様）のキーワード（Ｐ）がお客様キーワード領域Ｋｃに分類され、プレゼンする側（店員）のキーワード（Ｔ）（Ｚ）が店員キーワード領域Ｋｓに分類されたキーワード記録フォームＦｋが生成された後に、ユーザ操作に応じて、図１７におけるプレゼン資料作成処理が起動されると（ステップＢ１）、前記キーワード記録フォームＦｋに記録されたキーワードの一覧を表示させるか、または処理を終了させるかをユーザに促すメッセージが表示される（ステップＢ２）。

【0111】

ここで、キーワードの一覧を表示させるメッセージが選択されると（ステップＢ３（Ｙｅｓ））、前記キーワード記録フォームＦｋのお客様キーワード領域Ｋｃまたは店員キーワード領域Ｋｓに何れかのキーワードが記録されているか否か判断される（ステップＢ４）。

【0112】

先ず、前記キーワード記録フォームＦｋのお客様キーワード領域Ｋｃにプレゼンされる側（お客様）のキーワード（Ｐ）１９ｃｎ…が記録されていると判断されると（ステップＢ４，Ｂ５（Ｙｅｓ））、当該記録されたプレゼンされる側（お客様）のキーワード（Ｐ）１９ｃｎ…の全てが読み出され、図１８に示すように、表示装置１２にウインドウ表示されたペンキーワード一覧画面Ｌｋに追加される（ステップＢ６）。

【0113】

次に、前記キーワード記録フォームＦｋの店員キーワード領域Ｋｓにプレゼンする側（店員）のキーワード（Ｔ）（Ｚ）１９Ｓｎ…が記録されていると判断されると（ステップＢ７（Ｙｅｓ））、当該記録されたプレゼンする側（店員）のキーワード（Ｔ）（Ｚ）１９Ｓｎ…の全てが読み出され、図１８に示すように、表示装置１２にウインドウ表示されたタッチキーワード一覧画面Ｍｋに追加される（ステップＢ８）。その後、ペンキーワード一覧画面Ｌｋとタッチキーワード一覧画面Ｍｋを比較し、一致しているものを強調表示し、一覧を表示する（ステップＢ８ａ）。

【0114】

これにより、表示装置１２にウインドウ表示された前記ペンキーワード一覧画面Ｌｋと前記タッチキーワード一覧画面Ｍｋとには、前記キーワード記録フォーマットＦｋに分類されて記録されたプレゼンされる側（お客様）のキーワード（Ｐ）１９Ｃｎ…の全てとプレゼンする側（店員）のキーワード（Ｔ）（Ｚ）１９Ｓｎ…の全てとが分けられて一覧表示されるので、前記プレゼン画面１４ｇによってプレゼンテーションをした際にお客様が注目された内容と店員が強調した内容とを比較することができる。また、一致したキーワードを強調表示しているので、店員とお客様の考えの一致点や相違点が明確になり、今後のプレゼンテーションを行う上で重要性が高いと考えられるキーワードを知ることができる。

【0115】

この後、前記ペンキーワード一覧画面Ｌｋ、前記タッチキーワード一覧画面Ｍｋに一覧表示された各キーワードを対象に、新たなプレゼン資料に載せたいキーワードが選択されると（ステップＢ９，Ｂ１０（Ｙｅｓ））、当該選択されたキーワードが同ペンキーワード一覧画面Ｌｋ、タッチキーワード一覧画面Ｍｋに隣接して表示させたプレゼン資料フォームＦｐに入力されて表示される（ステップＢ１１）。

【0116】

これにより、前記重要性が高いと考えられるキーワードの順番で一覧表示されたキーワード一覧画面Ｌｋから任意に選択されたキーワードが、そのままプレゼン資料フォームＦｐに入力されて表示され、重要なキーワードの漏れのない新たに且つ適切なプレゼン資料を容易に作成できる。

【0117】

したがって、前記構成のキーワード抽出装置１０のキーワード抽出機能によれば、タッチパネル式の入力装置１３を備えた表示装置１２において、プレゼン画面１４ｇを表示させ、当該プレゼン画面１４ｇ上で、プレゼンする側（店員）が指によりタッチ操作したり拡大操作したり、プレゼンされる側（お客様）がペンによりタッチ操作すると、指タッチ操作、ペンタッチ操作については、そのタッチ位置の座標に対応した一定範囲の領域の画像から文字認識された文字列のキーワードが抽出され、拡大操作については、その拡大領域の画像から文字認識された文字列のキーワードが抽出される。そして、前記プレゼンする側（店員）の操作領域に応じて抽出されたキーワードと前記プレゼンされる側（お客様）の操作領域に応じて抽出されたキーワードとは、それぞれお客様キーワード領域Ｋｃと店員キーワード領域Ｋｓとを有するキーワード記録フォームＦｋに分類されて記憶される。

【0118】

このため、プレゼンにおいて注目された情報を、その後のプレゼンの為の資料作りに役立つような形態にして記録することが可能になる。

【0119】

また、前記構成のキーワード抽出装置１０のキーワード抽出機能によれば、前記プレゼン画面１４ｇ上での指によるタッチ操作位置に対応した領域と、ペンによるタッチ操作位置に対応した領域について、当該指によるタッチ操作に対応した領域同士が重なった場合、またペンによるタッチ操作に対応した領域同士が重なった場合には、前回のタッチ操作に対応した領域に今回のタッチ操作に対応した領域が加えられ、この拡張された操作領域の画像から文字認識されたキーワードが抽出される。

【0120】

このため、複数のタッチ操作に対応した領域同士が重なった部分の画像から同じキーワードが別々に文字認識されて抽出されてしまう不具合を無くすことができる。

【0121】

また、前記各実施形態において、抽出されたキーワードを新たなプレゼン資料フォームＦｐに使用したが、これに限らず、抽出されたキーワードを選択した場合、図１９に示すように、プレゼン画面１４ｇの中のキーワードと一致する文字列を強調表示にしてもよい。この場合、タッチ操作に対応して抽出されたキーワードに対する強調表示とペン操作に対応して抽出されたキーワードに対する強調表示とを、例えば太字と下線とで異なるものにしても良い。このようにする事で、次回プレゼンを行う時に多くのお客様の関心があるキーワードや説明しなくてはいけないキーワードなどが分かり、プレゼンの質を向上することができ、たとえ操作する店員が変わった場合でも、プレゼンの質を維持することができる。

【0122】

図１９は、前記キーワード抽出装置１０の他の実施形態に伴うプレゼン画面１４ｇの表示動作を示す図である。

【0123】

なお、前記各実施形態においては、一回のプレゼンでキーワードを抽出したがこれに限らず、複数回行った後に抽出回数の多いキーワードを一覧表示してもよい。この場合、プレゼンが終了した毎に、キーワード抽出し、その抽出したキーワードと一致したキーワードがあればカウントアップし、抽出回数の多いものを表示する。

【0124】

なお、前記各実施形態において記載したキーワード抽出装置１０による各処理の手法、すなわち、図６〜図８のフローチャートに示すキーワード抽出処理、図１５のフローチャートに示すキーワード記録処理、図１７のフローチャートに示すプレゼン資料作成処理等の各手法は、何れもコンピュータに実行させることができるプログラムとして、メモリカード（ＲＯＭカード、ＲＡＭカード等）、磁気ディスク（フロッピディスク、ハードディスク等）、光ディスク（ＣＤ−ＲＯＭ、ＤＶＤ等）、半導体メモリ等の外部記録装置の媒体に格納して配布することができる。そして、表示装置（１２）を備えた電子機器のコンピュータ（制御装置）は、この外部記憶装置の媒体に記憶されたプログラムを記憶装置に読み込み、この読み込んだプログラムによって動作が制御されることにより、前記各実施形態において説明したプレゼン操作に応じたキーワード抽出機能、キーワード記録機能、プレゼン資料作成機能を実現し、前述した手法による同様の処理を実行することができる。

【0125】

なお、前記各実施形態において、タッチした場所に基づいてキーワードを抽出したが、抽出する対象情報はこれに限らず、画像を抽出してもよいし、タッチした場所に紐付けられているデータでもよい。

【0126】

また、前記各手法を実現するためのプログラムのデータは、プログラムコードの形態として通信ネットワーク上を伝送させることができ、この通信ネットワークに接続されたコンピュータ装置（プログラムサーバ）から前記プログラムのデータを表示装置（１２）を備えた電子機器のコンピュータ（制御装置）に取り込んで記憶装置に記憶させ、前述したプレゼン操作に応じたキーワード抽出機能、キーワード記録機能、プレゼン資料作成機能を実現することもできる。

【0127】

本願発明は、前記各実施形態に限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で種々に変形することが可能である。さらに、前記各実施形態には種々の段階の発明が含まれており、開示される複数の構成要件における適宜な組み合わせにより種々の発明が抽出され得る。例えば、各実施形態に示される全構成要件から幾つかの構成要件が削除されたり、幾つかの構成要件が異なる形態にして組み合わされても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果の欄で述べられている効果が得られる場合には、この構成要件が削除されたり組み合わされた構成が発明として抽出され得るものである。

【0128】

以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。

【0129】

［１］
タッチパネルを備えた表示部と、
この表示部に表示させるための表示情報を記憶する表示情報記憶手段と、
この表示情報記憶手段により記憶された表示情報を前記表示部に表示させる情報表示制御手段と、
この情報表示制御手段により前記表示部に表示情報が表示された状態で、当該表示情報に対するユーザ操作に応じて前記タッチパネルにより検出されるタッチ位置を取得するタッチ位置取得手段と、
このタッチ位置取得手段により取得されたタッチ位置に基づいて前記表示部に表示された表示情報を対象に予め定められた範囲を設定する範囲設定手段と、
この範囲設定手段により設定された範囲の表示情報から対象情報を抽出する対象情報抽出手段と、
この対象情報抽出手段により抽出された対象情報を記憶する対象情報記憶手段と、
前記表示情報の表示を終了した後に、前記対象情報記憶手段により記憶された対象情報を前記表示部に表示させる対象情報表示制御手段と、を備えたことを特徴とする情報処理装置。

【0130】

［２］
前記タッチパネルは、指による操作を検出する第一タッチパネルと、ペンによる操作を検出する第二タッチパネルと、を備え、
前記タッチ位置取得手段は、前記第一タッチパネルと前記第二タッチパネルとにより検出されるタッチ位置をそれぞれ取得し、
前記対象情報抽出手段は、前記タッチ位置取得手段によって取得された第一タッチパネルと第二タッチパネルのタッチ位置に基づいてそれぞれの対象情報を抽出し、
前記対象情報記憶手段は、前記対象情報抽出手段により抽出された対象情報を第一タッチパネルと第二タッチパネルのそれぞれに対応して記憶し、
前記対象情報表示制御手段は、前記対象情報記憶手段により記憶された対象情報を第一タッチパネルと第二タッチパネルのそれぞれに対応して前記表示部に表示させることを特徴とする［１］に記載の情報処理装置。

【0131】

［３］
前記範囲設定手段は、
当該範囲設定手段により既に設定された範囲と新たに設定された範囲が重なるか否かを判断する範囲重なり判断手段と、
この範囲重なり判断手段により既に設定された範囲と新たに設定された範囲が重なると判断された場合には、当該各範囲を、前記既に設定された範囲に新たに設定された範囲を加えた範囲に更新して設定する拡張範囲設定手段と、を有することを特徴とする［１］又は［２］に記載の情報処理装置。

【0132】

［４］
前記タッチ位置取得手段は、
前記タッチパネルにより検出されるタッチ位置に基づいてユーザ操作の種類を判断する操作種類判断手段を有し、
この操作種類判断手段により判断されたユーザ操作の種類毎に前記タッチパネルにより検出されるタッチ位置を分類して取得し、
前記対象情報記憶手段は、
前記対象情報抽出手段により抽出された対象情報を前記タッチ位置取得手段によりユーザ操作の種類毎に分類されて取得されたタッチ位置に応じた分類にして記憶する、ことを特徴とする［１］ないし［３］の何れかに記載の情報処理装置。

【0133】

［５］
前記対象情報表示制御手段は、
前記対象情報記憶手段によりユーザ操作の種類毎に分類されて記憶された対象情報をその分類に応じて予め設定された順番で前記表示部に表示させる、ことを特徴とする［４］に記載の情報処理装置。

【0134】

［６］
前記対象情報表示制御手段により前記表示部に表示された対象情報をユーザ操作に応じて選択する対象情報選択手段と、
この対象情報選択手段により選択された対象情報に基づいて新たな表示情報を作成する表示情報作成手段と、を備えたことを特徴とする［１］ないし［５］の何れかに記載の情報処理装置。

【0135】

［７］
前記対象情報抽出手段は、前記範囲設定手段により設定された範囲の表示情報を文字認識し、この文字認識結果の文字列を対象情報として抽出する、ことを特徴とする［１］ないし［６］の何れかに記載の情報処理装置。

【0136】

［８］
前記表示情報は、プレゼンテーションの資料であることを特徴とする［１］ないし［７］の何れかに記載の情報処理装置。

【0137】

［９］
前記対象情報表示制御手段は、前記対象情報抽出手段によって抽出された第一タッチパネルと第二タッチパネルに対応した対象情報の内、一致したものを強調表示する、ことを特徴とする［２］に記載の情報処理装置。

【0138】

［１０］
前記対象情報抽出手段によって抽出された対象情報を前記表示情報の対象情報として強調表示する編集手段と、を備えたことを特徴とする［２］に記載の情報処理装置。

【0139】

［１１］
前記編集手段は、前記対象情報抽出手段により抽出された対象情報を第一タッチパネルに基づき抽出されたキーワードと第二タッチパネルに基づき抽出されたキーワードとでそれぞれ異なる強調表示にする、ことを特徴とする［１０］に記載の情報処理装置。

【0140】

［１２］
タッチパネルを備えた表示部を有する電子機器のコンピュータを制御するための情報処理方法であって、
前記表示部に表示させるための表示情報を表示情報メモリに記憶させること、
前記表示情報メモリに記憶された表示情報を前記表示部に表示させること、
前記表示部に表示情報が表示された状態で、当該表示情報に対するユーザ操作に応じて前記タッチパネルにより検出されるタッチ位置を取得すること、
前記取得されたタッチ位置に基づいて前記表示部に表示された表示情報を対象に予め定められた範囲を設定すること、
前記設定された範囲の表示情報から対象情報を抽出すること、
前記抽出された対象情報を対象情報メモリに記憶させること、
前記表示情報の表示を終了した後に、前記対象情報メモリに記憶された対象情報を前記表示部に表示させること、を含むことを特徴とする情報処理方法。

【0141】

［１３］
タッチパネルを備えた表示部を有する電子機器のコンピュータを制御するためのプログラムであって、
前記コンピュータを、
前記表示部に表示させるための表示情報をメモリに記憶させる表示情報記憶制御手段、
この表示情報記憶手段により記憶された表示情報を前記表示部に表示させる情報表示制御手段、
この情報表示制御手段により前記表示部に表示情報が表示された状態で、当該表示情報に対するユーザ操作に応じて前記タッチパネルにより検出されるタッチ位置を取得するタッチ位置取得手段、
このタッチ位置取得手段により取得されたタッチ位置に基づいて前記表示部に表示された表示情報を対象に予め定められた範囲を設定する範囲設定手段、
この範囲設定手段により設定された範囲の表示情報から対象情報を抽出する対象情報抽出手段、
この対象情報抽出手段により抽出された対象情報を記憶する対象情報記憶手段、
前記表示情報の表示を終了した後に、前記対象情報記憶手段により記憶された対象情報を前記表示部に表示させる対象情報表示制御手段、として機能させるためのプログラム。

【符号の説明】

【0142】

１０ …キーワード抽出装置（情報処理装置）
１１ …全体制御部
ＰＲ１…キーワード抽出処理プログラム
ＰＲ２…キーワード記録処理プログラム
ＰＲ３…プレゼン資料作成処理プログラム
１２ …表示装置
１３ …入力装置
１４ …プレゼン資料記憶部
１４ｇ…プレゼン画面データ
１４ｇＺ…拡大表示画面
１５ …操作情報記憶部
１５Ｔ…タッチ操作情報アドレス
１５Ｔｎ…タッチ操作位置座標（Ｘ，Ｙ）
１５Ｚ…拡大操作情報アドレス
１５Ｚｎ…拡大操作領域座標（Ｘ，Ｙ，ＳＸ，ＳＹ）
１５Ｐ…ペン操作情報アドレス
１５Ｐｎ…ペン操作位置座標（Ｘ，Ｙ）
１６ …タッチ操作領域データ記憶部
１６Ｔｎ…タッチ操作領域座標（Ｘ，Ｙ，ＳＸ，ＳＹ）
１７ …ペン操作領域データ記憶部
１８ …拡大操作領域データ記憶部
１９ …キーワードデータ記憶部
１９Ｓｎ…プレゼンする側（店員）のキーワード
１９ｃｎ…プレゼンされる側（お客様）のキーワード
２０ …タッチ領域制御部
２１ …ペン領域制御部
２２ …拡大領域制御部
２３ …文字認識制御部
Ｔｎ …タッチ操作位置
Ｐｎ …ペン操作位置
Ｚ１ …拡大操作領域
ＧＴ …タッチ領域画像
ＧＺ …拡大領域画像
Ｆｋ …キーワード記録フォーム
Ｆｐ …プレゼン資料フォーム

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】

【図14】

【図15】

【図16】

【図17】

【図18】

【図19】