特許7829655IP Force 特許公報全文掲載

ホーム > 特許ランキング > 株式会社　ミックウェア > 特許7829655

技術分野

情報処理方法及び情報処理装置に関し、特に、ＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）画面に含まれるオブジェクトに対する情報処理方法及び情報処理装置

要約特許出願時に添付された[要約書]

【課題】ＧＵＩ画面に含まれるオブジェクトを認識し、認識したオブジェクトを選択的に表示することが可能な情報処理方法を提供する。
【解決手段】所定時間毎に、ＧＵＩ画面２００を取得する画面取得ステップと、ＧＵＩ画面２００の変化を検出する差異検出ステップと、変化が所定の閾値以上の場合、ＧＵＩ画面２００に含まれる図形オブジェクト及び文字オブジェクトの認識処理を実行する認識ステップと、認識処理を実行することにより得た各図形オブジェクトを囲む第１枠の座標情報、各文字オブジェクトの文字情報、及び、各文字オブジェクトを囲む第２枠の座標情報を取得する情報取得ステップと、ユーザ操作によるカーソルが、ＧＵＩ画面２００におけるいずれかの第１枠の領域に入った場合に、第１枠を表示し、カーソルがいずれかの第２枠の領域に入った場合に、第２枠の文字オブジェクトの文字情報を表示する表示処理ステップと、を含む。
【選択図】図１２

発明が解決しようとする課題[発明の詳細な説明]から抜粋

しかしながら、特許文献１に開示する技術では、手書き用紙やファクシミリ等の画像データからテキストデータ（文字データ）への変換を行うことができるものの、ＧＵＩ画面に含まれる図形アイコンやボタン等のオブジェクトを認識することについては言及されていない。

課題を解決するための手段[発明の詳細な説明]から抜粋

（１）情報処理方法は、所定時間毎に、ＧＵＩ画面を取得する画面取得ステップと、第１ＧＵＩ画面と、前記第１ＧＵＩ画面を取得した時間から前記所定時間後の第２ＧＵＩ画面とを比較して、前記ＧＵＩ画面の変化を検出する差異検出ステップと、前記変化が所定の閾値以上の場合、前記第２ＧＵＩ画面に含まれる１以上の図形オブジェクト及び１以上の文字オブジェクトの認識処理を実行し、前記変化が所定の閾値より小さい場合、前記第・・・　続きを知財ポータルサイト IP Force にログインして見る

発明の効果[発明の詳細な説明]から抜粋

１つの側面によれば、ＧＵＩ画面に含まれるオブジェクトを認識し、認識したオブジェクトを選択的に表示することができる。

この特許の権利範囲[特許請求の範囲]

知財ポータルサイト IP Force にログインして確認する (無料)

この特許公報に記載されている図面[図面の簡単な説明]から抜粋

【図1】 第１実施形態の情報処理システムの概略を示す模式図である。
【図2】 第１実施形態の情報処理装置及びユーザ端末を示す機能ブロック図である。
【図3】 ＧＵＩ画面の一例を示す概略図である。
【図4】 ＧＵＩ画面に対する認識処理の一例を示す概略図である。
【図5】 認識処理結果データベースのデータ構造の一例を示す概略図である。
【図6】 図形アイコンと文字とを含む枠表示の一例を示す概略図である。
【図7】 図形アイコンを含む枠表示の一例を示す概略図である。
【図8】 情報処理装置のハードウェア構成の一例を示す概略図である。
【図9】 ユーザ端末のハードウェア構成の一例を示す概略図である。
【図10】 第１実施形態の情報処理装置及びユーザ端末の動作の一例を示す概略フローである。
【図11】 第２実施形態の情報処理装置を示す機能ブロック図である。
【図12】 第２実施形態の情報処理装置の動作の一例を示す概略フローである。

代表図 図12本件の代表的な図

１、１Ａ 情報処理装置 ２ ユーザ端末 ３ 通信網 ４ エミュレータ １１ 画面取得部 １２ 記憶部 １３ 差異検出部 １４ 判定部 １５ 認識部 １６ 情報取得部 １７ 通知部 １７ａ 座標情報、文字情報 ２１ 操作部 ２２ 端末取得部 ２３ 表示処理部 ２４ 実行部 ２５ 視線検出部 ５１、５１ａ 画像認識用ＡＩ ５２、５２ａ 文字認識用ＡＩ ２０１ａ、２０１ｂ、２０１ｃ、２０１ｄ 図形アイコン ２０２ａ、２０２ｂ、２０２ｃ、２０２ｄ 文字アイコン ２０３ｃ、２０３ｄ 点線枠 ２２１ａ、２２１ｂ カーソル ２５１ａ、２５１ｂ、２５１ｃ、２５１ｄ、２５２ａ、２５２ｂ、２５２ｃ、２５２ｄ、２５３ｃ、２５３ｄ 枠 １７０ ＣＰＵ １７１ メモリ １７２ 記憶デバイス １７３ 接続ポート １７４ 通信回路 １７５ バスライン １７１１ ＯＳ １７１２ ブラウザプログラム １７１３ プログラム １７１４ 所定の閾値 １７１５ 認識処理結果ＤＢ １７１５ａ ＧＵＩ画面情報 １７１５ｂ オブジェクトＩＤ １７１５ｃ 位置情報 １７１５ｄ 文字 １７１５ｅ 文字情報

全ての図面はログインすると無料で閲覧できます。ログイン・ユーザー登録

［広告欄］

ログインすれば広告は減ります

ログインすれば広告は減ります

Copyright © Science Impact Inc. All Rights Reserved.