特開 2023-150420 テスト制御方法、テスト制御プログラムおよびテスト制御装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】公開特許公報(A)

(11)【公開番号】P2023150420

(43)【公開日】2023-10-16

(54)【発明の名称】テスト制御方法、テスト制御プログラムおよびテスト制御装置

(51)【国際特許分類】

   G06F 11/36 20060101AFI20231005BHJP

【ＦＩ】

G06F11/36 188

【審査請求】未請求

【請求項の数】7

【出願形態】ＯＬ

(21)【出願番号】P 2022059523

(22)【出願日】2022-03-31

(71)【出願人】

【識別番号】000005223

【氏名又は名称】富士通株式会社

(74)【代理人】

【識別番号】110002918

【氏名又は名称】弁理士法人扶桑国際特許事務所

(72)【発明者】

【氏名】中村 勲

(72)【発明者】

【氏名】森戸 英治

(72)【発明者】

【氏名】藤田 誠一郎

【テーマコード（参考）】

5B042

【Ｆターム（参考）】

5B042GB02

5B042HH49

(57)【要約】

【課題】変更後の実行環境でソフトウェアテストを実行する。
【解決手段】記憶部１１は、テスト命令１３と基準画像１４とを関連付けて記憶する。処理部１２は、テスト対象のソフトウェアを実行することで生成される表示画像の中に、テスト命令１３と関連付けられた基準画像１４が含まれるか判定する。処理部１２は、表示画像２１の中に基準画像１４が含まれると判定した場合、表示画像２１の中の基準画像１４が検出された位置２３に基づいてテスト命令１３を実行する。処理部１２は、表示画像２２の中に基準画像１４が含まれないと判定した場合、表示画像２２の中の位置２４の指定を受け付け、位置２４に基づいてテスト命令１３を実行する。
【選択図】図１

【特許請求の範囲】

【請求項1】

テスト対象のソフトウェアを実行することで生成される表示画像の中に、テスト命令と関連付けられた基準画像が含まれるか判定し、
前記表示画像の中に前記基準画像が含まれると判定した場合、前記表示画像の中の前記基準画像が検出された第１の位置に基づいて前記テスト命令を実行し、
前記表示画像の中に前記基準画像が含まれないと判定した場合、前記表示画像の中の第２の位置の指定を受け付け、前記第２の位置に基づいて前記テスト命令を実行する、
処理をコンピュータが実行するテスト制御方法。

【請求項2】

前記表示画像の中に前記基準画像が含まれないと判定した場合、前記表示画像の中から前記第２の位置に応じた部分画像を抽出し、前記部分画像を新たな基準画像として前記テスト命令と関連付けて保存する処理を前記コンピュータが更に実行する、
請求項１記載のテスト制御方法。

【請求項3】

前記表示画像の中の領域を示す枠画像を表示し、
前記第２の位置の指定の受け付けは、前記枠画像を用いて前記第２の位置を指定する操作を受け付ける処理を含む、
請求項１記載のテスト制御方法。

【請求項4】

前記枠画像の表示は、前記基準画像が検出された第３の位置を示す位置情報を取得し、前記第３の位置に応じて前記枠画像を表示させる処理を含む、
請求項３記載のテスト制御方法。

【請求項5】

前記テスト命令は、前記第１の位置または前記第２の位置に基づいて前記表示画像の中から特定される入力部品に対して入力操作を実行する処理を示す、
請求項１記載のテスト制御方法。

【請求項6】

テスト対象のソフトウェアを実行することで生成される表示画像の中に、テスト命令と関連付けられた基準画像が含まれるか判定し、
前記表示画像の中に前記基準画像が含まれると判定した場合、前記表示画像の中の前記基準画像が検出された第１の位置に基づいて前記テスト命令を実行し、
前記表示画像の中に前記基準画像が含まれないと判定した場合、前記表示画像の中の第２の位置の指定を受け付け、前記第２の位置に基づいて前記テスト命令を実行する、
処理をコンピュータに実行させるテスト制御プログラム。

【請求項7】

テスト命令と基準画像とを関連付けて記憶する記憶部と、
テスト対象のソフトウェアを実行することで生成される表示画像の中に前記基準画像が含まれるか判定し、前記表示画像の中に前記基準画像が含まれると判定した場合、前記表示画像の中の前記基準画像が検出された第１の位置に基づいて前記テスト命令を実行し、前記表示画像の中に前記基準画像が含まれないと判定した場合、前記表示画像の中の第２の位置の指定を受け付け、前記第２の位置に基づいて前記テスト命令を実行する処理部と、
を有するテスト制御装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明はテスト制御方法、テスト制御プログラムおよびテスト制御装置に関する。

【背景技術】

【0002】

コンピュータソフトウェアの中には、表示画像を用いてユーザとの間で情報の受け渡しを行うＧＵＩ（Graphical User Interface）をもつソフトウェアがある。ＧＵＩをもつソフトウェアが正常に動作するかテストする際、ボタン押下や文字入力などの入力操作の全てをテスト実施者が手作業で行うことは非効率である。そこで、コンピュータは、擬似的に入力操作を発生させるテスト命令を保存しておき、ソフトウェアに対してテスト命令を実行することで、入力操作の少なくとも一部を自動化することがある。

【0003】

なお、２つのソフトウェアにより生成される２つの表示画像の間で差異が存在する領域を判定する情報処理装置が提案されている。この情報処理装置は、第１のソフトウェアに対して行った入力操作を第２のソフトウェアに対して再現し、第１のソフトウェアのスクリーンショット画像と第２のソフトウェアのスクリーンショット画像とを比較する。

【先行技術文献】

【特許文献】

【0004】

【特許文献1】特開２０１７－１６２１２０号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

コンピュータは、表示画像の中から特定の基準画像を検出し、基準画像が検出された位置に基づいてテスト命令を実行することが考えられる。例えば、コンピュータは、画像のパターンマッチングによって表示画像の中から特定のボタンを検出し、ボタンが検出された位置に対してクリック操作を発生させることが考えられる。

【0006】

一方、コンピュータは、表示画像を表示させるための実行環境を変更することがあり、ソフトウェアが新しい実行環境で正常に動作するかテストすることがある。例えば、コンピュータは、オペレーティングシステム（ＯＳ：Operating System）やＷｅｂブラウザなどの基盤ソフトウェアをバージョンアップすることがあり、ソフトウェアを新バージョンの基盤ソフトウェア上でテストすることがある。

【0007】

しかし、実行環境の変更によって、ボタンやラベルなどの表示部品のデザインが変化することがある。そのため、新しい実行環境では基準画像の検出に失敗して、保存されているテスト命令が正常に動作しないことがある。そこで、１つの側面では、本発明は、変更後の実行環境でソフトウェアテストを実行することを目的とする。

【課題を解決するための手段】

【0008】

１つの態様では、以下の処理をコンピュータが実行するテスト制御方法が提供される。テスト対象のソフトウェアを実行することで生成される表示画像の中に、テスト命令と関連付けられた基準画像が含まれるか判定する。表示画像の中に基準画像が含まれると判定した場合、表示画像の中の基準画像が検出された第１の位置に基づいてテスト命令を実行する。表示画像の中に基準画像が含まれないと判定した場合、表示画像の中の第２の位置の指定を受け付け、第２の位置に基づいてテスト命令を実行する。

【0009】

また、１つの態様では、コンピュータに実行させるテスト制御プログラムが提供される。また、１つの態様では、記憶部と処理部とを有するテスト制御装置が提供される。

【発明の効果】

【0010】

１つの側面では、変更後の実行環境でソフトウェアテストを実行できる。

【図面の簡単な説明】

【0011】

【図1】第１の実施の形態のテスト制御装置を説明するための図である。

【図2】第２の実施の形態の情報処理システムの例を示す図である。

【図3】テスト制御装置のハードウェア例を示すブロック図である。

【図4】テストセットの例を示す図である。

【図5】環境変更によるＧＵＩの変化例を示す図である。

【図6】位置情報テーブルの例を示す図である。

【図7】テストセット編集画面の例を示す図である。

【図8】テスト制御装置の機能例を示すブロック図である。

【図9】テスト実行の手順例を示すフローチャートである。

【発明を実施するための形態】

【0012】

以下、本実施の形態を図面を参照して説明する。
［第１の実施の形態］
第１の実施の形態を説明する。

【0013】

図１は、第１の実施の形態のテスト制御装置を説明するための図である。
第１の実施の形態のテスト制御装置１０は、ＧＵＩをもつソフトウェアをテストする。ＧＵＩは、表示画像を用いてユーザとの間で情報の受け渡しを行うユーザインタフェースである。ＧＵＩは、例えば、ボタンや文字入力フィールドなどの入力部品を表示し、ボタン押下や文字入力などの入力操作をユーザから受け付ける。ソフトウェアはＷｅｂアプリケーションでもよく、表示画像はＷｅｂブラウザに表示されてもよい。

【0014】

テスト対象のソフトウェアはテスト制御装置１０で実行されてもよいし、他の情報処理装置で実行されてもよい。テスト制御装置１０は、表示デバイスを有するクライアント装置でもよいし、クライアント装置と接続されるサーバ装置でもよい。また、テスト制御装置１０は、仮想マシンを実行するサーバ装置でもよい。テスト制御装置１０が、コンピュータまたは情報処理装置と呼ばれてもよい。

【0015】

テスト制御装置１０は、記憶部１１および処理部１２を有する。記憶部１１は、ＲＡＭ（Random Access Memory）などの揮発性半導体メモリでもよいし、ＨＤＤ（Hard Disk Drive）やフラッシュメモリなどの不揮発性ストレージでもよい。処理部１２は、例えば、ＣＰＵ（Central Processing Unit）、ＧＰＵ（Graphics Processing Unit）、ＤＳＰ（Digital Signal Processor）などのプロセッサである。ただし、処理部１２が、ＡＳＩＣ（Application Specific Integrated Circuit）やＦＰＧＡ（Field Programmable Gate Array）などの電子回路を含んでもよい。プロセッサは、例えば、ＲＡＭなどのメモリ（記憶部１１でもよい）に記憶されたプログラムを実行する。プロセッサの集合が、マルチプロセッサまたは単に「プロセッサ」と呼ばれてもよい。

【0016】

記憶部１１は、テスト命令１３と基準画像１４とを関連付けて記憶する。基準画像１４は、表示画像の中に含まれ得る表示部品の画像であり、例えば、矩形の画像である。表示部品は、例えば、ラベル、ボタン、文字入力フィールド、チェックボックス、選択リストなどである。基準画像１４は、表示画像の中から基準位置を特定するために用いられる。記憶部１１は、例えば、テスト命令１３と基準位置とを関連付けて記憶してもよい。

【0017】

テスト命令１３は、特定された基準位置に応じた処理を示す命令である。テスト命令１３は、特定された基準位置に基づいてソフトウェアに対して擬似的に入力操作を実行する命令であってもよい。例えば、基準画像１４はボタンの画像であり、テスト命令１３はボタンの表示領域の中心をクリックする入力操作を生成する命令である。また、例えば、基準画像１４はラベルの画像であり、テスト命令１３はラベルに隣接する文字入力フィールドに特定の文字列を入力する入力操作を生成する命令である。

【0018】

ここで、テスト命令１３と関連付けられる基準画像１４は、特定の実行環境でソフトウェアを実行した場合に表示され得る画像である。実行環境は、表示画像を表示させるためのソフトウェア実行基盤であり、例えば、ＯＳやＷｅｂブラウザなどの基盤ソフトウェアを含む。実行環境は、バージョンアップやベンダ変更などによって変更されることがある。実行環境が変更されると、表示部品のデザインが変化することがある。例えば、ＯＳまたはＷｅｂブラウザのバージョンアップによって、ボタンのデザインが変化し得る。

【0019】

テスト制御装置１０は、変更後の実行環境でソフトウェアをテストする。例えば、テスト制御装置１０は、変更前の実行環境で正常に動作していたソフトウェアが、変更後の実行環境でも正常に動作することを確認するテストを行う。このとき、基準画像１４が未更新であることがあり、変更前の実行環境では基準画像１４が表示され得るものの、変更後の実行環境では基準画像１４が表示されないことがある。

【0020】

処理部１２は、テスト対象のソフトウェアを実行することで生成される表示画像の中に、テスト命令１３と関連付けられた基準画像１４が含まれるか判定する。処理部１２は、例えば、表示画像と基準画像１４との間のパターンマッチングによって、表示画像の中に基準画像１４が含まれるか判定する。表示画像の中に基準画像１４と完全一致する部分画像がないものの、基準画像１４との類似度が閾値を超える部分画像がある場合、処理部１２は、表示画像の中に基準画像１４が含まれると判定してもよい。

【0021】

表示画像の中に基準画像１４が含まれると判定した場合、処理部１２は、表示画像の中の基準画像１４が検出された位置に基づいて、テスト命令１３を実行する。例えば、処理部１２は、表示画像２１の中に基準画像１４が含まれると判定する。この場合、処理部１２は、基準画像１４が検出された位置２３に基づいてテスト命令１３を実行する。位置２３は矩形領域を示してもよく、座標によって特定されてもよい。

【0022】

一方、表示画像の中に基準画像１４が含まれないと判定した場合、処理部１２は、表示画像の中の位置の指定を受け付け、指定された位置に基づいてテスト命令１３を実行する。表示画像の中から基準画像１４が検出されないことは、実行環境の変更によって表示部品のデザインが変化したことが原因である可能性がある。例えば、処理部１２は、表示画像２２の中に基準画像１４が含まれないと判定する。この場合、処理部１２は、表示画像２２の中の位置２４の指定を受け付け、位置２４に基づいてテスト命令１３を実行する。位置２４は矩形領域を示してもよく、座標によって特定されてもよい。

【0023】

位置２４は、テスト実施者の操作によって指定されてもよい。処理部１２は、表示画像２２と重ねて枠画像を表示してもよく、この枠画像の移動をテスト実施者に許可することで位置２４をテスト実施者に指定させてもよい。また、処理部１２は、指定された位置２４に応じた部分画像を表示画像２２の中から抽出し、抽出された部分画像を新たな基準画像としてテスト命令１３と関連付けて保存してもよい。新たな基準画像には、変更後の実行環境における表示部品のデザインが反映されている。

【0024】

また、処理部１２は、過去のテストで基準画像１４が検出された位置を示す位置情報を取得してもよく、この位置情報が示す位置に上記の枠画像を表示させてもよい。テスト制御装置１０が位置情報を生成して履歴として保存しておいてもよいし、他の情報処理装置が位置情報を生成してテスト制御装置１０に提供してもよい。

【0025】

以上説明したように、第１の実施の形態のテスト制御装置１０は、テスト対象のソフトウェアを実行することで生成される表示画像の中に、基準画像１４が含まれるか判定する。表示画像２１の中に基準画像１４が含まれると判定した場合、テスト制御装置１０は、基準画像１４が検出された位置２３に基づいてテスト命令１３を実行する。表示画像２２の中に基準画像１４が含まれないと判定した場合、テスト制御装置１０は、位置２４の指定を受け付け、位置２４に基づいてテスト命令１３を実行する。

【0026】

これにより、実行環境の変更によって表示部品のデザインが変化し、基準画像１４の検出に失敗した場合であっても、テスト制御装置１０は、保存されているテスト命令１３を用いてソフトウェアテストを円滑に実行することができる。例えば、基盤ソフトウェアのバージョンアップなど実行環境の変更が生じる毎にテスト命令を全て作り直す手間が削減され、テスト実施者の負担が軽減される。

【0027】

なお、テスト制御装置１０は、指定された位置２４に応じた部分画像を表示画像２２から抽出し、その部分画像を新たな基準画像として保存してもよい。これにより、テスト制御装置１０は、変更後の実行環境のためのテスト情報を効率的に生成することができる。

【0028】

また、テスト制御装置１０は、位置２４の指定を受け付ける際、基準画像１４が検出された位置を示す位置情報を取得し、位置情報が示す位置に応じて枠画像を表示してもよい。これにより、表示画像２２の中から基準画像１４に相当する表示部品を指定するテスト実施者の負担が軽減される。また、テスト命令１３は、特定された基準位置に応じた表示部品に対して入力操作を実行するものであってもよい。これにより、ＧＵＩテストの少なくとも一部が自動化されてテスト実施者の手作業が削減され、テストが効率化される。

【0029】

［第２の実施の形態］
次に、第２の実施の形態を説明する。
図２は、第２の実施の形態の情報処理システムの例を示す図である。

【0030】

第２の実施の形態の情報処理システムは、ＧＵＩをもつアプリケーションソフトウェアをテストする。アプリケーションソフトウェアは、ユーザから入力操作を受け付けるアプリケーション画面がＷｅｂブラウザに表示されるＷｅｂアプリケーションである。情報処理システムは、バージョンアップ前の旧実行環境で正常に動作していたアプリケーションソフトウェアが、バージョンアップ後の新実行環境で正常に動作するかテストする。実行環境のバージョンアップは、ＯＳおよびＷｅｂブラウザのバージョンアップを含む。

【0031】

情報処理システムは、ネットワーク３０に接続されたテスト制御装置３１，３２およびテストセット管理サーバ３３を含む。ネットワーク３０は、ＬＡＮ（Local Area Network）を含んでもよくインターネットを含んでもよい。

【0032】

テスト制御装置３１，３２は、アプリケーションプログラムをテストするクライアントコンピュータである。テスト制御装置３１，３２は、実行環境としてＯＳおよびＷｅｂブラウザを実行する。また、テスト制御装置３１，３２は、入力操作の少なくとも一部を自動化してテストを支援するテストソフトウェアを実行する。

【0033】

テストソフトウェアは、事前に規定されたテスト命令に基づいて、Ｗｅｂブラウザに表示されたアプリケーション画面に対する入力操作を生成する。Ｗｅｂブラウザは、入力操作に応じてアプリケーションプログラムを呼び出し、アプリケーションプログラムからＨＴＭＬ（Hypertext Markup Language）テキストなどの表示データを受信する。Ｗｅｂブラウザは、受信した表示データを可視化してアプリケーション画面を表示する。アプリケーションプログラムは、テスト制御装置３１，３２で実行されてもよいし、テスト制御装置３１，３２から要求メッセージを受信する図示しないサーバ装置で実行されてもよい。

【0034】

テストセット管理サーバ３３は、テストセットを記憶して管理するサーバコンピュータである。テストセットは、テスト命令の列を含む。各テスト命令は、アプリケーション画面に含まれ得る特定の表示部品を監視する処理や、特定の表示部品に対してボタン押下や文字入力などの入力操作を実行する処理などを示す。

【0035】

テストセットに含まれる複数のテスト命令は、先頭から順に実行される。全てのテスト命令がエラーなしに実行された場合、テスト成功とみなされる。一方、何れかのテスト命令でエラーが発生した場合、テスト失敗とみなされる。テストセットには、画像が付加されていることがある。この画像は、ボタンやラベルなどの表示部品の画像であり、アプリケーション画面の中から着目する表示部品を検索するための基準画像である。テストソフトウェアは、パターンマッチングによって、この画像が表示された領域を検出する。

【0036】

テストセット管理サーバ３３は、テスト制御装置３１，３２からのチェックアウト要求に応じて、テストセット管理サーバ３３に保存されているテストセットのコピーをテスト制御装置３１，３２に送信する。テスト制御装置３１，３２は、テストセット管理サーバ３３から受信したテストセットを使用する。テスト制御装置３１，３２は、テストセットを編集することがある。テストセット管理サーバ３３は、テスト制御装置３１，３２からのコミット要求に応じて、テスト制御装置３１，３２から受信する編集済みテストセットを、新しいバージョンのテストセットとして保存する。

【0037】

ＯＳおよびＷｅｂブラウザは、バージョンアップされることがある。ＯＳまたはＷｅｂブラウザのバージョンアップによって、Ｗｅｂブラウザに表示される表示部品の見た目（デザイン）が変化する可能性がある。テスト制御装置３１は、バージョンアップ前のＯＳおよびＷｅｂブラウザを含む旧実行環境をもつ。テスト制御装置３２は、バージョンアップ後のＯＳおよびＷｅｂブラウザを含む新実行環境をもつ。同一のアプリケーションソフトウェアおよび同一のテストセットを用いても、テスト制御装置３１とテスト制御装置３２との間でテスト結果が異なる可能性がある。なお、情報処理システムは、テスト制御装置３１，３２の実行環境をそれぞれ仮想マシンとして実装してもよい。これにより、同一コンピュータ上に旧実行環境と新実行環境とを併存させることができる。

【0038】

テストセット管理サーバ３３からテスト制御装置３２にコピーされるテストセットは、新実行環境に未対応のテストセットであることがある。新実行環境に未対応のテストセットを使用した場合、表示部品のデザイン変化が原因で、テストセットに付加された画像がアプリケーション画面から検出されず、テスト命令がエラーになる可能性がある。

【0039】

そこで、テストソフトウェアは、テストセットに含まれるテスト命令を上から順に実行していくテストの過程で、テスト実施者がテストセットを適切に修正することができるように支援するデバッグモードをもつ。デバッグモードのＯＮとＯＦＦを切り替えるフラグは、テストソフトウェアの設定情報の中に含まれる。テスト制御装置３１のテストソフトウェアがデバッグモードＯＮで起動された場合、テスト制御装置３１は、後述する位置情報を出力する。位置情報は、テスト制御装置３１からテスト制御装置３２に渡される。

【0040】

例えば、テスト制御装置３１が共有ストレージ装置に位置情報を保存し、テスト制御装置３２が共有ストレージ装置から位置情報を読み出す。また、例えば、ネットワーク３０を介して、テスト制御装置３１がテスト制御装置３２に位置情報を送信する。また、例えば、テスト制御装置３１がフラッシュメモリなどの不揮発性可搬記録媒体に位置情報を書き込み、テスト制御装置３２がこの不揮発性可搬記録媒体から位置情報を読み出す。

【0041】

テスト制御装置３２のテストソフトウェアがデバッグモードＯＮで起動された場合、テスト制御装置３２は、位置情報を読み込む。テスト制御装置３２は、アプリケーション画面からの画像検索に失敗した場合、位置情報を参照してテストセット編集画面を表示し、テストセットに付加された画像の差し替えをテスト実施者に促す。

【0042】

図３は、テスト制御装置のハードウェア例を示すブロック図である。
テスト制御装置３２は、バスに接続されたＣＰＵ１０１、ＲＡＭ１０２、ＨＤＤ１０３、ＧＰＵ１０４、入力インタフェース１０５、媒体リーダ１０６および通信インタフェース１０７を有する。テスト制御装置３１およびテストセット管理サーバ３３が、テスト制御装置３２と同様のハードウェアを有してもよい。ＣＰＵ１０１は、第１の実施の形態の処理部１２に対応する。ＲＡＭ１０２またはＨＤＤ１０３は、第１の実施の形態の記憶部１１に対応する。

【0043】

ＣＰＵ１０１は、プログラムの命令を実行するプロセッサである。ＣＰＵ１０１は、ＨＤＤ１０３に記憶されたプログラムおよびデータの少なくとも一部をＲＡＭ１０２にロードし、プログラムを実行する。テスト制御装置３２は、複数のプロセッサを有してもよい。プロセッサの集合が、マルチプロセッサまたは単に「プロセッサ」と呼ばれてもよい。

【0044】

ＲＡＭ１０２は、ＣＰＵ１０１で実行されるプログラムおよびＣＰＵ１０１で演算に使用されるデータを一時的に記憶する揮発性半導体メモリである。テスト制御装置３２は、ＲＡＭ以外の種類の揮発性メモリを有してもよい。

【0045】

ＨＤＤ１０３は、ＯＳ、ミドルウェア、アプリケーションソフトウェアなどのソフトウェアのプログラム、および、データを記憶する不揮発性ストレージである。テスト制御装置３２は、フラッシュメモリやＳＳＤ（Solid State Drive）などの他の種類の不揮発性ストレージを有してもよい。

【0046】

ＧＰＵ１０４は、ＣＰＵ１０１と連携して画像処理を行い、テスト制御装置３２に接続された表示装置１１１に画像を出力する。表示装置１１１は、例えば、ＣＲＴ（Cathode Ray Tube）ディスプレイ、液晶ディスプレイ、有機ＥＬ（Electro Luminescence）ディスプレイまたはプロジェクタである。なお、テスト制御装置３２に、プリンタなどの他の種類の出力デバイスが接続されてもよい。

【0047】

入力インタフェース１０５は、テスト制御装置３２に接続された入力デバイス１１２から入力信号を受け付ける。入力デバイス１１２は、例えば、マウス、タッチパネルまたはキーボードである。テスト制御装置３２に複数の入力デバイスが接続されてもよい。

【0048】

媒体リーダ１０６は、記録媒体１１３に記録されたプログラムおよびデータを読み取る読み取り装置である。記録媒体１１３は、例えば、磁気ディスク、光ディスクまたは半導体メモリである。磁気ディスクには、フレキシブルディスク（ＦＤ：Flexible Disk）およびＨＤＤが含まれる。光ディスクには、ＣＤ（Compact Disc）およびＤＶＤ（Digital Versatile Disc）が含まれる。媒体リーダ１０６は、記録媒体１１３から読み取られたプログラムおよびデータを、ＲＡＭ１０２やＨＤＤ１０３などの他の記録媒体にコピーする。読み取られたプログラムは、ＣＰＵ１０１によって実行されることがある。

【0049】

記録媒体１１３は、可搬型記録媒体であってもよい。記録媒体１１３は、プログラムおよびデータの配布に用いられることがある。また、記録媒体１１３およびＨＤＤ１０３が、コンピュータ読み取り可能な記録媒体と呼ばれてもよい。

【0050】

通信インタフェース１０７は、ネットワーク３０を介してテスト制御装置３１やテストセット管理サーバ３３と通信する。通信インタフェース１０７は、スイッチやルータなどの有線通信装置に接続される有線通信インタフェースでもよいし、基地局やアクセスポイントなどの無線通信装置に接続される無線通信インタフェースでもよい。

【0051】

次に、テストセットについて説明する。
図４は、テストセットの例を示す図である。
テストセット１３１は、テストセット管理サーバ３３に保存されており、テスト実行時にテスト制御装置３１，３２にコピーされる。よって、テストセット１３１は、テスト制御装置３１，３２にも記憶される。テストセット１３１は、順序付きの複数のテスト命令を含む。テスト命令の中には、事前に作成された画像を参照するものがある。

【0052】

例えば、第１命令は、アプリケーションソフトウェアを起動するテスト命令である。第２命令は、アプリケーション画面から画像１３２を検出し、画像１３２が検出された矩形領域の右端から５０ポイント右をクリックするテスト命令である。画像１３２は、ラベルを示す矩形画像である。画像１３２が検出されない場合、第２命令がエラーになる。

【0053】

第３命令は、第２命令のクリックによってアクティブになった文字入力フィールドに、特定の文字列を入力するテスト命令である。第４命令は、アプリケーション画面から画像１３３を検出し、画像１３３が検出された矩形領域の中心をクリックするテスト命令である。画像１３３は、ＯＫボタンを示す矩形画像である。画像１３３が検出されない場合、第４命令がエラーになる。第５命令は、一定時間以内にアプリケーション画面から画像１３４を検出するテスト命令である。画像１３４は、ポップアップメッセージを示す矩形画像である。一定時間以内に画像１３４が検出されない場合、第５命令がエラーになる。

【0054】

何れかのテスト命令でエラーが発生すると、原則として、正常な画面遷移が行われていないと判断されてテスト失敗とみなされる。ただし、実行環境の変更によってラベル、ＯＫボタンまたはポップアップメッセージのデザインが変化する可能性がある。その場合、画像１３２，１３３，１３４と同等の表示部品がアプリケーション画面に含まれているにもかかわらず、画像検出が失敗することがある。その結果、アプリケーションソフトウェアが正常に動作しているにもかかわらず、テスト失敗とみなされることがある。

【0055】

図５は、環境変更によるＧＵＩの変化例を示す図である。
アプリケーション画面１４１は、旧実行環境で表示されるＷｅｂブラウザの画面である。アプリケーション画面１４２は、新実行環境で表示されるＷｅｂブラウザの画面である。アプリケーション画面１４１，１４２はそれぞれ、１つの文字列と１つのＯＫボタンと１つのキャンセルボタンとを含む。

【0056】

アプリケーション画面１４１とアプリケーション画面１４２とでは、文字列の左端の位置が異なる。また、アプリケーション画面１４１とアプリケーション画面１４２とでは、ＯＫボタンの大きさ、外枠の形状および色が異なる。また、アプリケーション画面１４１とアプリケーション画面１４２とでは、キャンセルボタンの大きさ、外枠の形状および色が異なる。アプリケーション画面１４１に含まれるＯＫボタンの画像を使用すると、アプリケーション画面１４２からＯＫボタンの領域を検出することは難しい。

【0057】

次に、テストセットの編集について説明する。
図６は、位置情報テーブルの例を示す図である。
位置情報テーブル１３５は、テスト制御装置３１によって生成されてテスト制御装置３２によって読み込まれる。よって、位置情報テーブル１３５は、テスト制御装置３１，３２に記憶される。位置情報テーブル１３５は、画像ＩＤと領域位置とを対応付ける、
画像ＩＤは、テストセットに付加された画像を識別する識別子である。例えば、前述の画像１３２，１３３，１３４の画像ＩＤが位置情報テーブル１３５に登録される。領域位置は、画像が正常に検出された際の検出位置を示す。領域位置は、例えば、画像が存在する矩形領域の左上点の座標と右下点の座標とを含む。座標は、アプリケーション画面内の点を示す二次元座標であり、高さと幅のペアである。例えば、Ｗｅｂブラウザの左上の端が原点であり、原点から下方向が高さであり、原点から右方向が幅である。領域位置は、例えば、円形領域の中心座標と半径情報とを含むようにしてもよく、領域の形状は限定されない。

【0058】

例えば、テスト制御装置３２が画像１３２を検出した領域位置は、左上点が（５０，５０）かつ右下点が（７０，１００）の矩形領域である。テスト制御装置３２が画像１３３を検出した領域位置は、左上点が（１００，５０）かつ右下点が（１２０，１２０）の矩形領域である。テスト制御装置３２が画像１３４を検出した領域位置は、左上点が（５０，５０）かつ右下点が（７０，２００）の矩形領域である。

【0059】

図７は、テストセット編集画面の例を示す図である。
テストセット編集画面１４３は、テスト制御装置３２がテストソフトウェアをデバッグモードで実行した場合に表示装置１１１に表示される。テストセット編集画面１４３は、テスト命令が参照する画像がアプリケーション画面から検出されない場合に表示される。テストセット編集画面１４３は、テスト命令が参照する画像の差し替えを支援する。

【0060】

テストセット編集画面１４３は、指定された画像がアプリケーション画面から見つからない旨のメッセージを含む。また、テストセット編集画面１４３は、現在登録されている画像であって見つからなかった画像を含む。また、テストセット編集画面１４３は、現在のアプリケーション画面を示す表示画像を含む。また、テストセット編集画面１４３は、テスト命令が参照する画像の変更を指示するボタンを含む。

【0061】

ここで、テスト制御装置３２は、位置情報テーブル１３５から、見つからなかった画像に対応する領域位置を検索する。テスト制御装置３２は、アプリケーション画面を示す表示画像の上に、この領域位置を示す矩形の枠線を表示する。テストセット編集画面１４３は、テスト実施者が枠線の位置を変更することを許可する。テスト実施者は、枠線の位置を変更してもよいし変更しなくてもよい。テスト制御装置３２は、画像の変更を指示するボタンが押下されると、枠線内の画像を抽出し、抽出した画像をテスト命令が参照する画像として保存する。変更前の画像は削除されてもよい。

【0062】

枠線の初期位置は、旧実行環境のアプリケーション画面に含まれる所望の表示部品の位置である。新実行環境のアプリケーション画面に含まれる所望の表示部品は、枠線の初期位置の近くに存在することが多い。テスト実施者は、枠線の位置を微調整することで、枠線が所望の表示部品を囲むように設定することができる。これにより、テストセットに付加された画像を新実行環境用に変更するというテスト実施者の負担が軽減される。

【0063】

なお、テスト制御装置３２は、枠線の初期位置を位置情報テーブル１３５が示す領域位置そのものとする代わりに、新実行環境のアプリケーション画面に基づいて枠線の初期位置を自動調整してもよい。例えば、テスト制御装置３２は、位置情報テーブル１３５が示す領域位置から一定範囲内に存在するボタンなどの表示部品を画像認識によって検出し、検出した表示部品を囲むような枠線を表示してもよい。

【0064】

次に、テスト制御装置３２の機能および処理手順について説明する。
図８は、テスト制御装置の機能例を示すブロック図である。
テスト制御装置３２は、テストセット記憶部１２１、画像記憶部１２２および位置情報記憶部１２３を有する。これらの記憶部は、例えば、ＲＡＭ１０２またはＨＤＤ１０３を用いて実装される。また、テスト制御装置３２は、テスト命令実行部１２４、領域検出部１２５、位置記録部１２６およびテストセット編集部１２７を有する。これらの処理部は、例えば、ＣＰＵ１０１およびプログラムを用いて実装される。

【0065】

テスト制御装置３１が、テスト制御装置３２と同様のモジュールを有してもよい。なお、上記ではテスト制御装置３１が旧実行環境をもち、テスト制御装置３２が新実行環境をもつと説明したが、テストソフトウェアは、旧実行環境用の処理を行うモジュールと新実行環境用の処理を行うモジュールの両方を含んでいる。

【0066】

テストセット記憶部１２１は、テストセット管理サーバ３３からコピーされたテストセットを記憶する。テストセットは、テスト命令の列を含む。テストセット記憶部１２１は、例えば、前述のテストセット１３１を記憶する。

【0067】

画像記憶部１２２は、テストセットに付随してテストセット管理サーバ３３からコピーされた画像を記憶する。画像記憶部１２２は、例えば、前述の画像１３２，１３３，１３４を記憶する。画像記憶部１２２に記憶された画像は、テストセット編集部１２７によって上書き更新されることがある。その場合、テスト制御装置３２は、更新された画像をテストセット管理サーバ３３にコピーする。

【0068】

位置情報記憶部１２３は、正常に検出された画像の位置を示す位置情報を記憶する。位置情報記憶部１２３は、例えば、前述の位置情報テーブル１３５を記憶する。位置情報は、旧実行環境用のデバッグモード（デバッグモード１）がＯＮである間に記録される。テスト制御装置３２は、他のテスト制御装置に位置情報をコピーすることがあり、他のテスト制御装置から位置情報のコピーを受け取ることがある。

【0069】

テスト命令実行部１２４は、アプリケーションソフトウェアを起動する。テスト命令実行部１２４は、テストセット記憶部１２１に記憶されたテストセットに含まれるテスト命令を先頭から順に１つずつ実行する。テスト命令が画像を参照している場合、テスト命令実行部１２４は、画像が存在する領域の検出を領域検出部１２５に依頼する。

【0070】

領域検出に失敗した場合であって新実行環境用のデバッグモード（デバッグモード２）がＯＮである場合、テスト命令実行部１２４は、テストセット編集部１２７に画像の更新を依頼する。領域検出に成功した場合であってデバッグモード１がＯＮである場合、テスト命令実行部１２４は、位置記録部１２６に位置情報の記録を依頼する。

【0071】

テスト命令にエラーが発生した場合、テスト命令実行部１２４は、テストセットの実行を中止し、テスト失敗を示すメッセージを表示装置１１１に表示する。テストセットの末尾のテスト命令までエラーが発生しなかった場合、テスト命令実行部１２４は、テスト成功を示すメッセージを表示装置１１１に表示する。

【0072】

領域検出部１２５は、テスト命令実行部１２４から指定された画像を画像記憶部１２２から読み出し、現在のアプリケーション画面の中から当該画像を含む領域を検出する。領域検出部１２５は、領域検出に成功した場合は領域の位置座標をテスト命令実行部１２４に報告し、領域検出に失敗した場合はその旨をテスト命令実行部１２４に報告する。

【0073】

位置記録部１２６は、デバッグモード１がＯＮである場合、領域検出部１２５によって検出された領域を示す位置情報を生成し、位置情報記憶部１２３に保存する。
テストセット編集部１２７は、デバッグモード２がＯＮである場合、前述のテストセット編集画面１４３のようなテストセット編集画面を表示装置１１１に表示する。このとき、テストセット編集部１２７は、テスト命令実行部１２４から指定された画像に対応する位置情報を位置情報記憶部１２３から読み出し、位置情報が示す位置に枠線を表示して、所望の表示部品が存在する領域を指定するようテスト実施者に促す。テストセット編集部１２７は、枠線内の画像を抽出して画像記憶部１２２に保存する。

【0074】

図９は、テスト実行の手順例を示すフローチャートである。
（Ｓ１０）テスト命令実行部１２４は、テストセットから次のテスト命令を検索する。
（Ｓ１１）テスト命令実行部１２４は、次のテスト命令があるか判断する。次のテスト命令がある場合、ステップＳ１２に処理が進む。次のテスト命令がない場合、テスト命令実行部１２４はテスト成功メッセージを出力し、テスト実行が終了する。

【0075】

（Ｓ１２）テスト命令実行部１２４は、次のテスト命令が画像を参照しているか判断する。テスト命令が画像を参照している場合、ステップＳ１３に処理が進む。テスト命令が画像を参照していない場合、ステップＳ１９に処理が進む。

【0076】

（Ｓ１３）領域検出部１２５は、テスト命令が参照する画像を読み出し、現在のアプリケーション画面の中から当該画像を検索する。
（Ｓ１４）テスト命令実行部１２４は、アプリケーション画面の中から上記の画像を含む画像領域が検出されたか判断する。画像領域が検出された場合、ステップＳ１５に処理が進む。画像領域が検出されなかった場合、ステップＳ１６に処理が進む。

【0077】

（Ｓ１５）位置記録部１２６は、検出された画像領域の位置を示す位置情報を記録する。そして、ステップＳ１９に処理が進む。なお、ステップＳ１５は、デバッグモード１がＯＮである場合に実行され、デバッグモード１がＯＦＦである場合はスキップされる。

【0078】

（Ｓ１６）テストセット編集部１２７は、テスト命令が参照する画像に対応する位置情報を読み込む。テストセット編集部１２７は、アプリケーション画面を示す表示画像の上に位置情報に応じた枠線を重ねたテストセット編集画面を生成して表示する。

【0079】

（Ｓ１７）テストセット編集部１２７は、テストセット編集画面上で、枠線の位置座標やサイズを変更する操作を受け付ける。ただし、枠線の初期位置が所望の表示部品の位置と既に合致している場合、ステップＳ１７がスキップされ得る。

【0080】

（Ｓ１８）テストセット編集部１２７は、アプリケーション画面を示す表示画像の中から枠線内の画像を抽出し、テスト命令が参照する新たな画像として保存する。なお、ステップＳ１６～Ｓ１８は、デバッグモード２がＯＮである場合に実行され、デバッグモード２がＯＦＦである場合はスキップされる。

【0081】

（Ｓ１９）テスト命令実行部１２４は、テスト命令を実行する。ステップＳ１６～Ｓ１８を通じて所望の表示部品の領域が枠線で指定された場合、テスト命令実行部１２４は、指定された領域の位置座標に基づいてテスト命令を実行すればよい。ただし、テスト命令実行部１２４は、更新された画像を用いてアプリケーション画面から改めて画像領域を検出してもよい。領域検出に失敗したものの、ステップＳ１６～Ｓ１８が実行されなかった場合、テスト命令の実行が失敗したものとみなされる。

【0082】

（Ｓ２０）テスト命令実行部１２４は、テスト命令の実行が成功したか判断する。テスト命令の実行が成功した場合、ステップＳ１０に処理が戻る。テスト命令の実行が失敗した場合、ステップＳ２１に処理が進む。

【0083】

（Ｓ２１）テスト命令実行部１２４は、テスト失敗メッセージを出力する。
以上説明したように、第２の実施の形態の情報処理システムは、アプリケーション画面の中から特定の画像を検索し、特定の画像が存在する位置を基準にして、ボタン押下や文字入力などの入力操作を示すテスト命令を実行する。これにより、ＧＵＩテストの少なくとも一部が自動化されてＧＵＩテストが効率化される。

【0084】

また、情報処理システムは、アプリケーション画面から特定の画像が検出されなかった場合、ＧＵＩテストをすぐに終了せず、所望の表示部品が存在する領域をテスト実施者に指定させてＧＵＩテストを継続する。これにより、情報処理システムは、実行環境の変更によって表示部品のデザインが変化しても、保存されたテストセットを活用してＧＵＩテストを実行でき、実行環境の変更に柔軟に対応することができる。

【0085】

また、情報処理システムは、指定された領域の画像を抽出して、テストセットに付随する画像を更新する。これにより、情報処理システムは、新実行環境のためのテストセットを効率的に生成することができる。また、情報処理システムは、旧実行環境において特定の画像が検出された位置を示す位置情報を記録し、記録された位置情報が示す位置に枠線を表示する。これにより、所望の表示部品が存在する領域をテスト実施者が指定する負担が軽減される。特に、実行環境の変更前後で所望の表示部品の位置座標やサイズに変化がない場合、所望の表示部品を枠線で囲む操作が削減される。

【符号の説明】

【0086】

１０ テスト制御装置
１１ 記憶部
１２ 処理部
１３ テスト命令
１４ 基準画像
２１，２２ 表示画像
２３，２４ 位置

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】