特許 7534865 テスト自動化装置

(19)【発行国】日本国特許庁(JP)

(12)【公報種別】特許公報(B2)

(11)【特許番号】

(24)【登録日】2024-08-06

(45)【発行日】2024-08-15

(54)【発明の名称】テスト自動化装置

(51)【国際特許分類】

   G06F 11/36 20060101AFI20240807BHJP

【ＦＩ】

G06F11/36 188

【請求項の数】 4

(21)【出願番号】P 2020075215

(22)【出願日】2020-04-21

(65)【公開番号】P2021174084

(43)【公開日】2021-11-01

【審査請求日】2023-04-10

(73)【特許権者】

【識別番号】000005108

【氏名又は名称】株式会社日立製作所

(74)【代理人】

【識別番号】110001689

【氏名又は名称】青稜弁理士法人

(72)【発明者】

【氏名】木下 智雄

【審査官】北川 純次

(56)【参考文献】

【文献】特開２０１４－１８６６１７（ＪＰ，Ａ）

【文献】特開２００７－３０４６６０（ＪＰ，Ａ）

(58)【調査した分野】(Int.Cl.，ＤＢ名)

Ｇ０６Ｆ １１／３６

(57)【特許請求の範囲】

【請求項1】

テストスクリプトに記述されたテストスクリプト文字列の解析を行うテストスクリプト解析部と、
解析した前記テストスクリプト文字列を、テストシナリオを有する表形式のプログラムチェックリストに整形するプログラムチェックリスト生成部と、
前記テストシナリオが記述された前記プログラムチェックリストから前記テストスクリプト文字列を抽出して前記テストスクリプトを生成するテストスクリプト生成部と、
前記テストスクリプトに基づいて画面自動テストツールを実行して実行結果ファイルを出力する画面自動テストツール部と、
前記実行結果ファイルを解析する実行結果ファイル解析部と、
前記実行結果ファイルの解析結果を前記プログラムチェックリストに反映させるテスト結果反映部と、
を有し、
前記テストスクリプトと前記プログラムチェックリストを相互に変換することを特徴とするテスト自動化装置。

【請求項2】

前記プログラムチェックリスト生成部は、
前記テストスクリプトに記述された前記テストスクリプト文字列を前記テストシナリオに変換して前記プログラムチェックリストに記述することを特徴とする請求項１に記載のテスト自動化装置。

【請求項3】

前記実行結果ファイルには、
前記テストシナリオごとに、実行結果として成功情報又は失敗情報が記述され、
前記テスト結果反映部は、
前記成功情報又は前記失敗情報を前記プログラムチェックリストに記述することにより、前記実行結果ファイルの前記解析結果を前記プログラムチェックリストに反映させることを特徴とする請求項１に記載のテスト自動化装置。

【請求項4】

前記テストスクリプト生成部は、
前記プログラムチェックリストに記述された前記テストシナリオを、前記テストスクリプト文字列に変換して前記テストスクリプトに記述することを特徴とする請求項１に記載のテスト自動化装置。

【発明の詳細な説明】

【技術分野】

【0001】

本発明は、テスト自動化装置に関する。

【背景技術】

【0002】

テストシナリオの抜け漏れを防いでテストの網羅性を高めるために、表形式のプログラムチェックリスト形式でテストを設計し、これに基づいてテストを行う方法が知られている。表形式のプログラムチェックリストを用いて、画面の操作を行うテストを自動化するためには、以下の手順１～手順３が必要である。

【0003】

手順１では、表形式のプログラムチェックリストを参照しながら、テストスクリプトを手動で作成する。手順２では、テストスクリプトを画面自動テストツールが自動実行する。手順３では、出力された結果を参照し、表形式のプログラムチェックリストに結果を記載する。この際、手順１と手順３は人手で行われている。例えば、特許文献１には自動テストツールに関する技術が記載されている。

【先行技術文献】

【特許文献】

【0004】

【文献】特開２００１－２５６０７７号公報

【発明の概要】

【発明が解決しようとする課題】

【0005】

上記従来技術では、人手でテストスクリプトを作成している。このため、テストスクリプトの記述法の知識習得負荷、テストスクリプトの作成負荷及びプログラムチェックリストの内容をテストスクリプトに正確に反映する精度に関する課題が存在する。また、出力された結果を表形式のプログラムチェックリストに反映するための工数が必要であるという課題も存在する。

【0006】

本発明の目的は、テスト自動化システムにおいて、表形式のプログラムチェックリストを用いた画面自動テストを自動で実行することにある。

【課題を解決するための手段】

【0007】

本発明の一態様のテスト自動化装置は、テストスクリプトに記述されたテストスクリプト文字列の解析を行うテストスクリプト解析部と、解析した前記テストスクリプト文字列を、テストシナリオを有する表形式のプログラムチェックリストに整形するプログラムチェックリスト生成部と、前記テストスクリプトに基づいて画面自動テストツールを実行して実行結果ファイルを出力する画面自動テストツール部と、前記実行結果ファイルを解析する実行結果ファイル解析部と、前記実行結果ファイルの解析結果を前記プログラムチェックリストに反映させるテスト結果反映部と、を有することを特徴とする。

【0008】

本発明の一態様のテスト自動化装置は、テストシナリオが記述された表形式のプログラムチェックリストからテストスクリプト文字列を抽出してテストスクリプトを生成するテストスクリプト生成部と、生成された前記テストスクリプトに基づいて画面自動テストツールを実行し、実行結果ファイルを出力する画面自動テストツール部と、前記実行結果ファイルを解析する実行結果ファイル解析部と、前記実行結果ファイルの解析結果を前記プログラムチェックリストに反映させるテスト結果反映部と、を有することを特徴とする。

【発明の効果】

【0009】

本発明の一態様によれば、テスト自動化システムにおいて、表形式のプログラムチェックリストを用いた画面自動テストを自動で実行することができる

【図面の簡単な説明】

【0010】

【図1】テスト自動化システムの全体構成を示す図である。

【図2】実施例のテスト自動化装置の動作を示すフロー図である。

【図3】実施例のテスト自動化装置の動作を示すイメージ図である。

【図4】実施例のテスト自動化装置の動作を示すフロー図である。

【図5】実施例のテスト自動化装置の動作を示すイメージ図である。

【図6】テストスクリプトの記述内容の一例を示す図である。

【図7】表形式のプログラムチェックリストの内容を示す図である。

【図8】表形式プログラムチェックリストとテストスクリプトとの対応表を示す図である。

【図9】表形式プログラムチェックリストとテストスクリプトとの対応図である。

【図10】実行結果ファイルの内容を示す図である。

【図11】結果記載済みプログラムチェックリストの内容を示す図である。

【図12】実行結果ファイルと結果記入済み表形式プログラムチェックリストとの対応表を示す図である。

【図13】実行結果ファイルと結果記入済み表形式プログラムチェックリストとの対応図である。

【発明を実施するための形態】

【0011】

以下、図面を用いて、実施例について説明する。

【実施例】

【0012】

図１は、テスト自動化システムの全体構成を示す図である。テスト自動化システムは、テストスクリプトと表形式プログラムチェックリストを相互に変換する。

【0013】

テスト自動化システムは、アプリケーション実行端末１００とテスト自動化装置２００を有する。アプリケーション実行端末１００とテスト自動化システム装置２００は、ネットワーク３００を介して接続されている。アプリケーション実行端末１００はプログラム１１０を有する。

【0014】

テスト自動化装置２００は、記憶装置２１０、演算装置２２０、メモリ２３０、入力装置２４０及び表示装置２５０を有する。記憶装置２１０は、画面自動テストツール部２１１、テストスクリプト解析部２１２、プログラムチェックリスト生成部２１３、実行結果ファイル解析部２１４、テスト結果反映部２１５及びテストスクリプト生成部２１６を有する。

【0015】

また、記憶装置２１０は、テストスクリプト２６０（図６参照）、表形式プログラムチェックリスト２６１（図７参照）、実行結果ファイル２６２（図１０参照）、結果記載済プログラムチェックリスト２６３（図１１参照）及びブラウザ要素データ２６４を記憶する。

【0016】

図２を参照して、実施例のテスト自動化装置の動作について説明する。
図１の入力装置２４０を介してテストスクリプト２６０、ブラウザ要素データ２６４、実行結果ファイル２６２及び表形式プログラムチェックリスト２６１が入力される。
図１の表示装置２５０を介して、表形式プログラムチェックリスト２６１、実行結果ファイル２６２及び結果記載済プログラムチェックリスト２６３が出力される。

【0017】

次に、処理の流れについて説明する。
処理１では、テストスクリプト解析部２１２が、テストスクリプト２６０とブラウザ要素データ２６４の読込とテストスクリプト文字列の解析を行う（Ｓ２０１）。
処理２では、プログラムチェックリスト生成部２１３が、テストスクリプト解析部２１２が解析した文字列を表形式プログラムチェックリスト２６１に整形し生成する（Ｓ２０２）。ここで、図９に、テストスクリプト解析部２１２における表形式プログラムチェックリスト２６１とテストスクリプト２６０と対応図を示す。
処理３では、画面自動テストツール部２１１が、画面自動テストツールを実行して実行結果ファイル２６２を出力する（Ｓ２０３）。
処理４では、実行結果ファイル解析部２１４が、実行結果ファイル２６２の読込と解析を行う（Ｓ２０４）。
処理５では、テスト結果反映部２１５が、解析済実行結果を表形式のプログラムチェックリスト２６１に記載する（Ｓ２０５）。ここで、図１１に、結果記載済みプログラムチェックリスト２６３の内容を示す。図１１の確認内容の３行目には、シナリオ名がＰＣＬ－００３の場合、結果が“失敗”であることを示す×印が記述されている。また、図１３に、テスト結果反映部２１５における実行結果ファイル２６２と結果記入済み表形式プログラムチェックリスト２６３の対応図を示す。

【0018】

結果記載済みプログラムチェックリスト２６３の内容は、表示装置２５０に表示される。利用者は、表示装置２５０に表示された結果記載済みプログラムチェックリスト２６３の内容を確認する。そして、結果が“失敗”であることを示す×印が記述されている場合は、例えば、図１のアプリケーション実行端末１００のプログラム１１０を変更して再度テストを行う。

【0019】

図３を参照して、テストスクリプトを入力とする利用イメージについて説明する。
最初に、利用者は、事前処理として、テストスクリプト２６０とブラウザ要素データ２６４を用意する。
次に、処理１及び処理２で、テストスクリプト２６０とブラウザ要素データ２６４を用いて、表形式プログラムチェックリスト２６１を生成する。
次に、処理３で、テストスクリプト２６０に基づいて画面自動テストツール部２１１の画面自動テストツールを用いて、実行結果ファイル２６２を生成する。
次に、処理４及び処理５で、表形式プログラムチェックリスト２６１と実行結果ファイル２６２を用いて、結果記載済プログラムチェックリスト２６３を生成する。

【0020】

図４を参照して、実施例のテスト自動化装置の動作について説明する。
図１の入力装置２４０を介して、表形式プログラムチェックリスト２６１、テストスクリプト２６０、ブラウザ要素データ２６４、実行結果ファイル２６２及び表形式プログラムチェックリスト２６１が入力される。
図１の表示装置２５０を介して、テストスクリプト２６０、実行結果ファイル２６２及び結果記載済プログラムチェックリスト２６３が出力される。

【0021】

次に、処理の流れについて説明する。
処理１では、テストスクリプト生成部２１６が、表形式プログラムチェックリスト２６１を読込んでテストスクリプト文字列を生成する（Ｓ４０１）。
処理２では、画面自動テストツール部２１１が、画面自動テストツールを実行して実行結果ファイル２６２を出力する（Ｓ４０２）。
処理３では、実行結果ファイル解析部２１４が、実行結果ファイル２６２を読込んで実行結果ファイル２６２を解析する（Ｓ４０３）。
処理４では、テスト結果反映部２１５が、解析済の実行結果を表形式のプログラムチェックリスト２６１に記載する（Ｓ４０４）。

【0022】

ここで、図１１に、結果記載済みプログラムチェックリスト２６３の内容を示す。図１１の確認内容の３行目には、シナリオ名がＰＣＬ－００３の場合、結果が“失敗”であることを示す×印が記述されている。また、図１３に、テスト結果反映部２１５における実行結果ファイル２６２と結果記入済み表形式プログラムチェックリスト２６３の対応図を示す。

【0023】

結果記載済みプログラムチェックリスト２６３の内容は、表示装置２５０に表示される。利用者は、表示装置２５０に表示された結果記載済みプログラムチェックリスト２６３の内容を確認する。そして、結果が“失敗”であることを示す×印が記述されている場合は、例えば、図１のアプリケーション実行端末１００のプログラム１１０を変更して再度テストを行う。

【0024】

図５を参照して、表形式プログラムチェックリストを入力とする利用イメージについて説明する。

【0025】

最初に、利用者は、事前処理として、表形式プログラムチェックリスト２６１とブラウザ要素データ２６４を用意する。
次に、処理１で、表形式プログラムチェックリスト２６１を用いてテストスクリプト２６０を生成する。
次に、処理２で、テストスクリプト２６０に基づいて画面自動テストツール部２１１の画面自動テストツールを用いて、実行結果ファイル２６２を生成する。
次に、処理３及び処理４で、表形式プログラムチェックリスト２６１、ブラウザ要素データ２６４及び実行結果ファイル２６２を用いて、結果記載済のプログラムチェックリスト２６３を生成する。

【0026】

図６は、テストスクリプト２６０の記述内容の一例を示す図である。
図６では、図書館の検索動作を例に取り説明する。

【0027】

前提条件（Ｂａｃｋｇｒｏｕｎｄ）として、ブラウザサイズを（１２００，８００）に設定し、”／ｊａ／ｌｏｇｉｎ／”をブラウザで開く。

【0028】

シナリオ（Ｓｃｅｎａｒｉｏ：ＰＣＬ－００１）の場合は、”図書”で検索を実行する。
この際、「チェック条件」として、”ログイン”ボタンを押し、”ｂｏｏｋ－ｓｅａｒｃｈ．蔵書検索”を押す。そして、”ｂｏｏｋ－ｓｅａｒｃｈ．書籍名”に”図書”を入力する。次に、”検索”ボタンを押す。

【0029】

「確認内容」として、”ｂｏｏｋ－ｓｅａｒｃｈ．蔵書一覧の１番目”が”図書館の歴史１巻”であることを確認する。
「事後条件」として、”ｂｏｏｋ－ｓｅａｒｃｈ．メインメニュー”を押す。

【0030】

シナリオ（Ｓｃｅｎａｒｉｏ：ＰＣＬ－００２）の場合は、”著者”で検索を実行する。
この際、「チェック条件」として、”ログイン”ボタンを押し、”ｂｏｏｋ－ｓｅａｒｃｈ．蔵書検索”を押す。そして、”ｂｏｏｋ－ｓｅａｒｃｈ．書籍名”に”著者”を入力する。次に、”検索”ボタンを押す。

【0031】

「確認内容」として、”ｂｏｏｋ－ｓｅａｒｃｈ．蔵書一覧の１番目”が”著者の歴史１巻”であることを確認する。
「事後条件」として、”ｂｏｏｋ－ｓｅａｒｃｈ．メインメニュー”を押す。

【0032】

シナリオ（Ｓｃｅｎａｒｉｏ：ＰＣＬ－００３）の場合は、”名前”で検索を実行する。
この際、「チェック条件」として、”ログイン”ボタンを押し、”ｂｏｏｋ－ｓｅａｒｃｈ．蔵書検索”を押す。そして、”ｂｏｏｋ－ｓｅａｒｃｈ．書籍名”に”名前”を入力する。次に、”検索”ボタンを押す。

【0033】

「確認内容」として、”ｂｏｏｋ－ｓｅａｒｃｈ．蔵書一覧の１番目”が”名前の歴史１巻”であることを確認する。
「事後条件」として、”ｂｏｏｋ－ｓｅａｒｃｈ．メインメニュー”を押す。

【0034】

図７は、表形式のプログラムチェックリスト２６１の内容を示す図である。
図７では、図書館の検索動作を例に取り説明する。

【0035】

「テストシナリオ記述」として、前提条件、チェック条件、確認内容、事後条件が記述されている。

【0036】

前提条件には、ブラウザサイズを（〇〇、△△）に設定が記述される。この場合、“〇〇”は１２００であり、“△△”は８００である。

【0037】

また、前提条件には、”〇〇”をブラウザで開くことが記述される。この場合、“〇〇”は”／ｊａ／ｌｏｇｉｎ／”である。

【0038】

チェック条件には、”〇〇”ボタンを押すが記述される。この場合、“〇〇”は”ログイン”である。

【0039】

また、チェック条件には、”〇〇”を押すが記述される。この場合、“〇〇”は”ｂｏｏｋ－ｓｅａｒｃｈ．蔵書検索”である。

【0040】

また、チェック条件には、”〇〇”に“△△”を入力するが記述される。この場合、“〇〇”は “ｂｏｏｋ－ｓｅａｒｃｈ．書籍名”である。“△△”は、“図書”、“著者”、“名前”である。

【0041】

また、チェック条件には、”〇〇”ボタンを押すが記述される。この場合、“〇〇”は”検索”である。

【0042】

確認内容には、“〇〇”が“△△”で◎◎ことが記述される。この場合、“〇〇”は“ｂｏｏｋ－ｓｅａｒｃｈ．蔵書一覧の１番目”である。“△△”は、“図書館の歴史１巻”、“著者の歴史１巻”“名前の歴史１巻”である。“◎◎”は“ある”である。

【0043】

事後条件には、”〇〇”を押すが記述される。この場合、“〇〇”は”ｂｏｏｋ－ｓｅａｒｃｈ．メインメニュー”である。

【0044】

プログラムチェックリストの右側には、シナリオ（Ｓｃｅｎａｒｉｏ：ＰＣＬ－００１）である“図書”で検索が記述される。また、シナリオ（Ｓｃｅｎａｒｉｏ：ＰＣＬ－００２）である“著者”で検索が記述される。また、シナリオ（Ｓｃｅｎａｒｉｏ：ＰＣＬ－００３）である“名前”で検索が記述される。

【0045】

図８は、テストスクリプト解析部２１２及びテストスクリプト生成部２１６における表形式プログラムチェックリスト２６１及びテストスクリプト２６０の対応表を示す図である。

【0046】

対応表には、番号、表形式プログラムチェックリスト、テストスクリプト及び記述内容が記述されている。

【0047】

番号１には、シート、フィーチャ、記述内容として「１つの機能についてのテストケースの集合」が記述されている。番号２には、列、シナリオ、記述内容として「１件のテストケースについての操作の集合」が記述されている。

【0048】

番号３には、前提条件行、Ｂａｃｋｇｒｏｕｎｄ、記述内容として「テストケースの前提条件」が記述されている。番号４には、チェック条件行、Ｔｈｅｎステップ前のステップ、記述内容として「テストケースの入力条件や画面操作内容」が記述されている。

【0049】

番号５には、確認内容行、Ｔｈｅｎステップ、記述内容として「テストケースの検証項目」が記述されている。番号６には、事後条件行、Ｔｈｅｎステップ後のステップ、記述内容として「テストケース終了前に行う画面操作内容」が記述されている。

【0050】

図１０は実行結果ファイル２６２の内容を示す図である。
図１０に示すように、実行結果ファイルは、フィーチャ名、シナリオ名、結果、失敗行、実行日時及びブラウザを有する。

【0051】

例えば、フィーチャ名がＰＣＬでシナリオ名がＰＣＬ－００１の場合は、結果は“成功”であり、実行日時は“２０１９／１０／０１”であり、ブラウザは“ブラウザＡ”である。

【0052】

また、フィーチャ名がＰＣＬでシナリオ名がＰＣＬ－００３の場合は、結果は“失敗”であり、失敗行は“７”であり、実行日時は“２０１９／１０／０１”であり、ブラウザは“ブラウザＡ”である。

【0053】

図１２は、テスト結果反映部２１５における実行結果ファイル２６２と結果記入済み表形式プログラムチェックリスト２６３との対応表を示す。
図１２に示すように、対応表は、番号、結果ファイル、結果記入済み表形式プログラムチェックリストを有する。

【0054】

例えば、番号１では、結果ファイルはフィーチャ名であり、結果記入済み表形式プログラムチェックリストはシートである。番号２では、結果ファイルはシナリオ名であり、結果記入済み表形式プログラムチェックリストは列である。

【0055】

番号３では、結果ファイルは結果であり、結果記入済み表形式プログラムチェックリストは各列の「〇」を「×」にするか否かである。番号４では、結果ファイルは失敗行であり、結果記入済み表形式プログラムチェックリストは各列の「〇」を「×」にする位置である。

【0056】

番号５では、結果ファイルは実行日時であり、結果記入済み表形式プログラムチェックリストは確認日である。番号６では、結果ファイルはブラウザであり、結果記入済み表形式プログラムチェックリストはブラウザである。

【0057】

このように、上記実施例では、表形式プログラムチェックリスト２６１に記述されたテストシナリオと画面自動テスト実行に必要なテストスクリプト２６０を相互に自動的に変換する。また、表形式のプログラムチェックリスト２６１上から画面自動テストを実行し、表形式のプログラムチェックリスト２６１に実行結果を記載する。

【0058】

上記実施例によれば、表形式プログラムチェックリスト２６１を用いた画面自動テストの手順のうち、表形式プログラムチェックリスト２６１を参照しながらテストスクリプト２６０を作成する手順と、出力された結果を参照して表形式プログラムチェックリスト２６１に結果を記載する手順とを自動で実行することができる。

【0059】

これにより、画面自動テスト作成者のテストスクリプト２６０の記述法の知識習得負荷及びテストスクリプト２６０の作成負荷を軽減することができる。また、表形式プログラムチェックリスト２６１の内容をテストスクリプト２６０に反映する精度を向上させることができる。さらに、テスト結果記載者が出力された結果を表形式プログラムチェックリスト２６１に反映する工数を軽減することができる。

【符号の説明】

【0060】

１００ アプリケーション実行端末
１１０ プログラム
２００ テスト自動化装置
３００ ネットワーク
２１０ 記憶装置
２１１ 画面自動テストツール部
２１２ テストスクリプト解析部
２１３ プログラムチェックリスト生成部
２１４ 実行結果ファイル解析部
２１５ テスト結果反映部
２１６ テストスクリプト生成部
２２０ 演算装置
２３０ メモリ
２４０ 入力装置
２５０ 表示装置
２６０ テストスクリプト
２６１ 表形式プログラムチェックリスト
２６２ 実行結果ファイル
２６３ 結果記載済プログラムチェックリスト
２６４ ブラウザ要素データ

【図1】

【図2】

【図3】

【図4】

【図5】

【図6】

【図7】

【図8】

【図9】

【図10】

【図11】

【図12】

【図13】