JP7736635B2 - テスト結果可視化ファイル生成装置、テスト結果可視化ファイル生成方法およびテスト結果可視化ファイル生成プログラム - Google Patents

Description

本発明は、テスト結果可視化ファイル生成装置、テスト結果可視化ファイル生成方法およびテスト結果可視化ファイル生成プログラムに関する。

特許文献１には、システムの動作テストにおけるログの検証を効率化するための技術が開示されている（特許文献１の００１１段落参照）。

特開２０１６－７１４００号公報

ここで、アプリケーションが開発された際には、当該アプリケーションが画面上で正常に動作するか否かをテストする必要がある。しかしながら、上記特許文献１に記載の技術も含め、従来においては、この動作テストの結果を確認する作業を効率化できていなかった。

すなわち、従来においては、動作テストの結果、動作テストが行われた結果の画面、動作テストが行われた場合の実行履歴、および、動作テストの対象となったアプリケーションについての詳細な設定情報を一覧で確認することができなかった。このため、担当者は、動作テストにおいて問題が発生した場合には、前記実行履歴および前記詳細な設定情報を手動で探しにいく必要があったため、多大な時間および労力を要していた。

本発明は、上記問題点に鑑みてなされたものであって、開発されたアプリケーションを画面上で自動実行するテストを行った結果を可視化し、かつ、問題発生箇所の特定も容易にするためのファイルである可視化ファイルを生成することができるテスト結果可視化ファイル生成装置、テスト結果可視化ファイル生成方法およびテスト結果可視化ファイル生成プログラムを提供することを目的とする。

上述した課題を解決し、目的を達成するために、本発明に係るテスト結果可視化ファイル生成装置においては、開発されたアプリケーションを画面上で自動実行するテストを行った結果を可視化し、かつ、問題発生箇所の特定も容易にするためのファイルである可視化ファイルを生成することができる、制御部を備えるテスト結果可視化ファイル生成装置であって、前記制御部は、前記テストを行った結果の画面の画像であるテスト画像が、比較対象となる基準の画像である基準画像と比較して、差異なし、差異ありおよび比較不可のうちのいずれに該当するかが判断された結果である比較結果を、前記テスト画像のファイル名と紐付けて含む比較結果データに基づいて、差異ありまたは比較不可の比較結果と、差異ありまたは比較不可と判断された前記テスト画像のファイル名と、を前記可視化ファイルに埋め込む比較結果埋込手段と、差異ありまたは比較不可と判断された前記テスト画像を前記可視化ファイルに埋め込む画像埋込手段と、前記テストの際に画面において自動実行される操作についての命令である操作命令の塊からなる画面操作命令を含む画面操作命令テーブルから、差異ありまたは比較不可と判断された前記テスト画像のスクリーンショットを撮ることを命令する操作命令を含む画面操作命令を特定し、当該特定した画面操作命令に従って操作が実行された場合の実行履歴を含むデータである実行履歴データの内容を前記可視化ファイルに埋め込む実行履歴埋込手段と、前記実行履歴埋込手段で特定した画面操作命令に基づいて、前記テストの対象となったアプリケーションについての詳細な設定情報を確認するためのリンクを前記可視化ファイルに埋め込む第一リンク埋込手段と、を備えること、を特徴とする。

また、本発明に係るテスト結果可視化ファイル生成装置においては、前記実行履歴埋込手段は、差異ありまたは比較不可と判断された前記テスト画像のスクリーンショットを撮ることを命令する操作命令に対応する実行履歴を識別可能な態様で、前記実行履歴データの内容を前記可視化ファイルに埋め込むこと、を特徴とする。

また、本発明に係るテスト結果可視化ファイル生成装置においては、前記画像埋込手段は、差異ありと判断された前記テスト画像と、当該テスト画像の比較対象となった前記基準画像と、当該両画像間の差異を強調表示した画像と、を前記可視化ファイルに埋め込むこと、を特徴とする。

また、本発明に係るテスト結果可視化ファイル生成装置においては、前記制御部は、前記画面操作命令テーブル中の前記画面操作命令に従って操作が実行された場合の実行履歴を含むデータである実行履歴データにおいて、処理エラーがあったことを示す実行履歴が存在する場合、当該実行履歴データおよび前記画面操作命令テーブルに基づいて、処理エラーがあった事実を識別するための情報と、処理エラーがあったことを示す実行履歴に対応する操作を命令した操作命令を含む画面操作命令を識別するための情報と、処理エラーがあったことを示す実行履歴に対応する操作を命令した操作命令を含む画面操作命令に従って操作が実行された場合の実行履歴と、を前記可視化ファイルに埋め込む処理エラー情報埋込手段と、処理エラーがあったことを示す実行履歴に対応する操作を命令した操作命令を、処理エラーの原因として前記可視化ファイルに埋め込む処理エラー原因埋込手段と、処理エラーがあったことを示す実行履歴に対応する操作を命令した操作命令を含む画面操作命令に基づいて、前記テストの対象となったアプリケーションについての詳細な設定情報を確認するためのリンクを前記可視化ファイルに埋め込む第二リンク埋込手段と、を更に備えること、を特徴とする。

また、本発明に係るテスト結果可視化ファイル生成装置においては、前記処理エラー情報埋込手段は、処理エラーがあったことを示す実行履歴を識別可能な態様で、処理エラーがあったことを示す実行履歴に対応する操作を命令した操作命令を含む画面操作命令に従って操作が実行された場合の実行履歴を前記可視化ファイルに埋め込むこと、を特徴とする。

また、本発明に係るテスト結果可視化ファイル生成装置においては、前記可視化ファイルが、テキスト形式のファイルであること、を特徴とする。

また、本発明に係るテスト結果可視化ファイル生成装置においては、前記テキスト形式のファイルが、ＨＴＭＬ形式のファイルであること、を特徴とする。

また、本発明に係るテスト結果可視化ファイル生成方法においては、開発されたアプリケーションを画面上で自動実行するテストを行った結果を可視化し、かつ、問題発生箇所の特定も容易にするためのファイルである可視化ファイルを生成することができる、制御部を備える情報処理装置で実行されるテスト結果可視化ファイル生成方法であって、前記制御部で実行される、前記テストを行った結果の画面の画像であるテスト画像が、比較対象となる基準の画像である基準画像と比較して、差異なし、差異ありおよび比較不可のうちのいずれに該当するかが判断された結果である比較結果を、前記テスト画像のファイル名と紐付けて含む比較結果データに基づいて、差異ありまたは比較不可の比較結果と、差異ありまたは比較不可と判断された前記テスト画像のファイル名と、を前記可視化ファイルに埋め込む比較結果埋込ステップと、差異ありまたは比較不可と判断された前記テスト画像を前記可視化ファイルに埋め込む画像埋込ステップと、前記テストの際に画面において自動実行される操作についての命令である操作命令の塊からなる画面操作命令を含む画面操作命令テーブルから、差異ありまたは比較不可と判断された前記テスト画像のスクリーンショットを撮ることを命令する操作命令を含む画面操作命令を特定し、当該特定した画面操作命令に従って操作が実行された場合の実行履歴を含むデータである実行履歴データの内容を前記可視化ファイルに埋め込む実行履歴埋込ステップと、前記実行履歴埋込ステップで特定した画面操作命令に基づいて、前記テストの対象となったアプリケーションについての詳細な設定情報を確認するためのリンクを前記可視化ファイルに埋め込む第一リンク埋込ステップと、を含むこと、を特徴とする。

また、本発明に係るテスト結果可視化ファイル生成プログラムにおいては、開発されたアプリケーションを画面上で自動実行するテストを行った結果を可視化し、かつ、問題発生箇所の特定も容易にするためのファイルである可視化ファイルを生成することができる、制御部を備える情報処理装置に実行させるためのテスト結果可視化ファイル生成プログラムであって、前記制御部に実行させるための、前記テストを行った結果の画面の画像であるテスト画像が、比較対象となる基準の画像である基準画像と比較して、差異なし、差異ありおよび比較不可のうちのいずれに該当するかが判断された結果である比較結果を、前記テスト画像のファイル名と紐付けて含む比較結果データに基づいて、差異ありまたは比較不可の比較結果と、差異ありまたは比較不可と判断された前記テスト画像のファイル名と、を前記可視化ファイルに埋め込む比較結果埋込ステップと、差異ありまたは比較不可と判断された前記テスト画像を前記可視化ファイルに埋め込む画像埋込ステップと、前記テストの際に画面において自動実行される操作についての命令である操作命令の塊からなる画面操作命令を含む画面操作命令テーブルから、差異ありまたは比較不可と判断された前記テスト画像のスクリーンショットを撮ることを命令する操作命令を含む画面操作命令を特定し、当該特定した画面操作命令に従って操作が実行された場合の実行履歴を含むデータである実行履歴データの内容を前記可視化ファイルに埋め込む実行履歴埋込ステップと、前記実行履歴埋込ステップで特定した画面操作命令に基づいて、前記テストの対象となったアプリケーションについての詳細な設定情報を確認するためのリンクを前記可視化ファイルに埋め込む第一リンク埋込ステップと、を含むこと、を特徴とする。

本発明によれば、開発されたアプリケーションを画面上で自動実行するテストを行った結果を可視化し、かつ、問題発生箇所の特定も容易にするためのファイルである可視化ファイルを生成することができるという効果を奏する。

図１は、テスト結果可視化ファイル生成装置の構成の一例を示すブロック図である。 図２は、本実施形態における処理の概要のイメージの一例を示す図である。 図３は、本実施形態で生成されるＨＴＭＬ形式のファイルの一例を示す図である。 図４は、比較結果.txt（比較結果データ）の一例を示す図である。 図５は、実行設定ファイルの一例を示す図である。 図６は、エビデンスのフォルダ構成の一例を示す図である。 図７は、画像比較でエラーとなる場合（比較不可の場合）または画像比較で差異がある場合（差異ありの場合）における処理のフローチャートの一例を示す図である。 図８は、画面操作プログラムの実行ログでエラーがある場合（処理エラーがある場合）おける処理のフローチャートの一例を示す図である。 図９は、画像比較で差異がある場合（差異ありの場合）に生成されるＨＴＭＬ形式のファイルの一例を示す図である。 図１０は、画像比較でエラーとなる場合（比較不可の場合）に生成されるＨＴＭＬ形式のファイルの一例を示す図である。 図１１は、画面操作プログラムの実行ログでエラーがある場合（処理エラーがある場合）に生成されるＨＴＭＬ形式のファイルの一例を示す図である。 図１２は、画像比較でエラーとなる場合におけるタイトルの埋め込みの一例を示す図である。 図１３は、画像比較でエラーとなる場合における画像の埋め込みの一例を示す図である。 図１４は、画像比較でエラーとなる場合におけるログ情報の埋め込みおよび対象処理のハイライトの一例を示す図である。 図１５は、画像比較でエラーとなる場合におけるリンク情報の埋め込みの一例を示す図である。 図１６は、ＨＴＭＬ形式のファイル中の「ＵＩ定義情報」の文字列および「実行環境」の文字列をクリックした場合に表示される画面の一例を示す図である。 図１７は、画像比較で差異がある場合におけるタイトルの埋め込みに用いる比較結果データの一例を示す図である。 図１８は、画像比較で差異がある場合における画像の埋め込みの一例を示す図である。 図１９は、処理エラーがある場合におけるタイトルの埋め込みの一例を示す図である。 図２０は、処理エラーがある場合における詳細情報（操作命令）の埋め込みの一例を示す図である。 図２１は、処理エラーがある場合におけるリンク情報の埋め込みの一例を示す図である。

以下に、本発明に係るテスト結果可視化ファイル生成装置、テスト結果可視化ファイル生成方法およびテスト結果可視化ファイル生成プログラムの実施形態を、図面に基づいて詳細に説明する。なお、本実施形態により本発明が限定されるものではない。

［１．概要等］
本項目では、本実施形態の概要、背景および効果について説明する。

［１－１．本実施形態の概要］
本実施形態は、Ｗｅｂアプリケーションの自動テストの結果確認を効率化するためのものである。近年、ＯＳおよびブラウザ等の進化のスピードが加速し、外部環境の変化に対応するため、業務アプリケーションの開発およびテストの効率化が求められている。

このため、開発されたＷｅｂアプリケーションのＷｅｂブラウザによるテストの自動化も必須のものとなってきている。

そこで、本実施形態においては、テストエビデンスをＨＴＭＬ形式により比較することで、図２に示すように、正常な場合とテストで問題が発生した場合の差異を可視化できるようにした。これにより、テストエビデンスの信頼性を向上させ、また、問題発生箇所の早期把握を可能とした。

［１－２．本実施形態の背景］
従来においては、画面ショットの出力画像（エビデンス）を担当者が目視で比較し、問題のある実行結果を探し出す必要があった。このため、担当者の作業負担が大きいという問題があった。また、画面ショットの出力画像を比較するのみでは、テストケースおよび自動実行定義の実行条件の内容が把握できず、問題発生箇所の特定に時間がかかるという問題もあった。

［１－３．本実施形態の効果］
そこで、本実施形態においては、例えば、以下の１～６のことを可能とした。

１．テストケースに応じた基準画像およびテスト画像の画面ショットを所定の階層および形式で保存することで、対応関係を維持した状態でエビデンスを管理できるようにした。

２．エビデンスの基準画像およびテスト画像の対応関係を、テスト実行後に簡単に確認可能とする比較用ＨＴＭＬを生成できるようにした。これにより、テストケース別または進捗別の画像が一覧で把握可能となった。

３．エビデンスの基準画像およびテスト画像の差異のみを抽出した差異確認用ＨＴＭＬを生成できるようにし、以下の（Ａ）および（Ｂ）のサマリーを一覧表示可能とした。
（Ａ）テストケースおよび自動実行命令情報
（Ｂ）基準画像とテスト画像の間の差異を検出した画像

４．比較差異のサマリー一覧ＨＴＭＬ上に、自動テスト実行時の履歴情報を保持できるようにした。これにより、どのテストケースおよびどの自動実行処理で差異が発生しているのかを瞬時に把握できるようにした。

５．比較差異のサマリー一覧のＨＴＭＬから、差異のある自動テスト用のＵＩ定義および実行定義へリンクで飛べるようにした。これにより、差異が発生している情報をもとに、テストケースの確認をスムーズに行うことが可能となった。

６．要するに、本実施形態においては、自動回帰テストにおいて、テストケースに応じたファイルとの対応関係を維持したエビデンス管理をできるようにし、また、比較参照用のファイル（例えば、ＨＴＭＬ）を出力できるようにした。これにより、テストエビデンスの結果から、問題発生箇所を早期把握することが可能となった。

以下、具体的な構成および動作について説明する。

［２．構成］
本実施形態に係るテスト結果可視化ファイル生成装置１００の構成の一例について、図１を参照して説明する。図１は、テスト結果可視化ファイル生成装置１００の構成の一例を示すブロック図である。

テスト結果可視化ファイル生成装置１００は、市販のデスクトップ型パーソナルコンピュータである。なお、テスト結果可視化ファイル生成装置１００は、デスクトップ型パーソナルコンピュータのような据置型情報処理装置に限らず、市販されているノート型パーソナルコンピュータ、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔｓ）、スマートフォン、タブレット型パーソナルコンピュータなどの携帯型情報処理装置であってもよい。

テスト結果可視化ファイル生成装置１００は、制御部１０２と通信インターフェース部１０４と記憶部１０６と入出力インターフェース部１０８と、を備えている。テスト結果可視化ファイル生成装置１００が備えている各部は、任意の通信路を介して通信可能に接続されている。

通信インターフェース部１０４は、ルータ等の通信装置および専用線等の有線または無線の通信回線を介して、テスト結果可視化ファイル生成装置１００をネットワーク３００に通信可能に接続する。通信インターフェース部１０４は、他の装置と通信回線を介してデータを通信する機能を有する。ここで、ネットワーク３００は、テスト結果可視化ファイル生成装置１００とサーバ２００とを相互に通信可能に接続する機能を有し、例えばインターネットやＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）等である。なお、後述する各種マスタ等のデータは、例えばサーバ２００に格納されてもよい。

入出力インターフェース部１０８には、入力装置１１２および出力装置１１４が接続されている。出力装置１１４には、モニタ（家庭用テレビを含む）の他、スピーカやプリンタを用いることができる。入力装置１１２には、キーボード、マウス、及びマイクの他、マウスと協働してポインティングデバイス機能を実現するモニタを用いることができる。なお、以下では、出力装置１１４をモニタ１１４とし、入力装置１１２をキーボード１１２またはマウス１１２として記載する場合がある。

記憶部１０６には、各種のデータベース、テーブルおよびファイルなどが格納される。記憶部１０６には、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）と協働してＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）に命令を与えて各種処理を行うためのコンピュータプログラムが記録される。記憶部１０６として、例えば、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）・ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）等のメモリ装置、ハードディスクのような固定ディスク装置、フレキシブルディスク、および光ディスク等を用いることができる。

記憶部１０６は、例えば、比較結果データ１０６ａと、画面操作命令テーブル１０６ｂと、実行履歴データ１０６ｃと、可視化ファイルとしてのＨＴＭＬファイル１０６ｄと、を備えている。

本実施形態に係るテスト結果可視化ファイル生成装置１００によれば、開発されたアプリケーションを画面上で自動実行するテストを行った結果を可視化し、かつ、問題発生箇所の特定も容易にするためのファイルである可視化ファイルを生成することができる。当該可視化ファイルは、例えば、テキスト形式のファイルであり、好ましくは、ＨＴＭＬ形式のファイル（ＨＴＭＬファイル１０６ｄ）である。

比較結果データ１０６ａは、前記テストを行った結果の画面の画像であるテスト画像が、比較対象となる基準の画像である基準画像と比較して、差異なし、差異ありおよび比較不可のうちのいずれに該当するかが判断された結果である比較結果を、前記テスト画像のファイル名と紐付けて含むデータである。比較結果データ１０６ａは、例えば、テキストファイルである。

例えば、図４に示す比較結果データ１０６ａは、テスト画像のファイル名「X-XXXX-003.png」と基準画像との差異なしと判断された結果「Valid」を紐付けて含み、また、テスト画像のファイル名「X-XXXX-001.png」と基準画像との差異ありと判断された結果「Difference」を紐付けて含み、そして、テスト画像のファイル名「X-XXXX-002.png」と基準画像との比較不可と判断された結果「Error」を紐付けて含む。

画面操作命令テーブル１０６ｂは、前記テストの際に画面において自動実行される操作についての命令である操作命令の塊からなる画面操作命令を含むテーブルである。画面操作命令テーブル１０６ｂは、図１４等に示すように、例えば、前記画面操作命令と、前記画面操作命令を定義して識別するための定義識別データ（定義Ｉｄおよび定義名）と、を紐付けて含む。

例えば、図１４に示す画面操作命令テーブル１０６ｂは、３つの操作命令の塊からなる画面操作命令（定義Ｉｄ＝X002）を含む。当該３つの操作命令とは、図１４に示すように、タイプ「メニュー起動」および対象「X-XXXX-002」という操作命令と、タイプ「値セット」、対象「取引先ＣＤ」および値「１」という操作命令と、タイプ「スクリーンショット」、ファイル名「X-XXXX-002.png」および確認内容「取引先CD_Toに1と表示されるか」という操作命令と、である。

実行履歴データ１０６ｃは、画面操作命令テーブル１０６ｂ中の前記画面操作命令に従って操作が実行された場合の実行履歴を含むデータである。実行履歴データ１０６ｃは、例えば、テキストファイルである。前記実行履歴には、例えば、処理エラーなく操作が正常に実行されたことを示す実行履歴と、処理エラーがあったことを示す実行履歴と、がある。

例えば、図１９に示す実行履歴データ１０６ｃにおいて、「ＯＫ」の記号が付された実行履歴は、処理エラーなく操作が正常に実行されたことを示す実行履歴であり、これに対して、ＮＧの記号が付された実行履歴は、処理エラーがあったことを示す実行履歴である。

ＨＴＭＬファイル１０６ｄは、前述のとおり、開発されたアプリケーションを画面上で自動実行するテストを行った結果を可視化するためのファイルである。自動実行するテストを行った結果とは、図９～図１１のＨＴＭＬファイル１０６ｄでいうと、
（１）画面左上に埋め込まれた「比較結果：ファイル名」（図９では「Difference：X-XXXX-001.png」、図１０では「画像比較時エラー：X-XXXX-002.png」、図１１では「実行時エラー：X004 X-XXXX-004」）と、
（２）埋め込まれた画像（図９ではテスト画像と基準画像と比較結果画像、図１０ではテスト画像、図１１では画像なし）と、
を指す。

また、ＨＴＭＬファイル１０６ｄは、前述のとおり、問題発生箇所の特定を容易にするためのファイルでもある。図９～図１１のＨＴＭＬファイル１０６ｄでいうと、問題発生箇所の特定を容易にするための部分は、自動実行定義情報（実行履歴データ１０６ｃの内容に対応）と、定義へのリンクと、である。担当者は、自動実行定義情報を見ることで、どの操作において問題が発生したのかを把握することができる。また、担当者は、定義へのリンクとしての「ＵＩ定義情報」または「実行環境」の文字列をクリックすることで、テストの対象となったアプリケーションについての詳細な設定情報を確認することができる。

制御部１０２は、テスト結果可視化ファイル生成装置１００を統括的に制御するＣＰＵ等である。制御部１０２は、ＯＳ等の制御プログラム・各種の処理手順等を規定したプログラム・所要データなどを格納するための内部メモリを有し、格納されているこれらのプログラムに基づいて種々の情報処理を実行する。

制御部１０２は、機能概念的に、例えば、（１）前記テストを行った結果の画面の画像であるテスト画像が、比較対象となる基準の画像である基準画像と比較して、差異なし、差異ありおよび比較不可のうちのいずれに該当するかが判断された結果である比較結果を、前記テスト画像のファイル名と紐付けて含む比較結果データに基づいて、差異ありまたは比較不可の比較結果と、差異ありまたは比較不可と判断された前記テスト画像のファイル名と、を前記可視化ファイルに埋め込む比較結果埋込手段としての比較結果埋込部１０２ａと、（２）差異ありまたは比較不可と判断された前記テスト画像を前記可視化ファイルに埋め込む画像埋込手段としての画像埋込部１０２ｂと、（３）前記テストの際に画面において自動実行される操作についての命令である操作命令の塊からなる画面操作命令を含む画面操作命令テーブルから、差異ありまたは比較不可と判断された前記テスト画像のスクリーンショットを撮ることを命令する操作命令を含む画面操作命令を特定し、当該特定した画面操作命令に従って操作が実行された場合の実行履歴を含むデータである実行履歴データの内容を前記可視化ファイルに埋め込む実行履歴埋込手段としての実行履歴埋込部１０２ｃと、（４）前記実行履歴埋込手段で特定した画面操作命令に基づいて、前記テストの対象となったアプリケーションについての詳細な設定情報を確認するためのリンクを前記可視化ファイルに埋め込む第一リンク埋込手段としての第一リンク埋込部１０２ｄと、（５）前記画面操作命令テーブル中の前記画面操作命令に従って操作が実行された場合の実行履歴を含むデータである実行履歴データにおいて、処理エラーがあったことを示す実行履歴が存在する場合、当該実行履歴データおよび前記画面操作命令テーブルに基づいて、処理エラーがあった事実を識別するための情報と、処理エラーがあったことを示す実行履歴に対応する操作を命令した操作命令を含む画面操作命令を識別するための情報と、処理エラーがあったことを示す実行履歴に対応する操作を命令した操作命令を含む画面操作命令に従って操作が実行された場合の実行履歴と、を前記可視化ファイルに埋め込む処理エラー情報埋込手段としての処理エラー情報埋込部１０２ｅと、（６）処理エラーがあったことを示す実行履歴に対応する操作を命令した操作命令を、処理エラーの原因として前記可視化ファイルに埋め込む処理エラー原因埋込手段としての処理エラー原因埋込部１０２ｆと、（７）処理エラーがあったことを示す実行履歴に対応する操作を命令した操作命令を含む画面操作命令に基づいて、前記テストの対象となったアプリケーションについての詳細な設定情報を確認するためのリンクを前記可視化ファイルに埋め込む第二リンク埋込手段としての第二リンク埋込部１０２ｇと、を備えている。なお、各部が実行する処理の内容については、以下の［４．処理の具体例］において説明する。

［３．処理の概要等］
本項目では、本実施形態における処理の概要および本実施形態で用いる用語について説明する。

［３－１．本実施形態における処理の概要］
本実施形態においては、図３に示すように、比較差異一覧の情報を含むＨＴＭＬ形式のファイル（ＨＴＭＬファイル１０６ｄ）を生成することができる。図３において、点線枠で囲んで示す「差異画像名」は、差異が発生した定義を示す。

また、図３において、点線枠で囲んで示す「ＵＩ定義情報」の文字列がクリックされると、差異画像名にあるテストケースＮＯのローコード開発基盤の定義へジャンプする。また、図３において、点線枠で囲んで示す「実行環境」の文字列がクリックされると、差異画像名にあるテストケースＮＯの実行環境の定義へジャンプする。

ここで、ＨＴＭＬ形式のファイル（ＨＴＭＬファイル１０６ｄ）を生成する前提として、本実施形態においては、画像比較を行った際の比較結果として、図４に示すテキストファイル（比較結果データ１０６ａ）が出力される。

図４の比較結果データ１０６ａにおいて、「X-XXXX-001.png」、「X-XXXX-002.png」および「X-XXXX-003.png」は、比較の対象とした画像（テスト画像）のファイル名を示す。また、図４の比較結果データ１０６ａにおいて、「Error」の文字列は、比較対象画像有無判定において比較画像がなかった（比較不可であった）ことを意味し、「Difference」の文字列は、画像比較において差異があったことを意味し、「Valid」の文字列は、画像比較において差異がなかったことを意味する。

このように、本実施形態においては、（１）テスト画像と基準画像の間で生じている差異、（２）テスト画像についてのＵＩ定義情報および実行環境、ならびに、（３）差異が生じている原因を分析するための実行履歴（自動実行定義情報）を、ＨＴＭＬ形式のファイルから一覧で確認できるようにした。これにより、差異が生じていることがわかったテスト画像について担当者が手動で情報（ＵＩ定義情報および実行環境等）を探すといった、従来行っていた作業を行う必要がなくなる。

［３－２．本実施形態で用いる用語］
本実施形態においては、シナリオテスト実行を行う際は、図５に示す実行設定ファイルで設定した場所に、画像のテストエビデンスおよびＣＳＶデータ等の出力データのエビデンスを配置する。なお、エビデンスのフォルダ構成は、例えば図６に示すとおりである。

本実施形態において用いる用語の定義は、以下のとおりである。
・実行ログ・・・シナリオテストの実行操作の履歴を出力するテキストファイル。
・画像エビデンス・・・今回シナリオテストの実行時に取得された、比較対象用のテスト画像。
・出力データ・・・今回シナリオテストの実行時に出力された、画像形式ではないデータ。画像形式ではないデータとは、例えば、ＣＳＶ形式のデータ。
・基準画像エビデンス・・・前回シナリオテスト実行時に取得された、比較対象用の基準画像。
・基準出力データ・・・前回シナリオテストの実行時に出力された、画像形式ではないデータ。画像形式ではないデータとは、例えば、ＣＳＶ形式のデータ。
・比較結果画像・・・テスト画像と基準画像を比較した結果を示す画像。両者に差異がある場合、差異部分が、例えば赤くハイライトされた状態で表示される。

［４．処理の具体例］
本項目では、本実施形態に係る処理の具体例について説明する。以下の［４－１］においては、画像比較でエラーとなる場合（比較不可の場合）のＨＴＭＬ形式のファイル生成について説明する。以下の［４－２］においては、画像比較で差異がある場合（差異ありの場合）のＨＴＭＬ形式のファイル生成について説明する。以下の［４－３］においては、画面操作プログラムの実行ログでエラーがある場合（処理エラーがある場合）のＨＴＭＬ形式のファイル生成について説明する。

ここで、詳細な処理の説明に入る前に、ＨＴＭＬ形式のファイル生成の概要について簡単に説明する。本実施形態においては、想定されない結果（＝画像の差異および実行時エラー等）が、ＨＴＭＬ形式のファイルとして一覧にまとめて出力される。

生成されるＨＴＭＬ形式のファイルは、ローコード開発基盤での開発画面(ＵＩ定義情報)およびローコード開発基盤の実行環境へと飛ぶためのリンクを含むため、オペレータは、リンクから直接、定義内容および動作を確認することが可能である。生成されるＨＴＭＬ形式のファイルにおいては、差異として抽出された情報は、強調表示されることにより可視化されている。

画像比較で差異がある場合（差異ありの場合）に生成されるＨＴＭＬ形式のファイルの例を図９に示し、画像比較でエラーとなる場合（比較不可の場合）に生成されるＨＴＭＬ形式のファイルの例を図１０に示し、画面操作プログラムの実行ログでエラーがある場合（処理エラーがある場合）に生成されるＨＴＭＬ形式のファイルの例を図１１に示す。

なお、本項目［４．処理の具体例］においては、基準画像およびテスト画像の内容は、以下のとおりとする。すなわち、基準画像（正常な画像）は、取引先ＣＤのＦｒｏｍに「１」が設定されると取引先ＣＤのＴｏにも「１」が自動設定された場合における画面の画像である。これに対して、テスト画像（異常な画像）は、取引先ＣＤのＦｒｏｍに「１」が設定されても取引先ＣＤのＴｏに値が自動設定されなかった、または、取引先ＣＤのＦｒｏｍに「１」が設定されると取引先ＣＤのＴｏに値が自動設定されるがその値が「２」であった場合における画面の画像である。

［４－１．画像比較でエラーとなる場合（比較不可の場合）のＨＴＭＬ形式のファイル生成］
本項目では、画像比較でエラーとなる場合（比較不可の場合）のＨＴＭＬ形式のファイル生成について説明する。画像比較でエラーとなる場合とは、例えば、テスト実行時の画像は存在するが、比較対象となる基準画像が存在しない場合、および、基準画像とテスト画像の画像サイズが異なり比較ができない場合等を指す。

以下、図７のフローチャートに沿って処理を詳細に説明する。

（１）タイトルの埋め込み
まず、処理が始まると（図７のスタート）、テスト画像と基準画像が比較されることにより、テキスト形式の比較結果データ１０６ａが出力される（図７のステップＳＡ１）。

次に、比較結果データ１０６ａに基づいて、比較ができない画像のファイル名または差異のある画像のファイル名と、比較結果の状態(Error、Difference、またはValid)と、が取得される（図７のステップＳＡ２）。

次に、画像比較ができなかったか否かが判断される（図７のステップＳＡ３）。画像比較ができなかった場合（図７のステップＳＡ３：Ｙｅｓ）、次段落で説明するステップＳＡ４に進む。これに対して、画像比較ができた場合（図７のステップＳＡ３：Ｎｏ）、次項目［４－２］で説明するステップＳＡ９に進む。

画像比較ができなかった場合（図７のステップＳＡ３：Ｙｅｓ）、比較結果埋込部１０２ａは、図１２に示すように、比較結果データ１０６ａに基づいて、比較不可の比較結果（図１２のＨＴＭＬファイル１０６ｄにおける「画像比較時エラー」の文言）と、比較不可と判断された前記テスト画像のファイル名（図１２のＨＴＭＬファイル１０６ｄにおける「X-XXXX-002.png」というファイル名）と、をＨＴＭＬファイル１０６ｄに埋め込む。

言い換えると、比較結果埋込部１０２ａは、画像の比較結果テキストファイルをもとに、比較エラーとなった画像のファイル名をＨＴＭＬのタイトルへセットする（図７のステップＳＡ４）。

（２）画像の埋め込み
次に、画像埋込部１０２ｂは、図１３に示すように、比較不可と判断された前記テスト画像をＨＴＭＬファイル１０６ｄに埋め込む。

言い換えると、画像埋込部１０２ｂは、画像の比較結果テキストファイルをもとに、比較エラーとなった画像を取得しＨＴＭＬへ埋め込む（図７のステップＳＡ５）。

（３）ログ情報の埋め込みおよび対象処理のハイライト
次に、実行履歴埋込部１０２ｃは、図１４の画面操作命令テーブル１０６ｂから、比較不可と判断された前記テスト画像のスクリーンショットを撮ることを命令する操作命令（タイプ「スクリーンショット」、ファイル名「X-XXXX-002.png」および確認内容「取引先CD_Toに1と表示されるか」という操作命令）を含む画面操作命令（定義Ｉｄ＝X002の画面操作命令）を特定する。

そして、実行履歴埋込部１０２ｃは、図１４に示すように、当該特定した画面操作命令に従って操作が実行された場合の実行履歴データ１０６ｃ（データとしては図示せず）の内容をＨＴＭＬファイル１０６ｄに埋め込む。図１４のＨＴＭＬファイル１０６ｄにける「自動実行定義情報」で示す情報が、ＨＴＭＬファイル１０６ｄに埋め込まれた後の実行履歴データ１０６ｃである。

なお、実行履歴埋込部１０２ｃは、図１４に示すように、実行履歴データ１０６ｃと併せて、前記操作命令（タイプ「スクリーンショット」、ファイル名「X-XXXX-002.png」および確認内容「取引先CD_Toに1と表示されるか」という操作命令）中の確認内容「取引先CD_Toに1と表示されるか」も、ＨＴＭＬファイル１０６ｄに埋め込んでもよい。

このように、実行履歴埋込部１０２ｃは、画像の比較結果テキストファイルをもとに、業務用アプリケーションＤＢの画面操作命令テーブル１０６ｂを参照し、確認内容および自動実行定義のログ情報をＨＴＭＬへ埋め込む（図７のステップＳＡ６）。

ここで、実行履歴埋込部１０２ｃは、図１４に示すように、比較不可と判断された前記テスト画像のスクリーンショットを撮ることを命令する操作命令に対応する実行履歴「OK スクリーンショットをとる：X-XXXX-002.png」を識別可能な態様（図１４では、太字としている）で、実行履歴データ１０６ｃの内容をＨＴＭＬファイル１０６ｄに埋め込む。

言い換えると、実行履歴埋込部１０２ｃは、エラーとなった画像のスクリーンショットをとっている操作命令をハイライトすることで強調する（図７のステップＳＡ７）。

（４）リンク情報の埋め込み
最後に、第一リンク埋込部１０２ｄは、図１５に示すように、（３）において実行履歴埋込部１０２ｃで特定した画面操作命令（定義Ｉｄ＝X002の画面操作命令）に基づいて、前記テストの対象となったアプリケーションについての詳細な設定情報を確認するためのリンク（「ＵＩ定義情報」の文字列および「実行環境」の文字列）をＨＴＭＬファイル１０６ｄに埋め込む。

言い換えると、第一リンク埋込部１０２ｄは、画像の比較結果テキストファイルをもとに、業務用アプリケーションＤＢの画面操作命令テーブル１０６ｂを参照し、ＵＩ定義情報および実行環境へのリンク情報をＨＴＭＬへ埋め込む（図７のステップＳＡ８）。

ＨＴＭＬファイル１０６ｄ中の「ＵＩ定義情報」の文字列および「実行環境」の文字列をクリックした場合に表示される画面の例を、図１６に示す。オペレータは、実際に実行履歴の情報をもとに、手動で入力を行いデグレードが起きているのかを確認することができる。

［４－２．画像比較で差異がある場合（差異ありの場合）のＨＴＭＬ形式のファイル生成］
本項目では、画像比較で差異がある場合（差異ありの場合）のＨＴＭＬ形式のファイル生成について説明する。画像比較で差異がある場合とは、テスト画像と基準画像の間で、何らかの差異が存在する場合を指す。

以下、図７のフローチャートに沿って処理を詳細に説明する。

（１）タイトルの埋め込み
ステップＳＡ１～ステップＳＡ３までの処理は、［４－１］と同様であるため、詳細な説明は割愛する。ステップＳＡ３において画像比較ができた場合（図７のステップＳＡ３：Ｎｏ）、本項目で説明するステップＳＡ９以降の処理へと進む。

ステップＳＡ４においては、画像比較で差異があるか否かが判断される（図７のステップＳＡ９）。差異がない場合（図７のステップＳＡ９：Ｎｏ）、処理は終了する（図７のエンド）。これに対して、差異がある場合（図７のステップＳＡ９：Ｙｅｓ）、比較結果埋込部１０２ａは、図１７の比較結果データ１０６ａに基づいて、差異ありの比較結果（図１８のＨＴＭＬファイル１０６ｄにおける「Difference」の文言）と、差異ありと判断された前記テスト画像のファイル名（図１８のＨＴＭＬファイル１０６ｄにおける「X-XXXX-001.png」というファイル名）と、をＨＴＭＬファイル１０６ｄに埋め込む。

言い換えると、比較結果埋込部１０２ａは、画像の比較結果テキストファイルをもとに、差異ありとなった画像のファイル名をＨＴＭＬのタイトルへセットする（図７のステップＳＡ１０）。このように、画像の比較はできるが画像の差異がある場合、比較結果埋込部１０２ａは、比較結果テキストファイルで「Difference」が付されたファイル名を取得し、ＨＴＭＬへタイトルセットを行う。

（２）画像の埋め込み
次に、画像埋込部１０２ｂは、差異ありと判断された前記テスト画像をＨＴＭＬファイル１０６ｄに埋め込むが、より具体的には、図１８に示すように、差異ありと判断された前記テスト画像と、当該テスト画像の比較対象となった基準画像と、当該両画像間の差異を強調表示した画像（図１８のＨＴＭＬファイル１０６ｄにおける「比較結果画像」）と、をＨＴＭＬファイル１０６ｄに埋め込む。

言い換えると、画像埋込部１０２ｂは、画像の比較結果テキストファイルをもとに、差異のある画像（テスト画像）、基準画像および比較結果画像をＨＴＭＬへ埋め込む（図７のステップＳＡ１１）。

（３）ログ情報の埋め込みおよび対象処理のハイライト
次に、実行履歴埋込部１０２ｃは、画面操作命令テーブル１０６ｂから、差異ありと判断された前記テスト画像のスクリーンショットを撮ることを命令する操作命令（タイプ「スクリーンショット」、ファイル名「X-XXXX-001.png」および確認内容「取引先CD_Toに1と表示されるか」という操作命令）を含む画面操作命令（定義Ｉｄ＝X003の画面操作命令）を特定する。

そして、実行履歴埋込部１０２ｃは、図１８に示すように、当該特定した画面操作命令に従って操作が実行された場合の実行履歴データ１０６ｃ（データとしては図示せず）の内容をＨＴＭＬファイル１０６ｄに埋め込む。図１８のＨＴＭＬファイル１０６ｄにける「自動実行定義情報」で示す情報が、ＨＴＭＬファイル１０６ｄに埋め込まれた後の実行履歴データ１０６ｃである。

なお、実行履歴埋込部１０２ｃは、図１８に示すように、実行履歴データ１０６ｃと併せて、前記操作命令（タイプ「スクリーンショット」、ファイル名「X-XXXX-001.png」および確認内容「取引先CD_Toに1と表示されるか」という操作命令）中の確認内容「取引先CD_Toに1と表示されるか」も、ＨＴＭＬファイル１０６ｄに埋め込んでもよい。

このように、実行履歴埋込部１０２ｃは、画像の比較結果テキストファイルをもとに、業務用アプリケーションＤＢの画面操作命令テーブル１０６ｂを参照し、確認内容および自動実行定義のログ情報をＨＴＭＬへ埋め込む（図７のステップＳＡ１２）。

ここで、実行履歴埋込部１０２ｃは、図１８に示すように、差異ありと判断された前記テスト画像のスクリーンショットを撮ることを命令する操作命令に対応する実行履歴「OK スクリーンショットをとる：X-XXXX-001.png」を識別可能な態様（図１８では、太字としている）で、実行履歴データ１０６ｃの内容をＨＴＭＬファイル１０６ｄに埋め込む。

言い換えると、実行履歴埋込部１０２ｃは、差異ありとなった画像のスクリーンショットをとっている操作命令をハイライトすることで強調する（図７のステップＳＡ１３）。

（４）リンク情報の埋め込み
最後に、第一リンク埋込部１０２ｄは、図１８に示すように、（３）において実行履歴埋込部１０２ｃで特定した画面操作命令（定義Ｉｄ＝X003の画面操作命令）に基づいて、前記テストの対象となったアプリケーションについての詳細な設定情報を確認するためのリンク（「ＵＩ定義情報」の文字列および「実行環境」の文字列）をＨＴＭＬファイル１０６ｄに埋め込む。

言い換えると、第一リンク埋込部１０２ｄは、画像の比較結果テキストファイルをもとに、業務用アプリケーションＤＢの画面操作命令テーブル１０６ｂを参照し、ＵＩ定義情報および実行環境へのリンク情報をＨＴＭＬへ埋め込む（図７のステップＳＡ１４）。

ＨＴＭＬファイル１０６ｄ中の「ＵＩ定義情報」の文字列および「実行環境」の文字列をクリックした場合に表示される画面の例は、図１６にしたとおりである。

以上、［４－１］および［４－２］で説明してきた処理により、あるテスト画像に関してのＨＴＭＬファイル１０６ｄの生成が終了する。

続けて、比較できない画像または差異のある画像が、まだ存在するか否かがチェックされる（図７のステップＳＡ１５）。比較できない画像または差異のある画像が存在しない場合（図７のステップＳＡ１５：Ｎｏ）、処理は終了する（図７のエンド）。これに対して、比較できない画像または差異のある画像がまだ存在する場合（図７のステップＳＡ１５：Ｙｅｓ）、ステップＳＡ３に戻り、当該比較できない画像または当該差異のある画像に関してのＨＴＭＬファイル１０６ｄが生成される。比較できない画像または差異のある画像が存在しなくなるまで、ステップＳＡ３～ステップＳＡ１５の処理は繰り返し行われる。

［４－３．画面操作プログラムの実行ログでエラーがある場合（処理エラーがある場合）のＨＴＭＬ形式のファイル生成］
本項目では、画面操作プログラムの実行ログでエラーがある場合（処理エラーがある場合）のＨＴＭＬ形式のファイル生成について説明する。画面操作プログラムの実行ログでエラーがある場合とは、例えば、処理実行中にエラーが発生する場合、データ比較でＮＧとなる場合、および、ボタンの押下ができない場合等である。

以下、図８のフローチャートに沿って処理を詳細に説明する。

（１）タイトルの埋め込み
まず、処理が始まると（図８のスタート）、画面操作プログラムの実行履歴データ１０６ｃ（実行ログ）が出力される（図８のステップＳＢ１）。

次に、実行履歴データ１０６ｃ（実行ログ）の情報が取得され（図８のステップＳＢ２）、続けて、実行履歴データ１０６ｃ（実行ログ）中の定義情報が、１行ずつ読み込まれる（図８のステップＳＢ３）。

次に、画面操作プログラムの実行履歴データ１０６ｃ（実行ログ）において、処理エラー（ＮＧ）が存在するか否かが判断される（図８のステップＳＢ４）。処理エラー（ＮＧ）が存在しない場合（図８のステップＳＢ４：Ｎｏ）、処理は終了する（図８のエンド）。これに対して、処理エラー（ＮＧ）が存在する場合（図８のステップＳＢ４：Ｙｅｓ）、次段落で説明するステップＳＢ５に進む。

前段落で説明したように、実行履歴データ１０６ｃ（実行ログ）において、処理エラーがあったことを示す実行履歴が存在する場合（図８のステップＳＢ４：Ｙｅｓ）、処理エラー情報埋込部１０２ｅは、図１９の実行履歴データ１０６ｃ（実行ログ）および図１９の画面操作命令テーブル１０６ｂに基づいて、次段落で説明するように情報をＨＴＭＬファイル１０６ｄに埋め込む。

すなわち、処理エラー情報埋込部１０２ｅは、図１９に示すように、
●処理エラーがあった事実を識別するための情報（図１９のＨＴＭＬファイル１０６ｄにおける「実行時エラー」の文言）と、
●処理エラーがあったことを示す実行履歴（図１９の実行履歴データ１０６ｃにおける「ＮＧ ＣＳＶデータが基準データと同じか」という実行履歴）に対応する操作を命令した操作命令（図１９の画面操作命令テーブル１０６ｂにおける、タイプ「チェックデータ」、ファイル名「X-XXXX-004_グリッド表示.csv」および比較対象「X-XXXX-004_基準データ.csv」という操作命令）を含む画面操作命令（図１９の画面操作命令テーブル１０６ｂにおける定義Ｉｄ＝X004の画面操作命令）を識別するための情報（図１９のＨＴＭＬファイル１０６ｄにおける「X004 X-XXXX-004」というタイトル）と、
●処理エラーがあったことを示す実行履歴（図１９の実行履歴データ１０６ｃにおける「ＮＧ ＣＳＶデータが基準データと同じか」という実行履歴）に対応する操作を命令した操作命令（図１９の画面操作命令テーブル１０６ｂにおける、タイプ「チェックデータ」、ファイル名「X-XXXX-004_グリッド表示.csv」および比較対象「X-XXXX-004_基準データ.csv」という操作命令）を含む画面操作命令（図１９の画面操作命令テーブル１０６ｂにおける定義Ｉｄ＝X004の画面操作命令）に従って操作が実行された場合の実行履歴（図１９のＨＴＭＬファイル１０６ｄにおける自動実行定義情報）と、
をＨＴＭＬファイル１０６ｄに埋め込む。

言い換えると、処理エラー情報埋込部１０２ｅは、画面操作プログラムの実行ログをもとに、ＮＧとなった定義名に基づいて、業務用アプリケーションＤＢから対応する画面操作命令を取得し、ＨＴＭＬのタイトルへセットする。また、処理エラー情報埋込部１０２ｅは、画面操作プログラムの実行ログをもとに、ＮＧとなった定義名に基づいて、業務用アプリケーションＤＢから対応する実行履歴を取得し、ＨＴＭＬに埋め込む（図８のステップＳＢ５）。

ここで、処理エラー情報埋込部１０２ｅは、図１９に示すように、処理エラーがあったことを示す実行履歴「ＮＧ ＣＳＶデータが基準データと同じか」を識別可能な態様で（図１９では、太字としている）、処理エラーがあったことを示す当該実行履歴に対応する操作を命令した操作命令を含む画面操作命令に従って操作が実行された場合の実行履歴（図１９のＨＴＭＬファイル１０６ｄにおける自動実行定義情報）をＨＴＭＬファイル１０６ｄに埋め込む。

言い換えると、処理エラー情報埋込部１０２ｅは、実行ログにおいてＮＧとなった実行履歴をハイライトすることで強調する（図８のステップＳＢ６）。

（２）ＮＧとなった原因処理についての詳細情報（操作命令）の埋め込み
処理エラー原因埋込部１０２ｆは、図２０に示すように、処理エラーがあったことを示す実行履歴（図２０の実行履歴データ１０６ｃにおける「ＮＧ ＣＳＶデータが基準データと同じか」という実行履歴）に対応する操作を命令した操作命令（図２０の画面操作命令テーブル１０６ｂにおけるファイル名「X-XXXX-004_グリッド表示.csv」という操作命令）を、処理エラーの原因としてＨＴＭＬファイル１０６ｄに埋め込む。

言い換えると、処理エラー原因埋込部１０２ｆは、ＮＧとなった処理の詳細を画面操作プログラムログから取得し、ＨＴＭＬに埋め込む（図８のステップＳＢ７）。

（３）リンク情報の埋め込み
最後に、第二リンク埋込部１０２ｇは、図２１に示すように、処理エラーがあったことを示す実行履歴に対応する操作を命令した操作命令を含む画面操作命令（定義Ｉｄ＝X004の画面操作命令）に基づいて、前記テストの対象となったアプリケーションについての詳細な設定情報を確認するためのリンク（「ＵＩ定義情報」の文字列および「実行環境」の文字列）をＨＴＭＬファイル１０６ｄに埋め込む。

言い換えると、第二リンク埋込部１０２ｇは、ＮＧとなった実行ログテキストファイルをもとに、業務用アプリケーションＤＢの画面操作命令テーブル１０６ｂを参照し、ＵＩ定義情報と実行環境へのリンク情報をＨＴＭＬへ埋め込む（図８のステップＳＢ８）。

ＨＴＭＬファイル１０６ｄ中の「ＵＩ定義情報」の文字列および「実行環境」の文字列をクリックした場合に表示される画面の例は、図１６にしたとおりである。

以上、［４－３］で説明してきた処理により、実行履歴データ１０６ｃ（実行ログ）中のＮＧとなっている実行履歴に関してのＨＴＭＬファイル１０６ｄの生成が終了する。

続けて、ステップＳＢ３に戻り、実行ログに落ちている定義情報から、次の行が読み込まれる。ＮＧとなっている実行履歴行が存在しなくなるまで（＝ステップＳＢ４において、Ｎｏへ進むまで）、ステップＳＢ３～ステップＳＢ８の処理が繰り返し行われる。

［５．本実施形態のまとめ］
以上説明してきたように、本実施形態に係るテスト結果可視化ファイル生成装置１００によれば、開発されたアプリケーションを画面上で自動実行するテストを行った結果を可視化し、かつ、問題発生箇所の特定も容易にするためのファイルである可視化ファイル（ＨＴＭＬファイル１０６ｄ）を生成することができる。

これにより、担当者は、テストの結果をＨＴＭＬファイル１０６ｄ中で確認できるようになった。また、担当者は、動作テストにおいて問題が発生した場合に、ＨＴＭＬファイル１０６ｄ内でテストの操作の実行履歴を確認できるようになった。更に、担当者は、ＨＴＭＬファイル１０６ｄ内のリンクから飛ぶことで、開発されたアプリケーションについての詳細な設定情報を確認できるようになった。つまり、担当者は、ＨＴＭＬファイル１０６ｄを参照するのみで、動作テスト結果確認および問題発生箇所特定の両方を容易かつ迅速にできるようになった。

［６．国連が主導する持続可能な開発目標（ＳＤＧｓ）への貢献］
本実施形態により、業務効率化や企業の適切な経営判断を推進することに寄与することができるので、ＳＤＧｓの目標８及び９に貢献することが可能となる。

また、本実施形態により、廃棄ロス削減や、ペーパレス・電子化を推進することに寄与することができるので、ＳＤＧｓの目標１２、１３及び１５に貢献することが可能となる。

また、本実施形態により、統制、ガバナンス強化に寄与することができるので、ＳＤＧｓの目標１６に貢献することが可能となる。

［７．他の実施形態］
本発明は、上述した実施形態以外にも、特許請求の範囲に記載した技術的思想の範囲内において種々の異なる実施形態にて実施されてよいものである。

例えば、実施形態において説明した各処理のうち、自動的に行われるものとして説明した処理の全部または一部を手動的に行うこともでき、あるいは、手動的に行われるものとして説明した処理の全部または一部を公知の方法で自動的に行うこともできる。

また、本明細書中や図面中で示した処理手順、制御手順、具体的名称、各処理の登録データや検索条件等のパラメータを含む情報、画面例、データベース構成については、特記する場合を除いて任意に変更することができる。

また、テスト結果可視化ファイル生成装置１００に関して、図示の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。

例えば、テスト結果可視化ファイル生成装置１００が備える処理機能、特に制御部にて行われる各処理機能については、その全部または任意の一部を、ＣＰＵおよび当該ＣＰＵにて解釈実行されるプログラムにて実現してもよく、また、ワイヤードロジックによるハードウェアとして実現してもよい。尚、プログラムは、本実施形態で説明した処理を情報処理装置に実行させるためのプログラム化された命令を含む一時的でないコンピュータ読み取り可能な記録媒体に記録されており、必要に応じてテスト結果可視化ファイル生成装置１００に機械的に読み取られる。すなわち、ＲＯＭまたはＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）などの記憶部などには、ＯＳと協働してＣＰＵに命令を与え、各種処理を行うためのコンピュータプログラムが記録されている。このコンピュータプログラムは、ＲＡＭにロードされることによって実行され、ＣＰＵと協働して制御部を構成する。

また、このコンピュータプログラムは、テスト結果可視化ファイル生成装置１００に対して任意のネットワークを介して接続されたアプリケーションプログラムサーバに記憶されていてもよく、必要に応じてその全部または一部をダウンロードすることも可能である。

また、本実施形態で説明した処理を実行するためのプログラムを、一時的でないコンピュータ読み取り可能な記録媒体に格納してもよく、また、プログラム製品として構成することもできる。ここで、この「記録媒体」とは、メモリーカード、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）メモリ、ＳＤ（Ｓｅｃｕｒｅ Ｄｉｇｉｔａｌ）カード、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＥＥＰＲＯＭ（登録商標）（Ｅｌｅｃｔｒｉｃａｌｌｙ Ｅｒａｓａｂｌｅ ａｎｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＣＤ－ＲＯＭ（Ｃｏｍｐａｃｔ Ｄｉｓｋ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＭＯ（Ｍａｇｎｅｔｏ－Ｏｐｔｉｃａｌ ｄｉｓｋ）、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ）、および、Ｂｌｕ－ｒａｙ（登録商標） Ｄｉｓｃ等の任意の「可搬用の物理媒体」を含むものとする。

また、「プログラム」とは、任意の言語または記述方法にて記述されたデータ処理方法であり、ソースコードまたはバイナリコード等の形式を問わない。なお、「プログラム」は必ずしも単一的に構成されるものに限られず、複数のモジュールやライブラリとして分散構成されるものや、ＯＳに代表される別個のプログラムと協働してその機能を達成するものをも含む。なお、実施形態に示した各装置において記録媒体を読み取るための具体的な構成および読み取り手順ならびに読み取り後のインストール手順等については、周知の構成や手順を用いることができる。

記憶部に格納される各種のデータベース等は、ＲＡＭ、ＲＯＭ等のメモリ装置、ハードディスク等の固定ディスク装置、フレキシブルディスク、および、光ディスク等のストレージ手段であり、各種処理やウェブサイト提供に用いる各種のプログラム、テーブル、データベース、および、ウェブページ用ファイル等を格納する。

また、テスト結果可視化ファイル生成装置１００は、既知のパーソナルコンピュータまたはワークステーション等の情報処理装置として構成してもよく、また、任意の周辺装置が接続された当該情報処理装置として構成してもよい。また、テスト結果可視化ファイル生成装置１００は、当該装置に本実施形態で説明した処理を実現させるソフトウェア（プログラムまたはデータ等を含む）を実装することにより実現してもよい。

更に、装置の分散・統合の具体的形態は図示するものに限られず、その全部または一部を、各種の付加等に応じてまたは機能負荷に応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。すなわち、上述した実施形態を任意に組み合わせて実施してもよく、実施形態を選択的に実施してもよい。

本発明は、例えば、開発されたアプリケーションについて画面上で動作テストを行う分野において有用である。

１００ テスト結果可視化ファイル生成装置
１０２ 制御部
１０２ａ 比較結果埋込部
１０２ｂ 画像埋込部
１０２ｃ 実行履歴埋込部
１０２ｄ 第一リンク埋込部
１０２ｅ 処理エラー情報埋込部
１０２ｆ 処理エラー原因埋込部
１０２ｇ 第二リンク埋込部
１０４ 通信インターフェース部
１０６ 記憶部
１０６ａ 比較結果データ
１０６ｂ 画面操作命令テーブル
１０６ｃ 実行履歴データ
１０６ｄ ＨＴＭＬファイル
１０８ 入出力インターフェース部
１１２ 入力装置
１１４ 出力装置
２００ サーバ
３００ ネットワーク

Claims (9)

1. 開発されたアプリケーションを画面上で自動実行するテストを行った結果を可視化し、かつ、問題発生箇所の特定も容易にするためのファイルである可視化ファイルを生成することができる、制御部を備えるテスト結果可視化ファイル生成装置であって、
   前記制御部は、
   前記テストを行った結果の画面の画像であるテスト画像が、比較対象となる基準の画像である基準画像と比較して、差異なし、差異ありおよび比較不可のうちのいずれに該当するかが判断された結果である比較結果を、前記テスト画像のファイル名と紐付けて含む比較結果データに基づいて、差異ありまたは比較不可の比較結果と、差異ありまたは比較不可と判断された前記テスト画像のファイル名と、を前記可視化ファイルに埋め込む比較結果埋込手段と、
   差異ありまたは比較不可と判断された前記テスト画像を前記可視化ファイルに埋め込む画像埋込手段と、
   前記テストの際に画面において自動実行される操作についての命令である操作命令の塊からなる画面操作命令を含む画面操作命令テーブルから、差異ありまたは比較不可と判断された前記テスト画像のスクリーンショットを撮ることを命令する操作命令を含む画面操作命令を特定し、当該特定した画面操作命令に従って操作が実行された場合の実行履歴を含むデータである実行履歴データの内容を前記可視化ファイルに埋め込む実行履歴埋込手段と、
   前記実行履歴埋込手段で特定した画面操作命令に基づいて、前記テストの対象となったアプリケーションについての詳細な設定情報を確認するためのリンクを前記可視化ファイルに埋め込む第一リンク埋込手段と、
   を備えること、
   を特徴とするテスト結果可視化ファイル生成装置。
2. 前記実行履歴埋込手段は、
   差異ありまたは比較不可と判断された前記テスト画像のスクリーンショットを撮ることを命令する操作命令に対応する実行履歴を識別可能な態様で、前記実行履歴データの内容を前記可視化ファイルに埋め込むこと、
   を特徴とする請求項１に記載のテスト結果可視化ファイル生成装置。
3. 前記画像埋込手段は、
   差異ありと判断された前記テスト画像と、当該テスト画像の比較対象となった前記基準画像と、当該両画像間の差異を強調表示した画像と、を前記可視化ファイルに埋め込むこと、
   を特徴とする請求項１に記載のテスト結果可視化ファイル生成装置。
4. 前記制御部は、
   前記画面操作命令テーブル中の前記画面操作命令に従って操作が実行された場合の実行履歴を含むデータである実行履歴データにおいて、処理エラーがあったことを示す実行履歴が存在する場合、当該実行履歴データおよび前記画面操作命令テーブルに基づいて、処理エラーがあった事実を識別するための情報と、処理エラーがあったことを示す実行履歴に対応する操作を命令した操作命令を含む画面操作命令を識別するための情報と、処理エラーがあったことを示す実行履歴に対応する操作を命令した操作命令を含む画面操作命令に従って操作が実行された場合の実行履歴と、を前記可視化ファイルに埋め込む処理エラー情報埋込手段と、
   処理エラーがあったことを示す実行履歴に対応する操作を命令した操作命令を、処理エラーの原因として前記可視化ファイルに埋め込む処理エラー原因埋込手段と、
   処理エラーがあったことを示す実行履歴に対応する操作を命令した操作命令を含む画面操作命令に基づいて、前記テストの対象となったアプリケーションについての詳細な設定情報を確認するためのリンクを前記可視化ファイルに埋め込む第二リンク埋込手段と、
   を更に備えること、
   を特徴とする請求項１に記載のテスト結果可視化ファイル生成装置。
5. 前記処理エラー情報埋込手段は、
   処理エラーがあったことを示す実行履歴を識別可能な態様で、処理エラーがあったことを示す実行履歴に対応する操作を命令した操作命令を含む画面操作命令に従って操作が実行された場合の実行履歴を前記可視化ファイルに埋め込むこと、
   を特徴とする請求項４に記載のテスト結果可視化ファイル生成装置。
6. 前記可視化ファイルが、テキスト形式のファイルであること、
   を特徴とする請求項１から５のいずれか一つに記載のテスト結果可視化ファイル生成装置。
7. 前記テキスト形式のファイルが、ＨＴＭＬ形式のファイルであること、
   を特徴とする請求項６に記載のテスト結果可視化ファイル生成装置。
8. 開発されたアプリケーションを画面上で自動実行するテストを行った結果を可視化し、かつ、問題発生箇所の特定も容易にするためのファイルである可視化ファイルを生成することができる、制御部を備える情報処理装置で実行されるテスト結果可視化ファイル生成方法であって、
   前記制御部で実行される、
   前記テストを行った結果の画面の画像であるテスト画像が、比較対象となる基準の画像である基準画像と比較して、差異なし、差異ありおよび比較不可のうちのいずれに該当するかが判断された結果である比較結果を、前記テスト画像のファイル名と紐付けて含む比較結果データに基づいて、差異ありまたは比較不可の比較結果と、差異ありまたは比較不可と判断された前記テスト画像のファイル名と、を前記可視化ファイルに埋め込む比較結果埋込ステップと、
   差異ありまたは比較不可と判断された前記テスト画像を前記可視化ファイルに埋め込む画像埋込ステップと、
   前記テストの際に画面において自動実行される操作についての命令である操作命令の塊からなる画面操作命令を含む画面操作命令テーブルから、差異ありまたは比較不可と判断された前記テスト画像のスクリーンショットを撮ることを命令する操作命令を含む画面操作命令を特定し、当該特定した画面操作命令に従って操作が実行された場合の実行履歴を含むデータである実行履歴データの内容を前記可視化ファイルに埋め込む実行履歴埋込ステップと、
   前記実行履歴埋込ステップで特定した画面操作命令に基づいて、前記テストの対象となったアプリケーションについての詳細な設定情報を確認するためのリンクを前記可視化ファイルに埋め込む第一リンク埋込ステップと、
   を含むこと、
   を特徴とするテスト結果可視化ファイル生成方法。
9. 開発されたアプリケーションを画面上で自動実行するテストを行った結果を可視化し、かつ、問題発生箇所の特定も容易にするためのファイルである可視化ファイルを生成することができる、制御部を備える情報処理装置に実行させるためのテスト結果可視化ファイル生成プログラムであって、
   前記制御部に実行させるための、
   前記テストを行った結果の画面の画像であるテスト画像が、比較対象となる基準の画像である基準画像と比較して、差異なし、差異ありおよび比較不可のうちのいずれに該当するかが判断された結果である比較結果を、前記テスト画像のファイル名と紐付けて含む比較結果データに基づいて、差異ありまたは比較不可の比較結果と、差異ありまたは比較不可と判断された前記テスト画像のファイル名と、を前記可視化ファイルに埋め込む比較結果埋込ステップと、
   差異ありまたは比較不可と判断された前記テスト画像を前記可視化ファイルに埋め込む画像埋込ステップと、
   前記テストの際に画面において自動実行される操作についての命令である操作命令の塊からなる画面操作命令を含む画面操作命令テーブルから、差異ありまたは比較不可と判断された前記テスト画像のスクリーンショットを撮ることを命令する操作命令を含む画面操作命令を特定し、当該特定した画面操作命令に従って操作が実行された場合の実行履歴を含むデータである実行履歴データの内容を前記可視化ファイルに埋め込む実行履歴埋込ステップと、
   前記実行履歴埋込ステップで特定した画面操作命令に基づいて、前記テストの対象となったアプリケーションについての詳細な設定情報を確認するためのリンクを前記可視化ファイルに埋め込む第一リンク埋込ステップと、
   を含むこと、
   を特徴とするテスト結果可視化ファイル生成プログラム。