異なる構成のテスト

Azure DevOps Services | Azure DevOps Server 2022 - Azure DevOps Server 2019

ユーザーは、さまざまなオペレーティング システム、Web ブラウザー、その他のバリエーションなど、さまざまな構成でアプリをインストールまたは実行する可能性があります。 少なくとも一部のテストを、構成が異なる段階で実行する必要があります。

テスト計画を使用して、どの構成で実行するテストを決定します。 テストを実行するときに、必要な構成のステージを設定していることを確認する必要があります。

テストする組み合わせのスケマティック マトリックスを描画できます。

次に、以下のことができます。

• 使用可能な構成と変数を表示する
• 構成と変数を作成する
• テスト 計画とテスト スイートに構成を割り当てる
• 各構成でテストを実行する
• 構成ごとにテスト結果を追跡する

前提条件

• プロジェクトに接続する必要があります。 プロジェクトがまだない場合は、作成します。
• ユーザーがプロジェクトに追加されている必要があります。 メンバーになるには、プロジェクトまたはチームにユーザーを追加します。
• テスト構成を表示または追加するには、 Basic 以上のアクセス権が必要です。
• テスト構成を追加するには、プロジェクト レベルの Manage テスト構成 アクセス許可が Allow に設定されている必要があります。 既定では、このアクセス許可は共同作成者グループとプロジェクト管理者グループのメンバーに付与されます。

詳細については、「 Manual テストアクセスとアクセス許可を参照してください。

TCM コマンド ライン ツールを使用する

TCM コマンド ライン ツールを使用するには、次の項目が配置されている必要があります。

• Visual Studio 2017 Professional 以前のバージョンがインストールされています。 TCM には、コマンド プロンプトと次のディレクトリからアクセスします。

  • %programfiles(x86)%\Microsoft Visual Studio\2017\Professional\Common7\IDE
  • %programfiles(x86)%\Microsoft Visual Studio\2017\Enterprise\Common7\IDE
  • %programfiles(x86)%\Microsoft Visual Studio 14.0\Common7\IDE

• TCM コマンドを実行するには、 /collection パラメーターと /teamproject パラメーターを指定し、必要に応じて /login します。

  パラメーター	説明
  /徴収:CollectionURL	必須。 チーム プロジェクト コレクションの URI を指定します。 URI の形式は次のとおりです。 - Azure DevOps Services の場合: http://dev.azure.com/OrganizationName - Azure DevOps Server の場合: http://ServerName:Port/VirtualDirectoryName/CollectionName。 仮想ディレクトリが使用されていない場合、URI の形式は次のようになります:http://ServerName:Port/CollectionName。
  /teamproject:project	必須。 自動テストを複製またはインポートするテスト オブジェクトを含むプロジェクトの名前。
  /login:username,[password]	省略可能。 有効な Azure DevOps ユーザーの名前とパスワード、およびコマンドを実行するアクセス許可を持つユーザーを指定します。 Windows 資格情報に適切なアクセス許可がない場合、または基本認証を使用している場合、またはドメインに接続していない場合は、このオプションを使用します。

• アクセスする 1 つ以上のプロジェクトの有効なメンバーであり、実行するコマンドに基づいて必要なアクセス許可を持っている必要があります。 詳細については、「 Manual テストアクセスとアクセス許可を参照してください。

• テスト オブジェクトを複製またはインポートするためにテスト 計画とテスト スイートを追加するために必要なのと同じアクセス レベルが必要です。

構成と変数を表示する

多くの場合、テストを実行するために既に使用できる構成を確認する必要があります。

Browser

Configurations ページから、テスト構成と構成変数の一覧を表示できます。

プロジェクトで、左側のナビゲーション領域から Test Plans>Configurations を選択します。 ここでは、テスト計画で現在使用できるすべてのテスト構成と変数を確認できます。

構成または変数を選択すると、右側のウィンドウに詳細が表示されます。

TCM CLI

tcm configs /listを使用して、プロジェクトのテスト 計画とテスト スイートで使用できる構成を表示します。 省略可能なパラメーターが指定されていない場合は、チーム プロジェクトのすべてのテスト構成が一覧表示されます。

tcm configs /list [/querytext:query] /collection:teamprojectcollectionurl
            /teamproject:project [/login:username,[password]]

パラメーター	説明
/querytext:query	省略可能。 テスト構成のサブセットを一覧表示するために使用するクエリを指定します。

/collection、/teamproject、および/loginパラメーターの説明については、「TCM コマンド ライン ツールを使用した作業」を参照。

例

次のコマンドは、fabrikamprime 組織でホストされている Fabrikam Fiber プロジェクトで使用できるテスト構成一覧表示します。 IDは、構成Nameに対応します。 たとえば、構成 ID 9 は、Windows 10 の Google Chrome テスト構成と一致します。

tcm configs /list /collection:https://dev.azure.com/fabrikamprime /teamproject:"Fabrikam Fiber"

Id        Name
--------- ----------------------------------------------------------------
2         Windows 8
7         Windows 7
9         Google Chrome on Windows 10

構成と変数を作成する

テスト構成は、構成変数値の組み合わせです。 構成変数は、オペレーティング システム、ブラウザー、CPU の種類、データベースなどです。 構成には、"Windows 8 + 32 ビット CPU" または "Windows 10 + 64 ビット CPU" があります。

最初に構成変数を作成します。 次に、複数の変数値を組み合わせて構成を作成します。

1. Test Plans Web ポータルで Configurations ページを開き、+ アイコンを選択して、新しい構成変数選択。

   

2. 変数の名前 ( Browser、説明など) を入力します。 [新しい値 追加を選択し、値を追加します。 構成変数に必要な数の値を追加し、保存します。

   

3. 手順を繰り返して、必要なその他の構成変数を作成します。 たとえば、 Operating system という名前の構成変数を、テスト対象の各オペレーティング システムの名前で作成します。

   

4. + アイコンを選択し、[新しいテスト構成選択。

   

5. テスト構成の名前を入力し、作成した構成変数を追加します。 この構成の各変数の値を選択します。

   

   新しいテスト 計画に割り当てがオンになっていることを確認して、作成するすべての新しいテスト プランでこの構成を既定値にします。

6. 新しいテスト構成を保存します。

テスト 計画とスイートに構成を割り当てる

構成は、テスト スイートまたは個々のテスト ケースに割り当てることができます。 テスト スイートに割り当てられた構成は、その中のすべてのテストまたはスイートに適用されます。

1. テスト スイートに構成を割り当てるには、 Test plans ページでプランを選択します。 テスト スイート領域で、テスト スイートを選択し、[その他のオプション] を選択するか右クリックしてコンテキスト メニューを開き、[ 割り当て構成を選択します。

   

   テスト スイートに複数の構成を追加すると、割り当てた各構成でテスト ケースが繰り返されます。

   

2. 必要に応じて、テスト ケースに割り当てられている既定の構成をオーバーライドし、必要な構成を割り当てます。 1 つ以上のテスト ケースを選択し、コンテキスト メニューを開き、構成 割り当てを選択します。

   

3. テスト ケースに割り当てる構成を検索して選択します。

   

各構成でテストを実行する

Windows 10 で Google Chrome を使用してアプリをテストするなど、特定の構成のテスト プラットフォームを設定します。

1. この構成が割り当てられているテストを選択して実行します。

   

   テストを実行すると、ステータス バーに構成のリマインダーが表示されます。

   

各構成のテスト結果を追跡する

1. テスト スイートの Charts ページを開き、 New を選択し、新しいテスト結果グラフ 選択。

   

2. 円グラフや横棒グラフなどのグラフの種類を選択し、 Group by>Configuration を選択し、 OKを選択します。

   

   構成に基づいてテストを追跡するのに役立つグラフが作成されます。 このグラフはダッシュボードにピン留めできます。

   

複数のテスト スイートに表示されるテスト ケースがある場合は、スイートごとに異なる構成を設定できます。 同じテスト ケースで、異なるテスト スイートとテスト 計画で異なる構成設定を設定できます。

関連記事

• 手動および探索的テストの概要
• 探索的テストを行い、ブラウザーから直接フィードバックを送信する