Excel-Bericht Fehleranalyse

Artikel
06/10/2015

Mit dem Bericht Fehleranalyse können Sie die Anzahl der vom Team ermittelten Regressionen überwachen. Regressionen sind Fehler in der getesteten Software, die in früheren Versionen nicht aufgetreten sind. Ein Team, das Regressionstests ausführt, konzentriert sich speziell auf die Suche nach Fehlern, die nur in einer neuen Version der Software aufgetreten sind. Der Bericht Fehleranalyse zeigt für jeden Testfall die Anzahl der unterschiedlichen Konfigurationen, die früher erfolgreich waren und jetzt fehlschlagen, für die letzten vier Wochen an.

Dieser Bericht ist erst verfügbar, wenn das Team Testpläne erstellt und mit der Ausführung von Tests mit Microsoft Test-Manager beginnt. Informationen zum Definieren von Testsammlungen und Testplänen finden Sie unter Planen von manuellen Tests mit Team Web Access. Informationen zum Zugriff auf diesen Bericht finden Sie unter Excel-Berichte.

Hinweis

Sie können den Bericht Fehleranalyse über das Testdashboard anzeigen.Sie können auf dieses Dashboard nur zugreifen, wenn das Teamprojektportal aktiviert und für die Verwendung von SharePoint Server Enterprise Edition konfiguriert wurde.

Erforderliche Berechtigungen

Zum Anzeigen des Berichts müssen Sie einer Gruppe zugewiesen sein oder zu einer Gruppe gehören, der in SharePoint-Produkte die Berechtigung Lesen für das Teamprojekt zugewiesen wurde.

Zum Ändern oder Anpassen des Berichts müssen Sie Mitglied der TfsWarehouseDataReaders-Sicherheitsrolle in SQL Server Analysis Services sein. Sie müssen außerdem einer Gruppe zugewiesen sein oder zu einer Gruppe gehören, der in SharePoint-Produkte die Berechtigung Mitglieder für das Teamprojekt zugewiesen wurde. Weitere Informationen finden Sie unter Gewähren von Zugriff auf die Datenbanken des Data Warehouse für Visual Studio ALM.

Daten im Bericht

Der Bericht Fehleranalyse stellt ein gestapeltes Flächendiagramm bereit, das für alle Konfigurationen die kumulierte Anzahl aller Ergebnisse mit Fehlern von Testfällen während der letzten vier Wochen anzeigt. Die Fehlertypen umfassen Neues Problem, Bekanntes Problem und Regression.

Excel-Bericht "Fehleranalyse"

Dieser Bericht basiert auf einem PivotChart-Bericht, in dem die während der letzten vier Wochen im Data Warehouse gespeicherten Testergebnisdaten angezeigt werden.

Das System untersucht jede Konfiguration, in der der Testfall ausgeführt wurde, und versucht, das vorherige Ergebnis für die gleiche Konfiguration des Testfalls zu identifizieren. Der der Kombination von Testfall und Konfiguration zugewiesene Fehlertyp wird auf Grundlage der folgenden Kriterien bestimmt:

Regression: Wenn das unmittelbar vorhergehende Ergebnis Erfolgreich war.
Neues Problem: Wenn kein unmittelbar vorhergehendes Ergebnis gefunden wurde.
Bekanntes Problem: Wenn das unmittelbar vorhergehende Ergebnis Fehler war.

Erforderliche Aktivitäten zum Überwachen von Regressionen

Damit der Bericht Fehleranalyse hilfreich und genau ist, muss das Team die folgenden Aktivitäten ausführen:

Definieren Sie Testfälle und Testpläne, und weisen Sie Testplänen Testfälle zu.
Markieren Sie bei manuellen Tests die Ergebnisse jedes Validierungsschritts im Testfall als erfolgreich oder fehlgeschlagen.

Wichtig

Tester müssen einen Testschritt mit einem Status markieren, wenn es sich um einen Validierungstestschritt handelt.Das Gesamtergebnis für einen Testfall gibt den Status aller vom Tester markierten Testschritte wieder.Wenn der Tester einen Testfall als fehlerhaft oder gar nicht markiert hat, weist der Testfall daher den Status Fehler auf.

Bei automatisierten Tests wird jeder Testfall automatisch als erfolgreich oder fehlgeschlagen markiert.
(Optional) Weisen Sie jedem Testfall die Pfade Iteration und Bereich zu, damit nach diesen Feldern gefiltert werden kann.

Interpretieren des Berichts

Es ist zu erwarten, dass der Bericht Fehleranalyse entsprechend der jeweiligen Phase im Produktentwicklungszyklus variiert. In frühen Iterationen tritt normalerweise keine oder nur geringe Regression auf. In einer späteren Phase des Entwicklungszyklus ist ein gewisses Ausmaß an Regressionen zu erwarten. Insbesondere sollten Sie im Bericht Antworten auf die folgenden Fragen suchen:

Bei wie vielen Tests insgesamt wird eine Regression festgestellt?
Bleibt die Gesamtanzahl von Regressionen oder Testfehlern innerhalb des erwarteten Bereichs oder der Ziele des Teams?
Behandelt das Team Probleme, sobald sie identifiziert werden? Werden die bekannten Probleme rechtzeitig behandelt?

Ein fehlerfreier Bericht "Fehleranalyse" zeigt eine moderate Anzahl von neuen Problemen, bekannten Problemen und Regressionen an. Wenn in einem oder mehreren dieser Bereiche Spitzen auftreten, muss das Team eventuell weitere Untersuchungen durchführen. Spitzen weisen möglicherweise auf Probleme mit der Testaktivität oder der Qualität des vom Team eingecheckten Codes hin.

Sie sollten außerdem den Status der letzten Builds, den Fehlerstatus und Codeänderungen überprüfen, um zu bestimmen, ob die Metrik für jeden dieser Faktoren Erklärungen für die Änderungen in den Testaktivitätszeilen liefern kann.

Aktualisieren und Anpassen des Berichts

Sie können den Bericht Fehleranalyse aktualisieren, indem Sie ihn in Office Excel öffnen und die Filteroptionen für den PivotTable-Bericht ändern. Sie können diesen Bericht anpassen, um andere Ansichten zu unterstützen, wie in der folgenden Tabelle beschrieben.

Ansicht	Aktion
Fehleranalyse für eine Iteration	Ändern des Filters für Iteration (Standardeinstellung = Alle)
Fehleranalyse für einen Produktbereich	Ändern des Filters für Area (Standardeinstellung = Alle)
Fehleranalyse für einen bestimmten Testplan oder eine bestimmte Sammlung von Testplänen	Hinzufügen des Filters für Test Plan (Standardeinstellung = Alle)
Fehleranalyse für die letzten sechs, acht oder mehr Wochen	Ersetzen von @@Last 4 weeks@@ in den Spalten PivotTable-Feldliste durch ein anderes Set.

Weitere Informationen zum Arbeiten mit PivotTable-Berichten und PivotChart-Berichten sowie zum Anpassen dieser Berichte finden Sie auf den folgenden Seiten der Microsoft-Website:

Siehe auch

Weitere Ressourcen

Excel-Berichte

Freigeben über