Informe de Excel Análisis de errores
Puede utilizar el informe Análisis de errores para ayudar a supervisar el número de regresiones que el equipo de pruebas encuentra. Las regresiones son errores en el software que se está probando y que no aparecieron en versiones anteriores. Un equipo que realiza pruebas de regresión se centra específicamente en encontrar los errores que solo han aparecido en una nueva versión del software. El informe Análisis de errores muestra cuántas configuraciones diferenciadas superaron cada caso de prueba anteriormente y ahora producen errores, durante las cuatro últimas semanas.
Este informe está disponible únicamente cuando el equipo crea planes de pruebas y comienza a ejecutar las pruebas mediante Microsoft Test Manager. Para obtener información sobre cómo definir conjuntos de pruebas y planes de pruebas, vea Planear pruebas manuales con Team Web Access. Para obtener información sobre cómo obtener acceso a este informe, vea Informes de Excel.
Nota
Puede ver el informe Análisis de errores en el panel de prueba.Puede obtener acceso a este panel únicamente si el portal del proyecto de equipo está habilitado y configurado para usar SharePoint Server Enterprise Edition.
Permisos necesarios
Para ver el informe, debe pertenecer o asignarse a un grupo que tenga concedido el permiso Leer en Productos de SharePoint para el proyecto de equipo.
Para modificar o personalizar el informe, debe ser miembro del rol de seguridad TfsWarehouseDataReaders de SQL Server Analysis Services. También debe estar asignado o pertenecer a un grupo que tenga asignados los permisos Miembros en Productos de SharePoint para el proyecto de equipo. Para obtener más información, vea Conceder permisos para ver o crear informes en TFS.
Datos del informe
El informe Análisis de errores proporciona un gráfico de áreas apiladas que muestra el recuento acumulado de todos los resultados de no superado en los casos de prueba de todas las configuraciones, durante las cuatro últimas semanas. Entre los tipos de error se incluyen Problema nuevo, Problema conocido o Regresión.
Este informe está basado en un informe de gráfico dinámico que muestra los datos de resultados de pruebas que se guardaron en el almacén de datos durante las cuatro últimas semanas.
El sistema examina cada configuración en que se ejecutó el caso de prueba e intenta identificar el resultado del predecesor para la misma configuración en el caso de prueba. El tipo de error asignado al caso de prueba/configuración se determina de acuerdo con los criterios siguientes:
Regresión: cuando el resultado del predecesor inmediato era Superada.
Problema nuevo: cuando no se puede encontrar ningún resultado del predecesor inmediato.
Problema conocido: cuando el resultado del predecesor inmediato era Error.
Actividades necesarias para la supervisión de regresiones
Para que el informe Análisis de errores sea útil y preciso, el equipo debe realizar las actividades siguientes:
Definir casos y planes de pruebas, y asignar los casos de prueba a planes de pruebas.
En las pruebas manuales, marcar los resultados de cada paso de validación del caso de prueba como superado o no superado.
Importante
Los evaluadores deben marcar un paso de prueba con un estado si es un paso de prueba de validación.El resultado global de un caso de prueba refleja el estado de todos los pasos de prueba marcados por el evaluador.Por consiguiente, el caso de prueba tendrá el estado No superado si el evaluador marcó algún paso de prueba como no superado o no lo marcó.
En las pruebas automatizadas, cada caso de prueba se marca automáticamente como superado o no superado.
(Opcional) Para admitir el filtrado, asigne rutas de acceso de Iteración y Área a cada caso de prueba.
Interpretación del informe
Es normal que el informe Análisis de errores varíe según la fase del ciclo de desarrollo del producto. Las iteraciones tempranas deben mostrar una escasa actividad de regresión, si la hay. A medida que avance el ciclo de desarrollo, es de esperar que se produzcan algunas regresiones. Concretamente, debe revisar el informe para encontrar respuestas a las siguientes preguntas:
¿Cuántas pruebas en total están dando regresiones?
¿Mantiene el equipo el número total de regresiones o errores de pruebas dentro de los intervalos u objetivos esperados?
¿Está solucionando el equipo los problemas que se identifican? ¿Se están resolviendo los problemas conocidos de forma puntual?
Un informe Análisis de errores positivo mostrará números moderados de problemas nuevos, problemas conocidos y regresiones. Si se producen picos en una o más de estas áreas, es posible que el equipo tenga que investigar a fondo. Los picos pueden indicar problemas en la actividad de pruebas o en la calidad del código que el equipo está protegiendo.
Además, quizás desee comprobar el estado de compilaciones recientes, el estado de los errores y la renovación de código para determinar si las métricas de cada uno de estos factores pueden ayudar a explicar los cambios en las líneas de la actividad de pruebas.
Actualizar y personalizar el informe
Para actualizar el informe Análisis de errores, ábralo en Office Excel y cambie las opciones de filtro para el informe de tabla dinámica. Puede personalizar este informe para que admita otras vistas, tal como se describe en la tabla siguiente.
View |
Acción |
---|---|
Análisis de errores para una iteración |
Cambie el filtro de Iteration (valor predeterminado = Todos) |
Análisis de errores para un área de producto |
Cambiar el filtro de Area (valor predeterminado = Todos) |
Análisis de errores para un plan de pruebas concreto o un conjunto de planes de pruebas |
Agregar el filtro para Test Plan (valor predeterminado = Todo). |
Análisis de errores para las últimas seis, ocho o más semanas |
En la lista de campos de columna de tabla dinámica, reemplace @@Last 4 weeks@@ por un valor Set diferente. |
Para obtener más información sobre cómo usar y personalizar los informes de tabla dinámica y gráfico dinámico, vea las siguientes páginas en el sitio web de Microsoft: