Realizar un seguimiento de los resultados de pruebas

A medida que crea y ejecuta pruebas, es posible que quiera hacer un seguimiento de su estado. Por ejemplo, cuántas pruebas están listas para ejecutarse, el porcentaje de éxito/error de las pruebas o cuántas pruebas se ejecutaron hasta ahora.

¿Qué opciones de informes existen?

• Gráficos ligeros (Visual Studio Online o Team Web Access)

• Consultas de elemento de trabajo (Visual Studio Online o Team Web Access)

• Informes ya existentes en el almacenamiento de datos (solo en TFS local)

• Crear informes propios a partir del almacenamiento de datos (solo en TFS local)

Use gráficos ligeros para ver fácilmente las respuestas a muchas de sus preguntas sobre el estado de la prueba. Puede anclar estos gráficos a la página principal y todo el equipo podrá ver el progreso de un vistazo. (Debe tener TFS 2013 Update 4 o una versión posterior para usar gráficos ligeros con Team Web Access).

Cree y ejecute consultas de elementos de trabajo para generar informes desde el centro de trabajo. Desde una consulta de elementos de trabajo de lista plana también puede generar un gráfico para esa consulta. Por ejemplo, cree una consulta para mostrar los errores activos y su prioridad y, a continuación, genere un gráfico para agrupar rápidamente dichos errores activos por prioridad.

Pero si los gráficos ligeros no muestran los informes que necesita, puede profundizar en los datos si usa TFS local. Puede obtener acceso a los informes existentes en el almacenamiento de datos o puede crear los suyos propios con Excel.

Estado de la prueba con gráficos ligeros

Puede crear estos gráficos desde el centro de pruebas para Team Web Access o Visual Studio Online.

Realizar el seguimiento del progreso de las pruebas

Use gráficos de resultados de pruebas para realizar un seguimiento del progreso de las pruebas. Elija entre un conjunto fijo de campos previamente rellenados relativos a resultados. De forma predeterminada, se crea un gráfico circular para cada plan de pruebas. Este gráfico se agrupa por el campo de resultado para mostrar los últimos resultados de todas las pruebas del plan de pruebas.

Vea este gráfico predeterminado desde la pestaña Gráficos.

Agregue sus propios gráficos de resultados de pruebas para visualizar lo que es importante para el equipo. Si ya sabe cómo agregar un gráfico, vaya a los ejemplos siguientes de gráficos que puede crear.

1. Seleccione el plan de pruebas o el conjunto de pruebas para su gráfico en la pestaña Plan de pruebas. Después, cree un nuevo gráfico.

   

2. Seleccione el tipo de gráfico. Basándose en el gráfico, configure los campos que quiere usar para agrupar o para las filas y columnas.

   

   Todos los gráficos resumen la información de los conjuntos de pruebas secundarios del plan de pruebas o del conjunto de pruebas que seleccionó.

3. Guarde el gráfico. Ahora se mostrará en la pestaña de gráficos del plan de pruebas o del conjunto de pruebas que seleccionó.

Ejemplos de resultados de pruebas

¿Cuál es el estado de la prueba de un conjunto de pruebas específico?

Seleccione el conjunto de pruebas en la pestaña Plan de pruebas y agregue un gráfico circular de resultados de pruebas. Agrupe por resultados.

¿Cuál es el estado de la prueba de los casos de usuario que mi equipo está probando en este sprint?

Si ha creado conjuntos de pruebas basados en requisitos en su plan de pruebas para los casos de usuario, puede crear un gráfico para ello.

1. Agrupe estos conjuntos de pruebas basados en requisitos en un conjunto de pruebas estático.

2. Seleccione este conjunto de pruebas estático en la pestaña Plan de pruebas.

3. Agregue un gráfico de barras apiladas de los resultados de pruebas. Elija Conjunto como pivot de filas y Resultado como pivot de columnas.

   

¿Cuántas pruebas le queda por ejecutar a cada evaluador?

Seleccione su plan de pruebas en la pestaña Plan de pruebas y agregue un gráfico de tabla dinámica de resultados de pruebas. Elija Evaluador como pivot de filas y Resultado como pivot de columnas.

¿Cómo puedo comprobar la calidad en función de la configuración?

Use un gráfico de barras apiladas o un gráfico de tabla dinámica. Elija Configuración como pivot de filas y Resultado como pivot de columnas.

¿Cómo puedo realizar un seguimiento de por qué las pruebas de mi equipo no se están superando?

Para realizar un análisis de errores, use un gráfico de barras apiladas o un gráfico de tabla dinámica. Elija Evaluador en las filas y Tipo de error en las columnas. (El tipo de error de los resultados de pruebas solo se puede establecer mediante Microsoft Test Manager).

¿Cómo puedo realizar un seguimiento de la resolución de las pruebas erróneas de mi equipo?

Para realizar un análisis de resolución, use un gráfico de barras apiladas o un gráfico de tabla dinámica. Elija Evaluador en las filas y Resolución en las columnas. (El tipo de resolución de los resultados de pruebas solo se puede establecer mediante Microsoft Test Manager).

Seguimiento del estado del caso de prueba

Use gráficos de caso de prueba para ver el progreso de la creación de casos de pruebas. Los gráficos de casos de prueba proporcionan la flexibilidad para informar en columnas que puede agregar a la pestaña Pruebas. De forma predeterminada, los campos de casos de prueba no se agregan a la vista en la pestaña Pruebas.

Si ya sabe cómo agregar un gráfico, vaya a los ejemplos siguientes de gráficos que puede crear para casos de pruebas.

1. Agregue los campos que quiere usar en su gráfico de caso de pruebas en la pestaña Pruebas con las opciones de Columna. Los campos aparecerán como opciones en las listas desplegables para agrupar para los gráficos de casos de pruebas.

2. Seleccione el plan de pruebas o el conjunto de pruebas para su gráfico en la pestaña Plan de pruebas. Agregue después un gráfico de caso de pruebas.

   

   Todos los gráficos resumen la información de los conjuntos de pruebas secundarios del plan de pruebas o del conjunto de pruebas que seleccionó.

3. Seleccione el tipo de gráfico. Basándose en el gráfico, configure los campos que quiere usar para agrupar, para las filas y columnas, o el intervalo (solo gráficos de tendencias).

   

   No puede agrupar por conjunto de pruebas para los gráficos de casos de pruebas.

4. Guarde el gráfico. Ahora se mostrará en la pestaña de gráficos del plan de pruebas o del conjunto de pruebas que seleccionó.

Ejemplos de casos de pruebas

¿Cómo puedo realizar un seguimiento de la evolución de la creación de los casos de prueba?

Use un gráfico de tendencias de área apilada para ver cuántos casos de prueba están listos para ejecutarse. Elija Estado en el campo Apilar por, y Ascendente en el campo Ordenar.

¿Cómo puedo realizar un seguimiento de la evolución del estado de automatización?

Use un gráfico de tendencias de área apilada para ver cuántos casos de pruebas han sido automatizados. Elija Estado de automatización en el campo Apilar por, y Ascendente en el campo Ordenar.

Si varios equipos poseen casos de pruebas en mi plan de pruebas, ¿puedo ver cuántos equipos son propietarios y las prioridades de las pruebas?

Si sus equipos están organizados por ruta de acceso del área, puede usar un gráfico circular de caso de prueba. Elija Ruta de acceso del área en el campo Agrupar por.

Si quiere conocer las prioridades de estas pruebas, cree un gráfico de barras apiladas. Elija Ruta de acceso del área en las filas y Prioridad en las columnas.

¿Cómo puedo realizar un seguimiento del estado de creación de las pruebas por parte de los miembros del equipo?

El seguimiento de los propietarios de los casos de pruebas se realiza mediante el campo Asignado a. Use un gráfico de barras apiladas o un gráfico de tabla dinámica. Elija Asignado a en las filas y Estado en las columnas.

Preguntas y respuestas

P: ¿Puedo ver los resultados de pruebas recientes de un caso de prueba individual?

R: Sí. Seleccione el caso de prueba dentro de un conjunto de pruebas y, después, elija ver el panel de detalles de la prueba.

Vea los resultados de pruebas recientes para este caso de prueba.

P: ¿Cómo se muestran en los gráficos los datos de casos de pruebas que están en varios conjuntos de pruebas?

R: En el caso de los gráficos de casos de prueba, si un caso de prueba se ha agregado a varios conjuntos de pruebas de un plan, solo se cuenta una vez. En el caso de los gráficos de resultados de pruebas, se cuenta cada instancia de una prueba que se ejecuta para cada uno de los conjuntos de pruebas por separado.

P: ¿Quién puede crear gráficos?

A: Debe tener al menos una licencia básica para crear gráficos.

P: ¿Cómo puedo compartir el estado de la prueba del equipo con todas las partes interesadas?

R: Ancle un gráfico a la página principal del equipo para que todo el equipo la vea. Use el menú contextual del gráfico.

Debe ser administrador del equipo para hacerlo. Incluso los miembros del equipo con licencia de parte interesada pueden ver estos gráficos de pruebas en la página principal. Obtenga más información sobre la página principal aquí. O bien, obtenga más información sobre la administración de equipos.

P: ¿Cómo puedo editar o eliminar un gráfico?

R: Seleccione la opción que quiera en el menú contextual del gráfico.

Realizar un seguimiento de los errores mediante los gráficos ligeros

También es importante saber qué errores se encuentran y se corrigen para conocer la calidad de la aplicación. ¿Cuál es la prioridad de los errores activos? ¿Qué aspecto tienen las tendencias de errores? Puede generar gráficos ligeros para cualquier consulta de lista plana que cree en el centro de trabajo en la página de consultas. Obtenga información sobre cómo hacerlo con Team Web Access o Visual Studio Online aquí.

Preguntas y respuestas

P: ¿Se puede realizar un seguimiento de los errores que se crearon específicamente en casos de prueba?

R: Cuando se crea un error desde el ejecutor de pruebas, se vincula de manera automática al caso de prueba que se estaba ejecutando. Para buscar todos los errores creados a partir de los casos de prueba, abra Microsoft Test Manager, vaya a la pestaña Probar y elija Comprobar errores. Para volver a ejecutar la prueba de un error que se ha corregido, elija Comprobar.

Realizar un seguimiento de los resultados de pruebas automatizadas con Microsoft Test Manager

Para ver los gráficos de las series de pruebas recientes, use Microsoft Test Manager. Puede abrirlo en cualquier máquina en que se haya instalado Visual Studio Test Professional o Visual Studio Ultimate. Establezca una conexión al proyecto del equipo y al plan de pruebas y elija Centro de pruebas.

Para obtener una lista de las series de pruebas recientes, elija Probar, Analizar series de pruebas. Cada elemento de la lista es una serie de pruebas:

Microsoft Test Manager permite revisar los resultados de pruebas después de que estas han concluido. Cualquier serie que incluya pruebas no superadas se marcará como Precisa investigación. Si abre los detalles de la serie de pruebas, puede agregar notas, asignar un motivo por el que no se superó la prueba, crear errores u otros elementos de trabajo y cambiar la marca a Completada:

Si fuera necesario para el proceso de prueba, también puede cambiar los tipos de motivos de prueba no superada.

Realizar un seguimiento de la calidad de la compilación

Si tiene TFS local, puede usar este informe para mostrar los porcentajes de éxito/error de las pruebas automatizadas que se ejecutan como parte del proceso de compilación. Puede mostrarle el porcentaje de éxito de dichas pruebas en relación con cada una de las compilaciones. Puede ver si mejora o no.

También necesita tener instalado SQL Services Reporting Services para TFS para realizar este informe.

Realizar un seguimiento de la preparación de la versión

Si tiene TFS local, también puede ver el historial de las pruebas correctas e incorrectas. Examine las tendencias del porcentaje de éxito para determinar cuándo cree que la aplicación estará lista para publicarse con este informe. Vea si está mejorando la calidad de la aplicación cuando ejecute las pruebas.

También necesita tener instalado SQL Services Reporting Services para TFS para realizar este informe.

Informes personalizados solo para TFS local

Necesita tener instalado SQL Services Reporting Services para TFS para realizar informes personalizados.

Si tiene TFS local, los planes y conjuntos de pruebas son elementos de trabajo con TFS 2013 Update 3 o versiones superiores. Puede crear sus propios informes de Excel desde una consulta basada en sus necesidades de planes de pruebas, conjuntos de pruebas, casos de prueba, casos de usuario, requisitos y errores. Aprenda a crear un informe de Excel para una consulta de lista plana aquí.

Puede personalizar más si el portal del proyecto de equipo está configurado con SharePoint Server Enterprise Edition. En ese caso, puede usar los informes de Excel para crear un panel.

Si todavía no tiene el informe que necesita, hay más opciones para ver los datos directamente. Descubra las formas para crear informes mediante el cubo de datos del procesamiento analítico en línea (OLAP) (TFS_Analysis) , que está optimizado para crear informes, o puede usar la base de datos de almacenamiento relacional (TFS_Warehouse) para crear informes. Obtenga información sobre cómo hacer esto aquí.

Preguntas y respuestas

P: ¿Hay informes que puedo usar si no tengo TFS 2013 Update 4 para los gráficos ligeros?

R: Si la instalación de TFS local incluye servicios de informe, puede consultar el gráfico Progreso del plan de pruebas, que muestra el número de pruebas correctas e incorrectas de este sprint. Abra http://<Team Foundation Server>/Reports y navegue hasta TfsReports > DefaultCollection > su proyecto > Tests. De forma alternativa, en Visual Studio, en Team Explorer, abra Informes.

P: ¿Puedo ver un resumen de los últimos resultados de pruebas desde MTM?

R: Sí. Desde MTM, vaya a la pestaña Plan y, a continuación, elija Resultados. Puede ver los resultados por conjuntos para ver si cada caso de usuario superó las pruebas.