Probar diferentes configuraciones
Azure DevOps Services | Azure DevOps Server 2022 | Azure DevOps Server 2019
Es probable que los usuarios instalen o ejecuten la aplicación en una amplia variedad de configuraciones, como diferentes sistemas operativos, exploradores web y otras variaciones. Querrá ejecutar al menos algunas de las pruebas en fases que tengan esas configuraciones diferentes.
Use los planes de prueba para decidir qué pruebas desea ejecutar en qué configuraciones. Debe asegurarse de que al ejecutar las pruebas que ha configurado las fases para las configuraciones que necesita.
Puede dibujar una matriz esquemática de las combinaciones que desea probar:
Después, puede hacer lo siguiente:
- Visualización de las configuraciones y variables disponibles
- Creación de configuraciones y variables
- Asignación de las configuraciones a planes de prueba y conjuntos de pruebas
- Ejecutar pruebas con cada una de las configuraciones
- Seguimiento de los resultados de las pruebas para cada configuración
Requisitos previos
- Debe conectarse a un proyecto. Si todavía no tiene un proyecto, cree uno.
- Debe agregarse a un proyecto. Para conseguir que lo agreguen, consulte Agregar usuarios a un proyecto o equipo.
- Para ver o agregar configuraciones de prueba, debe tener acceso básico o superior.
- Para agregar configuraciones de prueba, debe tener establecido el permiso Administrar configuraciones de prueba de nivel de proyecto en Permitir. De forma predeterminada, este permiso se concede a los miembros de los grupos Colaborador y Administrador de proyectos.
Para obtener más información, consulte Acceso a pruebas manuales y permisos.
Trabajar con la herramienta de línea de comandos TCM
Para usar la herramienta de línea de comandos TCM, debe tener los siguientes elementos en su lugar:
Instalado Visual Studio 2017 Professional o una versión anterior. Puede acceder a TCM desde el símbolo del sistema y los directorios siguientes:
%programfiles(x86)%\Microsoft Visual Studio\2017\Professional\Common7\IDE
%programfiles(x86)%\Microsoft Visual Studio\2017\Enterprise\Common7\IDE
%programfiles(x86)%\Microsoft Visual Studio 14.0\Common7\IDE
Para ejecutar un comando TCM, especifique los
/collection
parámetros y/teamproject
, y/login
según sea necesario.Parámetro Descripción /colección :CollectionURL
Necesario. Especifica el URI de la colección de proyectos de equipo. El formato del URI es el siguiente:
- Para Azure DevOps Services:http://dev.azure.com/OrganizationName
- Para Azure DevOps Server:http://ServerName:Port/VirtualDirectoryName/CollectionName
. Si no se usa ningún directorio virtual, el formato del URI es el siguiente:http://ServerName:Port/CollectionName
/teamproject: project
Necesario. Nombre del proyecto que contiene los objetos de prueba en los que desea clonar o importar pruebas automatizadas. /login: username,[password]
Opcional. Especifica el nombre y la contraseña de un usuario de Azure DevOps válido y quién tiene permisos para ejecutar el comando. Use esta opción si las credenciales de Windows no tienen los permisos adecuados o usa la autenticación básica o no está conectado a un dominio. Debe ser miembro válido de uno o varios proyectos a los que desea acceder y tener los permisos necesarios en función de los comandos que ejecute. Para obtener más información, consulte Acceso a pruebas manuales y permisos.
Debe tener los mismos niveles de acceso necesarios para agregar planes de prueba y conjuntos de pruebas para clonar o importar objetos de prueba.
Visualización de configuraciones y variables
A menudo quiere ver las configuraciones que ya están disponibles para ejecutar las pruebas.
Puede ver una lista de configuraciones de prueba y variables de configuración en la página Configuraciones .
En el proyecto, seleccione Configuraciones de planes>de prueba en el área de navegación izquierda. Aquí verá todas las configuraciones y variables de prueba disponibles actualmente para los planes de prueba.
Seleccione una configuración o variable para ver más información sobre ella en la ventana a la derecha.
Creación de configuraciones y variables
Una configuración de prueba es una combinación de valores de variable de configuración. Las variables de configuración podrían ser, por ejemplo, sistema operativo, explorador, tipo de CPU, base de datos. Una configuración puede ser "CPU de Windows 8 + 32 bits" o "CPU de Windows 10 + 64 bits".
Cree primero las variables de configuración. A continuación, combine varios valores de variable para crear una configuración.
Abra la página Configuraciones en el portal web De planes de prueba, seleccione el + icono y seleccione Nueva variable de configuración.
Escriba un nombre para la variable, como Browser y una descripción. Seleccione Agregar nuevo valor y agregue un valor. Agregue tantos valores como desee a la variable de configuración y guárdelo.
Repita los pasos para crear cualquier otra variable de configuración que necesite. Por ejemplo, cree una variable de configuración denominada Sistema operativo con los nombres de cada sistema operativo en el que desea probar.
Seleccione el + icono y seleccione Nueva configuración de prueba.
Escriba un nombre para la configuración de prueba y agregue las variables de configuración que ha creado. Elija un valor para cada variable para esta configuración.
Asegúrese de que Asignar a nuevos planes de prueba está activado para que esta configuración sea el valor predeterminado para todos los nuevos planes de prueba que cree.
Guarde la nueva configuración de prueba.
Una configuración de prueba es una combinación de valores de variable de configuración. Las variables de configuración podrían ser, por ejemplo, sistema operativo, explorador, tipo de CPU, base de datos. Una configuración puede ser "CPU de Windows 8 + 32 bits" o "CPU de Windows 10 + 64 bits".
Primero debe crear las variables de configuración. A continuación, combine varios valores de variable para crear una configuración.
Abra la página Configuraciones en el portal web De planes de prueba, elija el icono y seleccione Nueva variable de configuración.
Escriba un nombre para la variable, como Browser, y escriba un valor. Agregue tantos valores como desee a la variable de configuración y guárdelo.
Repita los pasos para crear cualquier otra variable de configuración que necesite. Por ejemplo, cree una variable de configuración denominada Sistema operativo con los nombres de cada sistema operativo en el que desea probar.
Elija el icono y seleccione Nueva configuración de prueba.
Escriba un nombre para la configuración de prueba y agregue las variables de configuración que ha creado. Elija un valor para cada variable para esta configuración.
Asegúrese de que Se comprueba Asignar a nuevos planes de prueba para que esta sea la configuración predeterminada para todos los nuevos planes de prueba que cree.
Guarde la nueva configuración de prueba.
Asignación de configuraciones a planes y conjuntos de pruebas
Puede asignar configuraciones a un conjunto de pruebas o a un caso de prueba individual. Las configuraciones asignadas a un conjunto de pruebas se aplican a todas las pruebas o conjuntos dentro de él.
Para asignar una configuración a un conjunto de pruebas, en la página Planes de prueba, seleccione un plan. En el área Conjuntos de pruebas, seleccione un conjunto de pruebas y seleccione Más opciones o haga clic con el botón derecho para abrir el menú contextual y, a continuación, seleccione Asignar configuración.
Si agrega varias configuraciones a un conjunto de pruebas, los casos de pruebas se repiten con cada una de las configuraciones asignadas.
Si es necesario, invalide la configuración predeterminada asignada a un caso de prueba y asigne la configuración que necesita. Seleccione uno o varios casos de prueba, abra el menú contextual y seleccione Asignar configuración.
Busque y seleccione las configuraciones que se van a asignar a los casos de prueba.
Puede asignar configuraciones a un plan de prueba, un conjunto de pruebas o un caso de prueba individual. Las configuraciones asignadas a un plan de prueba o conjunto de pruebas se aplican a todas las pruebas o conjuntos dentro de él.
Para asignar una configuración a un plan de prueba, en la página Planes de prueba, abra el menú contextual del plan y elija Asignar configuración al plan de prueba.
Para asignar una configuración a un conjunto de pruebas, abra el menú contextual del conjunto y elija Asignar configuración al conjunto de pruebas.
Si agrega varias configuraciones a un plan o conjunto de pruebas, los casos de prueba se repiten en el plan o conjunto con cada una de las configuraciones que haya asignado.
Si es necesario, invalide la configuración predeterminada asignada a un caso de prueba y asigne la configuración que necesita. Seleccione uno o varios casos de prueba, abra el menú contextual y elija Asignar configuraciones.
Busque y seleccione las configuraciones que se van a asignar a estos casos de prueba.
Ejecución de pruebas con cada configuración
Configure una plataforma de prueba para una configuración determinada, como probar la aplicación con Google Chrome en Windows 10.
Seleccione y ejecute una prueba que tenga asignada esta configuración.
A medida que ejecuta la prueba, aparece un recordatorio de la configuración en la barra de estado.
Configure una plataforma de prueba para una configuración determinada, como probar la aplicación con Google Chrome en Windows 10.
Seleccione y ejecute una prueba que tenga asignada esta configuración.
Al ejecutar la prueba, se muestra un recordatorio de la configuración necesaria en la barra de estado de la ventana Ejecutor de pruebas.
Seguimiento de los resultados de las pruebas para cada configuración
Abra la página Gráficos del conjunto de pruebas, seleccione Nuevo y seleccione Nuevo gráfico de resultados de pruebas.
Elija un tipo de gráfico, como un gráfico circular o un gráfico de barras, y, a continuación, seleccione Agrupar por>configuración y elija Aceptar.
Se crea un gráfico que puede ayudarle a realizar un seguimiento de las pruebas en función de las configuraciones. Puede anclar este gráfico al panel.
Si tiene un caso de prueba que aparece en varios conjuntos de pruebas, puede establecer las distintas configuraciones de cada conjunto. El mismo caso de prueba puede tener diferentes opciones de configuración en diferentes conjuntos de pruebas y planes de prueba.
Abra la página Gráficos del plan de pruebas o conjunto de pruebas, elija Nuevo y seleccione Nuevo gráfico de resultados de pruebas.
Elija el tipo de gráfico que necesita, seleccione Configuración en la lista Agrupar por y elija Aceptar.
Se crea un gráfico que puede ayudarle a realizar un seguimiento de las pruebas en función de las configuraciones. Puede anclar este gráfico al panel.
Si tiene un caso de prueba que aparece en varios planes de prueba y conjuntos de pruebas, puede establecer las distintas configuraciones de cada uno de ellos. El mismo caso de prueba puede tener diferentes opciones de configuración en diferentes conjuntos de pruebas y planes de prueba.