Partilhar via


Testar diferentes configurações

Azure DevOps Serviços | Azure DevOps Server | Azure DevOps Server 2022

Seus usuários provavelmente instalarão ou executarão seu aplicativo em uma ampla variedade de configurações, como diferentes sistemas operacionais, navegadores da Web e outras variações. Você desejará executar pelo menos alguns de seus testes em estágios que tenham essas configurações diferentes.

Use seus planos de teste para decidir quais testes você deseja executar em quais configurações. Você tem que se certificar de que, ao executar seus testes, você tenha configurado seus estágios para as configurações que você precisa.

Você pode desenhar uma matriz esquemática das combinações que deseja testar:

Matriz de teste de configurações de navegador e sistema operacional

Então você pode:

Pré-requisitos

Categoria Exigência
Acesso ao projeto Membro do projeto.
Níveis de acesso Para adicionar configurações de teste: nível de projeto Gerir configurações de teste permissão definida para Permitir. Por defeito, esta permissão é concedida a membros dos grupos Contribuidores e Administrador do Projeto.

Para obter mais informações, consulte Acesso manual de teste e permissões.

Pré-requisitos para a ferramenta de linha de comando TCM

Categoria Requerimentos
Tools Visual Studio 2017 (Profissional ou Empresarial) ou anterior. O executável TCM (tcm.exe) encontra-se nos seguintes diretórios:
- %programfiles(x86)%\Microsoft Visual Studio\2017\Professional\Common7\IDE
- %programfiles(x86)%\Microsoft Visual Studio\2017\Enterprise\Common7\IDE
- %programfiles(x86)%\Microsoft Visual Studio 14.0\Common7\IDE
Níveis de acesso Pelo menos acesso básico e adesão ao projeto que queres aceder. Para clonar ou importar planos de teste e conjuntos de testes, precisa de acesso ao Basic + Planos de Teste . Para obter mais informações, consulte Acesso manual de teste e permissões.

Para executar um comando TCM, especifique os /collection parâmetros e /teamproject e /login conforme necessário.

Parâmetro Descrição
/coleção:CollectionURL Obrigatório. Especifica o URI da coleção de projeto de equipe. O formato do URI é o seguinte:
- Para Azure DevOps Serviços: https://dev.azure.com/OrganizationName ou https://OrganizationName.visualstudio.com
- Para Azure DevOps Server: http://ServerName:Port/VirtualDirectoryName/CollectionName. Se não for utilizado um diretório virtual, o formato é: http://ServerName:Port/CollectionName.
/projeto de equipa:project Obrigatório. O nome do projeto que contém os objetos de teste para os quais você deseja clonar ou importar testes automatizados.
/login:username,[password] Opcional. Especifica o nome e a palavra-passe de um utilizador válido do Azure DevOps que tem permissões para executar o comando. Use esta opção se as suas credenciais do Windows não tiverem as permissões adequadas, se estiver a usar autenticação básica ou se não estiver ligado a um domínio.

Ver configurações e variáveis

Muitas vezes, você deseja ver as configurações que já estão disponíveis para executar seus testes.

Você pode exibir uma lista de configurações de teste e variáveis de configuração na página Configurações .

Enquanto estiver no seu projeto, selecione Planos de Teste>Configurações no painel de navegação à esquerda. Aqui você verá todas as configurações e variáveis de teste atualmente disponíveis para seus planos de teste.

Captura de ecrã de Editor do Power Query, Consultar planos de teste.

Selecione uma configuração ou variável para ver mais informações sobre ela na janela à direita.

Criar configurações e variáveis

Uma configuração de teste é uma combinação de valores de variáveis de configuração. Suas variáveis de configuração podem ser, por exemplo, sistema operacional, navegador, tipo de CPU, banco de dados. Uma configuração pode ser "Windows 8 + CPU de 32 bits" ou "Windows 10 + CPU de 64 bits."

Crie as variáveis de configuração primeiro. Em seguida, combine vários valores de variáveis para criar uma configuração.

  1. Abra a página de Configurações no portal Web de Planos de Teste, selecione o ícone + e escolha Nova variável de configuração.

    A captura de tela mostra a opção Nova variável de configuração no menu Novo.

  2. Digite um nome para a variável, como Browser, e uma descrição. Selecione Adicionar novo valor e, em seguida, adicione um valor. Adicione quantos valores desejar à variável de configuração e salve-a.

    A captura de tela mostra a adição de valores a uma nova variável de configuração.

  3. Repita as etapas para criar quaisquer outras variáveis de configuração necessárias. Por exemplo, crie uma variável de configuração chamada Sistema operacional com os nomes de cada sistema operacional no qual você deseja testar.

    A captura de tela mostra a configuração dos valores para uma variável de configuração de Sistemas Operacionais.

  4. Selecione o + ícone e selecione Nova configuração de teste.

    A captura de tela mostra a opção Nova configuração de teste no menu Novo.

  5. Digite um nome para a configuração de teste e adicione as variáveis de configuração que você criou. Escolha um valor para cada variável para esta configuração.

    A captura de tela mostra a adição de variáveis à nova configuração de teste.

    Certifique-se de que a opção Atribuir a novos planos de teste esteja marcada para tornar essa configuração o padrão para todos os novos planos de teste criados.

  6. Salve sua nova configuração de teste.

Atribuir configurações a planos e suítes de teste

Você pode atribuir configurações a um conjunto de testes ou a um caso de teste individual. As configurações atribuídas a um conjunto de testes aplicam-se a todos os testes ou suítes dentro dele.

  1. Para atribuir uma configuração a um conjunto de testes, na página Planos de teste, selecione um plano. Na área Test Suites, selecione um conjunto de testes e selecione Mais opções ou clique com o botão direito do mouse para abrir o menu de contexto e, em seguida, selecione Atribuir configuração.

    A captura de tela mostra a opção Atribuir menu de configuração.

    Se você adicionar várias configurações a um conjunto de testes, os casos de teste serão repetidos com cada uma das configurações atribuídas.

    A captura de tela mostra várias atribuições de configuração para um conjunto de testes.

  2. Se necessário, substitua a configuração padrão atribuída a um caso de teste e atribua a configuração necessária. Selecione um ou mais casos de teste, abra o menu de contexto e selecione Atribuir configuração.

    A captura de tela mostra a atribuição de uma configuração atribuída a um caso de teste.

  3. Procure e selecione as configurações a serem atribuídas aos casos de teste.

    A captura de tela mostra as configurações de configuração para um caso de teste.

Atenção

  • Herança de configuração: Alterar configurações numa suíte filha quebra a herança das suas suítes mães. A alteração continua a propagar-se para suítes filhas inferiores, a menos que uma suíte criança já a sobrepeste.
  • Pontos de teste ocultos: Desatribuir uma configuração esconde os seus pontos de teste relacionados. Para as restaurar, reatribua a configuração.

Executar testes com cada configuração

Configure uma plataforma de testes para uma configuração específica, como testar a aplicação usando o Google Chrome no Windows 10.

  1. Selecione e execute um teste que tenha essa configuração atribuída.

    A captura de tela mostra um teste com uma configuração específica e a opção Executar para aplicativo Web selecionada.

    À medida que você executa o teste, um lembrete da configuração aparece na barra de status.

    A captura de tela mostra a configuração para este teste na barra de status.

Acompanhe os resultados do teste para cada configuração

  1. Abra a página Gráficos do seu conjunto de testes, selecione Novo e selecione Novo gráfico de resultados de teste.

    A captura de tela mostra a opção de menu Novo gráfico de resultados de teste.

  2. Escolha um tipo de gráfico, como um gráfico circular ou um gráfico de barras, selecione Agrupar por>Configuração e escolha OK.

    A captura de ecrã mostra a escolha de uma opção de configuração para agrupar por na caixa de diálogo de configuração do gráfico.

    É criado um gráfico que pode ajudá-lo a acompanhar os testes com base nas configurações. Você pode fixar esse gráfico no seu painel.

    Uma captura de ecrã mostra um gráfico de barras com valores para Não executado, Aprovado e Reprovado.

Se você tiver um caso de teste que aparece em vários conjuntos de testes, poderá definir as diferentes configurações para cada conjunto. O mesmo caso de teste pode ter definições de configuração diferentes em diferentes conjuntos de testes e planos de teste.