Skip to content
TheChatArchiveThe Chat Archive
Claudeclaude-3-5-haiku-20241022· AnthropicHugging Face LMArena Human Preference 140K

Como vincular um caso de teste criado no azure tes plans a uma pipeline e essa pipeline…

From a Chatbot Arena battleThe same person sent this prompt to two anonymous models at once. Compare it with Geminigemini-2.5-flash-lite-preview-06-17-thinking’s answer.
  1. User

    Como vincular um caso de teste criado no azure tes plans a uma pipeline e essa pipeline alterar o status do caso de teste

  2. Claude Assistant

    Vou explicar como vincular casos de teste do Azure Test Plans a uma pipeline e configurar a alteração automática de status. Dividirei o processo em etapas detalhadas:

    1. Pré-requisitos

    • Conta no Azure DevOps
    • Projeto configurado
    • Casos de teste criados no Test Plans
    • Pipeline de CI/CD configurada

    2. Preparação dos Casos de Teste

    No Azure Test Plans:

    1. Crie ou selecione os casos de teste
    2. Anote o ID do caso de teste
    3. Adicione uma tag ou propriedade que identifique o teste na pipeline

    3. Configuração da Pipeline

    Existem duas abordagens principais:

    Abordagem 1: Usando Azure DevOps Test Management

    # azure-pipelines.yml
    trigger:
    - main
    
    pool:
      vmImage: 'ubuntu-latest'
    
    steps:
    - task: NodeTool@0
      inputs:
        versionSpec: '16.x'
      displayName: 'Install Node.js'
    
    - script: npm install
      displayName: 'Install dependencies'
    
    - task: Npm@1
      inputs:
        command: 'custom'
        customCommand: 'test'
      displayName: 'Run Tests'
    
    # Tarefa para atualizar resultados de teste
    - task: PublishTestResults@2
      inputs:
        testResultsFormat: 'JUnit'
        testResultsFiles: '**/test-results.xml'
        mergeTestResults: true
        testRunTitle: 'Test Results'
    
    # Tarefa específica para atualizar status do caso de teste
    - task: UpdateTestCaseStatus@0
      inputs:
        testCaseIds: '1,2,3' # IDs dos casos de teste
        testRunId: '$(Test.RunId)'
        testRunTitle: 'Automated Test Run'
        configuration: 'Windows-Chrome'
        testOutcome: 'Passed' # ou 'Failed', 'Blocked', etc.
    

    Abordagem 2: Script Personalizado

    # azure-pipelines.yml
    trigger:
    - main
    
    pool:
      vmImage: 'ubuntu-latest'
    
    steps:
    - task: NodeTool@0
      inputs:
        versionSpec: '16.x'
      displayName: 'Install Node.js'
    
    - script: npm install
      displayName: 'Install dependencies'
    
    - script: npm test
      displayName: 'Run Tests'
      env:
        AZURE_PERSONAL_ACCESS_TOKEN: $(System.AccessToken)
    
    - powershell: |
        # Script para atualizar status do caso de teste
        $organization = "SuaOrganizacao"
        $project = "SeuProjeto"
        $testCaseId = 123 # ID do caso de teste
        $testResult = "Passed" # ou "Failed"
    
        $headers = @{
          Authorization = "Bearer $(System.AccessToken)"
          'Content-Type' = 'application/json'
        }
    
        $body = @{
          status = $testResult
          comment = "Atualizado automaticamente pela pipeline"
        } | ConvertTo-Json
    
        $url = "https://dev.azure.com/$organization/$project/_apis/test/testcases/$testCaseId/results?api-version=6.0"
    
        Invoke-RestMethod -Uri $url -Method PATCH -Headers $headers -Body $body
      displayName: 'Update Test Case Status'
      condition: succeededOrFailed()
    

    4. Configurações Adicionais

    Permissões Necessárias

    • Garanta que o token de acesso tenha permissões para:
      • Executar testes
      • Atualizar casos de teste
      • Criar test runs

    Variáveis de Ambiente

    • Use System.AccessToken para autenticação
    • Configure tokens de acesso pessoal (PAT) com permissões adequadas

    5. Melhores Práticas

    1. Mapeamento Consistente

      • Mantenha um mapeamento claro entre IDs de casos de teste e scripts de automação
      • Use comentários e tags para rastreabilidade
    2. Tratamento de Erros

      • Implemente lógica para lidar com diferentes resultados de teste
      • Adicione tratamento de exceções nos scripts
    3. Relatórios Detalhados

      • Configure publicação de relatórios de teste
      • Use ferramentas como Allure ou relatórios nativos do Azure DevOps

    6. Exemplo Completo com Cucumber (JavaScript)

    trigger:
    - main
    
    pool:
      vmImage: 'ubuntu-latest'
    
    steps:
    - task: NodeTool@0
      inputs:
        versionSpec: '16.x'
      displayName: 'Install Node.js'
    
    - script: npm install
      displayName: 'Install dependencies'
    
    - script: npm run test:cucumber
      displayName: 'Run Cucumber Tests'
      env:
        AZURE_TEST_CASE_IDS: '1,2,3'
    
    - task: PublishTestResults@2
      inputs:
        testResultsFormat: 'Cucumber'
        testResultsFiles: '**/cucumber-report.json'
        mergeTestResults: true
        testRunTitle: 'Cucumber Test Results'
    
    - powershell: |
        # Script para processar resultados e atualizar casos de teste
        $testCaseIds = $env:AZURE_TEST_CASE_IDS -split ','
        $reportPath = "$(System.DefaultWorkingDirectory)/cucumber-report.json"
        
        # Lógica para processar relatório e atualizar status
        # Implementação específica dependerá do formato do seu relatório
      displayName: 'Process Test Results'
    

    Considerações Finais

    • A implementação exata dependerá:

      • Linguagem de programação
      • Framework de testes
      • Estrutura específica do seu projeto
    • Recomendo testes incrementais:

      1. Primeiro, configure a pipeline básica
      2. Adicione publicação de resultados
      3. Implemente atualização de status
    • Consulte documentação oficial do Azure DevOps para detalhes específicos da sua versão

    Documentação Oficial

    Dúvidas específicas sobre sua implementação? Estou à disposição para ajudar a detalhar qualquer parte do processo!

Responses were produced in different, uncontrolled contexts (system prompts, settings, prior turns). This is not a benchmark.