Visão Geral da Execução de Testes

A tela de Visão Geral da Execução de Testes é um painel que oferece uma visão rápida do estado atual da sua execução de teste. Dependendo do status da execução do teste, as informações fornecidas incluem estatísticas resumidas (disponíveis apenas para execuções de teste concluídas) e uma visão das unidades de teste e problemas. O status geral de conclusão da execução do teste também está disponível.

A seção superior da tela de Visão Geral da Execução de Testes exibe informações resumidas para uma execução de teste (isto inclui estatísticas combinadas de Componentes e Páginas).

As seguintes características são alguns dos pontos importantes para você entender:

A primeira seção inclui botões que você pode usar com base no status da Execução de Teste: Em Progresso ou Conclusão. Uma caixa de seleção, Excluir Problemas Fechados, também está incluída nesta seção.

• Botão Informações do Teste: Expande uma seção de referência prática das informações abaixo que exibe detalhes adicionais sobre esta Execução de Teste, como sua Descrição, Padrão, Sessão, tempo limite, Produto, Versão, Ambiente, Plataforma, Tecnologia assistiva e Unidades para testar.

• Botão Gerar Relatório de Execução de Teste: Use o botão para visualizar e imprimir um relatório em HTML para execuções de teste concluídas. Clicar no botão botão Gerar Relatório de Execução de Teste abre uma caixa de diálogo de confirmação onde você decide se deseja gerar o relatório com ou sem problemas encerrados.

  

  Nota: O botão botão Gerar Relatório de Execução de Teste aparece na página de Visão Geral da Execução de Teste somente quando os padrões de teste selecionados são WCAG, EN ou Trusted Tester.

  

• Gerar Relatório de Auditoria: Use esta opção para gerar o relatório de auditoria após a conclusão da execução do teste. Clicar na opção Gerar Relatório de Auditoria exibe a caixa de diálogo diálogo de Confirmação do Relatório de Auditoria onde você pode inserir o nome do avaliador, o resumo das descobertas da avaliação e marcar a caixa de seleção Caixa de seleção Todas as ferramentas automáticas usadas estão em conformidade com o formato da regra ACT.

  

Clique em Gerar Relatório de Auditoria. A página do Relatório de Auditoria é exibida.

O sistema exibirá qualquer personalização que você realizar na seção Informações de Relatório na página Gerar Relatório de Auditoria.

• Gerar Relatório Executivo Resumido: Este relatório fornece um resumo de alto nível das questões de acessibilidade mais significativas identificadas durante uma avaliação. Ele destaca as cinco páginas ou componentes mais afetados com base na gravidade (Bloqueador, Crítico, Sério, Moderado e Menor). A coluna Total de Problemas reflete a soma das pontuações de todos os problemas. Você pode editar e salvar algumas seções no relatório de resumo executivo, como a visão geral, conformidade com acessibilidade, impacto no usuário, principais problemas e método antes de exportar o relatório. Para baixar o relatório, no Relatório Executivo de Resumo de Acessibilidade, selecione a opção Baixar como Word. O relatório será baixado para o seu sistema local. O botão Gerar Relatório Executivo de Resumo estará disponível na página de Visão Geral da Execução de Testes somente quando o administrador habilitar a opção Habilitar relatórios de resumo executivo na página Configurações Administrativas. Para habilitar essa opção, na página Configurações do Administrador, clique em Configurações e depois clique em Ativar relatório executivo resumido sob Ativar/Desativar Recursos e finalmente clique em Salvar configurações.

• Botão Compartilhar Execução de Teste: Este botão está disponível para você apenas se o seu administrador o tiver habilitado na página Configurações Administrativas. Clicar no botão Compartilhar Execução de Teste traz uma caixa de diálogo onde você pode usar o URL fornecido para copiar e compartilhar o URL com usuários Auditor e não Auditor. Usuários não Auditor só podem visualizar os dados no link URL.

  Nota: Os usuários não podem ver os detalhes da execução do teste usando o URL se a execução do teste tiver sido arquivada.

• botão Atualizar axe Reports: Ao concluir uma execução de teste, o axe Auditor transmite perfeitamente os dados mais recentes para o axe Reports, e uma mensagem de sucesso aparece na página de Visão Geral da Execução de Teste. Você pode usar o botão Atualizar axe Reports para garantir que o axe Reports receba as informações mais recentes sempre que você modificar a execução do teste.

  Este botão está disponível para você apenas se a integração do axe Reports foi habilitada durante a instalação do axe Auditor, e o administrador do sistema concedeu a você a permissão para atualizar o axe Reports na página Configurações do Administrador.

• Excluir Problemas Encerrados: Selecione esta caixa de seleção para excluir problemas encerrados da conformidade com a acessibilidade, problemas por gravidade, pontos de verificação e o número total de problemas na página de Visão Geral da Execução de Teste.

A próxima seção inclui três painéis com as seguintes informações:

• Pontuação de Acessibilidade: A Pontuação de Acessibilidade é uma métrica usada para avaliar a conformidade de uma Execução de Teste com os padrões, diretrizes e melhores práticas de acessibilidade. A pontuação de acessibilidade é calculada como uma porcentagem, onde uma porcentagem mais alta indica um menor risco de problemas de acessibilidade.

Nota: A pontuação de acessibilidade é exibida apenas se o administrador do seu sistema a tiver habilitado na página Configurações do Administrador.

The accessibility score is based on page categories and is calculated according to the following formula:
    <p>
(0*p3 + 0.4*p2 + 0.8*p1 + p0)/TP</p>
where

p3 = number of Critical/Blocker pages

p2 = number of Serious pages

p1 = number of Moderate pages

p0 = number of Good pages

TP = Total pages in the Test Run 

• Páginas Críticas/Interrompidas são definidas como páginas que contêm pelo menos um problema crítico, que também pode incluir múltiplos problemas sérios, moderados ou menores.

• Páginas Sérias contêm pelo menos um problema sério e podem incluir um ou mais problemas moderados ou menores.

• Páginas Moderadas contêm pelo menos um problema moderado e também podem incluir um ou mais problemas menores.

• Páginas compostas exclusivamente por problemas menores ou sem problemas são classificadas como Boas.

  Para entender os tipos de impactos que seus resultados de verificação têm, use o tópico Níveis de Impacto.

• Conformidade de Acessibilidade: O gráfico de Conformidade com Acessibilidade reflete a conformidade do seu produto com os padrões e diretrizes de acessibilidade. Ele exibe o número de avaliações que são aprovadas ou reprovadas com base na sua seleção: Critérios de Sucesso ou Pontos de Verificação Deque. A visualização padrão é Critérios de Sucesso.

  Nota: O número de Pontos de Verificação Deque depende do padrão e do nível de conformidade selecionados para a avaliação. Outro ponto importante a ser destacado é que, se a avaliação incluir 50 Problemas WCAG, mas todos estiverem associados a 1 Ponto de Verificação Deque, a % de Conformidade Geral com Acessibilidade parece indicar um alto nível de conformidade. No entanto, se os 50 Problemas são de natureza Séria ou Crítica, e afetam múltiplas páginas, o site ou aplicativo pode ser inutilizável para usuários com deficiências. Ao determinar o estado geral de Saúde da Acessibilidade e o Nível de Esforço para Conformidade, consulte todos os pontos de dados. Basta apenas um Problema de Impacto no Usuário de "Alto Risco" para aumentar sua vulnerabilidade a ações legais.

• Impacto do Usuário: Por padrão, associamos cada Problema identificado a uma categoria de Impacto no Usuário: Bloqueador, Crítico, Sério, Moderado e Menor. Problemas Bloqueadores, Críticos e Sérios são considerados "Alto Risco" com maior efeito sobre a usabilidade e maior vulnerabilidade a ações legais. Ao determinar o estado geral de Saúde da Acessibilidade de uma avaliação, esses dados devem ter um peso significativo.

  • Interrompido: Este problema resulta em obstáculos catastróficos para pessoas com deficiências. Esses problemas definitivamente impedirão que elas acessem recursos ou conteúdos fundamentais, sem possibilidade de soluções alternativas. Este tipo de problema coloca sua organização em alto risco. Priorize corrigir imediatamente e implementar como correções urgentes o mais rápido possível. Devem ser extremamente raros.

  • Crítico: Este problema resulta em conteúdo bloqueado para pessoas com deficiências e definitivamente os impedirá de acessar recursos ou conteúdos fundamentais. Este tipo de problema coloca sua organização em risco. Priorize corrigir o mais rápido possível, dentro da semana, se possível. A correção deve ser uma prioridade máxima. Devem ser infrequentes.

  • Majores: Este problema resulta em barreiras sérias para pessoas com deficiências e impedirá parcialmente que elas acessem recursos ou conteúdos fundamentais. Pessoas que dependem de tecnologias assistivas experimentarão frustração significativa como resultado. Problemas nesta categoria são problemas maiores, e a correção deve ser uma prioridade. Devem ser muito comuns.

  • Moderado: Este problema resulta em algumas barreiras para pessoas com deficiências, mas não impedirá que elas acessem recursos ou conteúdos fundamentais. Priorize corrigir nesta versão, se não houver problemas de prioridade mais alta. Compromete a conformidade se não for corrigido. Devem ser bastante comuns.

  • Menor: Considerado como um incômodo ou bug irritante. Priorize corrigir se a correção levar apenas alguns minutos e o desenvolvedor estiver trabalhando na mesma tela/função ao mesmo tempo, caso contrário, o problema não deve ser priorizado. Ainda assim compromete a conformidade se não for corrigido. Devem ser muito raros.

• Principais Problemas: Os dados de Principais Problemas são gerados para identificar rapidamente os principais problemas de acessibilidade (com os maiores impactos de correção) detectados com base em Pontos de Verificação Deque ou Critérios de Sucesso. Esses dados são tipicamente utilizados ao priorizar treinamentos e lacunas de conhecimento em acessibilidade.

A parte inferior da seção inclui as seguintes informações:

• Campo Iniciado: A data e hora em que o progresso do teste começou para esta execução de teste.
• Campo de Status: Quando a execução completa do teste for concluída, um carimbo de data/hora é exibido. Até que isso ocorra, o status 'Em Progresso' é mostrado.
• Campo Atribuído a com link Alterar atribuição: O nome do usuário atual a quem a execução de teste está atribuída é exibido, e abaixo dele há um link que faz aparecer um menu de seleção se você quiser atribuí-la a um usuário diferente para completar.
• Contagem de Componentes Totais e Status: O número de componentes que foram adicionados à execução do teste na primeira linha, com o número deles que estão em cada estado mostrado nas três linhas abaixo dela.
• Contagem de Total de Páginas e Status: O número de páginas que foram adicionadas à execução do teste na primeira linha, com o número delas que estão em cada estado mostrado nas três linhas abaixo dela.
• Abas de Painéis de Componentes e Páginas: A aba do painel atualmente exibido está à frente, enquanto a outra tem seu rótulo de aba sublinhado para indicar que funciona como um link para trazer seu painel do fundo à frente e exibir seu conteúdo abaixo.
• Barra de Progresso de Conclusão: Passar o mouse sobre a barra de progresso azul exibe uma porcentagem em uma janela pop-up para indicar a conclusão de todos os testes para a execução do teste inteiro, com base em testes automáticos e manuais para todos os componentes ou páginas que foram adicionados para serem testados.
• Capturas de Tela das Unidades de Teste: Essas capturas de tela oferecem uma visão do que foi testado sem a necessidade de abrir e revisar cada unidade de teste. Este cartão possui imagens em miniatura de cinco capturas de tela de unidades de teste e um número que designa a quantidade de capturas de tela adicionais. Selecionar uma das miniaturas ou o número à direita das imagens em miniatura exibe um carrossel com todas as imagens das capturas de tela das unidades de teste.
• Contagens e Links de Problemas Registrados e Itens Marcados: Um valor numérico é exibido para representar os totais de todos os pontos de verificação para todos os componentes e páginas na execução do teste, com links que exibem as telas de Problemas para... e Bandeiras para... para ver todos os detalhes.

As abas de Componentes e Páginas exibem "painéis", que por si mesmos exibem "seções" de informações resumidas sobre cada componente ou página que foi adicionada ao Teste. Além disso, incluem botões e links que permitem visualizar informações adicionais ou tomar ações adicionais. Nota: A captura de tela abaixo utiliza um painel de Componentes com uma seção de componentes para fins de demonstração. As mesmas informações também se aplicam ao painel de Páginas.

Nota: A captura de tela abaixo usa um painel de Componentes com uma seção de componentes para fins de demonstração, mas as mesmas informações também se aplicam ao painel de Páginas.

Cada seção do painel de Componentes ou Páginas é composta pelos seguintes 10 principais características que correspondem aos itens numerados na captura de tela acima:

1. Pesquisar Unidades de Teste: Refine a lista de componentes e páginas com base em seus nomes. A funcionalidade de pesquisa não diferencia maiúsculas de minúsculas.

2. Filtragem por Status: Refine as seções de componentes que foram adicionados a esta execução de teste pelo seu Status de Teste Manual. Para mais informações, veja Filtragem por Status.

3. Botão Adicionar Novo: Adicione um novo componente a esta execução de teste (e opcionalmente, também ao seu caso de teste associado). Para mais informações, veja Adicionando um Novo Componente ou Página.

4. Status Automatizado & Manual: O status de cada tipo de teste é exibido em uma coluna separada.

5. Links para Problemas & Itens Marcados: O número total de problemas registrados e itens sinalizados é exibido, e cada um está sublinhado para levá-lo às telas de Problemas para... e Bandeiras para... para ver todos os detalhes. Para mais informações sobre cada um, veja Visualizando uma Lista de Problemas Registrados e Visualizando uma Lista de Itens Sinalizados.

6. Capturas de Tela: O número total de capturas de tela que a página ou componente contém.

7. Progresso: Veja a barra de progresso e passe o mouse sobre ela para exibir um pop-up com o valor percentual do número total de Testes de Pontos de Verificação que foram marcados com um resultado para este componente.

8. Contagem de Aprovações/Reprovações/NA: O número total de pontos de verificação marcados com cada um é exibido para este componente. Para informações relacionadas, veja e Atribuindo Resultados de Pontos de Verificação.

9. Botão de Ação: Dependendo do status, o comando apropriado aparece no rótulo (Não Iniciado > Iniciar Teste, Em Progresso > Retomar, Concluído > Revisar). Para instruções completas para cada um, veja Iniciar Teste de um Componente ou Página, Retomar Teste de um Componente ou Página em Progresso e Revisar Testes Concluídos para um Componente ou Página.

10. Paginação: Selecione a partir dos valores disponíveis na seção de lista de Unidades de Teste para visualizar o número específico de unidades.

    Uma vez selecionados, esses valores de paginação são mantidos entre as páginas e ajudam a manter um estado de paginação consistente ao navegar por várias páginas de conteúdo, como a página inicial, problemas, testes e casos de teste, ajudando você a navegar facilmente pelo conteúdo sem perder sua preferência de paginação.

Botão de Informação: Veja detalhes adicionais do componente em uma janela pop-up, como URL, Elementos, Seletores e Instruções; e, opcionalmente, envie o URL para a guia do navegador de teste conectada.