Skip to content

Plano de Avaliação

Este documento tem como objetivo estruturar como os dados coletados durante o projeto serão analisados na Fase 4. O artefato define a metodologia de análise quantitativa e qualitativa, com base nos modelos GQM e nas heurísticas adaptadas de Nielsen, propondo critérios de priorização, fórmulas de severidade e modelos de visualização que orientarão as decisões de melhoria na interface.

1. Definição de Métodos Estatísticos para Métricas Quantitativas

As métricas definidas no modelo GQM serão analisadas com base em métodos estatísticos descritivos para permitir interpretação objetiva dos dados. As principais métricas incluem:

  • Tempo médio para realização de tarefas (em segundos)
  • Taxa de sucesso sem ajuda externa (% de usuários)
  • Número de erros cometidos por tarefa
  • Avaliação subjetiva em escala (1 a 5)

Métodos aplicados:

  • Média, Mediana, Moda
  • Desvio padrão e variância
  • Distribuição de frequências (histogramas)

2. Processo de Consolidação de Problemas Heurísticos

Etapas do processo:

  1. Registro de problemas identificados por heurística.
  2. Classificação de gravidade: leve, moderado, crítico.
  3. Agrupamento por similaridade para evitar redundâncias.
  4. Validação cruzada entre avaliadores.

Template de tabela:

ID Heurística Descrição do Problema Gravidade Sugestão de Melhoria

3. Fórmula para Cálculo da Severidade Média

A fórmula de severidade média foi baseada nos critérios de Nielsen (1994), que combina frequência, impacto e persistência em uma única métrica por meio da média aritmética.

Parâmetros:

  • Gravidade: impacto do problema (1=baixo, 2=médio, 3=alto)
  • Frequência: quantos usuários seriam afetados (1=baixo, 2=médio, 3=alto)
  • Persistência: facilidade de reproduzir o problema (1=baixo, 2=médio, 3=alto)

Fórmula:

Severidade Média = (Gravidade + Frequência + Persistência) / 3

4. Critérios de Priorização (Severidade x Frequência)

Severidade Média Frequência Alta Frequência Baixa Prioridade
Alta (>2.3) Alta Média Alta
Média (1.6 a 2.3) Média Baixa Média
Baixa (≤1.5) Baixa Baixa Baixa

5. Templates de Visualização de Resultados

Gráficos sugeridos:

  • Barras: número de problemas por heurística
  • Pizza: distribuição por gravidade
  • Tabela: ranking de problemas por severidade

Tabelas sugeridas:

  • Consolidado de métricas quantitativas
  • Lista de problemas por heurística e por tela

6. Estrutura do Relatório Final

  1. Introdução:

    • Objetivo da avaliação
    • Contexto do AgroMart Web

  2. Metodologia

    • GQM e protocolo heurístico
    • Métodos de coleta e análise

  3. Métricas Quantitativas

    • Resultados com análise estatística

  4. Problemas Heurísticos

    • Tabela + prints + sugestões

  5. Priorização

    • Severidade média + critérios

  6. Recomendações

    • Melhorias organizadas por prioridade

  7. Apêndice/Anexos

    • Checklists, capturas de tela, tabelas

Exemplos de Uso

Exemplo 1 – Problema heurístico:
- Botão "Voltar" ausente no cadastro
- Heurística: Controle e Liberdade
- Gravidade: 3 | Frequência: 2 | Persistência: 3
- Severidade = (3+2+3)/3 = 2.7 → Prioridade: Alta

Exemplo 2 – Métrica:
- Tempo médio para envio de notificação: 87s
- Desvio padrão: 15s
- Resultado dentro da meta (<120s)

Referências Bibliográficas

NIELSEN, Jakob. 10 Usability Heuristics for User Interface Design. Nielsen Norman Group, 2020. Disponível em: https://www.nngroup.com/articles/ten-usability-heuristics/. Acesso em: 07 jul. 2025.

NIELSEN, Jakob. How to Rate the Severity of Usability Problems. Nielsen Norman Group, 1995. Disponível em: https://www.nngroup.com/articles/how-to-rate-the-severity-of-usability-problems/. Acesso em: 07 jul. 2025.

Histórico de Versão

Versão Data Descrição Autor Revisor
1.0 07/07/2025 Criação do documento e adicionando toda a sua estrutura Pedro Lopes Víctor Schmidt