Avaliação de Qualidade
Esta seção foi elaborada a partir do slide na aba atividades chamado Apresentação sobre o AgroMart.
Aspectos a serem Avaliados
- Usabilidade
- Eficiência
- Compatibilidade
Característica de Usabilidade
Impacto da usabilidade na experiência do usuário, afetando sua eficiência, eficácia e satisfação ao utilizar um sistema ou produto.
Capacidade de um produto ou sistema permitir que os usuários atinjam seus objetivos (eficácia), com o menor esforço possível (eficiência) e com um nível adequado de conforto e satisfação.
Característica de Eficiência
Definição: Capacidade do sistema de responder rapidamente e de forma estável, garantindo tempo de resposta adequado sob diferentes cargas.
Métricas
- Tempo Médio de Resposta: (Σ tempos) / n
- Taxa de Erros de Processamento: (número de falhas) / (número de transações)
- Estabilidade sob carga: uptime ou número de quedas
Fonte: ISO-25010 Performance Efficiency (01 abr. 2025)
Característica de Compatibilidade
Definição: Grau em que o produto funciona consistentemente em diferentes ambientes (navegadores, dispositivos, sistemas operacionais).
Métricas
- Compatibilidade de Navegadores: % de testes bem-sucedidos em Chrome, Firefox, Safari…
- Compatibilidade de Dispositivos: % de dispositivos mobile/tablet suportados
- Compartilhamento de Dados: número/percentual de integrações sem erros
Fonte: ISO-25010 Compatibility (01 abr. 2025)
Subcaracterísticas
- Reconhecimento de adequação
- Facilidade de aprendizado
- Operabilidade
- Proteção contra erros do usuário
- Estética da interface do usuário
- Acessibilidade
Fonte: ISO-25010 Usability (01 abr. 2025)
Métricas Associadas
Medem a capacidade do produto ou sistema de ser usado por um público-alvo para atingir objetivos com eficácia, eficiência e satisfação.
Aplicação em testes:
- Internos (previsão)
- Externos (validação com usuários)
Fonte: Métricas de Calidad en Educación (01 abr. 2024)
Fundamentos das Métricas de Usabilidade
- Objetivo: critérios de aceitação e comparação entre produtos
- Abordagem: contar itens de valor conhecido
- Resultados: valor médio + erro padrão da média
- Aplicação: protótipos e testes reais (mínimo 8 usuários)
Fonte: Núcleo Consultoria (01 abr. 2024)
Avaliação de Qualidade
Contexto: diagrama gerado no draw.io contendo o fluxograma de medição de usabilidade.
Critérios de Qualidade:
- Correta exibição responsiva
- Tempo de carregamento mínimo
- Navegabilidade e controles visíveis
Quadro 1 - Diagrama de Avaliação do Agromart
Métricas de Apropriação e Reconhecimento
Definição: medem se novos usuários reconhecem a adequação do produto.
- Completeness (completude):
Cálculo:(Nº de funções entendíveis) / (Nº total de funções) - Demonstration Capability:
Cálculo:(Nº de funções demonstráveis) / (Nº total de funções a demonstrar)
Fonte: Tramont, Alain. FOUUX (01 abr. 2025)
Métricas de Aprendizagem (Learnability)
Definição: avaliam tempo e eficácia de aprendizado.
- Completeness of User Documentation:
Cálculo:(Nº de funções descritas corretamente) / (Nº total de funções implementadas)
Fonte: Tramont, Alain. FOUUX (01 abr. 2025)
Métricas de Operabilidade
Definição: medem facilidade de operação e controle.
Princípios (ISO 9241-10): adequação, auto-descritividade, controlabilidade, expectativas, tolerância a erros, individualização.
- Operational Consistency:
Cálculo:(Nº de operações inconsistentes) / (Nº total de operações similares) - Message Clarity:
Cálculo:(Nº de mensagens claras) / (Nº total de mensagens) - Customizing Possibility:
Cálculo:(Nº de funções customizáveis) / (Nº de funções que requerem customização)
Métricas de Proteção Contra Erros do Usuário
Definição: avaliam como o sistema previne falhas por erro humano.
- Input Validity Checking:
Cálculo:(Nº de entradas validadas) / (Nº de entradas que requerem validação) - Avoidance of Incorrect Operation:
Cálculo:(Nº de funções que previnem mau funcionamento) / (Nº total de padrões de erro)
Métricas de Acessibilidade
Definição: avaliam o uso do produto por pessoas com diferentes capacidades.
- Physical Accessibility:
Cálculo:(Nº de tipos de elementos personalizáveis) / (Nº total de tipos de elementos)
Outros Aspectos Relevantes
- Escolher métricas conforme prioridades do produto
- Testar com usuários representativos
- Condições controladas
- Objetivo: critérios de aceitação e comparação
Aplicação Prática: Antropoindicadores
Contexto: app para coleta de indicadores de antropização na Amazônia.
Objetivo: validar facilidade de uso, eficiência e satisfação.
Metodologia:
- Teste com usuários (PSSUQ, 16 questões, 11 participantes)
- Inspeção por especialistas (13 heurísticas, 5 participantes)
Resultados:
- Média PSSUQ: 1,27 (1–5, 1 é melhor)
- Média Heurísticas: 1,19
- Nota Final: A+
Tabela de Contribuição da Equipe
| Matrícula | Nome | Atividade Realizada | % Contribuição |
|---|---|---|---|
| 222021924 | Víctor Hugo Lima Schmidt | - Pesquisa e elaboração dos slides de métricas de usabilidade - Elaboração inicial das características e subcaracterísticas |
16,67 |
| 221007902 | Bruno Bragança dos Reis | - Pesquisa e elaboração da aplicação prática - Ajuste de estética dos slides |
16,67 |
| 222006178 | Thales Henrique E. dos Santos | - Elaboração do esqueleto e organização inicial - Reorganização de slides, imagens e referências |
16,67 |
| 202015868 | Alexandre Lema Xavier Júnior | - Revisão de conteúdo e slides - Apresentação em sala |
16,67 |
| 211039671 | Pedro Lopes da Cunha | - Revisão de conteúdo e slides - Apresentação em sala |
16,67 |
| 180116746 | Arthur Heleno do Couto da Silva | - Revisão de conteúdo e slides - Apresentação em sala |
16,67 |
Experiência Individual
| Matrícula | Nome do Aluno | Experiência Individual |
|---|---|---|
| 222021924 | Víctor Hugo Lima Schmidt | - Atividade muito desafiadora devido à quantidade de atividades pelo curto período de tempo |
| 221007902 | Bruno Bragança dos Reis | - Acredito que foi uma ótima experiência para entender o que vamos trabalhar de um software tão grande e como priorizar nossa análise |
| 222006178 | Thales Henrique E. dos Santos | - Creio que foi uma atividade boa para compartilharmos a análise de uma aplicação real, mas também foi bastante desafiadora pelo tempo de entrega tão apertado |
| 202015868 | Alexandre Lema Xavier Júnior | - |
| 211039671 | Pedro Lopes da Cunha | - Boa experiência para conhecer inicialmente o projeto, criar um escopo. Muito pouco tempo! |
| 180116746 | Arthur Heleno do Couto da Silva | - Dificuldade em interpretar qual ênfase empregar em cada aspecto devido a não saber de imediato as características e requisitos do software |
Referências Bibliográficas
TRAMONT, Alain. FOUUX: Um framework para medir usabilidade. Disponível aqui. Acesso em 1 de abril de 2025.
MÉTRICAS de qualidade em educação. Disponível aqui. Acesso em 1 de abril de 2025.
ISO-25010 Usability. Disponível aqui. Acesso em 1 de abril de 2025.
NÚCLEO CONSULTORIA. Métricas: o que são, qual sua importância e como aplicá-las na minha empresa? Disponível aqui. Acesso em 1 de abril de 2025.
GUIMARÃES, Pedro Henrique do Vale; FERNANDES, José Guilherme dos Santos; SERUFFO, Marcos César da Rocha. “Avaliação de usabilidade em aplicativo para coleta de indicadores de antropização.” In: XV Computer on the Beach, 10–13 abr. 2024, Balneário Camboriú, SC. Anais […], p. 193–198. Acesso em 1 de abril de 2025.
Histórico de Versão
| Versão | Data | Descrição | Autor | Revisor |
|---|---|---|---|---|
1.0 |
15/04/2025 | Criação do Slide para apresentação | Víctor Schmidt Bruno Reis Thales Euflauzino Alexandre Júnior Pedro Lopes Arthur da Silva |
Víctor Schmidt |
1.1 |
12/06/2025 | Repassando o slide para a documentação do projeto | Víctor Schmidt | Thales Euflauzino |