Pular para o mapa

Qualidade de Software · Textos

Mapa mental CTFL

Syllabus CTFL v4.0 · ISTQB®Ingrid Lorrane128 quadros

Um resumo visual do syllabus, pensado para pessoas com Autismo e TDAH que estão se preparando para o exame.

No celular, gire a tela na horizontal ou use o zoom para ler melhor cada quadro.

Mapa mental
Certified Tester Foundation Level (CTFL)
Este mapa mental foi criado para auxiliar pessoas com Autismo e TDAH que estão se preparando para o exame de certificação Certified Tester Foundation Level (CTFL).
Ele resume os tópicos principais do syllabus do exame de forma visual e organizada, o que pode ser útil para pessoas que aprendem melhor visualmente ou que têm dificuldade em processar grandes quantidades de texto.
Elaborado por Ingrid Lorrane · Baseado no Syllabus Certified Tester Foundation Level (CTFL) v4.0 do ISTQB®
NEURO
DIVERSO
1 Fundamentos de Teste
PALAVRAS-CHAVES
Cobertura, Depuração, Defeito, Erro, Falha, Qualidade, Garantia da qualidade, Causa raiz, Análise de teste, Base de teste, Caso de teste, Conclusão do teste, Condição de teste, Controle de teste, Dados de teste, Modelagem de teste, Execução de teste, Implementação de teste, Monitoramento de teste, Objeto de teste, Objetivo de teste, Planejamento de teste, Procedimento de teste, Resultado de teste, Teste, Testware, Validação, Verificação
1.1 O que é teste?
Conjunto de atividades para descobrir defeitos e avaliar a qualidade dos artefatos de software. Artefato testado = objeto de teste
Teste avalia a qualidade do software e ajuda a reduzir o risco de falha em produção
Envolve verificação (atende os requisitos especificados) e validação (atende as necessidades do usuário)
Teste dinâmico envolve execução do software. Teste estático não envolve (revisões e análise estática)
Não é só técnico: precisa planejar, gerenciar, estimar, monitorar e controlar
Deve estar alinhado ao SDLC. É uma atividade intelectual: análise, pensamento crítico e sistêmico
1.1.1 Objetivos do teste
Os objetivos variam conforme o contexto: produto testado, nível de teste, riscos, SDLC e negócio (estrutura corporativa, concorrência, tempo de mercado).
1 - Avaliar produtos de trabalho, como requisitos, histórias de usuário, projetos e código;
2 - Detectar falhas e defeitos;
3 - Garantir a cobertura necessária de um objeto de teste;
4 - Reduzir o nível de risco de qualidade de software inadequada;
5 - Verificar se os requisitos especificados foram atendidos;
6 - Verificar se o objeto de teste está conforme os requisitos contratuais, legais e normativos;
7 - Fornecer informações aos stakeholders para tomarem decisões;
8 - Criar confiança na qualidade do objeto de teste;
9 - Validar se o objeto de teste está completo e funciona conforme o esperado pelos stakeholders.
1.1.2 Teste e depuração
Teste e depuração são atividades distintas.
Teste
  • Pode desencadear falhas causadas por defeitos no software (teste dinâmico)
  • Pode encontrar defeitos diretamente no objeto de teste (teste estático)
Depuração
  • Encontra as causas das falhas (defeitos), analisa e elimina
  • No teste dinâmico: reproduzir a falha, diagnosticar (encontrar a causa) e corrigir a causa
  • No teste estático: só remove o defeito, sem reprodução ou diagnóstico
Teste de confirmação: verifica se a correção resolveu o problema, de preferência feito por quem fez o teste inicial. Teste de regressão: verifica se a correção causou falhas em outras partes.
1.2 Por que testes são necessários?
Teste é uma forma de controle de qualidade
Ajuda a atingir os objetivos dentro do escopo, tempo, qualidade e orçamento
O sucesso não depende só da equipe de teste
Qualquer stakeholder pode usar suas habilidades de teste para levar o projeto ao sucesso
Teste de componentes, sistemas e documentação ajuda a identificar defeitos
1.2.1 Contribuições para o sucesso
Economia
Meio econômico de detectar defeitos, que depois são removidos na depuração.
Avaliar a qualidade
Avalia a qualidade em vários estágios do SDLC e apoia decisões, como a de liberação.
Representar o usuário
Testadores representam indiretamente os usuários no projeto. Envolver usuários reais costuma ser caro e difícil.
Atender requisitos
Teste pode ser necessário para cumprir requisitos contratuais, legais ou normas regulatórias.
1.2.2 Teste e garantia da qualidade (QA)
Teste e QA não são a mesma coisa.
Teste (QC)
  • Teste é uma forma de controle de qualidade (QC)
  • QC é corretivo e orientado ao produto
  • Outras formas de QC: métodos formais, simulação e prototipagem
  • No QC os resultados dos testes são usados para corrigir defeitos
QA
  • Preventivo e orientado ao processo
  • Foca na implementação e melhoria dos processos
  • Se um bom processo é seguido, gera um bom produto
  • Responsabilidade de todos no projeto
  • Resultados dos testes dão feedback sobre os processos
1.2.3 Erro, defeito, falha e causa raiz
Erro
Cometido pelo ser humano: pressão de tempo, complexidade, processos, infraestrutura, interações, cansaço ou falta de treinamento
Defeito
Gerado pelo erro. Pode estar na documentação, script de teste, código-fonte ou arquivo de compilação
Defeito
Defeitos no início do SDLC não detectados geram artefatos defeituosos depois
Falha
Defeito executado faz o sistema não fazer o que devia (ou fazer o que não devia). Alguns defeitos nunca geram falha
Falha
Também pode ser causada por condições ambientais, como radiação ou campo eletromagnético no firmware
Causa raiz
Motivo fundamental do problema. Identificada por análise; tratar evita ou reduz falhas parecidas
1.3 Princípios de teste
1 - Presença, não ausência
Teste mostra que existem defeitos, mas não prova que não existem.
2 - Exaustivo é impossível
Testar tudo é inviável, exceto em casos triviais. Usar técnicas, priorização e teste baseado em risco.
3 - Antecipar economiza
Remover defeitos cedo economiza tempo e dinheiro: menos falhas depois no SDLC.
4 - Defeitos se agrupam
Poucos componentes concentram a maioria dos defeitos ou falhas (princípio de Pareto).
5 - Testes se degradam
Testes repetidos ficam ineficazes. Precisam ser modificados, exceto na regressão automatizada.
6 - Dependem do contexto
Não existe uma forma única de testar. Contextos diferentes, testes diferentes.
7 - Falácia da ausência
Corrigir todos os defeitos não garante que o sistema atenda o usuário. Precisa de validação também.
1.4 Atividades, testware e papéis
Teste depende do contexto, mas existem conjuntos comuns de atividades
Esses conjuntos de atividades formam o processo de teste
O processo pode ser adaptado a cada situação
Quais atividades entram e quando ocorrem é decidido no planejamento
Mais detalhes na norma ISO/IEC/IEEE 29119-2
1.4.1 Atividades e tarefas
1 - Planejamento
Definir os objetivos do teste e a melhor abordagem dentro das restrições do contexto.
2 - Monitoramento e controle
Verificar continuamente as atividades e comparar o progresso real com o plano. Controle toma as ações.
3 - Análise
Analisa a base de teste, identifica o que é testável e define e prioriza condições de teste. O que testar?
4 - Modelagem
Transforma condições em casos de teste, itens de cobertura, dados e ambiente. Como testar?
5 - Implementação
Cria o material de teste, procedimentos, scripts, conjuntos, cronograma de execução e prepara o ambiente.
6 - Execução
Executa manual ou automatizado, compara real x esperado, registra resultados e relata anomalias.
7 - Conclusão
Nos marcos do projeto: arquiva o testware, encerra o ambiente, lições aprendidas e relatório de conclusão.
1.4.2 Processo de teste no contexto
Testes não são isolados, são financiados pelos stakeholders. A forma de testar depende de:
Stakeholders
Membros da equipe
Domínio do negócio
Fatores técnicos
Restrições do projeto
Fatores organizacionais
Ciclo SDLC
Ferramentas
1.4.3 Testware
Planejamento
Plano de teste, cronograma, registro de riscos e critérios de entrada e saída.
Monitoramento e controle
Relatórios de progresso, diretrizes de controle e informações sobre riscos.
Análise
Condições de teste (priorizadas) e relatórios de defeitos na base de teste.
Modelagem
Casos de teste (priorizados), cartas de teste, itens de cobertura, requisitos de dados e de ambiente.
Implementação
Procedimentos, scripts automatizados, conjuntos, dados, cronograma e ambiente (stubs, drivers, simuladores).
Execução
Registros de teste e relatórios de defeitos.
Conclusão
Relatório de conclusão, itens de melhoria, lições aprendidas e solicitações de alteração.
1.4.4 Rastreabilidade
Ligação entre base de teste, testware (condições, riscos, casos), resultados e defeitos
Necessária para monitoramento e controle eficazes e para avaliar a cobertura
Casos de teste x requisitos: verifica se os requisitos estão cobertos
Resultados x riscos: avalia o nível de risco residual
Ajuda a ver o impacto de mudanças, facilita auditorias e governança de TI
Deixa os relatórios mais claros e mostra qualidade, capacidade do processo e progresso
1.4.5 Papéis no teste
Gerenciamento de teste
  • Responsabilidade geral pelo processo, equipe e liderança do teste
  • Foco em planejamento, monitoramento, controle e conclusão
  • No ágil, parte das tarefas pode ser da equipe ágil
  • Pode ser feito por Líder de Equipe, Gerente de Teste, Gerente de Desenvolvimento
Testador
  • Responsabilidade geral pelo aspecto técnico (engenharia) do teste
  • Foco em análise, modelagem, implementação e execução
Pessoas diferentes podem assumir os papéis em momentos diferentes. Uma pessoa pode ser testador e gerente de teste ao mesmo tempo.
1.5 Habilidades e boas práticas
Habilidade é fazer algo bem-feito, vem do conhecimento, prática e aptidão
Bons testadores precisam de habilidades essenciais
Devem ser participantes eficazes da equipe
Devem conseguir testar em diferentes níveis de independência
1.5.1 Habilidades genéricas
1 - Conhecimento sobre testes
Aumenta a eficácia, ex.: usando técnicas de teste.
2 - Meticulosidade
Cuidado, curiosidade, atenção aos detalhes e ser metódico, para achar defeitos difíceis.
3 - Comunicação
Bom ouvinte, trabalho em equipe, transmitir informação, relatar e discutir defeitos.
4 - Pensamento
Analítico, crítico e criativo, para aumentar a eficácia.
5 - Conhecimento técnico
Aumenta a eficiência, ex.: usando ferramentas adequadas.
6 - Conhecimento do domínio
Entender e se comunicar com usuários e representantes do negócio.
1.5.1 Comunicação
Testadores costumam ser os portadores de más notícias
O resultado do teste pode ser visto como crítica ao produto e ao autor
O viés de confirmação dificulta aceitar informações que contrariam crenças
Algumas pessoas veem o teste como destrutivo, mas ele contribui para o sucesso
Defeitos e falhas devem ser comunicados de forma construtiva
1.5.2 Abordagem de equipe completa
Prática que vem do Extreme Programming (XP)
Qualquer membro com conhecimento pode executar qualquer tarefa e todos são responsáveis pela qualidade
Mesmo espaço de trabalho (físico ou virtual) facilita comunicação
Melhora a dinâmica, a comunicação e a colaboração e cria sinergia
Testador ajuda o negócio a criar testes de aceite e combina estratégia e automação com os desenvolvedores
Nem sempre é adequada: em sistemas críticos pode ser preciso alta independência
1.5.3 Independência dos testes
Sem independência
Testado pelo próprio autor.
Alguma independência
Testado por colegas do autor da mesma equipe.
Alta independência
Testadores de fora da equipe do autor, mas da mesma organização.
Muito alta
Testadores de fora da organização.
1.5.3 Independência dos testes
Benefícios
  • Testadores independentes reconhecem tipos diferentes de falhas e defeitos
  • Podem verificar, contestar ou refutar suposições dos stakeholders
  • Diferenças de vieses cognitivos entre autor e testador ajudam a achar defeitos
Desvantagens
  • Podem ficar isolados da equipe de desenvolvimento
  • Falta de colaboração, problemas de comunicação ou relação adversa
  • Desenvolvedores podem perder o senso de responsabilidade pela qualidade
  • Testadores vistos como gargalo ou culpados por atrasos
Independência não substitui a familiaridade. O melhor é testar com vários níveis de independência.
2 Testes ao longo do Ciclo de Vida de Desenvolvimento de Software
PALAVRAS-CHAVES
Teste de aceite, Teste caixa-preta, Teste de integração de componentes, Teste de componentes, Teste de confirmação, Teste funcional, Teste de integração, Teste de manutenção, Teste não funcional, Teste de regressão, Shift-left, Teste de integração de sistemas, Teste de sistemas, Nível de teste, Objeto de teste, Tipo de teste, Teste caixa-branca
2.1 Testes no contexto do SDLC
Modelo SDLC é uma representação abstrata e de alto nível do processo de desenvolvimento
Define como as fases e atividades se relacionam de forma lógica e cronológica
Modelos sequenciais: Cascata e Modelo em V
Modelos iterativos: Espiral e Prototipagem
Modelos incrementais: Processo Unificado
Métodos e práticas ágeis: ATDD, BDD, DDD, XP, FDD, Kanban, Lean IT, Scrum e TDD
2.1.1 Impacto do SDLC nos testes
Teste precisa ser adaptado ao SDLC. A escolha do SDLC impacta:
Escopo e cronograma das atividades de teste (níveis e tipos de teste)
Nível de detalhe da documentação de teste
Escolha das técnicas de teste e da abordagem de teste
Extensão da automação de testes
Papel e responsabilidades do testador
2.1.1 Impacto do SDLC nos testes
Sequencial
No início o testador participa das revisões de requisitos, análise e modelagem de teste. O código só fica pronto nas fases finais, então o teste dinâmico não acontece no início.
Iterativo e incremental
Cada iteração entrega um protótipo ou incremento. Teste estático e dinâmico podem ser feitos em todos os níveis em cada iteração. Precisa de feedback rápido e muita regressão.
Ágil
Mudanças podem acontecer durante todo o projeto. Documentação leve e muita automação para regressão. Teste manual geralmente usa técnicas baseadas na experiência.
2.1.2 SDLC e boas práticas de teste
1 - Atividade correspondente
Para cada atividade de desenvolvimento existe uma atividade de teste, assim tudo passa pelo controle de qualidade.
2 - Objetivos por nível
Cada nível de teste tem objetivos específicos, evitando redundância e mantendo os testes abrangentes.
3 - Começar cedo
Análise e modelagem de teste começam na fase de desenvolvimento correspondente (princípio do teste antecipado).
4 - Revisar rascunhos
Testadores revisam os produtos de trabalho assim que os rascunhos ficam prontos, apoiando o shift-left.
2.1.3 Teste como motivador do desenvolvimento
TDD, ATDD e BDD são abordagens em que os testes direcionam o desenvolvimento
Implementam o princípio do teste antecipado
Seguem a abordagem shift-left, pois os testes são definidos antes do código
Dão suporte ao modelo de desenvolvimento iterativo
Os testes podem continuar como testes automatizados para garantir a qualidade em futuras refatorações
2.1.3 TDD, ATDD e BDD
TDD
  • Desenvolvimento orientado por testes
  • Codificação direcionada por casos de teste
  • Primeiro escreve o teste, depois o código e depois refatora os dois
ATDD
  • Desenvolvimento orientado por teste de aceite
  • Testes derivados dos critérios de aceite
  • Testes escritos antes da parte do aplicativo ser desenvolvida
BDD
  • Desenvolvimento orientado pelo comportamento
  • Casos de teste em linguagem natural, fácil para os stakeholders
  • Formato Dado/Quando/Então, traduzido em testes executáveis
2.1.4 DevOps e Testes
Abordagem organizacional que une desenvolvimento (incluindo testes) e operações com objetivos comuns
Exige mudança cultural, tratando as funções com o mesmo valor
Promove autonomia da equipe, feedback rápido e ferramentas integradas
Usa práticas como Integração Contínua (CI) e Entrega Contínua (CD)
Permite criar, testar e liberar código de qualidade mais rápido pelo pipeline de entrega
2.1.4 DevOps e Testes
Benefícios
  • Feedback rápido sobre a qualidade do código e se a alteração afetou o que já existia
  • CI promove shift-left (testes de componente e análise estática junto com o código)
  • CI/CD facilita ambientes de teste estáveis
  • Mais visão das características não funcionais (performance, confiabilidade)
  • Menos teste manual repetitivo
  • Menor risco na regressão por causa da regressão automatizada
Riscos e desafios
  • O pipeline de entrega precisa ser definido e estabelecido
  • Ferramentas de CI/CD precisam ser introduzidas e mantidas
  • Automação precisa de recursos adicionais e pode ser difícil de estabelecer e manter
Mesmo com muitos testes automatizados no DevOps, o teste manual (principalmente na perspectiva do usuário) ainda é necessário.
2.1.5 Abordagem Shift-Left
É o princípio do teste antecipado: testar mais cedo no SDLC
Não esperar o código ser implementado ou os componentes serem integrados
Não significa deixar de lado os testes do final do SDLC
Pode gerar mais treinamento, esforço ou custo no início, mas economiza no final
Os stakeholders precisam ser convencidos a aceitar esse conceito
2.1.5 Boas práticas Shift-Left
1 - Revisar especificação
Revisar a especificação na perspectiva de testes encontra ambiguidade, incompletude e inconsistência.
2 - Teste antes do código
Escrever casos de teste antes do código e executar o código num conjunto de testes durante a implementação.
3 - Usar CI e CD
Feedback rápido e testes de componente automatizados quando o código vai para o repositório.
4 - Análise estática
Fazer análise estática do código antes do teste dinâmico ou como parte de um processo automatizado.
5 - Não funcional cedo
Fazer testes não funcionais já no nível de teste de componente, sempre que possível.
2.1.6 Retrospectivas e melhoria de processos
Também chamadas de reuniões pós-projeto. Acontecem no fim do projeto, da iteração, num marco de lançamento ou quando necessário
Participam testadores, desenvolvedores, arquitetos, PO e analistas de negócio
Perguntas
O que deu certo e deve ser mantido?
Perguntas
O que não deu certo e pode melhorar?
Perguntas
Como incorporar as melhorias e manter os sucessos?
Os resultados são registrados e fazem parte do relatório de conclusão do teste
2.1.6 Benefícios das retrospectivas
Retrospectivas são essenciais para a melhoria contínua. Todas as melhorias recomendadas precisam ser acompanhadas.
1 - Aumento da eficácia e eficiência do teste (implementando sugestões de melhoria do processo);
2 - Aumento da qualidade do material de teste (revisão conjunta dos processos de teste);
3 - Vínculo e aprendizado da equipe (oportunidade de levantar questões e propor melhorias);
4 - Melhoria da qualidade da base de teste (resolver problemas na extensão e qualidade dos requisitos);
5 - Melhor cooperação entre desenvolvimento e testes (colaboração revisada e otimizada regularmente).
2.2 Níveis de teste e tipos de teste
Níveis de teste
  • Grupos de atividades de teste organizadas e gerenciadas em conjunto
  • Cada nível é uma instância do processo de teste, num estágio do desenvolvimento
  • Vai do componente individual até o sistema completo ou sistema de sistemas
  • No modelo sequencial, o critério de saída de um nível faz parte do critério de entrada do próximo
  • Os níveis podem se sobrepor no tempo
Tipos de teste
  • Grupos de atividades de teste relacionadas a características de qualidade específicas
  • A maioria pode ser realizada em todos os níveis de teste
2.2.1 Níveis de teste
1 - Componente (unidade)
Testa componentes isolados. Precisa de frameworks de teste de unidade. Normalmente feito pelo desenvolvedor no seu ambiente.
2 - Integração de componentes
Testa interfaces e interações entre componentes. Depende da estratégia de integração: bottom-up, top-down ou big-bang.
3 - Sistema
Comportamento geral e recursos do sistema todo: funcional ponta a ponta e não funcional. Pode ser feito por equipe independente.
4 - Integração de sistema
Testa as interfaces com outros sistemas e serviços externos. Precisa de ambiente parecido com o operacional.
5 - Aceite
Valida se o sistema atende às necessidades de negócio do usuário e está pronto para implantação. De preferência feito pelos usuários.
2.2.1 Teste de Aceite
Principais formas de teste de aceite:
Teste de Aceite do Usuário (UAT)
Teste de Aceite Operacional
Teste de Aceite Contratual e Normativo
Teste Alfa
Teste Beta
2.2.1 Níveis de teste
Os níveis são diferenciados por (lista incompleta):
Objeto de teste
Objetivos do teste
Base de teste
Defeitos e falhas
Abordagem e responsabilidades
2.2.2 Tipos de teste
1 - Teste funcional
Avalia as funções que o sistema deve executar: "o que" faz. Verifica integridade, correção e adequação funcional.
2 - Teste não funcional
Avalia "quão bem o sistema se comporta". Verifica as características não funcionais de qualidade.
3 - Teste caixa-preta
Baseado em especificações. Deriva testes da documentação externa ao objeto de teste.
4 - Teste caixa-branca
Baseado na estrutura (código, arquitetura, fluxos). Objetivo é cobrir a estrutura até um nível aceitável.
2.2.2 Teste Não Funcional
Características não funcionais (ISO/IEC 25010):
Eficiência de performance
Compatibilidade
Usabilidade
Confiabilidade
Segurança
Capacidade de manutenção
Portabilidade
2.2.2 Tipos de teste
Os 4 tipos de teste podem ser aplicados em todos os níveis de teste, mas com foco diferente
Testes não funcionais podem começar cedo (revisões e teste de componente)
Muitos testes não funcionais usam os mesmos testes funcionais, verificando uma restrição (ex.: tempo de resposta)
Encontrar defeitos não funcionais tarde é uma ameaça séria ao projeto
Alguns testes não funcionais precisam de ambiente específico, como laboratório de usabilidade
2.2.3 Confirmação e Regressão
Alterações para melhorar ou corrigir o sistema precisam dos dois testes.
Confirmação
  • Confirma que o defeito original foi corrigido
  • Executa os casos de teste que falharam por causa do defeito
  • Pode adicionar novos testes para cobrir as alterações da correção
  • Com pouco tempo ou dinheiro: executar os passos que reproduzem a falha e ver se ela não ocorre mais
Regressão
  • Confirma que a alteração não causou consequências adversas
  • Pode afetar o mesmo componente, outros componentes ou outros sistemas conectados
  • Fazer análise de impacto antes para otimizar a extensão
  • Executados muitas vezes e só aumentam: fortes candidatos à automação, desde o início do projeto
2.3 Teste de Manutenção
Manutenção pode ser corretiva, adaptativa a mudanças no ambiente ou para melhorar performance e manutenibilidade
Pode ter liberações planejadas ou não planejadas (hot fixes)
Análise de impacto ajuda a decidir se a alteração deve ser feita
Avalia se a alteração foi implementada com sucesso
Verifica regressões nas partes que não mudaram (geralmente a maior parte do sistema)
2.3 Escopo do teste de manutenção
O escopo do teste de manutenção depende de:
Grau de risco da mudança
Tamanho do sistema existente
Tamanho da mudança
2.3 Acionadores da manutenção
Modificações
Melhorias planejadas (baseadas em versões), alterações corretivas ou hot fixes.
Atualizações ou migrações
Mudança do ambiente operacional ou de plataforma. Pode precisar de teste do novo ambiente e de conversão de dados.
Aposentadoria
Quando o aplicativo chega ao fim da vida útil. Pode precisar de teste de arquivamento de dados e de restauração e recuperação.
3 Teste Estático
PALAVRAS-CHAVES
Anomalia, Teste dinâmico, Revisão formal, Revisão informal, Inspeção, Revisão, Análise estática, Teste estático, Revisão técnica, Walkthrough
3.1 Noções básicas de teste estático
O software não precisa ser executado
Avaliação por exame manual (revisões) ou com ferramenta (análise estática)
Objetivos: melhorar a qualidade, detectar defeitos e avaliar legibilidade, integridade, correção, testabilidade e consistência
Pode ser usado para verificação e validação
Testadores, negócio e desenvolvedores revisam juntos as histórias de usuário (ex.: DoR, critérios de aceite testáveis)
Análise estática exige menos esforço, é usada em CI e avalia manutenção e segurança
3.1.1 Produtos examináveis
Quase todo produto de trabalho pode ser examinado:
Especificação de requisitos
Código-fonte
Planos de teste e casos de teste
Itens do backlog do produto
Cartas de teste
Documentação do projeto
Contratos e modelos
3.1.1 Produtos examináveis
Qualquer produto de trabalho que possa ser lido e entendido pode ser revisado
Para análise estática o produto precisa de uma estrutura (modelos, código ou texto com sintaxe formal)
Não apropriado: o que é difícil de interpretar e não pode ser analisado por ferramenta (ex.: código executável de terceiros por motivo legal)
3.1.2 Valor do teste estático
Detecta defeitos nas primeiras fases do SDLC (teste antecipado)
Encontra defeitos que o teste dinâmico não encontra (código inacessível, padrões não implementados, produtos não executáveis)
Avalia a qualidade e cria confiança nos produtos de trabalho
Cria entendimento compartilhado e melhora a comunicação entre stakeholders
Revisão pode ser cara, mas o custo geral do projeto fica menor
Análise estática encontra defeitos de código com mais eficiência
3.1.3 Estático x Dinâmico
As práticas se complementam e têm objetivos parecidos, mas existem diferenças:
Teste estático
  • Encontra o defeito diretamente
  • Encontra defeitos em caminhos do código raramente executados ou difíceis de alcançar
  • Pode ser aplicado em produtos não executáveis
  • Mede características que não dependem da execução (ex.: manutenibilidade)
Teste dinâmico
  • Causa falhas e o defeito é encontrado depois, com análise
  • Só pode ser aplicado em produtos executáveis
  • Mede características que dependem da execução (ex.: eficiência de performance)
3.1.3 Defeitos mais fáceis no teste estático
1 - Requisitos
Inconsistência, ambiguidade, contradição, omissão, imprecisão e duplicação.
2 - Projeto
Estrutura de banco de dados ineficiente, modularização deficiente.
3 - Codificação
Variável sem valor definido ou não declarada, código inacessível ou duplicado, complexidade excessiva.
4 - Desvio de padrões
Falta de adesão às convenções de nomenclatura.
5 - Interface
Número, tipo ou ordem de parâmetros incompatíveis.
6 - Segurança
Tipos específicos de vulnerabilidade, como estouro de buffer.
7 - Cobertura
Lacunas ou imprecisões na cobertura da base de teste (ex.: falta teste para um critério de aceite).
3.2.1 Feedback antecipado e frequente
Permite comunicar cedo possíveis problemas de qualidade
Pouco envolvimento dos stakeholders: o produto pode não atender a visão deles
Não entregar o que o stakeholder quer gera retrabalho, atraso, jogo de culpa e até fracasso do projeto
Evita mal-entendidos sobre os requisitos
Mudanças nos requisitos são entendidas e implementadas mais cedo
Equipe foca nos recursos de maior valor e com maior impacto nos riscos
3.2.2 Processo de revisão
1 - Planejamento
Define o escopo: objetivo, produto a revisar, características de qualidade, critérios de saída, esforço e prazos.
2 - Início da revisão
Garante que todos estão preparados, têm acesso ao produto e entendem seus papéis.
3 - Revisão individual
Cada revisor avalia a qualidade e registra anomalias, recomendações e perguntas (ex.: checklist, cenário).
4 - Comunicação e análise
Anomalias não são necessariamente defeitos. São discutidas, normalmente em reunião, decidindo status, dono e ações.
5 - Correção e relatório
Cria relatório de defeito para acompanhar. Atingiu os critérios de saída, o produto é aceito.
3.2.2 Processo de revisão
A norma ISO/IEC 20246 define um processo de revisão genérico
Framework estruturado, mas flexível, adaptado a cada situação
Quanto mais formal a revisão, mais tarefas são necessárias
Produtos grandes podem precisar de várias revisões para serem cobertos
3.2.3 Funções nas revisões
Gerente
Decide o que será revisado e fornece recursos, como equipe e tempo.
Autor
Cria e corrige o produto de trabalho revisado.
Moderador (facilitador)
Garante o andamento da reunião: mediação, tempo e ambiente seguro para todos falarem.
Relator (registrador)
Reúne as anomalias dos revisores e registra decisões e novas anomalias.
Revisor
Realiza a revisão. Pode ser alguém do projeto, especialista ou outro stakeholder.
Líder da revisão
Responsável geral: decide quem participa, quando e onde a revisão acontece.
3.2.4 Tipos de revisão
O nível de formalidade depende de:
SDLC seguido
Maturidade do processo de desenvolvimento
Importância e complexidade do produto
Requisitos legais ou regulatórios
Necessidade de trilha de auditoria
O mesmo produto pode passar por uma revisão informal e depois uma mais formal
3.2.4 Tipos de revisão
Revisão informal
Não segue processo definido e não exige resultado documentado. Objetivo principal: detectar anomalias.
Walkthrough
Conduzido pelo autor. Avaliar qualidade, instruir revisores, obter consenso, gerar ideias e detectar anomalias.
Revisão técnica
Feita por revisores tecnicamente qualificados e liderada por um moderador. Obter consenso e tomar decisões técnicas.
Inspeção
A mais formal. Segue o processo completo, objetivo é encontrar o máximo de anomalias. Coleta métricas. Autor não pode ser líder nem relator.
3.2.5 Fatores de sucesso para revisões
1 - Objetivos claros e critérios de saída mensuráveis (avaliar os participantes nunca deve ser objetivo);
2 - Escolher o tipo de revisão adequado ao objetivo, ao produto, aos participantes e ao contexto;
3 - Revisar em pequenas partes para os revisores não perderem a concentração;
4 - Dar feedback das revisões para stakeholders e autores melhorarem;
5 - Dar tempo suficiente para os participantes se prepararem;
6 - Apoio da gerência para o processo de revisão;
7 - Tornar as revisões parte da cultura da organização;
8 - Treinamento adequado para todos os participantes;
9 - Facilitação das reuniões.
4 Análise e Modelagem de Teste
PALAVRAS-CHAVES
Critérios de aceite, Desenvolvimento orientado por teste de aceite, Técnica de teste caixa-preta, Análise de valor de limite, Cobertura de ramificação, Teste baseado em lista de verificação, Abordagem de teste baseada na colaboração, Cobertura, Item de cobertura, Teste de tabela de decisão, Particionamento de equivalência, Suposição de erro, Técnica de teste baseada na experiência, Teste exploratório, Teste de transição de estado, Cobertura de instrução, Técnica de teste, Técnica de teste caixa-branca
4.1 Visão geral das técnicas
Técnicas ajudam na análise (o que testar) e na modelagem (como testar)
Ajudam a criar um conjunto pequeno, mas suficiente, de casos de teste de forma sistemática
Ajudam a definir condições de teste, itens de cobertura e dados de teste
São classificadas em caixa-preta, caixa-branca e baseadas na experiência
4.1 Técnicas de teste
Caixa-preta
Baseada em especificação. Analisa o comportamento sem olhar a estrutura interna. Se a implementação mudar e o comportamento não, os testes continuam úteis.
Caixa-branca
Baseada na estrutura. Analisa a estrutura interna e o processamento. Só pode ser criada depois do projeto ou da implementação.
Baseada na experiência
Usa o conhecimento e a experiência do testador. Depende muito da habilidade dele. Complementa caixa-preta e caixa-branca.
4.2 Técnicas caixa-preta
1 - Particionamento de equivalência
Divide os dados em partições que são processadas da mesma forma.
2 - Análise de valor de limite
Testa os limites das partições ordenadas.
3 - Tabela de decisão
Testa combinações de condições e suas ações.
4 - Transição de estado
Testa estados e transições do sistema.
4.2.1 Particionamento de equivalência (EP)
Divide os dados em partições onde todos os elementos são processados da mesma forma
Se um valor da partição encontra um defeito, qualquer outro valor da mesma partição também encontra. Um teste por partição é suficiente
Vale para entradas, saídas, configurações, valores internos, tempo e parâmetros de interface
Partições não podem se sobrepor e não podem ser vazias
Partição válida: valores válidos. Partição inválida: valores inválidos
Pode ser contínua ou discreta, ordenada ou não, finita ou infinita
4.2.1 Cobertura no EP
Item de cobertura
As partições de equivalência (incluindo as inválidas).
100% de cobertura
Cada partição executada pelo menos uma vez.
Cobertura = partições executadas / total de partições.
Each Choice Coverage
Com vários conjuntos de partições, cada partição de cada conjunto deve ser executada pelo menos uma vez. Não considera combinações.
4.2.2 Análise de valor de limite (BVA)
Testa os limites das partições de equivalência
Só pode ser usada em partições ordenadas
Valores mínimo e máximo da partição são os valores de limite
Desenvolvedores erram mais nos limites
Encontra limites mal posicionados (acima ou abaixo) ou omitidos
4.2.2 BVA de 2 e de 3 valores
2 valores
  • Para cada limite: o valor de limite e o vizinho mais próximo da partição adjacente
  • 100%: executar todos os valores de limite identificados
  • Cobertura = limites executados / total de limites
3 valores
  • Para cada limite: o valor de limite e os seus dois vizinhos
  • Alguns itens de cobertura podem não ser valores de limite
  • Mais rigoroso: encontra defeitos que o de 2 valores não encontra
Ex.: "se (x ≤ 10)" implementado errado como "se (x = 10)". O BVA de 2 valores (x = 10, x = 11) não encontra. O BVA de 3 valores usa x = 9 e encontra o defeito.
Exemplo EP e BVA
Exemplo: um campo aceita idade de 18 a 60 anos.
menor que 18 18 até 60 maior que 60 Partição inválida Partição válida Partição inválida
EP
3 partições = 3 itens de cobertura.
Ex.: 10, 35 e 70.
Um valor de cada partição já dá 100% de cobertura.
BVA
2 valores: 17, 18, 60, 61
3 valores: 17, 18, 19, 59, 60, 61
O BVA de 3 valores é mais rigoroso.
4.2.3 Teste de tabela de decisão
Testa requisitos onde combinações de condições geram resultados diferentes
Boa forma de registrar lógica complexa, como regras de negócio
Linhas: condições e ações. Colunas: regras de decisão (combinação única de condições)
Entrada limitada: valores booleanos. Entrada estendida: valores múltiplos (intervalos, partições)
Ajuda a encontrar lacunas e contradições nos requisitos
Muitas condições: regras crescem exponencialmente. Usar tabela minimizada ou abordagem baseada em risco
4.2.3 Notação e cobertura
Condições
  • V = condição satisfeita
  • F = condição não satisfeita
  • "-" = irrelevante para o resultado
  • N/A = inviável para a regra
Ações
  • X = a ação deve ocorrer
  • Em branco = a ação não deve ocorrer
Cobertura
  • Item de cobertura: colunas com combinações viáveis
  • 100%: executar todas essas colunas
  • Colunas executadas / total de colunas viáveis
Exemplo tabela de decisão
Exemplo: desconto para cliente VIP em compras acima de R$ 100.
CondiçõesR1R2R3R4
Cliente VIP?VVFF
Compra acima de R$ 100?VFVF
Ações
Aplicar descontoX
Não aplicar descontoXXX
2 condições = 4 colunas (regras).
Cada coluna viável é um item de cobertura.
4 casos de teste = 100% de cobertura.
R2, R3 e R4 podem ser fundidas numa tabela minimizada.
4.2.4 Teste de transição de estado
Diagrama de transição de estado modela os estados possíveis e as transições válidas
Transição é iniciada por um evento e pode ter uma condição de proteção
Transições são instantâneas e podem gerar ações do software
Tabela de estados: linhas são estados, colunas são eventos e as células são transições
A tabela mostra as transições inválidas (células vazias)
Caso de teste geralmente cobre várias transições
Exemplo transição de estado
Sintaxe da transição: evento [condição de proteção] / ação
Bloqueado Aguardando Logado desbloquear senha [correta] / abrir tela senha [3ª incorreta] sair
Caso de teste = sequência de eventos que gera uma sequência de mudanças de estado.
A tabela de estados mostra também as transições inválidas (células vazias). Ex.: "sair" estando Bloqueado.
Testar só uma transição inválida por caso de teste evita o mascaramento de falhas.
4.2.4 Critérios de cobertura
Todos os estados
Itens de cobertura são os estados. Todos os estados precisam ser visitados. É a mais fraca.
Transições válidas (0-switch)
Itens de cobertura são as transições válidas. Todas devem ser executadas. É a mais usada.
Todas as transições
Executa todas as válidas e tenta executar as inválidas. Garante as outras duas. Mínimo para software de missão e segurança crítica.
4.3 Técnicas caixa-branca
Foco em duas técnicas relacionadas ao código: teste de instrução e teste de ramificação
Existem técnicas mais rigorosas para ambientes de segurança e missão crítica
Também existem técnicas caixa-branca para níveis mais altos (ex.: teste de API)
E coberturas que não são de código (ex.: cobertura de neurônios em redes neurais)
4.3.1 Teste de instrução
Itens de cobertura são as instruções executáveis
Cobertura = instruções executadas / total de instruções executáveis
100%: todas as instruções foram executadas pelo menos uma vez
Pode não encontrar defeitos que dependem de dados (ex.: divisão por zero)
100% de instrução não garante que toda a lógica de decisão foi testada
4.3.2 Teste de ramificação
Ramificação é a transferência de controle entre dois nós do gráfico de fluxo de controle
Pode ser incondicional (código em linha reta) ou condicional (resultado de decisão)
Condicional: verdadeiro/falso do if, switch/case, sair ou continuar no loop
Cobertura = ramificações executadas / total de ramificações
Pode não encontrar defeitos que precisam de um caminho específico
100% de ramificação garante 100% de instrução (mas não o contrário)
4.3.3 Valor do teste caixa-branca
Pontos fortes
  • Toda a implementação é considerada no teste
  • Encontra defeitos mesmo com especificação vaga, desatualizada ou incompleta
  • Pode ser usado no teste estático (código não pronto, pseudocódigo)
  • Dá uma medição objetiva da cobertura e permite criar testes para aumentá-la
Ponto fraco
  • Se o software não implementar um requisito, o caixa-branca pode não encontrar esse defeito de ausência
Fazer só teste caixa-preta não mede a cobertura real do código.
4.4 Técnicas baseadas na experiência
1 - Suposição de erro
Prevê erros, defeitos e falhas com base no conhecimento do testador.
2 - Teste exploratório
Modela, executa e avalia ao mesmo tempo enquanto aprende sobre o objeto de teste.
3 - Lista de verificação
Testes que cobrem as condições de uma checklist.
4.4.1 Suposição de erro
Baseada em
Como o aplicativo funcionou no passado
Baseada em
Tipos de erros que os desenvolvedores costumam cometer e os defeitos que geram
Baseada em
Falhas que aconteceram em aplicativos parecidos
Erros podem estar em: entrada, saída, lógica, cálculo, interfaces ou dados
Ataque a falhas: forma metódica. Cria uma lista de possíveis erros, defeitos e falhas e modela testes para expor
4.4.2 Testes exploratórios
Testes modelados, executados e avaliados ao mesmo tempo, enquanto o testador aprende
Pode ser baseado em sessão: tempo definido e carta de teste com os objetivos
Depois da sessão tem uma reunião com os stakeholders sobre os resultados
Fichas de sessão documentam os passos e as descobertas
Útil com especificação pouca ou ruim, ou com pressão de tempo
Mais eficaz com testador experiente, que conhece o domínio, curioso e criativo
4.4.3 Teste baseado em checklist
Testes cobrem as condições de teste de uma lista de verificação
Criada com base na experiência, no que importa para o usuário ou em por que o software falha
Itens formulados como pergunta, verificáveis separadamente
Não deve ter itens automáticos, itens de critério de entrada/saída ou muito gerais
Deve ser atualizada com base na análise de defeitos, sem ficar longa demais
Checklist de alto nível: mais cobertura, porém menos repetibilidade
4.5 Abordagens baseadas na colaboração
As técnicas anteriores focam em detectar defeitos
As abordagens colaborativas focam também em evitar defeitos
Usam colaboração e comunicação
Escrita colaborativa de histórias, critérios de aceite e ATDD
4.5.1 Histórias de usuário - 3C
Formato: Como [persona], quero [meta], para que [valor de negócio]
Cartão
Meio onde a história é descrita (cartão, quadro eletrônico).
Conversação
Explica como o software será usado (documentada ou verbal).
Confirmação
Os critérios de aceite.
4.5.1 INVEST
I - Independente
Não depende de outras histórias.
N - Negociável
Pode ser discutida e ajustada.
V - Valiosa
Entrega valor para o usuário.
E - Estimável
Dá para estimar o esforço.
S - Small (pequena)
Cabe numa iteração.
T - Testável
Se o stakeholder não sabe testar, a história pode estar pouco clara.
4.5.2 Critérios de aceite
Condições para a história ser aceita. São usados para:
Definir o escopo da história
Chegar a um consenso entre stakeholders
Descrever cenários positivos e negativos
Ser base para o teste de aceite
Permitir planejamento e estimativa precisos
4.5.2 Formatos de critérios de aceite
Orientado a cenários
Ex.: formato Dado/Quando/Então usado no BDD.
Orientado por regras
Ex.: lista de pontos de verificação ou tabela de entrada e saída.
Personalizado
A equipe pode usar outro formato, desde que seja bem definido e sem ambiguidade.
4.5.3 ATDD
1 - Workshop de especificação
A história e os critérios de aceite são analisados, discutidos e escritos. Lacunas e ambiguidades são resolvidas.
2 - Criar casos de teste
Pela equipe ou pelo testador, com base nos critérios de aceite. Exemplos e testes são a mesma coisa.
3 - Testes positivos
Primeiro o comportamento correto, sem exceções ou erros.
4 - Testes negativos
Depois dos positivos, a equipe faz os negativos.
5 - Não funcional
Por fim, características não funcionais (performance, usabilidade).
6 - Requisito executável
Testes automatizados pelos desenvolvedores viram requisitos executáveis.
4.5.3 ATDD
Abordagem que prioriza o teste: casos de teste criados antes de implementar a história
Criado por pessoas com perspectivas diferentes: cliente, desenvolvedor e testador
Pode ser manual ou automatizado
Casos de teste compreensíveis para os stakeholders (pré-condições, entradas e pós-condições)
Devem cobrir todas as características da história e não ir além dela
Dois casos de teste não devem descrever a mesma característica
5 Gerenciamento das Atividades de Teste
PALAVRAS-CHAVES
Gerenciamento de defeitos, Relatório de defeitos, Critérios de entrada, Critérios de saída, Risco de produto, Risco de projeto, Risco, Análise de risco, Avaliação de risco, Controle de risco, Identificação de risco, Nível de risco, Gerenciamento de risco, Mitigação de risco, Monitoramento de risco, Teste baseado em risco, Abordagem de teste, Relatório de conclusão de teste, Controle de teste, Monitoramento de teste, Plano de teste, Planejamento de teste, Relatório de progresso de teste, Pirâmide de teste, Quadrantes de teste
5.1.1 Plano de teste
Descreve os objetivos, recursos e processos de um projeto de teste
Documenta os meios e o cronograma para atingir os objetivos
Ajuda a garantir que as atividades atendam aos critérios estabelecidos
Serve de comunicação com a equipe e stakeholders
Mostra que o teste segue a política e estratégia de teste (ou explica por que não)
Faz o testador pensar nos desafios: riscos, cronograma, pessoas, ferramentas e custos
5.1.1 Conteúdo do plano de teste
Mais detalhes na norma ISO/IEC/IEEE 29119-3.
1 - Contexto do teste (escopo, objetivos, restrições, base de teste);
2 - Premissas e restrições do projeto de teste;
3 - Stakeholders (funções, responsabilidades, necessidade de contratação e treinamento);
4 - Comunicação (formas, frequência, modelos de documentação);
5 - Registro de riscos (riscos do produto e do projeto);
6 - Abordagem de teste (níveis, tipos, técnicas, critérios de entrada e saída, independência, métricas, dados e ambiente);
7 - Orçamento e cronograma.
5.1.2 Planejamento de liberação e iteração
Nos SDLC iterativos existem dois tipos de planejamento:
Liberação
  • Prevê o lançamento do produto
  • Define e redefine o backlog do produto
  • Testador escreve histórias e critérios de aceite testáveis
  • Participa das análises de risco do projeto e da qualidade
  • Estima o esforço de teste e planeja o teste da versão
Iteração
  • Prevê o fim de uma única iteração (backlog da iteração)
  • Testador participa da análise de risco detalhada das histórias
  • Determina a testabilidade das histórias
  • Divide em tarefas e estima o esforço de teste
  • Refina os aspectos funcionais e não funcionais
5.1.3 Critérios de entrada e saída
Critérios de entrada
  • Condições prévias para começar uma atividade
  • Sem eles a atividade fica mais difícil, demorada, cara e arriscada
  • Ex.: recursos disponíveis (pessoas, ferramentas, ambiente, dados, orçamento, tempo)
  • Ex.: material de teste disponível e qualidade inicial (smoke test aprovado)
Critérios de saída
  • O que precisa ser alcançado para a atividade ser concluída
  • Ex.: cobertura alcançada, defeitos não resolvidos, densidade de defeitos
  • Ex.: testes planejados executados, defeitos relatados, regressão automatizada
  • Fim do tempo ou orçamento também vale, se os stakeholders aceitarem o risco
5.1.3 No ágil
DoR - Definição de Pronto
São os critérios de entrada que a história de usuário precisa cumprir para iniciar o desenvolvimento e/ou teste.
DoD - Definição de Feito
São os critérios de saída. Métricas objetivas da equipe para um item ser liberado.
5.1.4 Técnicas de estimativa
1 - Baseada em índices
Usa dados de projetos anteriores da organização. Ex.: dev:teste foi 3:2, dev de 600 h → teste de 400 h.
2 - Extrapolação
Mede cedo no projeto atual e extrapola. Ex.: média das três últimas iterações. Boa para SDLC iterativo.
3 - Wideband Delphi
Especialistas estimam isoladamente, discutem os desvios e estimam de novo até o consenso. Variante: Planning Poker.
4 - Três pontos
Especialistas fazem estimativa otimista, mais provável e pessimista. Resultado é a média ponderada.
5.1.4 Estimativa de três pontos
Três estimativas dos especialistas: otimista (o), mais provável (m) e pessimista (p)
Estimativa
E = (o + 4m + p) / 6
Desvio padrão
DP = (p − o) / 6
Exemplo: o = 6, m = 9 e p = 18 (homens/hora)
E = (6 + 36 + 18) / 6 = 10    DP = (18 − 6) / 6 = 2
Resultado: 10 ± 2 homens/hora (entre 8 e 12)
5.1.4 Técnicas de estimativa
Estimar é prever a quantidade de trabalho de teste necessária
É baseada em suposições e sempre sujeita a erros
Tarefas pequenas são estimadas com mais precisão que as grandes
Tarefa grande pode ser dividida em tarefas menores para estimar
5.1.5 Priorização de casos de teste
Baseada em risco
Ordem pela análise de risco. Testes dos riscos mais importantes primeiro.
Baseada em cobertura
Testes com maior cobertura primeiro. Variante: cobertura adicional, o próximo é o que mais acrescenta cobertura.
Baseada em requisitos
Ordem pela prioridade dos requisitos, definida pelos stakeholders.
5.1.5 Priorização de casos de teste
Casos de teste são reunidos em conjuntos e organizados num cronograma de execução
Se o caso de alta prioridade depende de um de baixa, o de baixa executa primeiro
Considerar a disponibilidade de recursos: ferramentas, ambiente e pessoas
5.1.6 Pirâmide de teste
Ponta a ponta Integração Unidade (componente)
Topo: testes complexos, de alto nível e de ponta a ponta. São mais lentos e cobrem uma grande parte da funcionalidade, por isso precisa de poucos.
Base: testes pequenos, isolados e rápidos que verificam uma parte pequena da funcionalidade, por isso precisa de muitos.
Quanto mais alta a camada, menor a granularidade, menor o isolamento e maior o tempo de execução.
Ajuda a equipe na automação e na alocação do esforço de teste.
O número e o nome das camadas pode variar. Modelo original (Cohn): unidade, serviço e interface do usuário.
5.1.7 Quadrantes de teste
Definidos por Brian Marick. Agrupam níveis, tipos, atividades e técnicas de teste no desenvolvimento ágil.
VOLTADO PARA OS NEGÓCIOS
VOLTADO PARA A TECNOLOGIA
APOIA A EQUIPE
AVALIA O PRODUTO
Q2
Testes funcionais, exemplos, testes de histórias de usuário, protótipos de UX, testes de API e simulações. Verificam critérios de aceite. Manuais ou automatizados.
Q3
Testes exploratórios, testes de usabilidade e teste de aceite do usuário (UAT). Orientados ao usuário e geralmente manuais.
Q1
Teste de componente e teste de integração de componentes. Devem ser automatizados e incluídos no processo de CI.
Q4
Smoke tests e testes não funcionais (exceto usabilidade). Geralmente automatizados.
5.2 Gerenciamento de risco
Aumenta a chance de atingir os objetivos, melhora a qualidade e a confiança dos stakeholders
Análise de risco
Identificação e avaliação de risco
Controle de risco
Mitigação e monitoramento de risco
Teste baseado em risco: atividades selecionadas, priorizadas e gerenciadas pela análise e controle de risco
5.2.1 Risco e atributos
Risco é um possível evento, perigo, ameaça ou situação que causa um efeito adverso.
Probabilidade
Chance do risco acontecer (maior que zero e menor que um).
Impacto (dano)
As consequências caso o risco aconteça.
Nível de risco
Medida formada pela probabilidade e impacto. Quanto maior, mais importante tratar.
5.2.2 Riscos de projeto e de produto
Riscos de projeto
  • Ligados ao gerenciamento e controle do projeto
  • Organizacionais: atrasos, estimativas imprecisas, redução de custos
  • Pessoal: falta de habilidade, conflitos, comunicação, falta de pessoas
  • Técnicos: desvio de escopo, pouco suporte de ferramentas
  • Fornecedores: falha na entrega de terceiros, falência
  • Impactam cronograma, orçamento ou escopo
Riscos de produto
  • Ligados às características de qualidade (ISO 25010)
  • Ex.: funcionalidade ausente ou errada, cálculo incorreto, arquitetura ruim, tempo de resposta ruim, vulnerabilidades
  • Consequências: insatisfação do usuário, perda de receita e reputação, danos a terceiros, alto custo de manutenção, penalidades e até danos físicos ou morte
5.2.3 Análise de risco do produto
Objetivo: conscientizar sobre o risco para focar o teste e minimizar o risco residual
O ideal é começar cedo no SDLC
Identificação
Lista de riscos usando brainstorming, workshops, entrevistas ou diagrama de causa e efeito
Avaliação
Categorizar, definir probabilidade, impacto e nível, priorizar e propor como tratar
Quantitativa
Nível de risco = probabilidade x impacto
Qualitativa
Nível de risco definido por uma matriz de risco
5.2.3 Análise de risco do produto
A análise de risco influencia a minúcia e o escopo dos testes. Os resultados são usados para:
1 - Determinar o escopo dos testes;
2 - Determinar os níveis de teste e propor os tipos de teste;
3 - Determinar as técnicas de teste e a cobertura a ser alcançada;
4 - Estimar o esforço de teste de cada tarefa;
5 - Priorizar os testes para encontrar defeitos críticos o mais cedo possível;
6 - Ver se outras atividades, além de teste, podem reduzir o risco.
5.2.4 Controle de risco do produto
São todas as medidas tomadas em resposta aos riscos identificados e avaliados
Mitigação
Implementar as ações propostas para reduzir o nível de risco
Monitoramento
Garantir que a mitigação é eficaz, melhorar a avaliação e identificar riscos novos
Respostas possíveis: mitigação por teste, aceitar, transferir ou plano de contingência
5.2.4 Mitigar risco com teste
1 - Testadores
Escolher testadores com experiência e habilidade para o tipo de risco.
2 - Independência
Aplicar o nível adequado de independência de teste.
3 - Teste estático
Fazer revisões e análise estática.
4 - Técnicas
Aplicar técnicas de teste e níveis de cobertura adequados.
5 - Tipos de teste
Aplicar os tipos de teste que abordam as características afetadas.
6 - Teste dinâmico
Fazer testes dinâmicos, incluindo regressão.
5.3 Monitoramento, controle e conclusão
Monitoramento
Coleta informações para avaliar o progresso e ver se os critérios de saída foram atendidos.
Controle
  • Usa o monitoramento para dar diretrizes e ações corretivas
  • Ex.: repriorizar testes, ajustar cronograma, adicionar recursos
Conclusão
Consolida experiência e material de teste nos marcos: fim de nível, iteração, projeto, lançamento ou manutenção.
5.3.1 Métricas de teste
Progresso do projeto
Conclusão de tarefas, uso de recursos, esforço de teste.
Progresso do teste
Casos implementados, executados/não executados, aprovados/falhados, tempo de execução.
Qualidade do produto
Disponibilidade, tempo de resposta, tempo médio até a falha.
Defeitos
Quantidade e prioridade de defeitos encontrados/corrigidos, densidade, % de detecção.
Risco
Nível de risco residual.
Cobertura
Cobertura de requisitos, cobertura de código.
Custo
Custo do teste, custo organizacional da qualidade.
5.3.2 Relatórios de teste
Progresso do teste
  • Apoia o controle contínuo. Gerado regularmente (diário, semanal)
  • Período de teste
  • Progresso (adiantado ou atrasado) e desvios
  • Impedimentos e soluções
  • Métricas de teste
  • Riscos novos e alterados
  • Testes planejados para o próximo período
Conclusão do teste
  • Preparado quando projeto, nível ou tipo de teste termina
  • Resumo do teste
  • Avaliação da qualidade com base no plano original
  • Desvios do plano de teste
  • Impedimentos e soluções alternativas
  • Métricas, riscos não mitigados e defeitos não corrigidos
  • Lições aprendidas
5.3.3 Comunicação do status
O melhor meio varia. As opções incluem:
Comunicação verbal com a equipe e stakeholders
Painéis (CI/CD, tarefas, gráficos burn-down)
Canais eletrônicos (e-mail, chat)
Documentação on-line
Relatórios de teste formais
Equipes distribuídas podem precisar de comunicação mais formal
5.4 Gerenciamento de configuração (CM)
Identifica, controla e rastreia produtos de trabalho como itens de configuração (planos, casos, scripts, resultados, relatórios)
Em item complexo (ex.: ambiente de teste) registra os itens que compõem, relacionamentos e versões
Item aprovado vira baseline e só muda por controle formal de alterações
Permite voltar para uma baseline anterior e reproduzir resultados
Itens identificados de forma única, versionados e rastreáveis
Em DevOps a CM costuma ser automatizada no pipeline
5.5 Gerenciamento de defeitos
Anomalias relatadas podem virar defeito real ou outra coisa (falso positivo, solicitação de alteração)
Podem ser relatadas em qualquer fase do SDLC
Fluxo: registrar, analisar, classificar, decidir a resposta (corrigir ou manter) e fechar
O processo deve ser seguido por todos os stakeholders
Defeitos do teste estático devem ser tratados de forma parecida
5.5 Objetivos do relatório de defeito
Dar informação suficiente para quem vai resolver o problema
Dar meios de rastrear a qualidade do produto de trabalho
Dar ideias para melhorar o processo de desenvolvimento e teste
5.5 Relatório de defeito
Um relatório de defeito do teste dinâmico normalmente tem:
1 - Identificador único e título com resumo da anomalia;
2 - Data, organização emissora e autor (com cargo);
3 - Identificação do objeto de teste e do ambiente de teste;
4 - Contexto do defeito (caso de teste, atividade, fase do SDLC, técnica, dados de teste);
5 - Descrição da falha para reprodução: passos, logs, capturas de tela ou gravações;
6 - Resultado esperado e resultado real;
7 - Severidade (impacto) e prioridade de correção;
8 - Status (aberto, adiado, duplicado, aguardando correção, aguardando confirmação, reaberto, fechado, rejeitado);
9 - Referências (ex.: caso de teste).
6 Ferramentas de Teste
PALAVRAS-CHAVES
Automação de testes
6.1 Ferramentas para testes
Gerenciamento
Gerenciam SDLC, requisitos, testes, defeitos e configuração.
Teste estático
Apoiam revisões e análise estática.
Projeto e implementação
Geram casos de teste, dados e procedimentos.
Execução e cobertura
Executam testes automatizados e medem a cobertura.
Não funcional
Fazem testes difíceis ou impossíveis de fazer manualmente.
DevOps
Pipeline de entrega, build automatizado, CI/CD.
Colaboração
Facilitam a comunicação.
Escalabilidade
Máquinas virtuais e conteinerização. E qualquer outra ferramenta, até planilha!
6.2 Benefícios e riscos da automação
Só comprar a ferramenta não garante sucesso. Precisa de esforço para introduzir, manter e treinar.
Benefícios
  • Economiza tempo reduzindo trabalho manual repetitivo
  • Evita erros humanos simples com consistência e repetibilidade
  • Avaliação mais objetiva (ex.: cobertura)
  • Acesso fácil a informações e estatísticas de teste
  • Execução mais rápida: feedback rápido e menor time to market
  • Mais tempo para o testador criar testes novos e mais profundos
Riscos
  • Expectativas irreais sobre a ferramenta
  • Estimativas imprecisas de tempo, custo e esforço
  • Usar ferramenta quando o teste manual é melhor
  • Confiar demais e ignorar o pensamento crítico
  • Dependência do fornecedor
  • Open source abandonado
  • Incompatível com a plataforma
  • Não cumprir normas regulatórias ou de segurança
Referência
INTERNATIONAL SOFTWARE TESTING QUALIFICATIONS BOARD (ISTQB®). Certified Tester Foundation Level Syllabus, versão 4.0. ISTQB®, 2023. Tradução para o português: BSTQB® (Brazilian Software Testing Qualifications Board).
© International Software Testing Qualifications Board. ISTQB® é uma marca registrada do International Software Testing Qualifications Board. Autores do syllabus v4.0: Renzo Cerquozzi, Wim Decoutere, Klaudia Dussa-Zieger, Jean-François Riverin, Arnika Hryszko, Martin Klonk, Michaël Pilaeten, Meile Posthuma, Stuart Reid, Eric Riou du Cosquer, Adam Roman, Lucjan Stapp, Stephanie Ulrich e Eshraka Zakaria.
Mapa mental elaborado por Ingrid Lorrane, com base no syllabus acima, para uso de estudo não comercial.

Se quiser conversar sobre teste ou tirar alguma dúvida, é só me chamar.

Falar no WhatsApp
← Voltar para os textos · Fazer o simulado CTFL