O teste negativo em testes de software é uma técnica que verifica como o aplicativo reage a comportamentos inesperados ou a dados inválidos. Esse tipo de teste pode ajudar as equipes de Garantia de Qualidade a aprimorar a robustez e a estabilidade do software, identificando exceções que causam congelamentos, falhas ou outros resultados indesejados.
Neste artigo, exploraremos o que é teste negativo de software, por que ele é importante e algumas das diferentes abordagens, técnicas e ferramentas que você pode usar para essa técnica.
O que é teste negativo de software?
O teste negativo é uma técnica de teste de software que alimenta intencionalmente um sistema com entradas inválidas ou dados inesperados para ver como ele lida com esses cenários. Também conhecida como teste de falha ou teste de caminho de erro, essa abordagem simula a gama diversificada de cenários do mundo real que o seu aplicativo encontrará, como usuários que inserem datas ou caracteres inválidos ou que usam determinadas funcionalidades de uma forma que você nunca pretendeu.
A maioria dos tipos de teste usa dados válidos para testar um aplicativo. No entanto, o teste negativo adota uma abordagem diferente, testando em torno das bordas e além das entradas típicas e observando como o aplicativo lida com as exceções.
É importante testar se o seu aplicativo funciona como pretendido. Mas, por outro lado, entender o que acontece quando os usuários saem da reserva também é vital, principalmente se esses usos não intencionais causarem falhas, congelamentos ou outros defeitos.
Diferença entre teste positivo e negativo
testes em testes de software
Conforme descrito acima, o teste negativo usa dados inesperados ou inválidos para verificar o comportamento de um sistema. Por outro lado, o teste positivo utiliza dados esperados ou válidos para verificar se o sistema funciona conforme o esperado.
Em outras palavras:
- O teste positivo ajuda a entender se o aplicativo funciona conforme o planejado
- O teste negativo determina se o aplicativo pode lidar com eventos inesperados
Tanto os testes positivos quanto os negativos em testes de software são necessários se você quiser testar seu aplicativo com rigor.
Por que o teste negativo de software é vital?
Quando os desenvolvedores criam um software, eles têm uma ideia clara de como esperam que o usuário use o software. No entanto, os usuários nem sempre seguem as regras. Muitas vezes, eles tentarão clicar em botões que não existem, inserir letras em campos de números ou tentar entradas que você simplesmente não espera.
O teste negativo tem como objetivo levar em conta esses casos extremos que não podem ser descobertos por técnicas de teste positivas, como
unidade
,
sistema
ou
teste de integração
. Isso requer um pensamento não convencional para criar “bolas curvas” para lançar no sistema. No entanto, o resultado líquido é um aplicativo mais estável e robusto.
Qual é o objetivo do teste negativo?
em testes de software?
O teste negativo tem objetivos semelhantes aos de outros tipos de teste de software. Ou seja, para descobrir bugs, defeitos e vulnerabilidades em um aplicativo. No entanto, ele desempenha um papel especial na descoberta de defeitos que não podem ser descobertos com o uso de dados válidos. Aqui estão alguns dos motivos para adotar uma abordagem de teste negativo.
1. Exposição de defeitos
O objetivo central do teste negativo no teste de software é descobrir defeitos resultantes de dados inválidos ou entradas inesperadas. Ele permite que os testadores adotem uma abordagem mais proativa para a detecção de bugs e garantam que o software atenda às expectativas.
2. Segurança
Entradas inesperadas ou dados inválidos podem expor vulnerabilidades de segurança. O teste e a resolução desses casos extremos resultam em um aplicativo mais seguro e robusto, reduzindo a possibilidade de ataques maliciosos, falhas de injeção ou tentativas de acesso não autorizado.
3. Tratamento de erros
O teste negativo é útil para validar o tratamento de erros. Não se trata apenas de garantir que o sistema permaneça estável após encontrar entradas ou dados inesperados, mas também de como ele responde a esses eventos, por exemplo, produzindo mensagens de erro para garantir que o usuário final saiba que os dados são inválidos.
4. Melhorar a cobertura dos testes
Os testes positivos e negativos em testes de software são extremamente complementares. Ambos abrangem diferentes elementos de entrada de dados, o que significa que seu teste é mais abrangente.
5. Melhor experiência do usuário
Os testes negativos ajudam a descobrir a origem de mensagens de erro, falhas e outros comportamentos inesperados que podem afetar negativamente a experiência do usuário.
Diferença entre positivo e negativo
testes em engenharia de software
Como mencionamos acima, o teste negativo envia dados inesperados ou inválidos para verificar o comportamento de um sistema. O teste positivo, por outro lado, envia dados esperados ou válidos para verificar se o sistema funciona conforme o esperado.
A diferença entre testes positivos e negativos inclui:
1. Objetivos:
O teste positivo verifica se o software funciona como pretendido; o teste negativo busca entender o que acontece em cenários não intencionais.
2. Dados:
O teste positivo usa dados válidos e o teste negativo usa entradas inválidas, valores extremos e formatos inesperados.
3. Foco:
O teste positivo se concentra em cenários de sucesso, enquanto o teste negativo está mais preocupado com cenários de insucesso.
Diferentes tipos de testes negativos
O teste negativo é um conceito que abrange várias abordagens diferentes para validar a qualidade e a integridade de um aplicativo. Aqui estão sete tipos de testes negativos que você precisa conhecer.
#1. Teste de valor de limite
O teste de valor limite busca testar o software com entradas que estão nas bordas ou limites do intervalo de entrada. Ele testa os valores máximo e mínimo esperados, mas também testa um pouco além dessas entradas.
Exemplo: Um campo de entrada aceita números entre 1 e 9. Um teste de valor de limite inserirá 1 e 9, mas também testará 0 e 10.
#2. Teste de valor de entrada
O teste de valor de entrada determina como o sistema responderá a entradas inesperadas ou inválidas. Algumas das entradas que serão testadas incluem:
- Tipos de dados incorretos
- Valores fora da faixa
- Caracteres especiais
- Campos vazios.
Exemplo: Uma caixa de entrada requer apenas um número, portanto, o teste inserirá uma letra e verá como o sistema responde.
#3. Teste de carga
Teste de carga
ajuda os testadores a avaliar como o sistema responderá sob estresse ou cargas pesadas, como grandes conjuntos de dados ou altos volumes de tráfego.
As ferramentas de automação de teste
podem simular essas condições extremas para entender como o sistema reage sob pressão.
Exemplo: O testador simulará milhares de usuários simultâneos acessando um site.
#4. Testes de exceção
Esse tipo de teste explora como o sistema responderá a eventos ou erros excepcionais. Alguns dos testes incluem
- Simulação de falhas no sistema
- Falhas na rede
- Erros no banco de dados
- Problemas de espaço em disco
- Arquivos ausentes.
Exemplo: O teste pode explorar o que acontece quando um usuário está baixando um arquivo do aplicativo e a Internet é cortada.
#5. Testes de segurança
O teste de segurança usa uma abordagem de teste negativo para destacar e entender as vulnerabilidades do software que podem ser expostas por entradas inválidas ou inesperadas. Essa abordagem testa ataques comuns, como:
- Injeção de SQL
- Scripting entre sites (XSS)
- Estouros de buffer.
Exemplo: Um teste de segurança pode tentar injetar código malicioso em um campo de entrada do usuário.
#6. Teste da interface do usuário
Esse tipo de teste se concentra nos erros que ocorrem quando o usuário interage com o software. Alguns dos aspectos que ele tentará determinar incluem:
- Respostas inesperadas às interações do usuário
- Mensagens de erro incorretas
- Problemas de navegação
Exemplo: O teste explorará o que acontece quando determinadas ações são executadas fora de sequência.
#7. Teste de integridade de dados
O teste de integridade dos dados garante que os dados permaneçam precisos e consistentes em uma variedade de operações dentro do aplicativo. Alguns dos itens que estão sendo testados incluem:
- Possíveis corrupções de dados
- Cenários de perda de dados
- Modificações inadvertidas de dados
Exemplo: O teste verificará se os dados permanecem os mesmos após uma transmissão.
Como você pode ver, há muitas abordagens diferentes de testes negativos. O que todos eles têm em comum é o uso de entradas inesperadas ou dados inválidos para ver como o aplicativo funciona em condições atípicas.
Vantagens do teste negativo
O teste negativo consiste em entender como o aplicativo funciona quando surgem situações inesperadas. Aqui estão alguns dos principais benefícios de usar essa abordagem.
- Ele o ajuda a entender o impacto que entradas inesperadas ou dados inválidos terão sobre o seu aplicativo. Ele vai travar? Emite uma mensagem de erro imprecisa?
- O teste negativo faz parte de uma abordagem responsável de garantia de qualidade, pois busca identificar os pontos fracos do sistema
- O teste negativo coloca o software à prova, testando sua resposta a cenários imprevistos ou não antecipados que ele encontrará na natureza
- Novamente, o teste negativo é um componente essencial de uma abordagem completa da segurança, pois destaca os possíveis vetores de ataque dos quais os invasores cibernéticos podem se aproveitar.
Desvantagens do teste negativo
O teste negativo oferece uma série de benefícios, mas também tem algumas desvantagens que precisam ser superadas.
- Um teste negativo completo pode exigir hardware e software adicionais, o que pode aumentar os custos do teste. Para equipes que operam com um orçamento apertado, isso pode ser desvantajoso.
- O teste negativo pode consumir bastante tempo, pois exige a criação de muitos casos de teste para cobrir as várias permutações de entradas que o software enfrentará na produção
- Há limites para a quantidade de situações imprevisíveis que você pode cobrir com testes negativos. De fato, algumas situações podem ser tão inesperadas que os testadores não podem considerá-las.
- A automação de casos de teste negativos é um desafio. No entanto, com o software certo, como o ZAPTEST, o processo é muito mais gerenciável.
Desafios dos testes negativos
O teste negativo é fundamental se você quiser criar um software robusto e confiável capaz de suportar as tensões e os esforços da interação com o usuário. No entanto, há alguns desafios na implementação da abordagem que você precisa conhecer.
Vamos detalhar alguns dos desafios mais persistentes.
1. Identificação de cenários negativos em testes de software
Cobertura suficiente:
Um dos maiores desafios dos testes negativos é garantir que você cubra um número suficiente de cenários inesperados. Há muitos cenários negativos e permutações, portanto, considerar todos eles exige uma abordagem criativa para imaginar como os usuários irão interagir com o software.
Priorização:
Com tantos cenários negativos em potencial para analisar, os testadores nem sempre têm certeza por onde começar. Alguns critérios sólidos para avaliar o que deve ser priorizado incluem a previsão:
- Situações com alta probabilidade de defeitos
- A gravidade do resultado dos defeitos.
2. Projetar casos de teste negativos adequados
Validação de entrada:
Projetar casos de teste negativos sólidos requer uma compreensão bastante abrangente do comportamento, da arquitetura e das limitações do seu sistema. O teste do software requer o uso de entradas e dados cuidadosamente considerados. Embora uma abordagem aleatória possa ajudá-lo a revelar alguns defeitos, ela não é nada comparada a uma abordagem mais precisa e sistemática de testes negativos.
Diversidade de dados:
Dependendo das particularidades do seu sistema, talvez seja necessário fazer testes com um conjunto bastante diversificado de dados. De fato, há muitos formatos de dados diferentes, como números, texto, datas e assim por diante, e cada um deles pode ser aceito pelo seu aplicativo. O desafio aqui envolve a criação de casos de teste que possam levar em conta cada formato e, em particular, cada variação de dados inválidos. Essa situação pode consumir bastante tempo das equipes de teste.
3. Eficiência e automação de testes
Consome muito tempo:
O teste positivo visa validar o software em relação aos resultados esperados. Os testes negativos, por outro lado, devem se aprofundar no inesperado e explorar cenários potenciais. Percorrer um território desconhecido leva mais tempo. Como resultado, se você quiser obter os resultados abrangentes que vêm com os testes negativos, deve estar preparado para investir algumas horas extras.
Complexidade da automação:
O teste negativo pode exigir muito tempo e recursos. Dessa forma, é um trabalho perfeito para a automação de testes de software. No entanto, há algumas complexidades que precisam ser superadas. Por exemplo, projetar casos de teste que definam os resultados esperados para entradas inesperadas requer alguma experiência e conhecimento. Além disso, a estrutura existente para testes de automação pode não ser compatível com os dados inválidos que você deseja enviar para o aplicativo, o que acrescenta uma camada adicional de complexidade.
4. Avaliação dos resultados
Falsos positivos:
Calibrar seus testes para garantir um equilíbrio satisfatório entre precisão e abrangência é uma questão familiar para os testadores negativos. Em algumas situações, o tratamento excessivamente sensível de erros confunde falsamente entradas válidas com entradas negativas, fazendo com que se perca tempo com problemas que não são relevantes.
Resultados ambíguos:
Quando um sistema recebe uma entrada inválida, isso pode resultar em travamentos, erros ou congelamentos. Em muitos casos, esse é um sinal claro de um bug. Entretanto, em outros casos, isso é evidência de um caso de borda não tratado que os desenvolvedores não consideraram. Distinguir entre essas situações discretas é importante, mas investigar a verdadeira causa consome muito tempo.
Gerenciamento de dados:
O teste negativo requer uma quantidade considerável de dados. Essas informações de teste devem ser geradas e mantidas. Em cenários de desenvolvimento com prazos apertados, esse é um trabalho extra que deve ser considerado.
5. Questões organizacionais
Falta de experiência em testes negativos:
Embora os testes negativos sejam populares, muitos testadores não têm as habilidades e a experiência necessárias para implementar esse tipo de teste de forma abrangente. O projeto de determinados casos de teste negativos é menos intuitivo do que o equivalente ao caso de teste positivo. Além disso, a implementação da automação de testes também pode ser desafiadora sem o conhecimento adequado.
Pressão comercial:
As partes interessadas, os testadores e a gerência devem entender a função essencial que os testes negativos desempenham no desenvolvimento de aplicativos robustos. O fato de não se reconhecer sua importância pode levar à pressão para que se concentre nos testes positivos em detrimento dos testes negativos.
Está claro que há vários desafios enfrentados pelas equipes que desejam aproveitar os benefícios dos testes negativos. Entretanto, com a abordagem correta e as ferramentas de teste de software adequadas, é possível superar esses problemas e criar um software que supere as expectativas dos usuários.
Como escrever casos de teste negativos de teste de software
Escrever casos de teste negativos de teste de software requer alguma experiência e pensamento criativo. Aqui está um guia passo a passo para ajudá-lo a criar esses casos de teste críticos.
#1. Estabelecer os seus objectivos
Antes de escrever seus casos de teste negativo de teste de software, você precisa entender por que deseja realizar o teste negativo. Nem todos os aplicativos se beneficiam de testes negativos.
Portanto, entenda o que você deseja alcançar. Os testes negativos são projetados para descobrir erros e falhas resultantes de cenários ou condições inesperados de interação com o usuário.
#2. Descreva os possíveis cenários negativos
Em seguida, é necessário fazer um levantamento dos tipos de cenários negativos que podem ocorrer quando os usuários interagem com o seu software. A pesquisa durante essa etapa é fundamental. Algumas áreas que você deve explorar são:
- Requisitos do sistema
- Casos de uso típicos
- Recursos e funções do aplicativo
Examine essas situações e faça uma lista de cenários em que o aplicativo pode não funcionar como você pretendia.
Em seguida, considere os cenários críticos de validação de entrada. Normalmente, isso envolverá formulários de entrada de dados, campos de login e assim por diante.
Por fim, considere a miríade de maneiras não convencionais pelas quais os usuários podem interagir com o software e os eventos inesperados que podem produzir resultados adversos, como desconexões de rede, desligamentos abruptos do sistema, transferências maciças de dados etc.
Depois de documentar o maior número possível de cenários, é hora de determinar os resultados esperados desses cenários inesperados.
#3. Descreva os resultados esperados
Cada caso de teste deve ter um resultado esperado, e um caso de teste negativo não é diferente. A melhor prática aqui é escrever cada cenário negativo e determinar qual deve ser o resultado.
Alguns dos possíveis resultados podem incluir:
- Mensagens de erro precisas e informativas
- Redirecionamentos apropriados
- Manuseio gracioso do sistema, por exemplo, evitando congelamentos ou falhas no sistema.
#4. Selecione as entradas a serem testadas
Agora, é hora de ver quais entradas você precisa testar. Essas entradas devem ser as que têm maior probabilidade de causar um erro ou outros comportamentos negativos.
Algumas entradas que você precisa incluir são:
- Valores fora do intervalo (valores negativos em um campo de idade, etc.)
- Dados inválidos (letras em um campo numérico, etc.)
- Caracteres ou símbolos inesperados
- Caracteres especiais
- Dados ausentes
#5. Escreva seus casos de teste
Depois de reunir todos os cenários, é hora de escrever os casos de teste. Agora, com os testes negativos, há um número quase ilimitado de casos de teste que você pode escrever. Afinal de contas, esse tipo de teste tem como objetivo descobrir o que acontece quando as pessoas usam o software de maneiras que você não pretendia. No entanto, os prazos determinam que você reduza a lista de possíveis casos para as situações que têm maior probabilidade de causar problemas.
Como sempre, escreva seus casos de teste em linguagem clara, concisa e objetiva. Não há espaço para ambiguidade aqui.
Aqui está um bom formato para seus casos de teste negativos.
- Usar um ID de caso de teste
- Descreva precisamente o que está sendo testado
- Observe todas as condições prévias para seu teste negativo
- Descreva o conjunto de etapas envolvidas
- Estabelecer resultados claros e objetivos
- Anote o resultado real de seu teste
#6. Agendar o teste
Agora, você precisa agendar seus testes. Novamente, é importante priorizar os cenários que têm os resultados adversos mais graves, como acidentes, ou onde os problemas têm maior probabilidade de serem descobertos.
Exemplo de caso de teste negativo
Aqui está um exemplo de um caso de teste negativo.
ID do caso de teste: TC001
Descrição: Verifique se uma mensagem de erro é exibida se o usuário inserir um endereço de e-mail inválido
Condições prévias: O usuário deve estar na página de login do aplicativo
Passos: 1. Digite um endereço de e-mail inválido. 2. Pressione “Login”
Resultado esperado: Quando o usuário pressiona “Login”, ocorre uma mensagem de erro, dizendo “endereço de e-mail incorreto inserido”.
Resultado: Registre o que aconteceu quando “Login” foi selecionado.
Exemplos de cenários negativos em testes de software
Aqui estão alguns cenários típicos que você pode verificar usando métodos de teste negativos.
1. Tipos de dados e campos
Se você já preencheu um formulário on-line, saberá que essas caixas estão configuradas para aceitar tipos específicos de dados. Alguns são apenas números, enquanto outros aceitam datas, texto ou outros tipos de dados.
O teste negativo para essas caixas envolve o envio de dados inválidos, por exemplo, a inserção de letras em um campo numérico.
2. Campos obrigatórios
Novamente, os campos obrigatórios são recursos comuns de formulários e aplicativos. Eles são uma ferramenta útil para garantir que todas as informações críticas sejam coletadas antes que o usuário passe para a próxima etapa.
Um bom caso de teste para esses cenários envolve ver o que acontece quando esses campos são deixados em branco. Em um cenário ideal, uma mensagem de erro deve ser acionada, solicitando que o usuário preencha o campo obrigatório.
3. Número adequado de caracteres
Se você tiver um aplicativo de páginas da Web em teste, poderá ter um campo de dados que exija um número limitado de caracteres. Isso pode ser para nomes de usuários, números de telefone, números de registro e assim por diante.
Você pode criar casos de teste negativos para esses campos escrevendo testes que inserem caracteres acima do máximo permitido para ver como o aplicativo responde.
4. Limites e fronteiras de dados
Alguns formulários terão campos com limites fixos. Por exemplo, se você quisesse que alguém classificasse algo em uma escala de 100, os limites dos dados seriam 1-100.
Crie um caso de teste negativo em que você tente inserir 0, 101 ou outros valores negativos ou positivos de 1 a 100.
Práticas recomendadas para testes negativos
Há várias práticas recomendadas envolvidas na garantia de testes negativos de alta qualidade. Aqui estão algumas dicas para ajudá-lo a chegar lá.
1. Defina suas entradas inválidas:
Examine a documentação de desenvolvimento, os casos de uso e a UI/UX para entender e identificar possíveis entradas inválidas. Fique atento a tipos de dados inválidos, valores extremos, dados ausentes, campos vazios, formatos inesperados e muito mais.
2. Use a análise do valor de contorno:
Conforme mencionado acima, delineie seus valores de limite para encontrar casos extremos que possam causar reações inesperadas.
3. Particionamento de equivalência de funcionários:
Examine seus domínios de entrada e divida-os em partições de equivalência de valores válidos e inválidos. Esse processo ajuda a reduzir o número de casos de teste que você precisará escrever porque, se uma parte equivalente de dados inválidos causar problemas em uma entrada, ela provavelmente será representada em toda a classe.
4. Imitar usuários ruins:
O teste positivo verifica o comportamento esperado do usuário. O teste negativo explora o que acontece quando as pessoas fazem mau uso do seu aplicativo. Portanto, pense nos diferentes cenários em que isso pode acontecer e replique-os em seus casos de teste.
5. Deixe que o risco e o impacto orientem seus testes:
Nenhum testador tem tempo ilimitado. Em algum momento, você precisará fazer escolhas difíceis, pois não é possível testar (ou mesmo saber) todos os resultados inesperados. Quando você precisar decidir quais tipos de testes negativos executar, priorize as áreas que trarão mais riscos ou impacto negativo para o seu produto.
6. Verificação do tratamento de erros:
Certifique-se de que o tratamento de erros faça parte de seus testes, verificando se as mensagens de erro são úteis e precisas.
7. Automatize o máximo possível:
A automação é hábil em lidar com tarefas mundanas e repetitivas. No entanto, os testes negativos ainda exigem uma abordagem manual para testes exploratórios e descoberta de casos extremos.
As melhores ferramentas de teste negativo para 2024
Embora o teste negativo de software seja comum em todo o setor, há uma falta de ferramentas distintas para o trabalho. Um grande motivo para isso é a natureza versátil dos testes negativos. Além disso, muitas das mesmas ferramentas usadas para testes positivos funcionam para testes negativos quando você ajusta os dados de entrada.
ZAPTEST é a melhor ferramenta para testes negativos devido à sua natureza versátil e modular. É fácil de usar e personalizável e, graças aos recursos multiplataforma e entre aplicativos, oferece uma flexibilidade difícil de ser superada.
Testes orientados por dados e
testes de mutação
tornam o ZAPTEST perfeito para testes negativos. Além disso, graças à sua RPA é possível simular usuários do mundo real, reutilizar testes e criar relatórios e documentação com facilidade. Em suma, a capacidade do ZAPTEST de executar software de automação de software de última geração e software de automação de processos robóticos o torna um local único para qualquer tarefa de automação, incluindo testes negativos.
Considerações finais
Os testes negativos em testes de software ajudam as equipes a entender como o aplicativo lidará com entradas inesperadas e dados inválidos. Enquanto o teste positivo verifica se o software funciona conforme o esperado, o teste negativo de software ajuda a descobrir o que acontece quando os usuários selecionam entradas e dados incorretamente. Ambas as abordagens são importantes se você quiser um aplicativo sólido e robusto que possa lidar com as tensões e os esforços de diversas interações com o usuário.
