Estatísticas de provas de concurso: como interpretar sem cair em armadilhas

Quem estuda para concurso convive com números o tempo todo: assuntos mais cobrados, notas de corte, percentual de acerto em questões, relação candidato-vaga. Bem usados, esses números ajudam a priorizar o estudo. Mal interpretados, levam a decisões ruins, como abandonar um assunto que pode cair ou se desesperar com uma nota de corte que não se aplica ao seu concurso.

Este artigo apresenta um conjunto de perguntas para avaliar qualquer estatística sobre provas e mostra como produzir os seus próprios números a partir de fontes oficiais. Não traz dados de concursos específicos: o objetivo é ensinar a ler os dados que você encontrar.

Primeira pergunta: de onde vem o número?

Antes de qualquer análise, descubra a origem do dado. Ele foi publicado pela banca ou pelo órgão, em edital, comunicado ou resultado? Ou foi calculado por terceiros a partir dessas fontes? Ou é uma estimativa sem origem clara?

Dados oficiais, como número de inscritos, gabaritos e listas de classificação, são a base mais confiável. Números calculados por terceiros podem ser úteis, mas dependem do método usado, que nem sempre é explicado. Estimativas sem fonte devem ser tratadas com muita cautela.

Segunda pergunta: qual é a amostra?

Uma lista de "assuntos mais cobrados" só faz sentido se você souber em quais provas ela se baseia. Algumas perguntas ajudam:

• Quantas provas foram analisadas?
• De quais bancas, cargos e anos?
• As provas são parecidas com a que você vai fazer?

Uma lista baseada em poucas provas pode refletir o acaso, e não um padrão. Uma lista baseada em provas de cargos muito diferentes do seu pode não se aplicar ao seu caso. Quanto mais parecida a amostra com a sua prova, mais útil a informação.

Terceira pergunta: qual é o recorte?

A forma como os assuntos são agrupados muda o resultado. Se "direito administrativo" aparece como um único bloco, ele tende a parecer muito cobrado. Se for dividido em atos administrativos, licitações, agentes públicos e outros tópicos, cada parte parecerá menor. Nenhum dos dois recortes está errado, mas eles levam a conclusões diferentes.

Ao comparar estatísticas, verifique se o recorte é o mesmo. Idealmente, use o conteúdo programático do edital como referência, como sugerido em como ler edital de concurso.

Quarta pergunta: o passado prevê o futuro?

Estatísticas de provas anteriores mostram o que já foi cobrado. Elas não garantem o que será cobrado. O conteúdo programático pode mudar, a legislação pode ser atualizada e a banca pode variar a ênfase.

Use a frequência histórica para priorizar, não para excluir. Um assunto pouco frequente ainda pode aparecer; a diferença é que ele merece menos tempo do que um assunto frequente, não tempo nenhum.

Notas de corte: cuidados especiais

Notas de corte de concursos anteriores ajudam a ter uma referência de desempenho, mas exigem cuidado.

Cada concurso é um concurso

A nota de corte depende do número de vagas, da dificuldade da prova, das regras de pontuação e do conjunto de candidatos. Uma mudança em qualquer um desses fatores pode alterar bastante o resultado.

Atenção às regras de pontuação

Em provas com penalidade por erro, como as de certo ou errado em que uma resposta errada anula uma certa, a nota final é calculada de forma diferente. Comparar notas de provas com regras diferentes pode ser enganoso. Veja Cebraspe e a penalidade por erro.

Notas por lista

Quando há listas separadas, como ampla concorrência e reservas previstas em lei, as notas de corte podem ser diferentes em cada uma. Verifique a qual lista o número se refere.

Média, mediana e casos extremos

Algumas estatísticas resumem um conjunto de valores em um único número. Vale lembrar a diferença entre dois resumos comuns:

• Média: a soma dos valores dividida pela quantidade. É sensível a valores extremos.
• Mediana: o valor do meio, quando os dados estão ordenados. É menos afetada por valores extremos.

Se você vir uma "média de acertos" em um grupo de questões, lembre-se de que ela pode ser puxada para cima ou para baixo por poucos casos. Sempre que possível, olhe também a distribuição.

Correlação não é causa

Uma armadilha frequente é concluir que algo causa aprovação só porque aparece junto com ela. Se muitos aprovados relatam usar determinado método, isso não prova que o método causou a aprovação: pode ser que pessoas com mais tempo disponível, por exemplo, tanto usem o método quanto sejam aprovadas.

Há também o viés de sobrevivência: ouvimos mais os relatos de quem passou do que de quem usou o mesmo método e não passou. Para avaliar métodos de estudo, prefira pesquisas controladas, como as reunidas na revisão de Dunlosky e colaboradores (2013), que compararam técnicas de aprendizagem com base em evidências experimentais.

Produzindo as suas próprias estatísticas

A forma mais confiável de usar números no estudo é produzi-los você mesmo, a partir de fontes oficiais.

Frequência de assuntos

Escolha provas oficiais de concursos parecidos com o seu, classifique cada questão por assunto do edital e conte as ocorrências. Você saberá exatamente qual é a amostra e qual é o recorte. Veja o passo a passo em questões de provas anteriores.

Taxa de acerto por assunto

Ao resolver questões, registre acertos e erros por assunto. Com o tempo, você terá uma taxa de acerto por tópico. Assuntos frequentes com taxa baixa são as prioridades mais claras.

Evolução no tempo

Acompanhe a taxa de acerto ao longo das semanas. Uma melhora consistente mostra que o método está funcionando; uma estagnação indica que é hora de mudar a abordagem, por exemplo incluindo mais recuperação ativa.

Cuidados com amostras pequenas

Se você resolveu poucas questões de um assunto, a taxa de acerto pode variar muito com uma única questão. Espere acumular um número razoável de questões antes de tirar conclusões firmes.

Onde encontrar dados oficiais

Os dados mais confiáveis costumam estar na página do concurso, no site da banca organizadora. Ali normalmente ficam o edital e suas retificações, as provas aplicadas, os gabaritos preliminares e definitivos, os resultados e, em alguns casos, a relação de inscritos por cargo. O Diário Oficial também publica atos importantes, como a homologação do resultado.

Ao usar esses documentos, anote a data de acesso e o nome do arquivo. Isso permite refazer a análise depois e evita confundir versões, por exemplo um gabarito preliminar com o definitivo, que pode trazer questões anuladas ou com resposta alterada após os recursos.

Erros comuns

• Confiar em listas sem fonte: sem saber a amostra, o número diz pouco.
• Excluir assuntos raros: priorize, mas não abandone.
• Comparar notas de corte de regras diferentes: a pontuação muda tudo.
• Copiar métodos só por relatos de aprovados: relatos não são evidência controlada.
• Tirar conclusões de poucas questões: amostras pequenas oscilam muito.

Uma rotina simples de análise

Para não transformar a análise em um projeto sem fim, defina uma rotina. Uma possibilidade:

1. No início da preparação, faça a análise de frequência com provas oficiais.
2. Ao longo do estudo, registre acertos e erros por assunto.
3. Periodicamente, revise as prioridades com base nos dois registros.
4. Quando sair um novo edital, compare o conteúdo programático e atualize a análise.

Assim, os números servem ao estudo, e não o contrário.

Conclusão

Estatísticas de provas são úteis quando você sabe de onde vêm, qual é a amostra, qual é o recorte e quais são os limites. Prefira números oficiais e, sempre que possível, produza os seus próprios a partir de provas e gabaritos publicados. Use-os para priorizar, nunca para excluir. Para transformar as suas prioridades em revisões frequentes, conheça os planos do MemorizeCards e explore o catálogo de baralhos.