A qualidade das nossas perguntas, medida

Uma plataforma de treino vale o que valem as suas perguntas. Em vez de o afirmar, esta página publica o que medimos no nosso banco: o defeito que encontrámos, como o corrigimos, o controlo permanente que impede o seu regresso, e o que ainda não está à altura.

  • Redigido e verificado por Jean de Loynes
  • Última verificação
  • Leitura 3 min

Foto: Christin Hume, Unsplash

Cada número desta página provém de uma medição interna datada; a data da última verificação figura no fim da página.

Porque publicamos as nossas medições

Mostrar um número cria uma obrigação: a de o manter exato. É precisamente por isso que o fazemos. Um candidato que prepara um concurso seletivo merece saber com que treina, e um indicador publicado com a sua data vale mais do que qualquer adjetivo.

Tanto quanto sabemos, nenhuma plataforma concorrente publica um indicador de qualidade medido sobre o seu banco de perguntas. Preferimos mostrar os nossos, defeitos incluídos.

O viés de comprimento das opções, medido e corrigido

Um defeito clássico dos testes de escolha múltipla, documentado pela investigação em redação de itens: quando a resposta certa é mais desenvolvida do que as erradas, assinalar sempre a opção mais longa rende pontos sem qualquer conhecimento. Medimos o que rendia essa estratégia nas nossas perguntas em inglês, prova a prova, e depois reescrevemos os distratores de 690 perguntas de origem, com releitura completa linha a linha.

Pontuação da estratégia «assinalar a opção mais longa» nas perguntas em inglês, antes e depois da correção (medições de 30 de julho e 2 de agosto de 2026).
ProvaAntesDepoisAcaso
Competências digitais86,5 %26,9 %25 %
Raciocínio verbal68,5 %29,3 %25 %
Conhecimentos sobre a UE64,7 %30,2 %25 %

O raciocínio numérico, cujas opções são números, não tinha este viés. Viés residual medido em 2 de agosto de 2026 nas 8 línguas principais: de 22,0 % a 31,9 % consoante o par língua/prova, em 44 pares medidos.

Uma salvaguarda permanente, não uma correção pontual

Uma correção sem controlo degrada-se no lote seguinte de conteúdos. O viés de comprimento é por isso medido todas as semanas por um controlo automático em integração contínua, em cada par língua/prova das 8 línguas principais. Se a estratégia da resposta mais longa ultrapassar 35 % (o acaso vale 25 %), o controlo passa a vermelho e bloqueia: esse limite está calibrado para distinguir um defeito real do ruído estatístico.

O mesmo dispositivo de controlo contínuo verifica também outros invariantes do conteúdo: paridade das oito línguas de interface, coerência dos parâmetros das provas com a base oficial, unicidade das perguntas de FAQ entre páginas.

O que ainda não está à altura

Publicar medições obriga também a publicar o que elas revelam. Situação conhecida em 4 de agosto de 2026:

  • As 10 línguas secundárias do banco ainda têm os distratores curtos de origem: a correção do viés de comprimento cobre por agora apenas as 8 línguas principais.
  • Restam algumas explicações de resposta redigidas em inglês em perguntas públicas em francês; o lote de limpeza está planeado.
  • A correção do conteúdo é um trabalho contínuo: as sinalizações dos utilizadores (botão de sinalização por baixo de cada pergunta) alimentam uma fila de revisão.

As nossas regras de escrita

As correções pontuais não bastam sem regras de escrita. Estas aplicam-se a cada nova pergunta:

  • Comprimento das opções aproximadamente constante dentro de uma pergunta: a regra clássica da redação de itens (taxonomia de Haladyna e Downing, 1989).
  • Cada afirmação oficial é verificada na fonte primária antes da publicação; uma citação não verificável é retirada, não publicada.
  • Distratores que ensinam: as respostas erradas descrevem realidades vizinhas e confundíveis, não absurdos.
  • Os parâmetros das provas mostrados no site vêm da base oficial dos avisos de concurso, nunca de valores copiados.

Conteúdo elaborado a partir das campanhas de medição internas de 30 de julho e 2 de agosto de 2026 (controlo automático semanal desde então). Última verificação dos parâmetros oficiais: . Última modificação da página: .

  • Redigido e verificado por Jean de Loynes

Fontes

  • Haladyna, T. M. e Downing, S. M. (1989), A taxonomy of multiple-choice item-writing rules, Applied Measurement in Education
  • Campanhas de medição internas da Erudiam (2026-07-30 e 2026-08-02), controlo semanal na CI