Validade convergente e discriminante
Dois requisitos em espelho: uma medida deve concordar com o que deveria concordar, e deve permanecer distinta daquilo que afirma não ser. A maioria dos instrumentos fracos falha no segundo.
A validade convergente e a validade discriminante são as duas metades de um único requisito. Uma medida deve correlacionar-se com aquilo com que teoricamente deveria, e não deve correlacionar-se de forma demasiado elevada com aquilo de que se supõe ser distinta. Satisfazer uma sem a outra não é um sucesso parcial; é normalmente um sinal de que o construto não é o que afirma ser.
Validade convergente
A evidência convergente mostra que uma medida se alinha com outros indicadores da mesma coisa. Uma nova escala de ansiedade deve correlacionar-se substancialmente com escalas de ansiedade já estabelecidas, com avaliações clínicas e — idealmente — com algo que não seja outro questionário, como medidas fisiológicas ou comportamentos de evitamento observados.
As correlações aqui são geralmente esperadas acima de 0,50, frequentemente acima de 0,70 quando a medida de comparação é um instrumento bem estabelecido para o mesmo construto. Abaixo disso, ou a nova escala ou a comparação está a medir algo diferente.
Existe uma armadilha. Uma correlação de 0,95 com uma escala existente não é um triunfo — significa que o novo instrumento é um reembalamento, e a questão honesta passa a ser o que acrescenta. A validade convergente é um patamar mínimo, não um alvo a maximizar.
Validade discriminante
A evidência discriminante mostra que a medida se mantém separada dos construtos dos quais afirma diferir. É aqui que vivem as falhas mais interessantes.
O padrão repete-se ao longo da literatura. A grit correlaciona-se cerca de 0,84 com a conscienciosidade, o suficiente para que uma meta-análise tenha concluído que acrescenta quase nada à predição académica uma vez controlada a conscienciosidade. A inteligência emocional de autorrelato sobrepõe-se amplamente à estabilidade emocional, extroversão e conscienciosidade combinadas. A variância partilhada ao longo da Tríade Negra desaparece em grande medida quando se tem em conta a Honestidade-Humildade do modelo HEXACO. Em cada caso, o construto foi apresentado como território novo e acabou por ser uma região renomeada de um mapa já existente.
A validade discriminante é também onde os efeitos de método emergem. Se todos os construtos de autorrelato num estudo se correlacionam 0,4 com todos os outros, o fator comum é provavelmente o estilo de resposta do respondente, e não qualquer psicologia partilhada.
O teste que decide
O procedimento decisivo é a validade incremental: introduzir primeiro a medida estabelecida numa regressão, depois a nova, e verificar se a nova explica alguma variância adicional no resultado. Se não o fizer, o construto pode continuar a ser teoricamente interessante, mas o instrumento não está a medir nada que o campo ainda não tivesse.
Este é um padrão exigente e muitas escalas publicadas nunca foram submetidas a ele. Quando o são, o resultado é frequentemente o achado de redundância acima referido. Isso não é um escândalo — é uma poda científica normal — mas significa que a popularidade de um construto não informa sobre se este sobrevive ao teste.
O que muda para um leitor
Quando um teste reporta várias pontuações, a questão útil é se essas pontuações são efetivamente distintas. Quatro dimensões que se correlacionam 0,8 entre si são uma dimensão com quatro rótulos, e um perfil construído a partir delas parecerá diferenciado enquanto transporta quase nenhuma informação independente.
Os instrumentos que reportam as suas correlações entre escalas permitem verificar isso por conta própria. Os instrumentos que apresentam um tipo de quatro quadrantes sem nunca mostrar como os quadrantes se relacionam tornaram essa verificação impossível, o que é geralmente o objetivo.
Ponha à prova
Ler sobre medida é uma coisa. Ver o seu próprio escore com a fonte, a amostra normativa e os limites declarados é outra. Gratuito, sem cadastro.
Continue lendo
- O que é psicometria?A disciplina que determina se uma medida psicológica tem valor real — e a razão pela qual dois testes com perguntas semelhantes podem diferir enormemente no que valem os seus resultados.
- O que é fidedignidade em testes psicológicos?Fidedignidade é a consistência da medição, não sua correção. Um teste pode ser altamente fidedigno e ainda assim medir a coisa errada — razão pela qual é a primeira pergunta a ser feita e nunca a última.
- O que é validade nos testes psicológicos?A validade não é uma propriedade que um teste possui. É um argumento sobre se uma interpretação específica de uma pontuação específica, para um propósito específico, é defensável — e precisa ser reconstruída a cada novo uso.
- O que é validade de construto?A pergunta mais difícil na mensuração: se aquilo que você está medindo existe da forma como você o definiu, e se o seu instrumento o alcança em vez de algo adjacente.
- O que é o alfa de Cronbach — e o que ele não éA estatística mais relatada nos testes psicológicos, e a mais mal interpretada. O alfa não indica que uma escala é unidimensional, e um valor elevado costuma ser sintoma, não virtude.
- Erro padrão de medição: o quanto sua pontuação pode estar erradaToda pontuação carrega uma margem de erro e, na maioria dos testes psicológicos, ela é maior do que as pessoas supõem. Este é o número que indica quando uma diferença é real e quando é apenas ruído.
- Normas e percentis: com o que a sua pontuação é comparadaUma pontuação bruta é ininterpretável por si só. Torna-se significativa apenas em relação a um grupo de referência — e qual grupo foi utilizado é um dos factos mais consequentes e menos divulgados sobre qualquer teste.
- Como um teste psicométrico é realmente construídoDa definição do constructo às normas publicadas, o processo leva anos e descarta a maior parte do que foi investido nele. Conhecer as etapas torna óbvio quais delas um questionário online rápido ignorou.
- O que significa quando um teste é chamado de validado?A palavra não é regulamentada e é usada livremente por produtos que não fizeram nenhum trabalho. Veja o que significa quando tem algum significado, e as quatro perguntas que separam os dois casos.
- Por que a maioria dos testes de personalidade na internet não são confiáveisNão porque sejam desonestos, mas porque as etapas que tornam uma medição confiável são invisíveis, custosas e fáceis de ignorar — e ignorá-las não muda nada na aparência do resultado.
- O que o autorrelato pode e não pode medirOs questionários pedem que você seja o observador de si mesmo, o que funciona melhor para algumas coisas do que para outras. Saber onde o método é forte e onde falha muda a forma como você interpreta qualquer resultado.
- O que significa quando um teste prevê algoUma correlação de 0,30 é um achado robusto na pesquisa de personalidade e uma base fraca para uma decisão sobre uma pessoa específica. Ambas as afirmações são verdadeiras, e a lacuna entre elas é a causa do mau uso dos resultados de testes.
- Triagem não é diagnósticoUm questionário de triagem é construído para identificar o maior número possível de casos, aceitando uma alta taxa de falsos positivos como contrapartida. Interpretar uma pontuação de triagem como diagnóstico inverte aquilo para o qual foi concebido.