O que é validade de conteúdo? (definição e #038; exemplo)

O termo validade de conteúdo refere-se a quão bem uma pesquisa ou teste mede o construto que pretende medir.

Por exemplo, suponha que um professor queira testar o conhecimento geral de estatística básica de seus alunos. Seu teste teria validade de conteúdo se:

• O teste cobre todos os tópicos elementares de estatística que ele ensinou em sala de aula.
• O teste não cobre tópicos não relacionados, como história, economia, biologia, etc.

Um teste carece de validade de conteúdo se não cobrir todos os aspectos de um conceito que pretende medir ou se cobrir tópicos não relacionados ao conceito.

Quando a validade de conteúdo é usada?

Na prática, a validade de conteúdo é frequentemente utilizada para avaliar a validade de testes que avaliam o conhecimento de conteúdo. Exemplos incluem:

Exemplo 1: Exame final de estatística

Um exame final no final de um semestre para um curso de estatística teria validade de conteúdo se abrangesse todos os tópicos abordados no curso e excluísse todos os outros tópicos irrelevantes.

Exemplo 2: licença de piloto

Um exame que teste se os indivíduos têm ou não conhecimento suficiente para adquirir sua licença de piloto teria validade de conteúdo se incluísse questões que abrangessem todos os possíveis tópicos abordados em um curso piloto e excluísse todas as outras questões que não são relevantes para a licença.

Exemplo 3: Licença imobiliária

Um exame que teste se os indivíduos possuem ou não conhecimentos suficientes para obter uma licença imobiliária teria validade de conteúdo se abrangesse todos os tópicos que deveriam ser compreendidos por um agente imobiliário e excluísse todas as outras questões irrelevantes.

Em cada situação, a validade de conteúdo pode ajudar a determinar se um teste cobre todos os aspectos do construto que pretende medir.

Como medir a validade do conteúdo

Num artigo de 1975 , CH Law desenvolveu a seguinte técnica para avaliar a validade de conteúdo:

Etapa 1: Colete dados de especialistas no assunto.

Lawshe propôs que cada especialista no assunto (PME) em um painel respondesse à pergunta:

“A habilidade ou conhecimento medido por este item é “essencial”, “útil, mas não essencial” ou “não necessário” para realizar o trabalho?

Cada PME deve fornecer esta resposta a cada pergunta de um teste.

Etapa 2: Calcule a taxa de validade do conteúdo.

A seguir, Lawshe propôs a seguinte fórmula para quantificar a taxa de validade de conteúdo de cada questão do teste:

Razão de validade de conteúdo = (n _e – N/2) / (N/2)

Ouro:

• n _e : O número de especialistas no assunto indicando “essencial”
• N: O número total de painelistas de PMEs

Se a taxa de validade de conteúdo de uma determinada questão cair abaixo de um determinado valor crítico, é provável que a questão não esteja medindo o construto de interesse tão bem quanto deveria.

A tabela seguinte apresenta os valores críticos de acordo com o número de PMEs painelistas:

O índice de validade de conteúdo, denominado CVI, é a taxa média de validade de conteúdo de todas as questões de um teste. Quanto mais próximo o IVC estiver de 1, maior será a validade de conteúdo global de um teste.

O exemplo a seguir mostra como calcular a validade de conteúdo para um determinado teste.

Exemplo: medir a validade do conteúdo

Suponha que pedimos a um painel de 10 juízes que avalie 6 itens em um teste. As caixas verdes na tabela a seguir indicam quais juízes classificaram cada elemento como “essencial”:

A taxa de validade de conteúdo para o primeiro elemento seria calculada da seguinte forma:

Razão de validade de conteúdo = (n _e – N/2) / (N/2) = (9 – 10/2) / (10/2) = 0,8

Poderíamos calcular a taxa de validade de conteúdo para cada elemento da mesma maneira:

Pela tabela de valores críticos, podemos perceber que um item é considerado como tendo validade de conteúdo para um painel de 10 juízes apenas se tiver valor de CVR superior a 0,62.

Para este teste específico, apenas três dos itens excedem este limite.

Por fim, também podemos calcular o índice de validade de conteúdo (IVC) de todo o teste como a média de todos os valores de CVR:

IVC = (0,8 -0,2 + 1 + 0,8 + 0,6 + 0) / 6 = 0,5

Este valor de IVC é bastante baixo, indicando que o teste provavelmente não está medindo o conceito de interesse tão bem quanto poderia.

Seria recomendado remover ou modificar itens com valores baixos de CVR para melhorar a validade geral do conteúdo do teste.

Validade de conteúdo vs. Validade facial

A validade de conteúdo é diferente da validade facial , que ocorre quando uma pesquisa ou teste parece válido pelo seu valor nominal tanto para as pessoas que o respondem quanto para aqueles que o administram.

A validade facial é uma forma menos técnica de avaliar a validade de um teste e é frequentemente usada simplesmente como uma forma rápida de detectar se um teste precisa ou não ser modificado de alguma forma antes de ser usado.