Confiabilidade e validade dos testes Evalart

Na Evalart, seguimos um procedimento rigoroso e fundamentado para garantir a validade e confiabilidade de nossos testes psicométricos. Abaixo será apresentado um resumo dos aspectos mais importantes que nós consideramos para a elaboração de um teste psicométrico.

1. Seleção exaustiva dos itens e fatores: A primeira coisa que fazemos é garantir a validade de conteúdo, que se refere à fundamentação teórica e empírica das escalas e do item. Isto significa que têm de ser apoiados por deduções teóricas obtidas de estudos e/ou teorias sobre a construção a ser medida (Magnusson, 1972). Nunnally e Bernstein (1994) defendem que o desenvolvimento de um teste deve ser baseado no princípio da parcimônia, tanto para o conteúdo quanto para a estrutura final (comprimento). Isso implica cobrir o máximo de informações possível, com a menor quantidade possível de fatores e itens que possam explicar a construção. Além disso, deve-se adequar o comprimento e duração do teste, dependendo da população-alvo. No caso de testes de personalidade, a redação dos itens deve mascarar o conteúdo a ser avaliado para evitar o efeito de desejabilidade social.
2. Escolha um critério para determinar os itens que serão utilizados e a ponderação dada às diferentes faixas de cada fator. Normalmente nós selecionamos um grupo normativo de pelo menos 100 e com base em seus percentuais obtemos uma estimativa dos intervalos que consideramos em cada fator.
3. Calcule a coerência interna do primeiro conjunto de dados, obtendo: o coeficiente alfa de Cronbach total, o coeficiente alfa de Cronbach por fator e o coeficiente alfa de Cronbach quando um item é eliminado. Esse coeficiente estatístico refere-se à média das correlações entre os itens, separando a variância aleatória (efeito de variáveis não controladas) da variância verdadeira. Seguindo Nunnally e Bernstein (1994), garantimos que o coeficiente alfa de Cronbach deve ser de pelo menos 0,7. O que é um valor adequado para fins de pesquisa.
4. Avaliar a validade do critério, determinada pela correlação entre a pontuação do teste e um determinado critério externo, considerado uma medida fiável da construção. Normalmente consideramos o desempenho dos candidatos como um critério válido, pedindo a cada cliente que nos dê uma classificação honesta de cada candidato com base no seu desempenho (Anastasi, 1973).
5. Avaliar a validade da construção para determinar se a construção é unitária ou tem vários subfactores (Hernández-Nieto, 2011). Nós calculamos isso obtendo uma matriz de correlações entre os fatores, que mostra as correlações entre os diferentes fatores. Seria de esperar que, se o teste contiver fatores diferentes, as correlações entre eles não sejam significativas. Uma vez realizada esta análise, deve confirmar-se se os fatores teoricamente hipotéticos correspondem aos obtidos por métodos estatísticos (Yela, 1996).

Se você estiver interessado na pesquisa e na validade/confiabilidade de um teste específico do catálogo, por favor, entre em contato conosco.

Referências bibliográficas

Hernández-Nieto, R. (2011). Instrumentos de recolección de datos en ciencias sociales y ciencias biomédicas. Venezuela: Universidad Los Andes.
Magnusson, D. (1972). Teoría de los Test. México: Trillas.
Nunnally, J. y Bernstein, I. (1995). Teoría Psicométrica. México: McGraw-Hill.
Yela, M. (1996). Los Test y el Análisis Factorial. Psicothema, 8, 73-88. Obtenido de: http://www.psicothema.com/psicothema.asp?id=654