Validez

1. 1
Validez
Sergio R. Muñoz, Ph.D.
[email protected]
Definición:
• Hasta 1980:
“Es la medida en que un test mide lo que pretende
medir?”
• Después 1980 (Messick):
“Que dice de la persona un score igual a X?”
“Que inferencias se pueden hacer sobre la persona
basándome en los resultados del test?”
“Que tanta confianza tengo en relación a esas
inferencias?”

2. 2
Definición:
“Validez no es una propiedad del test ni una
evaluación de el, sino que el significado del
score del test.
Estos scores son función no solo de los ítems o de las
condiciones de estimulo, sino que también de las
personas que responden y del contexto de la
evaluación.
En particular, lo que necesita ser validado es el
significado o la interpretación del score; tanto como
cualquier implicación de la acción que ese significado
implica.”
Messick, 1995
• No se valida un test
• Se valida un usopara el cual se ha puesto
el test
• La validez depende del test, sujeto, y
circunstancias
• Un test puede ser valido para un grupo o
en un ambiente, e invalido para otros
Definición:

3. 3
Ejemplos:
1. Escalas de alcoholismo pueden ser no
validas en población Mapuche
2. Las escales de maltrato infantil pueden
ser no validas NSE alto
Definición:
• “Acuracidad” es a veces usado como
sinónimo
• Usemos la analogía de un tiro al blanco

4. 4
“Inaccurate”:
“Accurate”:

5. 5
• “Acuracidad” a veces usado como sinónimo
• Usar analogía con tiro al blanco
• Puede ser apropiado si hay un verdadero “gold
standard”
Ej, resultados de lab, hallazgos físicos
• Raramente verdadero para escalas
• Muchos blancos
Diferentes grupos
Diferentes circunstancias
Definición:
Confiabilidad y Validez

6. 6
• Confiabilidad da el limite de la validez:
• Validez máxima posible = sqrt(Confiabilidad)
Confiabilidad y Validez
‘Tipos’ de Validez

7. 7
Tipos de Validez
• Hasta 1980, la validez se reconocía como la
valides de las ‘3 Cs’:
– Validez de Contenido
– Validez de Criterio
– Validez de Constructo
• Con la nueva definición de validez, esta
distinción desaparece
– Todas las pruebas de validez responden a la misma
pregunta:
– “Que me dice de la persona este score?”
Estas fuentes de evidencia pueden iluminar
distintos aspectos de validez, pero no
representan distintos tipos de validez.
La validez es un concepto unitario.
Es el grado para el cual toda la evidencia
acumulada apoya la interpretación de los
puntajes de la escala para el propósito para el
cual fue construida.
Tipos de Validez

8. 8
Validez de Constructo
• Que es un constructo?
– Atributos o conceptos o características que
no pueden observarse directamente
– Que es lo que se ve:
• Efecto en comportamientos medibles
• Relaciones entre variables
– Ej: depresión, inteligencia, ansiedad, muchos
diagnósticos
• Involucra probar hipótesis acerca de los
conceptos
• Si el estudio tiene resultados positivos:
– Las hipótesis sobre el concepto se refuerzan
– El test da mas confianza
• Si el resultado es negativo
– Puede que la hipótesis este errónea
– Puede que el test sea pobre
– Ambas
Validez de Constructo

9. 9
• Malas noticias: probar la validez nunca
queda completa
• Siempre se puede aprender mas sobre el
significado de los scores
– Con diferentes grupos
– En diferentes circunstancias
• Buenas noticias: todos los estudios con
escalas son estudios de validez
Validez de Constructo
1. Evidencia basada en el contenido del
test
•Relevancia de Contenido
•Cobertura del Contenido
Validez de Constructo

10. 10
Tipos de Validez:
1. Evidencia basada en contenido del test
2. Evidencia basada en los procesos de
respuesta
Procesos de Respuesta:
•Sesgos
•Entender los ítems
•Trabajando las formas de responder

11. 11
1. Evidencia basada en contenido del test
2. Evidencia basada en los procesos de
respuesta
3. Evidencia basada en la estructura interna
Tipos de Validez:
Estructura Interna:
•Grado en el cual las componentes
internas del test se parean con el
constructo definido
•Gente con la misma cantidad del
“concepto” obtienen scores similares?

12. 12
•Constructos definidos por pareo:
–Los ítems se agrupan juntos como se ha
hipotetizado?
análisis factorial confirmatorio
•Similitud de las respuestas:
–Los ítems se comportan similarmente en
diferentes grupos (hombres/mujeres, grupos
culturales
Estructura Interna:
1. Evidencia basada en contenido del test
2. Evidencia basada en los procesos de respuesta
3. Evidencia basada en la estructura interna
4. Evidencia basada en la relación con otras
variables
Tipos de Validez:

13. 13
Relación con otras variables
Se corresponde con lo que se ha llamado:
-Validez de Criterio (concurrente y predictiva)
-Validez Convergente
-Validez Discriminante
•Correlación con otras escalas
Relación con otras variables

14. 14
Correlación con otras escalas:
• El nuevo test Xse correlaciona con otras
escalas existentes?
– Se desea algún grado de correlación
– No tan alto ya que el nuevo test puede ser
innecesario
– Generalmente se espera un nivel de
correlación moderada
• Mejor si se hipotetiza una magnitud de
correlación a priori
(….):
• Cual es la razón de desarrollar un test si
ya existe uno?
• Varias razones:
– El test existente con cubre totalmente el
concepto
– Muy caro
– Muy invasivo
– Muy demoroso en su aplicación
– Quiero mi nombre en el test

15. 15
• Correlación con otras escalas
•No correlación con constructos no
relacionados
Correlación con otras escalas:
Sin relación con otros Constructos:
• Si el nuevo test mide X, debiera este
correlacionarse con otros constructos?
– El test de ansiedad debiera correlacionarse
con autoestima?, depresión?
– El test de habilidades matemáticas debiera
correlacionarse con la habilidad de lectura?

16. 16
• Correlación con otras escalas
• No correlación con constructos no
relacionados
•Estudios de comparación de grupos
Relación con otras variables
Estudios de comparación de
grupos:
• Grupos extremos
– Pacientes vs. no-pacientes
– Problemas:
• En algunos casos, depende de la opinión de
expertos”
• Pruebas Clínicas diseñadas para grupos medios
• Estudios antes-despues
– Antes y después de un tratamiento
– Problema:
• Asume que el tratamiento es efectivo

17. 17
Validez:
•No hay una prueba estadística única
•Se basan en el tipo de estudio
-Correlacional – familia de correlaciones
-Comparación de grupos – familia ANOVA
Preguntas?