Medición en educación: limitaciones de la teoría clásica de los test

Medición en educación

Universidad
Europea
Medición en educación
Prof. Dr. Alejandro Sal de Rellán Guerra

Ve más alláTema 7. Limitaciones de la teoría clásica de los test
ÍNDICE

1. Limitaciones de la TCT

Supuesto de linealidad

1. 1 Supuesto de linealidad
2. 2 Error de medida común
3. Invarianza de las propiedades del test
4. 4. Invarianza de las mediciones
5. 5. Estimación puntual de la habilidad
6. 6. Unidimensionalidad
7. 7. Relación Ítems-Test
8. 8. Tamaño de la muestra

Teoría clásica de los test (TCT) y teoría de respuesta al ítem (TRI)

Índice de dificultad

1. 1. Índice de dificultad
2. 2. Análisis de los distractores
3. 3. Índice de discriminación

veUe
Limitaciones de la
TCTLimitaciones de la TCT
Supuesto de linealidad
La linealidad asume que la relación entre la puntuación verdadera (la verdadera habilidad que posee) y la puntuación
observada en el test es una relación directamente proporcional y constante.
· Esto puede no ser cierto siempre.
En la realidad
relación entre la habilidad y la puntuación observada puede no ser perfectamente lineal.
Esto puede deberse a varios factores, como el formato del test, la dificultad de los ítems ...

Limitaciones de la TCT: Error de medida común

veLimitaciones de la TCT
Error de medida común
La TCT plantea que el error de medición es independiente de la puntuación verdadera de un individuo. Esto implica que el
error de medición se distribuye de manera uniforme en todos los niveles de habilidad.
· En la realidad
error de medición puede variar dependiendo del nivel de habilidad del sujeto evaluado.
· En la práctica es posible que el error de medición no sea igualmente probable en todos los niveles de habilidad. Es más
probable que el error de medición sea mayor en los extremos de la distribución de habilidad y menor en el centro.
Mayor error en mejores (efecto techo) y peores alumnos/as

Limitaciones de la TCT: Invarianza de las propiedades de un test

veLimitaciones de la TCT
Invarianza de las propiedades de un test
· Implica que las propiedades psicométricas de los test (dificultad de los items o la discriminación), deberían ser
independientes de las características de los sujetos evaluados utilizados para calcularlas.
· En la práctica, se ha demostrado que las propiedades de los test pueden variar en función de las características de los
sujetos evaluados.
Un ejemplo claro de falta de invarianza en la TCT es la dificultad de los ítems. En la TCT, se supone que la dificultad de
los ítems es constante y no depende de las características de los sujetos evaluados.

Limitaciones de la TCT: Invarianza de las mediciones

veLimitaciones de la TCT
Invarianza de las mediciones
La TCT no garantiza que, si se mide una misma variable en diferentes personas utilizando el mismo test, las puntuaciones sean
comparables y estén en la misma escala. Esto es debido a:
· Dependencia del nivel de habilidad.
La TCT asume que el error de medición es independiente del nivel de habilidad del sujeto evaluado.
· Dependencia de las características individuales.
La TCT no considera adecuadamente las características individuales de los sujetos evaluados que podrían influir en las
puntuaciones obtenidas.
Por ejemplo, factores como el género, la edad, el contexto cultural o el dominio específico de conocimiento pueden influir en la
forma en que los individuos responden a los items del test.

Limitaciones de la TCT: Estimación puntual de la habilidad

veLimitaciones de la TCT
Estimación puntual de la habilidad
Cuando se utiliza la TCT, se estima la habilidad de un sujeto a partir de su puntuación observada en el test.
" Sin embargo, esta estimación puntual no proporciona información sobre la variabilidad/incertidumbre asociada con dicha
habilidad.
En otras palabras, no se sabe con qué nivel de confianza se puede afirmar que la estimación es precisa.

Limitaciones de la TCT: Unidimensionalidad

veLimitaciones de la TCT
Unidimensionalidad
" La TCT asume que la habilidad del sujeto evaluado puede describirse por una única variable latente.
· Sin embargo, las habilidades que se evalúan en educación son complejas. No pueden ser reducidas a una única
dimensión.
Por ejemplo, un test de lenguaje puede evaluar habilidades como la comprensión lectora, la expresión escrita y la
gramática, que son distintas y no se pueden considerar como una única dimensión.

Limitaciones de la TCT: Relación Ítems-Test

veLimitaciones de la TCT
Relación Ítems-Test
· Vinculada a la idea de unidimensionalidad.
En la TCT, se asume que los items del test son independientes entre sí y que todos los items miden la misma habilidad.
Esto implica que los ítems se seleccionan y se suman para obtener una puntuación total que refleje de manera precisa la
habilidad/característica del sujeto evaluado.
· En la práctica, los ítems pueden estar correlacionados entre sí, lo que significa que la respuesta a un ítem puede estar
relacionada con la respuesta a otros items.
Esta correlación entre los ítems puede indicar que están midiendo aspectos similares de la habilidad/característica en cuestión.

Limitaciones de la TCT: Tamaño de la muestra

veLimitaciones de la TCT
Tamaño de la muestra
· Común para cualquiera de los modelos de medida.
" Cuando se diseña un test, se selecciona una muestra de individuos para participar en el proceso de recolección de datos.
Idealmente, esta muestra debería ser representativa de la población a la cual se desea generalizar los resultados del test. Sin
embargo, en la práctica, es difícil obtener una muestra representativa.
Si la muestra utilizada para desarrollar el test no es representativa de la población objetivo, puede haber una discrepancia
entre las estimaciones de las propiedades del test y la realidad de la población.
CÁLCULO TAMAÑO DE LA MUESTRA

Teoría clásica de los test (TCT) y teoría de respuesta al ítem (TRI)

veUe
Teoría clásica de los
test (TCT) y teoría
de respuesta al ítem
(TRI)Teoría clásica de los test (TCT) y teoría de respuesta al ítem (TRI)
La TRI se considera un complemento útil a la TCR, ya que supone la modificación de varias reglas clásicas que posibilitan
la medición (Embretson & Reise, 2000).
Ambas teorías abordan diferentes aspectos de la medición y tienen sus propias fortalezas y limitaciones.
La TCT
· Se basa en supuestos más simples y se enfoca en la relación entre las puntuaciones observadas y las verdaderas
habilidades de los evaluados.

La TRI: Modelado y Estimación

veTeoría clásica de los test (TCT) y teoría de respuesta al ítem (TRI)
La TRI
Busca modelar la relación entre las respuestas de los evaluados y las características de los items.
Utiliza modelos matemáticos más complejos y sofisticados para estimar las habilidades de los evaluados.
Aborda algunas de las limitaciones de la TCT, como la invarianza de las mediciones y las propiedades del test.
Permite:
· Analizar cómo los ítems funcionan en diferentes grupos y si las propiedades del test se mantienen consistentes en diferentes
contextos.
· Modelar de manera más precisa el error de medición y tener en cuenta su variación en diferentes niveles de habilidad.
· Obtener una medida más precisa.

La TRI: Representación y Herramientas

veTeoría clásica de los test (TCT) y teoría de respuesta al ítem (TRI)
La TRI
Proporciona
o Una representación más precisa y detallada de las habilidades de los sujetos evaluados.
o Herramientas y enfoques más avanzados para la medición.
o Una base más sólida para la evaluación y comparación de las habilidades de los examinados.
Utilizar la TRI junto con la TCT, puede ofrecer una vision más completa y precisa de las habilidades de los individuos.

veUe
Universidad
Europea
Medición en educación
alejandro.salderellan@universidadeuropea.es
Copyright Universidad Europea. Todos los derechos reservados