Qué mide realmente la medición de dominio
La mayoría de los paneles de "dominio" miden el cumplimiento de una secuencia. La diferencia entre medir una secuencia y medir una afirmación cambia lo que construyes.
Dominio es una de las palabras más sobrecargadas en educación. Se imprime en paneles de control, se incrusta en nombres de productos y se usa para justificar una cantidad enorme de software. Casi ninguno de ellos concuerda en qué se supone que significa una sola celda con dominio alcanzado.
Tira del hilo y encontrarás dos objetos muy distintos escondidos bajo una misma palabra. El primero es una secuencia: un estudiante avanzó por un conjunto de actividades en el orden esperado. El segundo es una afirmación: hay buenas razones para creer que este estudiante puede hacer algo específico, bajo condiciones definidas, y puede repetirlo.
Una cantidad sorprendente de EdTech mide lo primero mientras reporta lo segundo. El registro de actividad es real; la inferencia es decorativa.
Una afirmación tiene refutadores
La prueba más limpia que conozco es preguntar: ¿qué haría que esta celda verde estuviera equivocada? Si puedes responder — “el estudiante fallaría ítems de este tipo con esta dificultad” — tienes una medición. Si no puedes, tienes una barra de progreso con buenas intenciones.
La instrumentación debería convertir a un docente en un mejor argumentador, no en uno más obediente.
Aquí es donde la psicometría justifica su existencia. La Teoría de Respuesta al Ítem (TRI) permite que la dificultad y la discriminación residan en los ítems y no en nuestros supuestos. El Rastreo Bayesiano del Conocimiento (BKT) permite que la creencia se acumule a lo largo de los encuentros en lugar de reiniciarse en cada prueba. Ninguno de los dos es exótico; ambos son, en esencia, una disciplina para ser honestos sobre la evidencia.
Qué cambia esto en el producto
Una vez que el dominio es una afirmación, la interfaz deja de ser una pared de verde y se convierte en un argumento que puedes inspeccionar: la afirmación, la evidencia, la confianza. Un docente puede estar en desacuerdo con ella — lo cual, paradójicamente, es lo que la hace confiable.
El costo es la contención. Mides menos cosas, con más honestidad, y resistes el impulso de reportar un número que no puedes defender. En mi experiencia, ese intercambio siempre vale la pena hacerse, y casi siempre resulta impopular al principio.
Este ensayo abstrae patrones de varios proyectos; no se describe ninguna institución, conjunto de datos ni sistema propietario.