Introducción

En este artículo mostraré los resultados del Plan Nacional para la Evaluación de los Aprendizajes (Planea) aplicada por el Instituto Nacional para la Evaluación de la Educación (INEE) de México a estudiantes de preescolar al final del ciclo escolar 2017-2018.

Como consecuencia de una reforma constitucional, en Mayo de 2019 se decretó la disolución del INEE. Esto tuvo como consecuencia que, al momento de escribir esto, la publicación de resultados de evaluación fue interrumpida y no es claro si será retomada. Los informes con los resultados de varias evaluaciones a cargo del INEE no se han publicado, incluidos los de Planea Preescolar del 2018.

Mi intención con este artículo es ayudar a difundirlos, aprovechando que el INEE hizo públicas todas las bases de datos de sus evaluaciones.

Las bases de datos del INEE pueden encontrarse en el siguiente enlace:

https://www.inee.edu.mx/evaluaciones/bases-de-datos/

Y la base de datos de Planea Preescolar del 2018 se encuentra en este enlace:

https://www.inee.edu.mx/evaluaciones/planea/base-de-datos-planea-aplicacion-a-tercer-grado-de-preescolar-del-ciclo-escolar-2017-2018/

Todo el código usado en este artículo, incluido el markdown para generarlo, se encuentra en el siguiente repositorio de GitHub. Este código permite replicar lo aquí publicado:

https://github.com/jboscomendoza/rpubs/tree/master/planea00_2018

En este artículo encontrarás una buena cantidad de siglas y explicaciones de diferentes aspectos técnicos relacionados con esta evaluación, con el propósito que lo aquí presentado sea lo más claro posible.

También es importante que sepas que tengo familiaridad con muchos de los aspectos técnicos porque trabajé en el INEE de octubre de 2014 a febrero de 2019 en la Unidad de Evaluación del Sistema Educativo Nacional. Fue para facilitar mi trabajo allí que escribí el paquete de R usado para realizar las estimaciones que verás más adelante.

Los resultados que encontrarás a continuación son los nacionales, por tipo de servicio de las escuelas, por ruralidad de las localidades en las que se encuentran las escuelas, por sexo y por edad de los estudiante.

Sobre Planea

Planea fue un programa de evaluación a gran escala a cargo del INEE que tenía como misión principal dar cuenta del aprendizaje de los estudiantes mexicanos en educación básica y media superior, a nivel de sistema educativo. Constaba de evaluaciones realizadas a estudiantes del último año de preescolar, primaria, secundaria y bachillerato.

La aplicación de Planea Preescolar del 2018 fue hecha a una muestra representativa de poco más de 2200 estudiantes de preescolar de todo el país, en la que se evaluó su aprendizaje en los campos formativos de Lenguaje y comunicación (LYC) y Pensamiento matemático (PM). Además, se recogió información del contexto de los estudiantes a través de cuestionarios para sus padres, maestros y directores.

Resultados nacionales

El puntaje promedio de LYC y PM es de 500 puntos.

Variable	Grupo	Media	EE	Lim_inf	Lim_sup
LYC	Nacional	500.090	3.197	493.824	506.356
PM	Nacional	500.272	3.578	493.260	507.285

Los puntajes se muestran acompañados con sus intervalos de confianza, que en la gráfica están representados con una linea vertical

Dado que los resultados son estimados a partir de una muestra, hay cierto grado de incertidumbre asociado a ellos que es expresado como el Error Estándar (EE) de la medida, que encontrarás en la tabla. Allí tembián te encontrarás el valor de los límites inferior y superior del intervalo de confianza al 95%.

Para fines prácticos, lo relevante al observar los intervalos de confianza de dos estimadores es su traslape. Si no traslapan, son diferentes estadísticamente.

En nuestro caso, ambas media son estadisticamente iguales.

¿Qué significan estos puntajes?

Por sí mismos, los puntajes promedio no son particularmente informativos, en particular estos que corresponden a toda la población evaluada.

La práctica común en las evaluaciones de INEE era centrar la media de los puntajes en 500 puntos, con una desviación de estándar de 100. Así que la media nacional siempre será de 500 puntos, excepto al comparar resultados de diferentes años

Puede decirse que esta es una práctica heredada del Programa Internacional de Evaluaciones de los Alumnos (PISA) de la Organización para la Cooperación y el Desarrollo Económico (OCDE/OECD), que ha sido adoptada en diferentes evaluaciones internacionales.

Los puntajes de los estudiantes, que se obtienen a partir de un modelo de medición de Teoría de Respuesta al Ítem (TRI/IRT) y estos se expresan originalmente en logits, que tienen un rango teórico de −∞ a +∞

, con media igual a 0.

Estos puntajes, mediante una transformación lineal son ajustados a una media igual a 500 y desviación estándar igual a 100. Esto se hace para simplificar la comunicación de los resultados, al convertirlos a una escala un poco más familiar para un lector ordinario.

Puedes conceptualizar la transformación anterior como análoga a la estandarización a puntajes z

, pues es esencialmente el mismo procedimiento. Transformar de este modo es posible porque los puntajes de los estudiantes tienden a una distribución normal, así que ese 500 es el desempeño de un estudiante mexicano promedio.

Los puntajes son más interesantes cuando los desagregamos por grupos.

Resultados por tipo de servicio

Esta aplicación de Planea se realizó a estudiantes de preescolares de tres diferentes tipo de servicio:

Públicos.
Comunitarios (que también son públicos y se encuentran en localidades rurales de poca población).
Privados.

El puntaje promedio para cada tipo de servicio fue el siguiente.

Variable	Grupo	Media	EE	Lim_inf	Lim_sup
LYC	Comunitaria	433.833	6.226	421.631	446.036
LYC	General Pública	489.486	3.744	482.147	496.824
LYC	Privada	572.309	4.322	563.838	580.780
PM	Comunitaria	439.791	5.565	428.883	450.699
PM	General Pública	489.344	4.363	480.793	497.895
PM	Privada	571.651	5.361	561.144	582.159

Los preescolares privadas tienen puntajes considerablemente más altos en ambos campos formativos que las escuelas públicas, mientras que los preescolares comunitarios tuvieron los puntajes más bajos en ambos campos formativos.

La diferencia entre preescolares privados y los demás servicios es grande. Una desviación estándar más que los públicos y casi una desviación estándar y media más que los comunitarios.

Es decir, un estudiante promedio de un preescolar privado tiene aproximadamente 80% de probabilidad de obtener mejores resultados que un estudiante de preescolar público y 90% de probabilidad de mejores resultados que un estudiante de comunitario.

Lo anterior es muy probablemente el resultado de que las familias de estudiantes de preescolares privados suelen tener el nivel socioeconómico más alto de todos y que este tipo de preescolar tiende a estar mejor equipado y encontrarse en localidades urbanas.

Resultados por ruralidad

Se tiene información del tipo de localidad, rural o urbana, en el que se encuentran los preescolares públicos.

Variable	Grupo	Media	EE	Lim_inf	Lim_sup
LYC	Rural	458.528	10.233	438.471	478.584
LYC	Urbano	498.377	3.977	490.581	506.173
PM	Rural	485.479	6.745	472.260	498.698
PM	Urbano	490.918	5.178	480.769	501.067

Los preescolares en localidades urbanas tienen un puntaje más alto en LYC que los preescolares en localidades rurales, mientras que no diferencia estadísticamente significativa en PM.

Parece que la ruralidad de la localidad tiene mayor relación con el aprendizaje de LYC que de PM. Una posible explicación es que los estudiantes en localidades urbanas tienen un acceso mayor a recursos de alfabetización, tanto en sus hogares, como en sus comunidades.

Resultados por sexo

Los resultados de estudiantes hombres y mujeres fueron los siguientes.

Variable	Grupo	Media	EE	Lim_inf	Lim_sup
LYC	Hombre	503.006	4.177	494.819	511.193
LYC	Mujer	497.939	4.662	488.802	507.077
PM	Hombre	506.604	5.072	496.663	516.545
PM	Mujer	495.413	4.721	486.161	504.665

Aunque los resultados de los hombres son ligeramente superiores, esta diferencia no es estadísticamente significativa. Es decir, no hay diferencia entre ellos.

Este es un resultado interesante, pues desde primaria hasta bachillerato, se presentan diferencias consistente en los resultados entre hombres y mujeres en estos campos formativos. Generalmente, las mujeres tienen mejores resultados en lenguaje y comunicación, y los hombres en pensamiento matemático.

Valdría la pena investigar porqué en preescoalr no hay diferencias entre sexos pero sí los hay en los niveles educativos siguientes.

Resultados por edad

Finalmente, los resultados por edad, expresada en años cumplidos al momento de la evaluación.

Variable	Grupo	Media	EE	Lim_inf	Lim_sup
LYC	4 años	418.925	8.684	401.904	435.946
LYC	5 años	492.522	4.225	484.242	500.802
LYC	6 años	509.246	5.027	499.392	519.100
LYC	7 años	474.000	45.798	384.235	563.765
PM	4 años	362.091	22.926	317.157	407.026
PM	5 años	480.254	4.869	470.709	489.798
PM	6 años	524.739	4.631	515.662	533.816
PM	7 años	494.972	53.881	389.366	600.579

Parece que a mayor edad, los estudiantes obtienen mejores resultados, con excepción de los que tienen siete años.

Los estudiantes de cuatro años tienen los resultados más bajos, mientras que los de seis años, que es la edad normativa para concluir preescolar, tienen los más altos.

Los resultados para estudiantes de 7 años tienen intervalos de confianza muy amplios, lo cual es una consecuencia de tener una muestra pequeña para este grupo de edad. Como los intervalos de confianza de esta media se traslapan con todos los demás, este resultado no es particularmente informativo.

Además, la diferencia en puntajes es más pronunciada en PM que en LYC. Parecer ser que la edad tiene una mayor relación con el aprendizaje de PM que LYC.

Conclusiones

Los resultados presentados aquí son solo una parte de toda la información que se encuentra en la base de datos de Planea Preescolar aplicada en el 2018.

Queda pendiente la estimación de niveles de logro, lo cual ayuda a contextualizar mejor estos puntajes y la relación de los resultados con las variables de contexto. Pero esos serán temas de otros artículos.

Quiero mencionar que el análisis realizado en este artículo es bastante superficial. Los informes de resultados del INEE se caracterizaban por no sólo presentar los resultado de evaluación, sino además presentar interpretaciones de ellos sustentadas en la investigación educativa y comparaciones con otras evaluaciones, nacionales e internacionales.

Creo que la desaparición del INEE ha sido una pérdida considerable para la investigación educativa y por supuesto, que ha afectado a muchas personas que estimo y admiro.

Lo mejor que podemos hacer es utilizar y porpiciar el uso los datos que generó esta institución a lo largo de dieciciete años. Hay una cantidad enorme de información a la que aún podemos sacarle provecho.

Consultas, dudas, comentarios y correcciones son bienvenidas: