Evaluación del impacto de un servicio de asistencia técnica educativa en las variaciones de los puntajes SIMCE de las escuelas asesoradas

Abstract

El presente trabajo estudia el impacto de la asistencia técnica educativa de una ATE determinada en las variaciones de los puntajes SIMCE, lenguaje y matemáticas, de las escuelas tratadas por la ATE en algún momento entre los años 2008 y 2011. Se consideran los resultados en la prueba estandarizada de los 4° básicos. Para el estudio se utiliza un diseño cuasi-experimental, ya que permite abordar situaciones en que la asignación del tratamiento no es aleatoria. El modelo seleccionado es el de diferencias en diferencias, debido a que es la mejor forma de tratar el sesgo de selección en este caso, y permite limpiar los efectos de características no observables invariantes en el tiempo. Para la aplicación de tal modelo se necesita un grupo de control, el cual fue generado mediante la metodología de propensity score matching. Esta última elimina el sesgo asociado a heterogeneidad observable. Luego, se aplica el modelo de diferencias en diferencias siendo estimado bajo tres metodologías diferentes, las cuales son: mínimos cuadrados ordinarios, efectos fijos y efectos aleatorios. En las tres estimaciones se aplican 4 modelos distintos. El primero de ellos sin variables de control, y el resto controlando por factores externos al programa. Los resultados de la estimación señalan que el impacto promedio del tratamiento ATE en lenguaje y matemáticas no es significativo. Si se considera en el modelo la duración del tratamiento en las escuelas entonces se encuentran efectos positivos (estadísticamente no significativos) para intervenciones de 2 ó más años. Por otro lado, se establece que se requiere de un periodo mínimo de tratamiento en las escuelas para generar un impacto positivo en los niveles de logro del grupo de tratamiento. La implementación del servicio por un sólo año genera efectos negativos, estadísticamente no significativos. Para estudios futuros de evaluación de impacto de servicios ATE se recomienda incorporar la variable duración de la intervención. Se debe contar con un número importante de escuelas para una duración del tratamiento dada de tal manera de aumentar la validez externa.