Identificando resultados en programas sociales: Diagnósticos, análisis y propuestas a los instrumentos asociados a la evaluación de resultados en programa “acción” de FOSIS

Abstract

Este estudio, realizado con la colaboración del equipo del programa ACCIÓN del Fondo de Solidaridad e Inversión Social (FOSIS), tiene por objeto analizar la medición de resultados de la intervención. En ACCIÓN los efectos del programa no son necesariamente tangibles, pues se busca activar el capital humano, físico y social de sus usuarios para fortalecer habilidades que les permitan enfrentar la vulnerabilidad en la que viven. Debido a que cada familia define soluciones en torno a sus propios diagnósticos, cada experiencia es muy distinta entre sí. Actualmente se aplica la Encuesta de Habilitación al inicio (Línea Base, LB) y al final de la intervención (Línea Salida, LS). Esta encuesta mide autoestima, relaciones interpersonales, autocuidado y proyección e identifica como avance todos los casos donde el puntaje final es mayor al inicial, sin importar la magnitud de aquel avance, mientras este sea mayor que cero. Así, este estudio busca proponer mejoras al mecanismo de medición y extraer información relevante a partir de los datos disponibles para la gestión del programa y su evaluación. Para ello, se extraen los datos socioeconómicos de los usuarios desde la Base de Datos SNU de ACCIÓN (BBDD_SNU) y los valores finales de la encuesta. Al no contar la BBDD_SNU con el detalle de la encuesta pregunta a pregunta, se decide transcribir encuestas disponibles solo en formato físico, transcribiendo en total más de 75.000 valores. A partir de los datos se cuestiona el criterio de avance utilizado actualmente, generando la métrica avanza, retrocede, se mantiene para diferenciar de forma efectiva los distintos resultados. Para disminuir sesgos presentes en la medición al inicio de la intervención, como por ejemplo cuando el usuario obtiene puntajes muy cercanos al máximo debido a que no devela sus problemáticas, ya sea por poca confianza en el encuestador o por niveles bajos de autocrítica, se propone complementar la medición del valor LB con una segunda encuesta al final de la intervención, entorno a la percepción del usuario sobre sí mismo al inicio del programa. Se identifica el cómo se relacionan las variables entre sí y cuáles de ellas logran o no discriminar avances, entre las que destacan las variables etnia, urbanidad, composición familiar, situación laboral y nivel de participación. Además, se propone la transcripción completa de los datos en futuras versiones, en especial para identificar y evitar posibles comportamientos fraudulentos por parte de quienes se adjudican la licitación de la ejecución del programa. Finalmente, se elabora una propuesta en torno a las preguntas que debieran mantenerse o eliminarse de la Encuesta de Habilitación, en función de su capacidad de discriminar entre valores LB y LS, y en torno a si sus valores LB son cercanos al máximo, además de puntualizar aquellas que cuentan con redacción confusa.