Validación Final PCR Honduras HO-L1062

7/26/2019 Validacin Final PCR Honduras HO-L1062

1/36

MEMORANDO

Clasificacin de Archivo: PO-HO-L-1062-PCRCID/25/2015

Fecha:03 de noviembre de 2015

Para: Hctor SalazarGerente Sectorial, SCL/SCL

Emiliana VegasJefe de Divisin, SCL/EDU

Arturo GalindoJefe de Divisin, SPD/SDV

De: Gina MontielGerente General, CID/CID

Asunto: HONDURAS. Programa de Educacin Primaria e Integracin Tecnolgica (HO-L1062). Aprobacin final del Informe de Terminacin de Proyecto (PCR).

De acuerdo con los lineamientos de las guas para preparacin de PCR (OP-1242-3), el PCR de la operacin HO-L1062 Programa de Educacin Primaria eIntegracin Tecnolgica, ha cumplido con los procedimientos previstos paraobtener su aprobacin. Por tal motivo, adjunto para su conocimiento el Informeaprobado con la calificacin y nota de efectividad adjunta.


2/36

Programa de Educacin

Primaria e Integracin

Tecnolgica(2524/BL-HO / HO-L1062)

Informe de Terminacin deProyecto


3/36

ndiceI. Introduccin ........................................................................................................................ 1

1.1 Contexto ...................................................................................................................... 1

1.2 Descripcin del Proyecto ............................................................................................. 1

a. Componentes .............................................................................................................. 1

II. Desempeo del Proyecto .................................................................................................... 2

2.1 Efectividad ................................................................................................................... 2

a. Objetivo(s) de desarrollo .............................................................................................. 2

b. Anlisis de la lgica vertical ......................................................................................... 3

c. Resultados ................................................................................................................... 5

d. Anlisis de la atribucin de los resultados ...................................................................16

e. Resultados adicionales no previstos ...........................................................................18

2.2 Eficiencia ....................................................................................................................18

2.3 Relevancia ..................................................................................................................222.4 Sostenibilidad .............................................................................................................22

III. Criterios no Centrales .....................................................................................................24

3.1 Contribucin a los Objetivos Estratgicos del Banco ..................................................24

3.2 Contribucin a los Objetivos de Desarrollo de la Estrategia Pas ................................24

3.3 Monitoreo y Evaluacin ...............................................................................................25

a. Diseo del Sistema de Monitoreo y Evaluacin ..........................................................25b. Implementacin del Sistema de Monitoreo y Evaluacin.............................................25

c. Utilizacin del Sistema de Monitoreo y Evaluacin .....................................................25


4/36

Enlaces Electrnicos

1. Nota de Evaluabilidadhttp://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39938627

2. Versin Final de Reporte de Progreso del Monitoreo (PMR)http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877373

3. Anlisis Costo - Beneficiohttp://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877414

4. Informes de Evaluacin de Impacto4.1 Resultado de las Evaluaciones de Impacto en el Marco del PEPIT

http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=398774274.2 Informe de Poverty Action Lab

http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=398774365. Minuta de la Reunin de QRR

http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=396670236. Informes Ejecutor6.1 Informe de Cierrehttp://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=398774476.2 Minuta del Primer Taller de Cierrehttp://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=398775036.3 Minuta del Segundo Taller de Cierre

http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=398775127. Propuesta de Prstamo

http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=36580419
http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39938627http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39938627http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877373http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877373http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877414http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877414http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877427http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877436http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39667023http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877447http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877447http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877503http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877512http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=36580419http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=36580419http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877512http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877503http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877447http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39667023http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877436http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877427http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877414http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877373http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39938627


5/36

Acrnimos y Abreviaciones

APP Asociacin Pblico PrivadaBID Banco Interamericano de DesarrolloB/C Beneficios Divido por CostosCCEPREB Centro Comunitario de Educacin Pre-bsicaEFA Educacin para TodosFEREMA Fundacin para la Educacin Ricardo Ernesto MaduroFITT Fondo de Inversin en Telecomunicaciones y Tecnologa de la

Informacin y ComunicacionesGOH Gobierno de HondurasJ-PAL Jameel Poverty Action LabLFE Ley Fundamental de EducacinPBDM Programa Bono Diez MilPEPIT Programa de Educacin Primaria e Integracin TecnolgicaPOD Propuesta para el Desarrollo de la Operacin (por sus siglas en

ingls)

PRIDI Proyecto Regional de Indicadores de Desarrollo InfantilSACE Sistema de Informacin de Centros EducativosSE Secretara de EducacinTICs Tecnologas de la Informacin y la ComunicacinTIR Tasa Interna de RetornoUAP/SP Unidad Administradora de Proyectos/Secretara de la

PresidenciaUCP Unidad Coordinadora de ProyectosUMCE

UPNFM

Unidad de Medicin de la Calidad Educativa

Universidad Pedaggica Nacional Federico MoraznVA Valor AlcanzadoVMO Valor Meta ObjetivoVMR Valor Meta Ajustado


6/36

Informacin Bsica (cantidad en dlares americanos US$)NMERO DE PROYECTO (S):2524/BL-HO

TTULO:PROGRAMA DE EDUCACIN PRIMARIA E INTEGRACIN TECNOLGICAINSTRUMENTO DE PRSTAMO: INVERSIN ESPECFICAPAS:HONDURASPRESTATARIO:GOBIERNO DE HONDURASPRSTAMO (S):INVERSINSECTOR/SUBSECTOR:EDUCACINEDUCACIN PRIMARIA

FECHA DE APROBACIN DIRECTORIO:26DE ABRIL DE 2011FECHA DE EFECTIVIDAD CONTRATO DE PRSTAMO:1DE OCTUBRE DE 2011

FECHA DE ELEGIBILIDAD PRIMER DESEMBOLSO:27DE OCTUBRE DE 2011

MONTO PRSTAMO (S)MONTO ORIGINAL:US$37.000.000,00MONTO ACTUAL:US$37.000.000,00PARI PASU:97COSTO TOTAL DEL PROYECTO:US$38.260.000,00

MESES DE EJECUCIN

DESDE APROBACIN:41MESESDESDE EFECTIVIDAD DEL CONTRATO:36MESES

PERIODOS DE DESEMBOLSOFECHA ORIGINAL DE DESEMBOLSO FINAL:1DE ABRIL DE 2014FECHA ACTUAL DE DESEMBOLSO FINAL:1DE NOVIEMBRE DEL 2014EXTENSIN ACUMULATIVA (MESES):7MESESEXTENSIN ESPECIAL (MESES):N/ADESEMBOLSOSMONTO TOTAL DE DESEMBOLSOS A LA FECHA:100%

REDIRECCIONAMIENTO.ESTE PROYECTO:RECIBI FONDOS DE OTRO PROYECTO?NOENVI FONDOS A OTRO PROYECTO? NO


7/36

I. Introduccin

1.1 ContextoDurante la preparacin del Programa de Educacin Primaria e Integracin Tecnolgica (PEPIT)en el ao 2011, Honduras mostraba importantes avances en la ampliacin de la cobertura enprimaria, pero persistan problemas de calidad, eficiencia interna del sistema y equidad. Losresultados de las evaluaciones de aprendizaje estudiantil indicaban que los alumnos noestaban alcanzando las metas esperadas en trminos de conocimientos y habilidades; el nivelde repitencia escolar era alto, especialmente en los tres primeros grados de bsica1, yaproximadamente el 10% de los estudiantes perda el grado o abandonaba. Adicionalmente, el

aumento de la cobertura en educacin primaria no haba sido acompaado con aumentos deoferta en la educacin pre-escolar y secundaria.

Para enfrentar los retos de calidad, la Secretara de Educacin (SE) implement acciones paramejorar la lectoescritura y matemtica en los primeros grados de educacin bsica, entre loscuales se destacan los Centros de Excelencia para la Capacitacin de Maestros y el Programade Mejoramiento de la Enseanza Tcnica en el rea de Matemtica. Adicionalmente, elGobierno de Honduras (GOH) implement acciones para mejorar la calidad de la educacinmediante la introduccin de las Tecnologas de la Informacin y la Comunicacin (TICs). Sin

embargo, en muchos casos faltaron estrategias para el uso pedaggico de la tecnologa y/o elsoporte tcnico requerido hacia maestros y personal administrativo en las escuelas.

Para reducir las brechas en la oferta educativa, la SE implement una Asociacin PblicoPrivada (APP) con la Fundacin para la Educacin Ricardo Ernesto Maduro (FEREMA) con elobjetivo de aumentar la matrcula en el nivel pre-escolar en zonas rurales mediantemodalidades flexibles. Esta iniciativa cre Centros Comunitarios de Educacin Pre-bsica(CCEPREBs) con el fin de proveer educacin pre-escolar utilizando la metodologa Juego y

Aprendo2. Entre los aos 2004 y 2010, el nmero de CCEPREBs aument de 52 a cerca de

4.000, beneficiando a cerca de 55 mil nios, lo que equivale aproximadamente a la terceraparte de la oferta del pre-bsica3. Por otro lado, para reducir la brecha de cobertura eneducacin secundaria, la SE con el apoyo del Banco Interamericano de Desarrollo (BID)(Prstamo 1552/BL-HO) ampli la cobertura mediante modalidades tanto tradicionales como


8/36

paquetes didcticos y materiales fungibles; y iii) el pago de un bono4 a los educadoresvoluntarios. Adicionalmente, se incluyeron actividades de monitoreo permanente de los centros.

Componente 2. Fortalecimiento de la calidad de la oferta educativa en los dos primerosciclos de educacin bsica (US$8,38 millones).Se busc fortalecer la calidad de la ofertaeducativa con especial nfasis en el desarrollo de lectoescritura y matemtica de los nios y

jvenes de 1er a 6to grado de educacin bsica. Las acciones de este componente seconcentraron en escuelas focalizadas segn los criterios del PBDM, buscando mejorar lascondiciones de enseanza y el conocimiento de docentes de lenguaje y matemtica. Con losrecursos asignados a este componente, la SE invertira en: i) textos y material educativo;ii) capacitacin a docentes en lectoescritura y matemtica; iii) acompaamiento y asistencia

tcnica a los docentes en las aulas para fortalecer las prcticas pedaggicas; iv) adecuacin dela infraestructura fsica de las escuelas; v) desarrollo y produccin de materiales educativosdigitales para docentes y estudiantes en los dos primeros ciclos de educacin bsica yfortalecimiento del portal educativo de la SE; y vi) asistencia tcnica para el fortalecimiento dela capacidad operativa de la SE. Adicionalmente, la SE establecera en las escuelasbeneficiarias un sistema de evaluacin formativa.

Componente 3. Introduccin de la tecnologa para el mejoramiento de la educacinbsica (US$18,46 millones).Se brind apoyo estratgico al Componente 2, dotando a cada

una de las escuelas beneficiarias con una solucin tecnolgica de equipamiento y conectividad.Con los recursos asignados a este componente, se adquirira y distribuira: i) notebooksdistribuidos a todos los estudiantes entre 3er y 6to grado en las escuelas beneficiarias;ii) notebooks para docentes de 1er a 6to grado en las escuelas participantes, as como parasupervisores y tcnicos que participaran en los programas de asistencia tcnica; yiii) servidores y equipos de redes y conectividad local para ofrecer acceso local a recursoseducativos digitales, aplicaciones para el trabajo colaborativo en la escuela, sistemas de apoyoadministrativo, para docentes, directivos y estudiantes de las escuelas participantes. Tambinse apoyara el fortalecimiento de las capacidades tcnicas y de gestin de la Unidad

Administradora de Proyectos/Secretara de la Presidencia (UAP/SP).

II. Desempeo del Proyecto


9/36

aprendizajes en escuelas de educacin bsica que atienden a nios y jvenes de bajosrecursos socioeconmicos.

b. Anlisis de la lgica vertical

El diseo del programa se bas en la evidencia existente sobre la importancia de la educacinpre-escolar y de la introduccin de TICs para generar mejores resultados educativos. El diseode la lgica vertical tom en cuenta la evidencia internacional sobre el impacto de diversasintervenciones, y se mantuvo relevante a lo largo de la implementacin del programa. Noobstante ello, la generacin de resultados e impactos se vio afectada por la velocidad en quelos productos llegaron a los beneficiarios, afectando la duracin de la exposicin de los mismosal programa.

Intervencin en pre-bsica (Componente 1). De acuerdo a la literatura internacional yregional, la asistencia a educacin pre-escolar est asociada con mejores resultadoseducativos, contribuyendo a aumentar los aprendizajes, el logro educativo, as como a reducirla repitencia y desercin escolar5. En este sentido, en zonas rurales sin oferta de educacinpre-escolar se provey, como producto, los CCEPREBs los cuales incluan material, educadorpresente y capacitado y acompaamiento pedaggico. El programa contribuira, comoresultado, el aumento de la asistencia escolar en este nivel; y, como impacto, la mayorasistencia a pre-escolar preparara a los menores para realizar de forma exitosa el 1ergrado,

con menores tasas de repitencia.

Las relaciones causa-efecto implcitas en la lgica vertical se cumplieron, los productospermitieron la generacin de los resultados esperados, los mismos que permitieron obtener losimpactos considerados en la matriz de resultados. No obstante, el cumplimiento de la lgicavertical se vio afectado por la ruralidad de las comunidades, como la disponibilidad de fondosfiscales para el pago a los educadores, afect el bienestar de los mismos, generandodesercin, y reduciendo la exposicin de los estudiantes a educadores capacitados. Laruralidad afect el proceso de pago a los educadores, dado la lejana de puntos de pago, y los

recursos fiscales limitaron el monto y afectaron la oportunidad de pago de estipendios a loseducadores. Cabe notar que durante la ejecucin del programa se buscaron mecanismos depago descentralizados para facilitar el acceso de los educares a sus estipendios. Asimismo,frente a la falta de recursos fiscales los ahorros que se generaron durante la ejecucin del


10/36

La lgica vertical se cumpli, los productos fueron los correctos para obtener los resultados eimpactos. No obstante, la ruralidad de las comunidades, la disponibilidad de fondos fiscales, la

ampliacin de plazo en procesos de licitacin, retos de dominio de contenido de los docentes,la escasa preparacin previa en trmino de familiaridad con TICs de profesores y tcnicos,entre otros, redujo la exposicin de los estudiantes a la intervencin en el periodo de ejecucindel programa (ver informe del ejecutor,Enlace 6.1).

Dada la ruralidad y aislamiento de las escuelas los equipos de la UAP y la Unidad Coordinadorade Proyectos (UCP), requirieron de recursos adicionales para acceder a muchas escuelas pararealizar instalaciones de equipos y su mantenimiento; y/o acompaamientos pedaggicos. Estodemor la ejecucin del programa. Por otro lado, la identificacin de contratistas para las

adecuaciones elctricas requiri de diversas estrategias dados los elevados costos de transportede trabajar con las escuelas beneficiarias. Adicionalmente, dado el nivel de aislamiento de lasescuelas, la interaccin entre las mismas se limit a los eventos de capacitacin, y a las ferias deintercambio de experiencias realizadas en el marco del programa7.

Diagnsticos del programa sobre el dominio de contenidos de los docentes mostr importantesbrechas de conocimiento del currculo de matemtica y lenguaje. As, que previo a lacapacitacin en el uso de las TICs, se tuvo que realizar actividades de reforzamiento delcurrculo.

La implementacin del programa enfrent la falta de experiencia previa con TICs de losprofesores, as como de tcnicos especializados para realizar las actividades relacionadas a TICs(el diseo de especificaciones tcnicas, la supervisin de trabajo de campo, etc.). Con relacin alos docentes, en las capacitaciones se implementaron mdulos de habilidades bsicas en TICs 8.Con relacin a los tcnicos, el personal de la UAP/SP fue ganando experiencia a lo largo delproceso.

Si bien las asignaciones presupuestales permitieron la implementacin del programa, ladisponibilidad oportuna de recursos afect la velocidad de implementacin de las actividades delmismo. Por ejemplo, en algunos casos los docentes y alumnos ya contaban con los equipos,pero los docentes no haban recibido capacitacin en uso de tecnologa por falta de presupuesto.

La ejecucin operativa del programa se vio afectada por la existencia de dos unidades ejecutoras
http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877447http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877447http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877447http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877447


11/36

incluidos en la lgica vertical limite la exposicin de los beneficiarios a las intervencionespropuestas.

c. ResultadosPara medir la efectividad del programa con relacin a los objetivos propuestos, se plante unaserie de indicadores, los mismos que, de acuerdo a la lgica vertical, incluyen indicadores deimpacto, resultado y producto. Los objetivos del programa se mantuvieron constantes a lo largode la implementacin del mismo. Se registraron cambios en indicadores de resultado yproducto de acuerdo a las condiciones que se observaron durante la ejecucin. A continuacinse describen los cambios a la matriz de resultados y los logros del programa por tipo deintervencin.

Intervencin en pre-bsica (Componente 1). La dispersin poblacional en zonas ruralesgener retos en la identificacin de comunidades rurales con la matrcula mnima de estudiantesrequerida (ocho nios de cinco aos), lo cual hizo necesario realizar los siguientes cambios en lamatriz de resultados:

Ajustar el nmero de CCEPREBs a ser creados de 645 a 624, una reduccin de 11. Esteajuste gener una cadena de cambios en los productos del programa, todos los quedisminuyeron en 11: nmero de educadores capacitados, nmero de educadores

recibiendo seguimiento, nmero de paquetes Juego y Aprendo distribuidos, y pagos debonos a educadores (ver Tabla 1).

Cambiar el indicador del nmero de cupos creados con los nuevos CCEPREBs. Esteindicador se cambi de indicador de producto a indicador de resultado. Esto respondia la necesidad de alineacin con los indicadores corporativos de la divisin deeducacin, y a que se registr la matrcula efectiva, no la potencial.

Mientras se pudo medir adecuadamente, la meta del indicador de impacto fue cumplida:

Para los alumnos que asistieron a los CCEPREBs en 2012, la tasa de repitencia en 1er

grado baj de 20,3% a 13%, por debajo al 16% esperado para dicho cohorte. Dado que,en el ao 2014, la SE adopt la promocin automtica entre el 1er y el 2do grado, elindicador de repitencia es 0%, logrndose el objetivo, pero perdiendo la validez para

9


12/36

capacidad de un CCEPREB para recibir hasta 15 nios, la matrcula potencial en losnuevos CCEPREBs es de 9.360 cupos.

Los indicadores de producto fueron obtenidos de acuerdo a la matriz modificada: Nmero de educadores capacitados.

Nmero de educadores recibiendo seguimiento.

Nmero de paquetes Juego y Aprendo distribuidos.

Pagos de bonos a educadores fueron obtenidos de acuerdo a la matriz modificada.

Los indicadores de impacto fueron apropiados con relacin a la evidencia en la literatura sobre

el impacto de pre-escolar12. Los indicadores de resultado y de producto fueron adecuados, peroal formularse no se tomaron en cuenta los retos para la apertura de CCEPREBs.

Provisin de TICs a las escuelas (Componente 2 y 3) Si bien la ejecucin financiera fueadecuada, la licitacin de compra de computadores adquiri 51.000 computadores deestudiantes, frente a las 54.500 estimados durante la preparacin del programa. Frente a ello, laentidad encargada de la seleccin de escuelas, la Unidad de Medicin de la Calidad Educativa(UMCE), sugiri una disminucin del nmero de escuelas beneficiarias de 530 a 466 escuelas.

Este cambio afect el indicador de resultado: Nios beneficiados con acciones de refuerzo enespaol y matemtica; y, los indicadores de producto: i) centros educativos que han recibidotextos de espaol y matemtica para estudiantes de 1er a 6to grado; ii) docentes capacitados enlectoescritura, matemtica y uso educativo de tecnologa; iii) directivos capacitados en gestinpedaggica y iv) centros educativos beneficiados con asistencia tcnica.

Con relacin a los indicadores de impacto se lograron:

Tasa de graduacin de 6to

grado (aumentando de 75,5% a 90%). Disponibilidad de computadores para el trabajo en el aula (logrndose un 96% sobre el

esperado de 80%).


13/36

Habilidades en el uso educativo de TICs por parte de docentes.

Promedio de das de la semana en que los docentes recurren a recursos tecnolgicos

en su prctica educativa.

Tiempo promedio total para la reparacin de equipos, fueron cumplidos en su totalidad.

Asimismo, la meta de los indicadores de producto fueron logrados satisfactoriamente:

Nios beneficiados con acciones de refuerzo en lenguaje y matemtica.

Centros educativos que han recibido textos de lenguaje y matemtica para estudiantes de1er a 6to grado.

Docentes capacitados en lectoescritura, matemtica y uso educativo de tecnologa.

Directivos capacitados en gestin pedaggica.

Centros educativos beneficiados con la asistencia tcnica.

Portal educativo operativo.

Adecuacin de infraestructura en las escuelas.

Computadores porttiles para estudiantes distribuidos.

Centros educativos habilitados y conectados a internet.

Con relacin a los indicadores de producto relacionados a computadores a docentes y tcnicos,el programa distribuy un total de 2.571 computadores a docentes y tcnicos, nmero superiora los 2.383 planificados. Esto se logr disminuyendo el nmero de computadores porttilesdistribuidos a tcnicos y facilitadores, y aumentando los computadores porttiles para docentesdistribuidos.

La magnitud de los indicadores de la matriz de resultado con relacin al tamao y duracin dela intervencin apoyada por el programa fue adecuado en los Componentes 1 y 3. En el casodel Componente 2, la magnitud del indicador de impacto sobre el logro educativo fue muyelevada (0,2 desviaciones estndares), teniendo en cuenta la literatura existente sobre el tema.


14/36

8

Tabla 1Cambios a la Matriz de Resultados

Seccin dela Matriz

deResultados

Cambio especficorealizado

Tipo de cambio Razones para el cambioFecha decambio

Fecha decambio

acordado conla entidad

ejecutoraResultado Nmero de cupos creadoscon los nuevos CCEPREBs.

Indicador de resultadoadicional que serelaciona con el objetivodel programa.

El cambio busca resaltar ladiferencia entre cuposcreados y matrcula. Loscupos responden a ladecisin de la autoridadeducativa de crear unCCEPREB. La matrculadepende de la decisin delos padres sobre enviar asus hijos a la educacinpre-escolar.

Preparacin dePMRcorrespondientea diciembre 2012(abril 2013).

Abril 2013.

Producto Nmero de cupos creadoscon los nuevos CCEPREBs. Eliminacin de unindicador de productopara ser consideradoindicador de resultadoen la matriz.

El cambio busca resaltar ladiferencia entre cuposcreados y matrcula. Loscupos responden a ladecisin de la autoridadeducativa de crear unCCEPREB. La matrculadepende de la decisin delos padres sobre enviar asus hijos a la educacinpre-escolar.


Abril 2013.

Producto Nmero de educadores(as)

capacitados(as) en lametodologa CCEPREB.

El indicador de resultado

inclua una meta originalde 645 CCEPREBs, lacual se redujo a 624.

Dificultad de encontrar

comunidades con elnmero de alumnosrequeridos para establecerun CCEPREB.

Enmienda al

contrato conFEREMA el 21de octubre de2013.

No objecin a

la enmienda(fines 2013).

Producto Nmero de educadores(as)recibiendo seguimiento ensus centros educativos en lametodologa CCEPREB.

El indicador de resultadoinclua una meta originalde 645 CCEPREBs, lacual se redujo a 624.

Dificultad de encontrarcomunidades con nmerode alumnos requeridospara establecer unCCEPREB.

Enmienda alcontrato conFEREMA el 21de octubre de2013.

No objecin ala enmienda(fines 2013).


15/36

9

Seccin dela Matriz

deResultados



Fecha decambio

acordado conla entidadejecutora

Producto Nmero de centroseducativos beneficiados delpaquete metodolgico y los

materiales Juego y Aprendo.

El indicador de resultadoinclua una meta originalde 645 CCEPREBs, la

cual se redujo a 624.

Dificultad de encontrarcomunidades con nmerode alumnos requeridos

para establecer unCCEPREB.

Enmienda alcontrato conFEREMA el 21

de octubre de2013.


Producto Nmero de educadorescomunitarios recibiendobonos anuales.

El indicador de resultadoinclua una meta originalde 645 CCEPREBs, lacual se redujo a 624.

Dificultad de encontrarcomunidades con nmerode alumnos requeridospara establecer unCCEPREB.

Enmienda alcontrato conFEREMA el 21de octubre de2013.


Impacto Graduacin de 6 ogrado. Cambios en el indicador deimpacto: se elev la metafinal de 75,48 a 90 en 2013.Se considera solo lagraduacin de dicho ao.

Informacin actualizadapor el sistema deestadstica de la SE.

Noviembre 2013. Abril 2014.

Resultado Nmero de niosbeneficiarios con accionesde refuerzo en espaol ymatemtica.

Se redujo el nmero de100.000 a 70.000nios(as).

Ajuste relacionado a ladisminucin de lasescuelas incorporadas enel programa de acuerdo adisponibilidad decomputadores y estudio laUMCE.


Abril 2013.

Resultado Nmero promedio de dasde la semana que losestudiantes utilizan recursostecnolgicos.

Se elimin. Por razones de seguridad,el equipo no es retirado dela escuela.


Abril 2013.

Producto Nmero de centroseducativos que han recibidotextos de espaol ymatemticas paraestudiantes de 1er a 6togrado.

Cambio en la meta finalde 545 a 466 centroseducativos.

Ajuste relacionado a ladisminucin de lasescuelas incorporadas enel programa de acuerdo adisponibilidad decomputadores y estudio dela UMCE. El cambio fuerecomendado por elequipo de evaluacin.

Enero 2012. Abril 2013.


16/36

10

Seccin dela Matriz

deResultados



Fecha decambio


Producto Nmero de docentescapacitados enlectoescritura, matemtica y

uso educativo de tecnologa.

Cambio en la meta final,se redujo de 2.208 a1.945 docentes.

Ajuste relacionado a ladisminucin de lasescuelas incorporadas en

el programa de acuerdo adisponibilidad decomputadores y estudio dela UMCE. El cambio fuerecomendado por elequipo de evaluacin.


Producto Nmero de directivoscapacitados en gestinpedaggica.

Cambio en la meta finalde 545 a 466 directivoscapacitados.

Ajuste relacionado a ladisminucin de lasescuelas incorporadas enel programa de acuerdo adisponibilidad decomputadores y estudio de

la UMCE. El cambio fuerecomendado por elequipo de evaluacin.


Producto Nmero de centroseducativos beneficiados conla asistencia tcnica.

Cambio en la meta finalde 545 a 466 centroeducativos.

Ajuste relacionado a ladisminucin de lasescuelas incorporadas enel programa de acuerdo adisponibilidad decomputadores y estudio dela UMCE. El cambio fuerecomendado por elequipo de evaluacin.

Enero 2012 Abril 2013.

Producto Escuelas aplicando guaspedaggicas para espaol ymatemtica con uso detecnologa de 1er a 6to grado.

Eliminacin del indicadorde producto.

La SE incluy en las guaspedaggicas en losmateriales incluidos en loscomputadores.


Abril 2013.

Producto Adecuacin deinfraestructura en lasescuelas.

Adicin de un nuevoindicador de producto.

No estaba incluido comoproducto en la matriz deresultados origina, si bientena recursos asignadosespecficamente.


Abril 2013.


17/36

11

Seccin dela Matriz

deResultados



Fecha decambio


Resultado Tiempo promedio para lareparacin de equipos.

Cambio en el indicadorde impacto aumento de5 a 15 das.

Al momento de realizar lalicitacin se recomendcambiar los tiempos de

servicio, las condicionesgeogrficas de lasescuelas.

Preparacin dePMRcorrespondiente

a diciembre 2012(abril 2013).

Abril 2013.

Producto Computadores porttilespara estudiantesdistribuidos.

Cambio en la meta final,reduccin de 54.500 a51.000 computadoresporttiles.

Ajuste por condiciones demercado registrados en elmomento de la licitacin.


Abril 2013.

Producto Computadores porttilespara docentes distribuidos.

Cambio en la meta final:aument de 2.227 a2.311 computadoresporttiles.

Dar mayor apoyo adocentes y directores deescuelas.

Preparacin dePMRcorrespondientea diciembre 2012

(abril 2013).

Abril 2013.

Producto Centros educativoshabilitados y conectados.

Cambio en la meta finalde 545 a 466 centroseducativos.

Ajuste por el cambio denmero de centroseducativos beneficiados.


Abril 2013.

Producto Nmero de computadoresporttiles distribuidos atcnicos y facilitadores.

Cambio en la meta final:reduccin de 300 a 260computadores porttiles.

La figura de facilitador nose utiliz en la ejecucindel programa, soloentregndose equipos alos tcnicos.


Abril 2013.

Producto Nmero de habitantes con

acceso a internet.

Eliminacin del

indicador.

Las condiciones de acceso

al internet sologarantizaban el accesoadecuado de losestudiantes, por lo que seevit crear ms usuariosde la conectividad.

Preparacin de

PMRcorrespondientea diciembre 2012(abril 2013).

Abril 2013.


18/36

12

Tabla 2Matriz de Resultados

Impacto/IndicadorUnidad de

Medida

Valor deLnea de

Base

Ao deLnea de

Base

Medio deVerificacin

Metas y ResultadosAlcanzados

Fecha enla que las

metasfueron

alcanzadasImpacto #1: Ampliar el acceso de la niez desfavorecida al nivel pre-bsica, para mejorar las condiciones de escolaridad conque asisten al primer ciclo de educacin bsica

Tasa de Repitencia en 1ergrado de alumnos quepasaron el programa versus

aquellos de no lo hicieron

Tasa deRepitencia

20,3 2008

Encuesta aeducadores acomienzos de2014 sobre lacohorte

graduado deCCEPREBSen 2012

Valor MetaObjetivo(VMO)

16,0(2012)12,0

(2013)

2012 (En2014 seinstaur

promocinautomtica

en 1ergrado, no

pudindosemedir el

indicadorpara lacohorte

graduadode

CCEPREBen 2013)

Valor MetaAjustado(VMR)

ValorAlcanzado(VA)

13,0(2012)

Impacto #2:Mejorar los aprendizajes escolares en la educacin bsica, especialmente en lectura, escritura y matemtica, en lasescuelas beneficiarias del programaResultados de aprendizaje enpruebas de espaol ymatemtica a estudiantes de3era 6togrado (diferenciasrespecto del grupo control)

Desviacinestndar

0,0 2010Evaluacin deimpacto

VMO 0,22013 (ao

de laevaluacin

de impacto)

VMR

VA 0

Graduacin en 6togradoTasa degraduacin

79,5Actualizado

a 83,92010

Datosadministrativos

VMO 75,5

2013VMR 90,0VA 90,0

Impacto #3: Transferir a las escuelas una estrategia para el uso educativo de las tecnologas orientada a elevar los aprendizajesen escuelas de bsica que atienden a nios y jvenes de bajos recursos socioeconmicos

Porcentaje de computadoresde estudiantes disponible el90% del tiempo escolar

Porcentaje 0,0 2010Datosadministrativos

VMO 802013VMR

VA 96


19/36

13

Resultado/Indicador Unidad de MedidaValor de Lnea

de BaseAo de Lnea

de BaseMedio de

VerificacinMetas y Resultados

Alcanzados

Fecha en laque las

metas fueronalcanzadas

Resultado #1: Ampliar el acceso de la niez desfavorecida al nivel pre-bsica, para mejorar las condiciones de escolaridad conque asisten al primer ciclo de educacin bsica

Nmero de Centroseducativos con CCEPREBcompletamente operativos

Centroseducativos

1.500 2010Datosadministrativos

VMO 2.0002013VMR

VA 2.124

Nmero de cupos creadoscon los nuevos CCEPREB

Cupos 0 2010Datosadministrativos

VMO 6.5002013VMR

VA 5.128Resultado #2: Mejorar los aprendizajes escolares en la educacin bsica, especialmente en lectura, escritura y matemtica, en lasescuelas beneficiarias del programa

Nios beneficiados conacciones de refuerzo enespaol y matemtica

Estudiantes 0 2010Datosadministrativos

VMO 100.0002013VMR 70.000

VA 75.695Habilidades en el usoeducativo de TICs por partede docentes

Porcentaje 0,0 2010Datosadministrativos

VMO 502013VMR

VA 58

Promedio de das de lasemana en que losdocentes recurren arecursos tecnolgicos en suprctica educativa

Das 0,0 2010Datosadministrativos

VMO 2,0-3,0

2013VMR

VA 3,3

Resultado #3: Transferir a las escuelas una estrategia para el uso educativo de las tecnologas orientada a elevarlo aprendizajesen escuelas de bsica que atienden a nios y jvenes de bajos recursos socioeconmicos

Tiempo promedio total parala reparacin de equipos

Das hbiles 0,0 2010Datosadministrativos

VMO 52013VMR 15

VA 7


20/36

14

Producto/IndicadorUnidad de

Medida

Valor deLnea de

Base

Ao deLnea de

Base

Medio deVerificacin

Metas y ResultadosAlcanzados

Fecha en laque lasmetasfueron

alcanzadasComponente #1:Expansin de la cobertura de educacin pre-bsica

Educadores(as)capacitados(as) en la

metodologa CCEPREB

Educadores(as) 0 2011Datos

administrativos

VMO 2.1452013VMR 2.124

VA 2.124Nmero de educadores(as)recibiendo seguimiento ensus centros educativos enla metodologa CCEPREB

Educadores(as) 0 2011Datosadministrativos

VMO 645

2013VMR 624

VA 624

Nmero de centroseducativos beneficiados delpaquete metodolgico y losmateriales Juego y Aprendo

Centroseducativos

0 2011Datosadministrativos

VMO 2.145

2013VMR 2.124

VA 2.124

Nmero de bonos anualespagados a educadorescomunitarios

Bonos anuales 0 2011Datosadministrativos

VMO 2.145 2012 (lospagos fueroninferiores en2013 y 2014)

VMR 2.124

VA 2.008Componente #2:Fortalecimiento de la calidad de la oferta educativa en los dos primeros ciclos de bsica

Centros educativos que hanrecibido textos de espaol ymatemtica paraestudiantes de 1

era 6

togrado

Centroseducativos


VMO 530

2013VMR 466

VA 466

Docentes capacitados enlectoescritura, matemtica yuso educativo de tecnologa

Docentes 0 2011Datosadministrativos

VMO 2.2082013VMR 1.845

VA 2.311Directivos capacitados engestin pedaggica Directivos 0 2011

Datosadministrativos

VMO 5302013VMR 466

VA 466Centros educativosbeneficiados con laasistencia tcnica

Centroseducativos


VMO 5302013VMR 466

VA 466Portal educativo operativo

Portal 0 2011Datosadministrativos

VMO 12013VMR

VA 1Adecuacin deinfraestructura en lasescuelas

Centroseducativos


VMO 4662014VMR 466

VA 466


21/36

15

Producto/IndicadorUnidad de

MedidaValor de Lnea

de BaseAo de Lnea

de BaseMedio de

VerificacinMetas y Resultados

Alcanzados

Fecha en la quelas metas

fueronalcanzadas

Componente #3 Introduccin de la tecnologa para el mejoramiento de la educacin bsicaComputadores porttilespara estudiantesdistribuidos

Computadores 0 2011Datosadministrativos

VMO 54.5002013VMR 51.000

VA 51.000Computadores porttilespara docentes distribuidos Computadores 0 2011 Datos

administrativos

VMO 1.8332014VMR 2.311

VA 2.410Centros educativoshabilitados y conectados ainternet

Centroseducativos


VMO 5502013VMR 466

VA 466Nmero de computadoresporttiles distribuidos atcnicos y facilitadores

Computadores 0 2011Datosadministrativos

VMO 5002013VMR 260

VA 161


22/36

d. Anlisis de la atribucin de los resultados

A continuacin se describir la atribucin del programa a los resultados e impactos del mismo.

Los resultados del programa fueron monitoreados por la estrategia de evaluacin y monitoreo.Por otro lado, se realizaron dos evaluaciones para identificar los impactos atribuibles alprograma, en las que se construyeron grupos tratamiento y grupos control. A continuacin sepresenta informacin sobre la atribucin de los resultados, as como de los impactosregistrados al programa.

Anlisis de atribucin a intervencin en pre-bsica (Componente 1).En los impactos, laprimera cohorte que particip en los CCEPREBs (en 2012) registr una tasa de repitencia de13%, inferior al 16% esperado para dicho ao. Dada la introduccin de promocin automtica

entre 1er y 2dogrado en el ao 2014, la tasa de repitencia para dichos alumnos fue de 0%, por loque dicho indicador se volvi irrelevante para analizar el xito del programa. No obstante ello,para identificar la contribucin del programa a sus objetivos, se realiz una evaluacin cuasi-experimental14, la cual fue financiada mediante la ATN/OC-12957-HO (ver Enlace 4.1). Estaevaluacin de impacto muestra que los alumnos expuestos a la intervencin registraron enpromedio de avance en indicadores de desarrollo infantil equivalente a 0,83 aos con relacin aun grupo control que no asisti a pre-escolar. La SE analiz el instrumento PRIDI (ProyectoRegional de Indicadores de Desarrollo Infantil) en comparacin a los requisitos para entrar a 1er

grado y sus metas de aprendizaje para pre-escolar

15

. Encontraron una buena correspondencia,por lo que los avances identificados garantizaran un mejor desempeo en 1 ergrado. De estaforma, se habra logrado el objetivo especfico de Ampliar el acceso de la niez desfavorecidaal nivel pre-bsica, para mejorar las condiciones de escolaridad con que asisten al primer ciclode educacin bsica.

En los resultados, los indicadores presentados reflejan la necesidad de la accin conjunta de laSE y de la comunidad para el funcionamiento continuo de los centros y asistencia continua delos alumnos. Por un lado, segn la SE el programa fue la nico programa a escala que estuvo

ampliando la oferta de pre-bsica durante el 2012-2014 (ver Minuta del Segundo Taller deCierre). Por otro lado, si bien los centros fueron creados por la SE, su funcionamiento continuofue responsabilidad de la comunidad. El programa gener la aceptacin del modelo por partede las comunidades, logrando el funcionamiento continuo del modelo. Esto se comprob en la
http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877427http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877427http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877512http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877512http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877512http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877512http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877512http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877427


23/36

aumentaron 12% y 11%, respectivamente, niveles de ingreso de habitantes en zonas deinfluencia de los CCEPREBs. Como se precis anteriormente, no hubo otras actividades deexpansin de oferta en dicho nivel durante esos aos.

Anlisis de atribucin de provisin de TICs a las escuelas (Componente 2 y 3).

En los impactos. Los indicadores de impacto relacionados a esta intervencin incluyeronindicadores de aprendizajes en matemtica y lenguaje, la tasa de graduacin de 6 to grado y elporcentaje de computadores disponibles durante el tiempo escolar. Todos estos indicadores,salvo el relacionado al avance en aprendizajes en matemtica y lenguaje fueron monitoreadospor el equipo del programa. El indicador sobre avance en matemtica y lenguaje provino deldiseo experimental del programa. La seleccin de escuelas16, y anlisis de resultados fue

producto de una consultora realizada por el Jameel Poverty Action Lab (J-PAL) y financiadapor el programa. Este diseo permita identificar atribucin directamente. El anlisis de losresultados no muestra diferencias estadsticamente significativas en los resultados dematemtica ni lenguaje entre el grupo tratamiento y el grupo control a fines de 2013 (ver Tabla14, pgina 29, Enlace 4.2). La implementacin de la evaluacin y su capacidad de identificarefectos estadsticamente robustos se vio afectada por cambios en el cronograma de entrega deequipos y libros de texto, y por la reduccin de los grupos tratamiento y grupos control queconformaron la muestra para la evaluacin. Con relacin al indicador de tasa de graduacin de6togrado, datos administrativos muestran su mejora. Si bien no fue directamente evaluado porla consultora de J-PAL dado que necesitaba una nueva salida al campo, sta encontr elcomportamiento de los estudiantes consistentes con dicha evaluacin, por ejemplo un mayornivel de asistencia de alumnos en las escuelas que se beneficiaron del programa y un mayordeseo de asistir a ellas dado la presencia de los computadores en las mismas17. Con relacin alindicador de impacto, Porcentaje de computadores de estudiantes disponible el 90% deltiempo escolar, datos administrativos indican su cumplimiento. Adicionalmente, la evaluacinde impacto muestra una alta satisfaccin y tasa de uso de los computadores, apreciacionesconsistentes con una alta disponibilidad de los recursos tecnolgicos.

Anlisis complementarios, enfocados en escuelas rurales a fines de 2013, as como resultadosen las pruebas censales que administr la SE a fines del ao 2012, 2013 y 201418, muestranuna mejora relativa de los aprendizajes de estudiantes de las escuelas del grupo beneficiariod l ( t t i t ) i l d l l d l
http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877436http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877436http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877436


24/36

a sus alumnos en dichas materias), y su mejor dominio de las TIC (ver Tabla 9, pgina 25 yTabla 23, pgina 37, Enlace 4.2). La SE ha manifestado que no hubo otras actividades decapacitacin a escala durante la implementacin del programa (verMinuta del Segundo Tallerde Cierre). Con relacin al indicador de resultado, promedio de das de la semana en que losdocentes recurren a recursos tecnolgicos en su prctica educativa, la evaluacin de externamostr un aumento en dicho indicador (ver Tabla 8, pgina 25,Enlace 4.2). Finalmente, conrelacin al indicador, Tiempo promedio total para la reparacin de equipos, los indicadores demonitoreo del programa mostraron su cumplimiento. Si bien la evaluacin externa no incluyindicadores sobre el mantenimiento tecnolgico, son consistentes con una adecuadadisponibilidad de los equipos, e indica una alta tasa de satisfaccin con la calidad de loscomputadores (ver Tabla 5, pgina 23,Enlace 4.2).

e. Resultados adicionales no previstos

El programa gener externalidades positivas en el sector. Si bien la provisin de computadorescon conectividad estuvo enfocada en la enseanza de matemtica y lectoescritura, tambin selogr un reforzamiento en las habilidades digitales de los alumnos y el acceso a contenidospara la enseanza de otras materias (verEnlace 4.2). Adicionalmente, dentro del Componente2, el PEPIT apoy actividades clave de la SE, tales como el financiamiento de la elaboracin delibros de texto de lenguaje (con derechos de autor de la SE) por la Universidad Pedaggica

Nacional Federico Morazn (UPNFM). Esto gener importantes ahorros a la SE y, dado el xitode la colaboracin entre la SE y la UPNFM, los donantes del Fondo Comn han apoyado eldesarrollo de libros de texto de Ciencias Sociales.

Adicionalmente, el programa permiti tener informacin sobre la ubicacin de los proveedoresde servicios de pre-escolar en zonas rurales, posibilitando la elaboracin posterior deestrategias de universalizacin de la misma. Por otra parte, las mejoras en adecuacioneselctricas en las escuelas beneficiarias del programa tuvieron otros usos, como el uso de luzartificial en das oscuros. Igualmente, el programa provey informacin a la SE sobre las

ventajas de emplear esquemas de capacitacin descentralizadas en comparacin con sistemasen cascada, las que se emplearn en diseos de operaciones futuras (verMinuta del SegundoTaller de Cierre).

2 2 Eficiencia
http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877436http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877436http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877512http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877512http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877512http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877512http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877436http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877436http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877436http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877436http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877436http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877436http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877436http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877436http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877436http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877512http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877512http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877512http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877512http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877512http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877512http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877436http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877436http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877436http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877512http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877512http://idbdocs.iadb.org/wsdocs/getDocument.aspx?DOCNUM=39877436


25/36

El B/C del programa total fue de 5,0, mientras que al aadir costos administrativos y deevaluacin se reduce a 4,1. La TIR del programa total fue de 8,6%, mientras que al aadircostos administrativos y de evaluacin se reduce a 7,0%

En el caso de la intervencin de educacin pre-escolar como de TICs en educacin bsica, lastasas de retorno responden a un lmite inferior, dado que el anlisis no incluy mejoras en losaprendizajes de los estudiantes, por lo que se esperara aumentos en la productividad de losmismos una vez que lleguen al mercado laboral. Para esto, se llev a cabo un anlisis desensibilidad. El anlisis muestra que el B/C (TIR) del programa con gastos administrativosaumentara de 4 (7%) a 18 (19%) con un aumento de productividad de 5% y a 33 (21,9%), conun aumento de productividad de 10%.

El anlisis B/C muestra una mayor eficiencia del programa sobre el indicador original del POD,2,04 versus 4. No obstante ello, el anlisis de eficiencia basado en TIRs muestra una menorTIR del programa versus al valor original consistente con el POD, 14,6% versus 8,6%. Estasdiferencias provienen de distintos supuesto y estructura temporal de los beneficios (verEnlace 7). Al incluir ganancias en productividad, los resultados del programa exceden a lospresentados en el POD (ver prrafo anterior).


26/36

20

Tabla 3Costos del Proyecto

Componente ProductoCosto Total del Proyecto Inicial (US$) Costo Total del Proyecto Realizado (US$)

BID Local Total % BID Local Total %

Expansin de lacobertura de

educacin pre-bsica

Educadores(as)

capacitados(as) en lametodologa CCEPREB

220.941 220.941 1 303.492 303.492 1

Educadores(as)recibiendo seguimientoen sus centroseducativos en lametodologa CCEPREB

20.548 20.548 0 65.562 65.562 0

Educadores(as)comunitarias recibiendoestipendios

541.800 1.260.000 1.801.800 5 359.732 473.151 832.883 2

Centros Educativosbeneficiarios del paquete

metodolgico y losmateriales Juego y

Aprendo

4.296.829 4.296.829 11 4.235.483 4.235.483 11

Fortalecimiento de lacalidad de la oferta

educativa en los dosprimeros ciclos de

bsica

Centros educativos quehan recibido textos deespaol y matemticapara estudiantes de 1era6to grado

1.602.000 1.602.000 4 1.157.171 1.157.171 3

Docentes capacitados enespaol, matemtica yuso educativo detecnologa

1.644.440 1.644.440 4 1.292.943 1.292.943 3

Directivos capacitadosen gestin pedaggica

693.540 693.540 2 405.551 405.551 1

Centros educativosbeneficiados con

Asistencia Tcnica563.950 563.950 1 389.647 389.647 1

Portal EducativoOperativo

455.000 455.000 1 377.556 377.556 1

Adecuacin deinfraestructura fsica enlas escuelas

2.725.000 2.725.000 7 2.315.587 2.315.587 6


27/36

21

Componente ProductoCosto Total del Proyecto Inicial (US$) Costo Total del Proyecto Realizado (US$)

BID Local BID Local BID Local BID Local

Introduccin de latecnologa para elmejoramiento de laeducacin bsica

Computadores porttilespara estudiantesdistribuidos

13.146.475 13.146.475 34 15.477.976 15.477.976 42

Computadores porttiles

para docentesdistribuidos 3.499.810 3.499.810 9 1.078.231 1.078.231 3

Centros Educativoshabilitados y conectadosa internet

1.182.000 1.182.000 3 1.835.409 1.835.409 5

Computadores porttilesdistribuidos a tcnicos yfacilitadores

120.670 120.670 0 115.075 115.075 0

Sub-Total (Componentes) 30.713.003 31.973.003 84 29.409.413 29.882.564 81Administracin y Otros Costos[*] 6.286.997 6.286.997 16 7.122.297 7.122.297 19

Total (Proyecto) 37.000.000 1.260.000 38.260.000 100% 36.531.710 473.151 37.004.862 100%

* Intereses, auditoras, imprevistos/contingencias, y otros costos que no estn relacionados con productos.


28/36

2.3 Relevancia

El objetivo del programa fue el de mejorar los aprendizajes de los estudiantes de las escuelasde educacin bsica que atienden a la poblacin ms pobre del pas, a travs de la ampliacinde la oferta de educacin pre-bsica y la mejora de la calidad de la educacin bsica en laszonas ms pobres del pas. De esta forma, el programa estaba alineado con el Plan de Pas2010-203819, el Plan de Nacin 2010-2022. Con relacin al Plan de Pas, el programa estalineado con el Objetivo 1, Una Honduras sin pobreza extrema, educada y sana, con sistemasconsolidados de previsin social, y su Meta 1.3, Elevar la escolaridad promedio a nueveaos. Con relacin al Plan de Pas, el programa est alineado con su cuarto lineamientoestratgico, Educacin y cultura como medios de emancipacin social, en particular sus

Metas 15, 16, 17 (aumento en matrcula en pre-escolar, primaria y tercer ciclo) y 21 (mejora enrendimiento promedio en espaol y matemtica)20.

La relevancia del programa se ha mantenido, as el programa es relevante con el Plan deTodos Para Una Vida Mejor (Plan Estratgico de Gobierno 2014-2018). Dentro del Plan deTodos Para Una Vida Mejor, el programa apoya al primer objetivo estratgico: Fortalecer laproteccin social a las familias en condiciones de extrema pobreza, apoyando al cumplimientode su segundo resultado sectorial: Ampliar cobertura y mejorar calidad de educacin; y, laestrategia de ejecucin del plan en el sector de desarrollo e inclusin social: Ampliar cobertura

en diversos niveles y mejorar la calidad de la educacin bsica.Adicionalmente, el programa est alineado con el Plan Estratgico Institucional 2014-2018 de laSecretara de Educacin de Honduras. Entre los indicadores priorizados en el Plan EstratgicoInstitucional relacionados con el programa encontramos: i) aumentar la tasa neta de coberturaen el ao obligatorio de educacin pre-bsica (rea estratgica de acceso); ii) mejorar loslogros de aprendizaje estudiantil en espaol y matemtica (rea estratgica de calidad); y iii)aumentar el nmero de centros educativos con acceso a TICs (rea estratgica decompetitividad)21.

En este sentido, el programa era consistente con la estrategia del Banco con Honduras (GN-2475) vigente al momento de aprobacin, en lo referente al rea de focalizacin nmero 3:Fomentar la formacin del capital humano. El programa tambin es consistente con la

i i fi l bj i d d i l b h l i


29/36

de vista del sector educacin, se requiere un continuo apoyo a la educacin pre-escolar, enparticular, a travs del modelo comunitarios; desde el punto de vista operativo, la sostenibilidadrequiere que se brinden los materiales fungibles y se realicen pagos a educadores se realicende forma oportuna; y, desde el contexto pas, se requiere la disposicin de recursos pblicospara financiar a los CCEPREBs, en un contexto de ajuste fiscal.

Estos riesgos no fueron identificados en la etapa de preparacin, y durante la ejecucin fueronmitigados mediante la bsqueda de mtodos alternativos de pagos a los educadores (riesgooperativo), y uso de ahorros para apoyar el pago de estipendios (riesgo contexto pas). Para lasostenibilidad, los riesgos han sido mitigados. Con relacin al riesgo sectorial, el GOH, encumplimiento de la Ley Fundamental de Educacin (LFE), ha tomado como objetivo launiversalizacin de la educacin pre-escolar. El plan para lograr dicha universalizacin cuentacon tres modelos: i) modelo pre-escolar tradicional; ii) modelo CCEPREB; y iii) modelo deeducacin en casa. Por otro lado, desde el punto de vista operativo y de contexto pas, losrecursos que garanticen la operatividad de los CCEPREBs provendrn de recursos delprograma Educacin para Todos (EFA), con el apoyo de otros donantes. Se estima que lamaterializacin de que estos riesgos afecten el funcionamiento de los CCEPREBs tiene unaprobabilidad baja.

Sostenibilidad de la provisin de TICs a las escuelas (Componente 2 y 3). El anlisis desostenibilidad corresponde a los tres aos adicionales de impacto de la intervencin (verEnlace 3). La sostenibilidad de la intervencin responder al uso continuo de los recursostecnolgicos en el aula de clase. La sostenibilidad estar relacionada a la materializacin de lossiguientes riesgos: desde el punto de vista del sector educacin, se requiere un continuo apoyoa la prctica docente con el uso de la tecnologa, en particular, capacitacin a nuevos docentesque llegan a escuelas intervenidas, y un apoyo continuo del sector a la introduccin de latecnologa en el proceso educativo; desde el punto de vista operativo, la sostenibilidad requiereque los computadores estn en buenas condiciones tcnicas y con acceso a recursoseducativos; y, desde el contexto pas, se requiere la disposicin de recursos para financiar los

costos recurrentes de la tecnologa (servicio tcnico y conexin a internet).Con relacin a este componente, el POD identific una serie de riesgos que podran afectar laejecucin del programa y sostenibilidad. Con relacin a la ejecucin, se identificaron riesgosfid i i di l iti di t l i l t i d l l d


30/36

a conexin a internet. Se estima que la materializacin de estos riesgos sobre el uso de loscomputadores en el aula tiene una baja probabilidad.

III. Criterios no Centrales

3.1 Contribucin a los Objetivos Estratgicos del Banco

Los indicadores de resultados e impacto del programa muestran un aumento de la matrcula eneducacin pre-bsica, una reduccin de repitencia en 1ergrado, una mayor tasa de graduacin,una mayor preparacin de los estudiantes para el 1ergrado y mejores aprendizajes en primaria(ver Enlace 4.1). Se espera que el impacto del programa en mejorar en el acceso a la

educacin pre-bsica y en la calidad de la educacin primaria genere a corto y mediano plazouna mayor demanda por asistir a la educacin secundaria (tercer ciclo) y, en el largo plazo,mejoras en el logro educativo (aos de escolarizacin) de la poblacin.

Estos logros se alinean con las prioridades del Noveno Aumento General de Recursos del BID(AB-2764) (GCI-9), en particular, a las metas de reduccin de la pobreza y aumento de laequidad, y financiamiento a pases pequeos y vulnerables. En este sentido, los indicadores deresultado a los que el programa contribuy (AB-2764, Anexo I, pgina 13) fue: estudiantesbeneficiados de proyectos educativos y maestros capacitados.

Los resultados del programa tambin se alinean dentro de las rea prioritarias de las metas enpara prstamos y trabajo analtico de la Estrategia Social favorable a la Igualdad yProductividad (GN-2588-4), en particular con las de inversin en primera infancia, calidadeducativa y atencin a la pobreza. Asimismo, la operacin es consistente con el MarcoSectorial de Educacin y Desarrollo Infantil Temprano (GN-2708-2), al promover que losestudiantes ingresen preparados para aprender a la primaria y cuenten con los recursosadecuados para el aprendizaje.

3.2 Contribucin a los Objetivos de Desarrollo de la EstrategiaPas

Los indicadores de resultados e impacto del programa muestran un aumento de la matrcula en


31/36

El sector educacin no fue incluido en la estrategia pas 2011-2014.

En la estrategia vigente (GN-2796), el sector educacin est incluido dentro de las

intervenciones para promover la inclusin social en el occidente del pas, buscando promoverla acumulacin de capital humano de los menores de hogares en pobreza extrema, a nivel pre-escolar y tercer ciclo de educacin bsica (grados 7, 8 y 9). Dado el importante enfoque enzonas rurales, el programa apoya los logros de la estrategia vigente con el aumento de laprovisin de servicios de educacin pre-bsica en la zona del occidente de Honduras, y lamejora de los aprendizajes estudiantiles en educacin bsica, lo que los preparar mejor paratener xito en el tercer ciclo, en particular, con el indicador % de nios de 12 a 15 aos enhogares rurales de occidente que asisten a la escuela (7mo, 8voy 9no).

3.3 Monitoreo y EvaluacinDado el carcter innovador de las acciones apoyadas por la presente operacin, el GOH y elBID dedicaron recursos para monitorear desafos en la implementacin de las intervenciones,medir la efectividad de las mismas y buscar soluciones oportunas. Adicionalmente, de acuerdoal POD del programa, para garantizar la calidad de la evaluacin de impacto del programa, sudiseo fue realizado por J-PAL.

a. Diseo del Sistema de Monitoreo y Evaluacin

La matriz de resultados (ver Tabla 2) fue la herramienta central para el monitoreo del programa.Los indicadores modificados se consideran adecuados, ya que permitieron monitorearadecuadamente los avances tanto por el lado pedaggico y como por el lado tcnico. Elprograma fue diseado para permitir la evaluacin experimental del componente de TICs.

Adicionalmente, el programa fue acompaado de una Cooperacin Tcnica (ATN/OC-12957-HO) para evaluar el componente de pre-escolar.

b. Implementacin del Sistema de Monitoreo y Evaluacin

Los indicadores de producto de la matriz de resultados fueron adecuados para medir el avancedel programa y detectar posibles dificultades para el logro de los objetivos. El programaimplement una Unidad de Monitoreo para recopilar la informacin a ser incluida en la matrizde resultados; la misma realiz visitas peridicas para verificar el avance del programa y la


32/36

procesos de monitoreo detectaron problemas en los pagos a las facilitadoras de losCCEPREBs y rezagos en la implementacin de la tecnologa en el saln de clase. Estainformacin fue aprovechada por la unidad ejecutora para modificar algunas actividades y asmejorar la implementacin y lograr los resultados. Por ejemplo, las actividades de monitoreopermitieron identificar brechas en la formacin en matemtica y espaol de los docentes. Parareducir estas brechas, el programa realiz jornadas de capacitacin en los contenidos de lasmaterias mismas, espaol y matemtica, antes de llevar a cabo las jornadas de capacitacin dela enseanza de dichas materias mediante TICs24.

La evaluacin de impacto del componente de educacin pre-escolar influy en la polticaeducativa en el pas, al permitir identificar el potencial del modelo comunitario para expandir lacobertura de educacin pre-escolar en Honduras.

Finalmente, durante la ejecucin del programa, la capacidad de monitoreo de la SE aument deforma importante a raz de la creacin del Sistema de Administracin de Centros Educativos yla aplicacin continua de pruebas censales a estudiantes de 1era 9nogrado.

3.4 Uso de sistemas de pases

Por invitacin del BID, el programa particip en un piloto para emplear al Tribunal de Cuentaspara realizar la auditora del programa. Esta iniciativa contribuy al fortalecimiento institucionaldel Tribunal de Cuentas.

Con relacin al sector educacin, el programa gener informacin para la mejora de lossistemas de bases de datos de la SE en el nivel pre-escolar. Adicionalmente, durante laejecucin del programa, la SE con apoyo del BID en el marco del PBDM mejorsustantivamente sus sistemas de informacin y gestin de la educacin bsica25. El programaus dichos sistemas como mecanismos de monitoreo adicionales a los previstos originalmente.

3.5 Salvaguardias ambientales y sociales

El programa fue catalogado como Categora C, no generando salvaguardias ambientales.

IV. Hallazgos y Recomendaciones


33/36

4.1 Lgica vertical

Durante la ejecucin se materializaron un importante nmero de riesgos no identificados durante

el diseo de la operacin. Si bien, el impacto de estos riesgos fueron mitigados, y las accionesdefinidas por la lgica vertical fueron logrados, la exposicin de los alumnos a las intervencionesfue menor a la esperada. Dentro de las acciones clave para mitigar que riesgos no previstosafecten la lgica vertical se necesita que los diversos actores del programa interioricen lacomplementariedad entre sus acciones. Adicionalmente, la implementacin del programamuestra el rol central de los docentes para el cumplimiento efectivo de la lgica vertical.

La SE resalt la importancia de implementar modelos de capacitacin adecuados a docentes. Elprograma gener importantes lecciones sobre los beneficios de implementar programas de

capacitacin descentralizados, en lugar de los esquemas de cascada, usualmenteimplementados por la SE.

4.2 Ejecucin y presupuesto

El logro de una coordinacin efectiva entre los ejecutores permiti la ejecucin oportuna delprograma.

La ruralidad y aislamiento de las comunidades intervenidas gener importantes retos enejecucin del programa. A pesar de brechas importantes en la matrcula de pre-escolar, fue difcil

encontrar comunidades que tuviesen los nmeros mnimos de estudiantes necesarios para abrircentros de pre-escolar. Por otro lado, dada la ruralidad y alto grado de aislamiento de lasescuelas beneficiarias de tecnologa gener dificultades tanto para acompaamiento pedaggicocomo tcnico. Adems, aspectos fiscales afectaron la velocidad en la que se ejecut el programa.

El diseo del programa para una ejecucin rpida demand la existencia de muchos procesos enparalelo, sin una clara lgica de secuencialidad. Por ejemplo, las actividades de capacitacinregistraron retrasos debido a demoras en la provisin de equipos.

4.3 Experiencia general con la gestin del proyectoEl programa fue ejecutado en un plazo relativamente corto y de forma satisfactoria, a pesar de lasdificultades de implementacin por las caractersticas geogrficas de las zonas priorizadas. Sibien se registr un aumento en el plazo de ejecucin del programa esto respondi a la extensin


34/36

diseo experimental, se redujo de forma importante el nmero de escuelas participantes en laevaluacin de impacto por consideraciones logsticas que implicaban un alza significativa en loscostos del programa, lo cual result en una muestra desbalanceada en variables clave como elrea geogrfica de la escuela. Adicionalmente, cambios en la secuencia de entrega decomputadores y en la implementacin de actividades conexas resultaron en que los alumnosfueron evaluados luego de un perodo de tiempo muy limitado y cuando actividades adicionalesan se estaban implementado. Afortunadamente, pruebas censales por parte de la SE realizadasen 2014 permitieron llevar a cabo evaluaciones posteriores del impacto del programa, las cualesencontraron que las brechas en los aprendizajes estudiantiles entre las escuelas del programa ylas del grupo control (las cuales favorecan a las escuelas del grupo control en el ao 2012 y elao 2013) fueron reducidas significativamente hacia finales del ao 2014.

4.5 Asuntos no resueltos

La falta de provisin educacin media (post-bsica) en las zonas de intervencin del programalimita los impactos potenciales positivos del mismo. Es decir, el mayor rendimiento de losalumnos, y posible mayor inters en seguir estudiando, se ver truncada, en muchos casos, porla falta de oferta de educacin media.

Con relacin a la sostenibilidad de los CCEPREBs, el GOH ha manifestado que los costos de losmismos sern financiados con fondos del programa EFA. En el corto plazo, existe el riesgo de

que la falta de pagos o demoras en hacer efectivos los mismos pueda generar mayoresdeserciones de educadores capacitados por el programa, incrementando as los costos de laintervencin. Adicionalmente, la poca penetracin financiera en zonas rurales genera desafosespeciales para el pago del personal del programa en esas zonas. Es necesario buscarmecanismos adecuados para la realizacin de los mismos tales como, por ejemplo, pagos a niveldel municipio o la comunidad.

Con relacin a la sostenibilidad del uso de TICs, aunque se ha logrado empoderar a losprofesores en el uso de las TICs en su prctica docente, es necesario el mantenimiento continuo

de equipos y el aseguramiento de la conectividad. Pese a que los recursos pedaggicosdesarrollados en el marco del PEPIT pueden funcionar sin conexin a internet, otros elementosclave tales como las actualizaciones del software y el mantenimiento y/o acceso a otros recursoseducativos s requieren de una conexin estable y adecuada por lo que se convierten en los


35/36

29

Tabla 4Hallazgos y Recomendaciones

Hallazgos RecomendacionesLgica vertical

El diseo tcnico pedaggico de la intervencin tiene que ser

acompaado de un diseo tcnico operativo.

Los diferentes miembros del equipo deben conocer la lgica vertical detoda la intervencin e identificar las actividades cr ticas que podran afectarla implementacin.

Intervenciones en el sector educativo tienen que tener el soportede los docentes.

Se debe tener estrategias de manejo del cambio para lograr unaparticipacin proactiva de los docentes en las intervenciones.

Ejecucin y presupuesto

La cohesin del equipo ejecutor facilit la implementacin atiempo del programa.

Facilitar reuniones de coordinacin regulares.Monitoreo conjunto.

Implementacin en condiciones de ruralidad, aislamiento y pocaseguridad requiere soluciones innovadoras.

Se debe buscar maximizar la participacin de los actores locales, porejemplo, para asegurar la adecuacin de la infraestructura.Para la realizacin de pagos de personal, se debe buscar usar, en lamedida de lo posible, el sistema financiero.Los procesos de compras deben incluir, en la medida de lo posible, la

distribucin hasta los beneficiarios.

La dinmica del proceso presupuestario (exgeno al programa)conlleva importantes demoras en la implementacin delprograma.

Mantener dilogo con las autoridades encargadas de la formulacinpresupuestaria para evitar problemas relacionados a inercia en losprocesos presupuestarios.Mantener dilogo con las autoridades encargadas de la formulacinpresupuestaria para asegurar una adecuada comprensin de la lgicavertical del programa.

Experiencia con la gestin del proyectoA pesar de cambios en el personal de las unidades ejecutoras,la estabilidad del personal tcnico fue clave en laimplementacin del programa.

Dados los altos costos de capacitacin, se deben introducir incentivosadecuados para garantizar la permanencia del personal capacitado.

Evaluacin de impacto

El diseo de la evaluacin de impacto debe estar alineado con loque se observara con la expansin de la poltica.

En el sector educativo, se deben buscar procesos que favorezcan laseleccin por grupos de establecimientos, lo que reduce costos deseguimiento y promueve redes de intercambio.

La evaluacin de impacto debe tratar de identificar el impactomximo de la intervencin, teniendo en cuenta un perodoadecuado para identificar efectos.

Se deben buscar mecanismos de financiamiento que sean independientesde los proyectos, para garantizar que el perodo de la evaluacin seaadecuado para poder medir resultados potenciales de la intervencin.

A pesar de que se utiliz el mtodo aleatorio para seleccionarescuelas para los grupos tratamiento y grupos control, la muestraresultante fue desbalanceada en variables claves, tales comoresultados de aprendizaje estudiantil y condicin de ruralidad.

Se debe contar con informacin adecuada sobre las caractersticas de lamuestra antes de realizar la aleatorizacin y asignacin de escuelas a losgrupos tratamiento y grupos control.


36/36

30

Hallazgos RecomendacionesAsuntos no resueltos

Los actores son los factores clave para sostenibilidad.

Trabajar con la comunidad educativa para lograr generar una demandareal por los servicios educativos.Utilizar campaas de socializacin para promover apoyo de la comunidadpara la sostenibilidad.

Estrategias digitales deben ser integrales, siguiendo un planmaestro.

La introduccin de tecnologas en el aula no debe verse como un procesoo intervencin aislada, sino como una estrategia educativa integral. Paraello, la estabilidad del personal es clave.

Validación Final PCR Honduras HO-L1062

Documents