ESTUDIO RETROSPECTIVO SOBRE LAS EVALUACIONES DE LA ASISTENCIA A LOS PAÍSES: AUTOEVALUACIÓN DEL DEOvos. El siguiente paso es un examen en sentido <strong>de</strong>scen<strong>de</strong>nteque permite <strong>de</strong>terminar si el programa <strong>de</strong>lBanco alcanzó sus objetivos o resultados previstos yconsiguió resultados notables en el <strong>de</strong>sarrollo <strong>de</strong>l país.Estos dos primeros pasos permiten comprobar <strong>la</strong> coherencia<strong>de</strong> <strong><strong>la</strong>s</strong> conclusiones acerca <strong>de</strong> <strong>los</strong> productosy servicios, y <strong><strong>la</strong>s</strong> dimensiones <strong>de</strong>l efecto en términos<strong>de</strong> <strong>de</strong>sarrollo. Finalmente, <strong>la</strong> EvAP intenta <strong>de</strong>terminarcómo han contribuido a <strong>los</strong> resultados el Banco elprestatario, otros donantes y algunos acontecimientosexógenos.Al finalizar el ejercicio <strong>de</strong> 2004, el DEO habíapresentado EvAP en que se evaluaban <strong>los</strong> efectos<strong>de</strong> <strong>la</strong> <strong>asistencia</strong> <strong>de</strong>l Banco a 64 países 2 . Estas<strong>evaluaciones</strong> abarcan aproximadamente el 47% <strong>de</strong> <strong>los</strong>prestatarios y el 76% <strong>de</strong>l total <strong>de</strong> <strong>los</strong> compromisos brutos.En <strong>la</strong> presente retrospectiva se presta especia<strong>la</strong>tención a <strong><strong>la</strong>s</strong> 25 EvAP terminadas en <strong>los</strong> ejercicios <strong>de</strong>2001–03, pero se incluyen también algunas i<strong>de</strong>as resultantes<strong>de</strong> <strong><strong>la</strong>s</strong> ocho EvAP adicionales terminadas duranteel ejercicio <strong>de</strong> 2004.Se han llevado a cabo cinco EvAP conjuntascon otras instituciones multi<strong>la</strong>terales para fomentarel intercambio <strong>de</strong> experiencias y <strong>la</strong> armonización<strong>de</strong> <strong><strong>la</strong>s</strong> <strong>evaluaciones</strong>. Las EvAP <strong>de</strong>Lesotho y Rwanda fueron preparadas conjuntamentecon el Banco Africano <strong>de</strong> Desarrollo (BAfD); <strong><strong>la</strong>s</strong> <strong>de</strong> Jordaniay Túnez, en asociación con el Banco Islámico <strong>de</strong>Desarrollo, y <strong>la</strong> <strong>de</strong> Perú, en paralelo con el Banco Interamericano<strong>de</strong> Desarrollo.Los objetivos principales <strong>de</strong> estas iniciativas conjuntashan sido promover el aprendizaje por ambaspartes y alentar <strong>la</strong> e<strong>la</strong>boración <strong>de</strong> normas <strong>de</strong> evaluacióncomunes, <strong>de</strong> acuerdo con el programa másamplio <strong>de</strong> armonización <strong>de</strong>l Banco y otros donantes.Por ejemplo, el BAfD revisó recientemente susorientaciones para <strong><strong>la</strong>s</strong> EAP, a fin <strong>de</strong> armonizar<strong><strong>la</strong>s</strong>con <strong>la</strong> actual metodología <strong>de</strong>l DEO. Estas <strong>evaluaciones</strong>conjuntas también han permitido i<strong>de</strong>ntificar<strong>los</strong> principales obstácu<strong>los</strong> y <strong>de</strong>ficiencias en <strong>la</strong> <strong>asistencia</strong><strong>de</strong> <strong>los</strong> donantes. Por ejemplo, <strong>la</strong> evaluación<strong>de</strong>l BAfD <strong>sobre</strong> su programa en Rwanda puso <strong>de</strong>manifiesto <strong>la</strong> falta <strong>de</strong> una política para <strong><strong>la</strong>s</strong> situacionesposteriores a <strong>los</strong> conflictos. Finalmente, <strong><strong>la</strong>s</strong> <strong>evaluaciones</strong>conjuntas son un medio para reducir <strong>la</strong>carga <strong>de</strong> <strong>los</strong> países receptores que, <strong>de</strong> lo contrario,tendrían que realizar numerosas activida<strong>de</strong>s <strong>de</strong> evaluaciónpara <strong>los</strong> distintos donantes. Pero estos beneficiosse ven contrarrestados en parte por <strong>los</strong>costos <strong>de</strong> transacción y el tiempo adicional necesariopara <strong><strong>la</strong>s</strong> consultas y <strong>la</strong> coordinación.Enfoque <strong>de</strong> <strong>la</strong> evaluación retrospectiva <strong>sobre</strong><strong><strong>la</strong>s</strong> EvAPPara alcanzar <strong>los</strong> dos objetivos <strong>de</strong> esta retrospectiva, elDEO encargó una serie <strong>de</strong> estudios <strong>de</strong> antece<strong>de</strong>ntespara evaluar <strong><strong>la</strong>s</strong> enseñanzas aprendidas, <strong>la</strong> metodología<strong>de</strong> <strong><strong>la</strong>s</strong> EvAP, y el uso <strong>de</strong> éstas por el Directorio, elCODE (y el Subcomité <strong>de</strong>l CODE) y el personal <strong>de</strong>lBanco.• El personal <strong>de</strong>l Banco examinó <strong><strong>la</strong>s</strong> 25 EvAP terminadasen <strong>los</strong> ejercicios <strong>de</strong> 2001–03 para <strong>de</strong>terminar<strong><strong>la</strong>s</strong> enseñanzas que podrían aplicarse a <strong><strong>la</strong>s</strong> diferentesEvAP. El análisis y conclusiones <strong>de</strong> este examenpue<strong>de</strong>n verse en <strong>la</strong> Parte I.• El DEO encargó una consulta in<strong>de</strong>pendiente pararealizar investigaciones cualitativas, basadas en entrevistasen profundidad con miembros <strong>de</strong>l Directorio,<strong>de</strong>l CODE y <strong>de</strong>l Subcomité <strong>de</strong>l CODE, y otrosparticipantes en <strong>los</strong> <strong>de</strong>bates <strong>sobre</strong> <strong><strong>la</strong>s</strong> EvAP en <strong><strong>la</strong>s</strong>reuniones <strong>de</strong>l CODE o <strong>de</strong> su Subcomité. En total,fueron entrevistadas 30 personas.• Se llevaron a cabo dos estudios <strong>de</strong> seguimiento. Seexaminaron <strong><strong>la</strong>s</strong> transcripciones <strong>de</strong> <strong><strong>la</strong>s</strong> <strong>de</strong>liberaciones<strong>de</strong>l Directorio y <strong><strong>la</strong>s</strong> <strong>de</strong>c<strong>la</strong>raciones escritas<strong>de</strong> <strong>los</strong> directores ejecutivos acerca <strong>de</strong> <strong><strong>la</strong>s</strong> EAP o <strong>los</strong>informes <strong>sobre</strong> su aplicación en <strong>los</strong> países paraevaluar <strong>los</strong> efectos <strong>de</strong> <strong><strong>la</strong>s</strong> EvAP en <strong><strong>la</strong>s</strong> siguientes<strong>de</strong>liberaciones <strong>sobre</strong> <strong><strong>la</strong>s</strong> EAP. Asimismo, seanalizaron <strong>los</strong> estudios documentales <strong>de</strong> 25 EAP(o <strong>los</strong> correspondientes informes acerca <strong>de</strong> suaplicación) presentadas <strong>de</strong>spués <strong>de</strong> <strong><strong>la</strong>s</strong> EvAP para<strong>de</strong>terminar <strong>la</strong> oportunidad <strong>de</strong> estas últimas y <strong>la</strong>utilización <strong>de</strong> sus recomendaciones.• El DEO encargó al mismo consultor in<strong>de</strong>pendientea quien se habían confiado <strong><strong>la</strong>s</strong> entrevistas<strong>sobre</strong> el CODE que llevara a cabo un estudio cualitativosemejante con el personal <strong>de</strong>l Banco. Seefectuaron entrevistas en profundidad con 20 directoresy ex directores a cargo <strong>de</strong> países quehabían tenido alguna re<strong>la</strong>ción con una o más <strong>de</strong> <strong><strong>la</strong>s</strong>25 EvAP terminadas en <strong>los</strong> ejercicios <strong>de</strong> 2001–03,cinco vicepresi<strong>de</strong>ntes y ex vicepresi<strong>de</strong>ntes regionales,y otros 18 funcionarios <strong>de</strong>l Banco.• Un evaluador profesional examinó el actualp<strong>la</strong>nteamiento metodológico <strong>de</strong> <strong><strong>la</strong>s</strong> EvAP y propusocambios con el fin específico <strong>de</strong> centrar <strong><strong>la</strong>s</strong> EvAP en<strong>los</strong> resultados re<strong>la</strong>cionados con <strong><strong>la</strong>s</strong> mismas.• Se llevó a cabo un estudio documental <strong>sobre</strong> <strong>los</strong>métodos <strong>de</strong> evaluación <strong>de</strong> <strong>los</strong> países utilizados porotros organismos bi<strong>la</strong>terales y multi<strong>la</strong>terales parai<strong>de</strong>ntificar prácticas recomendables.2
2Parte I: ¿Qué hemosaprendido?En el presente capítulo se resumen <strong><strong>la</strong>s</strong> constataciones y enseñanzas <strong>de</strong> <strong><strong>la</strong>s</strong>25 EvAP terminadas en <strong>los</strong> ejercicios <strong>de</strong> 2001–03. Se incluyen tambiénalgunas observaciones resultantes <strong>de</strong> ocho EvAP terminadas durante elejercicio <strong>de</strong> 2004 3 .Estas 25 EvAP no son una muestra aleatoria ni representativa.Los países <strong>de</strong> <strong><strong>la</strong>s</strong> EvAP se seleccionanteniendo en cuenta varios factores. El más importantees <strong>la</strong> cronología <strong>de</strong> <strong>la</strong> siguiente estrategia <strong>de</strong><strong>asistencia</strong> al país (EAP) <strong>de</strong>l Banco, pero se tienentambién en cuenta otros factores, como <strong>la</strong> capacidad<strong>de</strong>l DEO para co<strong>la</strong>borar con otras institucionesfinancieras internacionales, <strong>la</strong> distribución regionaly el hecho <strong>de</strong> que en una anterior EvAP se haya incluidoo no al país. Así pues, si bien <strong>los</strong> países nopue<strong>de</strong>n consi<strong>de</strong>rarse una muestra aleatoria <strong>de</strong>prestatarios <strong>de</strong>l Banco, esas 25 EvAP constituyenuna base razonable para este examen <strong>de</strong> <strong><strong>la</strong>s</strong> “constatacionesy enseñanzas” (véase el Cuadro 2.1).Hay una combinación a<strong>de</strong>cuada <strong>de</strong> países <strong>de</strong> ingresobajo y mediano, <strong>de</strong> prestatarios <strong>de</strong>l Banco Internacional<strong>de</strong> Reconstrucción y Fomento (BIRF) y<strong>de</strong> <strong>la</strong> Asociación Internacional <strong>de</strong> Fomento (AIF)y <strong>de</strong> <strong><strong>la</strong>s</strong> regiones. Se incluyen también cuatro paísesque han atravesado recientemente situaciones <strong>de</strong>conflicto. La muestra contiene asimismo una combinacióna<strong>de</strong>cuada <strong>de</strong> países con resultados positivos(unas tres quintas partes) y países conresultados poco satisfactorios. Está dividida enforma bastante equitativa entre países con resultadospositivos y negativos, <strong>de</strong> acuerdo con <strong>la</strong> calificación<strong>de</strong> <strong>la</strong> Evaluación <strong>de</strong> <strong><strong>la</strong>s</strong> políticas einstituciones nacionales <strong>de</strong>l Banco. Como se observaen el Examen anual <strong>de</strong> <strong>la</strong> eficacia en términos<strong>de</strong> <strong>de</strong>sarrollo 2003, hay una corre<strong>la</strong>ción positivaentre <strong><strong>la</strong>s</strong> calificaciones <strong>de</strong> resultados <strong>de</strong> <strong>la</strong> EvAP y el<strong>de</strong>sempeño en materia <strong>de</strong> políticas (DEO 2004a,página 15). Una <strong>de</strong>ficiencia es que <strong>la</strong> cobertura <strong>de</strong><strong>los</strong> países <strong>de</strong> América Latina y Asia meridional yoriental es escasa, <strong>sobre</strong> todo porque <strong><strong>la</strong>s</strong> <strong>evaluaciones</strong><strong>de</strong> <strong>los</strong> países <strong>de</strong> estas regiones estaban prácticamenteterminadas antes <strong>de</strong>l ejercicio <strong>de</strong> 2001.ConstatacionesLas calificaciones <strong>de</strong> <strong>los</strong> efectos directos <strong>de</strong><strong><strong>la</strong>s</strong> EvAP no siempre coinci<strong>de</strong>n con el tota<strong>la</strong>gregado <strong>de</strong> <strong>los</strong> resultados <strong>de</strong> <strong>los</strong> proyectos.Aproximadamente en un tercio <strong>de</strong> <strong><strong>la</strong>s</strong> EvAP, <strong>la</strong> calificación<strong>de</strong> <strong>los</strong> efectosdirectos <strong>de</strong> <strong>la</strong> estrategia <strong>de</strong><strong>asistencia</strong> al país fue pocosatisfactoria, pero <strong>la</strong> agregación<strong>de</strong> <strong>los</strong> resultados<strong>de</strong> <strong>los</strong> proyectos en el país durante el período correspondientea <strong>la</strong> EvAP fue satisfactoria (Cuadro2.2). En cierta forma, era previsible. La EvAP es unaevaluación global <strong>de</strong>l programa <strong>de</strong>l Banco en unpaís que compren<strong>de</strong> tanto proyectos como activida<strong>de</strong>s<strong>de</strong> análisis y asesoramiento. A<strong>de</strong>más, <strong><strong>la</strong>s</strong>Estas 25 EvAP no sonuna muestra aleatoriani representativa.3