Estudio retrospectivo sobre las evaluaciones de la asistencia a los ...

Estudio retrospectivo sobre las evaluaciones de la asistencia a los ... Estudio retrospectivo sobre las evaluaciones de la asistencia a los ...

ieg.worldbankgroup.org
from ieg.worldbankgroup.org More from this publisher
11.07.2015 Views

ESTUDIO RETROSPECTIVO SOBRE LAS EVALUACIONES DE LA ASISTENCIA A LOS PAÍSES: AUTOEVALUACIÓN DEL DEOciones. Dos DP que estaban familiarizados con más deuna EvAP hicieron una evaluación positiva de una omás de ellas, y una evaluación negativa de las demás.Siete DP tenían una opinión negativa y las impresionesde los otros cuatro fueron variadas. Los VPR entrevistadostuvieron opiniones incluso menos positivasque los DP. Una de las constataciones principales deestas entrevistas y conversaciones con grupos de discusiónfue que generalmente las EvAP recibían unaevaluación positiva cuando se creía que producían unimpacto directo en la preparación de una EAP o enalgún otro estudio o actividad en curso, y viceversa.Las opiniones de los DP no se dejabanguiar estrictamente por las calificacionessobre los efectos directos recibidas por suspaíses. Si bien hubo unos pocos casos en que seobservó una correlación directa entre las calificacionesde los efectos directos y la evaluación de laEvAP, el panorama general era diferente. Los sieteDP que hicieron una evaluación positiva estuvieronrelacionados con tres EvAP que obtuvieron calificacionespositivas sobre los efectos directos y cuatroque recibieron calificaciones negativas. Lo mismosucedió en el caso de los DP que evaluaron las EvAPen forma negativa. Por otra parte, las opiniones delos VPR estuvieran determinadas principalmentepor su experiencia con EvAP que recibieron calificacionesnegativas. Fue difícil establecer una relaciónentre las calificaciones y las percepciones delos miembros de los equipos a cargo de los paísesen los grupos de discusión, excepto por el hechode que muchas de las críticas y sugerencias estuvieronguiadas por las experiencias con EvAP queobtuvieron calificaciones negativas.Utilización de las EvAPSe consideraba que algunas EvAP tenían unimpacto directo en la EAP o en el planteamientodel Banco con respecto al país. Algunos participantesdeclararon que la evaluación de laasistencia a su país tuvo un impacto directo en laestrategia y en el programa de financiamiento, y unimpacto apreciable en la manera de pensar y realizarsu trabajo. En un caso se declaró que “de hecho,después de aquello no otorgamos préstamos a Xdurante un largo tiempo”. Había más probabilidadesde que los participantes que se identificabancomo beneficiarios primarios de la EvAP hubieraninteractuado directamente con el equipo a cargo dela misión, destacado el impacto positivo de las evaluaciones(con la EAP y con posterioridad a ella),promovido una difusión más amplia de las constatacionesa los beneficiarios y declarado que consultabanlas EvAP de otros países para realizar sutrabajo.Sin embargo, muchas de las EvAP se considerabande poco o ningún valor. Muchos entrevistadosreconocieron lo poco que valoraban yutilizaban las EvAP de sus países. Una vez concluidosel proceso formal y la reunión del CODE, estasEvAP solían descartarse e ignorarse. Sus críticos decíanque las EvAP eran documentos superficiales sinninguna significación verdadera para la labor delpersonal del Banco; que no aportaban ningún conocimientoo enseñanzas que pudieran modificarla manera en que el Banco desarrollaba su labor;que no lograban comunicar la riqueza y complejidadde la situación de un país, y que no conteníannuevas ideas de las que el equipo a cargo de lasoperaciones en el país ya no tuviera conocimiento.Atributos positivos de las EvAPLa valoración como instrumento de aprendizaje.Los participantes que evaluaron positivamentelas EvAP se concentraron en el impacto de las constatacionessobre estrategias y operaciones futuras, inclusocuando describían evaluaciones críticas de laestrategia del Banco o del equipo a cargo de las operacionesen el país. En cuanto al proceso de aprendizaje,la opinión era que éste se derivaba, en mayormedida, del proceso informal y constante a través delcual se recopilaban, comunicaban y difundían las constatacionesde las EvAP, antes que de estas últimascomo documento independiente y autorizado.Aspectos que se deben mejorarCompetencia y experiencia de los jefes deproyecto. Una mayoría abrumadora de los DP (16 de20) y todos los VPR informaron que la competencia yexperiencia del jefe de proyecto es un factor fundamentalpara determinar su confianza en una EvAP y lareceptividad que puede tener a este documento. Losatributos más citados de un buen jefe de proyecto fueronlos siguientes: experiencia operacional previa;sensibilidad frente a las presiones y complejidades dela toma de decisiones y la aplicación de las estrategiassobre el terreno; conocimiento de la región y de lossectores pertinentes, y ausencia de prejuicios.40

ANEXO E: RESUMEN DE LAS ENTREVISTAS CON PERSONAL DEL BANCOGrado de interacción con el equipo a cargode las operaciones en el país. Del grupo de DP entrevistadospara el estudio, seis de los ocho que hicieronuna evaluación positiva de una o más EvAPsubrayaron el valor y la importancia del proceso a travésdel cual se generaba dicho documento. Los participantesque evaluaron positivamente las EvAP teníanmás probabilidades de describir este documento, asícomo su valor para la labor que desarrolla Banco, entérminos de un proceso de aprendizaje permanente,y en repetidas ocasiones manifestaron que las comunicacionesabiertas y periódicas entre el equipo acargo del país y el equipo responsable de la EvAP resultabanen discusiones fructíferas respecto de lasprincipales cuestiones que debían examinarse y de laspersonas y recursos adecuados a los que se debía recurrirdurante la evaluación. En cambio, los participantesque evaluaron las EvAP en forma negativadeclararon que existía muy poca interacción entre elequipo a cargo de las operaciones en el país y elequipo responsable de la EvAP.Falta de sensibilidad en la toma de decisionesy los procesos operacionales. Participantesde todos los grupos (incluidos 12 DP, cuatro VPR yambos grupos de discusión) informaron que confrecuencia en las EvAP no se presta suficiente atenciónal razonamiento en que se ha basado la formulaciónde las estrategias en el pasado ni alreconocimiento en debida forma del compromisoy profesionalismo de la administración y el personalde operaciones. La utilidad incluso de la EvAPmás positiva a veces se ve disminuida por la incapacidad,durante la evaluación, de poner las decisionesen el contexto en el que fueron tomadas ode tener en cuenta la disposición de quienes desarrollarony pusieron en práctica la EAP. “No puedocreer que nuestra resistencia a las constataciones ya las situaciones hipotéticas se deban simplementea nuestra estrechez de mente y resistencia a la críticay al cambio”, señaló uno de los entrevistados.“Lo que ocurre es que en el proceso no se reconocesuficientemente el profesionalismo de las personas”.Cronología caprichosa de las EvAP. Independientementede la evaluación que hicieron delas EvAP, los participantes de todos los grupos coincidieronen que, en la práctica, la cronología de lasevaluaciones es demasiado caprichosa e impredeciblepara ser un instrumento útil para la formulaciónde estrategias a nivel institucional. Incluso losparticipantes que describieron experiencias idealesrespecto de la cronología de las EvAP señalaron quesabían de casos en que una evaluación se había distribuidocuando el proceso ya estaba demasiadoavanzado para servir de fundamento para la EAP,observación que generó escepticismo acerca de lautilidad de la EvAP en su labor en el futuro. La mayoríade los participantes indicó que, para quepueda servir de fundamento a la EAP, la EvAP deberíaestar disponible en las primeras etapas delproceso de formulación de la estrategia. En muchoscasos, las observaciones de los participantes respectode la cronología y la distinta manera de entenderla EvAP en el proceso y en el documentoestaban estrechamente relacionadas con el equiporesponsable de la EvAP.Énfasis excesivo en la rendición de cuentasen contraposición al aprendizaje. Los participantesque hicieron una evaluación positiva de lasEvAP rara vez emplearon la expresión “rendición decuentas”. Sin embargo, aquellos cuya evaluaciónfue negativa se quejaron en repetidas ocasiones delénfasis excesivo de la EvAP en la rendición de cuentas.El problema que se mencionó con mayor frecuenciaen relación con el énfasis en la rendición decuentas que se pone actualmente en la CAE (y queresume la mayoría de las demás inquietudes señaladas)era que disminuía el valor y la utilidad —durantela formulación de la estrategia y a nivel delequipo a cargo de las operaciones en el país— delas enseñanzas y recomendaciones para el futuroque se supone que deben ofrecer las evaluaciones.Los participantes de todos los grupos manifestaronsu preocupación de que el énfasis actual en la rendiciónde cuentas monopoliza el contenido, la metodologíay la organización de las EvAP (y que lasrecomendaciones y constataciones más importantesquedan rezagadas al final del documento), y disminuyela receptividad de la administración y delpersonal a cargo de las operaciones en los paísesfrente a las recomendaciones formuladas.En el caso de los participantes que trabajan en paísesgrandes y complejos en los que el Banco tienegrandes inversiones, así como en el de los VPR de esasregiones, la credibilidad de las EvAP como indicadoresde la rendición de cuentas corre mayor peligro debidoa la incapacidad de las evaluaciones de abordar elpapel del Directorio y a las presiones externas de lospaíses del Grupo de los Siete para orientar las estrate-41

ESTUDIO RETROSPECTIVO SOBRE LAS EVALUACIONES DE LA ASISTENCIA A LOS PAÍSES: AUTOEVALUACIÓN DEL DEOciones. Dos DP que estaban familiarizados con más <strong>de</strong>una EvAP hicieron una evaluación positiva <strong>de</strong> una omás <strong>de</strong> el<strong><strong>la</strong>s</strong>, y una evaluación negativa <strong>de</strong> <strong><strong>la</strong>s</strong> <strong>de</strong>más.Siete DP tenían una opinión negativa y <strong><strong>la</strong>s</strong> impresiones<strong>de</strong> <strong>los</strong> otros cuatro fueron variadas. Los VPR entrevistadostuvieron opiniones incluso menos positivasque <strong>los</strong> DP. Una <strong>de</strong> <strong><strong>la</strong>s</strong> constataciones principales <strong>de</strong>estas entrevistas y conversaciones con grupos <strong>de</strong> discusiónfue que generalmente <strong><strong>la</strong>s</strong> EvAP recibían unaevaluación positiva cuando se creía que producían unimpacto directo en <strong>la</strong> preparación <strong>de</strong> una EAP o enalgún otro estudio o actividad en curso, y viceversa.Las opiniones <strong>de</strong> <strong>los</strong> DP no se <strong>de</strong>jabanguiar estrictamente por <strong><strong>la</strong>s</strong> calificaciones<strong>sobre</strong> <strong>los</strong> efectos directos recibidas por suspaíses. Si bien hubo unos pocos casos en que seobservó una corre<strong>la</strong>ción directa entre <strong><strong>la</strong>s</strong> calificaciones<strong>de</strong> <strong>los</strong> efectos directos y <strong>la</strong> evaluación <strong>de</strong> <strong>la</strong>EvAP, el panorama general era diferente. Los sieteDP que hicieron una evaluación positiva estuvieronre<strong>la</strong>cionados con tres EvAP que obtuvieron calificacionespositivas <strong>sobre</strong> <strong>los</strong> efectos directos y cuatroque recibieron calificaciones negativas. Lo mismosucedió en el caso <strong>de</strong> <strong>los</strong> DP que evaluaron <strong><strong>la</strong>s</strong> EvAPen forma negativa. Por otra parte, <strong><strong>la</strong>s</strong> opiniones <strong>de</strong><strong>los</strong> VPR estuvieran <strong>de</strong>terminadas principalmentepor su experiencia con EvAP que recibieron calificacionesnegativas. Fue difícil establecer una re<strong>la</strong>ciónentre <strong><strong>la</strong>s</strong> calificaciones y <strong><strong>la</strong>s</strong> percepciones <strong>de</strong><strong>los</strong> miembros <strong>de</strong> <strong>los</strong> equipos a cargo <strong>de</strong> <strong>los</strong> paísesen <strong>los</strong> grupos <strong>de</strong> discusión, excepto por el hecho<strong>de</strong> que muchas <strong>de</strong> <strong><strong>la</strong>s</strong> críticas y sugerencias estuvieronguiadas por <strong><strong>la</strong>s</strong> experiencias con EvAP queobtuvieron calificaciones negativas.Utilización <strong>de</strong> <strong><strong>la</strong>s</strong> EvAPSe consi<strong>de</strong>raba que algunas EvAP tenían unimpacto directo en <strong>la</strong> EAP o en el p<strong>la</strong>nteamiento<strong>de</strong>l Banco con respecto al país. Algunos participantes<strong>de</strong>c<strong>la</strong>raron que <strong>la</strong> evaluación <strong>de</strong> <strong>la</strong><strong>asistencia</strong> a su país tuvo un impacto directo en <strong>la</strong>estrategia y en el programa <strong>de</strong> financiamiento, y unimpacto apreciable en <strong>la</strong> manera <strong>de</strong> pensar y realizarsu trabajo. En un caso se <strong>de</strong>c<strong>la</strong>ró que “<strong>de</strong> hecho,<strong>de</strong>spués <strong>de</strong> aquello no otorgamos préstamos a Xdurante un <strong>la</strong>rgo tiempo”. Había más probabilida<strong>de</strong>s<strong>de</strong> que <strong>los</strong> participantes que se i<strong>de</strong>ntificabancomo beneficiarios primarios <strong>de</strong> <strong>la</strong> EvAP hubieraninteractuado directamente con el equipo a cargo <strong>de</strong><strong>la</strong> misión, <strong>de</strong>stacado el impacto positivo <strong>de</strong> <strong><strong>la</strong>s</strong> <strong>evaluaciones</strong>(con <strong>la</strong> EAP y con posterioridad a el<strong>la</strong>),promovido una difusión más amplia <strong>de</strong> <strong><strong>la</strong>s</strong> constatacionesa <strong>los</strong> beneficiarios y <strong>de</strong>c<strong>la</strong>rado que consultaban<strong><strong>la</strong>s</strong> EvAP <strong>de</strong> otros países para realizar sutrabajo.Sin embargo, muchas <strong>de</strong> <strong><strong>la</strong>s</strong> EvAP se consi<strong>de</strong>raban<strong>de</strong> poco o ningún valor. Muchos entrevistadosreconocieron lo poco que valoraban yutilizaban <strong><strong>la</strong>s</strong> EvAP <strong>de</strong> sus países. Una vez concluidosel proceso formal y <strong>la</strong> reunión <strong>de</strong>l CODE, estasEvAP solían <strong>de</strong>scartarse e ignorarse. Sus críticos <strong>de</strong>cíanque <strong><strong>la</strong>s</strong> EvAP eran documentos superficiales sinninguna significación verda<strong>de</strong>ra para <strong>la</strong> <strong>la</strong>bor <strong>de</strong>lpersonal <strong>de</strong>l Banco; que no aportaban ningún conocimientoo enseñanzas que pudieran modificar<strong>la</strong> manera en que el Banco <strong>de</strong>sarrol<strong>la</strong>ba su <strong>la</strong>bor;que no lograban comunicar <strong>la</strong> riqueza y complejidad<strong>de</strong> <strong>la</strong> situación <strong>de</strong> un país, y que no conteníannuevas i<strong>de</strong>as <strong>de</strong> <strong><strong>la</strong>s</strong> que el equipo a cargo <strong>de</strong> <strong><strong>la</strong>s</strong>operaciones en el país ya no tuviera conocimiento.Atributos positivos <strong>de</strong> <strong><strong>la</strong>s</strong> EvAPLa valoración como instrumento <strong>de</strong> aprendizaje.Los participantes que evaluaron positivamente<strong><strong>la</strong>s</strong> EvAP se concentraron en el impacto <strong>de</strong> <strong><strong>la</strong>s</strong> constataciones<strong>sobre</strong> estrategias y operaciones futuras, inclusocuando <strong>de</strong>scribían <strong>evaluaciones</strong> críticas <strong>de</strong> <strong>la</strong>estrategia <strong>de</strong>l Banco o <strong>de</strong>l equipo a cargo <strong>de</strong> <strong><strong>la</strong>s</strong> operacionesen el país. En cuanto al proceso <strong>de</strong> aprendizaje,<strong>la</strong> opinión era que éste se <strong>de</strong>rivaba, en mayormedida, <strong>de</strong>l proceso informal y constante a través <strong>de</strong>lcual se recopi<strong>la</strong>ban, comunicaban y difundían <strong><strong>la</strong>s</strong> constataciones<strong>de</strong> <strong><strong>la</strong>s</strong> EvAP, antes que <strong>de</strong> estas últimascomo documento in<strong>de</strong>pendiente y autorizado.Aspectos que se <strong>de</strong>ben mejorarCompetencia y experiencia <strong>de</strong> <strong>los</strong> jefes <strong>de</strong>proyecto. Una mayoría abrumadora <strong>de</strong> <strong>los</strong> DP (16 <strong>de</strong>20) y todos <strong>los</strong> VPR informaron que <strong>la</strong> competencia yexperiencia <strong>de</strong>l jefe <strong>de</strong> proyecto es un factor fundamentalpara <strong>de</strong>terminar su confianza en una EvAP y <strong>la</strong>receptividad que pue<strong>de</strong> tener a este documento. Losatributos más citados <strong>de</strong> un buen jefe <strong>de</strong> proyecto fueron<strong>los</strong> siguientes: experiencia operacional previa;sensibilidad frente a <strong><strong>la</strong>s</strong> presiones y complejida<strong>de</strong>s <strong>de</strong><strong>la</strong> toma <strong>de</strong> <strong>de</strong>cisiones y <strong>la</strong> aplicación <strong>de</strong> <strong><strong>la</strong>s</strong> estrategias<strong>sobre</strong> el terreno; conocimiento <strong>de</strong> <strong>la</strong> región y <strong>de</strong> <strong>los</strong>sectores pertinentes, y ausencia <strong>de</strong> prejuicios.40

Hooray! Your file is uploaded and ready to be published.

Saved successfully!

Ooh no, something went wrong!