Descarga la aplicación para disfrutar aún más
Vista previa del material en texto
POD, Matriz de Resultados y DEM 1 Propuesta de Desarrollo de la Operación (POD) La Propuesta de Desarrollo de la Operación (POD) describe el diseño de un proyecto. El POD debe incluir una descripción clara del problema y la solución del proyecto, su diagnóstico, alineación y sus arreglos de monitoreo y evaluación. El POD incluye tres secciones: 1. Sección I. La primera sección del POD se titula “Descripción del proyecto y monitoreo de resultados”. Tomando en cuenta el punto de vista de evaluabilidad, el documento debe incluir un párrafo que describa el problema y sus determinantes. En los siguientes párrafos se debe explicar más detalladamente cada determinante y su relación con la solución propuesta. A continuación, el POD debe incluir también un párrafo con evidencia de la efectividad de proyectos similares, y otro que indique la alineación del proyecto con los objetivos estratégicos del país y del BID. En la subsección “Objetivos, componentes y costo” el equipo debe indicar los objetivos generales y específicos del proyecto. El equipo debe incluir una definición de los componentes y un párrafo que describa los criterios de focalización para identificar a los beneficiarios previstos y a los usuarios. La siguiente subsección es “Indicadores claves de resultados”. En esta subsección, el equipo puede enumerar los indicadores propuestos para monitorear y evaluar los objetivos del proyecto. El equipo también puede enumerar los productos clave en un párrafo aparte. Un párrafo puede resumir los supuestos y los resultados del análisis económico. 2. Sección II. Esta sección, titulada “Estructura de financiamiento y principales riesgos” incluye un cuadro que resume los costos por componente y un segundo cuadro que resume el cronograma de desembolsos. La sección también incluye subsecciones de salvaguardias y riesgos. 3. Sección III. Esta sección se titula “Plan de implementación y gestión”. El POD incluye una subsección para que el equipo especifique los arreglos de implementación y otra subsección para que resuma los Esta lectura busca identificar el objetivo principal, la estructura y la interpretación de la Propuesta de Desarrollo de la Operación (POD, por sus siglas en inglés), la Matriz de Resultados (MDR) y la Matriz de Efectividad en el Desarrollo (DEM, por sus siglas en inglés), tomando sólo en cuenta el punto de vista de evaluabilidad. Cabe notar que los temas cubiertos bajo la evaluabilidad no son exhaustivos en cuanto a todos los requisitos de estos documentos a nivel del Banco. 2 arreglos de monitoreo de resultados. En esta subsección, el equipo debe resumir los mecanismos de recolección de datos, las agencias responsables por la recolección de datos y el financiamiento. El equipo también debe incluir un párrafo que resuma los arreglos de evaluación. El resumen debe incluir las principales metodologías de evaluación, los responsables de llevar a cabo las actividades de evaluación y los recursos asignados a la evaluación . 1 Matriz de Efectividad en el Desarrollo (DEM) La Matriz de Efectividad en el Desarrollo (DEM) es una lista de verificación de estándares de evaluabilidad para la Propuesta de Desarrollo de la Operación (POD) y sus anexos obligatorios. La evaluabilidad es la medida en que un proyecto se puede evaluar de forma confiable y creíble. La DEM busca asegurar que los proyectos tengan un diagnóstico y lógica adecuados a la entrada, y que el Banco pueda monitorear y evaluar el logro de productos y resultados de las operaciones que financia. La DEM establece el marco de referencia para monitorear la implementación de un proyecto mediante el Informe del Seguimiento del Progreso (PMR, por sus siglas en inglés) y para la evaluación ex post a la salida, de acuerdo con lo que se reporta en el Informe de Terminación del Proyecto (PCR, por sus siglas en inglés). La DEM consta de cuatro secciones: 1. La primera sección evalúa la alineación de los objetivos del proyecto con los del país y con las prioridades estratégicas del grupo BID. 2. La segunda sección analiza la evaluabilidad ex ante del proyecto a través de una lista de verificación que contiene aproximadamente 70 ítems. Esta sección se divide en tres subsecciones: ∙ La primera subsección está relacionada con la medida en que el proyecto tiene una descripción y diagnóstico de los problemas adecuados, una descripción apropiada de las soluciones propuestas y una relación estrecha con los mecanismos establecidos para el monitoreo y la evaluación. ∙ La segunda subsección verifica que se lleve a cabo el análisis económico del proyecto, que tenga beneficios y costos cuantificados y que se base en supuestos razonables. El análisis económico debe incluir un análisis de sensibilidad y ser coherente con las metas de los indicadores clave en la Matriz de Resultados. ∙ La tercera subsección cubre los arreglos para el monitoreo y evaluación. 3. La tercera sección se refiere a asuntos de riesgos. 4. La cuarta sección de la DEM está relacionada con la adicionalidad. La Asamblea de Gobernadores del Banco requiere que todas las propuestas de préstamo sean evaluables o parcialmente evaluables (o sea, en lugar de no evaluables) para que el Directorio Ejecutivo pueda considerarlas para su aprobación. Para lograr estas categorías, el proyecto debe alcanzar un puntaje mínimo de 5 (cinco) en el índice general de evaluabilidad, y en cada una de las tres secciones de evaluabilidad (evaluación y solución basadas en evidencia, análisis económico ex ante y monitoreo y evaluación). 1 Se invita a los lectores a visitar los sitios de evaluación del BID sobre Monitoreo y Evaluación. https://idbg.sharepoint.com/sites/PMR_2019 https://www.iadb.org/es/portalevaluacion 3 Matriz de Resultados (MDR) La Matriz de Resultados es una representación esquemática de la lógica vertical y de los objetivos que se esperan alcanzar durante la ejecución del proyecto. La Matriz de Resultados consta de un conjunto de metas y sienta las bases para monitorear y evaluar el proyecto en todas sus fases (aprobación, implementación y terminación). Sus filas enumeran indicadores, y sus columnas períodos (años). Los indicadores se agrupan según la lógica del proyecto. La Matriz de Resultados es un anexo al POD. La Matriz de Resultados incluye una declaración de los objetivos del proyecto y una clasificación explicita de indicadores. La Matriz de Resultados tiene tres niveles. El primer nivel enumera los indicadores asociados con el objetivo general. El segundo nivel enumera los indicadores asociados con objetivos específicos. El tercer nivel enumera los indicadores de productos agrupados por componentes. La Matriz de Resultados incluye dos columnas adicionales. La primera columna adicional enumera los medios de verificación, y en la segunda los equipos pueden ingresar comentarios. Para cada indicador, la información relacionada con el instrumento y la agencia responsable por la recolección de datos deberían completar los campos en la columna “medios de verificación”. Es obligatorio proporcionar esta información para todos los niveles de indicadores (objetivos generales, objetivos específicos y productos). La Matriz de Resultados debe incluir todas las entradas relevantes para que se pueda llevar a cabo el monitoreo y la evaluación. Para los indicadores de productos, los equipos deben incluir metas anuales. 2 Para los indicadores de resultados, los equipos deben incluir valores de línea de base y metas en el último año del proyecto. El seguimiento de los indicadores asociados a los objetivos específicos en los años previos al cierre del proyecto es opcional. Para los indicadores asociados al objetivo general, los equipos deben expresar únicamente el plazo previsto para el logro y la dirección del cambio previsto. La Matriz de Resultados sienta las bases para el monitoreo y la evaluación. Por lo tanto, los equipos deben llegar a un consenso para su uso con las partes interesadas, especialmente aquellas quese beneficiarán de los mecanismos de monitoreo y evaluación. Conclusión La Propuesta de Desarrollo de la Operación (POD) es un documento que describe la propuesta de un proyecto. La Matriz de Efectividad en el Desarrollo (DEM) es una lista de verificación de estándares de evaluabilidad que se aplican al POD y sus anexos. La DEM busca asegurar que los proyectos tengan un diagnóstico y lógica adecuados a la entrada, y que el Banco pueda monitorear y evaluar el logro de productos y resultados de las operaciones que financia. La Matriz de Resultados sienta las bases para monitorear y evaluar el proyecto en todas sus fases (aprobación, implementación y cierre). 2 Se ingresa el valor cero para la meta en años sin entrega del producto. 4 Consejos prácticos EN EL MOMENTO DE DISEÑAR UN PROYECTO, LOS EQUIPOS DEBEN: 1. Asegurarse de que el POD incluya una descripción clara del problema y la solución del proyecto, su diagnóstico, alineación y sus arreglos de monitoreo y evaluación. Además, deben verificar que el proyecto tenga una lógica vertical explícita y coherente con la declaración de objetivos 2. Llenar la lista de verificación de la DEM y agregar información para mejorar la evaluabilidad ex ante del proyecto. También deben asegurarse de que el proyecto cumpla los estándares mínimos de evaluabilidad. 3. Definir una Matriz de Resultados de alta calidad, o sea, una matriz que vincule los objetivos generales y específicos con base en una lógica vertical clara. Una Matriz de Resultados de alta calidad incluye indicadores SMART y metas realistas. También asegura que cada indicador tenga un medio de verificación basado en una fuente de datos definida y un plan para la recolección de datos. 5 Glosario ∙ Evaluabilidad. La medida en que un proyecto se puede evaluar de forma confiable y creíble. ∙ Matriz de Efectividad en el Desarrollo (DEM, por sus siglas en inglés). Una lista de verificación de estándares de evaluabilidad para la Propuesta de Desarrollo de la Operación (POD) y sus anexos obligatorios. ∙ Matriz de resultados. Una representación esquemática de la lógica vertical del proyecto y de los objetivos que se esperan alcanzar durante la ejecución. ∙ Propuesta de Desarrollo de la Operación (POD, por sus siglas en inglés). Un documento que describe el diseño de un proyecto. El POD debe incluir una descripción clara del problema y su solución, el diagnóstico, la alineación y los arreglos de monitoreo y evaluación. Recursos ∙ Enlace a sitio de efectividad en el desarrollo https://www.iadb.org/es/oficina-de-planificacion- estrategica-y-efectividad-en-el-desarrollo/efectividad-en-el-desarrollo Bibliografía ∙ Deaton, Angus. 2010. “Instruments, Randomization, and Learning about Development.” Journal of Economic Literature, 48(2): 424–55. DOI: 10.1257/jel.48.2.424 ∙ Evaluation Cooperation Group (ECG). 2012. Big Book on Evaluation Good Practice Standards. https:// www.ecgnet.org/document/ecg-big-book-good-practice-standards [visitado el 2 de julio de 2018]. ∙ Finan, F., Olken, B. A., and Pande, R., 2017. “The Personnel Economics of the Developing State.” Handbook of Field Experiments, Volume II. North Holland: Abhijit Banerjee and Esther Duflo (eds). ∙ Fukuyama, F. 2013. “What is Governance.” Governance, 26: 347-368. doi:10.1111/gove.12035 ∙ Gertler, Paul J., Sebastián Martínez, Patrick Premand, Laura B. Rawlings y Christel M. J. Vermeersch. 2017. La evaluación de impacto en la práctica, Segunda edición. Washington, D.C.: Banco Interamericano de Desarrollo y Banco Mundial. doi:10.1596/978-1-4648-0888-3. Licencia de atribución: Creative Commons CC BY 3.0 IGO http://documents.worldbank.org/curated/ en/698441474029568469/Impact-evaluation-in-practice ∙ Banco Interamericano de Desarrollo (BID). 2011. “Revisión de la Matriz de Efectividad en el Desarrollo para operaciones con y sin Garantía Soberana”. Documento del Banco Interamericano de Desarrollo GN-2489-6, Washington, D.C. ∙ Innovations for Poverty Action (IPA). 2016. “Guiding your Program to Build a Theory of Change.” https://www.poverty-action.org/sites/default/files/publications/Goldilocks-Deep-Dive-Guiding-Your- Program-to-Build-Theory-of-Change_2.pdf [Accessed July 25, 2018]. ∙ Practical Concepts Incorporated (PCI). n.d. “Guidelines for Teaching Logical Framework Concepts.” Retrieved from https://pdf.usaid.gov/pdf_docs/pnaec576.pdf [July 25, 2018]. https://idbg.sharepoint.com/sites/VPS/Pages/Operational-procedures-and-Checklists.aspx https://idbg.sharepoint.com/sites/VPS/Pages/Operational-procedures-and-Checklists.aspx https://idbg.sharepoint.com/sites/OLP/es/Paginas/knowledgearea.aspx?idkn=6&iscategory=true https://idbg.sharepoint.com/sites/OLP/en/pages/knowledgeArea.aspx?idkn=6&isCategory=true https://www.iadb.org/es/oficina-de-planificacion-estrategica-y-efectividad-en-el-desarrollo/efectivi https://www.iadb.org/es/oficina-de-planificacion-estrategica-y-efectividad-en-el-desarrollo/efectividad-en-el-desarrollo https://www.iadb.org/en/office-strategic-planning-and-development-effectiveness/development-effectiv https://www.ecgnet.org/document/ecg-big-book-good-practice-standards https://idbg.sharepoint.com/teams/ez-SEC/Registered Documents/RI-Reg-GN/RIRegGNSpanish/Revisión de la Matriz de Efectividad en el Desarrollo para Operaciones con y sin Garantía Soberana_ Nueva versió %5b35773698%5d.PDF https://www.ecgnet.org/document/ecg-big-book-good-practice-standards http://documents.worldbank.org/curated/en/698441474029568469/Impact-evaluation-in-practice https://www.poverty-action.org/sites/default/files/publications/Goldilocks-Deep-Dive-Guiding-Your-Program-to-Build-Theory-of-Change_2.pdf https://pdf.usaid.gov/pdf_docs/pnaec576.pdf
Compartir