Evaluaciones que mejoran el desempeño de las intervenciones públicas en América Latina y el Caribe
Evaluations that Improve the Performance of Public Interventions in Latin America and the Caribbean
Resumen (es)
Este artículo analiza las características de las evaluaciones rápidas, un tipo particular de evaluación de las intervenciones públicas que se ha difundido en la última década en varios países de América Latina. En la mayoría de casos, estas evaluaciones forman parte de las reformas impulsadas por los entes rectores del presupuesto nacional y están encaminadas a mejorar la eficacia y eficiencia del sector público. El artículo examina el proceso de gestión de las evaluaciones rápidas -que comprende la selección de las intervenciones que se examinarán, la ejecución de las evaluaciones, y el uso de los resultados- en Chile, Colombia, México, Paraguay, Perú y Uruguay. Finalmente, ofrece recomendaciones para mejorar la efectividad de estos instrumentos.
Resumen (en)
This paper analyzes the characteristics of rapid evaluations, a particular type of evaluation of public interventions that has become widespread in the last decade in several Latin American countries. In most cases, these evaluations are part of the reforms promoted by the national budget governing bodies and aimed at improving the effectiveness and efficiency of the public sector. The article examines the management process of rapid assessments -which includes the selection of interventions to be examined, the execution of the assessments, and the use of the results- in Chile, Colombia, Mexico, Paraguay, Peru, and Uruguay. Finally, it offers recommendations to improve the effectiveness of these tools.
Referencias
Allen, Richard y Tomassi, Daniel (eds.) (2001), Managing Public Expenditure. A Reference Book for Transition Countries, Paris, OECD. DOI: https://doi.org/10.1787/9789264192607-en
Andrews, Matt; Pritchett, Lant; y Woolcock, Michael (2017), Building State Capability: Evidence, Analysis, Action, Oxford, Oxford University Press. DOI: https://doi.org/10.1093/acprof:oso/9780198747482.001.0001
Anker, M.; Guidotti, R. J.; Orzeszyna, S.; Sapirie, S. A.; y Thuriaux, M. C. (1993), “Rapid Evaluation Methods (REM) of Health Services Performance: Methodological Observations”, en Bulletin of the World Health Organization, Vol. 71 Nº 1, pp. 15-21.
Arancibia, Emilia (2018), “Evaluación de programas e instituciones públicas de la dirección de presupuestos en el Ministerio de Educación”, Santiago, Ministerio de Educación.
Arana Araya, Ignacio (2013), “Informal Institutions and Horizontal Accountability: Protocols in the Chilean Budgetary Process”, en Latin American Politics and Society, Vol. 55 Nº 4, pp. 74-94. DOI: https://doi.org/10.1111/j.1548-2456.2013.00215.x
Baanante, Miguel Jaramillo y Gracia, Orlando (2015), “Evaluación del proceso de evaluación de las intervenciones públicas a través del instrumento EDEP en el marco del Presupuesto por Resultados”, Lima, Ministerio de Economía y Finanzas; Centro Regional para el Aprendizaje en Evaluación y Resultados para América Latina y el Caribe; Secretaría de Estado para Asuntos Económicos de Suiza; Agencia Alemana de Cooperación Internacional.
Backhaus, Annette; Bamberger, Michael; y Gómez, Ricardo (2019), “Evaluación externa: Consejo Nacional de Evaluación de la Política de Desarrollo Social (CONEVAL), México”, México, Agencia Alemana de Cooperación Internacional, CONEVAL.
Banco Mundial (2005), “Chile: estudio de evaluación de impacto del Programa de Evaluación de Programas; resumen ejecutivo”, Washington, Banco Mundial. Unidad de Reducción de la Pobreza y Gestión Económica en América Latina y el Caribe (Informe Nº 34589-CL. Volumen I: Informe principal).
Bellolio, Álvaro; De Los Ríos, Boris; Irarrázaval, Ignacio; Larraín, Luis; Marshall, Jorge; Morales, Juan José; Sierpe, Emilio; y Véliz, Valeska (2012), “Agencia de Evaluación Pública: propuesta de diseño institucional”, Santiago, s.e.
CEPAL (2018), Panorama de la gestión pública en América Latina y el Caribe. Un gobierno abierto centrado en el ciudadano, Santiago, Naciones Unidas; CEPAL; ILPES.
CONEVAL (2011), “Mecanismo para el seguimiento a los aspectos susceptibles de mejora derivados de informes y evaluaciones a los programas presupuestarios de la Administración Pública Federal”, México, Consejo Nacional de Evaluación de la Política de Desarrollo Social.
CONEVAL (2015), “La política de evaluación en México: 10 años del CONEVAL”, México, Consejo Nacional de Evaluación de la Política de Desarrollo Social.
CONEVAL (2017) “Informe de seguimiento a los aspectos susceptibles de mejora de programas y acciones federales de desarrollo social 2016-2017: balance anual sobre el uso de las evaluaciones”, México, Consejo Nacional de Evaluación de la Política de Desarrollo Social.
CONEVAL (2018), “Informe de seguimiento a los aspectos susceptibles de mejora de los programas y acciones federales de desarrollo social 2017-2018: balance anual sobre el uso de las evaluaciones”, México, Consejo Nacional de Evaluación de la Política de Desarrollo Social.
CONEVAL, SHCP Y SFP (2007), “Lineamientos generales para la evaluación de los programas federales de la Administración Pública Federal”, México, Consejo Nacional de Evaluación de la Política de Desarrollo Social; Secretaría de Hacienda y Crédito Público; Secretaría de la Función Pública.
CONPES y DNP (2004), “Renovación de la administración pública: gestión por resultados y reforma del Sistema Nacional de Evaluación”, Bogotá, Consejo Nacional de Política Económica y Social; Departamento Nacional de Planeación (Documento CONPES; N° 3294).
Darville, Paula; Díaz, Rodrigo; y Leiva, Juan P. (2017), “Cobertura evaluación de programas e instituciones públicas”, Santiago, Ministerio de Hacienda. Dirección de Presupuestos.
DIPRES (s.f), “Pauta para elaboración de informe final de evaluación”, Santiago, Ministerio de Hacienda. Dirección de Presupuestos. División de Control de Gestión.
DIPRES (2007), “Notas técnicas”, Santiago, Ministerio de Hacienda. Dirección de Presupuestos.
DIPRES (2015), “Evaluación ex-post: conceptos y metodologías”, Santiago, Ministerio de Hacienda. Dirección de Presupuestos. División de Control de Gestión.
DIPRES (2016), “Evaluación focalizada de ámbito EFA”, Santiago, Ministerio de Hacienda. Dirección de Presupuestos.
DIPRES (2018), “Informe de seguimiento del cumplimiento de compromisos 2018”, Santiago, Ministerio de Hacienda. Dirección de Presupuestos.
DNP (2010), “15 años del Sistema de Seguimiento y Evaluación en Colombia - Sinergia: una mirada desde las evaluaciones de política pública más relevantes”, Bogotá, Departamento Nacional de Planeación (Serie 1: Evolución de Sinergia y Evaluaciones en Administración del Estado).
Dussauge Laguna, Mauricio (2011), “Chile’s M&E System, 1994-2010”, en Building Better Policies. The Nuts and Bolts of Monitoring and Evaluation Systems, Gladys López, Phillipp Krause and Keith Mackay (eds.), Washington, World Bank.
Feinstein, Osvaldo (2016), “Rapid Evaluations”, Washington, World Bank.
García López, Roberto y García Moreno, Mauricio (2010), La gestión para resultados en el desarrollo: avances y desafíos en América Latina y el Caribe, Washington, BID.
García Moreno, Mauricio y Feinstein, Osvaldo (2015), “Seguimiento y evaluación”, en Construyendo gobiernos efectivos: logros y retos de la gestión pública para resultados en América Latina y el Caribe, Jorge Kaufmann, Mario Sanginés y Mauricio García Moreno (eds.), Washington, BID.
García Moreno, Mauricio; Kaufmann, Jorge; y Sanginés, Mario (eds.) (2015), Construyendo gobiernos efectivos: logros y retos de la gestión pública para resultados en América Latina y el Caribe, Washington, BID.
Gorgens, Marelize y Zall Kusek, Jody (2010), Making Monitoring and Evaluation Systems Work: a Capacity Development Tool Kit, Washington, World Bank. DOI: https://doi.org/10.1596/978-0-8213-8186-1
Hargreaves, Margaret B. (2014), “Rapid Evaluation Approaches for Complex Initiatives; White Paper”, Cambridge, Mathematica Policy Research.
Mackay, Keith (2007), Cómo crear sistemas de SyE que contribuyan a un buen gobierno, Washington, Banco Mundial.
Maldonado, Claudia y Guillermo Cejudo (eds.) (2011), De las recomendaciones a las acciones: la experiencia del Premio 2011 Programas Federales Comprometidos con el Proceso de Evaluación, México, Centro Regional para el Aprendizaje en Evaluación y Resultados para América Latina y el Caribe; Centro de Investigación y Docencia Económicas.
McNall, Miles y Foster-Fishman, Pennie G. (2007), “Methods of Rapid Evaluation, Assessment, and Appraisal”, en American Journal of Evaluation, Vol. 28 Nº 2, pp. 151-168. DOI: https://doi.org/10.1177/1098214007300895
MEF (2008), “Directiva para las evaluaciones independientes en el sistema nacional de presupuesto público en el marco del presupuesto por resultados (Directiva No 009-2008-EF/76.01 modificada por la Resolución Directoral No 023-2012-EF/50.01)”, Lima, Ministerio de Economía y Finanzas.
MEF (2017), “Informe de seguimiento del cumplimiento de compromisos de las Evaluaciones de Diseño y Ejecución Presupuestal (EDEP) al 31 de diciembre de 2017”, Lima, Ministerio de Economía y Finanzas. Dirección General de Presupuesto Público.
MEF (2018), “Gestión de finanzas públicas y presupuesto por resultados. Concept Note sobre asistencia técnica requerida para implementar las recomendaciones planteadas por la OECD Public Governance Review”, Lima, Ministerio de Economía y Finanzas.
MIDEPLAN (2012), “Manual gerencial para el diseño y ejecución de evaluaciones estratégicas de gobierno”, San José, Ministerio de Planificación Nacional y Política Económica. Área de Evaluación y Seguimiento.
MIDEPLAN (2017), “Manual de evaluación para intervenciones públicas”, San José, Ministerio de Planificación Nacional y Política Económica. Área de Evaluación y Seguimiento.
Ministerio de Hacienda (2003), “Decreto 1.177 del 17 de diciembre. Reglamento para el funcionamiento del sistema de evaluación de programas establecido en el Artículo 52 del Decreto Ley No 1.263 de 1975, Orgánico de Administración Financiera del Estado”, Santiago, Ministerio de Hacienda. Dirección de Presupuestos.
Morra Imas, Linda G. y Rist, Ray (2009), The Road to Results: Designing and Conducting Effective Development Evaluations, Washington, World Bank. DOI: https://doi.org/10.1596/978-0-8213-7891-5
Moynihan, Donald (2008), The Dynamics of Performance Management: Constructing Information and Reform, Washington, Georgetown University Press. 12. ed. DOI: https://doi.org/10.1353/book13015
Moynihan, Donald (2013), “Advancing the Empirical Study of Performance Management: What We Learned from the Program Assessment Rating Tool”, en American Review of Public Administration, Vol. 43 N° 5, pp. 499-517. DOI: https://doi.org/10.1177/0275074013487023
Moynihan, Donald y Beazley, Ivor (2016), Toward Next-Generation Performance Budgeting: Lessons from the Experiences of Seven Reforming Countries, Washington, World Bank. DOI: https://doi.org/10.1596/978-1-4648-0954-5
Olavarría Gambi, Mauricio (2012), “La evaluación de programas en Chile: análisis de una muestra de programas públicos evaluados”, en Revista del CLAD Reforma y Democracia, N° 54, octubre, pp. 143-178.
Olavarría Gambi, Mauricio y Figueroa Huencho, Verónica (2010), Una agencia de evaluación de políticas públicas para Chile: lecciones de la historia y de la experiencia internacional, Santiago, Editorial Universitaria.
Pérez Yarahuán, Gabriela (2015), “La influencia de la evaluación externa en los programas gubernamentales para la educación básica, 2002-2012”, en Revista Mexicana de Investigación Educativa, Vol. 20 N° 66, pp. 685-710.
Pérez Yarahuán, Gabriela y Maldonado, Claudia (eds.) (2015), Panorama de los sistemas nacionales de monitoreo y evaluación en América Latina, México, Centro Regional para el Aprendizaje en Evaluación y Resultados para América Latina y el Caribe; Centro de Investigaciones y Docencia Económicas.
Rist, Ray C.; Boily, Marie-Helene; y Martin, Frédéric (eds.) (2011), Influencing Change: Building Evaluation Capacity to Strengthen Governance, Washington, World Bank. DOI: https://doi.org/10.1596/978-0-8213-8403-9
Robinson, Marc (2014), “Connecting Evaluation and Budgeting”, Washington, World Bank. Independent Evaluation Group (ECD Working Paper Series; N° 30).
Schick, Allen (2014), “The Metamorphoses of Performance Budgeting”, en OECD Journal on Budgeting, Vol. 2013 N° 2, pp. 49-79. DOI: https://doi.org/10.1787/budget-13-5jz2jw9szgs8
Van Dooren, Wouter; Bouckaert, Geert; y Halligan, John (2010), Performance Management in the Public Sector, Abingdon, Taylor and Francis. DOI: https://doi.org/10.4324/9780203030806
Weiss, Carol H. (1998), Evaluation: Methods for Studying Programs and Policies, Upper Saddle River, Prentice Hall. 2. ed.
Cómo citar
Licencia
Derechos de autor 2021 Mauricio García Moreno
Esta obra está bajo una licencia internacional Creative Commons Atribución-NoComercial 4.0.
Los contenidos de la revista se distribuyen bajo la licencia Creative Commons Reconocimiento-NoComercial 4.0 Internacional (CC BY-NC-4.0), que permite a los usuarios copiar, usar, difundir, transmitir y exponer públicamente los contenidos, siempre y cuando se cite la autoría (https://creativecommons.org/licenses/by-nc/4.0).