Correo Electrónico
DNINFOA - SIA
Bibliotecas
Convocatorias
Identidad U.N.
Publicado
¿Medimos lo que es valioso o valoramos lo que es medible? Comparación interorganizacional del uso de evaluaciones en una reserva de la biósfera
Do we Measure What is Valuable or Value What is Measurable? Interorganizational Comparison of Evaluation Use in a Biosphere Reserve
DOI:
https://doi.org/10.15446/ga.v23n1.79714Palabras clave:
Aprendizaje organizacional, cultura organizacional, rendición de cuentas, desarrollo de capacidades en evaluación (es)Organizational learning, organizational culture, accountability, evaluation capacity building. (en)
Descargas
La investigación compara el grado en que cuatro organizaciones usan evaluaciones para identificar la obtención de resultados y mejorar su práctica. Las organizaciones estudiadas (una organización de la sociedad civil (OSC), una dependencia federal, una universidad pública y una administración municipal) llevan a cabo proyectos de manejo de recursos naturales en una reserva de la biósfera terrestre de México. En el marco de un estudio de casos, se combinó el análisis de documentos institucionales con entrevistas semi-estructuradas para acceder a la información. La OSC tiene el sistema de evaluación más adecuado para identificar el cumplimiento de objetivos de conservación y desarrollo. En contraste, la administración municipal carece por completo de procedimientos evaluativos.
The research compares the degree to which four organizations use evaluations to identify outcomes and to improve their practice. The studied organizations (a nonprofit organization (NGO), a federal agency, a local government and a public university) implement natural resource management projects in a terrestrial biosphere reserve of Mexico. Framed in a case study, an analysis of institutional documents was combined with semi-structured interviews to gain access to the information. The NGO has the most appropriate evaluation system to identify compliance with conservation and development objectives. In contrast, the local government completely lacks evaluative procedures.
Referencias
Alkin, M., 1985. Organising for evaluation use, a handbook for administrators. UCLA, Los Angeles, CA.
Alonso, G., 2014. Conservation science policies versus scientific practice: evidence from a Mexican biosphere reserve. Hum. Ecol. Rev. 20, 3-29. DOI: 10.22459/HER.20.02.2014.01
Álvarez, S., Douthwaite, B., Graham T., Mackay, R., Cordoba, D., Tehelen, K., 2010. Participatory impact pathways analysis: a practical method for project planning and evaluation. Dev. Pract. 20, 946-958. DOI: 10.1080/09614524.2010.513723
Argyris, C., Schön, D., 1978. Organizational learning: a theory of action perspective. Addison-Wesley, Reading, MA.
Baird, T., 2014. Conservation and unscripted development: proximity to park associated with development and financial diversity. Ecol. Soc. 19(1), 4. DOI: 10.5751/ES-06184-190104
Birnbaum, R., 2001. Management fads in higher education: where they come from, what they do, why they fail. Jossey-Bass, San Francisco, CA.
Bovens, M., Schillemans T., Hart, P., 2008. Does public accountability work? An assessment tool. Public Adm. 86, 225-242. DOI: 10.1111/j.1467-9299.2008.00716.x
Cardozo, M. (Coord.), 2015. Institucionalización de procesos de evaluación. Calidad y utilización de sus resultados. Universidad Autónoma Metropolitana, México, DF.
Carranza, T., Manica, A., Kapos, V., Balmford, A., 2014. Mismatches between conservation outcomes and management evaluation in protected areas: A case study in the Brazilian Cerrado. Biol. Conserv. 173, 10-16. DOI: 10.1016/j.biocon.2014.03.004
Cejudo, G., Maldonado C. (Eds.), 2011. De las recomendaciones a las acciones: La experiencia del premio 2011 Programas Federales Comprometidos con el Proceso de Evaluación. Centro de Investigación y Docencia Económicas, Toluca, México.
Chelimsky, E., 1997. The coming transformation in evaluation. En: Chelimsky, E., Shadish, W. (Eds.), Evaluation for the 21st Century. A Handbook. SAGE Publications, Londres. pp. 1-26. DOI: 10.4135/9781483348896.n1
Climate, Community and Biodiversity Alliance (CCBA), 2013. Estándares de clima, comunidad y biodiversidad. CCBA, Arlington. Disponible en: http://verra.org/wp-content/uploads/2016/05/CCB_Standards_Third_Edition_December_2013_Spanish.pdf; consultado: agosto de 2017.
Craigie, I., Barnes, M., Geldmann, J., Woodley, S., 2015. International funding agencies: potential leaders of impact evaluation in protected areas? Philos. Trans. R. Soc. B, 370, 20140283. DOI: 10.1098/rstb.2014.0283
Comisión Nacional de Áreas Naturales Protegidas (CONANP), 2014. Manual de organización general. SEMARNAT, México, DF.
Consejo Nacional de Evaluación de la Política de Desarrollo Social (CONEVAL), 2016. Diagnóstico de elementos de monitoreo y evaluación en municipios. CONEVAL, México, DF.
Cousins, B., Goh, S., Elliott, C., Aubry, T., Gilbert, N., 2014. Government and voluntary sector differences in organizational capacity to do and use evaluation. Eval. Program Plan. 44, 1-13. DOI: 10.1016/j.evalprogplan.2013.12.001
Cousins, B., Hay, K., Chouinard, J., 2015. The third perspective. Uniting accountability and learning within an evaluation framework that takes a moral-political stance. En Christie, C., Vo, A. (eds.), Evaluation use and decision making in society. A tribute to Marvin Alkin. Information Age Publishing, Charlotte, NC. pp. 91-111.
Cupitt, S. (ed.), 2009. A guide to social return on investment. Office of the THIRD SECTOR, Cabinet Office, Londres.
Donaldson, S., Gooler, L., Scriven, M., 2002. Strategies for managing evaluation anxiety: toward a psychology of program evaluation. Am. J. Eval. 23, 261-273. DOI: 10.1177/109821400202300303
Ebrahim, A., 2005. Accountability myopia: Losing sight of organizational learning. Nonprofit Volunt. Sect. Q. 34, 56-87. DOI: 10.1177/0899764004269430
Engineers Without Borders (EWB), 2017. 2017 failure report. EWB. Disponible en: https://www.ewb.ca/wp-content/uploads/2018/08/EWB_FAILURE-REPORT_EN_03-08-2018-pages.pdf; consultado: diciembre de 2018.
Eyben, R., 2015. Uncovering the politics of evidence and results. En: Eyben, R., Guijt, I., Roche, C., Shutt, C. (Eds.). The politics of evidence and results in international development: Playing the game to change the rules? Practical Action Publishing, Edición Kindle, Rugby, UK. DOI: 10.3362/9781780448855
Ferraro, P., Pressey, R., 2015. Measuring the difference made by conservation initiatives: protected areas and their environmental and social impacts. Phil. Trans. R. Soc. B, 370, 20140270. DOI: 10.1098/rstb.2014.0270
Galaz, J., Gil, M., 2013. The impact of merit-pay systems on the work and attitudes of Mexican academics. High. Educ. 66, 357-374. DOI: 10.1007/s10734-013-9610-3
Gil, M., 2014. Los nuevos escenarios de la educación en México y el papel de las revistas científicas especializadas. Perf. Educ. 36, 196-203. DOI: 10.1016/S0185-2698(14)70617-8
Gil, M., Contreras L., 2017. El sistema nacional de investigadores: ¿espejo y modelo? Rev. Educ. Sup. 46(184), 1-19. DOI: 10.1016/j.resu.2017.12.004
González, A., Cerdán, A., 2008. Marco teórico y analítico de la investigación. En: González, A. (Coord.), ¿Gobernar por resultados?, Gestión social y cooperación. GESOC, México, DF.
Guerra, V., Ochoa, S., 2008. Evaluación del programa de manejo de la Reserva de la Biosfera Pantanos de Centla en Tabasco, México. Univ. Cienc. 24(2), 135-146.
Guijt, I., 2008. Seeking surprise: Rethinking monitoring for collective learning in rural resource management. Tesis de doctorado, Universidad Wageningen, Wageningen, Holanda.
Hockings, M., Leverington, F., Cook, C., 2015. Protected area management effectiveness. En: Worboys, G., Lockwood, M., Kothari, A., Feary, S., Pulsford, I. (Eds), Protected area governance and management. ANU Press, Canberra. pp. 889-928.
Johnson, K., Greenseid, L., Toal, S., King, J., Lawrenz, F., Volkov, B., 2009. Research on evaluation use: a review of the empirical literature from 1986 to 2005. Am. J. Eval. 30, 377-410. DOI: 10.1177/1098214009341660
Kapos, V., Balmford, A., Aveling, R., Bubb, P., Carey, P., Entwistle, A., Hopkins, J., Mulliken, T., Safford, R., Stattersfield, A., Walpole, M., Manica, A., 2009. Outcomes, not implementation, predict conservation success. Oryx 43, 336-342. DOI: 10.1017/S0030605309990275
Lennie, J., Tacchi, J., Wilmore, M., Koirala, B., 2015. A holistic, learning-centred approach to building evaluation capacity in development organizations. Evaluation 21, 325-343. DOI: 10.1177/1356389015590219
Leviton, L., Hughes, E., 1981. Research on the utilization of evaluations: a review and synthesis. Eval. Rev. 5, 525-548. DOI: 10.1177/0193841X8100500405
Margoluis, R., Stem, C., Swaminathan, V., Brown, M., Johnson, A., Placci, G., Salafsky, N., Tilders, I., 2013. Results chains: a tool for conservation action design, management, and evaluation. Ecol. Soc. 18, 22. DOI: 10.5751/ES-05610-180322
Mayne, J., 2006. Studies are not enough: The necessary transformation of evaluation. Can. J. Program Eval. 21, 93-120.
McKinnon, M., Mascia, M., Yang, W., Turner, W., Bonham, C., 2015. Impact evaluation to communicate and improve conservation non-governmental organization performance: the case of Conservation International. Phil. Trans. R. Soc. B, 370, 20140282. DOI: 10.1098/rstb.2014.0282
Mosse, D., 2004. Is good policy unimplementable? Reflections on the ethnography of aid policy and practice. Dev. Change 35, 639-667. DOI: 10.1111/j.0012-155X.2004.00374.x
Netherlands Organization for Scientific Research (NOW), s.f. Impact and uptake of research. Disponible en: https://www.nwo.nl/en/documents/wotro/impact-and-research-uptake; consultado: noviembre de 2017.
Okail, N., 2009. Dancing with the experts an activist research for legitimacy in Egypt's aid relations. Tesis de doctorado, Universidad de Sussex, Brighton, Inglaterra.
Organización de las Naciones Unidas para la Educación, la Ciencia y la Cultura (UNESCO), 2013. The world network of biosphere reserves. Ecological Sciences for Sustainable Development. Disponible en: http://www.unesco.org/new/en/natural-sciences/environment/ecological-sciences/man-and-biosphere-programme; consultado: junio de 2016.
Organización Latinoamericana y del Caribe de Entidades Fiscalizadoras Superiores (OLCEFS), 2015. Áreas protegidas América Latina. Auditoría coordinada. OLCEFS; Comisión Técnica de Medio Ambiente, Tribunal de Cuentas de la Unión Brasilia, Brasilia, DF.
Orta, M., Cardozo, M., Méndez, H., Arredondo, C., Espejel, I., 2013. Análisis del sistema de evaluación de un programa ambiental de la política mexicana: El Proders y su transformación al Procodes. Investig. Ambient. Cienc. Política pública 5(1), 44-61.
Pomeroy, R., Parks, J., Watson, L., 2004. How is your MPA doing?: a guidebook of natural and social indicators for evaluating marine protected area management effectiveness. IUCN, Gland, Suiza; Cambridge, UK. DOI: 10.2305/IUCN.CH.2004.PAPS.1.en
Preskill, H., Boyle, S., 2008. A multidisciplinary model of evaluation capacity building. Am. J. Eval. 29, 443-459. DOI: 10.1177/1098214008324182
Pressey, R., Visconti, P., Ferraro, P., 2015. Making parks make a difference: poor alignment of policy, planning and management with protected-area impact, and ways forward. Phil. Trans. R. Soc. B 370, 20140280. DOI: 10.1098/rstb.2014.0280
Pressey, R., Weeks, R., Gurney, G., 2017. From displacement activities to evidence-informed decisions in conservation. Biol. Conserv. 212, 337-348. DOI: 10.1016/j.biocon.2017.06.009
Ramos, D., Álvarez, M., Morales, M., 2018. Sustentabilidad y patrimonio biocultural en la Reserva de la biosfera El Ocote. Trace 74, 9-37. DOI: 10.22134/trace.74.2018.165
Richards, M., 2012. La evaluación participativa del impacto social para proyectos y programas de recursos naturales, Forest Trends (Julio), 1-8.
Salafsky, N., Margoluis R., Redford K., 2001. Adaptive management: a tool for conservation practitioners. Biodiversity Support Program, Washington, DC.
Salzer, D., Salafsky, N., 2006. Allocating resources between taking action, assessing status, and measuring effectiveness of conservation actions. Nat. Areas J. 26, 310-316. DOI: 10.3375/0885-8608(2006)26[310:ARBTAA]2.0.CO;2
Serrat, O., 2010. Knowledge solutions. Asian Development Bank, Washington, DC.
Sotelo, E., Rosas, A., Rodríguez, L., 2015. Medio ambiente. En: Cardozo, M. (Coord.), Institucionalización de procesos de evaluación. Calidad y utilización de sus resultados. Universidad Autónoma Metropolitana, México, DF. pp. 143-158.
Stem, C., Margoluis, R., Salafsky, N., Brown, M., 2005. Monitoring and evaluation in conservation: a review of trends and approaches. Conserv. Biol. 19, 295-309. DOI: 10.1111/j.1523-1739.2005.00594.x
Stolton, S., Dudley, N., 2016. METT handbook: A guide to using the Management Effectiveness Tracking Tool (METT). WWF-UK, Woking, UK.
Taut, S., 2007. Studying self-evaluation capacity building in a large international development organization. Am. J. Eval. 28, 45-59. DOI: 10.1177/1098214006296430
Yin, R., 2009. Case study research: design and methods. Sage Publication, Thousand Oaks, CA.
Weiss, C., 1998. Have we learned anything new about the use of evaluation? Am. J. Eval. 19, 21-33. DOI: 10.1016/S1098-2140(99)80178-7
Cómo citar
APA
ACM
ACS
ABNT
Chicago
Harvard
IEEE
MLA
Turabian
Vancouver
Descargar cita
Licencia
Derechos de autor 2020 Gestión y Ambiente
Esta obra está bajo una licencia internacional Creative Commons Atribución-NoComercial-CompartirIgual 4.0.
Los artículos que sean publicados en la revista Gestión y Ambiente, también serán publicados en el sitio web http://www.revistas.unal.edu.co/index.php/gestion/index y en formatos electrónicos como PDF, HTML, XML, entre otros. Además, en diferentes redes sociales de difusión del conocimiento. Gestión y Ambiente adopta directrices de ética por Committee on Publication Ethics (COPE) sobre buenas prácticas de conducta (evitar conductas como plagio, falsificación, autoría ficticia, entre otros), describe conflictos de interés o en competencia, contribuciones de autoría y fuentes de financiación. Todo lo publicado se considerará propiedad de la revista Gestión y Ambiente, pero pueden usarse bajo la licencia Creative Commons “Reconocimiento-No Comercial-Compartir Igual International (BY-NC-SA) 4.0”
