Toolbox ECUSBE

Evaluación y Seguimiento para el Éxito

"La evaluación es parte fundamental del ciclo de la política pública. Nos permite saber si estamos logrando los objetivos que perseguimos a través de las políticas, un proyecto o un programa, y también obtener información para mejorar nuestros esfuerzos y hacer un uso más eficiente de los recursos públicos."
Michelle Montijo, Analista de proyecto GEF/PNUD.

RELACIÓN ENTRE MONITOREO Y EVALUACIÓN

El monitoreo y la evaluación son herramientas complementarias e interdependientes que constituyen los pilares de una gestión eficaz. Aunque comparten objetivos relacionados con la mejora de la efectividad, tienen roles específicos que, al integrarse, maximizan el aprendizaje institucional y optimizan la toma de decisiones.


 

Monitoreo


Es el seguimiento continuo y sistemático de actividades y resultados de un proyecto o programa. Este proceso identifica posibles desviaciones en etapas tempranas, lo que permite realizar ajustes operativos oportunos.


El monitoreo es fundamental para asegurar que las intervenciones se ejecuten conforme a lo planificado, permitiendo minimizar riesgos y optimizar el uso de los recursos disponibles.


Evaluación


Es un proceso sistemático que examina el desempeño, los resultados y los impactos de políticas o proyectos. Su objetivo principal es generar aprendizajes que faciliten la mejora en la implementación, reconocer prácticas exitosas y fundamentar decisiones futuras.


La evaluación garantiza que las acciones se alineen con los objetivos estratégicos, maximizando su efectividad. Además, es una herramienta clave para asegurar el uso transparente y eficiente de los recursos disponibles.


El monitoreo y la evaluación forman un ciclo de mejora continua:


  1. El monitoreo proporciona datos actualizados sobre la implementación de las actividades.
  2. La evaluación analiza estos datos para identificar logros, desafíos y áreas de mejora.

Los resultados de la evaluación deben integrarse en el proceso de monitoreo para retroalimentar el diseño y la adecuación de las políticas. Este enfoque permite una mejora adaptativa, afinando estrategias y acciones para garantizar que los resultados sean más efectivos y alineados con los objetivos planteados. De esta manera, se logra un ciclo continuo de aprendizaje y ajuste, como se ilustra en la siguiente figura.


 

Relación cíclica entre monitoreo y evaluación

 

TIPOS DE EVALUACIÓN: PROCESO, RESULTADOS E IMPACTO

El monitoreo y la evaluación comprenden diferentes enfoques según las etapas del ciclo de las políticas públicas o proyectos. Si bien existen numerosos tipos de evaluación, como la evaluación ex ante (previa a la implementación), evaluación formativa (durante el desarrollo) y evaluación ex post (posterior a la implementación), en este módulo nos centraremos en tres tipos específicos que son cruciales para garantizar el éxito de las políticas subnacionales de biodiversidad: evaluación de proceso, de resultados y de impacto.

 

Evaluación de gestión o proceso


Esta evaluación se enfoca en analizar cómo se están implementando las actividades y estrategias de una política o proyecto. Su objetivo es asegurar que los recursos y esfuerzos estén alineados con lo planeado.


Objetivo principal: identificar desviaciones en la ejecución y proponer ajustes para optimizar la operación.

 

Preguntas clave:


  1. ¿Las actividades se están desarrollando según lo programado?
  2. ¿Se están utilizando los recursos de manera eficiente?

Ejemplo práctico: en una estrategia de conservación de ecosistemas, la evaluación de proceso podría verificar si las campañas de reforestación se están llevando a cabo en las áreas priorizadas y dentro del cronograma establecido.


La semaforización es una herramienta que permite utilizar los colores como indicador de gestión para evaluar el avance en la implementación de las acciones de la ECUSBE dentro del Estado.  Los colores del semáforo que se se utilizan pueden indicar si las acciones ya se están realizando (verde), están en proceso (amarillo) o no se han iniciado (rojo).

Conforme a lo anterior, la CONABIO ha diseñado una matriz que puede ser de utilidad para la aplicación de los gobiernos subnacionales. Descargue aquí.


Evaluación de resultados


Este tipo de evaluación mide los logros concretos en relación con los objetivos inmediatos de una política o proyecto. Se centra en los productos (outputs) obtenidos como resultado de las actividades realizadas.


Objetivo principal: determinar si los objetivos específicos de corto y mediano plazo se están cumpliendo.


Preguntas clave:


  1. ¿Se lograron los objetivos establecidos en el plan?
  2. ¿Qué cambios visibles han ocurrido como resultado directo de las acciones implementadas?

Ejemplo práctico: evaluar el aumento de la cobertura vegetal en hectáreas restauradas después de un programa de reforestación.


Evaluación de impacto


La evaluación de impacto se centra en analizar los efectos a largo plazo de las políticas o proyectos, incluyendo aquellos previstos e imprevistos. Busca determinar si las intervenciones han generado un cambio significativo en los problemas abordados.


Objetivo principal: medir la sostenibilidad y efectividad de los cambios logrados.

 

Preguntas clave:


  1. ¿Qué impactos se han generado en términos ambientales, sociales y económicos?
  2. ¿Los resultados son sostenibles en el tiempo?

Ejemplo práctico: Evaluar si un programa de reforestación ha contribuido al aumento de la diversidad de especies de mariposas o aves, o si ha mejorado la integridad ecológica de la región, reflejando un impacto significativo en la restauración de los ecosistemas locales durante un periodo de cinco años.


Relación entre los tipos de evaluación


Estas tres evaluaciones no son excluyentes, sino complementarias. La evaluación de proceso asegura que las acciones se mantengan en curso; la de resultados verifica la obtención de metas inmediatas en el corto y mediano plazo; y la de impacto se enfoca en el valor agregado, la sostenibilidad en el tiempo y si se logró el propósito de una intervención o un conjunto de intervenciones en el largo plazo. Al combinarlas, se logra una comprensión integral del desempeño de las políticas públicas y proyectos, facilitando la toma de decisiones fundamentadas en evidencia.



CONSTRUCCIÓN DE UN SISTEMA DE INDICADORES PARA EVALUAR LA BIODIVERSIDAD

La construcción de un sistema de indicadores eficiente es esencial para evaluar el impacto de las políticas públicas relacionadas con la biodiversidad. Este sistema debe reflejar una comprensión clara de los objetivos y el propósito final de las intervenciones, los resultados intermedios y los impactos esperados, así como la lógica causal que conecta estos elementos. Esto permite no solo medir el progreso, sino también garantizar que las acciones estén alineadas con los resultados esperados y contribuyan efectivamente a los objetivos planteados.


A continuación, se describen los pasos fundamentales para iniciar este proceso:


Punto de partida: la teoría de cambio


Una herramienta clave para estructurar el sistema de indicadores es la Teoría de Cambio (TdC). Esta técnica organiza las actividades en secuencias lógicas que conectan las intervenciones iniciales con los resultados esperados, hasta alcanzar el propósito final.


 

La TdC permite:


  1. Visualizar los vínculos causales entre los objetivos, las actividades o intervenciones, y los resultados esperados.
  2. Identificar los puntos clave donde deben ubicarse los indicadores.
  3. Establecer una narrativa clara que explique cómo las intervenciones contribuirán al propósito final.

La TdC no solo establece los vínculos causales entre las acciones y los resultados, sino que también articula las hipótesis subyacentes de las intervenciones, lo que facilita la selección de indicadores clave.


Identificación de los indicadores


Con la TdC como guía, se pueden categorizar los indicadores en tres niveles:


  • Indicadores de gestión o proceso: Evalúan el progreso de las actividades específicas.
  • Indicadores de Resultados: Miden los efectos intermedios y finales en el corto y medio plazo.
  • Indicadores de impacto: Miden el alcance del propósito final de la intervención,

Es importante revisar los indicadores existentes a nivel estatal o nacional y reutilizarlos siempre que sea posible. Esto optimiza recursos y facilita la integración con sistemas de información más amplios.


 

Evaluación y selección de indicadores


Los indicadores potenciales deben evaluarse en función de criterios clave para garantizar que sean útiles y relevantes en el contexto de la ECUSBE.


Estos criterios incluyen:


  • Relevancia: relación directa con los objetivos establecidos, considerando cómo contribuyen al cumplimiento de las actividades y los resultados esperados según el plan de acción.
  • Factibilidad: accesibilidad de los datos necesarios y viabilidad técnica para recopilar y monitorear la información.
  • Claridad y monitoreo: facilidad para interpretar los datos y medirlos de manera periódica.
  • Confiabilidad: capacidad del indicador para reflejar de manera consistente y precisa los fenómenos que se busca medir.
  • Sensibilidad: capacidad del indicador para captar cambios relevantes en el tiempo y en los distintos niveles de intervención.

Además de analizar los indicadores a la luz de estos criterios, es fundamental asociarlos con los elementos de la Teoría de Cambio (TdC). Esto permite seleccionar aquellos indicadores que evalúan, de manera específica, en qué medida se están alcanzando los resultados intermedios, los impactos esperados y el cumplimiento de las actividades e intervenciones señaladas en el plan de acción de la ECUSBE. Al hacerlo, se puede establecer claramente en qué momentos deben evaluarse los indicadores, ya sea en el corto, mediano o largo plazo.


Para priorizar y seleccionar los indicadores más adecuados, se puede aplicar una escala de puntos que evalúe su desempeño en cada uno de estos criterios. Este proceso debe involucrar a las áreas responsables de las intervenciones, fomentando un análisis colaborativo que garantice la calidad y relevancia de los indicadores seleccionados. De esta manera, se construye un sistema de indicadores sólido que refleja tanto la lógica causal de la TdC como las prioridades operativas de la ECUSBE.


 

Reducción y priorización


Después de evaluar los indicadores, es fundamental priorizar los que tienen mayor relevancia y capacidad explicativa. El objetivo es mantener un conjunto manejable y poderoso de indicadores para un análisis eficiente y claro.


Herramienta sugerida: una escala de puntos (por ejemplo, de 1 a 5) puede ser utilizada para calificar cada criterio. Esto permite una evaluación comparativa entre diferentes indicadores.


A. Rangos de puntajes para clasificar indicadores


A partir de los puntajes asignados, los indicadores pueden clasificarse en tres categorías:


  • Altamente adecuados: indicadores recomendados para integrar el sistema por su alta calidad y relevancia.
  • Medianamente adecuados: indicadores útiles, pero que requieren ajustes o recursos adicionales para ser implementados.
  • Nada adecuados: indicadores que no cumplen con los criterios mínimos y deben descartarse.

B. Filtro participativo


Para validar los resultados de esta evaluación, se recomienda involucrar a representantes de las áreas responsables de las intervenciones, así como de la generación de datos y el manejo de sistemas de información. Este enfoque colaborativo asegura que los indicadores seleccionados sean relevantes, técnicamente factibles y alineados con las capacidades operativas y tecnológicas disponibles.


Este proceso participativo puede incluir:


    • Revisión técnica conjunta: realizada con expertos y equipos técnicos.
    • Sesión de validación: donde los indicadores seleccionados sean discutidos y ajustados en función del contexto operativo.

C. Selección final de indicadores


El sistema de indicadores debe ser manejable, compuesto por un número limitado pero poderoso de elementos que proporcionen información clave para evaluar el desempeño de las políticas y su alineación con los objetivos establecidos.


Después de la selección final, se recomienda generar fichas metodológicas o técnicas para cada indicador. Estas fichas deben incluir información detallada, como la definición del indicador, su unidad de medida, fuente de datos, frecuencia de recolección, responsables del seguimiento y posibles limitaciones. Contar con estos metadatos asegura la solidez del sistema de indicadores, facilita su implementación y garantiza que sean interpretados y utilizados de manera consistente en todas las etapas de monitoreo y evaluación.


Estas fichas no solo fortalecen la transparencia y la trazabilidad del sistema, sino que también permiten ajustar y actualizar los indicadores en función de las necesidades futuras, asegurando su relevancia y aplicabilidad a largo plazo.


Los indicadores seleccionados deben:


    • Ser fácilmente monitoreables.
    • Ofrecer una alta capacidad explicativa.
    • Proveer información relevante para la toma de decisiones.

No se trata de cantidad, sino de calidad: un sistema con pocos indicadores robustos es más efectivo que uno con múltiples indicadores de baja relevancia.



SISTEMAS COLABORATIVOS PARA MONITOREO SUBNACIONAL

El desarrollo de un sistema de monitoreo colaborativo es esencial para abordar de manera integral y efectiva los desafíos de conservación de la biodiversidad a nivel subnacional. Este enfoque fomenta la integración de datos provenientes de múltiples fuentes, como agencias gubernamentales, organizaciones de la sociedad civil, centros de investigación y comunidades locales.


 

Principios clave para un sistema colaborativo


Un sistema de monitoreo colaborativo efectivo debe regirse por principios que garanticen su funcionalidad, inclusión y capacidad de adaptación.


  • Cooperación y coordinación

Es crucial mantener una comunicación fluida entre las instituciones involucradas para evitar duplicidades y mejorar la cohesión en el uso de datos.


Ejemplo práctico: reuniones interinstitucionales periódicas para alinear metodologías de recolección de datos.

 

  • Transparencia y acceso a la información

Los datos deben ser accesibles para los actores relevantes, promoviendo la rendición de cuentas y facilitando la toma de decisiones basada en evidencia.


Ejemplo práctico: una plataforma digital que centralice los datos de monitoreo y permita su consulta abierta.

 

  • Participación inclusiva

Incorporar a comunidades locales, ONG, cuerpo académico y sectores específicos como mujeres, juventudes, pueblos indígenas y comunidades afrodescendientes es esencial para captar una mayor diversidad de perspectivas y datos. Este enfoque asegura que el sistema refleje las realidades y necesidades de todos los actores involucrados.


Ejemplo práctico: talleres comunitarios que integren la participación de mujeres y juventudes en el diseño y monitoreo de indicadores relacionados con biodiversidad.

 

  • Flexibilidad y adaptabilidad

El sistema debe ser dinámico, permitiendo ajustes conforme cambien las prioridades o las condiciones ambientales.


Ejemplo práctico: actualización de protocolos de monitoreo tras eventos climáticos extremos.

 

  • Enfoque de género e inclusión social

Construir sistemas de indicadores que reflejen el impacto y la participación de mujeres, juventudes, pueblos indígenas y comunidades afrodescendientes permite visibilizar desigualdades, promover la equidad y fomentar una gestión más inclusiva de la biodiversidad.


Ejemplo práctico: indicadores que evalúen la participación de mujeres en programas de conservación o los beneficios que reciben comunidades indígenas de proyectos de biodiversidad.

 

Integración de datos de múltiples fuentes


  • Protocolos comunes

Desarrollar metodologías unificadas asegura que los datos sean comparables y compatibles entre sí.


Ejemplo práctico: uso de formatos estándar para reportar datos de biodiversidad.

 

  • Plataformas de datos compartidas:

Una base de datos centralizada mejora el acceso y análisis de la información, facilitando la visualización de tendencias.


Ejemplo práctico: implementación de un dashboard interactivo con indicadores clave.

 

  • Uso de tecnología en tiempo real:

Herramientas como sensores remotos y aplicaciones móviles permiten la recolección de datos actualizados para responder rápidamente a cambios en el entorno.


Ejemplo práctico: sensores para monitorear la calidad del agua en áreas protegidas



EVALUACIÓN DE RESULTADOS Y APRENDIZAJE INSTITUCIONAL

La evaluación de resultados no solo verifica el cumplimiento de metas, sino que también genera un proceso de aprendizaje continuo para mejorar las políticas públicas. Este enfoque permite adaptar estrategias y consolidar prácticas efectivas, fortaleciendo la sostenibilidad a largo plazo.


 

Secuencia de aprendizaje institucional

 


Importancia del aprendizaje institucional


El aprendizaje continuo fomenta políticas más resilientes y adaptativas, optimizando recursos y fortaleciendo el conocimiento institucional.


  • Ejemplo práctico: Una política de restauración que ajusta sus métodos de reforestación tras evaluar la supervivencia de especies plantadas en diferentes condiciones climáticas.


MECANISMOS DE TRANSPARENCIA Y RENDICIÓN DE CUENTAS



La transparencia es fundamental para consolidar la confianza en los esfuerzos de conservación. Diseñar reportes claros y accesibles, acompañados de visualizaciones de datos intuitivas, permite a los ciudadanos y actores clave entender el impacto de las políticas subnacionales.


 

Mecanismos de transparencia

 

El monitoreo y la evaluación son fundamentales para garantizar la efectividad de las políticas de integración de la biodiversidad, como las ECUSBE. Este módulo proporciona herramientas claras para medir avances, optimizar recursos y generar aprendizajes que fortalezcan las políticas subnacionales.


Al adoptar sistemas colaborativos y alinearse con metas globales, como el Marco Mundial de Biodiversidad Kunming-Montreal, los gobiernos subnacionales pueden implementar acciones más eficaces y resilientes. Este enfoque promueve la transparencia, fomenta la mejora continua y asegura un impacto duradero frente a los desafíos de la biodiversidad.


Recursos y sistemas de indicadores relevantes


Para fortalecer la construcción y alineación de sistemas de indicadores en los gobiernos subnacionales, es importante considerar referencias globales y nacionales que pueden ser adoptadas y adaptadas según las necesidades locales y las Teorías de Cambio (TdC). Estos sistemas no solo proporcionan ejemplos prácticos, sino que también facilitan la alineación con las metas internacionales y los compromisos nacionales.


Sistemas de indicadores internacionales


1. Índices de Biodiversidad Urbana (IBU):


Proporcionan indicadores clave para medir el desempeño en biodiversidad de las ciudades, facilitando su integración en políticas locales.


Más información: IBU - Secretaría del CDB.



2. Índices de Naturaleza Urbana de la UICN (INU):


Diseñados para evaluar el desempeño ecológico de las ciudades, estos índices permiten una medición estandarizada del impacto urbano en la naturaleza.


Más información: INU - IUCN Urban Nature Indexes.



3. Marco de Monitoreo del MMB-KM:


Define las metas globales de biodiversidad y los indicadores con los que los países deben reportar avances. Este marco es esencial para que los gobiernos subnacionales visualicen cómo pueden contribuir al cumplimiento de las metas desde sus estados.


Más información: Kunming-Montreal Global Biodiversity Framework Monitoring Framework..



Sistemas de indicadores nacionales


1. Sistema Nacional de Indicadores Ambientales y de Recursos Naturales (SNIARN):


Herramienta nacional que ofrece datos relevantes para evaluar el estado de los recursos naturales en México y su evolución en el tiempo.


Más información: SNIARN - SEMARNAT.



2. Sistema de Indicadores de la Estrategia Nacional sobre Biodiversidad de México (ENBioMex):


Proporciona indicadores clave para monitorear los avances en la implementación de la ENBioMex y sus metas.


Más información: Conabio - ENBioMex.



3. Indicadores de CONABIO:


Conjunto de herramientas para medir aspectos específicos relacionados con la biodiversidad en México, útiles para alinear intervenciones subnacionales con metas nacionales.


Más información: Indicadores - CONABIO.


Agradecemos a la Mtra. Michelle Montijo Arreguín por su valiosa contribución al desarrollo de los contenidos de este módulo, resultado de su dedicación en el trabajo de titulación y su colaboración con el proyecto EAS.



Referencias